JP2022131491A - Preference reflection device for audio equipment and preference reflection method - Google Patents

Abstract

To provide a preference reflection device for audio equipment capable of reflecting output characteristics according to the preferences of each user instead of fixed output characteristics.SOLUTION: A preference reflection device for audio equipment 10 is a device for reflecting user preferences on audio equipment 30. The preference reflection device includes a characteristic storage unit 13 that stores the output characteristics that specify the output level for each frequency in the output sound of the audio equipment 30; a control unit 11 that selects output characteristics stored in the characteristic storage unit 13 based on reaction information that reflects the user's reaction to the output sound; and a characteristic setting part 15 that sets the output characteristics of the output sound referring to the output characteristics selected by the control unit 11 in the characteristic storage unit 13.SELECTED DRAWING: Figure 1

Description

本開示は、音響機器用嗜好性反映装置及び嗜好性反映方法に関する。 The present disclosure relates to a preference reflecting device for audio equipment and a preference reflecting method.

特許文献１は、自動車用ユーザーもてなしシステムを開示している。本システムにおいては、もてなし動作部の動作内容がユーザー生体特性情報の内容に応じて変化し、ひいては、自動車利用に際してのユーザーへサービス（もてなし）効果を、ユーザーの精神状態あるいは体調に応じさらなる適正化を図ることができる。具体的には、機能抽出マトリックスから特定される機能に対する動作制御時の基準参照情報が抽出され、この基準参照情報に別途取得されたユーザー 生体特性情報に反映される体調ないし精神状態を加味して、選択された機能の動作内容の適正化を図ることができる。 US Pat. No. 5,300,001 discloses a user hospitality system for automobiles. In this system, the operation contents of the hospitality operation part change according to the contents of the user's biological characteristic information, and in turn, the service (hospitality) effect to the user when using the car is further optimized according to the user's mental state or physical condition. can be achieved. Specifically, the reference reference information for the operation control for the function specified from the function extraction matrix is extracted, and the physical condition or mental state reflected in the user biological characteristic information separately acquired is added to this reference reference information. , the operation content of the selected function can be optimized.

特許第４５７２８８９号公報Japanese Patent No. 4572889

特許文献１は、自動車用ユーザーもてなしシステムにおいて、ユーザーの状態を検出し、検出結果に基づき車内照明やオーディオ用のコンテンツを変更する機能を開示している。しかしながら、本文献のシステムは、車両に搭乗したユーザー自身の嗜好性、環境等に応じて機器内部のパラメータ設定まで変更可能なものではなく、個別ユーザーに応じた細やかな設定変更を行うものではない。 Patent Literature 1 discloses a function of detecting a user's state and changing interior lighting and audio content based on the detection result in a user hospitality system for automobiles. However, the system of this document cannot change the parameter settings inside the device according to the user's preference, environment, etc., and does not perform detailed setting changes according to individual users. .

本開示は、個別ユーザーの音響についての嗜好性を音響機器の出力特性に反映するための音響機器用嗜好性反映装置及び嗜好性反映方法を提供する。 The present disclosure provides an audio equipment preference reflecting device and a preference reflecting method for reflecting audio preferences of individual users in the output characteristics of the audio equipment.

本開示の音響機器用嗜好性反映装置は、音響機器に対し、ユーザーの嗜好性を反映するための音響機器用嗜好性反映装置であって、前記音響機器の出力音における周波数毎の出力レベルを規定する出力特性を記憶する特性記憶部と、出力音に対するユーザーの反応を反映した反応情報に基づき、前記特性記憶部に記憶された出力特性を選択する制御部と、前記特性記憶部において前記制御部が選択した出力特性を参照し、出力音の出力特性を設定する特性設定部と、を備える。 A preference reflecting device for audio equipment according to the present disclosure is a preference reflecting device for audio equipment for reflecting a user's preference for an audio equipment, wherein the output level for each frequency of the output sound of the audio equipment is a characteristic storage unit that stores defined output characteristics; a control unit that selects the output characteristics stored in the characteristic storage unit based on reaction information that reflects a user's reaction to the output sound; a characteristic setting unit that refers to the output characteristic selected by the unit and sets the output characteristic of the output sound.

本開示の嗜好性反映方法は、音響機器に対し、ユーザーの嗜好性を反映するための音響機器用嗜好性反映装置が実行する嗜好性反映方法であって、前記音響機器の出力音に対するユーザーの反応を反映した反応情報に基づき、出力音における周波数毎の出力レベルを規定する出力特性を選択し、選択した出力特性を参照し、出力音の出力特性を設定する。 The preference reflecting method of the present disclosure is a preference reflecting method executed by a preference reflecting device for audio equipment for reflecting the user's preference for an audio equipment, wherein the user's response to the output sound of the audio equipment is Based on the reaction information reflecting the reaction, an output characteristic that defines the output level for each frequency of the output sound is selected, and the selected output characteristic is referenced to set the output characteristic of the output sound.

本開示によれば、固定的な出力特性ではなく、個別ユーザー毎の音響についての嗜好性に応じた出力特性を音響機器の出力音に反映することができ、ユーザーの満足度をより上げることができる。 According to the present disclosure, it is possible to reflect in the output sound of the audio device the output characteristics according to the sound preferences of each individual user, instead of the fixed output characteristics, thereby further increasing user satisfaction. can.

図１は、本開示の音響機器用嗜好性反映装置を含む音響システムのブロック図である。FIG. 1 is a block diagram of an audio system including an audio equipment preference reflecting device of the present disclosure. 図２Ａは、従来技術の音響機器における出力特性を示す周波数特性グラフである。FIG. 2A is a frequency characteristic graph showing output characteristics of a conventional audio device. 図２Ｂは、本実施形態の音響機器用嗜好性反映装置における周波数特性グラフである。FIG. 2B is a frequency characteristic graph in the audio device preference reflecting device of this embodiment. 図３は、音響機器用嗜好性反映装置の制御部が有する機能を分類したブロック図である。FIG. 3 is a block diagram classifying the functions of the control section of the preference reflecting apparatus for audio equipment. 図４は、音響機器用嗜好性反映装置が実行する嗜好性反映方法の一例の手順を含むフローチャートである。FIG. 4 is a flowchart including a procedure of an example of a preference reflecting method executed by the preference reflecting apparatus for audio equipment. 図５は、音響機器用嗜好性反映装置が実行する嗜好性反映方法の他の例の手順を含むフローチャートである。FIG. 5 is a flowchart including procedures of another example of the preference reflecting method executed by the preference reflecting apparatus for audio equipment.

（発明者の知見）
ラジオ、カーステレオ等の音響機器は、出荷段階において出力音の特性に関わる音響特性が設定される。このような音響特性の設定は、例えば音質を低下させてでもノイズを低減させる設定を優先すべきか、あるいはその逆が良いか等、様々な試行錯誤を要する。 (Inventor's findings)
Acoustic devices such as radios and car stereos are set with acoustic characteristics related to output sound characteristics at the shipping stage. Setting such acoustic characteristics requires various trials and errors, such as whether priority should be given to setting noise reduction even if the sound quality is reduced, or vice versa.

これまでの設定は、設計担当者の感応評価、予め調査した顧客満足度スコア等の様な不十分な情報からの類推に頼らざるを得ない状況にある。したがって、個別ユーザーの嗜好性や環境に合わせたきめ細かな設定を、音響機器に反映することは十分に実現されていない。 Up to now, we have had to rely on analogies based on insufficient information such as sensitive evaluations by designers and customer satisfaction scores surveyed in advance. Therefore, it has not been sufficiently realized to reflect detailed settings that match individual user's preferences and environment in audio equipment.

以下、図面を用いて、本開示に係る音響機器用嗜好性反映装置及び嗜好性反映方法を詳細に説明する。図１は、実施形態の音響機器用嗜好性反映装置１０を含む音響システム１００のブロック図を示す。音響システム１００は、ユーザーの嗜好性を反映した音を出力可能なシステムであり、音響機器用嗜好性反映装置１０と、マイク２１と、カメラ２３と、音響機器３０とを含む。音響システム１００は、例えば車両のような乗物に搭載され、乗物に搭乗したユーザーの嗜好に合致した音を出力し得るが、音響システムの設置場所は特に限定されない。 Hereinafter, the preference reflection device for audio equipment and the preference reflection method according to the present disclosure will be described in detail with reference to the drawings. FIG. 1 shows a block diagram of an audio system 100 including an audio equipment preference reflecting device 10 of an embodiment. The audio system 100 is a system capable of outputting sounds reflecting the user's preferences, and includes an audio equipment preference reflecting device 10 , a microphone 21 , a camera 23 , and an audio equipment 30 . The sound system 100 is mounted on a vehicle, for example, and can output sounds that match the tastes of the user on board the vehicle, but the installation location of the sound system is not particularly limited.

音響機器用嗜好性反映装置１０は、音響機器３０に対し、ユーザーの嗜好性を反映するための装置であって、制御部１１と、特性記憶部１３と、特性設定部１５と、メッセージ出力部１７と、入力部１９と、を備える。制御部１１はプロセッサの如き演算装置により構成され、各種処理を行い音響機器用嗜好性反映装置１０の動作を司る役割を果たす。特性記憶部１３はメモリの如き記憶装置により構成される。特性記憶部１３は、例えば、音響機器３０の出力音のパターンに相当する出力特性を記憶している。音響機器３０が後述するラジオ受信部３５を備える場合、特性記憶部１３は、ラジオの受信設定に相当する特性をも記憶している。ラジオの受信設定とは、例えば、オーディオのハイカット設定や、帯域幅制御等に関する設定である。特性設定部１５は種々のハードウェア回路等により構成される。特性設定部１５は、例えばＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）回路によって構成される。特性設定部１５は、音響機器３０の出力音を出力特性に従って設定する。ここで、音響機器３０が後述するラジオ受信部３５を備える場合、「音響機器３０の出力音を出力特性に従って設定する」とは、ラジオ受信部３５の受信設定を変更することを含む。 The audio device preference reflecting device 10 is a device for reflecting the user's preference in the audio device 30, and includes a control unit 11, a property storage unit 13, a property setting unit 15, and a message output unit. 17 and an input unit 19 . The control unit 11 is composed of an arithmetic device such as a processor, and performs various processes to control the operation of the audio equipment preference reflecting apparatus 10 . The characteristic storage unit 13 is configured by a storage device such as a memory. The characteristic storage unit 13 stores, for example, the output characteristic corresponding to the pattern of the output sound of the acoustic device 30 . When the audio equipment 30 includes a radio receiver 35, which will be described later, the characteristic storage unit 13 also stores characteristics corresponding to radio reception settings. Radio reception settings are, for example, audio high-cut settings, settings related to bandwidth control, and the like. The characteristic setting unit 15 is composed of various hardware circuits and the like. The characteristic setting unit 15 is configured by, for example, a DSP (Digital Signal Processor) circuit. The characteristic setting unit 15 sets the output sound of the acoustic device 30 according to the output characteristic. Here, when the audio device 30 includes a radio receiver 35 to be described later, “setting the output sound of the audio device 30 according to the output characteristics” includes changing the reception setting of the radio receiver 35 .

メッセージ出力部１７はスピーカ等の音声出力装置や液晶ディスプレイ等の表示装置により構成され、音響機器３０の出力音に対する評価を問うメッセージを送出する。入力部１９はタッチパネル、スイッチ等の入力装置や、マイク等の音声入力装置により構成され、メッセージ出力部１７が出力したメッセージに対し、ユーザーが入力した回答を受け付ける。 The message output unit 17 is composed of an audio output device such as a speaker and a display device such as a liquid crystal display, and sends out a message inquiring about the evaluation of the output sound of the audio equipment 30 . The input unit 19 is composed of an input device such as a touch panel and a switch, and a voice input device such as a microphone, and receives a reply input by the user to the message output by the message output unit 17 .

マイク２１は出力音に対するユーザーの音声を検出し、カメラ２３は出力音に対するユーザーの反応を反映した表情、動作、態度等を撮像する。マイク２１が検出するユーザーの音声及びカメラ２３が撮像するユーザーの表情、動作、態度等は、出力音に対するユーザーの反応である反応情報である。更にマイク２１は、音響システム１００の周辺環境において、後述する音響機器３０の出力部３３を構成するスピーカから拾うラジオのノイズ、いわゆる聴感ノイズをも検出する。なお、音響システム１００の周辺環境は、音響システム１００が車両に搭載された場合には車内空間に相当する。聴感ノイズは、例えば２０Ｈｚ～２０ｋＨｚなどの音声帯域においていろいろな周波数成分を含んでいるノイズである。マイク２１、カメラ２３は、所定のインターフェースを介して音響機器用嗜好性反映装置１０に接続されているが、音響機器用嗜好性反映装置１０がマイク２１、カメラ２３を内蔵していてもよい。 The microphone 21 detects the user's voice in response to the output sound, and the camera 23 captures the facial expressions, actions, attitudes, etc., reflecting the user's reaction to the output sound. The user's voice detected by the microphone 21 and the user's facial expression, motion, attitude, etc. captured by the camera 23 are reaction information that is the user's reaction to the output sound. Furthermore, the microphone 21 also detects radio noise, so-called auditory noise, picked up from a speaker constituting an output unit 33 of the audio equipment 30 described later in the surrounding environment of the audio system 100 . The surrounding environment of the sound system 100 corresponds to the interior space of the vehicle when the sound system 100 is mounted on the vehicle. Auditory noise is noise containing various frequency components in a voice band such as 20 Hz to 20 kHz. The microphone 21 and the camera 23 are connected to the audio equipment preference reflecting device 10 via a predetermined interface, but the audio equipment preference reflecting device 10 may incorporate the microphone 21 and the camera 23 .

音響機器３０は、操作部３１と、出力部３３と、ラジオ受信部３５と、オーディオ音源部３７とを備え、ＡＭラジオ、ＦＭラジオ等のラジオ、ＣＤ等の各種記憶媒体、ネットワークを介した各種の音声データ等を含む各種音源の音を出力し得るエンタテイメント装置である。操作部３１はタッチパネル、スイッチ等の入力装置や、マイク等の音声入力装置により構成され、ユーザーによる音響機器３０の操作入力、例えば音量操作、ラジオのチャンネル切替、イコライザー調整等、を受け付ける。出力部３３は、増幅装置、スピーカ等により構成され、音を出力する。ラジオ受信部３５は音源の一つであるラジオを受信し、その受信電波について、その電界強度、マルチパス環境等のデータを音響機器用嗜好性反映装置１０に出力する。オーディオ音源部３７はラジオ以外のオーディオ機器、例えばＣＤ等の各種記憶媒体、ネットワークを介した各種の音声データ等の音源のデータを音響機器用嗜好性反映装置１０に出力する。 The audio equipment 30 includes an operation unit 31, an output unit 33, a radio reception unit 35, and an audio sound source unit 37. The audio equipment 30 receives radio such as AM radio and FM radio, various storage media such as CDs, and various audio sources via networks. It is an entertainment device capable of outputting sounds from various sound sources including audio data of The operation unit 31 is composed of an input device such as a touch panel and a switch, and a voice input device such as a microphone, and receives operation input of the audio device 30 by the user, such as volume operation, radio channel switching, equalizer adjustment, and the like. The output unit 33 includes an amplifier, a speaker, and the like, and outputs sound. The radio receiving unit 35 receives radio, which is one of the sound sources, and outputs data on the received radio waves, such as field strength and multipath environment, to the audio device preference reflecting apparatus 10 . The audio sound source unit 37 outputs sound source data such as audio data from audio devices other than the radio, such as various storage media such as CDs, and various audio data via a network, to the preference reflecting apparatus 10 for audio devices.

尚、音響機器用嗜好性反映装置１０は、外部のクラウドシステムの如きネットワークと有線又は無線の通信インターフェースを介して接続可能である。 The audio device preference reflecting apparatus 10 can be connected to a network such as an external cloud system via a wired or wireless communication interface.

図２Ａは、従来技術の音響機器におけるユーザーの嗜好性に応じた出力特性を示す周波数特性グラフを示す。周波数特性グラフは、横軸が周波数、縦軸が音量レベルであり、音響機器の出力音における周波数毎の出力レベルを規定する出力特性を視覚的に表すグラフである。音の感じ方は各人毎に異なっており、例えば一部のユーザーにとっては高音域の音がうるさい、と感じても、他のユーザーにとっては同じ高音域の音でもうるさいと感じないこともある。このようなユーザー毎の好みを嗜好性と呼ぶ。嗜好性の違いは、周波数特性グラフの形の違いとなって表れる。 FIG. 2A shows a frequency characteristic graph showing output characteristics according to user's preference in a conventional audio device. The frequency characteristic graph is a graph visually representing the output characteristics defining the output level for each frequency in the output sound of the audio equipment, with the frequency on the horizontal axis and the volume level on the vertical axis. Each person perceives sound differently. For example, some users may find high-frequency sounds to be annoying, while other users may not find the same high-frequency sounds to be annoying. . Such preferences for each user are called preferences. Differences in preferences appear as differences in the shape of the frequency characteristic graph.

図２Ａに示す様に、従来技術においては、設計担当者の感応評価、予め調査した顧客満足度スコア等の様な情報に基づき、単一の周波数特性グラフを用意し、音響機器はこの周波数特性グラフに沿う様な固定された出力特性をもって音を出力している。しかしながら、上述した様に音の嗜好性は各人毎に異なっており、固定された出力特性が人によっては必ずしも好ましいものとはいえず、例えば図２Ａの破線で丸く囲った部分の高音域の出力が、人によっては耳障りに聞こえる場合もあり得る。 As shown in FIG. 2A, in the prior art, a single frequency characteristic graph is prepared based on information such as the designer's responsive evaluation and customer satisfaction scores surveyed in advance. Sound is output with fixed output characteristics that follow the graph. However, as described above, sound preferences differ from person to person, and the fixed output characteristics are not necessarily preferable for some people. The output may sound harsh to some people.

一方、図２Ｂは、本実施形態の音響機器用嗜好性反映装置１０における周波数特性グラフを示す。本実施形態の音響機器用嗜好性反映装置１０は、予め特性記憶部１３に音響機器３０の出力音のパターンに相当する出力特性を複数記憶し、顧客の嗜好性を検出した上で、制御部１１が検出した嗜好性に応じて適切な出力特性である周波数特性グラフを選択する。この選択を受けて、特性設定部１５は音響機器３０の出力音の出力特性を設定する。尚、出力特性の選択にあたって、制御部１１は、ユーザーの出力音に対する反応を推定するための機械学習を行った学習済みの学習モデルを搭載した人工知能（ＡＩ；Artificial Intelligence）を用いることができる。 On the other hand, FIG. 2B shows a frequency characteristic graph in the audio equipment preference reflecting device 10 of this embodiment. The audio equipment preference reflecting apparatus 10 of the present embodiment stores a plurality of output characteristics corresponding to the pattern of the output sound of the audio equipment 30 in advance in the characteristics storage unit 13, detects the customer's preference, and 11 selects a frequency characteristic graph that is an appropriate output characteristic according to the detected preference. In response to this selection, the characteristic setting unit 15 sets the output characteristic of the output sound of the acoustic device 30 . In selecting the output characteristics, the control unit 11 can use artificial intelligence (AI) equipped with a learning model that has undergone machine learning for estimating the user's reaction to the output sound. .

図２Ｂは複数の周波数特性グラフ及びその選択の例を示している。本例の周波数特性グラフには、高音域の波形をある程度残す特性を持つ高音質型、高音域の音を削ってノイズを低減する特性を持つノイズ重視型、高音質型とノイズ重視型の中間の特性を持つ中音質型、等の予め設定された複数種類が予め準備されており、特性記憶部１３に記憶されている。音響機器の３０のユーザーが、高音質型の出力特性による出力音がうるさいと感じる場合、音響機器用嗜好性反映装置１０は、高音質型の出力特性を中音質型の出力特性や、ノイズ重視型の出力特性に切り替える。もちろんユーザーが任意のタイミングで出力特性を更新することもできる。 FIG. 2B shows an example of multiple frequency characteristic graphs and their selection. The frequency characteristics graph in this example shows a high-quality sound type that retains some of the high-frequency waveform, a noise-oriented type that cuts the high-frequency sound to reduce noise, and an intermediate type between the high-quality sound type and the noise-oriented type. A plurality of preset types, such as an intermediate sound quality type having characteristics of , are prepared in advance and stored in the characteristics storage unit 13 . When the user of the audio equipment 30 feels that the output sound due to the output characteristics of the high-quality sound type is noisy, the preference reflecting device 10 for the audio equipment changes the output characteristics of the high-quality sound type to the output characteristics of the medium-quality sound type, or emphasizes noise. Switch to type output characteristics. Of course, the user can also update the output characteristics at any timing.

図３は、音響機器用嗜好性反映装置１０の制御部１１が有する機能を分類したブロック図である。制御部１１は、マイク２１、カメラ２３、音響機器３０から得られる情報に基づき、ユーザーにとって音響機器３０の出力音が好ましいものか、すなわち嗜好性に合致したものであるかを判定し、判定結果に応じて図２Ｂに示した周波数特性グラフで示される出力特性を選択し、場合によっては既存設定された出力特性を変更する。 FIG. 3 is a block diagram classifying the functions of the control section 11 of the audio device preference reflecting apparatus 10. As shown in FIG. Based on the information obtained from the microphone 21, the camera 23, and the audio equipment 30, the control unit 11 determines whether the output sound of the audio equipment 30 is preferable for the user, that is, whether it matches the user's preference, and the determination result is , the output characteristic shown in the frequency characteristic graph shown in FIG. 2B is selected, and the existing set output characteristic is changed in some cases.

具体的に制御部１１は、マイク２１が検出したユーザーが発した音声情報をユーザーの反応情報として捉え、音声情報に基づき、特性記憶部１３に記憶された出力特性を選択する。制御部１１は、マイク２１が検出した周辺環境のノイズに基づき、特性記憶部１３に記憶された出力特性を選択する。更に制御部１１は、カメラ２３がユーザーを撮像して得られるユーザーの顔情報や動作情報を含む撮像情報をユーザーの反応情報として捉え、撮像情報に基づき、特性記憶部１３に記憶された出力特性を選択する。 Specifically, the control unit 11 regards voice information uttered by the user detected by the microphone 21 as user reaction information, and selects an output characteristic stored in the characteristic storage unit 13 based on the voice information. The control unit 11 selects the output characteristic stored in the characteristic storage unit 13 based on the ambient noise detected by the microphone 21 . Furthermore, the control unit 11 captures imaging information including the user's face information and motion information obtained by imaging the user with the camera 23 as user reaction information, and based on the imaging information, the output characteristics stored in the characteristic storage unit 13 to select.

マイク２１からの周辺環境のノイズについては、ユーザーにとって耳障りなノイズか、耳障りでない、例えば軽めのノイズかを判定してよい。また、ユーザーの発する音声情報については、その声色からもたらされるユーザーの感情を判定してよい。更にユーザーが示す表情、動作を含む撮像情報については、表情、動作からもたらされるユーザーの感情を判定してよい。 The noise in the surrounding environment from the microphone 21 may be judged whether it is offensive to the user or is not offensive, for example, light noise. In addition, regarding voice information uttered by the user, the user's emotion brought about by the tone of voice may be determined. Furthermore, with respect to imaging information including facial expressions and actions of the user, the emotions of the user caused by the facial expressions and actions may be determined.

種々の方法がこのような判定にあたって利用可能であるが、例えばユーザーの音響機器３０の出力音に対する反応を推定するための機械学習を行った学習済みモデルを搭載した人工知能（ＡＩ；Artificial Intelligence）を用いることが可能である。ＡＩは、例えば学習済みモデルに所定フォーマットの入力情報を入力した場合の出力がＡかＢの２つの値しか取らない２値分類を用いて良否判定してよい。また、ＡＩは、学習済みモデルに所定フォーマットの入力情報を入力した場合の出力がＡＢＣＤＥＦＧの７つの如き複数のクラスに多値分類した上で、クラスＡＢＧは「良」、クラスＣＥＦは「否」、などのように判定してもよい。その他、ＡＩは、学習済みモデルに所定フォーマットの入力情報を入力した場合の出力が単一のスカラー値となるように構成して、このスカラー値をスコアとして用いて、例えばスコア８０以上ならば「良」、スコア８０未満ならば「否」、などのように判定してもよい。「良」はユーザーにとって心地よい状態を意味し、「否」はユーザーにとって心地が良くない、例えばラジオのノイズがうるさいと思っている状態を意味する。 Various methods can be used for such determination, but for example, artificial intelligence (AI) equipped with a trained model that has undergone machine learning for estimating the user's reaction to the output sound of the audio equipment 30 can be used. For example, the AI may make pass/fail judgments using binary classification in which the output takes only two values, A or B, when input information in a predetermined format is input to a trained model. In addition, the AI classifies the output when input information in a predetermined format is input to the learned model into multiple classes such as ABCDEFG, and class ABG is "good" and class CEF is "fail". , and so on. In addition, the AI is configured so that when input information in a predetermined format is input to the trained model, the output is a single scalar value, and this scalar value is used as a score, for example, if the score is 80 or more, " If the score is less than 80, it may be determined as "not good". "Good" means that the user feels comfortable, and "bad" means that the user feels uncomfortable, for example, the radio noise is too loud.

特性記憶部１３はＡＩの学習済みモデルを記憶することができる。制御部１１は、特性記憶部１３に記憶された学習済みモデルに上記のノイズ、音声情報、顔情報、動作情報等を所定フォーマットに成形した上で入力することにより、ＡＩ判定を行うことができる。なお、学習済みモデルはアップデートを行ってもよい。音響機器用嗜好性反映装置１０は、取得したユーザーの嗜好性に関わる情報をクラウドシステム経由にてサーバ等にアップロードする。送信先のサーバ等の装置が機械学習を更に行い、更新された学習モデルを音響機器用嗜好性反映装置１０装置がダウンロードして、以後、ダウンロード後の学習モデルを使用することができる。 The characteristic storage unit 13 can store AI trained models. The control unit 11 can perform AI determination by inputting the noise, voice information, face information, motion information, etc., into a predetermined format into the learned model stored in the characteristic storage unit 13 . . Note that the learned model may be updated. The audio equipment preference reflecting apparatus 10 uploads the acquired information related to the user's preference to a server or the like via the cloud system. A device such as a destination server or the like further performs machine learning, and the updated learning model is downloaded by the audio device preference reflecting device 10, and the downloaded learning model can be used thereafter.

更に制御部１１は、音響機器３０の操作部３１に対するユーザーの操作を反応情報として捉え、操作に基づき特性記憶部１３に記憶された出力特性を選択する。このような操作は、例えばラジオのチャンネル切替、音響機器３０のイコライザー調整等を含んでいる。チャンネル切替は、ユーザーが現在設定されているチャンネルを気に入っていないという感情が発露したものであり、イコライザー調整は、ユーザーが現在設定されているイコライザー設定を気に入っていないという感情が発露したものであり、いずれも音響機器３０の出力音に対するユーザーの感情を反映しているものと把握される。 Furthermore, the control unit 11 captures the user's operation on the operation unit 31 of the audio equipment 30 as reaction information, and selects the output characteristics stored in the characteristic storage unit 13 based on the operation. Such operations include, for example, radio channel switching, equalizer adjustment of the audio equipment 30, and the like. Channel switching is a manifestation of the user's feeling that the user does not like the currently set channel, and equalizer adjustment is a manifestation of the user's feeling that the user does not like the currently set equalizer setting. , reflect the user's feelings toward the output sound of the audio equipment 30. FIG.

更に制御部１１は、ラジオ受信部３５から得られるラジオの受信電波について、その電界強度又はマルチパス環境等の少なくともいずれかのデータに基づき、特性記憶部１３に記憶された出力特性を選択する。電界強度、マルチパス環境等という指標は、出力音の品質を評価する尺度であり、音響機器３０の出力音に対するユーザーの感情に影響を与え、ユーザーの感情を反映しているものと把握される。マルチパス環境はマルチパスノイズ等をも含んでおり、電波状態悪化のレベル指標である。例えこの指標が大きくても耳障りなノイズでない場合もあり、マイク２１が検出したノイズのＡＩ判定が補う。逆にマイク２１が検出したノイズのＡＩ判定のみを判断指標としても、ラジオ放送の内容そのものである可能性もあるため、ラジオ受信部３５による受信電波そのものの状態をも判断指標とすることができる。 Further, the control unit 11 selects the output characteristics stored in the characteristic storage unit 13 based on at least one of data such as the electric field intensity and multipath environment of the received radio wave obtained from the radio reception unit 35 . Indices such as electric field intensity and multipath environment are scales for evaluating the quality of output sound, and are understood to affect the user's feelings toward the output sound of the audio equipment 30 and reflect the user's feelings. . The multipath environment also includes multipath noise and the like, and is a level indicator of deterioration of radio wave conditions. Even if this index is large, the noise may not be offensive in some cases, and the AI judgment of the noise detected by the microphone 21 compensates. Conversely, even if only the AI judgment of the noise detected by the microphone 21 is used as a judgment index, the content of the radio broadcast itself may be used, so the state of the radio wave itself received by the radio receiving unit 35 can also be used as a judgment index. .

更に制御部１１は、オーディオ音源部３７から得られるラジオ以外のオーディオ機器の音源のデータに基づき特性記憶部１３に記憶された出力特性を選択する。制御部１１は、オーディオ機器の出力特性を直接検出し、出力特性の設定に役立てることができる。 Further, the control section 11 selects the output characteristics stored in the characteristic storage section 13 based on the sound source data of the audio equipment other than the radio obtained from the audio sound source section 37 . The control unit 11 can directly detect the output characteristics of the audio equipment and use it to set the output characteristics.

特性設定部１５は種々のハードウェア回路等により構成され、音響機器３０の出力音を出力特性に従って設定する。特性設定部１５は周波数特性設定回路、高周波数フィルタ回路等、出力音に関わる種々の回路を含んでおり、特性記憶部１３において制御部１１が選択した出力特性を参照し、特性記憶部１３から選び、これに従って出力音を設定する。 The characteristic setting unit 15 is composed of various hardware circuits and the like, and sets the output sound of the acoustic device 30 according to the output characteristic. The characteristic setting unit 15 includes various circuits related to the output sound, such as a frequency characteristic setting circuit and a high frequency filter circuit. and set the output sound accordingly.

特性設定部１５は、音響機器３０の出力音を出力特性に従って設定するが、ここでの変更は上述した様に、ラジオ受信部３５によるラジオ電波の受信設定を変更することを含む。ラジオの受信設定は、例えば帯域幅処理、高周波領域のカット処理、低周波領域のカット処理の三つの受信設定を含む。 The characteristic setting section 15 sets the output sound of the acoustic device 30 according to the output characteristic, and the change here includes changing the reception setting of radio waves by the radio receiving section 35 as described above. Radio reception settings include, for example, three reception settings: bandwidth processing, high-frequency cut processing, and low-frequency cut processing.

帯域幅処理は、受信するラジオ電波の帯域幅を、ユーザーの嗜好性に応じて制御する処理である。例えば、ＦＭラジオの場合、中間周波数フィルタを狭くするほど、弱電界で希望放送局の選択性能が上がり、周囲雑音や、隣接放送局の影響を受けにくくなる。しかしながら、希望放送内容まで削って狭くすると音質が悪化する。帯域幅は、ユーザーがノイズ低減を重視するか、または音質を重視するか、といったユーザーの嗜好性に応じて設定される。特性設定部１５は、ノイズ低減重視のユーザーの場合、ラジオ受信部３５の受信帯域幅を比較的狭く設定し、音質重視のユーザーの場合、ラジオ受信部３５の受信帯域幅を比較的広く設定する。 Bandwidth processing is processing for controlling the bandwidth of radio waves to be received according to the user's preference. For example, in the case of FM radio, the narrower the intermediate frequency filter, the higher the selection performance of the desired broadcasting station in a weak electric field, and the less the influence of ambient noise and adjacent broadcasting stations. However, if the content of the desired broadcast is reduced to narrow it, the sound quality deteriorates. The bandwidth is set according to the user's preference, such as whether the user values noise reduction or sound quality. The characteristic setting unit 15 sets the reception bandwidth of the radio reception unit 35 to be relatively narrow for the user who emphasizes noise reduction, and sets the reception bandwidth of the radio reception unit 35 to be relatively wide for the user who emphasizes sound quality. .

高周波領域のカット処理は、高周波領域のカット処理量を、ユーザーの嗜好性に応じて変化させる処理である。例えば、ラジオの受信電波が弱電界であるとき、あるいは、マルチパス検出レベルが高いときに、ラジオ受信部３５は、高周波領域のカット処理量を増加させることにより、ノイズを低減させることができる。特性設定部１５は、例えば、高周波領域のカット処理量の増加量、あるいは、高周波領域のカット処理量の増加を開始する閾値となる電界強度およびマルチパス検出レベルを、ユーザーの嗜好性に応じて変化させることができる。例えば、特性設定部１５は、受信電界強度が３０ｄＢｕ以下になったときに、ラジオ受信部３５の高周波領域のカット処理量を受信電界強度およびユーザーの嗜好性に応じて変化させる。あるいは、例えば特性設定部１５は、マルチパス検出レベルが高いときに、ラジオ受信部３５の高周波領域のカット処理量をユーザーの嗜好性に応じて変化させる。尚、比較的値の高い６０－７０ｄＢｕ位の受信電界強度からマルチパス検出レベルが高くなるため、特性設定部１５は、受信電界強度に応じてラジオ受信部３５の高周波領域のカット処理量を変化させる。 The high-frequency region cut processing is processing for changing the amount of high-frequency region cut processing according to the user's preference. For example, when the received radio wave is a weak electric field, or when the multipath detection level is high, the radio receiver 35 can reduce noise by increasing the amount of cut processing in the high frequency region. For example, the characteristic setting unit 15 sets the amount of increase in the cut processing amount in the high frequency region, or the electric field intensity and the multipath detection level that serve as thresholds for starting the increase in the cut processing amount in the high frequency region, according to the user's preference. can be changed. For example, when the received electric field strength becomes 30 dBu or less, the characteristic setting section 15 changes the cut processing amount of the high frequency region of the radio receiving section 35 according to the received electric field strength and user's preference. Alternatively, for example, when the multipath detection level is high, the characteristic setting unit 15 changes the cut processing amount of the high frequency region of the radio receiving unit 35 according to the user's preference. Since the multipath detection level rises from a relatively high received electric field strength of about 60 to 70 dBu, the characteristic setting unit 15 changes the amount of cut processing in the high frequency region of the radio receiving unit 35 according to the received electric field strength. Let

低周波領域のカット処理は、ユーザーの嗜好性に応じた処理であり、高周波領域のカット処理に伴い、音が不明瞭になることを抑制するために行われる。ただし、低周波領域のカット処理の処理量は、高周波領域のカット処理の処理量に応じて決定されるわけではなく、両者はそれぞれ独立して制御されることが一般的である。 The low-frequency region cut processing is processing according to the user's preference, and is performed to prevent the sound from becoming unclear due to the high-frequency region cut processing. However, the processing amount of the cut processing in the low frequency range is not necessarily determined according to the processing amount of the cut processing in the high frequency range, and both are generally controlled independently of each other.

尚、上述の帯域幅処理、高周波領域のカット処理、低周波領域のカット処理は、それぞれ独立して設定を変更可能であるが、ユーザーの嗜好性に応じてどれを優先して変化させるかは受信電界等の状況によって異なる。例えば弱電界の場合には帯域幅を狭くする処理を優先的に行うことができる。 The bandwidth processing, high-frequency cut processing, and low-frequency cut processing described above can be independently changed. It varies depending on the reception electric field and other conditions. For example, in the case of a weak electric field, processing for narrowing the bandwidth can be preferentially performed.

図４は音響機器用嗜好性反映装置１０が行う、音響機器に対しユーザーの嗜好性を反映する嗜好性反映方法の手順を記したフローチャートを示す。尚、本例は音響機器３０の音源がラジオである場合の手順を示している。 FIG. 4 shows a flow chart describing the procedure of a preference reflecting method for reflecting the user's preference to an audio device, which is performed by the audio device preference reflecting apparatus 10 . This example shows the procedure when the sound source of the audio equipment 30 is a radio.

制御部１１は、ラジオ受信部３５からの電界強度に関するデータに基づき、受信したラジオ電波が弱電界およびマルチパス環境の少なくとも一方に該当するか否かを判定する（ステップＳ１０１）。弱電界とは、例えば電界が所定のｄＢｕ、ｄＢｍ値以下等、所定以下の出力値として定義してもよい。例えば制御部１１は、３０ｄＢｕ以下の出力値を弱電界であると判定してよい。 The control unit 11 determines whether or not the received radio waves correspond to at least one of a weak electric field and a multipath environment based on the data regarding the electric field intensity from the radio receiving unit 35 (step S101). A weak electric field may be defined as an output value below a predetermined value, such as an electric field below a predetermined dBu, dBm value. For example, the control unit 11 may determine that an output value of 30 dBu or less is a weak electric field.

また、制御部１１はラジオ受信部３５からのマルチパス環境に関するデータに基づき、ラジオ電波の受信状況がマルチパス環境、すなわち多重波伝搬であるか否かを判定する。マルチパス環境であるか否の判定は、マルチパス検出レベルが所定値以上、例えば１０ｄＢ以上であるか否かという数値に基づき行うことができる。ラジオ電波の受信状況が弱電界およびマルチパス環境ではない場合（ステップＳ１０１：Ｎｏ）、出力設定を変える必要はないのでそれ以上先の処理は行わず、ステップＳ１０１に戻る。 Also, based on the data regarding the multipath environment from the radio receiver 35, the control unit 11 determines whether or not the radio wave reception condition is a multipath environment, that is, multipath propagation. Whether or not the environment is a multipath environment can be determined based on a numerical value indicating whether or not the multipath detection level is a predetermined value or more, for example, 10 dB or more. If the radio wave reception condition is neither a weak electric field nor a multipath environment (step S101: No), there is no need to change the output setting, so no further processing is performed and the process returns to step S101.

ラジオ電波の受信状況が弱電界およびマルチパス環境の少なくとも一方である場合（ステップＳ１０１：Ｙｅｓ）、制御部１１は、マイク２１が検出した周辺環境のノイズに対するＡＩによる判定情報に基づき、ノイズの度合を判定する（ステップＳ１０３）。例えばＡＩが、ノイズがユーザーにとって耳障りである可能性がないと判定した場合（ステップＳ１０３：Ｎｏ）、出力設定を変える必要はないのでそれ以上先の処理は行わず、ステップＳ１０１に戻る。 If the radio wave reception condition is at least one of a weak electric field and a multipath environment (step S101: Yes), the control unit 11 determines the degree of noise based on AI determination information for noise in the surrounding environment detected by the microphone 21. is determined (step S103). For example, if the AI determines that there is no possibility that the noise is offensive to the user (step S103: No), there is no need to change the output setting, so no further processing is performed and the process returns to step S101.

あくまで一例であるが、マイク２１が検出した周辺環境のノイズについて、非常にきついノイズである可能性が１０％、きついノイズである可能性が８０％、中位のノイズである可能性が７％、軽いノイズである可能性が３％、であるとＡＩが判定したとする。きついノイズと、非常にきついノイズについては、ノイズがユーザーにとって耳障りである可能性があると制御部１１が判定する（ステップＳ１０３：Ｙｅｓ）。中位のノイズと、軽いノイズについては、ノイズがユーザーにとって耳障りである可能性がないと制御部１１が判定する（ステップＳ１０３：Ｎｏ）。上記の例においては、きついノイズである可能性が８０％と、一番高い可能性を有しているので、制御部１１はノイズがユーザーにとって耳障りである可能性があると判定する（ステップＳ１０３：Ｙｅｓ）。 Although this is only an example, the noise in the surrounding environment detected by the microphone 21 has a 10% chance of being very severe noise, an 80% chance of being severe noise, and a 7% chance of being medium noise. , with a 3% chance of being light noise. The control unit 11 determines that the loud noise and the extremely loud noise may be offensive to the user (step S103: Yes). The control unit 11 determines that there is no possibility that the noise is offensive to the user with respect to medium-level noise and light noise (step S103: No). In the above example, the possibility of severe noise is 80%, which is the highest possibility, so the control unit 11 determines that the noise may be offensive to the user (step S103). : Yes).

ノイズがユーザーにとって耳障りである可能性があると制御部１１が判定した場合（ステップＳ１０３：Ｙｅｓ）、制御部１１は、ユーザーが操作部３１を操作してラジオのチャンネルを切替えたか否かを判定する（ステップＳ１０４）。チャンネル切替を検出した場合、すなわちユーザーが現在のチャンネルを気に入らずに切替えたことを検出した場合（ステップＳ１０４：Ｙｅｓ）、制御部１１はユーザーに対し、メッセージ出力部１７を介して音響機器３０の出力音に対する評価を問うメッセージを送出する（ステップＳ１０６）。メッセージの内容は、例えば、「ラジオのノイズがうるさいですか？ 設定を変更しますか？」等、出力音に対するユーザーの評価を問うものであってよく、メッセージの内容は適宜設定可能である。送出されたメッセージに対し、ユーザーは、入力部１９を介して回答を入力するか、メッセージを無視する。メッセージに対しユーザーから同意する回答を得られない場合（ステップＳ１０６：Ｎｏ）、すなわちユーザーの回答がメッセージに対し否定的である場合や回答がない場合、出力設定を変える必要はないのでそれ以上先の処理は行わず、ステップＳ１０１に戻る。回答は、入力部１９がタッチパネル、スイッチ等の入力装置の場合はユーザーの手による操作に行われ、入力部１９がマイク等の音声入力装置の場合はユーザーの音声入力により行われる。 When the control unit 11 determines that the noise may be offensive to the user (step S103: Yes), the control unit 11 determines whether the user has operated the operation unit 31 to switch radio channels. (step S104). When channel switching is detected, that is, when it is detected that the user has switched to the current channel because he/she does not like it (step S104: Yes), the control unit 11 instructs the user via the message output unit 17 to change the audio equipment 30. A message asking for evaluation of the output sound is sent (step S106). The content of the message may ask the user's evaluation of the output sound, such as "Is the radio noisy? Do you want to change the settings?", and the content of the message can be set as appropriate. The user inputs a reply to the sent message via the input unit 19 or ignores the message. If the user does not agree with the message (step S106: No), that is, if the user's answer is negative or there is no answer, there is no need to change the output settings. is not performed, and the process returns to step S101. When the input unit 19 is an input device such as a touch panel or a switch, the answer is given by the user's manual operation, and when the input unit 19 is a voice input device such as a microphone, the answer is given by the user's voice input.

メッセージに対しユーザーから同意する回答を得られた場合（ステップＳ１０６：Ｙｅｓ）、制御部１１が特性記憶部１３に記憶された適切な出力特性を選択し、特性設定部１５が、特性記憶部１３において制御部１１が選択した出力特性を参照し、出力音の出力特性を設定する（ステップＳ１０７）。この設定はユーザーの反応によって異なるが、例えばユーザーの反応がノイズや高音域を耳障りに感じたものである場合、制御部１１は図２Ｂの例の様に、既に設定された出力特性に比べて、高周波領域の出力レベルが小さい出力特性を選択することができる。すなわち、特性設定部１５によって既に設定された出力特性が高音質型又は中音質型であり、この特性を変更する場合、制御部１１は高音域の音を削ってノイズを低減する特性を持つノイズ重視型の出力特性を選択し、特性設定部１５はノイズ重視型の出力特性を設定する。これにより、出力部３３は以前に比べて高周波領域の出力レベルを抑えた音を出力し、ユーザーがノイズや高音域を耳障りに感じにくくなる。 If the user agrees with the message (step S106: Yes), the control unit 11 selects an appropriate output characteristic stored in the characteristic storage unit 13, and the characteristic setting unit 15 sets the characteristic storage unit 13 , the output characteristics of the output sound are set with reference to the output characteristics selected by the control unit 11 (step S107). This setting varies depending on the user's response. For example, if the user's response is that noise or high frequencies are offensive, the control unit 11 compares the output characteristics that have already been set, as in the example of FIG. 2B. , an output characteristic in which the output level in the high frequency region is small can be selected. That is, when the output characteristics already set by the characteristic setting unit 15 are high sound quality type or medium sound quality type, and this characteristic is to be changed, the control unit 11 cuts the sound in the high frequency range to reduce noise. The output characteristic of the emphasis type is selected, and the characteristic setting unit 15 sets the output characteristic of the noise emphasis type. As a result, the output unit 33 outputs sound with the output level of the high frequency range suppressed compared to before, and the user is less likely to feel noise and the high frequency range offensive.

ステップＳ１０４にて操作部３１によるチャンネル切替を検出しなかった場合（ステップＳ１０４：Ｎｏ）、制御部１１は更に、ユーザーが操作部３１を操作してイコライザーを調整したか、または音量操作をしたか否かを判定する（ステップＳ１０５）。操作部３１によるイコライザー調整または音量操作を検出した場合（ステップＳ１０５：Ｙｅｓ）、上述したステップＳ１０６へ処理が遷移し、制御部１１はユーザーに対し、メッセージ出力部１７を介して音響機器３０の出力音に対する評価を問うメッセージを送出する。 If channel switching by the operation unit 31 is not detected in step S104 (step S104: No), the control unit 11 further determines whether the user has operated the operation unit 31 to adjust the equalizer or operate the volume. It is determined whether or not (step S105). When equalizer adjustment or volume operation by the operation unit 31 is detected (step S105: Yes), the process transitions to the above-described step S106, and the control unit 11 instructs the user to output the audio equipment 30 via the message output unit 17. Sends out a message asking for an evaluation of the sound.

操作部３１によるイコライザー調整または音量操作が検出されなかった場合（ステップＳ１０５：Ｎｏ）、制御部１１は、マイク２１の検出したユーザーの音声に対するＡＩによる判定情報に基づき、ユーザーの感情が音響機器３０の出力音、本例ではラジオの音に対し肯定的であるか否か、すなわちポジティブであるか否かを判定する（ステップＳ１０８）。音声に対してポジティブな反応との判定を得たら（ステップＳ１０８：Ｙｅｓ）、出力設定を変える必要はないのでそれ以上先の処理は行わず、ステップＳ１０１に戻る。ポジティブな反応検出の例としては、鼻歌を検出した場合、声のトーンが通常より高い場合等である。 When equalizer adjustment or volume operation by the operation unit 31 is not detected (step S105: No), the control unit 11 detects the user's emotion based on the AI determination information for the user's voice detected by the microphone 21. (step S108). If it is determined that there is a positive reaction to the sound (step S108: Yes), there is no need to change the output settings, so the process returns to step S101 without further processing. Examples of positive response detection are when humming is detected, when the tone of voice is higher than normal, and the like.

音声に対してポジティブな反応との判定を得られなかった場合（ステップＳ１０８：Ｎｏ）、更に制御部１１は、マイク２１の検出したユーザーの音声に対するＡＩによる判定情報に基づき、ユーザーの感情が音響機器３０の出力音、本例ではラジオの音に対し否定的であるか否か、すなわちネガティブであるか否かを判定する（ステップＳ１０９）。音声に対してネガティブな反応との判定を得たら（ステップＳ１０９：Ｙｅｓ）、上述したステップＳ１０６へ処理が遷移し、制御部１１はユーザーに対し、メッセージ出力部１７を介して音響機器３０の出力音に対する評価を問うメッセージを送出する。ネガティブな反応検出の例としては、「うるさい」、「いまいち」等の、ネガティブな発言を検出（例えば３回以上／日）した場合等である。 If a positive response to the voice is not determined (step S108: No), the control unit 11 determines whether the user's emotion is acoustically based on the AI determination information for the user's voice detected by the microphone 21. It is determined whether or not the output sound of the device 30, which is the sound of the radio in this example, is negative, that is, whether or not it is negative (step S109). If it is determined that there is a negative reaction to the voice (step S109: Yes), the process transitions to step S106, and the control unit 11 instructs the user to output the audio device 30 via the message output unit 17. Sends out a message asking for an evaluation of the sound. An example of detecting a negative reaction is when negative remarks such as "noisy" and "unsatisfactory" are detected (for example, three or more times/day).

音声に対してネガティブな反応との判定を得られなかった場合（ステップＳ１０９：Ｎｏ）、更に制御部１１は、カメラ２３の撮像したユーザーの撮像画像に対するＡＩによる判定情報に基づき、ユーザーの感情が音響機器３０の出力音、本例ではラジオの音に対し肯定的であるか否か、すなわちポジティブであるか否かを判定する（ステップＳ１１０）。ポジティブな反応との判定を得たら（ステップＳ１１０：Ｙｅｓ）、出力設定を変える必要はないのでそれ以上先の処理は行わず、ステップＳ１０１に戻る。ポジティブな反応検出の例としては、笑顔の検出、身体動作が乗っている状態、動作のリズムの検出等がある。 If it is not determined that there is a negative reaction to the voice (step S109: No), the control unit 11 determines whether the user's emotion is based on the AI determination information for the captured image of the user captured by the camera 23. It is determined whether the output sound of the audio equipment 30, which is the sound of the radio in this example, is positive, that is, whether it is positive (step S110). If a positive reaction is determined (step S110: Yes), there is no need to change the output settings, so the process returns to step S101 without further processing. Examples of positive reaction detection include smile detection, body motion detection, and motion rhythm detection.

カメラの撮像画像に対してポジティブな反応との判定を得られなかった場合（ステップＳ１１０：Ｎｏ）、更に制御部１１は、カメラ２３の撮像したユーザーの撮像画像に対するＡＩによる判定情報に基づき、ユーザーの感情が音響機器３０の出力音、本例ではラジオの音に対し否定的であるか否か、すなわちネガティブであるか否かを判定する（ステップＳ１１１）。音声に対してネガティブな反応との判定を得たら（ステップＳ１１１：Ｙｅｓ）、上述したステップＳ１０６へ処理が遷移し、制御部１１はユーザーに対し、メッセージ出力部１７を介して音響機器３０の出力音に対する評価を問うメッセージを送出する。ネガティブな反応との判定が得られなかったら（ステップＳ１１１：Ｎｏ）、出力設定を変える必要はないのでそれ以上先の処理は行わず、ステップＳ１０１に戻る。ネガティブな反応検出の例としては、不快な顔表情を検出（例えば３回以上／日）した場合等がある。 If it is not determined that the image captured by the camera is a positive reaction (step S110: No), the control unit 11 further determines that the user is negative for the output sound of the audio equipment 30, which is the sound of the radio in this example, ie, whether or not it is negative (step S111). If it is determined that there is a negative reaction to the voice (step S111: Yes), the process transitions to step S106, and the control unit 11 instructs the user to output the audio device 30 via the message output unit 17. Sends out a message asking for an evaluation of the sound. If no negative reaction is determined (step S111: No), there is no need to change the output setting, so the process returns to step S101 without performing any further processing. An example of negative reaction detection is when an unpleasant facial expression is detected (for example, three or more times/day).

本開示によれば、固定的な出力特性ではなく、個別ユーザー毎の嗜好性に応じた出力特性を音響機器の出力音に反映することができ、ユーザーの満足度をより上げることができる。 According to the present disclosure, it is possible to reflect, in the output sound of the audio device, output characteristics according to individual user's preferences instead of fixed output characteristics, and user satisfaction can be further improved.

特に本実施形態においては、ステップＳ１０４～Ｓ１０６の様に、操作部３１によるチャンネル切替やイコライザー調整等、ユーザーの操作が反応情報の一つであり、操作の発生時に制御部１１はユーザーに対し、メッセージ出力部１７を介して出力音に対する評価を問うメッセージを送出することができる。よって、ユーザーに出力音の嗜好について確認した上で出力特性を変更するか否かを決定することができ、出力特性の設定変更の有無をより適切に判定することができる。 Particularly in this embodiment, as in steps S104 to S106, user operations such as channel switching and equalizer adjustment by the operation unit 31 are one of the reaction information, and when the operations occur, the control unit 11 prompts the user to A message can be sent via the message output unit 17 to inquire about the evaluation of the output sound. Therefore, it is possible to determine whether or not to change the output characteristics after confirming the preference of the output sound with the user, and it is possible to more appropriately determine whether or not to change the setting of the output characteristics.

また、本実施形態においては、ステップＳ１０８、Ｓ１０９の様に、マイク２１から取得した、ユーザーが発した音声情報が反応情報の一つであり、ユーザーの嗜好を容易に取得することができる。また、音声情報がポジティブである場合、制御部１１は既に設定された出力特性を変更せず、音声情報がネガティブである場合、制御部１１はユーザーに対し、メッセージ出力部１７を介して出力音に対する評価を問うメッセージを送出することができる。よって、ユーザーに出力音の嗜好について確認した上で出力特性を変更するか否かを決定することができ、出力特性の設定変更の有無をより適切に判定することができる。 Further, in this embodiment, as in steps S108 and S109, the voice information uttered by the user obtained from the microphone 21 is one of the reaction information, and the user's preference can be easily obtained. If the voice information is positive, the control unit 11 does not change the output characteristics that have already been set. A message can be sent asking for an evaluation of the Therefore, it is possible to determine whether or not to change the output characteristics after confirming the preference of the output sound with the user, and it is possible to more appropriately determine whether or not to change the setting of the output characteristics.

更に本実施形態においては、ステップＳ１１０、Ｓ１１１の様に、カメラ２３から取得した、ユーザーを撮像して得られる撮像情報が反応情報の一つであり、ユーザーの嗜好を容易に取得することができる。また、撮像情報がポジティブである場合、制御部１１は既に設定された出力特性を変更せず、撮像情報がネガティブである場合、制御部１１はユーザーに対し、メッセージ出力部１７を介して出力音に対する評価を問うメッセージを送出することができる。よって、ユーザーに出力音の嗜好について確認した上で出力特性を変更するか否かを決定することができ、出力特性の設定変更の有無をより適切に判定することができる。 Furthermore, in this embodiment, as in steps S110 and S111, the imaging information obtained by imaging the user obtained from the camera 23 is one of the reaction information, and the user's preferences can be easily obtained. . When the imaging information is positive, the control unit 11 does not change the output characteristics that have already been set. A message can be sent asking for an evaluation of the Therefore, it is possible to determine whether or not to change the output characteristics after confirming the preference of the output sound with the user, and it is possible to more appropriately determine whether or not to change the setting of the output characteristics.

尚、本実施形態においては、音響機器３０がラジオである場合、ステップＳ１０１の様に、制御部１１はユーザーの反応情報に加えて、ラジオの受信電波の電界強度又は受信電波のマルチパス環境の少なくともいずれかを捉える。その上で、その後のステップにおける出力特性の選択に至っているため、制御部１１は、ラジオの受信電波の電界強度又は受信電波のマルチパス環境の少なくともいずれかに基づき、特性記憶部１３に記憶された出力特性を選択することができるといえる。 In this embodiment, when the audio equipment 30 is a radio, the control unit 11, in addition to the user's response information, determines the electric field strength of the received radio waves or the multipath environment of the received radio waves, as in step S101. Grab at least one. After that, since the output characteristics are selected in the subsequent steps, the control unit 11 stores in the characteristics storage unit 13 based on at least one of the electric field intensity of the received radio waves and the multipath environment of the received radio waves. It can be said that the output characteristics can be selected.

また、本実施形態においては、ステップＳ１０３の様に、制御部１１はユーザーの反応情報に加えて、周辺環境のノイズを捉える。その上で、その後のステップにおける出力特性の選択に至っているため、制御部１１は、周辺環境のノイズに基づき、特性記憶部１３に記憶された出力特性を選択することができるといえる。 Further, in the present embodiment, as in step S103, the control unit 11 captures noise in the surrounding environment in addition to user reaction information. After that, since the output characteristics are selected in the subsequent steps, it can be said that the control unit 11 can select the output characteristics stored in the characteristic storage unit 13 based on the noise in the surrounding environment.

音響機器３０の音源がラジオ以外のオーディオ機器などの音源、例えばＣＤ等の記憶媒体やネットワークを介した各種の音声データである場合、ステップＳ１０１、Ｓ１０４を省略することができる。図５はこのような音源における嗜好性反映方法の手順を記したフローチャートを示す。制御部１１は、マイク２１が検出した周辺環境のノイズに対するＡＩによる判定情報に基づき、ノイズの度合を判定する（ステップＳ１０３）。例えばＡＩが、ノイズがユーザーにとって耳障りである可能性がないと判定した場合（ステップＳ１０３：Ｎｏ）、制御部１１は更に、ユーザーが操作部３１を操作してイコライザーを調整したか、または音量操作をしたか否かを判定する（ステップＳ１０５）。他の処理は図４に示したものと同じである。 If the sound source of the acoustic device 30 is a sound source such as an audio device other than a radio, for example, a storage medium such as a CD or various audio data via a network, steps S101 and S104 can be omitted. FIG. 5 shows a flow chart describing the procedure of such a method for reflecting preferences in sound sources. The control unit 11 determines the degree of noise based on the AI determination information for the noise in the surrounding environment detected by the microphone 21 (step S103). For example, when the AI determines that there is no possibility that the noise is offensive to the user (step S103: No), the control unit 11 further determines whether the user has operated the operation unit 31 to adjust the equalizer or operate the volume. (step S105). Other processing is the same as that shown in FIG.

以上のように、音響機器３０に対し、ユーザーの嗜好性を反映するための音響機器用嗜好性反映装置１０が、音響機器３０の出力音における周波数毎の出力レベルを規定する出力特性を記憶する特性記憶部１３と、出力音に対するユーザーの反応を反映した反応情報に基づき、特性記憶部１３に記憶された出力特性を選択する制御部１１と、特性記憶部１３において制御部１１が選択した出力特性を参照し、出力音の出力特性を設定する特性設定部１５と、を備える。これにより、固定的な出力特性ではなく、個別ユーザー毎の嗜好性に応じた出力特性を音響機器３０の出力音に反映することができ、ユーザーの満足度をより上げることができる。 As described above, the audio equipment preference reflecting device 10 for reflecting the user's preference for the audio equipment 30 stores the output characteristics that define the output level for each frequency in the output sound of the audio equipment 30. A characteristic storage unit 13, a control unit 11 that selects an output characteristic stored in the characteristic storage unit 13 based on reaction information reflecting a user's reaction to the output sound, and an output selected by the control unit 11 in the characteristic storage unit 13 and a characteristic setting unit 15 that refers to the characteristic and sets the output characteristic of the output sound. As a result, the output sound of the acoustic device 30 can reflect not the fixed output characteristic but the output characteristic according to the preference of each individual user, and the user's satisfaction can be further improved.

反応情報は、音響機器３０の操作部３１に対するユーザーの操作であり、操作の発生時に、制御部１１はユーザーに対し、メッセージ出力部１７を介して出力音に対する評価を問うメッセージを送出する。これにより、ユーザーに出力音の嗜好について確認した上で出力特性を変更するか否かを決定することができ、出力特性の設定変更の有無をより適切に判定することができる。 The reaction information is the user's operation on the operation unit 31 of the audio device 30, and when the operation occurs, the control unit 11 sends a message to the user via the message output unit 17 asking the user to evaluate the output sound. As a result, it is possible to determine whether or not to change the output characteristics after confirming the preference of the output sound with the user, and it is possible to more appropriately determine whether or not to change the setting of the output characteristics.

反応情報は、ユーザーが発した音声情報である。音声情報がポジティブである場合、制御部１１は既に設定された出力特性を変更しない。音声情報がネガティブである場合、制御部１１はユーザーに対し、メッセージ出力部１７を介して出力音に対する評価を問うメッセージを送出する。これにより、ユーザーが発した音声情報に基づいてユーザーの嗜好を取得し、出力音の出力特性を設定することができる。また、ユーザーに出力音の嗜好について確認した上で出力特性を変更するか否かを決定することができ、出力特性の設定変更の有無をより適切に判定することができる。 The reaction information is voice information uttered by the user. If the audio information is positive, the control section 11 does not change the already set output characteristics. If the voice information is negative, the control unit 11 sends a message to the user via the message output unit 17 asking the user to evaluate the output sound. This makes it possible to acquire the user's preference based on the voice information uttered by the user and set the output characteristics of the output sound. In addition, it is possible to determine whether or not to change the output characteristics after confirming the user's preference for the output sound, and it is possible to more appropriately determine whether or not to change the setting of the output characteristics.

反応情報は、ユーザーを撮像して得られる撮像情報である。撮像情報がポジティブである場合、制御部１１は既に設定された出力特性を変更しない。撮像情報がネガティブである場合、制御部１１はユーザーに対し、メッセージ出力部１７を介して出力音に対する評価を問うメッセージを送出する。これにより、撮像情報に基づいてユーザーの嗜好を取得し、出力音の出力特性を設定することができる。また、ユーザーに出力音の嗜好について確認した上で出力特性を変更するか否かを決定することができ、出力特性の設定変更の有無をより適切に判定することができる。 The reaction information is imaging information obtained by imaging the user. If the imaging information is positive, the control section 11 does not change the already set output characteristics. If the imaging information is negative, the control unit 11 sends a message to the user via the message output unit 17 asking the user to evaluate the output sound. Accordingly, it is possible to acquire the user's preference based on the imaging information and set the output characteristics of the output sound. In addition, it is possible to determine whether or not to change the output characteristics after confirming the user's preference for the output sound, and it is possible to more appropriately determine whether or not to change the setting of the output characteristics.

制御部１１は反応情報に加えて、周辺環境のノイズに基づき、特性記憶部１３に記憶された出力特性を選択する。これにより、周辺環境のノイズに基づき、出力特性を選択することができる。 The control unit 11 selects the output characteristic stored in the characteristic storage unit 13 based on the noise in the surrounding environment in addition to the reaction information. Thereby, the output characteristics can be selected based on the noise in the surrounding environment.

音響機器３０がラジオであり、制御部１１は反応情報に加えて、ラジオの受信電波の電界強度又は受信電波のマルチパス環境の少なくともいずれかに基づき、特性記憶部１３に記憶された出力特性を選択する。これにより、ラジオの受信電波の電界強度又は受信電波のマルチパス環境の少なくともいずれかに基づき、出力特性を選択することができる。 The acoustic device 30 is a radio, and the control unit 11 adjusts the output characteristics stored in the characteristic storage unit 13 based on at least one of the electric field intensity of the received radio waves and the multipath environment of the received radio waves in addition to the response information. select. Thereby, the output characteristics can be selected based on at least one of the electric field strength of received radio waves and the multipath environment of received radio waves.

制御部１１が出力特性を変更する場合、制御部１１は既に設定された出力特性に比べて、高周波領域の出力レベルが小さい出力特性を選択する。これにより、ユーザーが高音域を耳障りに感じにくくなるように、出力特性を変えることができる。 When the control unit 11 changes the output characteristic, the control unit 11 selects an output characteristic with a lower output level in the high frequency region than the output characteristic that has already been set. As a result, it is possible to change the output characteristics so that the user does not feel harshness in the high frequency range.

制御部１１が出力特性を変更する場合、制御部１１は既に設定された出力特性に比べて、低周波領域の出力レベルが小さい出力特性を選択する。これにより、ユーザーにとって音が不明瞭になることを抑制するように出力特性を変えることができる。 When the control unit 11 changes the output characteristic, the control unit 11 selects an output characteristic with a lower output level in the low frequency region than the output characteristic that has already been set. As a result, the output characteristics can be changed so as to prevent the sound from becoming unclear to the user.

制御部１１は出力特性の選択にあたって、ユーザーの出力音に対する反応を推定するための機械学習を行った学習済みモデルを搭載した人工知能を用いる。これにより、人工知能による判定結果に基づいて、出力特性を選択することができる。 In selecting the output characteristics, the control unit 11 uses artificial intelligence equipped with a trained model that has undergone machine learning for estimating the user's reaction to the output sound. Thereby, the output characteristic can be selected based on the determination result by the artificial intelligence.

音響機器３０に対し、ユーザーの嗜好性を反映するための音響機器用嗜好性反映装置１０が実行する嗜好性反映方法において、音響機器３０の出力音に対するユーザーの反応を反映した反応情報に基づき、出力音における周波数毎の出力レベルを規定する出力特性を選択し、選択した出力特性を参照し、出力音の出力特性を設定する。これにより、固定的な出力特性ではなく、個別ユーザー毎の嗜好性に応じた出力特性を音響機器３０の出力音に反映することができ、ユーザーの満足度をより上げることができる。 In the preference reflecting method executed by the preference reflecting device for audio equipment 10 for reflecting the user's preference for the audio equipment 30, based on reaction information reflecting the user's reaction to the output sound of the audio equipment 30, An output characteristic that defines an output level for each frequency of an output sound is selected, and the selected output characteristic is referenced to set the output characteristic of the output sound. As a result, the output sound of the acoustic device 30 can reflect not the fixed output characteristic but the output characteristic according to the preference of each individual user, and the user's satisfaction can be further improved.

尚、本発明は、上述した実施形態に限定されるものではなく、適宜、変形、改良、等が可能である。その他、上述した実施形態における各構成要素の材質、形状、寸法、数値、形態、数、配置箇所、等は本発明を達成できるものであれば任意であり、限定されない。 It should be noted that the present invention is not limited to the above-described embodiments, and can be modified, improved, etc. as appropriate. In addition, the material, shape, size, numerical value, form, number, location, etc. of each component in the above-described embodiment are arbitrary and not limited as long as the present invention can be achieved.

本開示の音響機器用嗜好性反映装置及び嗜好性反映方法によれば、固定的な出力特性ではなく、個別ユーザー毎の嗜好性に応じた出力特性を音響機器の出力音に反映することができ、ユーザーの満足度をより向上させ得る音響機器を提供することができる。 According to the preference reflecting device for audio equipment and the preference reflecting method of the present disclosure, it is possible to reflect the output characteristics according to the preferences of each individual user in the output sound of the audio equipment instead of the fixed output characteristics. , it is possible to provide audio equipment that can further improve user satisfaction.

１０ 音響機器用嗜好性反映装置
１１ 制御部
１３ 特性記憶部
１５ 特性設定部
１７ メッセージ出力部
１９ 変更指示入力部
２１ マイク
２３ カメラ
３０ 音響機器
３１ 操作部
３３ 出力部
３５ ラジオ受信部
３７ オーディオ音源部
１００ 音響システム 10 Audio device preference reflecting device 11 Control unit 13 Property storage unit 15 Property setting unit 17 Message output unit 19 Change instruction input unit 21 Microphone 23 Camera 30 Audio device 31 Operation unit 33 Output unit 35 Radio reception unit 37 Audio sound source unit 100 sound system

Claims (14)

音響機器に対し、ユーザーの嗜好性を反映するための音響機器用嗜好性反映装置であって、
前記音響機器の出力音における周波数毎の出力レベルを規定する出力特性を記憶する特性記憶部と、
出力音に対するユーザーの反応を反映した反応情報に基づき、前記特性記憶部に記憶された出力特性を選択する制御部と、
前記特性記憶部において前記制御部が選択した出力特性を参照し、出力音の出力特性を設定する特性設定部と、
を備える音響機器用嗜好性反映装置。 A preference reflecting device for audio equipment for reflecting the user's preference for audio equipment,
a characteristic storage unit that stores an output characteristic that defines an output level for each frequency in the output sound of the audio equipment;
a control unit that selects an output characteristic stored in the characteristic storage unit based on reaction information that reflects a user's reaction to the output sound;
a characteristic setting unit that refers to the output characteristic selected by the control unit in the characteristic storage unit and sets the output characteristic of the output sound;
A preference reflecting device for audio equipment. 請求項１に記載の音響機器用嗜好性反映装置であって、
前記反応情報は、前記音響機器の操作部に対するユーザーの操作であり、
前記操作の発生時に、前記制御部はユーザーに対し、メッセージ出力部を介して出力音に対する評価を問うメッセージを送出する、
音響機器用嗜好性反映装置。 The preference reflecting device for audio equipment according to claim 1,
the reaction information is a user's operation on the operation unit of the audio equipment;
When the operation occurs, the control unit sends a message to the user via the message output unit asking for an evaluation of the output sound.
Preference reflection device for audio equipment. 請求項１に記載の音響機器用嗜好性反映装置であって、
前記反応情報は、ユーザーが発した音声情報である、
音響機器用嗜好性反映装置。 The preference reflecting device for audio equipment according to claim 1,
The reaction information is voice information uttered by the user,
Preference reflection device for audio equipment. 請求項３に記載の音響機器用嗜好性反映装置であって、
前記音声情報がポジティブである場合、前記制御部は既に設定された出力特性を変更しない、
音響機器用嗜好性反映装置。 The preference reflecting device for audio equipment according to claim 3,
if the audio information is positive, the control unit does not change the already set output characteristics;
Preference reflection device for audio equipment. 請求項３に記載の音響機器用嗜好性反映装置であって、
前記音声情報がネガティブである場合、前記制御部はユーザーに対し、メッセージ出力部を介して出力音に対する評価を問うメッセージを送出する、
音響機器用嗜好性反映装置。 The preference reflecting device for audio equipment according to claim 3,
If the voice information is negative, the control unit sends a message to the user via the message output unit asking for an evaluation of the output sound.
Preference reflection device for audio equipment. 請求項１に記載の音響機器用嗜好性反映装置であって、
前記反応情報は、ユーザーを撮像して得られる撮像情報である、
音響機器用嗜好性反映装置。 The preference reflecting device for audio equipment according to claim 1,
The reaction information is imaging information obtained by imaging the user,
Preference reflection device for audio equipment. 請求項６に記載の音響機器用嗜好性反映装置であって、
前記撮像情報がポジティブである場合、前記制御部は既に設定された出力特性を変更しない、
音響機器用嗜好性反映装置。 The preference reflecting device for audio equipment according to claim 6,
if the imaging information is positive, the control unit does not change the output characteristics that have already been set;
Preference reflection device for audio equipment. 請求項６に記載の音響機器用嗜好性反映装置であって、
前記撮像情報がネガティブである場合、前記制御部はユーザーに対し、メッセージ出力部を介して出力音に対する評価を問うメッセージを送出する、
音響機器用嗜好性反映装置。 The preference reflecting device for audio equipment according to claim 6,
If the imaging information is negative, the control unit sends a message to the user via the message output unit asking for an evaluation of the output sound.
Preference reflection device for audio equipment. 請求項１から８のいずれか１項に記載の音響機器用嗜好性反映装置であって、
前記制御部は前記反応情報に加えて、周辺環境のノイズに基づき、前記特性記憶部に記憶された出力特性を選択する、
音響機器用嗜好性反映装置。 The preference reflecting device for audio equipment according to any one of claims 1 to 8,
The control unit selects the output characteristic stored in the characteristic storage unit based on noise in the surrounding environment in addition to the reaction information.
Preference reflection device for audio equipment. 請求項１から９のいずれか１項に記載の音響機器用嗜好性反映装置であって、
前記音響機器がラジオであり、
前記制御部は前記反応情報に加えて、前記ラジオの受信電波の電界強度又は受信電波のマルチパス環境の少なくともいずれかに基づき、前記特性記憶部に記憶された出力特性を選択する、
音響機器用嗜好性反映装置。 The preference reflecting device for audio equipment according to any one of claims 1 to 9,
the audio equipment is a radio,
In addition to the reaction information, the control unit selects the output characteristics stored in the characteristic storage unit based on at least one of the electric field intensity of the received radio waves and the multipath environment of the received radio waves.
Preference reflection device for audio equipment. 請求項１から１０のいずれか１項に記載の音響機器用嗜好性反映装置であって、
前記制御部が出力特性を変更する場合、前記制御部は既に設定された出力特性に比べて、高周波領域の出力レベルが小さい出力特性を選択する、
音響機器用嗜好性反映装置。 The preference reflecting device for audio equipment according to any one of claims 1 to 10,
When the control unit changes the output characteristic, the control unit selects an output characteristic with a lower output level in a high frequency region than the output characteristic that has already been set.
Preference reflection device for audio equipment. 請求項１から１０のいずれか１項に記載の音響機器用嗜好性反映装置であって、
前記制御部が出力特性を変更する場合、前記制御部は既に設定された出力特性に比べて、低周波領域の出力レベルが小さい出力特性を選択する、
音響機器用嗜好性反映装置。 The preference reflecting device for audio equipment according to any one of claims 1 to 10,
When the control unit changes the output characteristic, the control unit selects an output characteristic with a lower output level in a low frequency region than the output characteristic that has already been set.
Preference reflection device for audio equipment. 請求項１から１２のいずれか１項に記載の音響機器用嗜好性反映装置であって、
前記制御部は前記出力特性の選択にあたって、ユーザーの出力音に対する反応を推定するための機械学習を行った学習済みモデルを搭載した人工知能を用いる、
音響機器用嗜好性反映装置。 The preference reflecting device for audio equipment according to any one of claims 1 to 12,
In selecting the output characteristics, the control unit uses artificial intelligence equipped with a trained model that has undergone machine learning for estimating the user's reaction to the output sound.
Preference reflection device for audio equipment. 音響機器に対し、ユーザーの嗜好性を反映するための音響機器用嗜好性反映装置が実行する嗜好性反映方法であって、
前記音響機器の出力音に対するユーザーの反応を反映した反応情報に基づき、出力音における周波数毎の出力レベルを規定する出力特性を選択し、
選択した出力特性を参照し、出力音の出力特性を設定する、
嗜好性反映方法。 A preference reflecting method executed by a preference reflecting device for audio equipment for reflecting the user's preference for audio equipment,
selecting an output characteristic that defines an output level for each frequency in the output sound based on reaction information that reflects a user's reaction to the output sound of the audio device;
Refer to the selected output characteristics and set the output characteristics of the output sound,
Preference reflection method.

Images