JP4976716B2

JP4976716B2 - Car audio equipment

Info

Publication number: JP4976716B2
Application number: JP2006078939A
Authority: JP
Inventors: 健治都倉
Original assignee: Clarion Co Ltd
Current assignee: Faurecia Clarion Electronics Co Ltd
Priority date: 2006-03-22
Filing date: 2006-03-22
Publication date: 2012-07-18
Anticipated expiration: 2026-03-22
Also published as: JP2007257162A

Abstract

PROBLEM TO BE SOLVED: To easily obtain a musical piece corresponding to an external environment without making it necessary for a user to perform any selecting operation. SOLUTION: The luminance change of an external environment while a vehicle is traveling is acquired, and the featured values of each musical piece in a retrieval range are acquired, and a musical piece corresponding to the environmental environment is retrieved from the musical pieces of the retrieval range based on the luminance change of the external environment and the featured values of the musical piece. COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は、複数の楽曲の中から外部環境に応じた楽曲を検索するための技術に関する。 The present invention relates to a technique for searching for music according to an external environment from a plurality of music.

従来、楽曲データを保存し再生する際には、できるだけ劣化の少ない状態で保存する必要があったために、アナログデータもしくは特定の分解能において離散データにサンプリングされたデジタルデータ（例えば、ＰＣＭデータ）によって保存する必要があり、膨大な情報量が必要であった。さらに、楽曲データを保存するための記録媒体も限られていたために、大量の楽曲データを保存しておくことは困難であった。
しかしながら、近年においては、従来と同程度以上の比較的劣化の少ない状態において、同一の楽曲に対する楽曲データを数分の１から数十分の１に圧縮する圧縮技術が発達してきている。例えば、圧縮技術としては、ＭＰ３、ＷＭＡ、ＡＡＣ（ＭＰＥＧ）等が挙げられる。 Conventionally, when music data is stored and played back, it has been necessary to store it with as little degradation as possible. Therefore, it is stored as analog data or digital data sampled into discrete data (for example, PCM data) at a specific resolution. A huge amount of information was necessary. Furthermore, since there are limited recording media for storing music data, it is difficult to store a large amount of music data.
However, in recent years, a compression technique has been developed that compresses music data for the same music from a fraction of a few to a few tenths in a state of relatively little deterioration that is equal to or higher than the conventional level. For example, MP3, WMA, AAC (MPEG) etc. are mentioned as a compression technique.

これと同時に、楽曲データを保存する装置についても発達し、多くの情報量を保存する記録メディアも提案されており、多量の情報を同一の記録メディアに同時に保存することが可能となってきた。例えば、記録メディアとしては、ＨＤＤ、半導体メモリなどが挙げられる。
これらの楽曲データを保存するための技術の発達に伴って、同一の記録メディアに大量の楽曲データが格納されることとなった結果、それらの中から目的とする楽曲データを選択することが望まれるようになってきている。
例えば、従来においては、ユーザーが予め分類したり、楽曲データに予め付加されているアーティスト情報、曲名情報等によって分類したり、楽曲データが音データの周波数情報（音階情報）とビート情報（リズム）の組み合わせでできていることを用いて、その組み合わせを数値化して分類するなどの技術が提案されている（例えば、特許文献１参照）。
特開２０００−３５７９６号公報 At the same time, a device for storing music data has been developed, and a recording medium for storing a large amount of information has been proposed. It has become possible to simultaneously store a large amount of information on the same recording medium. For example, the recording medium includes an HDD, a semiconductor memory, and the like.
With the development of technology for storing these music data, a large amount of music data is stored on the same recording medium, so it is desirable to select the desired music data from them. It is becoming
For example, in the past, the user classifies in advance, classifies according to artist information, song name information, or the like added in advance to the music data, or the music data is the frequency information (scale information) and beat information (rhythm) of the sound data. A technique has been proposed in which the combination is numerically classified using the combination of the above (see, for example, Patent Document 1).
JP 2000-35796 A

しかしながら、上記の従来の技術を用いて、楽曲を分類したとしても、大量の楽曲が記録メディアに保存されている場合には、ある分類の楽曲数も多くなり、その中から所望の楽曲を探し出すのも困難となる。
本発明は、上述した事情に鑑みてなされたものであり、ユーザーが楽曲の選択等の操作をすることなく、そのときの外部環境に応じた楽曲を容易に得ることのできる車載音響機器を提供することを目的とする。 However, even if the music is classified using the above-described conventional technology, if a large amount of music is stored on the recording medium, the number of music in a certain category increases, and a desired music is searched from among them. It becomes difficult.
The present invention has been made in view of the above circumstances, without user operations such as selection of the music, the vehicle audio apparatus that can the be easily obtained music corresponding to the external environment at that time The purpose is to provide.

上記目的を達成するために、本発明は、複数の楽曲データを保存する楽曲データ保存手段と、前記楽曲データ保存手段に保存されている前記楽曲データのそれぞれについて、楽曲を表す特徴量を取得する楽曲特徴量取得手段と、車両走行中の車両の外部環境の明るさの経時変化を検出する車両外部環境特徴量検出手段と、前記楽曲データ保存手段に保存されている楽曲の中から再生する楽曲を検索する楽曲検索手段と、楽曲を再生する再生手段と、を備え、前記楽曲検索手段は、前記車両外部環境特徴量検出手段によって検出した前記車両の外部環境の明るさの経時変化を表す特徴量に応じた前記特徴量の楽曲データを前記楽曲データ保存手段から検索し、前記再生手段が該当する楽曲データを再生することを特徴とする車載音響機器を提供する。 In order to achieve the above object, the present invention obtains a feature value representing music for each of music data storage means for storing a plurality of music data and the music data stored in the music data storage means. Music feature quantity acquisition means, vehicle external environment feature quantity detection means for detecting a change in brightness of the external environment of the vehicle while the vehicle is running, and music to be reproduced from the music stored in the music data storage means A music search means for searching for music, and a playback means for playing back the music, wherein the music search means represents a temporal change in brightness of the external environment of the vehicle detected by the vehicle external environment feature quantity detection means. A vehicle-mounted acoustic device is provided, wherein music data having the characteristic amount according to the amount is searched from the music data storage unit, and the reproduction unit reproduces the corresponding music data. That.

また本発明は、上記発明において、車両に設けられ、車外を撮影する撮影手段を更に備え、前記車両の外部環境の明るさの経時変化を表す特徴量は、前記撮影手段により順次撮影される各画像の輝度に基づく前記外部環境の明るさの経時変化の周期性を示す周波数であることを特徴とする。 Further, the present invention according to the above-mentioned invention further includes a photographing unit that is provided in the vehicle and photographs the outside of the vehicle, and the feature amount representing the temporal change in brightness of the external environment of the vehicle is sequentially photographed by the photographing unit. characterized in that it is a frequency that indicates the periodicity of the brightness change with time of the external environment that is based on the brightness of the image.

また本発明は、上記発明において、前記車両の外部環境の明るさの経時変化を表す特徴量は、前記撮影手段により撮影された前記画像を複数の領域に分割し、各領域に輝度の経時変化の周波数成分を算出し、前記周波数成分の中からレベルが最大の周波数成分であることを特徴とする。 Further, the present invention is the above invention, wherein the feature amount representing a temporal change in brightness of the external environment of the vehicle is obtained by dividing the image taken by the photographing unit into a plurality of regions, and the temporal change in luminance in each region. and of calculating the frequency components, the level from among the frequency components, characterized in that the largest frequency component.

また本発明は、上記発明において、前記楽曲特徴量取得手段は、前記楽曲のビート周波数成分を算出し、前記楽曲の特徴量とすることを特徴とする。 Also, the present invention is characterized in that, in the above-mentioned invention, the music feature quantity acquisition means calculates a beat frequency component of the music and uses it as the feature quantity of the music.

また本発明は、上記発明において、前記再生手段により楽曲の再生が終了するごとに、前記楽曲検索手段は、前記車両の外部環境の明るさの経時変化を表す特徴量に応じた楽曲を検索し、前記再生手段が該当する楽曲を再生することを特徴とする。 The present invention searches in the above invention, each time the reproduction of the music by the pre-Symbol reproducing means is completed, the music retrieval means, the music corresponding to the feature value representing the temporal change brightness of the external environment of said vehicle The reproducing means reproduces the corresponding music piece.

また本発明は、上記発明において、前記再生手段は、前記楽曲検索手段による検索で、該当する楽曲が複数存在する場合、これらの楽曲を次々に再生することを特徴とする。 The present invention, in the above invention, before Symbol reproducing means, a search by the music retrieval means, if applicable song there is a plurality, characterized in that play these songs one after the other.

また本発明は、上記発明において、所定曲数の楽曲の再生が終了した場合に、前記楽曲検索手段は、前記車両の外部環境の明るさの経時変化を表す特徴量に応じた楽曲を検索し、前記再生手段が該当する楽曲を再生することを特徴とする。 According to the present invention, in the above invention, when the reproduction of a predetermined number of songs is completed, the song search means searches for a song according to a feature value representing a temporal change in brightness of the external environment of the vehicle. The reproduction means reproduces the corresponding music piece .

本発明によれば、外部環境に応じた楽曲が検索されるため、ユーザーは何ら操作をすることなく、そのときの外部環境の変化に応じた楽曲を得ることができる。
According to the present invention, the music corresponding to the external environment is searched, so that the user can obtain the music corresponding to the change of the external environment at that time without performing any operation.

以下、図面を参照して本発明の実施の形態について説明する。
図１は、本実施形態に係る楽曲情報処理装置１０の機能的構成を示すブロック図である。この楽曲情報処理装置１０は、車両に搭載される例えばカーオーディオ等の車載音響機器として構成されており、楽曲再生機能の他に、多数の楽曲を蓄積する蓄積機能、これらの楽曲の中から所定の楽曲を検索する検索機能を有し、特に、この検索機能においては、車両走行中の外部環境の変化に応じた楽曲を自動で検索する環境適応検索機能を有している。 Embodiments of the present invention will be described below with reference to the drawings.
FIG. 1 is a block diagram showing a functional configuration of a music information processing apparatus 10 according to the present embodiment. The music information processing apparatus 10 is configured as an in-vehicle acoustic device such as a car audio mounted on a vehicle. In addition to the music playback function, the music information processing apparatus 10 has a storage function for storing a large number of music, and a predetermined one of these songs. This search function has an environment adaptive search function that automatically searches for music according to changes in the external environment while the vehicle is running.

かかる楽曲情報処理装置１０の構成について具体的には、図１に示すように、楽曲情報処理装置１０は、システム制御装置１１と、メディア読取装置１２と、再生装置１３と、楽曲データ圧縮装置１４と、楽曲データ保存装置１５と、楽曲特徴量演算装置１６と、表示装置１７と、ユーザーインターフェイス装置１８と、画像取得装置１９と、画像特徴量取得装置２０と、楽曲再生制御装置２１とを備え、画像取得装置１９、画像特徴量取得装置２０及び楽曲再生制御装置２１により、環境適応検索部２２が構成されている。
上記システム制御装置１１は、本楽曲情報処理装置１０の各部を制御するものであり、演算手段としてのＣＰＵや、記憶手段としてのＲＡＭ及びＲＯＭを備え、当該ＲＯＭには、各種のプログラム及びデータが格納されている。 Specifically, as shown in FIG. 1, the music information processing apparatus 10 includes a system control apparatus 11, a media reading apparatus 12, a playback apparatus 13, and a music data compression apparatus 14. A music data storage device 15, a music feature amount computing device 16, a display device 17, a user interface device 18, an image acquisition device 19, an image feature amount acquisition device 20, and a music reproduction control device 21. The image acquisition device 19, the image feature amount acquisition device 20, and the music reproduction control device 21 constitute an environment adaptive search unit 22.
The system control device 11 controls each unit of the music information processing device 10 and includes a CPU as a calculation means and a RAM and a ROM as storage means. Various programs and data are stored in the ROM. Stored.

メディア読取装置１２は、システム制御装置１１の制御の下、ハードディスク、半導体メモリカード、光ディスク等の記録メディアから楽曲データを読み取り、再生装置１３及び楽曲データ圧縮装置１４にデジタル音声信号Ｄｍを出力する。
より具体的には、メディア読取装置１２は、記録メディアから楽曲データを読み取る場合、当該記録メディアに記録された多数の楽曲データのうち、システム制御装置１１により指示された楽曲データを読み取る。
このとき、一般に、記録メディアに記録されている楽曲データは、所定のサンプリングレート（例えば４４．１ｋＨｚ）でアナログ音声信号をサンプリングし、アナログ音声信号レベルを所定のビット長（例えば１６ｂｉｔ）で量子化して生成されたＰＣＭデータと呼ばれるデジタルデータとして記録されている。すなわち、メディア読取装置１２は、かかるＰＣＭデータを記録メディアから読み出し、上記所定のサンプリングレートに同期したビットレートでデジタル音声信号Ｄｍを順次再生装置１３及び楽曲データ圧縮装置１４にストリーミング出力することとなる。なお、楽曲再生をせずに圧縮保存のみが行われる場合には、メディア読取装置１２は、デジタル音声信号Ｄｍを楽曲データ圧縮装置１４にのみ出力する。 The media reading device 12 reads music data from a recording medium such as a hard disk, a semiconductor memory card, and an optical disk under the control of the system control device 11, and outputs a digital audio signal Dm to the playback device 13 and the music data compression device 14.
More specifically, when reading the music data from the recording medium, the media reading device 12 reads the music data instructed by the system control device 11 among the many music data recorded on the recording medium.
At this time, generally, the music data recorded on the recording medium is obtained by sampling an analog audio signal at a predetermined sampling rate (for example, 44.1 kHz) and quantizing the analog audio signal level by a predetermined bit length (for example, 16 bits). Are recorded as digital data called PCM data. That is, the media reading device 12 reads the PCM data from the recording medium, and sequentially outputs the digital audio signal Dm to the playback device 13 and the music data compression device 14 at a bit rate synchronized with the predetermined sampling rate. . In the case where only the compressed storage is performed without reproducing the music, the media reading device 12 outputs the digital audio signal Dm only to the music data compression device 14.

再生装置１３は、上記デジタル音声信号Ｄｍに基づいて楽曲を再生出力する。
楽曲データ圧縮装置１４は、システム制御装置１１の制御の下、上記デジタル音声信号Ｄｍに対して所定の符号化を用いて圧縮処理を行って圧縮楽曲データＤｍｐを生成し楽曲データ保存装置１５に出力する。また、楽曲データ圧縮装置１４は、楽曲の圧縮工程においては、楽曲を一定時間ごとに区切り、それぞれの区切期間ごとに楽曲の音圧データＤｓを生成しており、これらの音圧データＤｓを楽曲特徴量演算装置１６に順次出力する。
楽曲データ保存装置１５は、圧縮楽曲データＤｍｐを蓄積するものであり、多数の圧縮楽曲データＤｍｐを蓄積可能にすべく比較的容量の大きな記憶装置（例えばハードディスク装置）を備えている。 The playback device 13 plays back and outputs music based on the digital audio signal Dm.
The music data compression device 14 performs compression processing on the digital audio signal Dm using a predetermined encoding under the control of the system control device 11 to generate compressed music data Dmp and outputs it to the music data storage device 15. To do. In the music compression process, the music data compression device 14 divides the music at regular intervals, generates music sound pressure data Ds for each time period, and uses the sound pressure data Ds as the music data. The data are sequentially output to the feature amount calculation device 16.
The music data storage device 15 stores compressed music data Dmp, and includes a storage device (for example, a hard disk device) having a relatively large capacity so that a large number of compressed music data Dmp can be stored.

楽曲特徴量演算装置１６は、システム制御装置１１の制御の下、楽曲の音圧データＤｓに基づいて楽曲の特徴量を抽出して楽曲特徴量データＤｃを生成し、上記楽曲データ保存装置１５に出力するものである。より具体的には、楽曲特徴量演算装置１６は、上記楽曲データ圧縮装置１４から音圧データＤｓが入力されると、この音圧データＤｓの入力と同期して当該楽曲の特徴量を演算し、楽曲の圧縮処理の終了に伴って、演算結果である楽曲特徴量データＤｃを楽曲データ保存装置１５に出力する。この楽曲特徴量データＤｃとして、本実施形態では、楽曲データＤｍに含まれる特徴的な音の音圧（強度）経時変化を用いることとしている。 Under the control of the system control device 11, the music feature quantity computing device 16 extracts the music feature quantity based on the music sound pressure data Ds to generate music feature quantity data Dc, and stores it in the music data storage device 15. Output. More specifically, when the sound pressure data Ds is input from the music data compression device 14, the music feature amount calculation device 16 calculates the feature amount of the music in synchronization with the input of the sound pressure data Ds. As the music compression process ends, the music feature value data Dc, which is the calculation result, is output to the music data storage device 15. As the music feature amount data Dc, in this embodiment, the sound pressure (intensity) change with time of characteristic sounds included in the music data Dm is used.

楽曲特徴量データＤｃの生成についてより具体的には、図２に示すように、楽曲データ圧縮装置１４に楽曲のデジタル音声信号Ｄｍがストリーミング入力されると（ステップＳａ１）、上述のように楽曲データ圧縮装置１４は、このストリーミングデータＡ（ｉ）を一定時間ごとに区切り、この区切期間ごとにデジタル音声信号Ｄｍのビット値（すなわち、音声信号レベル）を２乗して音圧データＤｓを生成し、楽曲特徴量演算装置１６に順次出力する（ステップＳａ２）。楽曲特徴量演算装置１６は、音圧データＤｓが順次入力されると、楽曲の低音部分のみを抽出するために、各音圧データＤｓをローパスフィルタに通し、各音擦データＤｓの低周波数成分信号Ｄｓａを抽出し（ステップＳａ３）、レベルが最大の最大低周波数成分信号Ｄｓｂを各低周波数成分信号Ｄｓａから取得する（ステップＳａ４）。そして、上記ステップＳａ２〜ステップＳａ４までの各処理を、ストリーミングデータＡ（ｉ）の入力が終了まで繰り返し実行して（ステップＳａ５）、１曲分の楽曲を処理する。次いで、楽曲特徴量演算装置１６は、ステップＳａ４にて取得した最大低周波数成分信号Ｄｓｂのうち、これら最大低周波数成分信号Ｄｓｂの平均値に近いもの、すなわち、楽曲に含まれるビート音のビート周波数Ｆａを楽曲特徴量データＤｃとして取得する（ステップＳａ６）。 More specifically, with respect to the generation of the music feature data Dc, as shown in FIG. 2, when the music digital audio signal Dm is streamed to the music data compression apparatus 14 (step Sa1), the music data is recorded as described above. The compression device 14 divides the streaming data A (i) at regular intervals, and squares the bit value (that is, audio signal level) of the digital audio signal Dm for each division period to generate sound pressure data Ds. Then, it is sequentially output to the music feature amount computing device 16 (step Sa2). When the sound pressure data Ds is sequentially input, the music feature quantity computing device 16 passes each sound pressure data Ds through a low-pass filter in order to extract only the low sound portion of the music, and the low frequency component of each sound friction data Ds. The signal Dsa is extracted (step Sa3), and the maximum low frequency component signal Dsb having the maximum level is acquired from each low frequency component signal Dsa (step Sa4). Then, each process from step Sa2 to step Sa4 is repeatedly executed until the input of the streaming data A (i) is completed (step Sa5), and one piece of music is processed. Next, the music feature quantity computing device 16 has a value close to the average value of the maximum low frequency component signals Dsb among the maximum low frequency component signals Dsb acquired in step Sa4, that is, the beat frequency of the beat sound included in the music. Fa is acquired as music feature amount data Dc (step Sa6).

そして、上記のようにして取得された楽曲特徴量データＤｃが上記楽曲データ保存装置１５に出力される。楽曲データ保存装置１５は、楽曲特徴量演算装置１６から楽曲特徴量データＤｃを受け取ると、当該楽曲特徴量データＤｃを楽曲データ圧縮装置１４からの圧縮楽曲データＤｍｐと対応付けて記憶すべく、楽曲特徴量データベース３０を生成する。 Then, the music feature data Dc acquired as described above is output to the music data storage device 15. When the music data storage device 15 receives the music feature value data Dc from the music feature value calculation device 16, the music data storage device 15 stores the music feature value data Dc in association with the compressed music data Dmp from the music data compression device 14. A feature amount database 30 is generated.

図３は楽曲特徴データベース３０の構成を模式的に示す図である。この図に示すように、楽曲特徴データベース３０の１件のレコード３０Ａには、圧縮楽曲データＤｍｐを特定するためのストレージ名３１、フォルダ名３２及びファイル名３３と、この圧縮楽曲データＤｍｐの楽曲特徴量３４とが含まれている。ストレージ名３１は、楽曲データ保存装置１５が備えるハードディスク装置等の記憶装置を一意に特定するものであり、フォルダ名３２は、当該記憶装置における圧縮楽曲データＤｍｐの格納場所を示すものである。また、ファイル名３３は、圧縮楽曲データＤｍｐに付された名称であり、これらストレージ名３１、フォルダ名３２及びファイル名３３により圧縮楽曲データＤｍｐが一意に特定される。上記楽曲特徴量３４は楽曲特徴量データＤｃの内容を示すものであり、楽曲のビート周波数Ｆａが記録される。 FIG. 3 is a diagram schematically showing the configuration of the music feature database 30. As shown in this figure, one record 30A in the music feature database 30 includes a storage name 31, a folder name 32, a file name 33 for specifying the compressed music data Dmp, and a music feature of the compressed music data Dmp. A quantity 34 is included. The storage name 31 uniquely identifies a storage device such as a hard disk device included in the music data storage device 15, and the folder name 32 indicates the storage location of the compressed music data Dmp in the storage device. The file name 33 is a name given to the compressed music data Dmp, and the compressed music data Dmp is uniquely specified by the storage name 31, the folder name 32, and the file name 33. The music feature amount 34 indicates the content of the music feature amount data Dc, and the beat frequency Fa of the music is recorded.

圧縮楽曲データＤｍｐが楽曲データ保存装置１５に追加されるごとに、上記楽曲特徴データベース３０には、その圧縮楽曲データＤｍｐに関するレコード３０Ａが例えばシステム制御装置１１により追加され、これとは逆に、圧縮楽曲データＤｍｐが楽曲データ保存装置１５から削除されるごとに、その圧縮楽曲データＤｍｐに対応するレコード３０Ａが例えばシステム制御装置１１により楽曲特徴データベース３０から削除されて、当該楽曲特徴データベース３０が更新される。 Each time the compressed music data Dmp is added to the music data storage device 15, a record 30A related to the compressed music data Dmp is added to the music feature database 30 by, for example, the system controller 11, and on the contrary, compression is performed. Each time the song data Dmp is deleted from the song data storage device 15, the record 30A corresponding to the compressed song data Dmp is deleted from the song feature database 30 by the system control device 11, for example, and the song feature database 30 is updated. The

再び前掲図１に戻り、表示装置１７は、システム制御装置１１の制御の下、再生装置１３が再生している楽曲の情報や各種パラメータ、上記楽曲特徴量を表示するものであり、また、ユーザーインターフェイス装置１８は複数の操作子や操作パネル等を備え、ユーザーの指示入力を受け付け、システム制御装置１１に出力するものである。 Returning to FIG. 1 again, the display device 17 displays the information and various parameters of the music being played back by the playback device 13 under the control of the system control device 11, and the music feature amount. The interface device 18 includes a plurality of operating elements, an operation panel, and the like, and receives a user's instruction input and outputs it to the system control device 11.

環境適応検索部２２は、車両の外部環境に応じた楽曲を楽曲データ保存装置１５に蓄積されている圧縮楽曲データＤｍｐから検索し、該当する圧縮楽曲データＤｍｐを再生装置１３に出力して再生させるものである。
詳述すると、環境適応検索部２２が備える画像取得装置１９は、車外の画像を画像データＤｇとして画像特徴量取得装置２０に順次出力するものであり、車室内或いは車外に設置された撮影手段としてのカメラを備えている。このカメラとしては、運転者の視野を含む広角カメラや、車両側面映像或いは車両後方映像を撮影するカメラが車両に既に設けられている場合には、そのカメラの映像信号を分岐して画像取得装置１９に入力するように構成することも可能である。 The environment adaptive search unit 22 searches the compressed music data Dmp stored in the music data storage device 15 for music according to the external environment of the vehicle, and outputs the corresponding compressed music data Dmp to the playback device 13 for playback. Is.
More specifically, the image acquisition device 19 included in the environment adaptive search unit 22 sequentially outputs an image outside the vehicle as image data Dg to the image feature amount acquisition device 20 and serves as a photographing unit installed inside or outside the vehicle. Has a camera. As this camera, if a vehicle has already been provided with a wide-angle camera including a driver's field of view or a vehicle that captures a vehicle side image or a vehicle rear image, an image acquisition device that branches the video signal of the camera. It is also possible to configure so as to input to 19.

画像特徴量取得装置２０は、画像取得装置１９から順次出力される画像データＤｇに基づいて、画像の特徴量としての輝度の経時変化を検出し、画像特徴量データＤｇｃとしてシステム制御装置１１に出力するものである。すなわち、画像特徴量取得装置２０は、画像取得装置１９から順次取得する画像データＤｇの輝度から輝度経時変化を検出し、当該輝度経時変化の周期性を示す周期成分を抽出し、画像特徴量データＤｇｃとしてシステム制御装置１１に出力しており、かかる画像特徴量データＤｇｃが所定のタイミングでシステム制御装置１１から楽曲再生制御装置２１に入力される。 Based on the image data Dg sequentially output from the image acquisition device 19, the image feature amount acquisition device 20 detects a change in luminance with time as an image feature amount and outputs the detected image feature amount data Dgc to the system control device 11. To do. In other words, the image feature amount acquisition device 20 detects a luminance change with time from the luminance of the image data Dg sequentially acquired from the image acquisition device 19, extracts a periodic component indicating the periodicity of the luminance change with time, and extracts image feature amount data. The image feature amount data Dgc is input to the music reproduction control device 21 from the system control device 11 at a predetermined timing.

また、画像特徴量取得装置２０は、画像の輝度を検出する検出モードとして、画像データＤｇごとに画像全体の平均輝度を求め、各画像データＤｇの平均輝度の経時変化を輝度経時変化として検出する第１検出モードと、画像データＤｇごとに画像全体を２以上の複数の矩形に分割し、それぞれの矩形部分ごとに特徴量としての輝度を求め、それらの輝度の中の１つを画像データＤｇの輝度ととして、各画像データＤｇの輝度の経時変化を輝度経時変化として検出する第２検出モードとを備え、第１及び第２検出モードのどちらの検出モードで輝度経時変化を検出するかがシステム制御装置１１によって指示される。 Further, as a detection mode for detecting the luminance of the image, the image feature quantity acquisition device 20 obtains the average luminance of the entire image for each image data Dg, and detects the temporal change in the average luminance of each image data Dg as the luminance temporal change. In the first detection mode, the entire image is divided into two or more rectangles for each image data Dg, luminance as a feature amount is obtained for each rectangular portion, and one of the luminances is determined as image data Dg. A second detection mode for detecting a change with time in luminance of each image data Dg as a change with time in luminance, and in which of the detection modes of the first and second detection modes the change in luminance with time is detected. Instructed by the system controller 11.

上記第１検出モードによれば、車両の外部環境における輝度の全体的な輝度経時変化が検出され、また、第２検出モードによれば、外部環境が局所部分に区切られ、それぞれの部分ごとに輝度経時変化が算出されるため、外部環境の輝度経時変化がより正確に検出される。 According to the first detection mode, an overall luminance change with time in the external environment of the vehicle is detected, and according to the second detection mode, the external environment is divided into local parts, and for each part. Since the luminance change with time is calculated, the luminance change with time in the external environment can be detected more accurately.

図４は、上記画像取得装置１９が取得する画像データＤｇの画像４０の一態様を模式的に示す図である。なお、この図には、車両前方を撮影するようにカメラが設置された場合を示す。この図に示すように、車両が道路等を走行しているときには、車両前方のセンターライン５０を含む路面５１と、路側５２に道路に沿って所定の間隔で設置された街路灯５３とを写した画像４０が得られる。 FIG. 4 is a diagram schematically illustrating an aspect of the image 40 of the image data Dg acquired by the image acquisition device 19. This figure shows a case where a camera is installed so as to photograph the front of the vehicle. As shown in this figure, when the vehicle is traveling on a road or the like, a road surface 51 including a center line 50 in front of the vehicle and a street light 53 installed at a predetermined interval along the road on the road side 52 are copied. The obtained image 40 is obtained.

画像特徴量取得装置２０は、上記第２検出モードによって輝度経時変化を検出する場合、画像４０をメッシュ状に縦横１２個の矩形領域６０に区切り、それぞれの矩形領域６０について輝度の時間変化を取得する。１２個の矩形領域６０のそれぞれに６０Ａ１〜６０Ｄ３までの符号を付すと、車両が略一定速度で走行している場合、矩形領域６０Ｃ１、Ｃ２及びＣ３では、センターライン５０に起因する定期的（周期的）な輝度変化成分が検出され、また、矩形領域Ｃ１、Ｄ１、Ｄ２では、街路灯５３に起因する定期的（周期的）な輝度変化成分が現れる。特に、夜間の走行においては、街路灯５３の点灯により、街路灯５３による輝度変化成分が顕著となる。 When detecting the luminance change with time in the second detection mode, the image feature amount acquisition device 20 divides the image 40 into 12 rectangular regions 60 in the vertical and horizontal directions in a mesh form, and acquires the temporal change in luminance for each rectangular region 60. To do. When the signs of 60A1 to 60D3 are attached to each of the twelve rectangular areas 60, when the vehicle is traveling at a substantially constant speed, the rectangular areas 60C1, C2, and C3 are periodically (periodic) due to the center line 50. Brightness change component is detected, and in the rectangular areas C1, D1, and D2, a periodic (periodic) brightness change component due to the street lamp 53 appears. In particular, during night driving, the luminance change component due to the street lamp 53 becomes noticeable due to the lighting of the street lamp 53.

画像特徴量取得装置２０は、画像取得装置１９から画像データＤｇが順次入力されると、各画像データＤｇに基づいて、矩形領域６０Ａ１〜６０Ｄ３のそれぞれの輝度経時変化を検出し、各輝度経時変化のうち、輝度変化量（輝度レベル）が最大のものの周波数成分を画像の特徴量とし、画像特徴量データＤｇｃを生成してシステム制御装置１１に出力する。 When the image data Dg is sequentially input from the image acquisition device 19, the image feature amount acquisition device 20 detects the luminance change with time of each of the rectangular regions 60 A 1 to 60 D 3 based on the image data Dg, and changes the luminance change with time. Among them, the frequency component having the maximum luminance change amount (luminance level) is used as the image feature amount, and image feature amount data Dgc is generated and output to the system control device 11.

画像の特徴量の演算についてより詳細に説明すると、上記第２検出モードにあっては、図５に示すように、画像特徴量取得装置２０は、画像データＤｇを画像取得装置１９から取得すると（ステップＳｂ１）、その画像データＤｇを例えばＲＡＭ等などに一時的に格納して保存する（ステップＳｂ２）。次いで、画像特徴量取得装置２０は、画像データＤｇの画像４０を１２分割して１２個の上記矩形領域６０Ａ１〜６０Ｄ３を生成し（ステップＳｂ３）、各矩形領域６０Ａ１〜６０Ｄ３の輝度を算出して（ステップＳｂ４）、これらの輝度を１組にしてＲＡＭ等に格納し一時保存する（ステップＳｂ５）。なお、上記ステップＳｂ４においては、矩形領域６０に含まれる全画素の輝度値の平均値を輝度として求めても良く、或いは、矩形領域６０に含まれる最大輝度値を当該矩形領域６０の輝度として求めても良い。 The calculation of the image feature amount will be described in more detail. In the second detection mode, as shown in FIG. 5, the image feature amount acquisition device 20 acquires the image data Dg from the image acquisition device 19 ( In step Sb1), the image data Dg is temporarily stored in, for example, a RAM or the like and saved (step Sb2). Next, the image feature quantity acquisition device 20 divides the image 40 of the image data Dg into 12 to generate the 12 rectangular areas 60A1 to 60D3 (step Sb3), and calculates the luminance of each rectangular area 60A1 to 60D3. (Step Sb4) These luminances are set as one set and stored in a RAM or the like and temporarily stored (Step Sb5). In step Sb4, the average value of the luminance values of all the pixels included in the rectangular area 60 may be obtained as the luminance, or the maximum luminance value included in the rectangular area 60 is obtained as the luminance of the rectangular area 60. May be.

画像特徴量取得装置２０は、一定時間分（或いは一定数）の画像データＤｇを取得するまで、上記ステップＳｂ１〜ステップＳｂ５の処理を繰り返し実行し（ステップＳｂ６）、画像データＤｇごとに矩形領域６０Ａ１〜６０Ｄ３の１組の輝度を求める。例えば、画像取得装置１９が毎秒３０フレーム（画像）分の画像データＤｇを取得し、画像特徴量取得装置２０に入力する場合、当該画像特徴量取得装置２０により、毎秒３０組の輝度が生成されて保存されることとなる。 The image feature quantity acquisition device 20 repeatedly executes the processing of step Sb1 to step Sb5 until it acquires the image data Dg for a certain time (or a certain number) (step Sb6), and the rectangular area 60A1 for each image data Dg. Find a set of luminances of ~ 60D3. For example, when the image acquisition device 19 acquires image data Dg for 30 frames (images) per second and inputs it to the image feature amount acquisition device 20, the image feature amount acquisition device 20 generates 30 sets of luminance per second. Will be saved.

その後、画像特徴量取得装置２０は、輝度変化の周期性を求めるべく、矩形領域６０Ａ１〜６０Ｄ３ごとに輝度変化の周波数成分を算出する（ステップＳｂ７）。この周波数成分の算出においては、例えば、ある矩形領域６０の輝度の経時変化波形が１秒間に１回のピークが出現する波形である場合、その矩形領域６０の輝度経時変化波形は、周波数が６０／ｍｉｎ、大きさがピーク強度の周波数成分を有することになる。画像特徴量取得装置２０は、１つの画像データＤｇについて矩形領域６０Ａ１〜６０Ｄ３の各周波数成分を算出した後、強度が最大の周波数成分、すなわち、車両搭乗者が最も感じる光の成分を選択し（ステップＳｂ８）、この周波数成分を画像特徴量として設定することになる（ステップＳｂ９）。そして、このようにして決定した画像特徴量を更新すべく、画像特徴量取得装置２０は、ステップＳｂ２〜Ｓｂ９を順次繰り返す（ステップＳｂ１０）。 Thereafter, the image feature quantity acquisition device 20 calculates the frequency component of the luminance change for each of the rectangular regions 60A1 to 60D3 in order to obtain the periodicity of the luminance change (step Sb7). In the calculation of the frequency component, for example, when the luminance temporal change waveform of a certain rectangular region 60 is a waveform in which a peak appears once per second, the luminance temporal change waveform of the rectangular region 60 has a frequency of 60. / Min, which has a frequency component having a peak intensity. The image feature quantity acquisition device 20 calculates each frequency component of the rectangular regions 60A1 to 60D3 for one image data Dg, and then selects the frequency component having the maximum intensity, that is, the light component most felt by the vehicle occupant ( In step Sb8), this frequency component is set as an image feature amount (step Sb9). Then, in order to update the image feature amount determined in this way, the image feature amount acquisition apparatus 20 sequentially repeats steps Sb2 to Sb9 (step Sb10).

さて、前掲図１に示す楽曲再生制御装置２１は、システム制御装置１１から検索指示を受けた場合に、当該システム制御装置１１から入力された画像特徴量データＤｇｃに基づいて、楽曲データ保存装置１５に蓄積されている楽曲特徴量データＤｃの中から、画像特徴量データＤｇｃに類似する特徴を有する楽曲特徴量データＤｃを検索し、該当する楽曲特徴量データＤｃに対応付けられている圧縮楽曲データＤｍｐを再生装置１３に出力するものである。この再生装置１３は、圧縮楽曲データＤｍｐの圧縮を伸展して再生する機能を有し、楽曲再生制御装置２１から圧縮楽曲データＤｍｐが入力された場合には、この圧縮楽曲データＤｍｐを伸展して楽曲を再生する。 When the music reproduction control device 21 shown in FIG. 1 receives a search instruction from the system control device 11, the music data storage device 15 is based on the image feature data Dgc input from the system control device 11. The music feature quantity data Dc having a feature similar to the image feature quantity data Dgc is searched from the music feature quantity data Dc stored in the music, and the compressed music data associated with the corresponding music feature quantity data Dc is searched. Dmp is output to the playback device 13. The playback device 13 has a function of expanding and playing back the compressed music data Dmp. When the compressed music data Dmp is input from the music playback control device 21, the playback device 13 expands the compressed music data Dmp. Play a song.

以上の構成の下、ユーザーインターフェイス装置１８がユーザーによって操作される等して、外部環境の変化に応じた楽曲の自動検索及び再生が指示されると、システム制御装置１１は、環境適応検索部２２を制御して、車外の輝度変化の特徴（周期性）を示す画像特徴量を検出する。そして、システム制御装置１１は、楽曲再生制御装置２１を制御して、画像特徴量に類似した特徴を有する楽曲特徴量の楽曲（すなわち、画像特徴量が示す周波数と近似するビート周波数Ｆａを有する楽曲）を楽曲データ保存装置１５に蓄積されている圧縮楽曲データＤｍｐの中から検索する。そして、システム制御装置１１は、検索に該当する圧縮楽曲データＤｍｐを再生装置１３に再生させ、また、表示装置１７に圧縮楽曲データＤｍｐの情報（タイトルやアーティスト名等）及び画像特徴量を表示させる。その後、システム制御装置１１は、ユーザーによって指示されるまで、１曲分の楽曲再生が終了するごとに新たな画像特徴量を取得し、当該画像特徴量に基づく検索及び再生を繰り返す。つまり、図６に示すように、１曲分の楽曲再生が終了するごとに、外部環境の変化を示す画像特徴量が取得され、その画像特徴量に合致する、或いは、近い値の楽曲特徴量を有する楽曲が再生されることとなる。 Under the above configuration, when the user interface device 18 is operated by the user or the like, and the automatic search and reproduction of the music according to the change of the external environment is instructed, the system control device 11 includes the environment adaptive search unit 22. To detect an image feature amount indicating a feature (periodicity) of luminance change outside the vehicle. Then, the system control device 11 controls the music reproduction control device 21 so that the music has a music feature amount similar to the image feature amount (that is, the music having the beat frequency Fa that approximates the frequency indicated by the image feature amount). ) Is searched from the compressed music data Dmp stored in the music data storage device 15. Then, the system control device 11 causes the playback device 13 to play back the compressed music data Dmp corresponding to the search, and causes the display device 17 to display the information (title, artist name, etc.) and the image feature amount of the compressed music data Dmp. . Thereafter, the system control device 11 obtains a new image feature amount every time the music playback for one song is completed, and repeats the search and reproduction based on the image feature amount until instructed by the user. That is, as shown in FIG. 6, every time music playback for one song is completed, an image feature amount indicating a change in the external environment is acquired, and a song feature amount that matches or is close to the image feature amount. Will be played.

このように、本実施形態によれば、楽曲とその特徴量とを対応付けて楽曲データ保存装置１５に保存しておき、車両走行中の外部環境の輝度変化を取得して、当該輝度変化に応じた特徴量の楽曲を検索するようにしたため、外部環境に応じた楽曲が自動で検索され、ユーザーは何ら操作せずとも、多数の楽曲の中から外部環境の変化に応じた楽曲を簡単に見つけることができる。
特に、本実施形態によれば、外部環境の変化として輝度の変化を取得するため、搭乗者の視覚的に感じる明るさの周期性に合致した楽曲を検索することができる。これにより、ユーザーが車両によって、昼真の街中や郊外、高速道路、夜の街中や郊外、高速道路といった色々な環境の中を走行している場合であっても、ユーザーが視覚的に感知している状況を反映した楽曲を得ることができる。 As described above, according to the present embodiment, the music and the feature amount thereof are associated with each other and stored in the music data storage device 15, and the luminance change of the external environment during the traveling of the vehicle is acquired, and the luminance change is obtained. Since the music with the corresponding feature amount is searched, the music according to the external environment is automatically searched, and the user can easily select the music according to the change of the external environment from many music without any operation. Can be found.
In particular, according to the present embodiment, since a change in luminance is acquired as a change in the external environment, it is possible to search for music that matches the periodicity of brightness visually felt by the passenger. As a result, even when the user is driving in various environments such as a true city or suburb, a highway, a night city or suburb, or a highway with a vehicle, the user can visually detect it. The music that reflects the current situation can be obtained.

また、本実施形態によれば、車外を撮影するカメラからの各画像４０の輝度に基づいて、外部環境の輝度の経時変化を取得する構成としたため、車両に既設されているカメラを用いて簡単に外部環境（車外）の輝度変化を検出することができる。
特に、本実施形態によれば、画像４０を複数の矩形領域６０に分割し、各矩形領域６０ごとに輝度の経時変化の周波数成分を算出し、これらの周波数成分の中からレベルが最大の周波数成分を外部環境の輝度変化の特徴量とするため、車両搭乗者が最も強く感じる輝度の成分の周期性を正確に抽出して特徴量とすることができる。 In addition, according to the present embodiment, since it is configured to acquire the temporal change of the luminance of the external environment based on the luminance of each image 40 from the camera that captures the outside of the vehicle, it is easy to use the camera already installed in the vehicle. In addition, it is possible to detect a change in luminance in the external environment (outside the vehicle).
In particular, according to the present embodiment, the image 40 is divided into a plurality of rectangular regions 60, the frequency component of the luminance change with time is calculated for each rectangular region 60, and the frequency having the maximum level among these frequency components is calculated. Since the component is the feature amount of the luminance change in the external environment, the periodicity of the luminance component that the vehicle occupant feels most strongly can be accurately extracted and used as the feature amount.

また、本実施形態によれば、楽曲の再生が終了するごとに、外部環境の輝度変化を取得し、当該外部環境の輝度変化に基づく検索を実行し、この検索に該当する楽曲を再生する構成としたため、そのときの外部環境の輝度変化の周期性に合致した楽曲を常に再生させておくことができる。 In addition, according to the present embodiment, every time reproduction of music is completed, the luminance change of the external environment is acquired, the search based on the luminance change of the external environment is executed, and the music corresponding to this search is reproduced. Therefore, music that matches the periodicity of the luminance change of the external environment at that time can always be played.

なお、上述した実施形態は、あくまでも本発明の一態様を示すものであり、本発明の範囲内で任意に変形及び応用が可能である。
（変形例１）
例えば、上述した実施形態では、１曲分の楽曲の再生が終了するごとに、外部環境の輝度変化を取得するようにしたが、これに限らない。すなわち、検索の結果、該当する楽曲が複数存在する場合には、これらの楽曲を次々に再生するようにしても良い。例えば、画像特徴量の固定指示と、固定解除指示とをユーザーインターフェイス装置１８からシステム制御装置１１に入力可能に構成し、図７に示すように、画像特徴量の固定指示が入力された場合には、そのときの画像特徴量に基づく検索に該当する複数の楽曲を、固定解除指示が入力されるまで次々に再生し、固定解除指示が入力されたときに、新たに画像特徴量を取得し、その画像特徴量に基づく検索に該当する楽曲を再生する。
本変形例によれば、郊外のバイパス道路や高速道路などの比較的交通量が少なく車両が略一定の速度で走行するような場合には、ユーザーが画像特徴量の固定指示を一度与えれば、その走行に対応した楽曲が順次再生される。 In addition, embodiment mentioned above shows the one aspect | mode of this invention to the last, and a deformation | transformation and application are arbitrarily possible within the scope of the present invention.
(Modification 1)
For example, in the above-described embodiment, the luminance change in the external environment is acquired every time the reproduction of the music for one song is completed, but the present invention is not limited to this. That is, as a result of the search, when there are a plurality of corresponding music pieces, these music pieces may be reproduced one after another. For example, when an image feature amount fixing instruction and a fixing release instruction are configured to be input from the user interface device 18 to the system control device 11 and an image feature amount fixing instruction is input as shown in FIG. Plays a plurality of songs corresponding to the search based on the image feature amount at that time one after another until the unlocking instruction is input, and when the unlocking instruction is input, a new image feature amount is acquired. The music corresponding to the search based on the image feature amount is reproduced.
According to this modification, when the vehicle travels at a substantially constant speed with relatively little traffic such as a suburban bypass road or a highway, once the user gives an instruction to fix the image feature amount, The music corresponding to the running is sequentially played back.

（変形例２）
また、上記変形例１において、画像特徴量の固定指示がなされている場合、システム制御装置１１が、図８に示すように、所定曲数（例えば５曲）の楽曲が再生終了するごとに、画像特徴量を新たに取得し、この画像特徴量に基づく検索に該当する楽曲を１曲（複数曲でも良い）分再生する割り込み制御を実行し、また、その再生が終了した時点で割り込み制御前の画像特徴量に対応する楽曲を再生する割り込み解除制御を実行するようにしても良い。
本変形例によれば、画像特徴量の固定指示によって、ユーザーにとって聴覚的に入ってくる情報と視覚的に入ってくる情報のタイミングがほぼ同期した状態が続くことになるが、割り込み制御及び割り込み解除制御を実行することで、その同期した状態を一時的にはすして、ユーザーに対して聴覚的な刺激を意図的に与えることが可能となる。 (Modification 2)
In the first modification, when an instruction to fix the image feature amount is given, as shown in FIG. 8, the system control device 11 every time a predetermined number of songs (for example, 5 songs) finish playing. Performs interrupt control to acquire a new image feature value and play back one song (or multiple songs) corresponding to the search based on this image feature value. It is also possible to execute interrupt release control for playing music corresponding to the image feature amount.
According to this modification, the timing of the information that is audibly heard and the information that is visually entered continues to be synchronized with the user by the instruction to fix the image feature amount. By executing the release control, it is possible to intentionally give an audible stimulus to the user while temporarily suspending the synchronized state.

（変形例３）
また、上述した実施形態では、画像特徴量と合致する楽曲特徴量、すなわち、輝度変化の周波数と同じビート周波数を有する楽曲を検索するようにしたが、この検索の結果、該当する楽曲が無い場合、或いは、楽曲数が所定曲数以下（例えば２〜３曲）の場合には、輝度変化の周波数を中心とした所定周波数範囲に含まれるビート周波数を有する楽曲を検索するようにしても良い。
また、輝度変化の周波数から所定周波数だけ離れたビート周波数を有する楽曲を検索するようにし、外部環境の変化と敢えてミスマッチな楽曲を検索し、再生するようにしても良い。 (Modification 3)
In the above-described embodiment, the music feature amount that matches the image feature amount, that is, the music having the same beat frequency as the luminance change frequency is searched. However, as a result of this search, there is no corresponding music. Alternatively, when the number of music pieces is equal to or less than a predetermined number of music pieces (for example, 2 to 3 music pieces), a music piece having a beat frequency included in a predetermined frequency range centering on the frequency of luminance change may be searched.
Alternatively, music having a beat frequency separated from the frequency of luminance change by a predetermined frequency may be searched, and music that mismatches with the change in the external environment may be searched and played back.

（変形例４）
また、上述した実施形態及び各変形例において、外部環境の輝度変化を画像から検出する構成を例示したが、これに限らず、照度センサ等のセンサを用いて検出するようにしても良い。また、外部環境の輝度変化に対応した楽曲を、楽曲データ保存装置１５に蓄積された楽曲から検索する構成としたが、これに限らず、例えば、インターネット等を介してサーバコンピュータと通信可能に楽曲情報処理装置１０を構成し、当該サーバコンピュータに蓄積されている楽曲を対象に検索し、該当する楽曲を受信して再生するようにしても良い。 (Modification 4)
Further, in the above-described embodiment and each modified example, the configuration in which the luminance change of the external environment is detected from the image is illustrated, but the present invention is not limited thereto, and may be detected using a sensor such as an illuminance sensor. In addition, the music corresponding to the luminance change in the external environment is searched from the music stored in the music data storage device 15, but the present invention is not limited to this. For example, the music can be communicated with the server computer via the Internet or the like. The information processing apparatus 10 may be configured to search for music stored in the server computer, and receive and play back the corresponding music.

本発明の実施形態に係る楽曲情報処理装置の機能的構成を示すブロック図。The block diagram which shows the functional structure of the music information processing apparatus which concerns on embodiment of this invention. 楽曲特徴量演算処理のフローチャート。The flowchart of a music feature-value calculation process. 楽曲特徴データベース３０の構成を模式的に示す図。The figure which shows the structure of the music feature database 30 typically. 画像の一態様を模式的に示す図。The figure which shows the one aspect | mode of an image typically. 画像特徴量演算処理のフローチャート。The flowchart of an image feature-value calculation process. 外部環境に応じた楽曲の検索、再生を示す図。The figure which shows search and reproduction | regeneration of the music according to an external environment. 本発明の変形例の動作を説明するための図。The figure for demonstrating the operation | movement of the modification of this invention. 本発明の他の変形例の動作を説明するための図。The figure for demonstrating operation | movement of the other modification of this invention.

符号の説明Explanation of symbols

１０楽曲情報処理装置（車載音響機器）
１１システム制御装置
１３再生装置
１５楽曲データ保存装置
１９画像取得装置
２０画像特徴量取得装置
２１楽曲再生制御装置
２２環境適応検索部
３０楽曲特徴データベース
４０画像
６０矩形領域 10 Music information processing device (vehicle audio equipment)
DESCRIPTION OF SYMBOLS 11 System control apparatus 13 Playback apparatus 15 Music data storage apparatus 19 Image acquisition apparatus 20 Image feature-value acquisition apparatus 21 Music reproduction control apparatus 22 Environment adaptive search part 30 Music feature database 40 Image 60 Rectangular area | region

Claims

複数の楽曲データを保存する楽曲データ保存手段と、Music data storage means for storing a plurality of music data;
前記楽曲データ保存手段に保存されている前記楽曲データのそれぞれについて、楽曲を表す特徴量を取得する楽曲特徴量取得手段と、For each of the music data stored in the music data storage means, music feature quantity acquisition means for acquiring a feature quantity representing the music;
車両走行中の車両の外部環境の明るさの経時変化を表す特徴量を検出する車両外部環境特徴量検出手段と、Vehicle external environment feature quantity detection means for detecting a feature quantity representing a change over time in the brightness of the external environment of the vehicle while the vehicle is running;
前記楽曲データ保存手段に保存されている楽曲の中から再生する楽曲を検索する楽曲検索手段と、Music search means for searching for music to be played from the music stored in the music data storage means;
楽曲を再生する再生手段と、を備え、Playing means for playing music,
前記楽曲検索手段は、前記車両外部環境特徴量検出手段によって検出した前記車両の外部環境の明るさの経時変化を表す特徴量に応じた前記特徴量の楽曲データを前記楽曲データ保存手段から検索し、前記再生手段が該当する楽曲データを再生するThe music search means searches the music data storage means for music data of the feature quantity according to the feature quantity representing the temporal change in brightness of the external environment of the vehicle detected by the vehicle external environment feature quantity detection means. The reproduction means reproduces the corresponding music data
ことを特徴とする車載音響機器。In-vehicle audio equipment characterized by the above.

請求項１に記載の車載音響機器において、
車両に設けられ、車外を撮影する撮影手段を更に備え、
前記車両の外部環境の明るさの経時変化を表す特徴量は、前記撮影手段により順次撮影される各画像の輝度に基づく前記外部環境の明るさの経時変化の周期性を示す周波数である
ことを特徴とする車載音響機器。 The in- vehicle audio device according to claim 1,
The camera further includes a photographing means for photographing the outside of the vehicle,
Feature value representing the temporal change brightness of the external environment of said vehicle, said the frequency showing the periodicity of change with time of the brightness of the external environment that is based on the luminance of each image sequentially captured by the imaging means In- vehicle audio equipment characterized by

請求項２に記載の車載音響機器において、
前記車両の外部環境の明るさの経時変化を表す特徴量は、前記撮影手段により撮影された前記画像を複数の領域に分割し、各領域の輝度の経時変化の周波数成分を算出し、前記周波数成分の中でレベルが最大の周波数成分である
ことを特徴とする車載音響機器。 The in- vehicle audio device according to claim 2,
Feature value representing the temporal change brightness of the external environment of the vehicle, the image captured by the imaging means into a plurality of regions, it calculates the frequency components of the change with time of the brightness of each region, the frequency vehicle audio equipment, characterized in that the level in the component is at a maximum frequency component.

請求項１に記載の車載音響機器において、
前記楽曲特徴量取得手段は、前記楽曲のビート周波数成分を算出し、前記楽曲の特徴量とすることを特徴とする車載音響機器。 The in- vehicle audio device according to claim 1 ,
The on- vehicle acoustic device characterized in that the music feature quantity acquisition means calculates a beat frequency component of the music and uses it as a feature quantity of the music.

請求項１に記載の車載音響機器において、
前記再生手段により楽曲の再生が終了するごとに、前記楽曲検索手段は、前記車両の外部環境の明るさの経時変化を表す特徴量に応じた楽曲を検索し、前記再生手段が該当する楽曲を再生することを特徴とする車載音響機器。 The in- vehicle audio device according to claim 1 ,
Each time before Symbol reproduction of the music by reproducing means is completed, the music retrieval means retrieves the music corresponding to the feature value representing the temporal change brightness of the external environment of the vehicle, music the playback unit corresponds Car audio equipment characterized by playing

請求項１に記載の車載音響機器において、
前記再生手段は、前記楽曲検索手段による検索で、該当する楽曲が複数存在する場合、これらの楽曲を次々に再生することを特徴とする車載音響機器。 The in- vehicle audio device according to claim 1 ,
Before SL reproducing means, a search by the music retrieval means, if applicable song there are a plurality of in-vehicle audio apparatus, characterized in that playing these songs one after the other.

請求項１に記載の車載音響機器において、
所定曲数の楽曲の再生が終了した場合に、前記楽曲検索手段は、前記車両の外部環境の明るさの経時変化を表す特徴量に応じた楽曲を検索し、前記再生手段が該当する楽曲を再生することを特徴とする車載音響機器。 The in- vehicle audio device according to claim 1 ,
When the reproduction of a predetermined number of songs is completed, the song search means searches for a song according to a feature value representing a change in brightness of the external environment of the vehicle, and the playback means selects the corresponding song. On- vehicle audio equipment characterized by reproduction .