JP4737804B2 - 音声信号処理装置及び信号処理装置 - Google Patents
音声信号処理装置及び信号処理装置 Download PDFInfo
- Publication number
- JP4737804B2 JP4737804B2 JP2000224162A JP2000224162A JP4737804B2 JP 4737804 B2 JP4737804 B2 JP 4737804B2 JP 2000224162 A JP2000224162 A JP 2000224162A JP 2000224162 A JP2000224162 A JP 2000224162A JP 4737804 B2 JP4737804 B2 JP 4737804B2
- Authority
- JP
- Japan
- Prior art keywords
- signal processing
- digital
- output
- circuit
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000012545 processing Methods 0.000 title claims description 127
- 230000005236 sound signal Effects 0.000 title claims description 63
- 238000001514 detection method Methods 0.000 claims description 34
- 230000004807 localization Effects 0.000 claims description 13
- 238000000034 method Methods 0.000 claims description 7
- 238000005070 sampling Methods 0.000 claims description 6
- 230000010354 integration Effects 0.000 claims description 5
- 230000005540 biological transmission Effects 0.000 claims description 3
- 210000003128 head Anatomy 0.000 description 21
- 238000010586 diagram Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 7
- 238000006073 displacement reaction Methods 0.000 description 6
- 230000033001 locomotion Effects 0.000 description 6
- 238000012546 transfer Methods 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 5
- 210000005069 ears Anatomy 0.000 description 5
- 238000004891 communication Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 239000003990 capacitor Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S1/00—Two-channel systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/12—Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
- H04S7/303—Tracking of listener position or orientation
- H04S7/304—For headphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S1/00—Two-channel systems
- H04S1/007—Two-channel systems in which the audio signals are in digital form
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- General Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Stereophonic System (AREA)
- Circuit For Audible Band Transducer (AREA)
- Gyroscopes (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、仮想音像定位処理を行うようにした音声信号処理装置及び信号処理装置に関する。
【０００２】
【従来の技術】
近年、動作センサを用い仮想音像定位を行うようにした音声映像再生装置が数多く提案されている。例えば頭外仮想音像定位ヘッドホンのように、リスナの頭部の回転角度を検出して、デジタル信号処理により検出された角度データに対応して音声信号を頭外に仮想音像定位させるための信号処理を施すようにしたものが提案されている。
【０００３】
この従来の、角度データに対応した音声信号を頭外に仮想音像定位させるための信号処理を施すようにした音声信号処理装置につき、図６〜図１０を用いて以下説明する。図６はヘッドホン受聴において音像の定位位置がリスナの前方におかれた２個のスピーカが放音しているのと同じ位置に仮想音像定位させるようにした、回転角度検出機能を有した音声信号処理装置の構成図である。
【０００４】
この図６においては、回転角度を検出する角速度センサ１が取り付けられた左及び右スピーカ２Ｌ及び２Ｒを有するヘッドホン２が例えばリスナの頭部の回転により、回転運動が生じたとき、この角速度センサ１はその角速度に比例した電圧のアナログ検出信号を出力する。この角速度センサ１よりの検出信号を高域の不用成分を除去する帯域制限フィルタ３を介して、アナログ信号をデジタル信号に変換するＡ／Ｄ変換器４に供給する。
【０００５】
このＡ／Ｄ変換器４の出力側に得られるアナログの検出信号をデジタル化した、デジタル検出信号をマイクロプロセッサ５に供給する。このマイクロプロセッサ５においてはこの角速度のデジタル検出信号を積分して角度データに演算する。このマイクロプロセッサ５においては、この角度データから実際に音像を定位させるための回転角度が算出され対応する信号処理データをデジタル信号処理回路６に供給する。
【０００６】
一方、音声信号入力端子７及び８に供給される音源からの音声信号を夫々アナログ信号をデジタル信号に変換するＡ／Ｄ変換器９及び１０を介して、このデジタル信号処理回路６に供給する如くする。
【０００７】
このデジタル信号処理回路６ではマイクロプロセッサ５で算出された角度データに対応して必要となる音声信号を頭外に仮想音像定位させるための音声処理を施し、その結果の右及び左音声信号をデジタル信号をアナログ信号に変換するＤ／Ａ変換器１１Ｒ及び１１Ｌに供給する。
【０００８】
このＤ／Ａ変換器１１Ｒ及び１１Ｌによりアナログ信号に変換された右及び左音声信号を夫々電力増幅器１２Ｒ及び１２Ｌを介してヘッドホン２の右及び左スピーカ２Ｒ及び２Ｌに供給し、これを聴取するリスナに最適の頭外仮想音像定位する信号を与える如くする。この角速度センサ１はこのヘッドホン２に取り付けられ、このリスナの頭の回転を検出する如くする。
【０００９】
このデジタル信号処理回路６をリスナの動きに応じて変化する部分と制止する部分とに分割して示すと図８に示す如くであり、この図８において、７ａ及び８ａは音声入力端子７及び８よりの夫々のデジタル化された音声信号が供給される入力端子を示し、この入力端子７ａに供給されるデジタルの音声信号をデジタルフィルタ１３を介して加算器１７に供給すると共にこの入力端子７ａに供給される音声信号をデジタルフィルタ１４を介して加算器１８に供給する。
【００１０】
また入力端子８ａに供給されるデジタルの音声信号をデジタルフィルタ１５を介して加算器１７に供給すると共にこの入力端子８ａに供給されるデジタルの音声信号をデジタルフィルタ１６を介して加算器１８に供給する。この場合このデジタルフィルタ１３，１４，１５及び１６は例えばＦＩＲフィルタで構成する。
【００１１】
ここで各デジタルフィルタ１３，１４，１５及び１６は、夫々図７に示す音像定位の原理図におけるスピーカＳＬ及びＳＲからリスナＭが一定方向を向いている場合の両耳に至る伝達関数ＨＲＲ，ＨＲＬ，ＨＬＲ及びＨＬＬを実現するものである。
【００１２】
またデジタルフィルタ１３及びデジタルフィルタ１５の夫々の出力が加算器１７で加算され、この加算信号が時間差付加回路１９に供給され、またデジタルフィルタ１４及びデジタルフィルタ１６の夫々の出力が加算器１８で加算されこの加算信号が時間差付加回路２０に供給される。またこの時間差付加回路１９及び２０の夫々出力信号を夫々レベル差付加回路２１及び２２を介して夫々Ｄ／Ａ変換器１１Ｒ及び１１Ｌに夫々供給する如くする。
【００１３】
この場合、時間差付加回路１９及び２０の夫々の制御端子１９ａ及び２０ａとレベル差付加回路２１及び２２の夫々の制御端子２１ａ及び２２ａとにリスナの頭が動くことによりなる伝達関数の変化を両耳に到達する信号の時間差とレベル差とに着目した制御信号を供給する如くする。斯くする如くして簡略化を図るもので例えばリスナが頭部を右に回転した場合左耳に到達する信号は右耳に到達する信号に比べて早くなる。
【００１４】
また、左耳は音源に近づき、右耳は音源から遠くなるため左耳に到達する信号のレベルは右耳に到達する信号に比べて高くなる。従って基準の位置に対するこの変化分のみをマイクロプロセッサ５により制御してやることによって動的な伝達関数を模擬することができる。
【００１５】
左側用の時間差付加回路２０で付加される遅延時間は図９の遅延時間特性の破線の特性曲線Ｔｂで示され、右側用の時間差付加回路１９で付加される遅延時間は図９の遅延時間特性の一点鎖線の特性曲線Ｔａで示される。
【００１６】
特性曲線Ｔａ及びＴｂはリスナＭの頭部の回転方向に対して全く逆の増減方向を持つ曲線となっている。これによりリスナＭが前方１８０°の範囲内に置かれた音源からの音を頭を左右に回転させながら聞いた場合と同様の音源から両耳までの時間変化がヘッドホンを用いた場合でもヘッドホンに付加されることになる。
【００１７】
また左側用のレベル差付加回路２２で付加されるレベル差は図１０の相対レベル特性の一点鎖線の特性曲線Ｌａで示され、右側用のレベル差付加回路２１で付加されるレベル差は図１０の相対レベル特性の破線の特性曲線Ｌｂで示される。この図１０は頭の回転位置が０°の状態からの相対レベルを示している。
【００１８】
この特性曲線Ｌａ及びＬｂはリスナＭの頭部の回転方向に対して全く逆の増減方向を持つ曲線となっている。即ち、レベル差付加回路２２では特性曲線Ｌａのレベル変化が付加され、レベル差付加回路２１では特性曲線Ｌｂのレベル変化が付加されるので前方の音源を実際に聞くのと同様の音量変化がヘッドホンの装着者においても付加される。
【００１９】
以上の説明は音像をリスナＭの前方に定位させる方法を述べたが回転方向によって選ぶ特性の変化方向を逆にすることによりリスナＭの後方に対しても音像を定位させることができる。また、音源の数も任意のチャンネル数に対して処理することができる。
従って、リスナＭの前方及び後方に質の高い仮想音像を定位させることができる。
【００２０】
【発明が解決しようとする課題】
然しながら上述構成で用いている回転角度インターフェースではマイクロプロセッサ５の外部に帯域制限フィルタ３、Ａ／Ｄ変換器４、オフセット除去フィルタ等の付加回路を必要とし、なおかつ、計算された角度データによって信号処理をするデジタル信号処理回路６にその角度データを送信する必要があった。
【００２１】
また上述したようにセンサを用いて検出を行うようにした場合、センサや増幅器、更にＡ／Ｄ変換器に特有のＤＣオフセットのばらつきや変動が発生するため、正確な角度や変位の計算を行うことができないという不都合があった。
【００２２】
また上述構成では回路規模が大きくなり実相面積が大きくなり、高価となる不都合もあり、またセンサの検出とその値を用いた信号処理とが別のデバイスであるマイクロプロセッサ５とデジタル信号処理回路６とでなされているため相互に通信処理を行う必要があった。
【００２３】
本発明は斯る点に鑑み、正確な角度や変位の計算ができるようにすると共に回路規模を小型化するようにすることを目的とする。
【００２４】
本発明音声信号処理装置は、入力音声信号を信号処理した出力信号をヘッドホン又は複数のスピーカにより再生することによりリスナの周辺の任意の位置に音像を定位させるように仮想音像定位処理するデジタル音声信号処理を行うデジタル信号処理回路を有する音声信号処理装置において、このリスナの動作の状態を検出するセンサよりのアナログ検出信号を１ビットのデジタル信号に変換するＡ／Ｄ変換器の全て、あるいはその構成要素の一部をデジタル信号処理回路内に構成し、Ａ／Ｄ変換器から出力されたセンサの検出信号である１ビットのデジタル信号のサンプリングレートを、間引いたサンプリングレートである１ｋＨｚとなるように変換するデシメーションフィルタと、デシメーションフィルタからの出力信号から角度データを算出し、算出された角度データに応じて、入力音声信号の伝送特性を変化させて出力する制御信号形成回路とを、デジタル音声信号処理を行うデジタル信号処理回路が備えたものである。
【００２５】
斯る本発明によればセンサの検出信号を入力音声信号と同時にデジタル信号処理回路に取り込むので、センサの検出信号に対する信号処理とこの音声信号に対する信号処理とを同じデバイスであるデジタル信号処理回路内で実現でき、ハードウェア間の通信が不用となる。
【００２６】
またセンサのインターフェースは信号処理ソフトにより実現でき、デジタル信号処理回路内の演算によりオフセットを除去でき、デバイスのばらつきによる誤差がなく、また、外部に大容量のコンデンサ等を必要としない。
【００２７】
また本発明角速度センサのインターフェース装置は、角速度センサよりのアナログ検出信号をデジタル信号に変換するＡ／Ｄ変換器と、変換されたデジタルデータを積分する積分器と、積分されたデジタルデータから角度データを計算する角度演算器と、計算された角度データを保存するメモリとからなり、このメモリに保存された角度データは外部機器よりデジタルデータとして読み取れるようにした角速度センサのインターフェース装置において、このＡ／Ｄ変換器は１ビットで構成し、その全てあるいは一部をデジタル信号処理回路内に構成すると共にこのデジタル信号処理回路内にこの積分器、この角度演算器及びこのメモリを構成するようにしたものである。
【００２８】
本発明によれば、角速度データとして入力される検出信号を角度データに変換して外部に取り出せるようにしたので、音声処理と同時にかつ同期して外部の処理（例えば、映像処理等）を行うことができ、外部機器での角速度センサのインターフェース装置及び角度変換処理が簡略化される。
【００２９】
また本発明信号処理装置は、入力音声信号を信号処理した出力信号をヘッドホン又は複数のスピーカにより再生することによりリスナの周辺の任意の位置に音像を定位させるように仮想音像定位処理するデジタル信号処理回路を有する音声信号処理装置を設けると共にこのリスナの一方あるいは両方の目の前に映像を再生する映像表示装置を設け、このリスナの動作の状態を検出するセンサよりのアナログ検出信号をＡ／Ｄ変換器を介して、このデジタル信号処理回路に入力し、このセンサよりのアナログ検出信号の値又はこのアナログ検出信号を演算することにより導かれる値に応じてリアルタイムにこの入力音声信号の伝送特性を変化させて出力すると共にこの映像表示装置における表示内容あるいは表示位置を更新して出力するようにしたものである。
【００３０】
斯る本発明によれば、リスナの一方あるいは両方の目の前に設けた映像表示装置における表示内容をリスナの動きに応じて変化させる場合、そのためのインターフェースを音声信号処理装置に搭載されたセンサのインターフェース処理で行うことができ、簡単な構成で映像と音声とを同時に変化させることができる。
【００３１】
【発明の実施の形態】
以下図１及び図２を参照して本発明音声信号処理装置、角速度センサのインターフェース装置及び信号処理装置の実施の形態の例につき説明しよう。この図１、図２において図６及び図８に対応する部分には同一符号を付して示す。
【００３２】
図１例はヘッドホン受聴において、音像の定位位置がリスナの前方におかれた２個のスピーカが放音しているのと同じ位置に仮想音像定位させるようにした音声信号処理装置である。
【００３３】
この図１例においては、回転角度を検出する角速度センサ１が取りつけられた左及びみぎスピーカ２Ｌ及び２Ｒを有するヘッドホン２が例えばリスナの頭部の回転により、回転運動が生じたとき、この角速度センサ１はその角速度に比例した電圧のアナログ検出信号を出力する。
【００３４】
この角速度センサ１として例えば周知の圧電振動ジャイロを用いる。この電圧振動ジャイロは、簡単な構成で確実に回転角度を検出することができ、この圧電振動ジャイロは、小型軽量に構成でき、更に消費電力の低減を図ることができる。
【００３５】
この角速度センサ１よりの検出信号を高域の不用成分を除去する帯域制限フィルタ３及びインターフェースを構成する１ビットＡ／Ｄ変換器３０の一部３０ａを介してデジタル信号処理回路３１に供給する。
【００３６】
一方、例えば２チャンネルの音声信号入力端子７及び８に供給される音源からの音声信号を夫々アナログ信号をデジタル信号に変換するＡ／Ｄ変換器９及び１０を介して、このデジタル信号処理回路３１に供給する如くする。
【００３７】
このデジタル信号処理回路３１においては、後述する如く角度データに対応して必要となる音声信号を頭外に仮想音像定位させるための信号処理を施し、その結果の右及び左音声信号をデジタル信号をアナログ信号に変換するＤ／Ａ変換器１１Ｒ及び１１Ｌに供給する。
【００３８】
このＤ／Ａ変換器１１Ｒ及び１１Ｌによりアナログ信号に変換された右及び左音声信号を夫々電力増幅器１２Ｒ及び１２Ｌを介してヘッドホン２の右及び左スピーカ２Ｒ及び２Ｌに供給し、これを聴取するリスナに最適の頭外仮想音像定位する音声信号を与える如くする。
【００３９】
本例においては、デジタル信号処理回路３１を図２の機能ブロックで示す如く構成する。この図２において、７ａ及び８ａは音声信号入力端子７及び８よりの夫々のデジタル化された音声信号が供給される入力端子を示す。
【００４０】
この入力端子７ａに供給されるデジタルの音声信号を図９と同様に、例えばＦＩＲフィルタで構成したデジタルフィルタ１３を介して加算器１７に供給すると共にこの入力端子７ａに供給されるデジタルの音声信号を例えばＦＩＲフィルタで構成したデジタルフィルタ１４を介して加算器１８に供給する。
【００４１】
また入力端子８ａに供給されるデジタルの音声信号を例えばＦＩＲフィルタで構成されるデジタルフィルタ１５を介して加算器１７に供給すると共にこの入力端子８ａに供給されるデジタルの音声信号を例えばＦＩＲフィルタで構成されるデジタルフィルタ１６を介して加算器１８に供給する。
【００４２】
この各デジタルフィルタ１３，１４，１５及び１６は、夫々図７に示す音像定位の原理図におけるスピーカＳＬ及びＳＲからリスナＭが一定方向を向いている場合の両耳に至る伝達関数ＨＲＲ，ＨＲＬ，ＨＬＲ及びＨＬＬを実現するものである。
【００４３】
また、デジタルフィルタ１３及びデジタルフィルタ１５の夫々の出力が加算器１７で加算され、この加算信号が時間差付加回路１９に供給され、またデジタルフィルタ１４及びデジタルフィルタ１６の夫々の出力が加算器１８で加算され、この加算信号が時間差付加回路２０に供給される。また、この時間差付加回路１９及び２０の夫々の出力信号を夫々レベル差付加回路２１及び２２を介して夫々Ｄ／Ａ変換器１１Ｒ及び１１Ｌに夫々供給する如くする。
【００４４】
また本例においては、角速度センサ１のアナログの検出信号を高域の不用成分を除去する帯域制限フィルタ３を介して１ビットＡ／Ｄ変換器３０である１ビットΔΣ型Ａ／Ｄ変換器を構成する加算器３０ｂに供給する。この１ビットΔΣ型Ａ／Ｄ変換器３０は加算器３０ｂの出力信号を積分器３０ｃを介してデジタル信号処理回路３１内に構成した量子化器３０ｄに供給し、この量子化器３０ｄの出力信号を１サンプル遅延器３０ｅを介して加算器３０ｂに供給する如くしたものである。
【００４５】
この場合、角速度センサ１の検出信号を音声信号処理と同じデジタル信号処理回路３１内に構成した１ビットＡ／Ｄ変換器３０により取り込んでいるので、デジタル信号処理回路３１の１ビットポートによりデータを入力することができ、構成簡単で高精度の角速度センサのインターフェースを実現できる。
【００４６】
この１ビットＡ／Ｄ変換器３０の出力信号をローパスフィルタ３２により帯域を制限して、サンプリングレートを変換するデシメーションフィルタ３３に供給する。このデシメーションフィルタ３３においてはサンプリング周波数を例えば４８ｋＨｚから間引いて１ｋＨｚとする如くする。
【００４７】
このデシメーションフィルタ３３の出力信号を超低域即ちオフセットを除去するハイパスフィルタ３４を介して積分回路３５に供給し、この積分供給３５で角度データを得る如くする。この積分器３５に得られる角度データを角度演算器及びメモリより成る制御信号形成回路３６に供給する。
【００４８】
この制御信号形成回路３６はリスナの頭が動くことにより伝達関数の変化を両耳に到達する信号の時間差とレベル差とに着目した制御信号を形成する。
【００４９】
この制御信号形成回路３６で形成した制御信号を時間差付加回路１９及び２０とレベル差付加回路２１及び２２とに夫々供給する如くする。例えばリスナが頭部を右に回転した場合左耳に到達する信号は右耳に到達する信号に比べて早くなる。
【００５０】
また、左耳は音源に近づき、右耳は音源から遠くなるため左耳に到達する信号のレベルは右耳に到達する信号に比べて高くなる。従って基準の位置に対するこの変化分のみをこの制御信号により制御してやることによって動的な伝達関数を模擬することができる。
【００５１】
左側用の時間差付加回路２０で付加される遅延時間は図９の遅延時間特性の破線の特性曲線Ｔｂで示され、右側用の時間差付加回路１９で付加される遅延時間は図９の遅延時間特性の一点鎖線の特性曲線Ｔａで示される。
【００５２】
特性曲線Ｔａ及びＴｂはリスナＭの頭部の回転方向に対して全く逆の増減方向を持つ曲線となっている。これによりリスナＭが前方１８０°の範囲内に置かれた音源からの音を頭を左右に回転させながら聞いた場合と同様の音源から両耳までの時間変化がヘッドホンを用いた場合でもヘッドホンに付加されることになる。
【００５３】
また左側用のレベル差付加回路２２で付加されるレベル差は図１０の相対レベル特性の一点鎖線の特性曲線Ｌａで示され、左側用のレベル差付加回路２１で付加されるレベル差は図１０の相対レベル特性の破線の特性曲線Ｌｂで示される。この図１０は頭の回転位置が０°の状態からの相対レベルを示している。
【００５４】
この特性曲線Ｌａ及びＬｂはリスナＭの頭部の回転方向に対して全く逆の増減方向を持つ曲線となっている。即ち、レベル付加回路２２では特性曲線Ｌａのレベル変化が付加され、レベル差付加回路２１では特性曲線Ｌｂのレベル変化が付加されるので前方の音源を実際に聞くのと同様の音量変化がヘッドホンの装着者においても付加される。
【００５５】
以上の説明は音像をリスナＭの前方に定位させる方法を述べたが回転方向によって選ぶ特性の変化方向を逆にすることによりリスナＭの後方に対しても音像を定位させることができる。また、音源の数も任意のチャンネル数に対して処理することができる。
【００５６】
本例によれば角速度センサ１の検出信号を入力音声信号と同時にデジタル信号処理回路３１に取り込むので、角速度センサ１の検出信号に対する信号処理とこの音声信号に対する信号処理とを同じデバイスであるデジタル信号処理回路３１内で実現できハードウェア間の通信が不用となり回路規模を小形化できると共にオフセット等をなくすことができ、正確な計算ができる。
【００５７】
また本例によれば角速度センサ１のインターフェースを構成する１ビットＡ／Ｄ変換器３０の一部をデジタル信号処理回路３１内に取り込む如くしたのでデジタル信号処理回路の１ビットポートによりこの角速度センサ１の検出信号を入力することができ、構成が簡単で安価になり高精度の角速度センサのインターフェースが実現できる。
【００５８】
また上述例では角速度センサ１の検出信号を１ビットΔΣ型Ａ／Ｄ変換器によって取り込む如くしたのでデジタル信号処理回路３１の１ビットポートにより入力することができ、ΔΣ変換処理により実質的な変換精度を格段に向上させることができ、極めて高精度な角速度センサのインターフェースを実現することができる。
【００５９】
また図３及び図４は本発明の実施の形態の他の例を示す。この図３及び図４につき説明するに図１及び図２に対応する部分には同一符号を付し、その詳細な説明は省略する。
【００６０】
図３例においては、リスナの両目（片目でも良い）に映像表示装置４０例えばヘッドマウントディスプレイを装着する如くし、映像信号入力端子４１よりの映像信号を映像信号処理回路４２に供給し、この映像信号処理回路４２で信号処理された映像信号をこの映像表示装置４０に供給する如くする。
【００６１】
また本例においてはデジタル信号処理回路３１において、図４に示す如く、制御信号形成回路３６に外部出力端子３６ａを設け、この制御信号形成回路３６に得られるデジタルの角度データを映像信号処理回路４２に供給する如くする。このときは角速度データを角度データに変換したものを出力する。
【００６２】
この場合、この映像信号処理回路４２への角度データの供給は外部機器である映像信号処理回路４２の要求により供給するか又は、一定周期で供給する如くする。
【００６３】
この映像信号処理回路４２はこの角度データに応じて映像表示装置４０における表示内容あるいは表示位置を更新する如くする。この図３，図４例はその他は図１、図２例と同様に構成する。
【００６４】
斯る図３、図４例においてはリスナの両目（片目でも良い）に装着した映像表示装置４０における表示内容をリスナの動きに応じて変化させる場合、そのためのインターフェースを音声信号処理装置に搭載された角速度センサ１のインターフェース処理で行うことができ簡単な構成で映像と音声とを同時に変化させることができる。
【００６５】
尚、上述例では１ビットＡ／Ｄ変換器３０として１ビットΔΣ型Ａ／Ｄ変換器を使用したが、この代りに図５に示す如くこの１ビットＡ／Ｄ変換器３０としてデジタル信号処理回路３１内に量子化器３０ｄだけを設け、これにより構成するようにしても良い。この場合は１ビットＡ／Ｄ変換器３０は全てがデジタル信号処理回路３１内に形成されることになる。
【００６６】
上述例ではセンサとして角速度センサを用いたがこの代りに地磁気方位センサを用いても良い、この地磁気方位センサを用いたときは簡単な構成で確実に回転角度を検出することができる。
【００６７】
また、このセンサとして傾斜センサを用いても良い。この傾斜センサを用いたときは簡単な構成で確実に傾斜角度を検出することができる。
【００６８】
また、センサとして速度センサ又は加速度センサを用い、Ａ／Ｄ変換された速度又は加速度データから変位データを計算し、この計算された変位データを使用するようにしても良い。この変位データを外部にデジタル信号として出力するようにしても良い。
この場合、音声処理と同時かつ同期して外部機器の処理（例えば映像処理等）を行うことができ、かつ外部機器でのセンサのインターフェース及び速度−変位変換処理が簡略化できる。
【００６９】
またこのセンサを複数個設け、この複数個のセンサの検出信号の処理を同一のデジタル信号処理回路３１で行うようにしても良い。
この場合、複数個のセンサの検出信号を１個のデジタル信号処理回路３１内に取り込んで処理できるので、より自由度の高い動作の検出を１個のデバイスで行うことができる。
【００７０】
また本発明は上述例に限ることなく、本発明の要旨を逸脱することなくその他種々の構成が採り得ることは勿論である。
【００７１】
【発明の効果】
本発明によればセンサの検出信号を入力音声信号と同時にデジタル信号処理回路に取り込むので、センサの検出信号に対する信号処理とこの音声信号に対する信号処理とを同じデバイスであるデジタル信号処理回路内で実現でき、ハードウェアの通信が不用となり、回路規模を小形化できると共にオフセット等をなくすことができ正確な計算ができる。
【００７２】
またセンサのインターフェースは信号処理ソフトにより実現でき、デジタル信号処理回路内の演算によりオフセットを除去でき、デバイスのばらつきによる誤差がない。
【００７３】
また、本発明によれば、角速度データとして入力される検出信号を角度データに変換して外部に取り出させるようにしたので、音声処理と同時にかつ同期して外部の処理（例えば、映像処理等）を行うことができ、外部機器での角速度センサのインターフェース装置及び角度変換処理が簡略化することができる。
【００７４】
また本発明によれば、リスナの一方あるいは両方の目の前に設けた映像表示装置における表示内容をリスナの動きに応じて変化させる場合、そのためのインターフェースを音声信号処理装置に搭載されたセンサのインターフェース処理で行うことができ、簡単な構成で映像と音声とを同時に変化させることができる。
【図面の簡単な説明】
【図１】本発明音声信号処理装置の実施の形態の例を示す構成図である。
【図２】図１例のデジタル信号処理回路の例を示す機能ブロック図である。
【図３】本発明信号処理装置の実施の形態の例を示す構成図である。
【図４】図３例のデジタル信号処理回路の例を示す機能ブロック図である。
【図５】デジタル信号処理回路の他の例を示す機能ブロック図である。
【図６】従来の音声信号処理装置の例を示す構成図である。
【図７】音像定位の原理を説明するための構成図である。
【図８】従来のデジタル信号処理回路の例を示す機能ブロック図である。
【図９】本発明の説明に供する線図である。
【図１０】本発明の説明に供する線図である。
【符号の説明】
１‥‥角速度センサ、２‥‥ヘッドホン、７，８‥‥音声信号入力端子、９，１０‥‥Ａ／Ｄ変換器、１１Ｒ，１１Ｌ‥‥Ｄ／Ａ変換器、１２Ｒ，１２Ｌ‥‥電力増幅器、１３，１４，１５，１６‥‥デジタルフィルタ、１７，１８‥‥加算器、１９，２０‥‥時間差付加回路、２１，２２‥‥レベル差付加回路、３０‥‥１ビットＡ／Ｄ変換器、３１‥‥デジタル信号処理回路、３２‥‥ローパスフィルタ、３３‥‥デジメーションフィルタ、３４‥‥ハイパスフィルタ、３５‥‥積分器、３６‥‥制御信号形成回路
【発明の属する技術分野】
本発明は、仮想音像定位処理を行うようにした音声信号処理装置及び信号処理装置に関する。
【０００２】
【従来の技術】
近年、動作センサを用い仮想音像定位を行うようにした音声映像再生装置が数多く提案されている。例えば頭外仮想音像定位ヘッドホンのように、リスナの頭部の回転角度を検出して、デジタル信号処理により検出された角度データに対応して音声信号を頭外に仮想音像定位させるための信号処理を施すようにしたものが提案されている。
【０００３】
この従来の、角度データに対応した音声信号を頭外に仮想音像定位させるための信号処理を施すようにした音声信号処理装置につき、図６〜図１０を用いて以下説明する。図６はヘッドホン受聴において音像の定位位置がリスナの前方におかれた２個のスピーカが放音しているのと同じ位置に仮想音像定位させるようにした、回転角度検出機能を有した音声信号処理装置の構成図である。
【０００４】
この図６においては、回転角度を検出する角速度センサ１が取り付けられた左及び右スピーカ２Ｌ及び２Ｒを有するヘッドホン２が例えばリスナの頭部の回転により、回転運動が生じたとき、この角速度センサ１はその角速度に比例した電圧のアナログ検出信号を出力する。この角速度センサ１よりの検出信号を高域の不用成分を除去する帯域制限フィルタ３を介して、アナログ信号をデジタル信号に変換するＡ／Ｄ変換器４に供給する。
【０００５】
このＡ／Ｄ変換器４の出力側に得られるアナログの検出信号をデジタル化した、デジタル検出信号をマイクロプロセッサ５に供給する。このマイクロプロセッサ５においてはこの角速度のデジタル検出信号を積分して角度データに演算する。このマイクロプロセッサ５においては、この角度データから実際に音像を定位させるための回転角度が算出され対応する信号処理データをデジタル信号処理回路６に供給する。
【０００６】
一方、音声信号入力端子７及び８に供給される音源からの音声信号を夫々アナログ信号をデジタル信号に変換するＡ／Ｄ変換器９及び１０を介して、このデジタル信号処理回路６に供給する如くする。
【０００７】
このデジタル信号処理回路６ではマイクロプロセッサ５で算出された角度データに対応して必要となる音声信号を頭外に仮想音像定位させるための音声処理を施し、その結果の右及び左音声信号をデジタル信号をアナログ信号に変換するＤ／Ａ変換器１１Ｒ及び１１Ｌに供給する。
【０００８】
このＤ／Ａ変換器１１Ｒ及び１１Ｌによりアナログ信号に変換された右及び左音声信号を夫々電力増幅器１２Ｒ及び１２Ｌを介してヘッドホン２の右及び左スピーカ２Ｒ及び２Ｌに供給し、これを聴取するリスナに最適の頭外仮想音像定位する信号を与える如くする。この角速度センサ１はこのヘッドホン２に取り付けられ、このリスナの頭の回転を検出する如くする。
【０００９】
このデジタル信号処理回路６をリスナの動きに応じて変化する部分と制止する部分とに分割して示すと図８に示す如くであり、この図８において、７ａ及び８ａは音声入力端子７及び８よりの夫々のデジタル化された音声信号が供給される入力端子を示し、この入力端子７ａに供給されるデジタルの音声信号をデジタルフィルタ１３を介して加算器１７に供給すると共にこの入力端子７ａに供給される音声信号をデジタルフィルタ１４を介して加算器１８に供給する。
【００１０】
また入力端子８ａに供給されるデジタルの音声信号をデジタルフィルタ１５を介して加算器１７に供給すると共にこの入力端子８ａに供給されるデジタルの音声信号をデジタルフィルタ１６を介して加算器１８に供給する。この場合このデジタルフィルタ１３，１４，１５及び１６は例えばＦＩＲフィルタで構成する。
【００１１】
ここで各デジタルフィルタ１３，１４，１５及び１６は、夫々図７に示す音像定位の原理図におけるスピーカＳＬ及びＳＲからリスナＭが一定方向を向いている場合の両耳に至る伝達関数ＨＲＲ，ＨＲＬ，ＨＬＲ及びＨＬＬを実現するものである。
【００１２】
またデジタルフィルタ１３及びデジタルフィルタ１５の夫々の出力が加算器１７で加算され、この加算信号が時間差付加回路１９に供給され、またデジタルフィルタ１４及びデジタルフィルタ１６の夫々の出力が加算器１８で加算されこの加算信号が時間差付加回路２０に供給される。またこの時間差付加回路１９及び２０の夫々出力信号を夫々レベル差付加回路２１及び２２を介して夫々Ｄ／Ａ変換器１１Ｒ及び１１Ｌに夫々供給する如くする。
【００１３】
この場合、時間差付加回路１９及び２０の夫々の制御端子１９ａ及び２０ａとレベル差付加回路２１及び２２の夫々の制御端子２１ａ及び２２ａとにリスナの頭が動くことによりなる伝達関数の変化を両耳に到達する信号の時間差とレベル差とに着目した制御信号を供給する如くする。斯くする如くして簡略化を図るもので例えばリスナが頭部を右に回転した場合左耳に到達する信号は右耳に到達する信号に比べて早くなる。
【００１４】
また、左耳は音源に近づき、右耳は音源から遠くなるため左耳に到達する信号のレベルは右耳に到達する信号に比べて高くなる。従って基準の位置に対するこの変化分のみをマイクロプロセッサ５により制御してやることによって動的な伝達関数を模擬することができる。
【００１５】
左側用の時間差付加回路２０で付加される遅延時間は図９の遅延時間特性の破線の特性曲線Ｔｂで示され、右側用の時間差付加回路１９で付加される遅延時間は図９の遅延時間特性の一点鎖線の特性曲線Ｔａで示される。
【００１６】
特性曲線Ｔａ及びＴｂはリスナＭの頭部の回転方向に対して全く逆の増減方向を持つ曲線となっている。これによりリスナＭが前方１８０°の範囲内に置かれた音源からの音を頭を左右に回転させながら聞いた場合と同様の音源から両耳までの時間変化がヘッドホンを用いた場合でもヘッドホンに付加されることになる。
【００１７】
また左側用のレベル差付加回路２２で付加されるレベル差は図１０の相対レベル特性の一点鎖線の特性曲線Ｌａで示され、右側用のレベル差付加回路２１で付加されるレベル差は図１０の相対レベル特性の破線の特性曲線Ｌｂで示される。この図１０は頭の回転位置が０°の状態からの相対レベルを示している。
【００１８】
この特性曲線Ｌａ及びＬｂはリスナＭの頭部の回転方向に対して全く逆の増減方向を持つ曲線となっている。即ち、レベル差付加回路２２では特性曲線Ｌａのレベル変化が付加され、レベル差付加回路２１では特性曲線Ｌｂのレベル変化が付加されるので前方の音源を実際に聞くのと同様の音量変化がヘッドホンの装着者においても付加される。
【００１９】
以上の説明は音像をリスナＭの前方に定位させる方法を述べたが回転方向によって選ぶ特性の変化方向を逆にすることによりリスナＭの後方に対しても音像を定位させることができる。また、音源の数も任意のチャンネル数に対して処理することができる。
従って、リスナＭの前方及び後方に質の高い仮想音像を定位させることができる。
【００２０】
【発明が解決しようとする課題】
然しながら上述構成で用いている回転角度インターフェースではマイクロプロセッサ５の外部に帯域制限フィルタ３、Ａ／Ｄ変換器４、オフセット除去フィルタ等の付加回路を必要とし、なおかつ、計算された角度データによって信号処理をするデジタル信号処理回路６にその角度データを送信する必要があった。
【００２１】
また上述したようにセンサを用いて検出を行うようにした場合、センサや増幅器、更にＡ／Ｄ変換器に特有のＤＣオフセットのばらつきや変動が発生するため、正確な角度や変位の計算を行うことができないという不都合があった。
【００２２】
また上述構成では回路規模が大きくなり実相面積が大きくなり、高価となる不都合もあり、またセンサの検出とその値を用いた信号処理とが別のデバイスであるマイクロプロセッサ５とデジタル信号処理回路６とでなされているため相互に通信処理を行う必要があった。
【００２３】
本発明は斯る点に鑑み、正確な角度や変位の計算ができるようにすると共に回路規模を小型化するようにすることを目的とする。
【００２４】
本発明音声信号処理装置は、入力音声信号を信号処理した出力信号をヘッドホン又は複数のスピーカにより再生することによりリスナの周辺の任意の位置に音像を定位させるように仮想音像定位処理するデジタル音声信号処理を行うデジタル信号処理回路を有する音声信号処理装置において、このリスナの動作の状態を検出するセンサよりのアナログ検出信号を１ビットのデジタル信号に変換するＡ／Ｄ変換器の全て、あるいはその構成要素の一部をデジタル信号処理回路内に構成し、Ａ／Ｄ変換器から出力されたセンサの検出信号である１ビットのデジタル信号のサンプリングレートを、間引いたサンプリングレートである１ｋＨｚとなるように変換するデシメーションフィルタと、デシメーションフィルタからの出力信号から角度データを算出し、算出された角度データに応じて、入力音声信号の伝送特性を変化させて出力する制御信号形成回路とを、デジタル音声信号処理を行うデジタル信号処理回路が備えたものである。
【００２５】
斯る本発明によればセンサの検出信号を入力音声信号と同時にデジタル信号処理回路に取り込むので、センサの検出信号に対する信号処理とこの音声信号に対する信号処理とを同じデバイスであるデジタル信号処理回路内で実現でき、ハードウェア間の通信が不用となる。
【００２６】
またセンサのインターフェースは信号処理ソフトにより実現でき、デジタル信号処理回路内の演算によりオフセットを除去でき、デバイスのばらつきによる誤差がなく、また、外部に大容量のコンデンサ等を必要としない。
【００２７】
また本発明角速度センサのインターフェース装置は、角速度センサよりのアナログ検出信号をデジタル信号に変換するＡ／Ｄ変換器と、変換されたデジタルデータを積分する積分器と、積分されたデジタルデータから角度データを計算する角度演算器と、計算された角度データを保存するメモリとからなり、このメモリに保存された角度データは外部機器よりデジタルデータとして読み取れるようにした角速度センサのインターフェース装置において、このＡ／Ｄ変換器は１ビットで構成し、その全てあるいは一部をデジタル信号処理回路内に構成すると共にこのデジタル信号処理回路内にこの積分器、この角度演算器及びこのメモリを構成するようにしたものである。
【００２８】
本発明によれば、角速度データとして入力される検出信号を角度データに変換して外部に取り出せるようにしたので、音声処理と同時にかつ同期して外部の処理（例えば、映像処理等）を行うことができ、外部機器での角速度センサのインターフェース装置及び角度変換処理が簡略化される。
【００２９】
また本発明信号処理装置は、入力音声信号を信号処理した出力信号をヘッドホン又は複数のスピーカにより再生することによりリスナの周辺の任意の位置に音像を定位させるように仮想音像定位処理するデジタル信号処理回路を有する音声信号処理装置を設けると共にこのリスナの一方あるいは両方の目の前に映像を再生する映像表示装置を設け、このリスナの動作の状態を検出するセンサよりのアナログ検出信号をＡ／Ｄ変換器を介して、このデジタル信号処理回路に入力し、このセンサよりのアナログ検出信号の値又はこのアナログ検出信号を演算することにより導かれる値に応じてリアルタイムにこの入力音声信号の伝送特性を変化させて出力すると共にこの映像表示装置における表示内容あるいは表示位置を更新して出力するようにしたものである。
【００３０】
斯る本発明によれば、リスナの一方あるいは両方の目の前に設けた映像表示装置における表示内容をリスナの動きに応じて変化させる場合、そのためのインターフェースを音声信号処理装置に搭載されたセンサのインターフェース処理で行うことができ、簡単な構成で映像と音声とを同時に変化させることができる。
【００３１】
【発明の実施の形態】
以下図１及び図２を参照して本発明音声信号処理装置、角速度センサのインターフェース装置及び信号処理装置の実施の形態の例につき説明しよう。この図１、図２において図６及び図８に対応する部分には同一符号を付して示す。
【００３２】
図１例はヘッドホン受聴において、音像の定位位置がリスナの前方におかれた２個のスピーカが放音しているのと同じ位置に仮想音像定位させるようにした音声信号処理装置である。
【００３３】
この図１例においては、回転角度を検出する角速度センサ１が取りつけられた左及びみぎスピーカ２Ｌ及び２Ｒを有するヘッドホン２が例えばリスナの頭部の回転により、回転運動が生じたとき、この角速度センサ１はその角速度に比例した電圧のアナログ検出信号を出力する。
【００３４】
この角速度センサ１として例えば周知の圧電振動ジャイロを用いる。この電圧振動ジャイロは、簡単な構成で確実に回転角度を検出することができ、この圧電振動ジャイロは、小型軽量に構成でき、更に消費電力の低減を図ることができる。
【００３５】
この角速度センサ１よりの検出信号を高域の不用成分を除去する帯域制限フィルタ３及びインターフェースを構成する１ビットＡ／Ｄ変換器３０の一部３０ａを介してデジタル信号処理回路３１に供給する。
【００３６】
一方、例えば２チャンネルの音声信号入力端子７及び８に供給される音源からの音声信号を夫々アナログ信号をデジタル信号に変換するＡ／Ｄ変換器９及び１０を介して、このデジタル信号処理回路３１に供給する如くする。
【００３７】
このデジタル信号処理回路３１においては、後述する如く角度データに対応して必要となる音声信号を頭外に仮想音像定位させるための信号処理を施し、その結果の右及び左音声信号をデジタル信号をアナログ信号に変換するＤ／Ａ変換器１１Ｒ及び１１Ｌに供給する。
【００３８】
このＤ／Ａ変換器１１Ｒ及び１１Ｌによりアナログ信号に変換された右及び左音声信号を夫々電力増幅器１２Ｒ及び１２Ｌを介してヘッドホン２の右及び左スピーカ２Ｒ及び２Ｌに供給し、これを聴取するリスナに最適の頭外仮想音像定位する音声信号を与える如くする。
【００３９】
本例においては、デジタル信号処理回路３１を図２の機能ブロックで示す如く構成する。この図２において、７ａ及び８ａは音声信号入力端子７及び８よりの夫々のデジタル化された音声信号が供給される入力端子を示す。
【００４０】
この入力端子７ａに供給されるデジタルの音声信号を図９と同様に、例えばＦＩＲフィルタで構成したデジタルフィルタ１３を介して加算器１７に供給すると共にこの入力端子７ａに供給されるデジタルの音声信号を例えばＦＩＲフィルタで構成したデジタルフィルタ１４を介して加算器１８に供給する。
【００４１】
また入力端子８ａに供給されるデジタルの音声信号を例えばＦＩＲフィルタで構成されるデジタルフィルタ１５を介して加算器１７に供給すると共にこの入力端子８ａに供給されるデジタルの音声信号を例えばＦＩＲフィルタで構成されるデジタルフィルタ１６を介して加算器１８に供給する。
【００４２】
この各デジタルフィルタ１３，１４，１５及び１６は、夫々図７に示す音像定位の原理図におけるスピーカＳＬ及びＳＲからリスナＭが一定方向を向いている場合の両耳に至る伝達関数ＨＲＲ，ＨＲＬ，ＨＬＲ及びＨＬＬを実現するものである。
【００４３】
また、デジタルフィルタ１３及びデジタルフィルタ１５の夫々の出力が加算器１７で加算され、この加算信号が時間差付加回路１９に供給され、またデジタルフィルタ１４及びデジタルフィルタ１６の夫々の出力が加算器１８で加算され、この加算信号が時間差付加回路２０に供給される。また、この時間差付加回路１９及び２０の夫々の出力信号を夫々レベル差付加回路２１及び２２を介して夫々Ｄ／Ａ変換器１１Ｒ及び１１Ｌに夫々供給する如くする。
【００４４】
また本例においては、角速度センサ１のアナログの検出信号を高域の不用成分を除去する帯域制限フィルタ３を介して１ビットＡ／Ｄ変換器３０である１ビットΔΣ型Ａ／Ｄ変換器を構成する加算器３０ｂに供給する。この１ビットΔΣ型Ａ／Ｄ変換器３０は加算器３０ｂの出力信号を積分器３０ｃを介してデジタル信号処理回路３１内に構成した量子化器３０ｄに供給し、この量子化器３０ｄの出力信号を１サンプル遅延器３０ｅを介して加算器３０ｂに供給する如くしたものである。
【００４５】
この場合、角速度センサ１の検出信号を音声信号処理と同じデジタル信号処理回路３１内に構成した１ビットＡ／Ｄ変換器３０により取り込んでいるので、デジタル信号処理回路３１の１ビットポートによりデータを入力することができ、構成簡単で高精度の角速度センサのインターフェースを実現できる。
【００４６】
この１ビットＡ／Ｄ変換器３０の出力信号をローパスフィルタ３２により帯域を制限して、サンプリングレートを変換するデシメーションフィルタ３３に供給する。このデシメーションフィルタ３３においてはサンプリング周波数を例えば４８ｋＨｚから間引いて１ｋＨｚとする如くする。
【００４７】
このデシメーションフィルタ３３の出力信号を超低域即ちオフセットを除去するハイパスフィルタ３４を介して積分回路３５に供給し、この積分供給３５で角度データを得る如くする。この積分器３５に得られる角度データを角度演算器及びメモリより成る制御信号形成回路３６に供給する。
【００４８】
この制御信号形成回路３６はリスナの頭が動くことにより伝達関数の変化を両耳に到達する信号の時間差とレベル差とに着目した制御信号を形成する。
【００４９】
この制御信号形成回路３６で形成した制御信号を時間差付加回路１９及び２０とレベル差付加回路２１及び２２とに夫々供給する如くする。例えばリスナが頭部を右に回転した場合左耳に到達する信号は右耳に到達する信号に比べて早くなる。
【００５０】
また、左耳は音源に近づき、右耳は音源から遠くなるため左耳に到達する信号のレベルは右耳に到達する信号に比べて高くなる。従って基準の位置に対するこの変化分のみをこの制御信号により制御してやることによって動的な伝達関数を模擬することができる。
【００５１】
左側用の時間差付加回路２０で付加される遅延時間は図９の遅延時間特性の破線の特性曲線Ｔｂで示され、右側用の時間差付加回路１９で付加される遅延時間は図９の遅延時間特性の一点鎖線の特性曲線Ｔａで示される。
【００５２】
特性曲線Ｔａ及びＴｂはリスナＭの頭部の回転方向に対して全く逆の増減方向を持つ曲線となっている。これによりリスナＭが前方１８０°の範囲内に置かれた音源からの音を頭を左右に回転させながら聞いた場合と同様の音源から両耳までの時間変化がヘッドホンを用いた場合でもヘッドホンに付加されることになる。
【００５３】
また左側用のレベル差付加回路２２で付加されるレベル差は図１０の相対レベル特性の一点鎖線の特性曲線Ｌａで示され、左側用のレベル差付加回路２１で付加されるレベル差は図１０の相対レベル特性の破線の特性曲線Ｌｂで示される。この図１０は頭の回転位置が０°の状態からの相対レベルを示している。
【００５４】
この特性曲線Ｌａ及びＬｂはリスナＭの頭部の回転方向に対して全く逆の増減方向を持つ曲線となっている。即ち、レベル付加回路２２では特性曲線Ｌａのレベル変化が付加され、レベル差付加回路２１では特性曲線Ｌｂのレベル変化が付加されるので前方の音源を実際に聞くのと同様の音量変化がヘッドホンの装着者においても付加される。
【００５５】
以上の説明は音像をリスナＭの前方に定位させる方法を述べたが回転方向によって選ぶ特性の変化方向を逆にすることによりリスナＭの後方に対しても音像を定位させることができる。また、音源の数も任意のチャンネル数に対して処理することができる。
【００５６】
本例によれば角速度センサ１の検出信号を入力音声信号と同時にデジタル信号処理回路３１に取り込むので、角速度センサ１の検出信号に対する信号処理とこの音声信号に対する信号処理とを同じデバイスであるデジタル信号処理回路３１内で実現できハードウェア間の通信が不用となり回路規模を小形化できると共にオフセット等をなくすことができ、正確な計算ができる。
【００５７】
また本例によれば角速度センサ１のインターフェースを構成する１ビットＡ／Ｄ変換器３０の一部をデジタル信号処理回路３１内に取り込む如くしたのでデジタル信号処理回路の１ビットポートによりこの角速度センサ１の検出信号を入力することができ、構成が簡単で安価になり高精度の角速度センサのインターフェースが実現できる。
【００５８】
また上述例では角速度センサ１の検出信号を１ビットΔΣ型Ａ／Ｄ変換器によって取り込む如くしたのでデジタル信号処理回路３１の１ビットポートにより入力することができ、ΔΣ変換処理により実質的な変換精度を格段に向上させることができ、極めて高精度な角速度センサのインターフェースを実現することができる。
【００５９】
また図３及び図４は本発明の実施の形態の他の例を示す。この図３及び図４につき説明するに図１及び図２に対応する部分には同一符号を付し、その詳細な説明は省略する。
【００６０】
図３例においては、リスナの両目（片目でも良い）に映像表示装置４０例えばヘッドマウントディスプレイを装着する如くし、映像信号入力端子４１よりの映像信号を映像信号処理回路４２に供給し、この映像信号処理回路４２で信号処理された映像信号をこの映像表示装置４０に供給する如くする。
【００６１】
また本例においてはデジタル信号処理回路３１において、図４に示す如く、制御信号形成回路３６に外部出力端子３６ａを設け、この制御信号形成回路３６に得られるデジタルの角度データを映像信号処理回路４２に供給する如くする。このときは角速度データを角度データに変換したものを出力する。
【００６２】
この場合、この映像信号処理回路４２への角度データの供給は外部機器である映像信号処理回路４２の要求により供給するか又は、一定周期で供給する如くする。
【００６３】
この映像信号処理回路４２はこの角度データに応じて映像表示装置４０における表示内容あるいは表示位置を更新する如くする。この図３，図４例はその他は図１、図２例と同様に構成する。
【００６４】
斯る図３、図４例においてはリスナの両目（片目でも良い）に装着した映像表示装置４０における表示内容をリスナの動きに応じて変化させる場合、そのためのインターフェースを音声信号処理装置に搭載された角速度センサ１のインターフェース処理で行うことができ簡単な構成で映像と音声とを同時に変化させることができる。
【００６５】
尚、上述例では１ビットＡ／Ｄ変換器３０として１ビットΔΣ型Ａ／Ｄ変換器を使用したが、この代りに図５に示す如くこの１ビットＡ／Ｄ変換器３０としてデジタル信号処理回路３１内に量子化器３０ｄだけを設け、これにより構成するようにしても良い。この場合は１ビットＡ／Ｄ変換器３０は全てがデジタル信号処理回路３１内に形成されることになる。
【００６６】
上述例ではセンサとして角速度センサを用いたがこの代りに地磁気方位センサを用いても良い、この地磁気方位センサを用いたときは簡単な構成で確実に回転角度を検出することができる。
【００６７】
また、このセンサとして傾斜センサを用いても良い。この傾斜センサを用いたときは簡単な構成で確実に傾斜角度を検出することができる。
【００６８】
また、センサとして速度センサ又は加速度センサを用い、Ａ／Ｄ変換された速度又は加速度データから変位データを計算し、この計算された変位データを使用するようにしても良い。この変位データを外部にデジタル信号として出力するようにしても良い。
この場合、音声処理と同時かつ同期して外部機器の処理（例えば映像処理等）を行うことができ、かつ外部機器でのセンサのインターフェース及び速度−変位変換処理が簡略化できる。
【００６９】
またこのセンサを複数個設け、この複数個のセンサの検出信号の処理を同一のデジタル信号処理回路３１で行うようにしても良い。
この場合、複数個のセンサの検出信号を１個のデジタル信号処理回路３１内に取り込んで処理できるので、より自由度の高い動作の検出を１個のデバイスで行うことができる。
【００７０】
また本発明は上述例に限ることなく、本発明の要旨を逸脱することなくその他種々の構成が採り得ることは勿論である。
【００７１】
【発明の効果】
本発明によればセンサの検出信号を入力音声信号と同時にデジタル信号処理回路に取り込むので、センサの検出信号に対する信号処理とこの音声信号に対する信号処理とを同じデバイスであるデジタル信号処理回路内で実現でき、ハードウェアの通信が不用となり、回路規模を小形化できると共にオフセット等をなくすことができ正確な計算ができる。
【００７２】
またセンサのインターフェースは信号処理ソフトにより実現でき、デジタル信号処理回路内の演算によりオフセットを除去でき、デバイスのばらつきによる誤差がない。
【００７３】
また、本発明によれば、角速度データとして入力される検出信号を角度データに変換して外部に取り出させるようにしたので、音声処理と同時にかつ同期して外部の処理（例えば、映像処理等）を行うことができ、外部機器での角速度センサのインターフェース装置及び角度変換処理が簡略化することができる。
【００７４】
また本発明によれば、リスナの一方あるいは両方の目の前に設けた映像表示装置における表示内容をリスナの動きに応じて変化させる場合、そのためのインターフェースを音声信号処理装置に搭載されたセンサのインターフェース処理で行うことができ、簡単な構成で映像と音声とを同時に変化させることができる。
【図面の簡単な説明】
【図１】本発明音声信号処理装置の実施の形態の例を示す構成図である。
【図２】図１例のデジタル信号処理回路の例を示す機能ブロック図である。
【図３】本発明信号処理装置の実施の形態の例を示す構成図である。
【図４】図３例のデジタル信号処理回路の例を示す機能ブロック図である。
【図５】デジタル信号処理回路の他の例を示す機能ブロック図である。
【図６】従来の音声信号処理装置の例を示す構成図である。
【図７】音像定位の原理を説明するための構成図である。
【図８】従来のデジタル信号処理回路の例を示す機能ブロック図である。
【図９】本発明の説明に供する線図である。
【図１０】本発明の説明に供する線図である。
【符号の説明】
１‥‥角速度センサ、２‥‥ヘッドホン、７，８‥‥音声信号入力端子、９，１０‥‥Ａ／Ｄ変換器、１１Ｒ，１１Ｌ‥‥Ｄ／Ａ変換器、１２Ｒ，１２Ｌ‥‥電力増幅器、１３，１４，１５，１６‥‥デジタルフィルタ、１７，１８‥‥加算器、１９，２０‥‥時間差付加回路、２１，２２‥‥レベル差付加回路、３０‥‥１ビットＡ／Ｄ変換器、３１‥‥デジタル信号処理回路、３２‥‥ローパスフィルタ、３３‥‥デジメーションフィルタ、３４‥‥ハイパスフィルタ、３５‥‥積分器、３６‥‥制御信号形成回路
Claims (6)
- 入力音声信号を信号処理した出力信号をヘッドホン又は複数のスピーカにより再生することによりリスナの周辺の任意の位置に音像を定位させるように仮想音像定位処理するデジタル音声信号処理を行うデジタル信号処理回路を有する音声信号処理装置において、
前記リスナの動作の状態を検出する角速度センサよりのアナログ検出信号を、前記デジタル信号処理回路内に構成要素の一部を配置したΔΣ型Ａ／Ｄ変換器に供給し、
前記ΔΣ型Ａ／Ｄ変換器の出力信号の帯域を制限するローパスフィルタと、
前記ローパスフィルタが出力するデジタル信号のサンプリングレートを間引くデシメーションフィルタと、
前記デシメーションフィルタによって間引かれた後のデジタル信号から、超低域成分を除去する超低域成分フィルタと、
前記超低域成分フィルタからの出力信号から角度データを算出する積分回路と、
前記積分回路で算出された角度データに応じて、前記入力音声信号の伝送特性を変化させる制御信号形成回路とを、
デジタル音声信号処理を行う前記デジタル信号処理回路内に設けた
音声信号処理装置。 - 前記デジタル信号処理回路に得られるデジタル変換されたデジタル検出信号を映像信号処理回路に出力できるようにした
請求項１記載の音声信号処理装置。 - 前記デジタル信号処理回路に取り込んだ前記角速度センサの検出信号を別の単位系に変換したデジタル検出信号として映像信号処理回路に出力できるようにした
請求項１記載の音声信号処理装置。 - 前記映像信号処理回路への出力は、この映像信号処理回路からの要求によって出力するようにした
請求項３記載の音声信号処理装置。 - 前記映像信号処理回路への出力は一定周期で出力するようにした
請求項３又は４記載の音声信号処理装置。 - 入力音声信号を信号処理した出力信号をヘッドホン又は複数のスピーカにより再生することによりリスナの周辺の任意の位置に音像を定位させるように仮想音像定位処理するデジタル音声信号処理を行うデジタル信号処理回路を有する音声信号処理装置を設けると共に前記リスナの一方あるいは両方の目の前に映像を再生する映像表示装置を設け、
前記リスナの動作の状態を検出する角速度センサよりのアナログ検出信号をデジタル信号に変換するΔΣ型Ａ／Ｄ変換器の一部を前記デジタル信号処理回路内に構成し、
前記ΔΣ型Ａ／Ｄ変換器の出力信号の帯域を制限するローパスフィルタと、
前記ローパスフィルタが出力するデジタル信号のサンプリングレートを間引くデシメーションフィルタと、
前記デシメーションフィルタによって間引かれた後のデジタル信号から、超低域成分を除去する超低域成分フィルタと、
前記超低域成分フィルタの出力信号から角度データを算出する積分回路と、
前記積分回路で算出された角度データに応じて前記入力音声信号の伝送特性を変化させて出力する制御信号形成回路とを、デジタル音声信号処理を行う前記デジタル信号処理回路内に設けると共に、
前記映像表示装置における表示内容あるいは表示位置を更新して出力するようにした信号処理装置。
Priority Applications (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000224162A JP4737804B2 (ja) | 2000-07-25 | 2000-07-25 | 音声信号処理装置及び信号処理装置 |
| KR1020010043175A KR100834562B1 (ko) | 2000-07-25 | 2001-07-18 | 음성신호 처리장치, 각속도센서의 인터페이스 회로장치 및신호처리장치 |
| US09/911,686 US6947569B2 (en) | 2000-07-25 | 2001-07-24 | Audio signal processing device, interface circuit device for angular velocity sensor and signal processing device |
| EP01306356A EP1176848A3 (en) | 2000-07-25 | 2001-07-25 | Audio signal processing device, interface circuit device for angular velocity sensor and signal processing device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000224162A JP4737804B2 (ja) | 2000-07-25 | 2000-07-25 | 音声信号処理装置及び信号処理装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2002044800A JP2002044800A (ja) | 2002-02-08 |
| JP4737804B2 true JP4737804B2 (ja) | 2011-08-03 |
Family
ID=18718170
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000224162A Expired - Fee Related JP4737804B2 (ja) | 2000-07-25 | 2000-07-25 | 音声信号処理装置及び信号処理装置 |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US6947569B2 (ja) |
| EP (1) | EP1176848A3 (ja) |
| JP (1) | JP4737804B2 (ja) |
| KR (1) | KR100834562B1 (ja) |
Families Citing this family (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4867121B2 (ja) * | 2001-09-28 | 2012-02-01 | ソニー株式会社 | 音声信号処理方法および音声再生システム |
| US7116788B1 (en) | 2002-01-17 | 2006-10-03 | Conexant Systems, Inc. | Efficient head related transfer function filter generation |
| ATE427008T1 (de) | 2002-05-27 | 2009-04-15 | Sonicemotion Ag | Verfahren und vorrichtung zur erzeugung von daten uber die gegenseitige lage von mindestens drei schallwandlern |
| US20040091120A1 (en) * | 2002-11-12 | 2004-05-13 | Kantor Kenneth L. | Method and apparatus for improving corrective audio equalization |
| US7373123B2 (en) * | 2004-02-27 | 2008-05-13 | Harman International Industries, Incorporated | Multiple tuners in a single radio receiver |
| JP4580689B2 (ja) * | 2004-05-31 | 2010-11-17 | ソニー株式会社 | 音像定位装置、音像定位方法及び音像定位プログラム |
| KR101118214B1 (ko) * | 2004-09-21 | 2012-03-16 | 삼성전자주식회사 | 청취 위치를 고려한 2채널 가상 음향 재생 방법 및 장치 |
| KR100612024B1 (ko) * | 2004-11-24 | 2006-08-11 | 삼성전자주식회사 | 비대칭성을 이용하여 가상 입체 음향을 생성하는 장치 및그 방법과 이를 수행하기 위한 프로그램이 기록된 기록매체 |
| EP1947471B1 (en) * | 2007-01-16 | 2010-10-13 | Harman Becker Automotive Systems GmbH | System and method for tracking surround headphones using audio signals below the masked threshold of hearing |
| JP4735993B2 (ja) | 2008-08-26 | 2011-07-27 | ソニー株式会社 | 音声処理装置、音像定位位置調整方法、映像処理装置及び映像処理方法 |
| US9491560B2 (en) * | 2010-07-20 | 2016-11-08 | Analog Devices, Inc. | System and method for improving headphone spatial impression |
| JP5995589B2 (ja) * | 2012-07-30 | 2016-09-21 | キヤノン株式会社 | 補正値導出装置、変位量導出装置、制御装置、および補正値導出方法 |
| EP2830327A1 (en) * | 2013-07-22 | 2015-01-28 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio processor for orientation-dependent processing |
| KR101846781B1 (ko) * | 2017-05-23 | 2018-04-06 | 서울대학교산학협력단 | 아날로그 디지털 변환 장치 |
| CN107277698A (zh) * | 2017-07-03 | 2017-10-20 | 太仓贝岭思拓软件科技有限公司 | 一种车载控制*** |
| KR102609084B1 (ko) * | 2018-08-21 | 2023-12-06 | 삼성전자주식회사 | 전자장치, 그 제어방법 및 기록매체 |
| WO2021010562A1 (en) * | 2019-07-15 | 2021-01-21 | Samsung Electronics Co., Ltd. | Electronic apparatus and controlling method thereof |
| US10735885B1 (en) * | 2019-10-11 | 2020-08-04 | Bose Corporation | Managing image audio sources in a virtual acoustic environment |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH057400A (ja) * | 1991-06-27 | 1993-01-14 | Matsushita Electric Ind Co Ltd | 音像の移動感制御方法 |
| JPH0795698A (ja) * | 1993-09-21 | 1995-04-07 | Sony Corp | オーディオ再生装置 |
| US5717767A (en) * | 1993-11-08 | 1998-02-10 | Sony Corporation | Angle detection apparatus and audio reproduction apparatus using it |
| EP0695109B1 (en) * | 1994-02-14 | 2011-07-27 | Sony Corporation | Device for reproducing video signal and audio signal |
| JP3385725B2 (ja) * | 1994-06-21 | 2003-03-10 | ソニー株式会社 | 映像を伴うオーディオ再生装置 |
| JP3577798B2 (ja) * | 1995-08-31 | 2004-10-13 | ソニー株式会社 | ヘッドホン装置 |
| US6243476B1 (en) * | 1997-06-18 | 2001-06-05 | Massachusetts Institute Of Technology | Method and apparatus for producing binaural audio for a moving listener |
| JPH11275696A (ja) * | 1998-01-22 | 1999-10-08 | Sony Corp | ヘッドホン、ヘッドホンアダプタおよびヘッドホン装置 |
-
2000
- 2000-07-25 JP JP2000224162A patent/JP4737804B2/ja not_active Expired - Fee Related
-
2001
- 2001-07-18 KR KR1020010043175A patent/KR100834562B1/ko not_active IP Right Cessation
- 2001-07-24 US US09/911,686 patent/US6947569B2/en not_active Expired - Lifetime
- 2001-07-25 EP EP01306356A patent/EP1176848A3/en not_active Ceased
Also Published As
| Publication number | Publication date |
|---|---|
| US6947569B2 (en) | 2005-09-20 |
| US20020025054A1 (en) | 2002-02-28 |
| EP1176848A3 (en) | 2007-05-30 |
| EP1176848A2 (en) | 2002-01-30 |
| KR100834562B1 (ko) | 2008-06-02 |
| JP2002044800A (ja) | 2002-02-08 |
| KR20020009425A (ko) | 2002-02-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4737804B2 (ja) | 音声信号処理装置及び信号処理装置 | |
| US7817806B2 (en) | Sound pickup method and apparatus, sound pickup and reproduction method, and sound reproduction apparatus | |
| JP3577798B2 (ja) | ヘッドホン装置 | |
| JP5676487B2 (ja) | モバイル用途のための頭部追跡 | |
| JP3385725B2 (ja) | 映像を伴うオーディオ再生装置 | |
| US8472653B2 (en) | Sound processing apparatus, sound image localized position adjustment method, video processing apparatus, and video processing method | |
| JP3687099B2 (ja) | 映像信号及び音響信号の再生装置 | |
| EP0465662B1 (en) | Apparatus for reproducing acoustic signals | |
| JP2964514B2 (ja) | 音響信号再生装置 | |
| JP2010147529A (ja) | 情報処理システムおよび情報処理方法 | |
| EP3354045A1 (en) | Differential headtracking apparatus | |
| WO1999040756A1 (fr) | Ensemble casque d'ecoute | |
| US7917236B1 (en) | Virtual sound source device and acoustic device comprising the same | |
| US11140509B2 (en) | Head-tracking methodology for headphones and headsets | |
| JP3918911B2 (ja) | 回転角検出装置、音声再生装置および頭部装着型ディスプレイ装置 | |
| JP3433513B2 (ja) | 回転角度検出機能を備えたヘッドホン装置 | |
| JP3750198B2 (ja) | 音像定位装置 | |
| CN116018824A (zh) | 信息处理方法、程序和音响再现装置 | |
| JP3940896B2 (ja) | 回転検出装置、コントローラ装置、ヘッドホン装置および信号処理システム | |
| JP2893780B2 (ja) | 音響信号再生装置 | |
| JP2003244797A (ja) | 信号処理装置 | |
| JP2893779B2 (ja) | ヘッドホン装置 | |
| JPH0946797A (ja) | 音響信号再生装置 | |
| JP2751513B2 (ja) | 音響信号再生装置 | |
| JP2751512B2 (ja) | 音響信号再生装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070213 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20081209 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20081216 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090128 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090303 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090407 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20090630 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090930 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20091014 |
|
| A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20091218 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110404 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110426 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140513 Year of fee payment: 3 |
|
| LAPS | Cancellation because of no payment of annual fees |