JP5014100B2 - Imaging device - Google Patents
Imaging device Download PDFInfo
- Publication number
- JP5014100B2 JP5014100B2 JP2007320957A JP2007320957A JP5014100B2 JP 5014100 B2 JP5014100 B2 JP 5014100B2 JP 2007320957 A JP2007320957 A JP 2007320957A JP 2007320957 A JP2007320957 A JP 2007320957A JP 5014100 B2 JP5014100 B2 JP 5014100B2
- Authority
- JP
- Japan
- Prior art keywords
- sound
- collecting element
- sound collecting
- signal obtained
- audio signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Stereophonic System (AREA)
- Circuit For Audible Band Transducer (AREA)
- Studio Devices (AREA)
- Stereophonic Arrangements (AREA)
Description
本発明は、撮像装置に関し、特に音声信号を処理することが可能な撮像装置に関する。 The present invention relates to an imaging device, and more particularly to an imaging device capable of processing an audio signal.
従来、音声信号を処理する撮像装置としてビデオカメラ等が知られている。ビデオカメラでは、被写体の音声を集音素子(マイクロフォン)によって集音し、映像と共に記録する。 Conventionally, a video camera or the like is known as an imaging device that processes an audio signal. In a video camera, sound of a subject is collected by a sound collecting element (microphone) and recorded together with an image.
これらビデオカメラのなかには、3つの無指向性集音素子により集音された音声信号を用いて、2チャンネルのステレオ音声信号を生成するものがある(例えば、特許文献1)。
近年、音声技術や音声再生機器の発達により、DVD等においても、ステレオ音声ではなく、5.1チャンネル等のマルチチャンネルの音声を視聴することができるようになってきた。 In recent years, with the development of audio technology and audio reproduction equipment, it has become possible to view multi-channel audio such as 5.1 channel, not stereo audio, even on a DVD or the like.
本発明は、4つの無指向性集音素子により集音された音声信号を用いて、例えばマルチチャンネルのサラウンド音声信号を生成する際に、サラウンド音声信号生成の為の演算がしやすい撮像装置を提供することを目的とする。さらに、上述の4つの無指向性集音素子の配置される面積を小さくすることで装置全体の大型化を防止することができる撮像装置を提供することを目的とする。 The present invention provides an imaging device that is easy to perform calculations for generating a surround sound signal when, for example, a multi-channel surround sound signal is generated using sound signals collected by four omnidirectional sound collecting elements. The purpose is to provide. Furthermore, it aims at providing the imaging device which can prevent the enlargement of the whole apparatus by making small the area where the above-mentioned four omnidirectional sound-collecting elements are arrange | positioned.
この様な課題を解決するために、本発明の撮像装置は、前方の被写体の光学像を撮像する撮像手段を有する撮像装置であって、周囲の音声を集音する集音手段と、前記集音手段により得られた音声信号に基づいて、複数のチャンネルの音声信号を生成する生成手段とを有し、前記集音手段は第1の集音素子と、前記第1の集音素子を通過する撮像手段の光軸と略平行な直線上であって前記第1の集音素子よりも後方に配置された第2の集音素子と、前記第1の集音素子と前記第2の集音素子とを頂点とし前記第1の集音素子と前記第2の集音素子と結んだ線分を底辺とする略二等辺三角形の頂角に配置された第3の集音素子と、前記第1の集音素子と前記第2の集音素子とを頂点とし前記第1の集音素子と前記第2の集音素子とを結んだ線分を底辺とする略二等辺三角形の頂角であり且つ前記第1の集音素子と前記第2の集音素子と前記第3の集音素子とを頂点とする三角形の内側に配置された第4の集音素子とからなり、前記生成手段は、前記第1の集音素子により得られた音声信号と前記第2の集音素子により得られた音声信号とから第1のチャンネルの音声信号を生成し、前記第1の集音素子により得られた音声信号と前記第4の集音素子により得られた音声信号とから第2のチャンネルの音声信号を生成し、前記第4の集音素子により得られた音声信号と前記第2の集音素子により得られた音声信号とから第3のチャンネルの音声信号を生成し、前記第2の集音素子により得られた音声信号と前記第3の集音素子により得られた音声信号とから第4のチャンネルの音声信号を生成し、前記第3の集音素子により得られた音声信号と前記第1の集音素子により得られた音声信号とから第5のチャンネルの音声信号を生成することを特徴とする。 In order to solve such a problem, an imaging apparatus according to the present invention is an imaging apparatus having an imaging unit that captures an optical image of a subject in front, a sound collection unit that collects surrounding sounds, and the collection unit. Generating means for generating audio signals of a plurality of channels based on the audio signal obtained by the sound means, the sound collecting means passing through the first sound collecting element and the first sound collecting element A second sound collecting element arranged on a straight line substantially parallel to the optical axis of the image pickup means and rearward of the first sound collecting element, the first sound collecting element, and the second sound collecting element. A third sound collecting element disposed at an apex angle of a substantially isosceles triangle having a sound element as a vertex and a line segment connecting the first sound collecting element and the second sound collecting element as a base; A line segment connecting the first sound collecting element and the second sound collecting element with the first sound collecting element and the second sound collecting element as vertices A fourth is disposed at an inner side of a triangle having an apex angle of a substantially isosceles triangle having a base and having the first sound collecting element, the second sound collecting element, and the third sound collecting element as vertices; And the generating means generates a first channel sound signal from the sound signal obtained by the first sound collecting element and the sound signal obtained by the second sound collecting element. Generating a second channel sound signal from the sound signal obtained by the first sound collecting element and the sound signal obtained by the fourth sound collecting element, and generating the fourth sound collecting element. A third channel sound signal is generated from the sound signal obtained by the second sound collecting element and the sound signal obtained by the second sound collecting element, and the sound signal obtained by the second sound collecting element and the third sound signal are obtained. Audio signal of the fourth channel from the audio signal obtained by the sound collecting element of Generated, and generates said third fifth channel audio signal from an audio signal obtained audio signal obtained as the sound collection devices by said first sound collection devices.
本発明によれば、4つの無指向性集音素子により集音された音声信号を用いて、例えばマルチチャンネルのサラウンド音声信号を生成する際に、サラウンド音声信号生成の為の演算がしやすくなる。また、上述の4つの無指向性集音素子の配置される面積を小さくすることで装置全体の大型化を防止することができる。 According to the present invention, for example, when a multi-channel surround sound signal is generated using sound signals collected by four omnidirectional sound collection elements, calculation for generating a surround sound signal is facilitated. . Moreover, the enlargement of the whole apparatus can be prevented by reducing the area where the above-mentioned four omnidirectional sound collecting elements are arranged.
以下、図面を参照して本発明の実施例を詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
4つの集音素子から入力されている音声信号に基づいてマルチチャンネルの音声信号を生成することができるビデオカメラについて説明する。 A video camera capable of generating a multi-channel audio signal based on audio signals input from four sound collecting elements will be described.
図1は、本実施例のビデオカメラの斜視図である。 FIG. 1 is a perspective view of the video camera of this embodiment.
図1において、100は本実施例のビデオカメラである。101は、被写体の光学像を取り込む撮影レンズである。102は、周囲の音声を集音する集音素子が4つ内蔵されたマイクユニットである。集音素子の配置については後述する。103は、撮影中は撮影レンズ101によって取り込まれた被写体の光学像を後述の映像処理部206で処理した映像を表示し、再生中は、後述の映像再生処理部211で処理した映像を表示しする他、メニュー画面等を表示する表示部である。
In FIG. 1,
本実施例では、図1に示すようにビデオカメラ100の前方を撮影レンズ101の配置されている方向としている。
In this embodiment, as shown in FIG. 1, the front side of the
図2は、図1のビデオカメラのブロック図である。 FIG. 2 is a block diagram of the video camera of FIG.
図2において、201はビデオカメラの各種機能に応じて、各ブロックを制御する制御部である。202は、外部からの指示をビデオカメラに入力するための操作部である。203は、制御部201からの制御信号や、操作部202からの指示信号等が行き来する制御信号バスである。204は、各ブロック間の画像データおよび音声データが行き来する画像/音声データバスである。
In FIG. 2,
205は、撮影レンズ101からの、光量を制御する絞り、光学像を電気信号に変換する撮像素子等からなる撮像部である。206は、撮像部205から得た映像信号を適正な信号レベルにし、デジタルデータに変換し、1フレーム分ずつ記録する等の映像記録方式に必要な処理を行う映像処理部である。
An imaging unit 205 includes an aperture for controlling the amount of light from the photographing
207は、マイクユニット102により、得られた音声信号を適正なレベルまで増幅し、音声信号をデジタルデータに変換するする処理を行う音声処理部である。音声処理部では、マイクユニット102の4つの集音素子から得られた音声信号を例えば、5.1チャンネルの音声データに変換する等の処理を行う。音声処理部207については後述する。
208は、表示部103の表示を制御するための表示制御部である。表示制御部208は、制御部201からの指示に応じて、各種モードに応じた情報を表示部103に表示させる。
Reference numeral 208 denotes a display control unit for controlling display on the
209は、映像処理部206から得られた映像データ、音声処理部207から得られた音声データ、その他のデータを必要に応じて関連づけて記録するための記録媒体としてのハードディスク(以後、HDD)である。210は、HDD209にアクセスし、上記の映像データ、音声データ、その他のデータ等を読み書きするためのアクセス部である。
211は、アクセス部210によって読み出されたHDD209の映像データを映像記録方式に従って処理し、所定の形態に変換する映像再生処理部である。212は、映像再生処理部211で再生された映像信号を外部に出力するための映像出力端子である。
A video
213は、アクセス部210によって読み出されたHDD209の音声データを映像記録方式に従って再生する音声再生処理部である。214は、音声再生処理部213で再生された音声信号を外部に出力するための音声出力端子である。
215は、PC等の外部機器と通信を行ったり、HDD209に記録された映像データ、音声データ等を外部機器とやり取したりするためのUSB端子である。216は、USB端子215と接続された外部機器とのデータのやり取りを制御するUSBコントローラである。
A USB terminal 215 communicates with an external device such as a PC, and exchanges video data, audio data, and the like recorded on the
217は、制御信号を外部機器に送信するための送信端子である。
まず、本実施例のビデオカメラの基本的な撮影動作について説明する。 First, the basic shooting operation of the video camera of this embodiment will be described.
操作部202の電源スイッチが操作されたことに応じて、ビデオカメラは撮影待機状態になる。この状態で、ユーザが操作部202の撮影ボタンを操作することにより、ビデオカメラに動画撮影開始の指示がなされる。この動画撮影開始の指示に応じて、制御部201は、撮像部205、映像処理部206等に撮影開始の指示信号を送信する。
In response to the operation of the power switch of the
撮影が開始すると、撮像部205は撮影レンズ101により取り込まれた被写体の光学像の光量を、絞りにより制御し、撮像素子により電気信号に変換する。そして、変換された電気信号は、映像処理部206で、適正なレベルに調整され、デジタルデータに変換る。そしてデジタルデータに変換された映像信号は、映像処理部106の画素数調整回路等によって適切な画素数に調整され、所定の映像記録方式で圧縮符号化され、映像データとなる。
When shooting starts, the image pickup unit 205 controls the light amount of the optical image of the subject captured by the
また、音声処理部207は、マイクユニット102の4つの集音素子により集音された4つの音声信号を適正なレベルまで増幅する。そして、これら4つの音声信号を、デジタルデータに変換し、例えば、5.1チャンネルの音声データに変換する等の音声記録方式に必要な処理が施され音声データとなる。
The
そして、制御部201は、上述の映像データと上述の音声データとを合成しデータストリームを形成し、アクセス部210に出力する。アクセス部210は、制御部201の指示に基づき、UDF、FAT等のファイルシステム管理のもとに、映像データと音声データのデータストリームを一つの動画ファイルとしてHDD209に書込みはじめる。ファイルシステムとは、ファイルの管理を行うための管理情報とファイルデータからなる構造体系を意味する。このファイルシステムを共通化することによって、異なった記憶媒体あるいは記録再生機器でも記録再生できる。
Then, the
データストリームは、必要に応じて表示制御部208を通して、表示部103に表示されることもある。
The data stream may be displayed on the
そして、ユーザが操作部202の撮影ボタンを再度操作することにより、ビデオカメラに動画撮影終了の指示がなされたことに応じて、制御部201は、撮像部205、映像処理部206等に撮影終了の指示信号を送信する。
Then, when the user operates the shooting button of the
動画撮影終了の指示信号を受信したことに応じて、撮像部205、映像処理部206は、撮影動作を終了する。アクセス部210は、制御部201の指示のもと、撮影開始から撮影終了までに記録された一連の映像データと音声データとを一つのファイルとしHDD209に書込み、記録動作を終了する。制御部201は、ビデオカメラを撮影待機状態に遷移させる。
In response to receiving the instruction signal for ending moving image shooting, the imaging unit 205 and the
次に、本実施例のビデオカメラの通常の再生動作について説明する。 Next, normal playback operation of the video camera of this embodiment will be described.
制御部201は、操作部202の選択スイッチによって再生モードが指定されたことに応じて、HDD209から映像データや静止画データを読み出すよう、アクセス部210を制御する。そして、読み出された映像データや静止画データのサムネイルを並べたサムネイル画面や、映像データや静止画データのファイル名を表示部103に表示するよう、表示制御部208を制御する。また、最後に撮影した映像データや静止画データ等を表示部103に表示するよう、表示制御部208を制御してもよい。
The
そして、サムネイル画面が表示された状態で、ユーザが操作部202を操作して、映像データや静止画データを再生する指示をすると、制御部201は、各画像データを再生するよう各ブロックを制御する。
When the user operates the
映像データを再生する際は、制御部201は、操作部202からの指示に応じて、HDD209から読み出したコンテンツデータを制御部201で音声データと映像データとを分離する。そして映像データは、映像再生処理部211で、復号されている情報量が伸張され、表示制御部208によって表示部103で映像として表示される。このとき、映像端子212からも映像信号を出力するように構成されているので、映像端子212を通して接続された映像表示可能な装置が映像を表示することができる。音声データは、音声再生処理部213に送信され、復号された情報量が伸張されて、5.1チャンネルのサラウンド音声データまたサラウンド音声信号に変換され、音声端子214から出力される。これにより、音声端子214に接続された音声出力可能な装置から、音声が出力されることになる。
When reproducing video data, the
ここで、本実施例のマイクユニット102と音声処理部207の構成について図3を用いて詳細に説明する。
Here, the configuration of the
図3において、図1のビデオカメラ100の上面から見たときのマイクユニット102を示している。音声処理部207では、5.1チャンネルのサラウンド音声を生成している。ここでは、低域波成分の音声に対応するサブチャンネルの音声信号の生成については説明を省略する。
3 shows the
まず、マイクユニット102について説明する。301から304は、集音素子である。それぞれの集音素子は、略無指向性の集音特性を有している。
First, the
集音素子301は、マイクユニット102内でビデオカメラ100の撮像方向の前方に配置されている。集音素子302は、マイクユニット内でビデオカメラ100の撮像方向の後方に配置されている。そして、集音素子302は、集音素子301を通過する撮像レンズ101の光軸と略平行な直線上であって集音素子301よりも後方に配置されている。そして、集音素子301と集音素子302の距離はLとする。距離Lは、例えば、14mm程度である。
The
集音素子303は、集音素子301と集音素子302とを頂点とし集音素子301と集音素子302と結んだ線分を底辺とする略二等辺三角形の頂角に配置されている。そして、本実施例では、集音素子303は、集音素子301と集音素子302を結んだ線よりも右寄りに配置されている。集音素子304は、集音素子301と集音素子302とを頂点とし集音素子301と集音素子302と結んだ線分を底辺とする略二等辺三角形の頂角に配置されている。そして、集音素子301、集音素子302、集音素子303を頂点とする三角形の内側に配置されている。
The
本実施例では、集音素子303を頂点とする二等辺三角形における、集音素子301と集音素子302の頂点の角度をθ1とし、例えば、略60度から80度を形成するように配置されている。また、集音素子304を頂点とする二等辺三角形における集音素子と集音素子302の頂点の角度をθ2とし、例えば略30度を形成するように配置されている。
In this embodiment, the angle of the vertices of the
また、本実施例では、集音素子301、集音素子302、集音素子303からなる面は、ビデオカメラ100の底面と略平行になるよう配置されている。また、集音素子301、集音素子302、集音素子304からなる面は、ビデオカメラ100の底面と略平行になるよう配置されている。
In the present embodiment, the surface including the
次に、音声処理部207について説明する。305は、各集音素子により集音された音声信号を適正なレベルに調整するオートゲインコントローラ(以後、AGC)である。306は、AGC305で適正なレベルに調整された音声信号をアナログデータからデジタルデータに変換するAD変換部(以後A/D)である。307は、入力された音声データを遅延させる遅延部である。308は、遅延されていない音声データから遅延部307により遅延された音声データを減算する減算器である。309は、高域周波数成分を減衰するためのイコライザ(以降、EQ)である。
Next, the
ここで、音声処理部207において、4つの略無指向性の集音素子により得られた音声信号から、5チャンネルのサラウンド音声データを生成する手順について説明する。
Here, a procedure for generating 5-channel surround sound data from sound signals obtained by the four substantially non-directional sound collecting elements in the
フロントセンターチャンネル(FC)は、集音素子301により得られた音声信号と、集音素子302により得られた音声信号とから生成される。フロントレフトチャンネル(FL)は、集音素子301により得られた音声信号と、集音素子304により得られた音声信号とから生成される。フロントライトチャンネル(FR)は、集音素子302により得られた音声信号と、集音素子304により得られた音声信号とから生成される。サラウンドレフトチャンネル(SL)は、集音素子302により得られた音声信号と、集音素子303により得られた音声信号とから生成される。サラウンドライトチャンネル(SR)は、集音素子301により得られた音声信号と、集音素子303により得られた音声信号とから生成される。
The front center channel (FC) is generated from the sound signal obtained by the
フロントセンターチャンネル(FC)を例にとって、5チャンネルのサラウンド音声データの個別のチャンネルの音声データを生成する方法について説明する。 Taking a front center channel (FC) as an example, a method of generating audio data of individual channels of 5-channel surround audio data will be described.
上述したように、フロントセンターチャンネル(FC)は、集音素子301により得られた音声信号と、集音素子302により得られた音声信号とから生成される。具体的には、集音素子302により得られた音声信号をある位相φ1だけ遅延させた音声データと、集音素子301から得られた音声データとから生成される。以下に具体的な算出方法を説明する。
As described above, the front center channel (FC) is generated from the audio signal obtained by the
集音素子301により得られた音声信号は、AGC305により適正なレベルの音声に調整され、A/D306により第1の音声データに変換される。集音素子302により得られた音声信号は、AGC305により適正なレベルの音声に調整され、A/D306により第2の音声データに変換され、遅延部307により遅延される。そして、第1の音声データから第2の音声データを減算器309で減算して、フロントセンターチャンネル(FC)の音声を生成するように構成されている。
The sound signal obtained by the
ここで、ビデオカメラに対して、ある音源Aから正弦波sinωtの音声の入力に着目する。この音声は、右方を0度としたときにある角度Xから入力されているものとし、音源Aの位置は、集音素子301と集音素子302との間の距離Lに対して十分に遠い距離からの入力であるとする。音源の位置がビデオカメラに対して前方であったとすると、集音素子301に入力され、その後、集音素子302に入力されることになる。音源Aから各マイクまでの距離の差を一般式で示すと、以下の式(1)のようになる。
(距離の差)=L×sinX=L・sinX ・・・(1)
音速をcとすると、sinωtの音声の波長は、以下の式(2)で求められる。
(音声の波長)=c÷(ω/2π)=2π・c/ω ・・・(2)
集音素子301に入力された音声が集音素子302に入力されるまでの時間をsinωtの音声の位相の差φxで示すと以下の式(3)で示される。
φx=L・sinX÷(2π・c/ω)×2π
=(L・ω・sinX)/c ・・・(3)
この音源により出力された正弦波sinωtの音声は、集音素子301により音声信号aに変換される。音声信号aは、以下に示す式(4)で示される。
a=sinωt ・・・(4)
この音源により出力された正弦波sinωtの音声は、集音素子301より遅れて、集音素子302により音声信号bに変換される。音声信号bは、以下に示す式(5)で示される。
b=sin(ωt+φx) ・・・(5)
また、遅延部307では、集音素子302により得られた音声信号をある位相φ1だけ遅延させている。従って、遅延部307により遅延された音声データb´は、以下に示す式(6)で示される。
b´=sin(ωt+φx+φ1) ・・・(6)
式(4)と式(6)とから、減算器308から出力される音声データは、以下に示す式(7)で示される。
a−b´=sinωt−sin(ωt+φx+φ1) ・・・(7)
ここで、Xが270度の時について着目する。この時、集音素子301に入力された音声が集音素子302に入力されるまでの時間をsinωtの音声の位相の差φbで示すと以下に示す式(8)で示される。
φb=−(L・ω)/c ・・・(8)
Xが270度の時、式(7)は、以下の式(9)ように示される。
a−b´=sinωt−sin(ωt+φb+φ1) ・・・(9)
ここで、本説明では、フロントセンターチャンネル(FC)の音声を生成したいので、後方からの音声に対しては、感度を下げる必要がある。つまり、音源が後方(Xが270度)である場合に、式(9)の出力が0になるようにするのである。従って式(9)は、以下の式(10)ように書換えることができる。
0=sinωt−sin(ωt+φb+φ1) ・・・(10)
上述の式(10)を成立させるためには、φ1=−φbとなるように設定すればよい。したがって、φ1は以下の式(11)で示される
φ1=(L・ω)/c ・・・(11)
式(7)と式(11)とから、フロントセンターチャンネル(FC)の音声を示す一般式は、以下の式(12)で示される。
(FC)=a−b´=sinωt−sin(ωt+φx+φ1)
=sinωt
−sin(ωt+L・ω・(sinX+1)/c) ・・・(12)
また、EQ309においては、高周波成分を必要に応じて減衰させて、指向性の良い音声データを出力する。以上のようにしてフロントセンターチャンネル(FC)の音声が得られるのである。
Here, attention is focused on the input of a sine wave sinωt sound from a certain sound source A to the video camera. It is assumed that the sound is input from an angle X when the right side is 0 degree, and the position of the sound source A is sufficiently large with respect to the distance L between the
(Distance difference) = L × sinX = L · sinX (1)
If the speed of sound is c, the wavelength of the sound of sin ωt can be obtained by the following equation (2).
(Sound wavelength) = c ÷ (ω / 2π) = 2π · c / ω (2)
The time until the sound input to the
φx = L · sinX ÷ (2π · c / ω) × 2π
= (L · ω · sinX) / c (3)
The sound of the sine wave sin ωt output from this sound source is converted into a sound signal a by the
a = sin ωt (4)
The sound of the sine wave sin ωt output by this sound source is converted into the sound signal b by the sound collecting element 302 after the
b = sin (ωt + φx) (5)
The
b ′ = sin (ωt + φx + φ1) (6)
From the expressions (4) and (6), the audio data output from the
a−b ′ = sin ωt−sin (ωt + φx + φ1) (7)
Here, attention is paid to the case where X is 270 degrees. At this time, the time until the sound input to the
φb = − (L · ω) / c (8)
When X is 270 degrees, Expression (7) is expressed as the following Expression (9).
a−b ′ = sin ωt−sin (ωt + φb + φ1) (9)
Here, in this description, since it is desired to generate the sound of the front center channel (FC), it is necessary to lower the sensitivity for the sound from the rear. That is, when the sound source is behind (X is 270 degrees), the output of Expression (9) is set to zero. Therefore, the equation (9) can be rewritten as the following equation (10).
0 = sinωt−sin (ωt + φb + φ1) (10)
In order to establish the above equation (10), it may be set so that φ1 = −φb. Therefore, φ1 is represented by the following equation (11): φ1 = (L · ω) / c (11)
From Expression (7) and Expression (11), a general expression indicating the sound of the front center channel (FC) is expressed by the following Expression (12).
(FC) = a−b ′ = sin ωt−sin (ωt + φx + φ1)
= Sinωt
-Sin (ωt + L · ω · (sinX + 1) / c) (12)
Further, in
上述の説明では、フロントセンターチャンネル(FC)を例にとって、5チャンネルの音声データを生成する方法について説明したが、この他のチャンネルについても同様にして求めることができる。この方式で算出した5チャンネルの音声のポーラパターンを図4に示す。 In the above description, the method of generating audio data of five channels has been described by taking the front center channel (FC) as an example, but other channels can be obtained in the same manner. FIG. 4 shows the polar pattern of the 5-channel audio calculated by this method.
図4(a)は、集音素子301と集音素子302とから算出したフロントセンターチャンネル(FC)の音声のポーラパターンである。図4(b)は、集音素子301と集音素子304とから算出したフロントレフトチャンネル(FL)の音声のポーラパターンである。図4(c)は、集音素子304と集音素子302とから算出したフロントライトチャンネル(FR)の音声のポーラパターンである。図4(d)は、集音素子302と集音素子303とから算出したサラウンドレフトチャンネル(SL)の音声のポーラパターンである。図4(e)は、集音素子303と集音素子301とから算出したサラウンドライトチャンネル(SR)の音声のポーラパターンである。
FIG. 4A shows a polar pattern of the sound of the front center channel (FC) calculated from the
以上のようにして、図3に示すマイクの配置で、5チャンネルの音声データを生成することができる。 As described above, 5-channel audio data can be generated with the microphone arrangement shown in FIG.
このような、4つの略無指向性集音素子の配置にすることにより、サラウンド音声信号を生成する際に、サラウンド音声信号生成の為の演算がしやすく、4つの無指向性集音素子の配置される面積を小さくすることができる。したがって、装置全体の大型化を防止することができる。 By arranging the four substantially omnidirectional sound collecting elements in this way, when generating a surround sound signal, it is easy to perform calculations for generating the surround sound signal. The arranged area can be reduced. Therefore, it is possible to prevent the entire apparatus from becoming large.
また、図4(b)(c)に示される角度θ2は、図3の角度θ2と対応しており、図(d)(e)に示される角度θ1は、図3の角度θ1と対応している。つまり、集音素子の配置を変更することで、算出結果として得られる音声の指向性を変更することができる。 Also, the angle θ2 shown in FIGS. 4B and 4C corresponds to the angle θ2 of FIG. 3, and the angle θ1 shown in FIGS. 4D and 3E corresponds to the angle θ1 of FIG. ing. That is, by changing the arrangement of the sound collecting elements, the directivity of the sound obtained as a calculation result can be changed.
また、本実施例では、フロントレフトチャンネル(FL)は、集音素子301により得られた音声信号と、集音素子304により得られた音声信号とから生成されていた。しかし、集音素子301により得られた音声信号と、集音素子303により得られた音声信号とから生成されてもよい。また、フロントライトチャンネル(FR)は、集音素子302により得られた音声信号と、集音素子304により得られた音声信号とから生成されていた。しかし、の集音素子302により得られた音声信号と、集音素子303により得られた音声信号とから生成されてもよい。また、サラウンドレフトチャンネル(SL)は、集音素子302により得られた音声信号と、集音素子303により得られた音声信号とから生成されていた。しかし、集音素子302により得られた音声信号と、集音素子304により得られた音声信号とから生成されてもよい。また、サラウンドライトチャンネル(SR)は、集音素子301により得られた音声信号と、集音素子303により得られた音声信号とから生成されていた。しかし、集音素子301により得られた音声信号と、集音素子304により得られた音声信号とから生成されてもよい。
In this embodiment, the front left channel (FL) is generated from the audio signal obtained by the
本実施例では、マイクユニット102において、集音素子303及び集音素子304は、集音素子301と集音素子302を結んだ線よりも右寄りに配置されていたが、左寄りに配置されても良い。
In the present embodiment, in the
また、本実施例では、5チャンネルのマルチチャンネル音声データを生成することについて説明したが、低周波成分の音声に対応するサブチャンネルの音声データを同時に生成しても良い。その際、少なくとも1チャンネルのサブチャンネルの音声データを生成しても良いし、複数のサブチャンネルの音声信号を生成しても良い。さらに、5チャンネルの音声データの高周波成分の音声に対応するチャンネルの音声データを同時に生成しても良い。 In this embodiment, generation of multi-channel audio data of 5 channels has been described. However, sub-channel audio data corresponding to low-frequency component audio may be generated simultaneously. At that time, audio data of at least one subchannel may be generated, or audio signals of a plurality of subchannels may be generated. Furthermore, the audio data of the channels corresponding to the audio of the high frequency component of the audio data of 5 channels may be generated simultaneously.
また、本実施例では、5チャンネルの音声データを生成したが、さらに、リアセンターチャンネル、レフトチャンネル、ライトチャンネルの音声データを生成するようにしてもよい。さらに、フロントレフトチャンネルとレフトチャンネルの間のチャンネル、フロントライトチャンネルとライトチャンネルの間のチャンネルの音声データを生成するようにしても良い。さらに、リアチャンネルとサラウンドレフトチャンネルの間のチャンネル、リアチャンネルとサラウンドライトチャンネルの間のチャンネルの音声データを生成するようにしても良い。これは、上述した算出方式により算出することができる。これを利用することにより、12チャンネルの音声データを生成することができる。 In this embodiment, the audio data for the five channels is generated. However, the audio data for the rear center channel, the left channel, and the right channel may be further generated. Furthermore, audio data of a channel between the front left channel and the left channel and a channel between the front right channel and the right channel may be generated. Further, audio data of a channel between the rear channel and the surround left channel and a channel between the rear channel and the surround right channel may be generated. This can be calculated by the calculation method described above. By utilizing this, 12-channel audio data can be generated.
本実施例では、遅延部307での位相遅延をφ1=(L・ω)/cとしている。従って、音声の周波数に応じて遅延角が変化するようになっている。すなわち、遅延部307のかわりに例えば3kHzにカットオフ周波数を設定したローパスフィルタ等で代用してもよい。ローパスフィルタを適用した場合、人の可聴領域の中心周波数付近である例えば1kHz付近での位相遅延が、上述したφ1(ω=1000・2π)なるようなローパスフィルタであればよい。また、高周波に向かうに従って位相遅延が増大するような周波数−位相特性を有するローパスフィルタでもよい。
In this embodiment, the phase delay in the
(他の実施例)
本発明は、実施例では、音声を集音する機能を有する装置として、ビデオカメラについて説明したが、これ以外の装置でもよい。
(Other examples)
In the embodiment, the video camera has been described as an apparatus having a function of collecting sound in the embodiment, but other apparatuses may be used.
また、本発明の目的は、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システム或いは装置に供給することによっても、達成されることは言うまでもない。このとき、供給されたシステム或いは装置のコンピュータ(またはCPUやMPU)は、記憶媒体に格納されたプログラムコードを読み出し実行する。 Needless to say, the object of the present invention can also be achieved by supplying a storage medium storing software program codes for realizing the functions of the above-described embodiments to a system or apparatus. At this time, the computer (or CPU or MPU) of the supplied system or apparatus reads and executes the program code stored in the storage medium.
この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、プログラムコード自体及びそのプログラムコードを記憶した記憶媒体は本発明を構成することになる。 In this case, the program code itself read from the storage medium realizes the functions of the above-described embodiments, and the program code itself and the storage medium storing the program code constitute the present invention.
プログラムコードを供給するための記憶媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、CD−R、磁気テープ、不揮発性のメモリカード、ROM等を用いることができる。 As a storage medium for supplying the program code, for example, a flexible disk, a hard disk, an optical disk, a magneto-optical disk, a CD-ROM, a CD-R, a magnetic tape, a nonvolatile memory card, a ROM, or the like can be used.
また、上述のプログラムコードの指示に基づき、コンピュータ上で稼動しているOS(基本システムやオペレーティングシステム)などが処理の一部又は全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。 Further, the OS (basic system or operating system) running on the computer performs part or all of the processing based on the instruction of the program code, and the functions of the above-described embodiments are realized by the processing. Needless to say, cases are also included.
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれ、前述した実施形態の機能が実現される場合も含まれることは言うまでもない。このとき、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPU等が実際の処理の一部又は全部を行う。 Further, the program code read from the storage medium may be written to a memory provided in a function expansion board inserted into the computer or a function expansion unit connected to the computer, and the functions of the above-described embodiments may be realized. Needless to say, it is included. At this time, based on the instruction of the program code, the CPU or the like provided in the function expansion board or function expansion unit performs part or all of the actual processing.
100 ビデオカメラ
101 撮影レンズ
102 マイクユニット
103 表示部
201 制御部
202 操作部
203 制御信号バス
204 画像/音声データバス
205 撮像部
206 映像処理部
207 音声処理部
208 表示制御部
209 HDD
210 アクセス部
211 映像再生処理部
212 映像出力端子
213 音声再生処理部
214 音声出力端子
215 USB端子
216 USBコントローラ
217 送信端子
301 集音素子
302 集音素子
303 集音素子
304 集音素子
305 AGC
306 A/D
307 遅延部
308 減算器
309 EQ
DESCRIPTION OF
210
306 A / D
307
Claims (8)
周囲の音声を集音する集音手段と、
前記集音手段により得られた音声信号に基づいて、複数のチャンネルの音声信号を生成する生成手段とを有し、
前記集音手段は第1の集音素子と、前記第1の集音素子を通過する撮像手段の光軸と略平行な直線上であって前記第1の集音素子よりも後方に配置された第2の集音素子と、前記第1の集音素子と前記第2の集音素子とを頂点とし前記第1の集音素子と前記第2の集音素子と結んだ線分を底辺とする略二等辺三角形の頂角に配置された第3の集音素子と、前記第1の集音素子と前記第2の集音素子とを頂点とし前記第1の集音素子と前記第2の集音素子とを結んだ線分を底辺とする略二等辺三角形の頂角であり且つ前記第1の集音素子と前記第2の集音素子と前記第3の集音素子とを頂点とする三角形の内側に配置された第4の集音素子とからなり、
前記生成手段は、前記第1の集音素子により得られた音声信号と前記第2の集音素子により得られた音声信号とから第1のチャンネルの音声信号を生成し、前記第1の集音素子により得られた音声信号と前記第4の集音素子により得られた音声信号とから第2のチャンネルの音声信号を生成し、前記第4の集音素子により得られた音声信号と前記第2の集音素子により得られた音声信号とから第3のチャンネルの音声信号を生成し、前記第2の集音素子により得られた音声信号と前記第3の集音素子により得られた音声信号とから第4のチャンネルの音声信号を生成し、前記第3の集音素子により得られた音声信号と前記第1の集音素子により得られた音声信号とから第5のチャンネルの音声信号を生成することを特徴とする撮像装置。 An imaging apparatus having an imaging means for imaging an optical image of a front subject,
A sound collecting means for collecting surrounding sounds;
Generating means for generating audio signals of a plurality of channels based on the audio signal obtained by the sound collecting means;
The sound collecting means is disposed on the first sound collecting element and a straight line substantially parallel to the optical axis of the image pickup means that passes through the first sound collecting element and behind the first sound collecting element. A line segment connecting the first sound collecting element and the second sound collecting element with the second sound collecting element, the first sound collecting element, and the second sound collecting element at the top is a bottom side. And the first sound collecting element and the second sound collecting element with the third sound collecting element arranged at the apex angle of the substantially isosceles triangle, the first sound collecting element and the second sound collecting element as vertices. The first sound collecting element, the second sound collecting element, and the third sound collecting element, each having an apex angle of a substantially isosceles triangle having a line segment connecting the two sound collecting elements as a base. Consisting of a fourth sound collecting element arranged inside the triangle as the apex,
The generating means generates a first channel sound signal from the sound signal obtained by the first sound collecting element and the sound signal obtained by the second sound collecting element, and the first sound collecting element. Generating an audio signal of the second channel from the audio signal obtained by the sound element and the audio signal obtained by the fourth sound collecting element; and the audio signal obtained by the fourth sound collecting element and the A sound signal of the third channel is generated from the sound signal obtained by the second sound collecting element, and the sound signal obtained by the second sound collecting element and the third sound collecting element are obtained. A fourth channel sound signal is generated from the sound signal, and a fifth channel sound is generated from the sound signal obtained by the third sound collecting element and the sound signal obtained by the first sound collecting element. An imaging device characterized by generating a signal.
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007320957A JP5014100B2 (en) | 2007-12-12 | 2007-12-12 | Imaging device |
US12/525,244 US8199954B2 (en) | 2007-12-12 | 2008-12-02 | Image capturing apparatus |
CN2008801114182A CN101822072B (en) | 2007-12-12 | 2008-12-02 | Image capturing apparatus |
PCT/JP2008/072217 WO2009075241A1 (en) | 2007-12-12 | 2008-12-02 | Image capturing apparatus |
KR1020107014933A KR101121030B1 (en) | 2007-12-12 | 2008-12-02 | Image capturing apparatus |
US13/470,667 US20120224082A1 (en) | 2007-12-12 | 2012-05-14 | Image capturing apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007320957A JP5014100B2 (en) | 2007-12-12 | 2007-12-12 | Imaging device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009147533A JP2009147533A (en) | 2009-07-02 |
JP5014100B2 true JP5014100B2 (en) | 2012-08-29 |
Family
ID=40917668
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007320957A Expired - Fee Related JP5014100B2 (en) | 2007-12-12 | 2007-12-12 | Imaging device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5014100B2 (en) |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001298790A (en) * | 2000-04-17 | 2001-10-26 | Matsushita Electric Ind Co Ltd | Recording and reproducing device and recording and reproducing method |
JP2002232989A (en) * | 2001-02-01 | 2002-08-16 | Matsushita Electric Ind Co Ltd | Multi-channel sound field sound collection system |
JP2003284179A (en) * | 2002-03-27 | 2003-10-03 | Matsushita Electric Ind Co Ltd | Microphone system |
JP2006314078A (en) * | 2005-04-06 | 2006-11-16 | Sony Corp | Imaging apparatus, voice recording apparatus, and the voice recording method |
JP2006311107A (en) * | 2005-04-27 | 2006-11-09 | Sony Corp | System and method for measuring speaker characteristic |
-
2007
- 2007-12-12 JP JP2007320957A patent/JP5014100B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2009147533A (en) | 2009-07-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20080212794A1 (en) | Audio processing apparatus | |
US20050237395A1 (en) | Information processing apparatus, imaging apparatus, information processing method, and program | |
JP5020845B2 (en) | Audio processing device | |
KR101121030B1 (en) | Image capturing apparatus | |
JP6666276B2 (en) | Audio signal conversion device, its method, and program | |
JP4901673B2 (en) | Imaging apparatus, recording apparatus, reproducing apparatus, imaging method, recording method, reproducing method, and program | |
JP4665793B2 (en) | Moving image file generation program and electronic camera | |
WO2006107102A1 (en) | Sound signal processing device and sound signal processing method | |
JP2012119803A (en) | Super-wide-angle video recording and reproducing device | |
JP2011188289A (en) | Imaging and audio recording system | |
JP5014100B2 (en) | Imaging device | |
JP5014101B2 (en) | Imaging device | |
JP2011120028A (en) | Sound reproducer and method for controlling the same | |
JP2009130820A (en) | Information processing apparatus | |
JP2006067355A (en) | Recorder | |
JP5072730B2 (en) | Signal processing device, imaging device | |
JP5349850B2 (en) | Signal processing device, imaging device | |
JP2008311931A (en) | Signal processor | |
JP2001086588A (en) | Audio signal processor and audio signal processing method and electronic device | |
JP5317936B2 (en) | Audio signal processing device | |
KR101281814B1 (en) | Photographing apparatus capable of recording stereophonic and the method thereof | |
JP4934062B2 (en) | TV camera | |
KR20060057748A (en) | Apparatus and method variable as corresponding to image and voice | |
JP2020123934A (en) | Data editing processing device, application, and photographing device | |
JP2010134260A (en) | Electronic apparatus and voice processing method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20100201 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20100630 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20101208 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120508 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120605 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150615 Year of fee payment: 3 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5014100 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150615 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |