JP2019194636A - Imaging system, control method of the same, imaging apparatus, program, and storage medium - Google Patents
Imaging system, control method of the same, imaging apparatus, program, and storage medium Download PDFInfo
- Publication number
- JP2019194636A JP2019194636A JP2018088401A JP2018088401A JP2019194636A JP 2019194636 A JP2019194636 A JP 2019194636A JP 2018088401 A JP2018088401 A JP 2018088401A JP 2018088401 A JP2018088401 A JP 2018088401A JP 2019194636 A JP2019194636 A JP 2019194636A
- Authority
- JP
- Japan
- Prior art keywords
- imaging
- pan
- camera
- tilt
- optical system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Indication In Cameras, And Counting Of Exposures (AREA)
- Accessories Of Cameras (AREA)
- Studio Devices (AREA)
- Cameras In General (AREA)
- Camera Bodies And Camera Details Or Accessories (AREA)
Abstract
Description
本発明は、複数の撮像装置を有し、少なくとも1つの撮像装置が向きを変えられるように構成された撮像システムに関するものである。 The present invention relates to an imaging system that includes a plurality of imaging devices and is configured such that the orientation of at least one imaging device can be changed.
従来、複数のカメラを搭載した撮影システムとして、第1の撮影装置と第2の撮影装置を備え、第1のレンズ鏡筒の画角が、第2のレンズ鏡筒の画角よりも広角であるように構成されたシステムが知られている。この撮影システムは、2次元画像を取得できる撮影装置を利用して3次元画像を簡易に撮影することができる(特許文献1参照)。 Conventionally, as a photographing system equipped with a plurality of cameras, a first photographing device and a second photographing device are provided, and the angle of view of the first lens barrel is wider than the angle of view of the second lens barrel. Systems configured in such a way are known. This photographing system can easily photograph a three-dimensional image using a photographing device capable of acquiring a two-dimensional image (see Patent Document 1).
上述の特許文献1では、3次元画像の取得を目的とし、2つの撮像装置が同じ方向を向いているため、それぞれの撮像装置において異なる被写体を撮影することは出来なかった。
In the above-mentioned
例えば、舞台の撮影を例に説明すると、第1の撮像装置を広角にして舞台の全体像を撮影し、第2の撮像装置を望遠にして舞台の一部分である演者を撮影している場合を想定する。この場合、演者が動いたとき、もしくは、現在撮影している演者から異なる演者に被写体を変更したいときには、第2の撮像装置の撮像方向を変更する必要がある。ところが、第2の撮像装置の撮像方向を変更すると、第1の撮像装置の撮像方向も変わってしまい、舞台の全体像の撮影が困難になる。 For example, taking shooting of the stage as an example, the case where the first imaging device is set to a wide angle to shoot the entire image of the stage, and the second imaging device is set to telephoto to shoot a performer that is part of the stage. Suppose. In this case, it is necessary to change the imaging direction of the second imaging device when the performer moves or when it is desired to change the subject from the presently performing performer to a different performer. However, if the imaging direction of the second imaging device is changed, the imaging direction of the first imaging device also changes, making it difficult to capture the entire image of the stage.
また、特許文献1に記載の撮影システムでは、設定される画像の画角によっては、一方の撮像装置で撮影された画像に他方の撮像装置の一部が写り込むケラレという状態が生じる場合がある。ケラレが生じた状態のままで記録を行うと、大切な撮影画像に本来記録する必要のない撮像装置の影が記録されてしまう。しかしながら、上述の特許文献1に開示された撮影システムでは、このケラレについては考慮されていない。
Further, in the photographing system described in
本発明は、上述した課題に鑑みてなされたものであり、その目的は、複数の撮像装置がそれぞれ違う被写体を撮影することが可能な撮像システムを提供することである。 The present invention has been made in view of the above-described problems, and an object thereof is to provide an imaging system in which a plurality of imaging devices can capture different subjects.
本発明に係わる撮像システムは、第1の撮像装置と第2の撮像装置とを少なくとも有する撮像システムであって、前記第1の撮像装置は、被写体像を結像させる第1の撮影光学系と、前記第1の撮影光学系により結像された被写体像を撮像する第1の撮像手段とを備え、前記第2の撮像装置は、被写体像を結像させる第2の撮影光学系と、前記第2の撮影光学系により結像された被写体像を撮像する第2の撮像手段と、前記第2の撮影光学系の撮像方向を変更させるための駆動手段と、前記第2の撮影光学系の撮像方向を変更して特定の被写体を追尾するように前記駆動手段を制御する制御手段と、を備えることを特徴とする。 An imaging system according to the present invention is an imaging system including at least a first imaging device and a second imaging device, and the first imaging device includes a first imaging optical system that forms a subject image; A first imaging unit that images a subject image formed by the first photographing optical system, and the second imaging device includes a second photographing optical system that forms a subject image; A second imaging unit that images a subject image formed by the second imaging optical system, a driving unit for changing an imaging direction of the second imaging optical system, and a second imaging optical system. Control means for controlling the drive means so as to change the imaging direction and track a specific subject.
本発明によれば、複数の撮像装置がそれぞれ違う被写体を撮影することが可能な撮像システムを提供することができる。 According to the present invention, it is possible to provide an imaging system in which a plurality of imaging devices can capture different subjects.
以下、本発明の実施形態について添付図面を参照して詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.
<第1の実施形態>
図1は、本発明の第1の実施形態の撮像システムを示す外観斜視図である。図1(a)は、撮像システム1を正面側から見た斜視図であり、図1(b)は、撮像システム1を背面側から見た斜視図である。
<First Embodiment>
FIG. 1 is an external perspective view showing an imaging system according to a first embodiment of the present invention. FIG. 1A is a perspective view of the
図1において、撮像システム1は、光軸の向きを変更できない第1のカメラ(以下、固定カメラ)2と、駆動手段を用いて光軸の向きを変更可能な第2のカメラ(以下、パンチルトカメラ)3とを有する。パンチルトカメラ3は、モーター等のアクチュエーターを用いて、電動で光軸の向きを変更可能である。
In FIG. 1, an
パンチルトカメラ3は、固定カメラ2の上面に配置されており、固定カメラ2の上面を基準にパンチルト可能に配置されている。なお、本実施形態では、パンチルトカメラ3と固定カメラ2は一体の撮影装置として構成しているが、本発明はこの形態に限定されるものではない。例えば、パンチルトカメラ3と固定カメラ2は、それぞれ独立した別体のカメラであって、パンチルトカメラ3を固定カメラ2の上面に着脱可能にした構成でも構わない。
The pan /
ここで、X軸を固定カメラ2の幅方向(横方向)、Y軸を固定カメラ2の高さ方向(縦方向)、Z軸を固定カメラ2の光軸方向(奥行き方向)として、以下説明する。
Here, the X axis is the width direction (horizontal direction) of the
パンベース部9を台座として、パン駆動部10が、Y軸と平行な軸14を中心として左右回転することにより、パン動作が行われる。また、パン駆動部10を台座として、チルト駆動部11が、X軸と平行な軸13を中心として上下回転することにより、チルト動作が行われる。なお、軸13と軸14は直交している。チルト駆動部11には、パンチルトカメラ3のレンズ鏡筒部12と、レンズ鏡筒部(第2の撮影光学系)12により結像された被写体像を撮像する後述する撮像素子302が配置されている。
With the
パン動作およびチルト動作は、各々を単独で動作させることが出来るだけでなく、パン動作とチルト動作を同時に組み合わせることも出来る。パン動作とチルト動作を同時に組み合わせることで、パンチルトカメラ3は、パンチルトカメラ3を中心とした上下左右の全周の範囲の方向を撮影することが可能となる。
The pan operation and tilt operation can be operated not only independently, but also the pan operation and tilt operation can be combined at the same time. By combining the pan operation and the tilt operation at the same time, the pan /
図2は、パンチルトカメラ3が、パン動作およびチルト動作をした状態の一例を示す図である。図2では、固定カメラ2の正面から見て、右側に45度(回転角度)のパン動作、上側に60度のチルト動作を行った状態を示している。前述のように、パン動作、チルト動作は、パンチルトカメラ3を中心として上下左右の全周の範囲にわたって可能である。
FIG. 2 is a diagram illustrating an example of a state in which the pan /
図1(a)に示すように、パンチルトカメラ3が固定カメラ2と同じ正面方向を向いた時には、パンチルトカメラ3の光軸と固定カメラ2の光軸は、X方向の位置が一致している。言い換えると、パンチルトカメラ3の光軸は、固定カメラ2の光軸の真上に平行に配置される状態となる。また、同様に、後述するパンチルトカメラ3の撮像素子も固定カメラ2の撮像素子の真上に平行に配置される状態となる。
As shown in FIG. 1A, when the pan /
パンチルトカメラ3の光軸と固定カメラ2の光軸のX方向の位置を一致させることにより、2つのカメラが同じ被写体を撮影した時の、被写体のずれを少なくできる。本実施形態では、パンチルトカメラ3を固定カメラ2の上面に配置しているが、この構成に限定されるものではない。例えば、パンチルトカメラ3を固定カメラ2の側面または下面に配置してもよい。つまりは、パンチルトカメラ3と固定カメラ2が、同じ被写体を撮影できる位置関係に配置されていればよい。
By matching the positions of the optical axis of the pan /
図1(b)に示すように、固定カメラ2の背面には、画像表示部7が配置されている。画像表示部7の右側には、操作部材(操作ボタン)8a〜8fが配置されている。操作部材8a〜8fを操作することにより撮影画像を画像表示部7に表示させたり、カメラの様々な設定を行ったりすることができる。
As shown in FIG. 1B, an
固定カメラ2の前面には、レンズ鏡筒部(第1の撮影光学系)4が配置されている。固定カメラ2の上面部には、撮影時にシャッターを切るためのシャッターボタン5、レンズ鏡筒部4のズーム操作を行うズームレバー6が配置されている。シャッターボタン5をユーザが操作すると、パンチルトカメラ3と固定カメラ2で同時に撮影を行うことが可能である。撮像システム1の設定によっては、シャッターボタン5の操作で、パンチルトカメラ3、固定カメラ2のどちらか一方で撮影することも可能である。ユーザがズームレバー6をテレ側に操作すると、固定カメラ2のレンズ鏡筒部4が固定カメラ2から突出する方向に駆動される。また、ワイド側に操作すると、固定カメラ2のレンズ鏡筒部4が固定カメラ2に繰り込まれる方向に駆動される。また、ズームレバー6を操作した際に、パンチルトカメラ3のズームを動作させるように設定することも可能である。
A lens barrel (first photographing optical system) 4 is disposed on the front surface of the fixed
画像表示部7には、固定カメラ2で撮影された画像(再生画像)、およびパンチルトカメラ3で撮影された画像(再生画像)を表示することが可能である。どちらかのカメラの撮影画像(再生画像)を表示している際に、他方のカメラの撮影画像(再生画像)を表示させたい場合は、操作部材8を操作することにより切り替えが可能である。加えて、2つのカメラの撮影画像(再生画像)を同時に表示させることも可能である。さらには、パンチルトカメラ3で撮影された画像、および固定カメラ2で撮影された画像を、不図示の電子機器に無線送信して表示させることも可能である。同様に、どちらか一方の画像、もしくは両方の画像を表示させることも可能である。
The
画像表示部7は、表示画面上にパンチルトカメラ3の撮影中の画像(パンチルトカメラライブビュー画像)および、固定カメラ2の撮影中の画像(固定カメラライブビュー画像)を表示することが可能である。どちらかのカメラのライブビュー画像を表示している際に、他方のカメラのライブビュー画像を表示させたい場合は、操作部材8を操作することにより切り替えが可能である。加えて、2つのカメラのライブビュー画像を同時に表示することも可能である。
The
さらには、パンチルトカメラ3のライブビュー画像、および固定カメラ2のライブビュー画像を、不図示の電子機器に無線送信し、ライブビュー画像を電子機器の画像表示部に表示させることも可能である。ライブビュー画像を電子機器に無線送信する際には、パンチルトカメラ3のライブビュー画像を電子機器の画像表示部に表示させ、固定カメラ2のライブビュー画像を画像表示部7に表示させてもよい。また、逆に、パンチルトカメラ3のライブビュー画像を画像表示部7に表示させ、固定カメラ2のライブビュー画像を電子機器の画像表示部に表示させてもよい。また、両方のライブビュー画像を電子機器の画像表示部に表示させてもよい。なお、本実施形態では、画像表示部7を一つのみ搭載しているが、パンチルトカメラ3専用の画像表示部と固定カメラ2専用の画像表示部の2つの画像表示部を搭載してもよい。
Furthermore, the live view image of the pan /
パンチルトカメラ3で被写体を自動追尾させるには、画像表示部7、もしくは不図示の電子機器にパンチルトカメラのライブビュー画像を表示させて、表示中の被写体を操作部材8を用いて指定する。操作部材8でなくても、画像表示部7および不図示の電子機器の画像表示部がタッチパネルを備え、タッチ操作可能である場合は、表示されている被写体を画面上でタッチして指定してもよい。
In order to automatically track the subject with the pan /
パンチルトカメラ3で撮影中に、ユーザが追尾する被写体を指定することにより、被写体が移動しても、自動でその被写体を追尾することが可能である。パンチルトカメラ3が自動追尾をしている最中は、パンチルトカメラ3は、前述のパン動作とチルト動作を組み合わせて、被写体を追尾することが可能である。
By specifying the subject to be tracked by the user during shooting with the pan /
パンチルトカメラ3が被写体を自動追尾している最中であっても、固定カメラ2を通常通りに操作、および撮影することが可能である。そのため、ユーザは、一度パンチルトカメラ3を自動追尾の設定にしておくと、固定カメラ2の操作に専念することが可能となる。よって、固定カメラ2は、パンチルトカメラ3の被写体とは別の被写体を撮影することも可能である。このような設定の時には、例えば、パンチルトカメラ3で飛行している飛行体(鳥や飛行機)を撮影中に、固定カメラ2では地上にいる被写体を同時に撮影することが可能となる。これは、両方のカメラが動画撮影中であっても、静止画撮影中であってもよく、一方のカメラが動画撮影中で、他方のカメラが静止画撮影中であってもよい。
Even when the pan /
図3は本実施形態の撮像システム1の構成を示すブロック図である。
FIG. 3 is a block diagram illustrating a configuration of the
まず、パンチルトカメラ3側の構成について説明する。光学系/光学系駆動機構301は、レンズ鏡筒部12を含み、撮影する際の光学系の焦点調節やズームの駆動を行う。撮像素子302は、光学系/光学系駆動部301により結像された光学情報を電子情報に変換する。画像処理部303は、撮像素子302により電子情報に変換されたデータに対して、圧縮処理やその他の画像処理を行う。画像記録部304は、画像処理部303から出力された画像データを格納する。
First, the configuration on the pan /
CPU305は、パンチルトカメラ3の全ての処理を統合して各種演算を行ったり、各部に指示を出したりする。画像表示部306は、画像記録部304に格納された画像データを表示したり、撮影中のライブビュー画像を表示したりする。画像表示部306は、図1においては不図示であるが、パンチルトカメラ3に備えられている。
The
パンチルト駆動部307は、図1に示したパンベース部9、パン駆動部10、チルト駆動部11を含み、パンチルトカメラ3のパン動作、チルト動作のための駆動を行う。パンチルト制御部308は、パンチルト駆動部307がパン動作、チルト動作をするための制御部であり、CPU305からの指示によりパン動作、チルト動作を制御する。パンチルト位置検出部309は、パンチルト駆動部307のパン、およびチルトの位置検出を行う。図2の例では、パン角度:右側45度、チルト角度:上側60度の位置検出を行い、CPU305にその情報を入力する。
The pan /
次に固定カメラ2の構成について説明する。光学系/光学系駆動機構201は、図1に示したレンズ鏡筒部4を含み、撮影する際の光学系の焦点調節やズームの駆動を行う。撮像素子202は、光学系/光学系駆動部201により結像された光学情報を電子情報に変換する。画像処理部203は、撮像素子202により電子情報に変換されたデータに対して、圧縮処理やその他の画像処理を行う。画像記録部204は、画像処理部203から出力された画像データを格納する。
Next, the configuration of the fixed
CPU205は、固定カメラ2の全ての処理を統合して各種演算を行ったり、各部に指示を出したりする。画像表示部206は、図1に示した画像表示部7を含み、画像記録部204で格納された画像データを表示したり、撮影中のライブビュー画像を表示したりする。操作処理部207は、操作部材8の操作により入力された指令を受け付ける処理を行い、CPU205に入力する。
The
外部機器接続部208は、外部の電子機器を、無線もしくは有線で撮像システム1に接続する。外部機器接続部208によって接続された電子機器は、パンチルトカメラ3の画像表示、撮影操作、その他の操作、固定カメラ2の画像表示、撮影操作、その他の操作などを撮像システム1の外部から指示することができる。
The external
被写体検出部209は、操作処理部207により指定された被写体の画像データ上の位置や大きさを算出する。被写体像はライブビュー画像として表示される。ライブビュー動作でサンプリングした画像データに対して連続的に被写体検出を行うことにより、パンチルトカメラ3は被写体の動きを追尾することが可能となる。追尾している被写体を後述する被写体追尾領域で検出した場合は、CPU305は、パンチルト駆動制御部308に対して、パンチルト駆動部307を駆動して被写体を画角内に収めるよう指示する。
The
画像データ上の被写体の位置は、画像をいくつかのエリアに分けて、被写体がどのエリアに進入しているかを算出し、そのエリアを被写体の位置とすることにより検出する。エリアを細かくすることにより、詳細な位置検出を行うことが可能となる。このような処理により、ユーザは、パンチルトカメラ3の動作を気にせず、固定カメラ2でパンチルトカメラ3とは異なる被写体を撮影することが出来る。
The position of the subject on the image data is detected by dividing the image into several areas, calculating which area the subject has entered, and setting that area as the position of the subject. By making the area fine, detailed position detection can be performed. Through such processing, the user can take an image of a subject different from the pan /
パンチルトカメラ3と固定カメラ2は、お互いのCPU305とCPU205で通信を行うことで、さまざまなデータを相互にやり取りすることが可能である。具体的なデータのやり取りは、以下の通りである。
The pan /
パンチルトカメラ3の撮像素子302で撮影中のライブビュー画像のデータを固定カメラ2に送ることにより、固定カメラ2の画像表示部206でパンチルトカメラ3のライブビュー画像を表示することが出来る。固定カメラ2の撮像素子202で撮影中のライブビュー画像のデータをパンチルトカメラ3に送ることにより、パンチルトカメラ3の画像表示部306で固定カメラ2のライブビュー画像を表示することが出来る。
By sending live view image data being captured by the
パンチルトカメラ3の画像記録部304に格納された記録画像のデータを固定カメラ2に送ることにより、固定カメラ2の画像表示部206でパンチルトカメラ3の記録画像を表示することが出来る。固定カメラ2の画像記録部204に格納された記録画像のデータをパンチルトカメラ3に送ることにより、パンチルトカメラ3の画像表示部306で固定カメラ2の記録画像を表示することが出来る。
By sending the recorded image data stored in the
パンチルトカメラ3の光学系/光学系駆動機構301の画角、ズーム量、レンズ鏡筒部の大きさ(レンズ鏡筒部の長さ、太さ)、ズーム駆動の速さを固定カメラ2側に送ることで、パンチルトカメラ3の光学系に合わせた動作を固定カメラ2が行うことが出来る。例えば、パンチルトカメラ3の光軸の向きを変更中に固定カメラ2のレンズ鏡筒部4が画角に写り込む場合には、固定カメラ2のレンズ鏡筒部をワイド側(つまり繰り込む側)に駆動して、レンズ鏡筒部4が写り込まないように協調動作させることが出来る。
The angle of view of the optical system / optical
固定カメラ2の光学系/光学系駆動機構201の画角、ズーム量、レンズ鏡筒部の大きさ(レンズ鏡筒部の長さ、太さ)、ズーム駆動の速さをパンチルトカメラ3側に送ることで、固定カメラ2の光学系に合わせた動作をパンチルトカメラ3が行うことが出来る。例えば、パンチルトカメラ3の光軸の向きを変更中に固定カメラ2のレンズ鏡筒部4が画角に写り込む場合に、パンチルトカメラ3の光軸移動を制限させて、固定カメラ2のレンズ鏡筒部4が写り込まないように協調動作させることが出来る。
The angle of view of the optical system / optical
パンチルトカメラ3のパンチルト位置検出部309で検出されたパンチルトカメラ3の位置、パンチルト駆動速度を固定カメラ2側に送ることにより、パンチルトカメラ3のパンチルト位置やパンチルト駆動速度に合わせた動作を固定カメラ2が行うことが出来る。例えば、パンチルトカメラ3の位置情報を固定カメラ2の画像表示部7に表示することにより、パンチルトカメラ3が捉えている被写体を固定カメラ2の操作をしている最中でも認識しやすくなる。
By sending the position of the pan /
固定カメラ2の操作された情報を、操作処理部207からパンチルトカメラ3に送ることにより、操作された内容に沿ってパンチルトカメラ3を操作することが可能である。例えば、操作部材8cの左側を押すと、パンチルトカメラ3は、固定カメラ2の背面から見て、左側へのパン動作を電動で行う。他の方向への移動も、ユーザがキーの上や下や右、もしくは斜め方向を押すことで、パン動作、チルト動作を任意に組み合わせて行うことが可能となる。
By operating the operation information of the fixed
固定カメラ2の外部機器接続部208に外部機器を接続することにより、パンチルトカメラ3の画像表示、撮影操作、その他の操作、固定カメラ2の画像表示、撮影操作、その他の操作を外部機器から行うことが可能である。
By connecting an external device to the external
固定カメラ2とパンチルトカメラ3がそれぞれ電池を備えている場合、固定カメラ2の電池残量情報とパンチルトカメラ3の電池残量情報を相互にやり取りすることが可能である。そして、例えば、一方の電池残量が少ない場合は、他方の電池から電源を供給することもできる。
When the fixed
不図示であるが、パンチルトカメラ3はGPSを備えており、GPS情報に基づいて、時刻情報や地図上の位置情報を取得することが可能であり、時刻情報を表示したり、画像データに位置情報を付加したりすることもできる。さらには、パンチルトカメラ3のGPS情報を固定カメラ2に送信して、固定カメラ2の時刻情報に使用したり、固定カメラ2の画像データに位置情報を付加したりすることもできる。GPSを備えるのは、パンチルトカメラ3側ではなく、固定カメラ2側であってもよく、その場合は、固定カメラ2のGPS情報をパンチルトカメラ3に送信してもよい。
Although not shown, the pan /
図4は、被写体(特定の被写体)を追尾する処理を説明する図である。図4は、画像表示部7で表示される画角全体(画面全体)に対して所定の比率よりも外側の領域(表示画面の周囲の領域)を被写体追尾領域15として示している。例えば、画面の中心点を0%、画面全体を100%とし、画面全体に対して80%となる位置を被写体追尾領域15の境界として設定する場合、画面全体における80〜100%の領域が被写体追尾領域15となる。画像内の被写体追尾領域15に追尾枠16の一部が進入すると、パンチルト駆動制御部308は、パンチルト動作を開始するよう制御される。また、パンチルト位置検出部309は、パンチルト移動前のパンチルトカメラ3の位置を記憶する。パンチルト動作中のパンチルトの駆動速度は、被写体のサイズや移動速度に応じて予め設定される。また、パンチルトの駆動速度を被写体のサイズや移動速度に応じて適宜算出してもよい。これにより、被写体の追尾をすることができる。
FIG. 4 is a diagram illustrating processing for tracking a subject (a specific subject). FIG. 4 shows a
図4(a)では、追尾枠16が被写体追尾領域15に進入しており、画像処理部303は追尾枠16が画面上のどの位置にあるかの情報を取得する。図4(a)の状態では、追尾枠16は画像中心より左上に位置しているという情報を取得する。画像処理部303により取得された位置情報に基づいて、追尾枠16が被写体追尾領域15から出るようにパンチルト駆動制御部308がパンチルトカメラ3をパンチルト駆動させる。図4(a)では、追尾枠16は画像中心より左上に位置しているため、パンチルトカメラ3を図2に示したように固定カメラ2の正面から見て、右側に45度パン動作させ、上側に60度チルト動作させる。このように駆動させると、図4(b)のように、追尾枠16は被写体追尾領域15から出る。
In FIG. 4A, the
本実施形態では、被写体追尾領域15の境界を画面全体に対して80%となる位置に設定しているが、被写体を画面中央で追尾したい場合は、80%から例えば20%に変更して画面中央に集まるようにしてもよい。
In the present embodiment, the boundary of the
図5は、被写体を追尾する処理を示すフローチャートである。 FIG. 5 is a flowchart showing processing for tracking a subject.
S10では、追尾枠16が被写体追尾領域15に進入しているか否かを判別する。S10で、YES判定、すなわち追尾枠16が被写体追尾領域15に進入している場合は、S11に進む。S10で、NO判定、すなわち追尾枠16が被写体追尾領域15に進入していない場合は、S10へ戻る。
In S10, it is determined whether or not the
S11では、追尾枠16が画角内のどの位置あるかの位置情報を取得し、被写体の位置を把握する。S12では、S11で取得した被写体の位置情報に基づいて、パンチルトカメラ3の光軸を追尾枠16が被写体追尾領域15から出るようにパンチルト駆動させる。パンチルトカメラ3の光軸を駆動させた後は、S13へと進む。
In S11, position information indicating where the
S13では、追尾枠16の大きさ(被写体の大きさ)が所定の大きさか否かを判定する。この処理は、S12で、パンチルトカメラ3の光軸駆動の最中に被写体がパンチルトカメラ3に近づいたり、離れたりした場合を想定しており、被写体の大きさの変動があった場合は、S14へと進む。S13でYES判定、すなわち被写体の大きさの変動がない場合は、S10へと戻る。
In S13, it is determined whether or not the size of the tracking frame 16 (the size of the subject) is a predetermined size. This process assumes that the subject approaches or moves away from the pan /
以上説明したように、撮像システム1がパンチルトカメラ3と固定カメラ2を備えることにより、一つの被写体を2つのカメラで撮影することもでき、かつ、2つの被写体を2つのカメラで撮影することもできる。また、2つの被写体をパンチルトカメラ3と固定カメラ2で同時に撮影する際は、パンチルトカメラ3が被写体を自動追尾するため、ユーザは、固定カメラ2だけを操作すればよく、2つのカメラを同時に操作するという煩雑な作業を回避することが出来る。
As described above, since the
次に、本実施形態におけるパンチルトカメラ3の撮像方向を画像表示部7に表示する例について説明する。まず、パンチルトカメラ3の方向を画像表示部7に表示する方法について説明し、次にその表示する方法のフローチャートについて説明する。
Next, an example in which the imaging direction of the pan /
パンチルトカメラ3の方向とは、固定カメラ2の光軸に対するパンチルトカメラ3の光軸の方向のずれ量を示すものであり、パンチルトカメラ3の光軸と固定カメラ2の光軸の方位差を算出することにより求められる。パンチルトカメラ3の方向を表示する方法として、本実施形態では矢印を用いる。
The direction of the pan /
図6は、パンチルトカメラ3および固定カメラ2の撮影状態において、固定カメラ2のライブビュー画像を画像表示部7に表示している画面を示す図である。図6(a)は、図1に示したパンチルトカメラ3と固定カメラ2の位置関係において、固定カメラ2が撮影しているライブビュー画像を画像表示部7に表示している画面を示している。
FIG. 6 is a diagram showing a screen displaying a live view image of the fixed
図1では、パンチルトカメラ3の光軸は、固定カメラ2の光軸と平行で、かつ、お互いのカメラの光軸の向いている方向が一致している。これは、パンチルトカメラ3がパン動作およびチルト動作を一切していない、初期位置を示している。
In FIG. 1, the optical axis of the pan /
この状態のとき、固定カメラ2のライブビュー画像では、被写体20の周りに配置されている複数の矢印21が半透明状態に表示されるか、あるいは何も表示されていない状態となる。つまり、パンチルトカメラ3の方向は表示されない。よって、ユーザは、パンチルトカメラ3と固定カメラ2が同じ方向を向いていることがわかる。同じ方向を向いていることが分かるので、固定カメラ2でパンチルトカメラ3と同じ方向の被写体を撮影することが容易となる。
In this state, in the live view image of the fixed
次に、パンチルトカメラ3がパン動作、チルト動作をした場合について説明する。図6(b)は、図2に示したパンチルトカメラ3と固定カメラ2の位置関係の場合に、画像表示部7に表示される、固定カメラ2が撮影しているライブビュー画像を示している。図2は、前述のように、パンチルトカメラ3が固定カメラ2の正面から見て右側に45度のパン動作、上側に60度のチルト動作をした後の状態を示している。
Next, a case where the pan /
この状態のとき、固定カメラ2のライブビュー画像では、図6(b)のように被写体20の周りに配置されている矢印のうちの矢印22が実線表示で点灯される状態になり、パンチルトカメラ3の方向を表示する。パンチルトカメラ3が右側へ45度のパン動作、上側に60度のチルト動作をしているので、その方向に対応した左上の矢印22が実線表示で点灯される。つまり、パンチルトカメラ3の方向と矢印22の方向とが一致するように表示される。ユーザが矢印の方向に固定カメラ2の光軸を動かせば、固定カメラ2の光軸とパンチルトカメラ3の光軸が一致することを表している。
In this state, in the live view image of the fixed
矢印が点灯することによって、ユーザは、パンチルトカメラ3の光軸と固定カメラ2の光軸が異なる方向を向いていることがわかる。そして、ユーザは、画像表示部7から目を離すこと無く、矢印22を確認することにより、どの方向に固定カメラ2の光軸方向を動かせばよいか把握できるようになり、固定カメラ2の光軸をパンチルトカメラ3の光軸と同じ方向に向けることが容易となる。
When the arrow is lit, the user can see that the optical axis of the pan /
図6(c)は、パンチルトカメラ3が固定カメラ2の正面から見て、180度のパン動作、0度のチルト動作をした(チルト動作していない)後に、固定カメラ2の画像表示部7に表示される画面を示す図である。
FIG. 6C shows the
パンチルトカメラ3が180度のパン動作のみであることから、パンチルトカメラ3の光軸は、固定カメラ2と光軸が平行であるが、お互いのカメラが向いている方向が逆である。この状態では、固定カメラ2を水平に180度回転させると、パンチルトカメラ3と同じ方向を向かせることが出来るので、矢印23が点灯する。矢印23は、180度回転するような図形となっている。
Since the pan /
図6(d)は、パンチルトカメラ3が一定の閾値を超えてパン動作、チルト動作をした時の固定カメラ2の画像表示部7に表示される画面を示す図である。図6(d)では、パンチルトカメラ3が、固定カメラ2の正面から見て、右側に90度のパン動作を行い、チルト動作はしていない状態を示しており、パン動作の一定の閾値を仮に75度とした場合の画面を示している。
FIG. 6D is a diagram showing a screen displayed on the
パンチルトカメラ3が右側に90度のパン動作を行い、チルト動作はしていない状態であることから、画像表示部7では、矢印24が点灯するが、閾値の75度を超えると、通常の矢印表示に加えて、さらに矢印24の大きさを変えて強調表示する。図6(d)のように矢印の大きさを大きくすることにより、通常の矢印よりも、パンチルトカメラ3のパン動作の角度が大きいことが分かる。ユーザは、矢印24の大きさを見ることで、パンチルトカメラ3の動作の量が大きいことが分かり、固定カメラ2を操作する角度を大きくすれば、パンチルトカメラ3の向きと合わせられることが分かる。図6(d)は、パン動作のみを強調表示した図であるが、チルト動作のみ、もしくは、パン動作とチルト動作の両方が閾値を越えた場合は、同様にパンチルトカメラ3のパン動作、チルト動作に合わせた方向の矢印を強調表示することが出来る。
Since the pan /
図6(d)では、強調表示を矢印の大きさにしたが、強調表示は、これに限定されるものではない。例えば、図6(e)のように矢印を複数重ねた表示(矢印25)にしたり、矢印を高速に点滅させたり(不図示)、図6(f)のように矢印の近傍に文字で「FAR」や「遠い」などと表示したり、矢印の近傍に数字を付加(不図示)したりして表現してもよい。矢印の近傍に数字を付加して強調表現する際は、矢印の近傍に付加する数字の大さでパンチルトカメラ3の光軸の初期位置からの角度の大きさを示してもよい。逆に、矢印の近傍に付加される数字が小さい方がパンチルトカメラ3の光軸の初期位置からの駆動角度が大きくなっていてもよい。
In FIG. 6 (d), the highlighting is the size of the arrow, but the highlighting is not limited to this. For example, a display in which a plurality of arrows are overlapped (arrow 25) as shown in FIG. 6 (e), the arrow blinks at a high speed (not shown), or a character “ It may be expressed by displaying “FAR” or “far” or by adding a number (not shown) in the vicinity of the arrow. When emphasizing expression by adding a number in the vicinity of the arrow, the magnitude of the angle from the initial position of the optical axis of the pan /
いろいろな強調表現の方法について説明したが、つまりは、光軸のずれ量が閾値以上である場合は、閾値未満である場合と異なる状態の表示を行えばよく、ユーザに、通常か強調かを判別できるものなら何でもよい。また、パンチルトカメラ3の光軸の位置を常に検出しているため、強調表現もリアルタイムで表現が可能である。その一例として、パンチルトカメラ3の光軸の駆動角度によって、矢印の大きさを無段階でリアルタイムに変更させることもできる。
Various methods of emphasis have been described. In other words, if the amount of deviation of the optical axis is greater than or equal to a threshold value, it may be displayed in a different state from when it is less than the threshold value. Anything can be identified. In addition, since the position of the optical axis of the pan /
次に、パンチルトカメラ3の方向を表示する動作について説明する。図7は、パンチルトカメラ3の方向を表示する動作を示すフローチャートである。
Next, an operation for displaying the direction of the pan /
S101で、パンチルトカメラ3の位置検出を行う。パンチルトカメラ3が初期位置に対しどのくらいパン動作および、チルト動作をしているかの位置の検出を行う。位置の検出方法としては、例えば、光学式、磁気式のエンコーダなどをパン及びチルトの回転軸に直接取り付けて、回転対象の絶対回転位置を検出する方法などがある。
In S101, the position of the pan /
S102では、固定カメラ2の光軸に対してパンチルトカメラ3の光軸がずれている方向を前述した回転検出結果に基づいて検出する。S103では、S102の結果に基づいて、固定カメラ2の光軸とパンチルトカメラ3の光軸のズレ角度を詳細に算出する。なお、この結果は、S105で用いられる。
In S102, the direction in which the optical axis of the pan /
S104では、パンチルトカメラ3の光軸と固定カメラ2の光軸が平行であるか否かを判定する。S104で、YES判定、すなわちパンチルトカメラ3の光軸と固定カメラ2の光軸が平行である場合は、S107に進む。
In S104, it is determined whether or not the optical axis of the pan /
S107では、パンチルトカメラ3と固定カメラ2の向いている方向が同じか否かを判定する。S107で、YES判定、すなわちパンチルトカメラ3と固定カメラ2が同じ方向を向いている状態であると判定された場合は、S108へと進む。
In S107, it is determined whether or not the direction in which the pan /
S108では、パンチルトカメラ3の撮影範囲内にある被写体を固定カメラ2の撮影範囲内に捉えているか否かを判定する。この判定についての詳細は後述する。S108で、YES判定、すなわちパンチルトカメラ3と固定カメラ2が同じ被写体を捉えている場合は、S111へと進む。S111では、パンチルトカメラ3と固定カメラ2が同じ方向を向いていて、且つ固定カメラ2がパンチルトカメラ3と同じ被写体を捉えているので、画像表示部7にパンチルトカメラ3の方向を示す矢印を表示しない。その後、S101に戻る。
In S <b> 108, it is determined whether or not a subject within the shooting range of the pan /
S108で、NO判定、すなわちパンチルトカメラ3と固定カメラ2が同じ被写体を捉えていない場合は、S112へと進む。S112では、パンチルトカメラ3の画角内のどの領域に被写体が位置しているかの位置検出を行う。
In S108, if NO, that is, if the pan /
S113では、パンチルトカメラ3の撮影範囲の画角と固定カメラ2の撮影範囲の画角との差がある一定以上あるか否かを判定する(閾値を越えたか否かを判定する)。S113で、YES判定、すなわちパンチルトカメラ3の画角と固定カメラ2の画角との差が一定以上ある場合は、S110へと進む。S110では、パンチルトカメラ3の方向を強調して、固定カメラ2の撮影画像が表示されている画像表示部7に表示する。その後、S101に戻る。
In S113, it is determined whether or not the difference between the angle of view of the shooting range of the pan /
S113で、NO判定、すなわちパンチルトカメラ3の画角と固定カメラ2の画角との差が一定未満である場合は、S114へと進み、パンチルトカメラ3の方向を固定カメラ2の撮影画像が表示されている画像表示部7に表示する。その後、S101に戻る。
In S113, if NO is determined, that is, if the difference between the angle of view of the pan /
ここで、S108以下の処理は、以下の状況の場合を想定している。 Here, the processing of S108 and after assumes the following situation.
例えば、パンチルトカメラ3の画角と固定カメラ2の画角を比較し、パンチルトカメラ3の方が広角の場合(画角の広さ:パンチルトカメラ3の画角>固定カメラ2の画角)について以下に説明する。
For example, the angle of view of the pan /
図4で説明したとおり、被写体追尾領域15の境界が画面全体に対して80%となる位置とした場合、パンチルトカメラ3が被写体を画像の中心で捉えているとは限らない。パンチルトカメラ3の撮影範囲の左上の隅に被写体を捉えていた場合では、固定カメラ2の画角はパンチルトカメラ3の画角より狭いため、光軸が平行で、且つ光軸の向きが同じであっても、固定カメラ2はパンチルトカメラ3の被写体を捉えられるとは限らない。もし、画角の差で固定カメラ2がパンチルトカメラ3の被写体を捉えられない場合は、パンチルトカメラ3の画角のどの位置に被写体があるかを算出して、その被写体の位置の表示を行う。また、パンチルトカメラ3の画角と固定カメラ2の画角との差が大きい場合は、固定カメラ2を動かす量が大きくなるため、パンチルトカメラ3の方向を表示する際は、強調して表示する。
As described with reference to FIG. 4, when the boundary of the
図7の説明に戻って、S107で、NO判定、すなわちパンチルトカメラ3と固定カメラ2が違う方向を向いている状態であると判定された場合は、S109へと進む。S109では、パンチルトカメラ3と固定カメラ2は、向いている方向が180度違うので、180度回転する表示を行う(前述の図6(c)の画面表示)。その後、S101に戻る。
Returning to the description of FIG. 7, if it is determined NO in S107, that is, if it is determined that the pan /
S104で、NO判定、すなわちパンチルトカメラ3の光軸と固定カメラ2の光軸の平行が一致してない場合は、S105へと進む。S105では、S103で算出されたパン動作の角度、チルト動作の角度がある一定の値以上か否かを判定する(閾値を越えたか否かを判定する)。S105で、NO判定、すなわちパン動作の角度、チルト動作の角度が閾値を越えていない場合は、S106へと進み、パンチルトカメラ3の方向を固定カメラ2の撮影画像が表示されている画像表示部7に表示する。その後、S101に戻る。
In S104, if NO, that is, if the parallel optical axis of the pan /
S105で、YES判定、すなわちパン動作の角度、チルト動作の角度が閾値を越えている場合は、S110へと進み、パンチルトカメラ3の方向を強調して、固定カメラ2の撮影画像が表示されている画像表示部7に表示する。その後、S101に戻る。
If the determination in S105 is YES, that is, if the pan operation angle and tilt operation angle exceed the threshold, the process proceeds to S110, where the direction of the pan /
なお、本実施形態では、S104でパンチルトカメラ3の光軸と固定カメラ2の光軸が完全に平行か否かを判定しているが、完全に平行でなくても、平行度合にある程度の幅を持たせて、その幅の範囲内に収まっていれば、平行と判定してもよい。平行度合にある程度の幅を持たせることにより、パンチルトカメラ3の方向を頻繁に表示させないようにすることもできる。
In this embodiment, it is determined in S104 whether or not the optical axis of the pan /
また、本実施形態では、S105の判定における閾値を一つとしたが、閾値は一つだけではなく複数あってもよい。複数の閾値を設定した場合は、例えば、それぞれの閾値での矢印の大きさを変え、段階的に矢印の大きさを変えるようにしてもよい。 In the present embodiment, one threshold is used in the determination in S105, but there may be a plurality of thresholds instead of only one. When a plurality of threshold values are set, for example, the size of the arrow at each threshold value may be changed, and the size of the arrow may be changed step by step.
図8は、本実施形態の変形例を示したフローチャートであり、図7にS120を加えたものである。図7はパンチルトカメラ3と固定カメラ2が一体化したカメラシステム1を前提としているが、図8はパンチルトカメラ3と固定カメラ2がそれぞれ分かれている撮像装置であって、パンチルトカメラ3と固定カメラ2が着脱可能であることを前提としている。
FIG. 8 is a flowchart showing a modification of the present embodiment, which is obtained by adding S120 to FIG. 7 assumes a
図8と図7は、S120の違いのみであるため、相違点のS120について説明する。パンチルトカメラ3と固定カメラ2が着脱式であるため、まずS120において、それぞれのカメラの情報をやり取りする。例えば、パンチルトカメラ3側の情報としては、画角情報、パン動作の範囲、チルト動作の範囲、パン動作の速度、チルト動作の速度、その他撮影に必要な情報である。固定カメラ2側の情報としては、画角情報、ズームする際のレンズ鏡筒の繰り出し量、その他撮影に必要な情報である。S120において、パンチルトカメラ3と固定カメラ2で、お互いのカメラ情報を相互にやり取りした後は、図7に示した通り、S101へと進む。その後は、図7で説明したとおりである。
Since FIG. 8 and FIG. 7 are only differences in S120, the difference S120 will be described. Since the pan /
以上説明したとおり、固定カメラ2の画像表示部7にパンチルトカメラ3の方向を表示することにより、ユーザは、パンチルトカメラ3の方向を画像表示部7から視線を外すことなく認識できる。そのため、固定カメラ2をパンチルトカメラ3の向いている方向に合わせやすくなる。
As described above, by displaying the direction of the pan /
また、パンチルトカメラ3の方向を強調表示することにより、ユーザは固定カメラ2を向ける角度が分かりやすくなる。これにより、被写体の検知可能な範囲を限定することなく、被写体の動きや撮像装置の状態によらず、被写体の位置情報の表示を広範囲にすることが出来る。さらには、被写体の検知可能な範囲が限定されていないため、被写体を見失う可能性も低くなる。
Further, by highlighting the direction of the pan /
次に、本実施形態におけるパンチルトカメラのケラレを回避するシステムについて説明する。図9はパンチルトカメラ3と固定カメラ2を使用した撮影における、パンチルトカメラ3の撮影画像を示した図である。
Next, a system for avoiding vignetting of the pan / tilt camera in the present embodiment will be described. FIG. 9 is a view showing a photographed image of the pan /
図9(a)は、図1に示したパンチルトカメラ3と固定カメラ2の光軸が略平行で、且つお互いのカメラが向いている方向が略一致した状態における、ケラレ回避動作を行わない状態のパンチルトカメラ3の撮影画像を示している。撮影画像内に固定カメラ2のレンズ鏡筒部4に装着されているレンズフードが影501として映り込んでしまっている。レンズフードが装着された状態のままで記録を行うと、大切な画像に本来記録する必要のない撮像装置の影が記録されてしまう。
FIG. 9A shows a state in which the vignetting avoidance operation is not performed in the state where the optical axes of the pan /
図9(b)は、図1に示したパンチルトカメラ3と固定カメラ2の光軸が略平行で、且つお互いのカメラが向いている方向が略一致した状態における、ケラレ回避動作を行わない状態のパンチルトカメラ3の撮影画像を示している。図9(b)ではレンズフードがないため、図9(a)の場合よりもケラレは少ないが、やはり撮影画像内に固定カメラ2のレンズ鏡筒部4が影501として映り込んでしまっている。ケラレが生じた状態のままで記録を行うと、大切な画像に本来記録する必要のない撮像装置の影が記録されてしまう。
FIG. 9B shows a state in which the vignetting avoiding operation is not performed in a state where the optical axes of the pan /
図9(c)は後述するパンチルトカメラ3側のケラレ回避制御を行った場合のパンチルトカメラ3の撮影画像を示している。パンチルトカメラ3の光軸を移動させることによりレンズ鏡筒部4が影501として写り込むことが回避されている。
FIG. 9C shows a captured image of the pan /
図10は、パンチルトカメラ3の記録画像に固定カメラ2の鏡筒部4が写り込むことを回避するための、パンチルトカメラ3側の制御用フローチャートである。なお、以下では、固定カメラ2にパンチルトカメラ3が着脱自在に装着されている場合について説明する。
FIG. 10 is a control flowchart on the pan /
S401で、固定カメラ2はパンチルトカメラ3の装着確認を行う。パンチルトカメラ3の装着が確認された場合、固定カメラ2の制御のための動作を開始する。S402では、装着が確認されたパンチルトカメラ3と通信を行い、パンチルトカメラ3の取り付け位置に関する情報や、撮影画角に関する情報、光軸のベクトル情報等を取得する。
In step S <b> 401, the fixed
S403では、S402で得られた情報から、パンチルトカメラ3の撮影画像に固定カメラ2のレンズ鏡筒部4に取り付ケラレたレンズフードなどのアクセサリーが映り込んでいるか否かの判定を行う。S403において、撮影画角内に一定以上のケラレがあると判定された場合は、S404へ進む。S403において、レンズフードなどのアクセサリーが装着されて映り込んでいる場合のパンチルトカメラ3の撮影画像は、図9(a)に示したようになる。また、S403において撮影画角内に一定以上のケラレが無いと判定された場合は、S405へ進む。
In S403, it is determined from the information obtained in S402 whether an accessory such as a lens hood attached to the lens barrel portion 4 of the fixed
S404では、レンズフードなどのアクセサリーが装着されているか否かが判定される。S404で、レンズフードなどのアクセサリーが装着されている場合は、S408へと進み、アクセサリーを外して、S401に戻る。S404で、アクセサリーが装着されていない場合は、S405へと進む。 In S404, it is determined whether or not an accessory such as a lens hood is attached. If an accessory such as a lens hood is attached in S404, the process proceeds to S408, the accessory is removed, and the process returns to S401. If no accessory is attached in S404, the process proceeds to S405.
S405では、固定カメラ2のレンズ鏡筒部4を、一旦固定カメラ2から突出する方向(TELE側)に駆動し、その後レンズ鏡筒部4が固定カメラ2に繰り込まれる方向(WIDE側)に駆動する。S405の動作後に、レンズ鏡筒部4が映り込んでいる場合のパンチルトカメラ3の撮影画像は図9(b)に示すようになる。
In S405, the lens barrel portion 4 of the fixed
S406では、パンチルトカメラ3の撮影画像にまだレンズ鏡筒部4が映り込んでいるか否かが判定される。S406において、レンズ鏡筒部4が映り込んでいないと判定された場合は、S401に戻り、現在の状態が維持される。S406においてレンズ鏡筒部4が映り込んでいると判定された場合は、S407に進む。
In S <b> 406, it is determined whether or not the lens barrel 4 is still reflected in the captured image of the pan /
S407では、パンチルトカメラ3を、撮影画像内にレンズ鏡筒部4が映り込まなくなる方向にチルト動作させる。S407の動作を行った場合のパンチルトカメラ3の撮影画像は図9(c)に示すようになる。
In step S407, the pan /
以上のような動作により、パンチルトカメラ3の撮影画像内に固定カメラ2の鏡筒先端部に装着されたレンズフードが写り込んでしまうことを防止することができる。
By the operation as described above, it is possible to prevent the lens hood attached to the distal end portion of the lens barrel of the fixed
なお、本実施形態では、レンズ鏡筒部4に装着されているアクセサリーは、レンズフードであるが、例えばレンズフィルター、コンバージョンレンズ、アダプターなどが装着されても、同様の効果が得られる。 In the present embodiment, the accessory attached to the lens barrel portion 4 is a lens hood. However, for example, the same effect can be obtained even if a lens filter, a conversion lens, an adapter, or the like is attached.
次に、本実施形態におけるパンチルトカメラのケラレを回避するシステムの変形例について説明する。 Next, a modification of the system for avoiding vignetting of the pan / tilt camera in the present embodiment will be described.
図11は、パンチルトカメラ3と固定カメラ2を使用した撮影における、パンチルトカメラ3の撮影画像を示した図である。
FIG. 11 is a view showing a captured image of the pan /
図11(a)は、図1に示したパンチルトカメラ3と固定カメラ2の光軸が略平行でかつ、お互いのカメラが向いている方向が略一致した状態における、ケラレ回避動作を行わない状態のパンチルトカメラ3の撮影画像を示している。撮影画像内に固定カメラ2のレンズ鏡筒部4が影501として映り込んでしまっている。このようにケラレが生じた状態のままで記録を行うと、大切な画像に本来記録する必要のない撮像装置の影が記録されてしまう。この状態は後述する図12(a)の状態に対応する。
FIG. 11A shows a state in which the vignetting avoiding operation is not performed in a state where the optical axes of the pan /
図11(b)は、ケラレを生じていない画像を示している。図11(a)に比べて本来記録する必要のない撮像装置の影が記録されないため、良好な画像となっている。 FIG. 11B shows an image in which no vignetting occurs. Compared to FIG. 11 (a), the shadow of the image pickup apparatus that does not need to be recorded is not recorded, so that the image is good.
図11(c)は、後述するパンチルトカメラ3側の第1の例のケラレ回避制御を行った場合のパンチルトカメラ3の撮影画像を示している。パンチルトカメラ3の光軸を移動させることにより、レンズ鏡筒部4が影501として写り込むことが回避されている。
FIG. 11C shows a captured image of the pan /
図11(d)は後述するパンチルトカメラ3側の第2の例のケラレ回避制御を行った場合のパンチルトカメラ3の撮影画像を示している。パンチルトカメラ3の光軸の移動と、ズーム画角の変更(変倍機能による拡大)により鏡筒部4が影501として写り込むことが回避されると共に不要な鏡筒部の映り込みが回避されている。
FIG. 11D shows a captured image of the pan /
第1の例のケラレ回避のようにパンチルト駆動の回転動作のみでケラレ回避を行うと、図11(a)から図11(c)への変化となり、処理の前後で光軸位置が大きく変化してしまうが、本実施形態ではこの方法でケラレ回避を行うものとする。図11(d)に示す第2の例のケラレ回避のように、ケラレ回避処理を行う前の撮影範囲を超えない様に撮影画角を変更して、光軸位置の変化量を抑える方法については、第2の実施形態で説明する。 If vignetting is avoided only by pan / tilt drive rotation as in the first example, the change from FIG. 11 (a) to FIG. 11 (c), the optical axis position changes greatly before and after processing. However, in this embodiment, vignetting is avoided by this method. As in the vignetting avoidance of the second example shown in FIG. 11D, a method of suppressing the change amount of the optical axis position by changing the shooting angle of view so as not to exceed the shooting range before performing the vignetting avoiding process. Will be described in a second embodiment.
図12は図11で示す撮影状態となる際の撮像システム1の側面図であり、パンチルトカメラの撮影画角502を点線で示している。図12(a)では、レンズ鏡筒部4がパンチルトカメラ3の撮影画角502の撮影範囲内に存在し、パンチルトカメラ3の撮影画像内に固定カメラ2のレンズ鏡筒部4が影501として映り込んでしまっている。これは、図11(a)の撮影状態に相当する。
FIG. 12 is a side view of the
図12(b)では、レンズ鏡筒部4がパンチルトカメラ3の撮影画角502の撮影範囲外に存在するため、パンチルトカメラ3の撮影画像にレンズ鏡筒部4が写り込むことはない。これは、図11(b)の撮影状態に相当する。
In FIG. 12B, since the lens barrel 4 is outside the shooting range of the shooting angle of
図12(c)では、パンチルトカメラ3の光軸をレンズ鏡筒部4から離れる方向に移動させ、パンチルトカメラ3の撮影画像にレンズ鏡筒部4が写り込むことを防止している。これは、図11(c)の撮影状態に相当する。
In FIG. 12C, the optical axis of the pan /
図12(d)ではパンチルトカメラ3の光軸をレンズ鏡筒部4から離れる方向に移動させ、且つパンチルトカメラ3の撮影画角を図12(a)の状態よりも狭くすることにより、パンチルトカメラ3の撮影画像にレンズ鏡筒部4が写り込むことを防止している。これは、図11(d)の撮影状態に相当する。これについては、第2の実施形態において詳述する。
In FIG. 12D, the pan /
図13は、パンチルトカメラ3の記録画像に固定カメラ2の鏡筒部4が写り込むことを回避するためのパンチルトカメラ3側の制御用フローチャートである。
FIG. 13 is a control flowchart on the side of the pan /
S511で、パンチルトカメラ3は固定カメラ2との接続確認を行う。固定カメラ2への装着が確認された場合、パンチルトカメラ3の制御のための動作を開始する。S512では、固定カメラ2と通信を行い、固定カメラ2の取り付け位置に関する情報や、撮影画角に関する情報、光軸のベクトル情報等を取得する。
In step S <b> 511, the pan /
S513では、S512で得られた固定カメラ2の情報と、パンチルトカメラ3の取り付け位置、撮影画角、光軸のベクトル情報を比較し、パンチルトカメラ3の撮影画像に固定カメラ2のレンズ鏡筒部4が写り込むか否か(ケラレがあるか否か)の判定を行う。S513でケラレがあると判定された場合は、S514に進み、ケラレが無いと判定された場合は、S515に進む。なお、S513において固定カメラ2のレンズ鏡筒部4が写り込む(ケラレがある)と判定された場合のパンチルトカメラ3の撮影画像の一例は図11(a)のようになる。
In S513, the information of the fixed
S514では、パンチルトカメラ3の撮影画像に固定カメラ2のレンズ鏡筒部4が写り込むことを回避する動作をパンチルトカメラ3に行わせる。具体的には、パン駆動部10やチルト駆動部11を動作させ撮影範囲を変更することにより、レンズ鏡筒部4によるケラレ状態を回避する。S514のケラレ回避動作を行った場合のパンチルトカメラ3の撮影画像の一例は、図11(c)の実線で囲まれた枠内のようになる。
In S <b> 514, the pan /
S515では、電子ズームを使用しているか否かを判定する。電子ズームを使用している場合は、S516に進み、使用していない場合は、S511に戻り、現在の状態を維持させる。 In S515, it is determined whether or not the electronic zoom is used. If the electronic zoom is being used, the process proceeds to S516. If not, the process returns to S511 to maintain the current state.
S516では、パンチルトカメラ3の撮影画像に固定カメラ2のレンズ鏡筒部4が映り込まない場合において、光学ズーム倍率を増加させることが可能か否かの判定を行う。光学ズーム倍率を増加させることが不可能な場合、現在の状態を維持させる。光学ズーム倍率を増加させることが可能であれば、S517に進む。
In S516, it is determined whether or not the optical zoom magnification can be increased when the lens barrel 4 of the fixed
S517では、パンチルトカメラ3の光学系/光学系駆動機構301を作動させ、光学ズーム倍率を上げる。同時に、画像処理部303での電子ズーム倍率を下げる。電子ズームよりも光学ズームの方がより鮮明な画像情報が得られることは公知であり、ユーザは画角の変化を感じること無く、より高画質な撮影を行うことが可能となる。
In step S517, the optical system / optical
<第2の実施形態>
第2の実施形態では、第1の実施形態と異なるケラレ回避の方法について説明する。ここでは、パンチルトカメラ3の撮影画像のケラレ回避を、パンチルトカメラ3の光軸駆動およびズーム倍率変更を併せて行う制御フローについて説明する。制御フロー以外の要素は言及しない限り第1の実施形態と同一とする。
<Second Embodiment>
In the second embodiment, a method for avoiding vignetting that is different from the first embodiment will be described. Here, a control flow for performing vignetting avoidance of an image captured by the pan /
第1の実施形態では、パンチルトカメラ3の撮影画角変更は実施していない。画角変更を行なわない分、パンチルトカメラ3の光軸移動量は大きくなってしまう。本実施形態ではパンチルトカメラ3の電子ズームや、光学ズーム倍率変更を併せて行うことにより、第1の実施形態に比べて光軸移動量を低減している。
In the first embodiment, the shooting angle of view of the pan /
図14はパンチルトカメラ3の記録画像に固定カメラ2の鏡筒部4が写り込むことを回避するためのパンチルトカメラ3側の制御用フローチャートである。
FIG. 14 is a control flowchart on the pan /
S521で、パンチルトカメラ3は固定カメラ2との接続確認を行う。固定カメラ2への装着が確認された場合、パンチルトカメラ3の制御のための動作を開始する。S522では、固定カメラ2と通信を行い、固定カメラ2の取り付け位置に関する情報や、撮影画角に関する情報、光軸のベクトル情報等を取得する。
In step S <b> 521, the pan /
S523では、S522で得られた固定カメラ2の情報と、パンチルトカメラ3の取り付け位置、撮影画角、光軸のベクトル情報を比較し、パンチルトカメラ3の撮影画像に固定カメラ2のレンズ鏡筒部4が写り込むか否か(ケラレがあるか否か)の判定を行う。S523でケラレがあると判定された場合は、S524に進み、ケラレが無いと判定された場合は、S527に進む。なお、S523において固定カメラ2のレンズ鏡筒部4が写り込む(ケラレがある)と判定された場合のパンチルトカメラ3の撮影画像の一例は図11(a)のようになる。
In S523, the information of the fixed
S524では、パンチルトカメラ3の撮影画像に固定カメラ2のレンズ鏡筒部4が写り込むことを回避する動作をパンチルトカメラ3に行わせる準備動作として、パンチルトカメラ3の光学ズーム倍率を上げることが可能か否かの判定を行う。S524で、光学ズーム倍率を上げることが不可能と判定された場合は、S525に進み、可能と判定された場合は、S526に進む。
In S524, the optical zoom magnification of the pan /
S525では、パン駆動部10およびチルト駆動部11の動作と、パンチルトカメラ3の電子ズームを併用することにより、光軸位置の変化量を抑えながらレンズ鏡筒部4によるケラレ状態を回避する。パンチルト駆動の回転動作のみでケラレ回避を行うと、図11(a)から図11(c)への変化となり、S525の動作の前後で光軸位置が大きく変化してしまう。本実施形態では、光軸位置の変化量を抑えるために電子ズームを併用し、S525の動作を行う前の撮影範囲を超えない様に、撮影画角を変更する。S525の動作を行った場合のパンチルトカメラ3の撮影画像の一例は、図11(d)の実線で囲まれた枠内のようになる。
In S525, the operation of the
S526では、パン駆動部10およびチルト駆動部11の動作と、パンチルトカメラ3の光学ズームを併用することにより、光軸位置の変化量を抑えながらレンズ鏡筒部4によるケラレ状態を回避する。パンチルト駆動の回転動作のみでケラレ回避を行うと、図11(a)から図11(c)への変化となり、S526の動作の前後で光軸位置が大きく変化してしまう。本実施形態では、光軸位置の変化量を抑えるために光学ズームを併用し、S526の動作を行う前の撮影範囲を超えない様に、撮影画角を変更する。S526の動作を行った場合のパンチルトカメラ3の撮影画像の一例は、図11(d)の実線で囲まれた枠内のようになる。
In S526, the operation of the
S527では、電子ズームを使用しているか否かを判定する。電子ズームを使用している場合は、S528に進み、使用していない場合は、S521に戻り、現在の状態を維持させる。 In S527, it is determined whether or not the electronic zoom is used. When the electronic zoom is used, the process proceeds to S528, and when the electronic zoom is not used, the process returns to S521 to maintain the current state.
S528では、パンチルトカメラ3の撮影画像に固定カメラ2のレンズ鏡筒部4が映り込まない場合において、光学ズーム倍率を増加させることが可能か否かの判定を行う。光学ズーム倍率を増加させることが不可能な場合、現在の状態を維持させる。光学ズーム倍率を増加させることが可能であれば、S529に進む。
In S <b> 528, it is determined whether or not the optical zoom magnification can be increased when the lens barrel 4 of the fixed
S529では、パンチルトカメラ3の光学系/光学系駆動機構301を作動させ、光学ズーム倍率を上げる。同時に、画像処理部303での電子ズーム倍率を下げる。電子ズームよりも光学ズームの方がより鮮明な画像情報が得られることは公知であり、ユーザは画角の変化を感じること無く、より高画質な撮影を行うことが可能となる。
In S529, the optical system / optical
次に、パンチルトカメラ3の光軸が向いている方向を表示する例について説明する。まず、パンチルトカメラ3の光軸が向いている方向を表示する方法について説明し、次にその光軸が向いている方向を表示する方法のフローチャートについて説明する。
Next, an example in which the direction in which the optical axis of the pan /
図15は、パンチルトカメラ3の光軸が向いている方向を表示した状態と、その方向でパンチルトカメラ3がライブビュー画像を表示している状態を示した図である。図15の中で、図15(a)、図15(c) 、図15(e) 、図15(f)は、現在のパンチルトカメラ3の光軸の方向(以下、パンチルトカメラ3の位置と呼ぶこともある)を表示した図で、星印30がパンチルトカメラ3の現在の光軸の向きを示している。星印30は上下左右に移動する。図15(b)、図15(d)は、パンチルトカメラ3のライブビュー画像を表示している図である。図15(a)と図15(b)が対応しており、パンチルトカメラ3の光軸の向きが図15(a)で示される向きの時にパンチルトカメラ3が撮影している撮影画像が図15(b)である。図15(c)と図15(d)が対応しており、パンチルトカメラ3の光軸の向きが図15(c)で示される向きの時にパンチルトカメラ3が撮影している撮影画像が図15(d)である。図15の表示を行うためのデータは、外部機器接続部208を介して不図示の電子機器に無線送信され、その電子機器の表示部に表示される。
FIG. 15 is a diagram illustrating a state in which the direction in which the optical axis of the pan /
パンチルトカメラ3の光軸が向いている方向を示す星印30の位置は、図15(a)と図15(e)では図の真ん中、図15(c)では図の下の方向 、図15(f)では図の左上の方向にある。星印30は、パンチルトカメラ3がパン動作、チルト動作をした際に、それに追従して動く。例えば、パンチルトカメラ3をパン動作させた際は、図のL方向、もしくはR方向に星印30が動く。パンチルトカメラ3をチルト動作させた際は、図のUP方向、もしくはDOWN方向に星印30が動く。パンチルトカメラ3がパン動作、およびチルト動作を組み合わせた場合は、その動きに合わせて、星印30の位置が動く。
The position of the
具体的な例としては、図2のパンチルトカメラ3は、固定カメラ2の正面から見て、右側に45度のパン動作、上側に60度のチルト動作を行った後であり、この時の星印30の表示される位置は、図15(f)のようになる。つまり、図15(a)の真ん中の位置より、左上に星印30が表示される。影31は、固定カメラ2のレンズ鏡筒部4がパンチルトカメラ3の撮影画角内に写り込む範囲を示したものである。なお、このレンズ鏡筒4が映り込む範囲は計算により得られた範囲を表示している(重畳表示した)ものであり、実際にパンチルトカメラで撮影した画像でのレンズ鏡筒4を表示しているものではない。
As a specific example, the pan /
図15(a)の星印30の位置では、パンチルトカメラ3は、パン動作およびチルト動作は一切しておらず、固定カメラ2と同じ方向を向いている。図15(a)の星印30の位置でのパンチルトカメラ3が撮影しているライブビュー画像は、図15(b)であり、被写体33のみが写り込み、被写体33のみが撮影される。
At the position of the
図15(a)のように、星印30が影31の領域の中に入るか、あるいは影31の領域に近付かなければ、パンチルトカメラ3の撮影画角内に固定カメラ2のレンズ鏡筒部4は写り込まない(図15(a)、図15(b)参照)。図15(b)はケラレを生じていない画像である。図15(d)に比べて本来記録する必要のない撮像装置の影が記録されないため、良好な画像となっている。
As shown in FIG. 15A, if the
図15(c)の星印30の位置では、パンチルトカメラ3は、下側方向にチルト動作をされた状態であり、星印30はDOWN方向に移動する。図15(c)の星印30の位置でのパンチルトカメラ3が撮影しているライブビュー画像は、図15(d)である。図15(c)のように、星印30が影31の領域の中に入ると、パンチルトカメラ3の撮影画角内に固定カメラ2のレンズ鏡筒部4が写りこみ、被写体33とレンズ鏡筒部4が撮影される。撮影画像内に固定カメラ2のレンズ鏡筒部4が影31として映り込んでしまっている。このようにケラレが生じた状態のままで記録を行うと、大切な画像に本来記録する必要のない撮像装置の影が記録されてしまう。この状態は後述する図16(b)の状態である。
At the position of the
図15(e)は、固定カメラ2のズームレバー6をテレ側に操作して、固定カメラ2のレンズ鏡筒部4を固定カメラ2から突出する方向に駆動した時の表示画面である。図15(e)の影34は、図15(a)の影31より大きくなっている(影の大きさ:影34>影31)。これは、レンズ鏡筒部4が固定カメラ2から突出する方向に駆動され、パンチルトカメラ3の撮影画角にレンズ鏡筒部4が写り込む範囲が図15(a)より多くなったためである。ユーザがズームレバー6を操作することにより、レンズ鏡筒部4の突出に合わせて、リアルタイムに影34の大きさを変化させることが出来る。
FIG. 15E shows a display screen when the zoom lever 6 of the fixed
図16は、図15で示す撮影状態となる際の撮像システム1の側面図であり、パンチルトカメラの撮影画角502を実線で示している。
FIG. 16 is a side view of the
図16(a)では、レンズ鏡筒部4がパンチルトカメラ3の撮影画角502の撮影範囲外に存在するため、パンチルトカメラ3の撮影画像にレンズ鏡筒部4が写り込むことはない。これは、図15(a)、図15(b)の撮影状態に相当する。
In FIG. 16A, since the lens barrel 4 is outside the shooting range of the shooting angle of
図16(b)では、パンチルトカメラ3を下側にチルト動作させたため、レンズ鏡筒部4がパンチルトカメラ3の撮影画角502の撮影範囲内に入り、パンチルトカメラ3の撮影画像内に固定カメラ2のレンズ鏡筒部4が映り込んでしまっている。これは、図15(c)、図15(d)の撮影状態に相当する。
In FIG. 16B, since the pan /
図16(c)では固定カメラ2のレンズ鏡筒部4が固定カメラ2から突出する方向に駆動されたため、レンズ鏡筒部4がパンチルトカメラ3の撮影画角502の撮影範囲に近づいている状態である。図15(e)の撮影状態に相当する。
In FIG. 16C, since the lens barrel 4 of the fixed
次に、図17は、パンチルトカメラ3の位置(光軸の方向)を表示する動作を示すフローチャートである。
Next, FIG. 17 is a flowchart showing an operation of displaying the position (direction of the optical axis) of the pan /
S201では、パンチルトカメラ3の位置検出(光軸の方向の検出)を行う。パンチルトカメラ3がどのくらいパン動作および、チルト動作をしているかの位置の検出を行う。S202では、S201で検出されたパンチルトカメラ3の位置を外部接続された電子機器の画面に表示する。
In S201, the position of the pan /
S203では、固定カメラ2の光学系のズーム位置を検出する。S204では、S204で検出された固定カメラ2の光学系のズーム位置において、パンチルトカメラ3が可動した際にパンチルトカメラ3の撮影画角範囲の中にレンズ鏡筒部4が写り込むか否かを判定する。
In S203, the zoom position of the optical system of the fixed
S204において、NO判定、すなわちレンズ鏡筒部4がパンチルトカメラ3の撮影画角範囲の中に写り込まない場合は、S203へと戻る。S204において、YES判定、すなわちレンズ鏡筒部4がパンチルトカメラ3の撮影画角範囲の中に写り込む場合は、S205へと進む。
In S204, if NO is determined, that is, if the lens barrel 4 is not reflected in the photographing field angle range of the pan /
S205では、固定カメラ2のレンズ鏡筒部4が写り込む領域を計算し、外部接続された電子機器に表示する。このS205の処理がなされた状態は、前述の図15(c)での表示である。
In S205, the area in which the lens barrel 4 of the fixed
S206では、S203で検出した固定カメラ2のレンズ鏡筒部4のズーム位置が移動したか否かを判定する。S206において、YES判定、すなわちS203で検出した固定カメラ2のレンズ鏡筒部4のズーム位置が移動した場合は、S201へと戻る。S206において、NO判定、すなわちS203で検出した固定カメラ2のレンズ鏡筒部4のズーム位置が移動していない場合は、S207へと進む。
In S206, it is determined whether or not the zoom position of the lens barrel portion 4 of the fixed
S207では、S201で検出したパンチルトカメラ3の位置からパンチルトカメラ3が移動したか否かを判定する。S207において、YES判定、すなわちS201で検出したパンチルトカメラ3の位置からパンチルトカメラ3が移動した場合は、S201へと戻る。S207において、NO判定、すなわちS201で検出したパンチルトカメラ3の位置からパンチルトカメラ3が移動していない場合は、S206へと戻る。
In S207, it is determined whether or not the pan /
図18は、図17にS208を加えたフローチャートである。図17はパンチルトカメラ3と固定カメラ2が一体化したカメラシステム1を前提としているが、図18はパンチルトカメラ3と固定カメラ2がそれぞれ分かれているカメラであって、パンチルトカメラ3と固定カメラ2は着脱可能のカメラシステムを前提としている。図18と図17は、S208のみの違いであるため、相違点のS208について説明する。
FIG. 18 is a flowchart obtained by adding S208 to FIG. FIG. 17 assumes a
パンチルトカメラ3と固定カメラ2が着脱式であるため、まずS208において、それぞれのカメラの情報をやり取りする。例えば、パンチルトカメラ3側の情報としては、画角情報、パン動作の範囲、チルト動作の範囲、パン動作の速度、チルト動作の速度、その他撮影に必要な情報である。固定カメラ2側の情報としては、画角情報、ズームする際のレンズ鏡筒の繰り出し量、レンズ鏡筒の太さ、その他撮影に必要な情報である。
Since the pan /
S208において、パンチルトカメラ3と固定カメラ2で、お互いのカメラ情報を相互にやり取りした後は、図17に示した通り、S201へと進む。その後は、前述のとおりである。
In S208, after the pan /
<第3の実施形態>
第3の実施形態は、第2の実施形態と共通する部分が多いため、第2の実施形態からの相違点についてのみ説明する。
<Third Embodiment>
Since the third embodiment has many parts in common with the second embodiment, only differences from the second embodiment will be described.
本実施形態においては、図19に示すように、図15の星印30が撮影画角を示す枠35に変更されている。枠35は、パンチルトカメラ3の撮影可能な範囲を示すものである。図19(a)と図19(b)が対応しており、パンチルトカメラ3の位置が図19(a)で示される位置の時のパンチルトカメラ3が撮影できる撮影画像が図19(b)である。図19(c)と図19(d)が対応しており、パンチルトカメラ3の位置が図19(c)で示される位置の時のパンチルトカメラ3が撮影できる撮影画像が図19(d)である。図19(e)と図19(f)が対応しており、パンチルトカメラ3の位置が図19(e)で示される位置の時のパンチルトカメラ3が撮影できる撮影画像が図19(f)である。
In the present embodiment, as shown in FIG. 19, the
枠35が影31の領域に入ると、パンチルトカメラ3の撮影画角内にレンズ鏡筒部4が写り込む(図19(c)、図19(d)参照)。枠35は、パンチルトカメラ3の撮影可能な範囲を示していることから、パンチルトカメラ3がズーム動作をした際には、大きさを変化させることが出来る。パンチルトカメラ3をワイド方向に動かした際には枠35が大きくなり、テレ側に動かした際には枠35が小さくなる。
When the
図19(e)においては、パンチルトカメラ3のズーム動作をワイド方向に動かして撮影可能な範囲を広くしたため、枠36は図19(a)の枠35より大きくなっている。また、固定カメラ2のズームレバー6をテレ側に操作して、固定カメラ2のレンズ鏡筒部4を固定カメラ2から突出する方向に駆動したため、影34は図19(a)の影31より大きくなっている。そのため、枠36の枠内に影34が入っている状態となる。図19(e)の状態では、パンチルトカメラ3が撮影する画像は図19(f)のようになり、被写体33は小さく写り、レンズ鏡筒部4は画像内に写り込む。
In FIG. 19 (e), the zoom operation of the pan /
図20は、パンチルトカメラ3の位置を表示する動作を示すフローチャートである。
FIG. 20 is a flowchart showing an operation of displaying the position of the pan /
S220では、パンチルトカメラ3の位置検出とズーム位置の検出を行う。パンチルトカメラ3がどのくらいパン動作および、チルト動作をしているかの位置の検出とどのくらいズーム動作をしているかの検出を行う。
In S220, the position detection of the pan /
S221では、S220で検出されたパンチルトカメラ3の位置と撮影画角の範囲を外部接続された電子機器の画面に表示する。S222では、固定カメラ2の光学系のズーム位置を検出する。
In S221, the position of the pan /
S223では、S222で検出された固定カメラ2の光学系のズーム位置によって、パンチルトカメラ3が稼働した際にパンチルトカメラ3の撮影画角範囲の中にレンズ鏡筒部4が写り込むか否かを判定する。S223において、NO判定、すなわちレンズ鏡筒部4がパンチルトカメラ3の撮影画角範囲の中に写り込まない場合は、S222へと戻る。S223において、YES判定、すなわちレンズ鏡筒部4がパンチルトカメラ3の撮影画角範囲の中に写り込む場合は、S224へと進む。
In S223, depending on the zoom position of the optical system of the fixed
S224では、固定カメラ2のレンズ鏡筒部4が写り込む領域を計算し、外部接続された電子機器に表示する。このS224の処理がなされた状態は、前述の図19(a)の表示状態である。
In S224, an area in which the lens barrel 4 of the fixed
S225では、S222で検出した固定カメラ2のレンズ鏡筒部4のズーム位置が移動したか否かを判定する。S225において、YES判定、すなわちS222で検出した固定カメラ2のレンズ鏡筒部4のズーム位置が移動した場合は、S220へと戻る。S225において、NO判定、すなわちS222で検出した固定カメラ2のレンズ鏡筒部4のズーム位置が移動していない場合は、S226へと進む。
In S225, it is determined whether or not the zoom position of the lens barrel 4 of the fixed
S226では、S220で検出したパンチルトカメラ3の位置とズームの位置からパンチルトカメラ3が移動、もしくはズーム動作をしたか否かを判定する。S226において、YES判定、すなわちS220で検出したパンチルトカメラ3の位置とズームの位置からパンチルトカメラ3が移動した場合、もしくは、ズームの位置が変更になった場合は、S220へと戻る。S226において、NO判定、すなわちS220で検出したパンチルトカメラ3の位置とズームの位置からパンチルトカメラ3が移動していない場合、および、ズームの位置が変更になっていない場合は、S225へと戻る。
In S226, it is determined whether the pan /
図20では、第2の実施形態の図17、図18で説明したことと同じことが言える。図20はパンチルトカメラ3と固定カメラ2が一体化したカメラシステム1を前提としているが、パンチルトカメラ3と固定カメラ2がそれぞれ分かれているカメラであって、パンチルトカメラ3と固定カメラ2は着脱可能のカメラシステムであってもよい。つまり、図20のフローチャートのS220の前に、図18のS208を加えてもよく、その処理は、前述した図18の場合と同じとなる。
In FIG. 20, the same can be said as described in FIGS. 17 and 18 of the second embodiment. FIG. 20 is premised on the
パンチルトカメラ3と固定カメラ2が着脱式であるため、まずS208において、それぞれのカメラの情報をやり取りする。例えば、パンチルトカメラ3側の情報としては、画角情報、パン動作の範囲、チルト動作の範囲、パン動作の速度、チルト動作の速度、その他撮影に必要な情報である。固定カメラ2側の情報としては、画角情報、ズームする際のレンズ鏡筒の繰り出し量、レンズ鏡筒の太さ、その他撮影に必要な情報である。
Since the pan /
S208において、パンチルトカメラ3と固定カメラ2で、お互いのカメラ情報を相互にやり取りした後は、図20に示した通り、S220へと進む。その後は、前述のとおりである。
In S208, after the pan /
以上説明したように、パンチルトカメラ3の位置の表示と固定カメラ2のレンズ鏡筒部4の写り込み範囲を同じ画面で表示することにより、ユーザは、パンチルトカメラ3をどれくらい稼働させたら、パンチルトカメラ3の撮影範囲に固定カメラ2のレンズ鏡筒部4が写り込むかが容易に判別できる。
As described above, the display of the position of the pan /
また、リアルタイムで、計算により得られたレンズ鏡筒部4の写り込み範囲の表示を変化させることにより、レンズ鏡筒部4の写り込みの判定が容易となる。 Further, by changing the display of the reflection range of the lens barrel portion 4 obtained by calculation in real time, it is easy to determine the reflection of the lens barrel portion 4.
以上説明したように、上記の第2及び第3の実施形態によれば、複数のカメラを有する撮像システムにおいて、撮影画角内に別のカメラが映り込むか否かを撮影中にユーザが判別できるようなり、別のカメラの一部が写り込むのを防止することができる。 As described above, according to the second and third embodiments, in the imaging system having a plurality of cameras, the user determines whether another camera is reflected within the shooting angle of view during shooting. It becomes possible to prevent a part of another camera from being captured.
(その他の実施形態)
また本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現できる。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現できる。
(Other embodiments)
Further, the present invention supplies a program that realizes one or more functions of the above-described embodiments to a system or apparatus via a network or a storage medium, and one or more processors in a computer of the system or apparatus read the program. It can also be realized by processing to be executed. It can also be realized by a circuit (for example, ASIC) that realizes one or more functions.
2:固定カメラ、3:パンチルトカメラ、4:レンズ鏡筒部、7:画像表示部、201:光学系/光学系駆動機構、203:画像処理部、301:光学系/光学系駆動機構、303:画像処理部、307:パンチルト駆動部、308:パンチルト駆動制御部、309:パンチルト位置検出部 2: fixed camera, 3: pan / tilt camera, 4: lens barrel unit, 7: image display unit, 201: optical system / optical system drive mechanism, 203: image processing unit, 301: optical system / optical system drive mechanism, 303 : Image processing unit, 307: pan / tilt driving unit, 308: pan / tilt driving control unit, 309: pan / tilt position detecting unit
Claims (20)
前記第1の撮像装置は、
被写体像を結像させる第1の撮影光学系と、
前記第1の撮影光学系により結像された被写体像を撮像する第1の撮像手段とを備え、
前記第2の撮像装置は、
被写体像を結像させる第2の撮影光学系と、
前記第2の撮影光学系により結像された被写体像を撮像する第2の撮像手段と、
前記第2の撮影光学系の撮像方向を変更させるための駆動手段と、
前記第2の撮影光学系の撮像方向を変更して特定の被写体を追尾するように前記駆動手段を制御する制御手段と、
を備えることを特徴とする撮像システム。 An imaging system having at least a first imaging device and a second imaging device,
The first imaging device includes:
A first photographing optical system for forming a subject image;
First imaging means for imaging a subject image formed by the first imaging optical system,
The second imaging device includes:
A second photographing optical system for forming a subject image;
Second imaging means for imaging a subject image formed by the second imaging optical system;
Driving means for changing the imaging direction of the second imaging optical system;
Control means for controlling the drive means so as to track a specific subject by changing the imaging direction of the second imaging optical system;
An imaging system comprising:
撮影光学系により結像された被写体像を撮像する撮像手段と、
前記撮影光学系の撮像方向を変更して特定の被写体を追尾するように駆動手段を制御する制御手段と、
を備えることを特徴とする撮像装置。 An imaging apparatus having a configuration that can be attached to another imaging apparatus,
Imaging means for imaging a subject image formed by the imaging optical system;
Control means for controlling the drive means so as to track a specific subject by changing the imaging direction of the imaging optical system;
An imaging apparatus comprising:
前記第2の撮影光学系の撮像方向を変更して特定の被写体を追尾するように前記駆動手段を制御する制御工程を有することを特徴とする撮像システムの制御方法。 The subject image is connected to a first imaging device including a first imaging optical system that forms a subject image and a first imaging unit that images the subject image formed by the first imaging optical system. A second imaging optical system for imaging, a second imaging means for imaging a subject image formed by the second imaging optical system, and a drive for changing the imaging direction of the second imaging optical system A second imaging device comprising: means for controlling an imaging system comprising:
An imaging system control method comprising: a control step of controlling the driving unit so as to track a specific subject by changing an imaging direction of the second imaging optical system.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018088401A JP7138472B2 (en) | 2018-05-01 | 2018-05-01 | IMAGING SYSTEM AND CONTROL METHOD THEREOF, IMAGING DEVICE, PROGRAM, STORAGE MEDIUM |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018088401A JP7138472B2 (en) | 2018-05-01 | 2018-05-01 | IMAGING SYSTEM AND CONTROL METHOD THEREOF, IMAGING DEVICE, PROGRAM, STORAGE MEDIUM |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019194636A true JP2019194636A (en) | 2019-11-07 |
JP7138472B2 JP7138472B2 (en) | 2022-09-16 |
Family
ID=68469040
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018088401A Active JP7138472B2 (en) | 2018-05-01 | 2018-05-01 | IMAGING SYSTEM AND CONTROL METHOD THEREOF, IMAGING DEVICE, PROGRAM, STORAGE MEDIUM |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7138472B2 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113473010A (en) * | 2021-06-29 | 2021-10-01 | 浙江大华技术股份有限公司 | Snapshot method and device, storage medium and electronic device |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH089227A (en) * | 1994-06-17 | 1996-01-12 | Hitachi Ltd | Image pickup device with automatic tracking function |
JPH11125853A (en) * | 1997-10-22 | 1999-05-11 | Olympus Optical Co Ltd | Zoom camera |
JP2002359770A (en) * | 2001-05-31 | 2002-12-13 | Hitachi Kokusai Electric Inc | Television camera with motor-driven swiveling camera platform |
JP2003087626A (en) * | 2001-09-14 | 2003-03-20 | Olympus Optical Co Ltd | Camera system |
JP2004135209A (en) * | 2002-10-15 | 2004-04-30 | Hitachi Ltd | Generation device and method for wide-angle view high-resolution video image |
JP2009231956A (en) * | 2008-03-19 | 2009-10-08 | Fujifilm Corp | Imaging device and imaging control method |
JP2009244369A (en) * | 2008-03-28 | 2009-10-22 | Sony Corp | Imaging device and imaging method |
JP2011112809A (en) * | 2009-11-25 | 2011-06-09 | Olympus Imaging Corp | Camera system |
JP2011244248A (en) * | 2010-05-19 | 2011-12-01 | Nikon Corp | Imaging apparatus |
-
2018
- 2018-05-01 JP JP2018088401A patent/JP7138472B2/en active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH089227A (en) * | 1994-06-17 | 1996-01-12 | Hitachi Ltd | Image pickup device with automatic tracking function |
JPH11125853A (en) * | 1997-10-22 | 1999-05-11 | Olympus Optical Co Ltd | Zoom camera |
JP2002359770A (en) * | 2001-05-31 | 2002-12-13 | Hitachi Kokusai Electric Inc | Television camera with motor-driven swiveling camera platform |
JP2003087626A (en) * | 2001-09-14 | 2003-03-20 | Olympus Optical Co Ltd | Camera system |
JP2004135209A (en) * | 2002-10-15 | 2004-04-30 | Hitachi Ltd | Generation device and method for wide-angle view high-resolution video image |
JP2009231956A (en) * | 2008-03-19 | 2009-10-08 | Fujifilm Corp | Imaging device and imaging control method |
JP2009244369A (en) * | 2008-03-28 | 2009-10-22 | Sony Corp | Imaging device and imaging method |
JP2011112809A (en) * | 2009-11-25 | 2011-06-09 | Olympus Imaging Corp | Camera system |
JP2011244248A (en) * | 2010-05-19 | 2011-12-01 | Nikon Corp | Imaging apparatus |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113473010A (en) * | 2021-06-29 | 2021-10-01 | 浙江大华技术股份有限公司 | Snapshot method and device, storage medium and electronic device |
CN113473010B (en) * | 2021-06-29 | 2023-08-22 | 浙江大华技术股份有限公司 | Snapshot method and device, storage medium and electronic device |
Also Published As
Publication number | Publication date |
---|---|
JP7138472B2 (en) | 2022-09-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7561788B2 (en) | Image-capturing device having multiple optical systems | |
JP5725793B2 (en) | Imaging apparatus and control method thereof | |
CN110493528B (en) | Image pickup apparatus and control method thereof | |
JP4843002B2 (en) | IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, AND COMPUTER PROGRAM | |
US20110267503A1 (en) | Imaging apparatus | |
EP1560425A1 (en) | Autofocus system | |
WO2016002228A1 (en) | Image-capturing device | |
JP4730478B2 (en) | IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, AND PROGRAM | |
WO2012099175A1 (en) | Auto focus system | |
KR20120038451A (en) | Control device, control method, program, and control system | |
JP2010096962A (en) | Auto focus system with af frame auto-tracking function | |
JP5384172B2 (en) | Auto focus system | |
JP2010230870A (en) | Auto focus system | |
JP4596246B2 (en) | Auto focus system | |
JP2006058431A (en) | Autofocusing system | |
JPH089219A (en) | Camera | |
JP7138472B2 (en) | IMAGING SYSTEM AND CONTROL METHOD THEREOF, IMAGING DEVICE, PROGRAM, STORAGE MEDIUM | |
KR101288881B1 (en) | Set up a number of areas of surveillance and monitoring of surveillance cameras in the area to shoot enlarged system | |
JP4711073B2 (en) | Auto focus system | |
JP2004128646A (en) | Monitoring system and controller | |
JP6836306B2 (en) | Imaging control device, its control method, program and recording medium | |
JP2012209626A (en) | Conference device, program for conference device and control method | |
WO2020015754A1 (en) | Image capture method and image capture device | |
KR20020071567A (en) | A ccd camera system for effectively tracking a motion of objects and a method thereof | |
JP2011022499A (en) | Autofocus system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20210103 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210113 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210419 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220128 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220228 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220426 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220808 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220906 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7138472 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |