JP2007074696A - Image-capturing device having multiple optical systems - Google Patents

Image-capturing device having multiple optical systems Download PDF

Info

Publication number
JP2007074696A
JP2007074696A JP2006032876A JP2006032876A JP2007074696A JP 2007074696 A JP2007074696 A JP 2007074696A JP 2006032876 A JP2006032876 A JP 2006032876A JP 2006032876 A JP2006032876 A JP 2006032876A JP 2007074696 A JP2007074696 A JP 2007074696A
Authority
JP
Japan
Prior art keywords
view
angle
image
optical system
subject
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006032876A
Other languages
Japanese (ja)
Other versions
JP4792300B2 (en
JP2007074696A5 (en
Inventor
Kunihiko Kanai
邦彦 金井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Eastman Kodak Co
Original Assignee
Eastman Kodak Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Eastman Kodak Co filed Critical Eastman Kodak Co
Priority to JP2006032876A priority Critical patent/JP4792300B2/en
Publication of JP2007074696A publication Critical patent/JP2007074696A/en
Publication of JP2007074696A5 publication Critical patent/JP2007074696A5/ja
Application granted granted Critical
Publication of JP4792300B2 publication Critical patent/JP4792300B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Focusing (AREA)
  • Lens Barrels (AREA)
  • Automatic Focus Adjustment (AREA)
  • Studio Devices (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To set an appropriate angle of view for image capturing of an object and to capture an image. <P>SOLUTION: A digital camera comprises a first image-capturing optical system having a lens 2 and a first image sensor 12, and a second image-capturing optical system having a lens 3 and a second image sensor 14. A distance to an object 100 is measured by use of an image of the first image-capturing optical system having a relatively wide angle of view. When the object 100 is detected to fall within an angle B of view at a position of distance X, an angle of view of the second image-capturing optical system is automatically controlled to the appropriate angle B of view and an image is captured. When a face portion of a human figure falls within the angle of view of the first image-capturing optical system, an appropriate angle of view corresponding to the face portion is set and the angle of view of the second image-capturing optical system is automatically controlled. An image of the object is captured by use of the second image-capturing optical system. <P>COPYRIGHT: (C)2007,JPO&INPIT

Description

本発明は撮像装置に関し、特に複数の撮像光学系を有する撮像装置での撮影画角調整に関する。   The present invention relates to an imaging apparatus, and more particularly to adjustment of a shooting angle of view in an imaging apparatus having a plurality of imaging optical systems.

従来より、被写体までの距離を測定してズームレンズの焦点距離を自動的に変化させる技術が知られている。   Conventionally, a technique for automatically changing the focal length of a zoom lens by measuring a distance to a subject is known.

例えば、下記の特許文献には、撮影画角内の被写体の大きさや位置に対応して最適なズーム比にレンズを変倍することを目的として、撮影画角の中心、右寄り、左寄りの少なくとも３ポイントにおける被写体までの距離をそれぞれ測定してズーム比を決定することが記載されている。   For example, in the following patent document, for the purpose of scaling the lens to an optimum zoom ratio corresponding to the size and position of the subject within the shooting angle of view, at least three of the center, right side, and left side of the shooting angle of view are described. It describes that the zoom ratio is determined by measuring the distance to the subject at each point.

特許第２７５３４９５号公報Japanese Patent No. 2753495

上記特許文献１の方法でズーム比を決定する際に、その元となる被写体までの距離を測定する手段として、位相検出法や三角測量を応用した、いわゆるパッシブオートフォーカスの手法を用いると、１組のセンサでは被写体の１点についての距離情報しか得ることができないため、せいぜい数点についての距離情報を得るにとどまる。そのため、適正画角を確実に算出するには情報量が不足してしまう。また、デジタルカメラにおける撮像素子を利用したコントラスト検出法のオートフォーカス（山登りＡＦ）を用いて被写体までの距離を測定する方法では、十分な数の点について距離情報を得ることができるが、一方で制御対象であるズームレンズそのものを用いて測距するため、ズームレンズを一度ワイド端に設定してから適正画角を算出する必要が生じ、制御に時間がかかるという欠点があった。   When the zoom ratio is determined by the method of Patent Document 1, a so-called passive autofocus method using a phase detection method or triangulation is used as means for measuring the distance to the subject that is the source of the zoom ratio. Since the pair of sensors can only obtain distance information about one point of the subject, it can only obtain distance information about several points at most. Therefore, the amount of information is insufficient to reliably calculate the appropriate angle of view. In addition, in the method of measuring the distance to the subject using the autofocus (mountain climbing AF) of the contrast detection method using the image sensor in the digital camera, the distance information can be obtained for a sufficient number of points. Since distance measurement is performed using the zoom lens itself that is the object of control, it is necessary to calculate an appropriate angle of view after the zoom lens is once set to the wide end, and there is a drawback that it takes time to control.

本発明の目的は、容易にかつ確実に被写体に応じた適正画角を設定して撮影できる撮像装置を提供することにある。   An object of the present invention is to provide an imaging apparatus capable of easily and surely setting an appropriate angle of view according to a subject and photographing.

本発明は、第１撮像光学系と、第２撮像光学系と、前記第１撮像光学系で得られた相対的に広画角の画像から被写体に対する適正画角を演算する演算手段と、前記演算手段で演算された前記適正画角となるように前記第２撮像光学系の画角を制御して撮影する制御手段とを有することを特徴とする。   The present invention provides a first imaging optical system, a second imaging optical system, a computing means for computing an appropriate field angle for a subject from a relatively wide field angle image obtained by the first imaging optical system, And control means for controlling the field angle of the second imaging optical system so as to obtain the appropriate field angle calculated by the calculation means.

本発明の１つの実施形態では、前記演算手段は前記画像内の複数ポイントあるいは複数エリアにおける被写体距離を検出する手段と、前記被写体距離の分布に基づき前記適正画角を演算する手段とを有する。   In one embodiment of the present invention, the computing means includes means for detecting subject distances at a plurality of points or areas in the image, and means for computing the appropriate angle of view based on the distribution of the subject distances.

また、本発明の他の実施形態では、前記演算手段は前記画像内の被写体固有の特徴部分を検出する手段と、前記特徴部分に基づき前記適正画角を演算する手段とを有する。   In another embodiment of the present invention, the calculating means includes means for detecting a characteristic part unique to the subject in the image and means for calculating the appropriate angle of view based on the characteristic part.

本発明によれば、第１撮像光学系の広画角画像で適正画角を演算し、第２撮像光学系の画角を適正画角に制御するので、被写体に応じた画角を確実に設定できるとともに、単一の撮像光学系の場合のように一旦ワイド端に設定する必要もない。   According to the present invention, the appropriate angle of view is calculated from the wide angle image of the first image pickup optical system and the angle of view of the second image pickup optical system is controlled to the appropriate angle of view. In addition to being able to set, it is not necessary to once set to the wide end as in the case of a single imaging optical system.

以下、図面に基づき本発明の実施形態について説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

図１に、本実施形態にかかるデジタルカメラ１０Ａの構成ブロック図を示す。デジタルカメラ１０Ａはポータブルなバッテリ駆動のカメラである。デジタルカメラ１０Ａは着脱自在（リムーバブル）なメモリカード５４に記憶される静止画（スチル）デジタル画像を生成する。デジタルカメラ１０Ａは静止画に加え、あるいは静止画と択一的に動画デジタル画像を生成してもよく、動画デジタル画像も同様にメモリカード５４に記憶される。   FIG. 1 shows a configuration block diagram of a digital camera 10A according to the present embodiment. The digital camera 10A is a portable battery-powered camera. The digital camera 10A generates a still image (still) digital image stored in a removable memory card 54. The digital camera 10 </ b> A may generate a moving image digital image in addition to the still image or alternatively to the still image, and the moving image digital image is also stored in the memory card 54.

デジタルカメラ１０Ａは撮像アセンブリ１を含み、撮像アセンブリ１は第１イメージセンサ１２上にシーンの画像を結像する固定焦点距離レンズ２と、第２イメージセンサ１４上にそのシーンの画像を結像するズームレンズ３を含む。撮像アセンブリ１は第１イメージセンサ１２からの第１画像信号１２ｅと、第２イメージセンサ１４からの第２画像信号１４ｅを提供する。イメージセンサ１２、１４はアスペクト比及び画素サイズが同一のイメージセンサであり、レンズ２は例えば３５ｍｍフィルム相当の２２ｍｍ超広角レンズで、ズームレンズ３は例えば同４０ｍｍ−１２０ｍｍズームレンズである。   The digital camera 10 </ b> A includes an imaging assembly 1, and the imaging assembly 1 forms an image of the scene on the first image sensor 12 and a fixed focal length lens 2 that forms an image of the scene on the first image sensor 12. A zoom lens 3 is included. The imaging assembly 1 provides a first image signal 12 e from the first image sensor 12 and a second image signal 14 e from the second image sensor 14. The image sensors 12 and 14 are image sensors having the same aspect ratio and pixel size, the lens 2 is a 22 mm super wide angle lens equivalent to, for example, a 35 mm film, and the zoom lens 3 is a 40 mm-120 mm zoom lens, for example.

固定焦点距離レンズ２は第１イメージセンサ１２の露光を制御する絞り及びシャッタアセンブリを有する。ズームレンズ３はズーム及びフォーカスモータ５ａにより駆動され、イメージセンサ１４の露光を制御する絞り及びシャッタアセンブリを含む。固定焦点距離レンズ２の代わりにズームレンズ３と同一あるいは異なる焦点距離範囲を有するズームレンズを用いてもよい。   The fixed focal length lens 2 has an aperture and shutter assembly that controls exposure of the first image sensor 12. The zoom lens 3 is driven by a zoom and focus motor 5a, and includes an aperture and shutter assembly that controls exposure of the image sensor. Instead of the fixed focal length lens 2, a zoom lens having the same or different focal length range as the zoom lens 3 may be used.

イメージセンサ１２、１４はシングルチップのカラーメガピクセルＣＣＤセンサであり、カラー画像を撮影するための公知のベイヤー（Ｂａｙｅｒ）カラーフィルタを用いる。イメージセンサ１２、１４は４：３イメージアスペクト比を有し、例えば３．１有効メガピクセル、２０４８ピクセル×１５３６ピクセルを有する。   The image sensors 12 and 14 are single-chip color megapixel CCD sensors, and use a known Bayer color filter for taking a color image. The image sensors 12, 14 have a 4: 3 image aspect ratio, for example 3.1 effective megapixels, 2048 pixels × 1536 pixels.

制御プロセッサ及びタイミングジェネレータ４０はクロックドライバ１３に信号を供給することで第１イメージセンサ１２を制御し、クロックドライバ１５に信号を供給することで第２イメージセンサ１４を制御する。制御プロセッサ及びタイミングジェネレータ４０はズーム及びフォーカスモータ５ａ並びにシーンを照射するためのフラッシュ４８も制御する。制御プロセッサ及びタイミングジェネレータ４０は自動焦点及び自動露出検出器４６からの信号を受信する。ユーザコントロール４２はデジタルカメラ１０Ａの操作制御に用いられる。   The control processor and timing generator 40 controls the first image sensor 12 by supplying a signal to the clock driver 13 and controls the second image sensor 14 by supplying a signal to the clock driver 15. The control processor and timing generator 40 also controls the zoom and focus motor 5a and the flash 48 for illuminating the scene. Control processor and timing generator 40 receives signals from autofocus and autoexposure detector 46. The user control 42 is used for operation control of the digital camera 10A.

第１イメージセンサ１２からの第１画像信号１２ｅは第１アナログ信号プロセッサ（ＡＳＰ１）２２で増幅され、アナログＭＵＸ３４の第１入力に供給される。第２イメージセンサ１４からの第２画像信号１４ｅは第２アナログ信号プロセッサ（ＡＳＰ２）２４で増幅され、アナログＭＵＸ３４の第２入力に供給される。アナログＭＵＸ３４の機能は第１イメージセンサ１２からの第１画像信号１２ｅあるいは第２イメージセンサ１４からの第２画像信号１４ｅのいずれかを選択することであり、これにより撮像アセンブリ１からの選択されたセンサ出力を後段の部品に供給する。   The first image signal 12e from the first image sensor 12 is amplified by a first analog signal processor (ASP1) 22 and supplied to a first input of an analog MUX 34. The second image signal 14e from the second image sensor 14 is amplified by the second analog signal processor (ASP2) 24 and supplied to the second input of the analog MUX 34. The function of the analog MUX 34 is to select either the first image signal 12e from the first image sensor 12 or the second image signal 14e from the second image sensor 14, thereby selecting the selected from the imaging assembly 1. The sensor output is supplied to the subsequent components.

制御プロセッサ及びタイミングジェネレータ４０はアナログデジタル（Ａ／Ｄ）変換回路３６に第１アナログ信号プロセッサ（ＡＳＰ１）２２あるいは第２アナログ信号プロセッサ（ＡＳＰ２）２４のいずれかの出力を供給するためにアナログＭＵＸ３４を制御する。Ａ／Ｄ変換器３６から供給されたデジタルデータはＤＲＡＭバッファメモリ３８に記憶され、さらに画像プロセッサ５０で処理される。画像プロセッサ５０で実行される処理は、フラッシュＥＰＲＯＭメモリで構成されるファームウェアメモリ５８に記憶されたファームウェアで制御される。プロセッサ５０は入力デジタル画像ファイルを処理し、処理ステージにおいて入力デジタル画像ファイルはＲＡＭメモリ５６に記憶される。   The control processor and timing generator 40 provides an analog MUX 34 to supply either the first analog signal processor (ASP 1) 22 or the second analog signal processor (ASP 2) 24 to the analog-to-digital (A / D) conversion circuit 36. Control. The digital data supplied from the A / D converter 36 is stored in the DRAM buffer memory 38 and further processed by the image processor 50. The processing executed by the image processor 50 is controlled by the firmware stored in the firmware memory 58 formed of a flash EPROM memory. The processor 50 processes the input digital image file, and the input digital image file is stored in the RAM memory 56 at the processing stage.

２つのＡ／Ｄ変換回路がそれぞれ第１アナログ信号プロセッサ（ＡＳＰ１）２２及び第２アナログ信号プロセッサ（ＡＳＰ２）２４の出力に接続される構成でもよく、この場合にはアナログＭＵＸ３４は不要となる。代わりに、デジタルマルチプレクサがＡ／Ｄ変換回路の出力のいずれかを選択するために用いられる。   Two A / D conversion circuits may be connected to the outputs of the first analog signal processor (ASP1) 22 and the second analog signal processor (ASP2) 24, respectively. In this case, the analog MUX 34 is unnecessary. Instead, a digital multiplexer is used to select one of the outputs of the A / D converter circuit.

画像プロセッサ５０で処理されたデジタル画像ファイルはメモリカードインタフェース５２に供給され、インタフェース５２はデジタル画像ファイルをリムーバブルメモリカード５４に記憶する。メモリカード５４はデジタル画像記憶媒体の一種であり、いくつかの異なる物理フォーマットで利用できる。例えば、メモリカード５４は公知のフォーマット、例えばコンパクトフラッシュ（登録商標）、スマートメディア、メモリスティック、ＭＭＣ、ＳＤ、ＸＤメモリカードフォーマットに適用できる。他の形式、例えば磁気ハードドライブ、磁気テープ、光ディスクも使用し得る。あるいは、デジタルカメラ１０ＡはフラッシュＥＰＲＯＭ等の内蔵不揮発性メモリを用いてもよい。このような場合、メモリカードインタフェース５２やメモリカード５４は不要である。   The digital image file processed by the image processor 50 is supplied to the memory card interface 52, and the interface 52 stores the digital image file in the removable memory card 54. The memory card 54 is a kind of digital image storage medium and can be used in several different physical formats. For example, the memory card 54 can be applied to a known format such as a compact flash (registered trademark), smart media, memory stick, MMC, SD, XD memory card format. Other formats such as magnetic hard drive, magnetic tape, optical disk may also be used. Alternatively, the digital camera 10A may use a built-in nonvolatile memory such as a flash EPROM. In such a case, the memory card interface 52 and the memory card 54 are unnecessary.

画像プロセッサ５０は種々のハウスキーピング及び画像処理機能を実行し、この中にはｓＲＧＢ画像データを生成するためにカラー及びトーン補正によるカラー補間を含む。ｓＲＧＢ画像データは次にＪＰＥＧ圧縮され、ＪＰＥＧ画像データとしてメモリカード５４に記憶される。ｓＲＧＢ画像データは、ＳＣＳＩ接続、ＵＳＢ接続、ＦｉｒｅＷｉｒｅ接続等のホストインタフェース６２を介してホストＰＣ６６にも供給される。ＪＰＥＧファイルはいわゆる「Ｅｘｉｆ」画像フォーマットを用いる。   Image processor 50 performs various housekeeping and image processing functions, including color interpolation with color and tone correction to generate sRGB image data. The sRGB image data is then JPEG compressed and stored in the memory card 54 as JPEG image data. The sRGB image data is also supplied to the host PC 66 via the host interface 62 such as SCSI connection, USB connection, FireWire connection or the like. JPEG files use the so-called “Exif” image format.

画像プロセッサ５０は、典型的にはプログラマブル画像プロセッサであるが、ハード結線されたカスタム集積回路プロセッサ、汎用マイクロプロセッサ、ハード結線カスタムＩＣとプログラマブルプロセッサの混合でもよい。   Image processor 50 is typically a programmable image processor, but may be a hard-wired custom integrated circuit processor, a general purpose microprocessor, a hard-wired custom IC and a mixture of programmable processors.

画像プロセッサ５０は低解像度サムネイル画像も生成する。画像が撮影された後、サムネイル画像はカラーＬＣＤ７０に表示される。カラーＬＣＤ７０に表示されるグラフィカルユーザインタフェースはユーザコントロール４２で制御される。   The image processor 50 also generates a low resolution thumbnail image. After the image is taken, the thumbnail image is displayed on the color LCD 70. A graphical user interface displayed on the color LCD 70 is controlled by a user control 42.

デジタルカメラ１０Ａはカメラ電話（カメラフォン）の一部に含まれていてもよい。このような実施形態では、画像プロセッサ５０はセルラープロセッサ９０に接続し、セルラープロセッサ９０はアンテナ９４を介した無線送信を用いてセルラーネットワークにデジタル画像を送信すべくセルラーモデム９２を使用する。撮像アセンブリ１はレンズ２，３、イメージセンサ１２，１４、ズーム及びフォーカスモータ５ａを含む集積アセンブリでもよい。加えて、クロックドライバ１３，１５、アナログ信号プロセッサ２２，２４、アナログＭＵＸ３４、Ａ／Ｄ変換器３６も集積アセンブリの一部としてもよい。   The digital camera 10A may be included as part of a camera phone (camera phone). In such an embodiment, image processor 50 connects to cellular processor 90, which uses cellular modem 92 to transmit digital images to the cellular network using wireless transmission via antenna 94. The imaging assembly 1 may be an integrated assembly including lenses 2 and 3, image sensors 12 and 14, and a zoom and focus motor 5a. In addition, clock drivers 13, 15, analog signal processors 22, 24, analog MUX 34, and A / D converter 36 may also be part of the integrated assembly.

このようにレンズ２及び第１イメージセンサ１２を含む第１撮像光学系と、レンズ３及び第２イメージセンサ１４を含む第２撮像光学系からなるデジタルカメラ１０Ａにおいて、被写体を撮影する際に制御プロセッサ及びタイミングジェネレータ４０並びに画像プロセッサ５０は相対的に画角の広い第１撮像光学系で得られた第１画像信号１２ｅを用いてコントラストＡＦ（山登りＡＦ）により被写体までの距離を検出する。被写体までの距離は第１撮像光学系の画角内の複数ポイントで実行される。そして、制御プロセッサ及びタイミングジェネレータ４０は複数ポイントで得られた被写体までの距離の分布に基づいて第２撮像光学系における適正画角を演算する。   In this way, in the digital camera 10A including the first imaging optical system including the lens 2 and the first image sensor 12 and the second imaging optical system including the lens 3 and the second image sensor 14, the control processor is used when shooting a subject. The timing generator 40 and the image processor 50 detect the distance to the subject by contrast AF (mountain climbing AF) using the first image signal 12e obtained by the first imaging optical system having a relatively wide angle of view. The distance to the subject is executed at a plurality of points within the angle of view of the first imaging optical system. Then, the control processor and timing generator 40 calculates an appropriate angle of view in the second imaging optical system based on the distribution of distances to the subject obtained at a plurality of points.

図２に、第１撮像光学系を構成するレンズ２と第１イメージセンサ１２、第２撮像光学系を構成するズームレンズ３と第２イメージセンサ１４、及び被写体１００としての人物の位置関係を平面図で示す。デジタルカメラ１０Ａと被写体１００である人物までの距離をＸとする。第１撮像光学系は相対的に広画角であって画角Ａを有し、この画角Ａ内において複数のポイント（あるいは複数のエリアでもよい）において被写体１００までの距離をコントラストＡＦ（山登りＡＦ）法で算出する。山登り法は周知であり、ある点においてコントラストのデータをとり、次に撮影レンズの位置を少し動かしてまた同様にコントラストのデータをとり、前よりもコントラストが上がったら合焦位置がその方向にあるのでさらに同一方向に撮影レンズを動かしてみて同様のことを行い、コントラストが下がったら合焦位置は逆の方向にあるので逆向きに動かすことを繰り返す方法である。コントラストが最大となったところで、そのときの撮影レンズの位置と、その焦点距離とから被写体１００までの距離が算出される。以上のようにして被写体１００までの距離を検出した結果、被写体１００が距離Ｘの位置に画角Ｂの範囲で存在していることが検出された場合、第２撮像光学系のズームレンズ３の画角を画角Ｂに一致するようにズーム及びフォーカスモータ５ａを駆動する。そして、ズームレンズ３の画角を画角Ｂに自動制御した後、第２撮像光学系を用いて被写体１００を撮影する。画角Ａ内に複数の物体が存在する場合、画角Ａ内の複数ポイントで測距すると測距値に分布が生じる。測距データの中で最至近距離群を主要な被写体１００の測距データと判定し、この最至近距離群のデータを内包するような画角を適正画角Ｂとする。   FIG. 2 is a plan view showing the positional relationship between the lens 2 and the first image sensor 12 constituting the first imaging optical system, the zoom lens 3 and the second image sensor 14 constituting the second imaging optical system, and the person as the subject 100. Shown in the figure. Let X be the distance between the digital camera 10A and the person who is the subject 100. The first imaging optical system has a relatively wide angle of view and an angle of view A. Within this angle of view A, the distance to the subject 100 at a plurality of points (or a plurality of areas) can be determined by contrast AF (hill climbing). AF) method. The hill-climbing method is well known, taking contrast data at a certain point, then moving the position of the taking lens a little and taking the contrast data again, and when the contrast is higher than before, the in-focus position is in that direction Therefore, by moving the photographic lens further in the same direction, the same thing is performed. When the contrast is lowered, the in-focus position is in the opposite direction, so that the movement in the opposite direction is repeated. When the contrast is maximized, the distance to the subject 100 is calculated from the position of the photographing lens at that time and the focal distance. As a result of detecting the distance to the subject 100 as described above, when it is detected that the subject 100 exists within the range of the angle of view B at the position of the distance X, the zoom lens 3 of the second imaging optical system is detected. The zoom and focus motor 5a is driven so that the angle of view coincides with the angle of view B. Then, after automatically controlling the angle of view of the zoom lens 3 to the angle of view B, the subject 100 is photographed using the second imaging optical system. When there are a plurality of objects in the angle of view A, if the distance is measured at a plurality of points in the angle of view A, a distribution is generated in the distance measurement value. In the distance measurement data, the closest distance group is determined as the distance measurement data of the main subject 100, and an angle of view including the data of the closest distance group is set as an appropriate angle of view B.

一方、図３に示すように、被写体１０２として複数（２人）の人物が存在する場合も同様であり、被写体１０２までの距離を検出した結果、被写体１０２が距離Ｘの位置に画角Ｃの範囲で存在していることが検出された場合、第２撮像光学系のズームレンズ３の画角を画角Ｃに一致するようにズーム及びフォーカスモータ５ａを駆動する。そして、ズームレンズ３の画角を画角Ｃに自動制御した後、第２撮像光学系を用いて被写体１０２を撮影する。   On the other hand, as shown in FIG. 3, the same applies to the case where there are a plurality of (two) persons as the subject 102, and as a result of detecting the distance to the subject 102, the subject 102 has the angle of view C at the position of the distance X. When it is detected that the zoom lens 3 exists within the range, the zoom and focus motor 5a is driven so that the field angle of the zoom lens 3 of the second imaging optical system matches the field angle C. Then, after automatically controlling the angle of view of the zoom lens 3 to the angle of view C, the subject 102 is photographed using the second imaging optical system.

図４に、適正画角の算出処理を模式的に示す。図中破線で示す矩形領域１２０は相対的に広画角である第１撮像光学系の画角である。広画角１２０内に２人の人物が写っており、広画角１２０を複数の測距エリアに分割し、各測距エリアでコントラストＡＦ（山登りＡＦ）により距離データを得る。距離データの分布のうち、２人の人物の存在領域において最至近距離データ群が生じ、これらの最至近距離データ群が丁度収まるような矩形領域１３０を仮演算する。そして、仮演算された矩形領域１３０に対して所定の余裕分（オフセット）を付加した矩形領域１４０を最終的な適正画角１４０として演算する。例えば、画角中心から最至近距離群に対応する画素群のうち最も遠い画素の位置までの距離（サイズ）Ｌを演算し、演算したサイズＬに一定の係数Ｃ（Ｃ＞１）を乗じてＣ・Ｌとし、このサイズＣ・Ｌと画角対角線の長さとから適正画角サイズを演算する。係数Ｃはデジタルカメラ１０Ａでデフォルトとしてメモリに記憶していてもよく、ユーザが適宜ユーザコントロール４２を用いて設定ないし可変調整してもよい。もちろん、仮演算した画角１３０を最終的な適正画角とすることも可能である。要は、最至近距離群としての主要被写体に外接ないし内包するような矩形領域を適正画角として演算すればよい。   FIG. 4 schematically shows the calculation process of the appropriate angle of view. A rectangular area 120 indicated by a broken line in the figure is a field angle of the first imaging optical system having a relatively wide field angle. Two persons are shown in the wide angle of view 120. The wide angle of view 120 is divided into a plurality of distance measuring areas, and distance data is obtained by contrast AF (mountain climbing AF) in each distance measuring area. In the distance data distribution, the nearest distance data group is generated in the presence area of two persons, and a rectangular area 130 in which these nearest distance data groups just fit is temporarily calculated. Then, a rectangular area 140 obtained by adding a predetermined margin (offset) to the temporarily calculated rectangular area 130 is calculated as the final appropriate angle of view 140. For example, the distance (size) L from the center of the view angle to the position of the farthest pixel in the pixel group corresponding to the closest distance group is calculated, and the calculated size L is multiplied by a constant coefficient C (C> 1). C · L, and an appropriate field angle size is calculated from the size C · L and the length of the diagonal of the field angle. The coefficient C may be stored in the memory as a default in the digital camera 10 </ b> A, or may be set or variably adjusted by the user using the user control 42 as appropriate. Of course, the temporarily calculated angle of view 130 can be set as the final appropriate angle of view. In short, a rectangular area that circumscribes or encloses the main subject as the closest distance group may be calculated as an appropriate angle of view.

また、このように距離データの分布から最至近距離データ群を抽出するのではなく、被写体の特徴部分を抽出して適正画角を演算することも可能である。被写体の特徴部分は撮影モード（撮影シーン）や明るさ、色等から抽出し得る。例えば、撮影モードが「ポートレート」等に設定されていて画角Ａ内に人物の存在することが明らかな場合、被写体の特徴部分として人物の顔部を抽出する。顔部の認識アルゴリズムは周知であり、所定の顔形状、髪領域、肌色領域、２つの眼部領域、唇領域等を検出し、これらの相対的位置関係から顔部を抽出する。そして、図５に示すように、顔部１５０に外接あるいは内包するような矩形領域１４０を適正画角１４０として演算する。具体的には、画角中心から最も遠い顔部のエッジまでのサイズを演算し、演算したサイズＭに一定の係数Ｃを乗じてＣ・Ｍとし、このサイズＣ・Ｍと画角対角線の長さとから適正画角サイズを演算する。係数Ｃの値が１．０とした場合は顔が横方向に対して画角一杯となるが、顔以外の部分も多少画角に入れてバランスをとりたい場合は１．２等の値にすればよい。また、係数Ｃの値はデフォルト値としてカメラが持っていても良いし、マニュアル設定等で任意の値をユーザが設定できるようにしても良い。また、上記距離データ群の中から被写体の距離に応じてカメラが係数Ｃの設定を可変しても良い。例えば、複数の顔検出ができた場合において、近傍にいる人物と遠くにいる人物がいた場合、遠くにいる人物を無効とし、近傍の人物のみを被写体と判断して画角を設定することも可能となり、被写体と関係のない人物を除いた最適画角を設定することができる。撮影モードがポートレートの場合、人物の顔部を基準として画角が設定されると考えることができるから、顔部を基準として適正画角を演算することによりユーザの意図に沿う画角を自動設定できる。   Further, instead of extracting the closest distance data group from the distribution of distance data in this way, it is also possible to extract a characteristic portion of the subject and calculate an appropriate angle of view. The characteristic part of the subject can be extracted from the shooting mode (shooting scene), brightness, color, and the like. For example, when the shooting mode is set to “portrait” or the like and it is clear that a person is present within the angle of view A, the face of the person is extracted as a characteristic part of the subject. Facial recognition algorithms are well known, and a predetermined facial shape, hair region, skin color region, two eye region, lip region and the like are detected, and the facial part is extracted from their relative positional relationship. Then, as shown in FIG. 5, a rectangular area 140 that circumscribes or encloses the face 150 is calculated as an appropriate angle of view 140. Specifically, the size from the center of the angle of view to the farthest edge of the face is calculated, and the calculated size M is multiplied by a constant coefficient C to obtain C · M, and this size C · M and the length of the diagonal of the angle of view The appropriate angle of view size is calculated from Sato. When the value of the coefficient C is 1.0, the face is filled with the angle of view with respect to the horizontal direction. do it. Further, the value of the coefficient C may be held by the camera as a default value, or an arbitrary value may be set by the user by manual setting or the like. Further, the camera may vary the setting of the coefficient C in accordance with the distance of the subject from the distance data group. For example, when multiple faces can be detected, if there is a person in the vicinity and a person in the distance, the person in the distance can be invalidated and only the person in the vicinity can be determined as the subject to set the angle of view. It is possible to set an optimum angle of view excluding a person unrelated to the subject. When the shooting mode is portrait, it can be considered that the angle of view is set based on the face of the person, so the angle of view that matches the user's intention is automatically calculated by calculating the appropriate angle of view based on the face. Can be set.

図６に、本実施形態の処理フローチャートを示す。まず、制御プロセッサ及びタイミングジェネレータ４０は第１撮像光学系の第１イメージセンサ１２からの第１画像信号１２ｅを選択して画像プロセッサ５０に供給する。画像プロセッサ５０は第１撮像光学系の画像をＬＣＤ７０に表示するとともに、この画像を用いてコントラストＡＦ（山登りＡＦ）を実行する（Ｓ１００）。そして、コントラストＡＦにより第１撮像光学系の画角内の複数ポイント（あるいは複数エリア）において被写体までの距離を検出する（Ｓ１０１）。   FIG. 6 shows a processing flowchart of the present embodiment. First, the control processor and timing generator 40 selects the first image signal 12e from the first image sensor 12 of the first imaging optical system and supplies it to the image processor 50. The image processor 50 displays the image of the first imaging optical system on the LCD 70 and executes contrast AF (mountain climbing AF) using this image (S100). Then, the distance to the subject is detected at a plurality of points (or a plurality of areas) within the angle of view of the first imaging optical system by contrast AF (S101).

次に、画像プロセッサ５０、あるいは制御プロセッサ及びタイミングジェネレータ４０は画角内の被写体特徴を検出し（Ｓ１０２）、被写体距離の分布又は特徴の分布あるいは両方の分布から適正画角を演算する（Ｓ１０３）。Ｓ１０２の処理において撮影モードを判定するとともに撮影モードに応じて被写体の特徴部分を抽出してもよい。   Next, the image processor 50, or the control processor and timing generator 40 detects subject features within the angle of view (S102), and calculates an appropriate angle of view from the subject distance distribution and / or feature distribution (S103). . In the process of S102, the shooting mode may be determined, and the characteristic portion of the subject may be extracted according to the shooting mode.

第１撮像光学系の画像を用いて被写体の適正画角を演算した後、制御プロセッサ及びタイミングジェネレータ４０はズーム及びフォーカスモータ５ａを駆動してズームレンズ３を前後に移動させ、第２撮像光学系の画角をＳ１０３で演算した適正画角に一致するように制御する（Ｓ１０４）。Ｓ１０１〜Ｓ１０４の処理を通じ、ユーザは被写体を撮影するために所望の画角が得られるようにズームボタン等を操作してズームを手動操作していない点に留意されたい。すなわち、本実施形態では、第１撮像光学系の画角内に被写体が存在する限り、デジタルカメラ１０Ａ側で自動的に適正画角を演算し、第２撮像光学系の画角をこの画角に設定するのである。この後、ユーザがシャッタボタンを操作すると（Ｓ１０５でＹＥＳ）、制御プロセッサ及びタイミングジェネレータ４０は最至近距離群あるいは被写体の特徴部分の距離データを用いてフォーカス制御するとともに第２イメージセンサ１４からの第２画像信号を選択し、画像プロセッサ５０は第２画像信号を処理してメモリカード５４に記憶する（Ｓ１０６）。なお、ＬＣＤ７０に表示される画像は第１撮像光学系の画像のままでもよく、第２撮像光学系の画角が適正画角に自動制御された後は第１撮像光学系の画像から第２撮像光学系の画像に切り替えてもよい。   After calculating the appropriate angle of view of the subject using the image of the first imaging optical system, the control processor and timing generator 40 drives the zoom and focus motor 5a to move the zoom lens 3 back and forth, and the second imaging optical system. Is controlled so as to coincide with the appropriate angle of view calculated in S103 (S104). It should be noted that through the processing of S101 to S104, the user does not manually operate the zoom by operating the zoom button or the like so as to obtain a desired angle of view in order to photograph the subject. That is, in the present embodiment, as long as the subject exists within the angle of view of the first imaging optical system, the appropriate angle of view is automatically calculated on the digital camera 10A side, and the angle of view of the second imaging optical system is set to this angle of view. It is set to. Thereafter, when the user operates the shutter button (YES in S105), the control processor and timing generator 40 perform focus control using the distance data of the closest distance group or the characteristic portion of the subject, and the second image sensor 14 outputs the focus. The two image signals are selected, and the image processor 50 processes the second image signal and stores it in the memory card 54 (S106). The image displayed on the LCD 70 may be the image of the first imaging optical system, and after the angle of view of the second imaging optical system is automatically controlled to an appropriate angle of view, the image of the first imaging optical system is changed to the second. You may switch to the image of the imaging optical system.

本実施形態では、相対的に広画角の第１撮像光学系の画角に被写体を入れておけば、デジタルカメラ１０Ａ側で自動的に被写体を認識して適正画角までズームするので、ユーザは被写体を探したり追いかけたりする必要がない。また、ユーザがズームボタンを操作することで手動で適正画角に調整する場合、ズーム速度が速すぎると画角を調整することが困難であるが、本実施形態ではこのような問題はなく迅速に被写体を捉えることが可能である。   In this embodiment, if the subject is included in the angle of view of the first imaging optical system having a relatively wide angle of view, the digital camera 10A automatically recognizes the subject and zooms to the appropriate angle of view. You don't have to search for or chase the subject. In addition, when the user manually adjusts to an appropriate angle of view by operating the zoom button, it is difficult to adjust the angle of view if the zoom speed is too high. It is possible to capture the subject.

なお、上記のように第２撮像光学系の画角を適正画角に自動制御することで被写体を撮影することが可能であるが、被写体が移動した場合にも適正画角を維持することが好適である。以下、被写体が移動する場合について説明する。   As described above, the subject can be photographed by automatically controlling the angle of view of the second imaging optical system to an appropriate angle of view, but it is possible to maintain the appropriate angle of view even when the subject moves. Is preferred. Hereinafter, a case where the subject moves will be described.

図７に、被写体１００である人物が距離Ｘからデジタルカメラ１０Ａ側に近づく場合の位置関係を示す。第２撮像光学系の画角は適正画角Ｘに制御されており、この状態から被写体１００が近づくと、第２撮像光学系の画像を用いてコントラストＡＦを実行して被写体までの距離を演算するとともに、近づく被写体の画角がほぼ変わらないようにズーム及びフォーカスモータ５ａを駆動する。被写体がさらに近づいて図に示すように第２撮像光学系の画角から外れた場合、制御プロセッサ及びタイミングジェネレータ４０は第２撮像光学系の第２画像信号から第１撮像光学系の第１画像信号に切替える。そして、第１撮像光学系の画角を画角Ｘとほぼ同一の画角Ｙに自動制御する。以上のようにして、被写体の移動にかかわらず適正画角での撮影を維持することができる。   FIG. 7 shows a positional relationship when the person who is the subject 100 approaches the digital camera 10 </ b> A side from the distance X. The angle of view of the second imaging optical system is controlled to an appropriate angle of view X. When the subject 100 approaches from this state, the contrast AF is executed using the image of the second imaging optical system to calculate the distance to the subject. At the same time, the zoom and focus motor 5a is driven so that the angle of view of the approaching subject does not substantially change. When the subject further approaches and deviates from the angle of view of the second imaging optical system as shown in the figure, the control processor and timing generator 40 generates the first image of the first imaging optical system from the second image signal of the second imaging optical system. Switch to signal. Then, the angle of view of the first imaging optical system is automatically controlled to an angle of view Y substantially the same as the angle of view X. As described above, shooting at an appropriate angle of view can be maintained regardless of movement of the subject.

図８に、この場合の処理フローチャートを示す。第２撮像光学系の画角が適正画角Ｘに制御されユーザがシャッタボタンを半押し（Ｓ１）すると、ＡＦ実行後に被写体までの距離を検出して適正画角Ｘでフォーカスロックする（Ｓ２０１）。次に、制御プロセッサ及びタイミングジェネレータ４０は被写体が移動しているか否かを判定する（Ｓ２０２）。被写体が移動しているか否かは、フレーム間の相関を演算することで判定する。被写体が移動している場合、ＡＦを実行しながら順次被写体までの距離を検出するとともに第２撮像光学系の画角を連続的にワイド側に変化させる（Ｓ２０３）。被写体までの距離に応じてズームレンズを駆動し撮影する技術は上記の従来技術にも開示されている。画像プロセッサ５０と制御プロセッサ及びタイミングジェネレータ４０はこの状態で被写体が第２撮像光学系の画角から外れたか否かを判定する（Ｓ２０４）。被写体が画角から外れたか否かもフレーム間の相関を演算することで判定できる。被写体が第２撮像光学系の画角から外れた場合、制御プロセッサ及びタイミングジェネレータ４０は第２撮像光学系の第２画像信号から第１撮像光学系の第１画像信号に切替えて被写体をその画角内に入れ（Ｓ２０５）、第１撮像光学系の画角を画角Ｘと略等しくなるような画角Ｙに制御する（Ｓ２０６）。第１撮像光学系が固定焦点距離レンズ２の場合、必要に応じて第１イメージセンサ１２の画像を電子的にズーミングする「電子ズーム」で画角Ｙを得る。この状態でシャッタボタンが全押し（Ｓ２）されると、第１撮像光学系の画像がメモリカード５４に記憶される（Ｓ２０７）。   FIG. 8 shows a processing flowchart in this case. When the angle of view of the second imaging optical system is controlled to an appropriate angle of view X and the user presses the shutter button halfway (S1), the distance to the subject is detected after AF execution and the focus is locked at the appropriate angle of view X (S201). . Next, the control processor and timing generator 40 determines whether or not the subject is moving (S202). Whether or not the subject is moving is determined by calculating the correlation between frames. When the subject is moving, the distance to the subject is sequentially detected while executing AF, and the angle of view of the second imaging optical system is continuously changed to the wide side (S203). A technique for driving a zoom lens in accordance with the distance to the subject and photographing is also disclosed in the above-described conventional technique. In this state, the image processor 50, the control processor, and the timing generator 40 determine whether or not the subject has deviated from the angle of view of the second imaging optical system (S204). Whether or not the subject deviates from the angle of view can also be determined by calculating the correlation between frames. When the subject deviates from the angle of view of the second imaging optical system, the control processor and timing generator 40 switches from the second image signal of the second imaging optical system to the first image signal of the first imaging optical system to display the subject in the image. The angle of view is entered (S205), and the angle of view of the first imaging optical system is controlled to an angle of view Y that is substantially equal to the angle of view X (S206). When the first imaging optical system is the fixed focal length lens 2, the field angle Y is obtained by “electronic zoom” that electronically zooms the image of the first image sensor 12 as necessary. When the shutter button is fully pressed (S2) in this state, the image of the first imaging optical system is stored in the memory card 54 (S207).

このように、被写体が移動してもデジタルカメラ１０Ａ側で適正画角を維持して撮影することができるので、ユーザは動く被写体でも所望の画角で確実に撮影できる。また、本実施形態では被写体が移動してデジタルカメラ１０Ａに近づく場合について説明したが、デジタルカメラ１０Ａから遠ざかる場合も同様に処理できる。すなわち、第１撮像光学系の適正画角Ｘから被写体が移動して外れた場合、第１撮像光学系から第２撮像光学系に切替え、第２撮像光学系の画角を画角Ｘと略同一の画角Ｙに制御する。第１撮像光学系と第２撮像光学系の可能画角範囲にギャップが存在する場合、そのギャップを電子ズームで補間する。   As described above, even when the subject moves, the digital camera 10A can take an image while maintaining an appropriate angle of view, so that the user can reliably shoot a moving subject with a desired angle of view. In the present embodiment, the case where the subject moves and approaches the digital camera 10A has been described. However, the same processing can be performed when the subject moves away from the digital camera 10A. That is, when the subject moves away from the appropriate angle of view X of the first imaging optical system, the first imaging optical system is switched to the second imaging optical system, and the angle of view of the second imaging optical system is approximately the angle of view X. Control to the same angle of view Y. When a gap exists in the range of possible angles of view of the first imaging optical system and the second imaging optical system, the gap is interpolated by electronic zoom.

また、本実施形態では第２撮像光学系から第１撮像光学系へ（あるいは逆に第１撮像光学系から第２撮像光学系へ）と切り替えているので、切替時に第１撮像光学系と第２撮像光学系のパララックスを補正して画角を維持することも好適である。   In this embodiment, since the second imaging optical system is switched from the first imaging optical system (or conversely from the first imaging optical system to the second imaging optical system), the first imaging optical system and the first imaging optical system are switched at the time of switching. It is also preferable to maintain the angle of view by correcting the parallax of the two imaging optical system.

さらに、本実施形態では被写体が近づく場合において被写体が画角Ｘから外れた場合、撮影に用いる光学系を第２撮像光学系から第１撮像光学系に切り替えているが、光学系を切り替えることなく第２撮像光学系の画角をワイド側にシフトさせてもよい。図９Ａは第１撮像光学系の画角内に存在する被写体の距離情報から演算された適正画角２００を示す。図７の画角Ｘに対応する。この状態から被写体である人物がデジタルカメラ１０Ａ側に近づき、被写体が画角２００から外れると（あるいはそれ以前の被写体の動き量から外れることが予想されると）、制御プロセッサ及びタイミングジェネレータ４０は適正画角を再演算して適正画角２１０を改めて設定する。   Furthermore, in this embodiment, when the subject approaches, when the subject deviates from the angle of view X, the optical system used for photographing is switched from the second imaging optical system to the first imaging optical system, but without switching the optical system. The angle of view of the second imaging optical system may be shifted to the wide side. FIG. 9A shows an appropriate angle of view 200 calculated from distance information of a subject existing within the angle of view of the first imaging optical system. This corresponds to the angle of view X in FIG. If the person who is the subject approaches the digital camera 10A side from this state and the subject deviates from the angle of view 200 (or is predicted to deviate from the amount of movement of the previous subject), the control processor and timing generator 40 are appropriate. The angle of view is recalculated and the appropriate angle of view 210 is set again.

以上、本発明の実施形態について説明したが、本発明はこれに限らず他の態様も可能である。   As mentioned above, although embodiment of this invention was described, this invention is not restricted to this, Other aspects are also possible.

例えば、上記のように複数の撮像光学系として固定焦点距離レンズとズームレンズの組み合わせ、同一焦点距離範囲を有するズームレンズの組み合わせ、異なる焦点距離範囲を有するズームレンズの組み合わせのいずれのシステムにおいても適用できる。同一焦点距離範囲を有するズームレンズの組み合わせの場合、例えば第１撮像光学系の画角を２倍程度として被写体の適正画角を演算し、第２撮像光学系の画角を適正画角に自動制御してもよい。   For example, as described above, the imaging optical system can be applied to any system including a combination of a fixed focal length lens and a zoom lens, a combination of a zoom lens having the same focal length range, and a combination of zoom lenses having different focal length ranges. it can. In the case of a combination of zoom lenses having the same focal length range, for example, the angle of view of the first imaging optical system is approximately doubled to calculate the appropriate angle of view of the subject, and the angle of view of the second imaging optical system is automatically set to the appropriate angle of view. You may control.

また、本実施形態では複数光学系に対してアスペクト比及び画素サイズが同一のイメージセンサを用いたが、これに限ることはなく、アスペクト比や画素サイズ、画素ピッチ、総画素数が異なるイメージセンサを用いても良い。   In this embodiment, an image sensor having the same aspect ratio and pixel size is used for a plurality of optical systems. However, the present invention is not limited to this, and image sensors having different aspect ratios, pixel sizes, pixel pitches, and total number of pixels are used. May be used.

例えば、第１撮像光学系（３５ｍｍフィルム換算で）３５ｍｍとし、第２撮像光学系を（３５ｍｍフィルム換算で）同じく３５ｍｍ−７０ｍｍとしたとき、撮像素子の最大有効総画素サイズを、第２撮像光学系の撮像素子は第１撮像光学系の撮像素子に比べて対角を半分の大きさにした場合、第２撮像光学系は実質７０ｍｍ−１４０ｍｍの撮像光学系となる。このように、撮像素子の大きさを変えることで画角を変えても良い。   For example, when the first imaging optical system (35 mm film equivalent) is 35 mm, and the second imaging optical system is 35 mm-70 mm (35 mm film equivalent), the maximum effective total pixel size of the imaging element is the second imaging optical. When the diagonal of the image pickup element of the system is half that of the image pickup element of the first image pickup optical system, the second image pickup optical system is substantially an image pickup optical system of 70 mm to 140 mm. Thus, the angle of view may be changed by changing the size of the image sensor.

また、第１撮像光学系（３５ｍｍフィルム換算で３５ｍｍ）のイメージセンサを８有効メガピクセルとした場合、第２撮像光学系（３５ｍｍフィルム換算で７０ｍｍ−１０５ｍｍ）のイメージセンサを２メガピクセルにすると、同アスペクト比では第１撮像光学系で得られる画面中央１／２の切り取り画像は第２撮像光学系の７０ｍｍと同じ画角及び画素数となる。   When the image sensor of the first imaging optical system (35 mm in terms of 35 mm film) is 8 effective megapixels, the image sensor of the second imaging optical system (70 mm-105 mm in terms of 35 mm film) is 2 megapixels. With the same aspect ratio, the cropped image at the center of the screen obtained by the first imaging optical system has the same angle of view and the same number of pixels as 70 mm of the second imaging optical system.

このように、同じ光学系でもイメージセンサの画素数を変えることによっても画角を変えることが可能であると同時に、第１撮像光学系で得られる画素ピッチが細かいため、撮影距離などの演算値算出精度を向上することができる。   Thus, even in the same optical system, it is possible to change the angle of view by changing the number of pixels of the image sensor, and at the same time, since the pixel pitch obtained by the first imaging optical system is fine, the calculated value such as the shooting distance Calculation accuracy can be improved.

また、本実施形態の処理は、ユーザによるシャッタボタンの半押し（Ｓ１）、あるいはデジタルカメラ１０Ａに設けられた「画角合わせモード」の設定に応じて実行することができる。ユーザはシャッタボタンあるいは「画角合わせモード」を操作し、デジタルカメラ１０Ａを被写体の方角に向けるだけで被写体に応じた画角で撮影することができる。   Further, the processing of the present embodiment can be executed according to the half-press (S1) of the shutter button by the user or the setting of the “viewing angle adjustment mode” provided in the digital camera 10A. The user can take a picture with an angle of view according to the subject simply by operating the shutter button or the “viewing angle adjustment mode” and directing the digital camera 10A toward the subject.

また、本実施形態ではデジタルカメラ１０Ａ側で適正画角を演算して撮影画角を自動制御しているが、デジタルカメラ１０Ａ側で設定した適正画角をユーザが微調整できる操作手段を設けてもよく、制御プロセッサ及びタイミングジェネレータ４０は操作手段により適正画角がユーザにより微調整された場合、これを学習して次回の適正画角に反映させることも好適である（適正画角のカスタマイズ）。具体的には、操作手段での操作量に応じて係数Ｃを増減調整すればよい。   In this embodiment, the appropriate angle of view is calculated on the digital camera 10A side and the shooting angle of view is automatically controlled. However, an operation means is provided that allows the user to finely adjust the appropriate angle of view set on the digital camera 10A side. The control processor and timing generator 40 is also suitable to learn and reflect this in the next appropriate angle of view when the appropriate angle of view is finely adjusted by the user by the operating means (customization of the appropriate angle of view). . Specifically, the coefficient C may be increased or decreased according to the operation amount of the operation means.

また、被写体の特徴部分を抽出して適正画角を設定する場合、ユーザが適正画角演算の基準となる特徴部分を基本パターンの中から入力設定できるように構成してもよい。   Further, when the feature portion of the subject is extracted and an appropriate angle of view is set, the user may be configured to input and set the feature portion that is a reference for calculating the appropriate angle of view from the basic pattern.

デジタルカメラの構成ブロック図である。It is a block diagram of the configuration of the digital camera. １人の人物が被写体の場合の画角設定説明図である。It is an explanatory view of setting the angle of view when one person is a subject. ２人の人物が被写体の場合の画角設定説明図である。It is an explanatory view of setting an angle of view when two persons are subjects. ２人の人物が被写体の場合の適正画角設定説明図である。It is explanatory drawing of a suitable angle of view setting in case two persons are subjects. 人物の顔部を用いた適正画角設定説明図である。It is explanatory drawing of the appropriate angle of view setting using the face part of a person. 実施形態の処理フローチャートである。It is a processing flowchart of an embodiment. 被写体が移動する場合の画角設定説明図である。FIG. 6 is an explanatory view of setting an angle of view when a subject moves. 他の実施形態の処理フローチャートである。It is a processing flowchart of other embodiments. 被写体移動前の適正画角の一例を示す図である。It is a figure which shows an example of the appropriate angle of view before a to-be-photographed object movement. 被写体移動後の適正画角の一例を示す図である。It is a figure which shows an example of the appropriate angle of view after a to-be-photographed object moved.

符号の説明Explanation of symbols

２ 固定焦点距離レンズ、３ ズームレンズ、１２ 第１イメージセンサ、１４ 第２イメージセンサ、４０ 制御プロセッサ及びタイミングジェネレータ、５０ 画像プロセッサ。   2 fixed focal length lens, 3 zoom lens, 12 first image sensor, 14 second image sensor, 40 control processor and timing generator, 50 image processor.

Claims (9)

第１撮像光学系と、
第２撮像光学系と、
前記第１撮像光学系で得られた相対的に広画角の画像から被写体に対する適正画角を演算する演算手段と、
前記演算手段で演算された前記適正画角となるように前記第２撮像光学系の画角を制御して撮影する制御手段と、
を有することを特徴とする複数光学系を有する撮像装置。 A first imaging optical system;
A second imaging optical system;
Computing means for computing an appropriate angle of view with respect to a subject from an image with a relatively wide angle of view obtained by the first imaging optical system;
Control means for controlling the angle of view of the second imaging optical system so as to obtain the appropriate angle of view calculated by the calculating means;
An image pickup apparatus having a plurality of optical systems. 請求項１記載の装置において、
前記第１撮像光学系は第１レンズを有し、
前記第２撮像光学系は前記第１レンズよりも相対的に狭画角の第２レンズを有する
ことを特徴とする複数光学系を有する撮像装置。 The apparatus of claim 1.
The first imaging optical system includes a first lens;
The second imaging optical system includes a second lens having a relatively narrow angle of view than the first lens. An imaging apparatus having a plurality of optical systems. 請求項１、２のいずれかに記載の装置において、
前記演算手段は、
前記画像内の複数ポイントあるいは複数エリアにおける被写体距離を検出する手段と、
前記被写体距離の分布に基づき前記適正画角を演算する手段と、
を有することを特徴とする複数光学系を有する撮像装置。 The apparatus according to claim 1,
The computing means is
Means for detecting subject distances at a plurality of points or a plurality of areas in the image;
Means for calculating the appropriate angle of view based on the distribution of the subject distance;
An image pickup apparatus having a plurality of optical systems. 請求項３記載の装置において、
前記演算手段は前記被写体距離のうちの最至近距離群を抽出し、前記最至近距離群の被写体に外接ないし内包するような矩形領域を前記適正画角として演算することを特徴とする複数光学系を有する撮像装置。 The apparatus of claim 3.
The computing means extracts the closest distance group of the subject distances, and calculates a rectangular area circumscribing or enclosing the subject in the nearest distance group as the appropriate field angle. An imaging apparatus having 請求項１、２のいずれかに記載の装置において、
前記演算手段は、
前記画像内の被写体固有の特徴部分を検出する手段と、
前記特徴部分に基づき前記適正画角を演算する手段と、
を有することを特徴とする複数光学系を有する撮像装置。 The apparatus according to claim 1,
The computing means is
Means for detecting subject-specific features in the image;
Means for calculating the appropriate angle of view based on the characteristic portion;
An image pickup apparatus having a plurality of optical systems. 請求項５記載の装置において、
前記演算手段は前記特徴部分として人物の顔部を検出することを特徴とする複数光学系を有する撮像装置。 The apparatus of claim 5.
An image pickup apparatus having a plurality of optical systems, wherein the calculating means detects a human face as the characteristic portion. 請求項１、２のいずれかに記載の装置において、
前記演算手段は、
撮影モードに応じて前記画像内の特徴部分を検出する手段と、
前記特徴部分に基づき前記適正画角を演算する手段と、
を有することを特徴とする複数光学系を有する撮像装置。 The apparatus according to claim 1,
The computing means is
Means for detecting a characteristic portion in the image according to a shooting mode;
Means for calculating the appropriate angle of view based on the characteristic portion;
An image pickup apparatus having a plurality of optical systems. 請求項１、２のいずれかに記載の装置において、さらに、
前記被写体の動きを検出する手段と、
を有し、前記演算手段は前記動きに基づき前記適正画角を演算することを特徴とする複数光学系を有する撮像装置。 The apparatus according to claim 1, further comprising:
Means for detecting movement of the subject;
An imaging apparatus having a plurality of optical systems, wherein the calculation means calculates the appropriate angle of view based on the movement. 請求項１、２のいずれかに記載の装置において、さらに、
前記被写体が前記適正画角に制御された前記第２撮像光学系の画角から逸脱したか否かを検出する手段と、
を有し、前記制御手段は前記被写体が逸脱した場合に前記第１撮像光学系の画角を前記適正画角に制御して撮影する手段と、
を有することを特徴とする複数光学系を有する撮像装置。 The apparatus according to claim 1, further comprising:
Means for detecting whether or not the subject has deviated from the angle of view of the second imaging optical system controlled to the appropriate angle of view;
And when the subject deviates, the control means controls the angle of view of the first imaging optical system to the appropriate angle of view and shoots,
An image pickup apparatus having a plurality of optical systems.
JP2006032876A 2005-08-12 2006-02-09 Imaging apparatus having a plurality of optical systems Expired - Fee Related JP4792300B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006032876A JP4792300B2 (en) 2005-08-12 2006-02-09 Imaging apparatus having a plurality of optical systems

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2005234838 2005-08-12
JP2005234838 2005-08-12
JP2006032876A JP4792300B2 (en) 2005-08-12 2006-02-09 Imaging apparatus having a plurality of optical systems

Publications (3)

Publication Number Publication Date
JP2007074696A true JP2007074696A (en) 2007-03-22
JP2007074696A5 JP2007074696A5 (en) 2009-03-19
JP4792300B2 JP4792300B2 (en) 2011-10-12

Family

ID=37935702

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006032876A Expired - Fee Related JP4792300B2 (en) 2005-08-12 2006-02-09 Imaging apparatus having a plurality of optical systems

Country Status (1)

Country Link
JP (1) JP4792300B2 (en)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009267824A (en) * 2008-04-25 2009-11-12 Nikon Corp Photographing device
JP2009265583A (en) * 2008-04-30 2009-11-12 Nikon Corp Photographing device
JP2012090288A (en) * 2011-11-18 2012-05-10 Fujifilm Corp Compound-eye photographing apparatus, control method thereof, and program
JP2014149442A (en) * 2013-02-01 2014-08-21 Olympus Imaging Corp Interchangeable lens and imaging apparatus
JP6268655B1 (en) * 2016-09-08 2018-01-31 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドＳｚ Ｄｊｉ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．，Ｌｔｄ Imaging apparatus, imaging system, moving object, imaging method, and program
JP2018082441A (en) * 2017-12-06 2018-05-24 キヤノン株式会社 Imaging apparatus, method for controlling the same, and image processing apparatus
KR102394189B1 (en) * 2020-11-27 2022-05-03 주식회사 에스원 Method and apparatus for synchronizing images of heterogeneous cameras mounted on the housing
CN114760410A (en) * 2021-01-08 2022-07-15 手持产品公司 Systems, methods, and apparatus for focus selection using image disparity
JP2022113656A (en) * 2021-01-25 2022-08-04 ハンド ヘルド プロダクツ インコーポレーティッド Variable focus assemblies and apparatuses having crossed bearing balls
US11988891B2 (en) 2020-02-04 2024-05-21 Hand Held Products, Inc. Discrete variable focus assemblies, apparatuses, and methods of use

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09322051A (en) * 1996-05-24 1997-12-12 Nippon Hoso Kyokai <Nhk> Automatic photographing camera system
JP2000083246A (en) * 1998-09-04 2000-03-21 Canon Inc Camera control system, camera control method, and recording medium stored with program to execute processing thereof
JP2002247424A (en) * 2001-02-21 2002-08-30 Hitachi Kokusai Electric Inc Monitor camera system
JP2003018437A (en) * 2001-07-05 2003-01-17 Fuji Photo Film Co Ltd Imaging apparatus
JP2004343718A (en) * 2003-04-22 2004-12-02 Matsushita Electric Ind Co Ltd Monitoring apparatus with cameras cooperating
JP2005065265A (en) * 2003-07-31 2005-03-10 Omron Corp Frame adjustment device, image-taking device, and printing device

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09322051A (en) * 1996-05-24 1997-12-12 Nippon Hoso Kyokai <Nhk> Automatic photographing camera system
JP2000083246A (en) * 1998-09-04 2000-03-21 Canon Inc Camera control system, camera control method, and recording medium stored with program to execute processing thereof
JP2002247424A (en) * 2001-02-21 2002-08-30 Hitachi Kokusai Electric Inc Monitor camera system
JP2003018437A (en) * 2001-07-05 2003-01-17 Fuji Photo Film Co Ltd Imaging apparatus
JP2004343718A (en) * 2003-04-22 2004-12-02 Matsushita Electric Ind Co Ltd Monitoring apparatus with cameras cooperating
JP2005065265A (en) * 2003-07-31 2005-03-10 Omron Corp Frame adjustment device, image-taking device, and printing device

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009267824A (en) * 2008-04-25 2009-11-12 Nikon Corp Photographing device
JP2009265583A (en) * 2008-04-30 2009-11-12 Nikon Corp Photographing device
JP2012090288A (en) * 2011-11-18 2012-05-10 Fujifilm Corp Compound-eye photographing apparatus, control method thereof, and program
JP2014149442A (en) * 2013-02-01 2014-08-21 Olympus Imaging Corp Interchangeable lens and imaging apparatus
US10051190B2 (en) 2013-02-01 2018-08-14 Olympus Corporation Interchangeable lens, camera system, imaging apparatus, control method of camera system, and control method of imaging apparatus in which the size of an image circle varies inversely to the focal distance
JP6268655B1 (en) * 2016-09-08 2018-01-31 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドＳｚ Ｄｊｉ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．，Ｌｔｄ Imaging apparatus, imaging system, moving object, imaging method, and program
JP2018040992A (en) * 2016-09-08 2018-03-15 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドＳｚ Ｄｊｉ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．，Ｌｔｄ Imaging device, imaging system, moving body, imaging method, and program
JP2018082441A (en) * 2017-12-06 2018-05-24 キヤノン株式会社 Imaging apparatus, method for controlling the same, and image processing apparatus
US11988891B2 (en) 2020-02-04 2024-05-21 Hand Held Products, Inc. Discrete variable focus assemblies, apparatuses, and methods of use
KR102394189B1 (en) * 2020-11-27 2022-05-03 주식회사 에스원 Method and apparatus for synchronizing images of heterogeneous cameras mounted on the housing
JP2022107533A (en) * 2021-01-08 2022-07-21 ハンド ヘルド プロダクツ インコーポレーティッド Systems, methods and apparatuses for focus selection using image disparity
US11647286B2 (en) 2021-01-08 2023-05-09 Hand Held Products, Inc. Systems, methods, and apparatuses for focus selection using image disparity
CN114760410A (en) * 2021-01-08 2022-07-15 手持产品公司 Systems, methods, and apparatus for focus selection using image disparity
JP2022113656A (en) * 2021-01-25 2022-08-04 ハンド ヘルド プロダクツ インコーポレーティッド Variable focus assemblies and apparatuses having crossed bearing balls
JP7305816B2 (en) 2021-01-25 2023-07-10 ハンド ヘルド プロダクツ インコーポレーティッド Variable focus assembly and device with crossed bearing balls
US11886036B2 (en) 2021-01-25 2024-01-30 Hand Held Products, Inc. Variable focus assemblies and apparatuses having crossed bearing balls

Also Published As

Publication number Publication date
JP4792300B2 (en) 2011-10-12

Similar Documents

Publication Publication Date Title
JP4792300B2 (en) Imaging apparatus having a plurality of optical systems
US20070035628A1 (en) Image-capturing device having multiple optical systems
US20200280681A1 (en) Zoom control device, control method of zoom control device, and recording medium
US7583308B2 (en) Image capturing apparatus
JP5395678B2 (en) Distance map generation type multi-lens camera
EP2123025B1 (en) Operating dual lens cameras to augment images
EP2026567B1 (en) Imaging device and imaging method
US20070025714A1 (en) Image capturing apparatus
JP4574459B2 (en) Image capturing apparatus, control method therefor, program, and storage medium
US20070182833A1 (en) Image-capturing apparatus
JP2011130382A (en) Image-capturing apparatus and control method therefor
JP2007124398A (en) Photographing device
JP2006208558A (en) Imaging device
JP2009188490A (en) Image processing apparatus, and program
JP2003307669A (en) Camera
JP6391304B2 (en) Imaging apparatus, control method, and program
JP2004349750A (en) Digital camera and control method therefor
JP2007129310A (en) Imaging apparatus
JP2003189325A (en) Image processing apparatus and color image photographic apparatus
JP2000155257A (en) Method and device for autofocusing
JP5429588B2 (en) Imaging apparatus and imaging method
JP5092961B2 (en) Imaging apparatus, imaging method, and program
JP4807582B2 (en) Image processing apparatus, imaging apparatus, and program thereof
US8665317B2 (en) Imaging apparatus, imaging method and recording medium
JP2009218708A (en) Image processing apparatus and image processing method

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090129

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090129

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100707

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100810

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101012

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110719

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110725

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140729

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees