JP2013143761A - Imaging apparatus and its control method - Google Patents

Abstract

PROBLEM TO BE SOLVED: To facilitate framing of a telephotographic camera.SOLUTION: An imaging apparatus includes a camera for photographing the eye of a photographer, and displays a guidance for prompting the photographer to move a camera attitude so that a straight line connecting the eye of the photographer and a center part of a display section is parallel with an optical axis.

Description

本発明は、撮像装置において高倍率時の画角合わせをサポートする技術に関する。   The present invention relates to a technique for supporting angle-of-view matching at a high magnification in an imaging apparatus.

近年デジタルカメラの多様化が進み、非常に高倍率なズームを搭載する機種やレンズ交換可能な機種が登場している。また高画素数化とデジタル処理の高画質化技術が進んだ結果、デジタルズーム倍率を高めることも可能になっている。   In recent years, with the diversification of digital cameras, models equipped with extremely high-power zoom and models with interchangeable lenses have appeared. In addition, as a result of increasing the number of pixels and digital image quality enhancement technology, it is also possible to increase the digital zoom magnification.

超望遠撮影においては、僅かなカメラ角度の変化で画角は大きく変化するため、遠方にある被写体を撮影画角内にフレーミングすることが困難になる。コンパクトなボディで気軽に超望遠撮影が可能になり、大型三脚などの装備を使用せずにユーザーが楽しむようになると、フレーミングの困難さがストレスとして感じられるケースが多くなる。   In super-telephoto shooting, the angle of view changes greatly with a slight change in camera angle, so it is difficult to frame a far-field subject within the shooting angle of view. The compact body makes it easy to take super-telephoto shots, and when users enjoy using large tripods and other equipment, framing difficulties often appear as stress.

この課題に対して、特許文献１は、ズームアップにより動きのある被写体を撮影画角内に収めることを容易にし、さらに被写体の細部を確認しながら撮影することを可能にしている。   In response to this problem, Patent Document 1 makes it easy to fit a moving subject within a shooting angle of view by zooming in, and enables shooting while checking details of the subject.

特開２０１１−１８６３７５号公報JP 2011-186375 A

しかし特許文献１の技術の実現のためには光学ファインダを必要とする。光学ファインダを使用せずにこの技術を実現しようとすれば、撮影準備の時点でズームレンズが動くことになり、軽快な撮影操作の支障になる。撮影したい画角でカメラを構え、容易に撮りたい被写体をファインダー内に収めることが求められる。   However, in order to realize the technique of Patent Document 1, an optical finder is required. If this technology is to be realized without using an optical finder, the zoom lens will move at the time of shooting preparation, which will hinder a light shooting operation. It is required to hold the camera at the angle of view you want to shoot and place the subject you want to shoot easily in the viewfinder.

本発明に係る撮像装置は、
撮影対象を撮影するための第１の撮像部と、撮影者を撮影するための第２の撮像部と、
前記第１の撮像部により撮影される連続画像を表示する表示部と、
前記第２の撮像部により撮影される画像における撮影者の目の位置を抽出する目抽出部と、
前記目抽出部の出力に基づき、実際の撮影者の目の位置までの距離を抽出する距離抽出部と、
前記目抽出部と前記距離抽出部の出力に基づき、撮影者の目の位置と前記表示部の中心を結ぶ直線が前記第１の撮像部の光軸とのなす角を算出する算出部と、
前記算出部の算出結果に基づいて前記表示部の表示を変化させる表示制御手段とを有することを特徴とする。 An imaging apparatus according to the present invention
A first imaging unit for photographing a subject to be photographed, a second imaging unit for photographing a photographer,
A display unit for displaying a continuous image captured by the first imaging unit;
An eye extraction unit that extracts the position of the eye of the photographer in the image captured by the second imaging unit;
Based on the output of the eye extraction unit, a distance extraction unit that extracts the distance to the actual photographer's eye position;
Based on outputs of the eye extraction unit and the distance extraction unit, a calculation unit that calculates an angle between a straight line connecting a photographer's eye position and the center of the display unit and the optical axis of the first imaging unit;
And display control means for changing the display of the display unit based on the calculation result of the calculation unit.

本発明によれば、撮像装置における望遠撮影において、撮影したい被写体を撮影領域内に収めることが容易になる。   According to the present invention, in telephoto shooting in an imaging apparatus, it is easy to fit a subject to be shot within a shooting area.

本発明の実施例の構成を示す図である。It is a figure which shows the structure of the Example of this invention. 本発明ので課題とする、望遠レンズを備えたデジタルカメラにおける遠方の被写体のフレーミングの困難さを示す図である。It is a figure which shows the difficulty of framing of a distant subject in the digital camera provided with the telephoto lens which is a subject of the present invention. 遠方の目的物の方向に照準を向けるための直感的操作の例を示す図である。It is a figure which shows the example of intuitive operation for aiming at the direction of the far object. 本発明の概念を示す図である。It is a figure which shows the concept of this invention. 撮影者の目を撮影するための第２の撮像部の構成を説明する図である。It is a figure explaining the structure of the 2nd imaging part for image | photographing a photographer's eyes. 第１の撮像部の光軸(C2)に平行で画像表示部28の中心を通る直線（C3）からの撮影者の目の変位量を、第２の撮像部の撮影画像から求める方法について説明する図である。Explanation will be given on a method for obtaining a displacement amount of the photographer's eyes from a straight line (C3) parallel to the optical axis (C2) of the first imaging unit and passing through the center of the image display unit 28 from the captured image of the second imaging unit. It is a figure to do. 本発明に関わるフローチャートである。3 is a flowchart according to the present invention. 本発明の機能により表示されるフレーミングアシストガイダンスアイコンの表示例を示す図である。It is a figure which shows the example of a display of the framing assist guidance icon displayed by the function of this invention.

［実施例１］
以下、図面を参照して本発明の実施例を説明する。 図１は、本発明の実施例の構成を示す図である。 [Example 1]
Embodiments of the present invention will be described below with reference to the drawings. FIG. 1 is a diagram showing a configuration of an embodiment of the present invention.

図１において、デジタルカメラ１００は本発明の撮像装置の一例である。   In FIG. 1, a digital camera 100 is an example of an imaging apparatus of the present invention.

１０は撮影者が撮影しようとする被写体を撮影するための撮影レンズ、１２は絞り機能を備える機械式シャッター、１４は被写体の光学像を電気信号に変換する撮像素子、１６は撮像素子１４のアナログ信号出力をディジタル信号に変換するＡ／Ｄ変換器である。１２０は撮影者の目を撮影するための撮影レンズ、１２１は撮影者の光学像を電気信号に変換する撮像素子、１２２は撮像素子１２１のアナログ信号出力をディジタル信号に変換するＡ／Ｄ変換器である。   10 is a photographing lens for photographing a subject to be photographed, 12 is a mechanical shutter having an aperture function, 14 is an image sensor that converts an optical image of the subject into an electrical signal, and 16 is an analog of the image sensor 14. An A / D converter that converts a signal output into a digital signal. 120 is a photographing lens for photographing the eyes of the photographer, 121 is an image sensor that converts an optical image of the photographer into an electrical signal, and 122 is an A / D converter that converts an analog signal output of the image sensor 121 into a digital signal. It is.

１８は撮像素子１４、１２１、Ａ／Ｄ変換器１６、１２２、Ｄ／Ａ変換器２６にクロック信号や制御信号を供給するタイミング発生回路であり、メモリ制御回路２２及びシステム制御回路５０により制御される。１２の機械式シャッター以外にも、１８からの撮像素子のリセットタイミングの制御によって、電子シャッタとして、蓄積時間を制御することが可能であり、動画撮影などに使用可能である。   A timing generation circuit 18 supplies a clock signal and a control signal to the image sensors 14 and 121, the A / D converters 16 and 122, and the D / A converter 26, and is controlled by the memory control circuit 22 and the system control circuit 50. The In addition to the twelve mechanical shutters, the accumulation time can be controlled as an electronic shutter by controlling the reset timing of the image sensor from 18, and can be used for moving image shooting and the like.

２０は画像処理回路であり、Ａ／Ｄ変換器１６からのデータ或いはメモリ制御回路２２からのデータに対して所定の画素補間処理や色変換処理を行う。また２０の画像処理回路によって画像の切り出し、変倍処理を行うことで電子ズーム機能が実現される。   An image processing circuit 20 performs predetermined pixel interpolation processing and color conversion processing on the data from the A / D converter 16 or the data from the memory control circuit 22. Further, an electronic zoom function is realized by performing image cutting and scaling processing by 20 image processing circuits.

また、画像処理回路２０においては、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてシステム制御回路５０が露光制御手段４０、測距制御手段４２に対して制御を行う、ＴＴＬ方式のＡＦ処理、ＡＥ処理、ＥＦ処理、ＡＷＢ（オートホワイトバランス）処理も行っている。   Further, the image processing circuit 20 performs predetermined calculation processing using the captured image data, and the system control circuit 50 controls the exposure control means 40 and the distance measurement control means 42 based on the obtained calculation result. TTL AF processing, AE processing, EF processing, and AWB (auto white balance) processing are also performed.

さらに画像処理回路２０において、撮像素子１４、Ａ／Ｄ変換器１６で得られた画像データおよび撮像素子１２１、Ａ／Ｄ変換器１２２で得られた画像データからの人物の顔などの特徴点抽出や、撮影レンズ１０、１２０、撮像素子１２、１２１、Ａ／Ｄ変換器１６、１２２の特性に応じた補正等の処理も行っている。   Further, in the image processing circuit 20, feature points such as a human face are extracted from the image data obtained by the image sensor 14 and the A / D converter 16 and the image data obtained by the image sensor 121 and the A / D converter 122. In addition, processing such as correction according to the characteristics of the photographing lenses 10 and 120, the imaging elements 12 and 121, and the A / D converters 16 and 122 is also performed.

２２はメモリ制御回路であり、Ａ／Ｄ変換器１６、１２２、タイミング発生回路１８、画像処理回路２０、画像表示メモリ２４、Ｄ／Ａ変換器２６、メモリ３０、圧縮・伸長回路３２を制御する。   A memory control circuit 22 controls the A / D converters 16 and 122, the timing generation circuit 18, the image processing circuit 20, the image display memory 24, the D / A converter 26, the memory 30, and the compression / decompression circuit 32. .

Ａ／Ｄ変換器１６、１２２のデータが画像処理回路２０、メモリ制御回路２２を介して、或いはＡ／Ｄ変換器１６、１２２のデータが直接メモリ制御回路２２を介して、画像表示メモリ２４或いはメモリ３０に書き込まれる。   The data of the A / D converters 16 and 122 is sent via the image processing circuit 20 and the memory control circuit 22, or the data of the A / D converters 16 and 122 is sent directly via the memory control circuit 22 and the image display memory 24 or It is written in the memory 30.

２４は画像表示メモリ、２６はＤ／Ａ変換器、２８はＴＦＴ ＬＣＤ等から成る画像表示部であり、画像表示メモリ２４に書き込まれた表示用の画像データはＤ／Ａ変換器２６を介して画像表示部２８により表示される。   Reference numeral 24 denotes an image display memory, 26 denotes a D / A converter, 28 denotes an image display unit including a TFT LCD, and the image data for display written in the image display memory 24 passes through the D / A converter 26. Displayed by the image display unit 28.

画像表示部２８を用いて撮像した画像データを逐次表示すれば、電子ファインダー機能を実現することが可能である。   If the image data captured using the image display unit 28 is sequentially displayed, the electronic viewfinder function can be realized.

また、画像表示部２８は、システム制御回路５０の指示により任意に表示をＯＮ／ＯＦＦすることが可能であり、表示をＯＦＦにした場合にはデジタルカメラ１００の電力消費を大幅に低減することが出来る。   The image display unit 28 can arbitrarily turn on / off the display according to an instruction from the system control circuit 50. When the display is turned off, the power consumption of the digital camera 100 can be significantly reduced. I can do it.

３０は撮影した静止画像や動画像を格納するためのメモリであり、所定枚数の静止画像や所定時間の動画像を格納するのに十分な記憶量を備えている。   Reference numeral 30 denotes a memory for storing captured still images and moving images, and has a sufficient storage capacity to store a predetermined number of still images and a predetermined time of moving images.

これにより、複数枚の静止画像を連続して撮影する連射撮影やパノラマ撮影の場合にも、高速かつ大量の画像書き込みをメモリ３０に対して行うことが可能となる。   Thereby, even in the case of continuous shooting or panoramic shooting in which a plurality of still images are continuously shot, it is possible to write a large amount of images to the memory 30 at high speed.

また、メモリ３０はシステム制御回路５０の作業領域としても使用することが可能である。   The memory 30 can also be used as a work area for the system control circuit 50.

３２は適応離散コサイン変換（ＡＤＣＴ）等により画像データを圧縮伸長する圧縮・伸長回路であり、メモリ３０に格納された画像を読み込んで圧縮処理或いは伸長処理を行い、処理を終えたデータをメモリ３０に書き込む。   Reference numeral 32 denotes a compression / decompression circuit that compresses and decompresses image data by adaptive discrete cosine transform (ADCT) or the like, reads an image stored in the memory 30, performs compression processing or decompression processing, and stores the processed data in the memory 30. Write to.

４０は絞り機能を備えるシャッター１２を制御する露光制御手段であり、フラッシュ４８と連携することによりフラッシュ調光機能も有するものである。   Reference numeral 40 denotes an exposure control means for controlling the shutter 12 having a diaphragm function, and has a flash light control function in cooperation with the flash 48.

４２は撮影レンズ１０、１２０のフォーカシングを制御する測距制御手段、４４は撮影レンズ１０のズーミングを制御するズーム制御手段、４６はバリアである保護手段１０２の動作を制御するバリア制御手段である。   Reference numeral 42 denotes distance measurement control means for controlling the focusing of the photographing lenses 10 and 120, 44 denotes zoom control means for controlling zooming of the photographing lens 10, and 46 denotes barrier control means for controlling the operation of the protection means 102 that is a barrier.

４８はフラッシュであり、ＡＦ補助光の投光機能、フラッシュ調光機能も有する。   A flash 48 has an AF auxiliary light projecting function and a flash light control function.

露光制御手段４０、測距制御手段４２はＴＴＬ方式を用いて制御されており、撮像した画像データを画像処理回路２０によって演算した演算結果に基づき、システム制御回路５０が露光制御手段４０、測距制御手段４２に対して制御を行う。   The exposure control means 40 and the distance measurement control means 42 are controlled using the TTL method. Based on the calculation result obtained by calculating the captured image data by the image processing circuit 20, the system control circuit 50 performs the exposure control means 40 and the distance measurement. Control is performed on the control means 42.

５０はデジタルカメラ１００全体を制御するシステム制御回路、５２はシステム制御回路５０の動作用の定数、変数、プログラム等を記憶するメモリである。   A system control circuit 50 controls the entire digital camera 100, and a memory 52 stores constants, variables, programs, and the like for operation of the system control circuit 50.

５４はシステム制御回路５０でのプログラムの実行に応じて、文字、画像、音声等を用いて動作状態やメッセージ等を表示する液晶表示装置、スピーカー等の表示部であり、デジタルカメラ１００の操作部近辺の視認し易い位置に設置され、例えばＬＣＤやＬＥＤ、発音素子等の組み合わせにより構成されている。   Reference numeral 54 denotes a display unit such as a liquid crystal display device or a speaker that displays an operation state or a message using characters, images, sounds, or the like in accordance with execution of a program in the system control circuit 50, and an operation unit of the digital camera 100 It is installed at a position where it can be easily seen in the vicinity, and is composed of, for example, a combination of an LCD, an LED, a sounding element, and the like.

また、表示部５４は、その一部の機能が光学ファインダー１０４内に設置されている。   In addition, the display unit 54 is partially installed in the optical viewfinder 104.

表示部５４の表示内容のうち、ＬＣＤ等に表示するものとしては、シングルショット／連写撮影表示、セルフタイマー表示、圧縮率表示、記録画素数表示、記録枚数表示、残撮影可能枚数表示、シャッタースピード表示、絞り値表示、露出補正表示、フラッシュ表示、赤目緩和表示、マクロ撮影表示、および本発明に関わるフレーミングアシストガイダンスなどがある。また、ブザー設定表示、電池残量表示、エラー表示、複数桁の数字による情報表示、記録媒体２００及び２１０の着脱状態表示、通信Ｉ／Ｆ動作表示等も可能である。   Among the display contents of the display unit 54, what is displayed on the LCD or the like includes single shot / continuous shooting display, self-timer display, compression rate display, number of recorded pixels, number of recorded pixels, number of remaining images that can be captured, shutter There are speed display, aperture value display, exposure correction display, flash display, red-eye reduction display, macro shooting display, and framing assist guidance according to the present invention. Further, a buzzer setting display, a battery remaining amount display, an error display, an information display with a multi-digit number, an attachment / detachment state display of the recording media 200 and 210, a communication I / F operation display, and the like are possible.

また、表示部５４の表示内容のうち、光学ファインダー１０４内に表示するものとしては、合焦表示、手振れ警告表示、フラッシュ充電表示、シャッタースピード表示、絞り値表示、露出補正表示、等がある。   Further, among the display contents of the display unit 54, what is displayed in the optical viewfinder 104 includes in-focus display, camera shake warning display, flash charge display, shutter speed display, aperture value display, exposure correction display, and the like.

５６は電気的に消去・記録可能な不揮発性メモリであり、例えばフラッシュメモリ等が用いられる。   Reference numeral 56 denotes an electrically erasable / recordable non-volatile memory such as a flash memory.

６０、６２、６４、６６、７０、７２及び７４は、システム制御回路５０の各種の動作指示を入力するための操作手段であり、スイッチやダイアル、タッチパネル、視線検知によるポインティング、音声認識装置等の単数或いは複数の組み合わせで構成される。   Reference numerals 60, 62, 64, 66, 70, 72, and 74 denote operation means for inputting various operation instructions of the system control circuit 50, such as switches, dials, touch panels, pointing by line-of-sight detection, voice recognition devices, and the like. Consists of a single or a plurality of combinations.

ここで、これらの操作手段の具体的な説明を行う。   Here, a specific description of these operating means will be given.

６０はモードダイアルスイッチで、電源オフ、自動撮影モード、撮影モード、パノラマ撮影モード、動画撮影モード、再生モード、マルチ画面再生・消去モード、ＰＣ接続モード、テレビ受信モード等の各機能モードを切り替え設定することが出来る。   Reference numeral 60 denotes a mode dial switch which switches between power off, automatic shooting mode, shooting mode, panoramic shooting mode, movie shooting mode, playback mode, multi-screen playback / erase mode, PC connection mode, TV reception mode, etc. I can do it.

６２はシャッタースイッチＳＷ１で、シャッターボタンの操作途中でＯＮとなり、ＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理等の動作開始を指示する。   Reference numeral 62 denotes a shutter switch SW1, which is turned on during the operation of the shutter button, and instructs to start operations such as AF (autofocus) processing, AE (automatic exposure) processing, and AWB (auto white balance) processing.

６４はシャッタースイッチＳＷ２で、シャッターボタンの操作完了でＯＮとなる。ＥＦ（フラッシュプリ発光）処理と、撮像素子１２から読み出した信号をＡ／Ｄ変換器１６、メモリ制御回路２２を介してメモリ３０に画像データを書き込む露光処理、画像処理回路２０やメモリ制御回路２２での演算を用いた現像処理、メモリ３０から画像データを読み出し、圧縮・伸長回路３２で圧縮を行う、次に記録媒体２００或いは２１０に画像データを書き込む記録処理という一連の処理の動作開始を指示する。   A shutter switch SW2 64 is turned on when the operation of the shutter button is completed. EF (flash pre-emission) processing, exposure processing for writing image data to the memory 30 via the A / D converter 16 and the memory control circuit 22 from the signal read from the image sensor 12, the image processing circuit 20 and the memory control circuit 22 Instructs the start of a series of processes such as the development process using the calculation in the above, the image data is read from the memory 30 and compressed by the compression / decompression circuit 32, and the image data is then written to the recording medium 200 or 210. To do.

６６は表示切替スイッチで、画像表示部２８の表示切替をすることが出来る。   Reference numeral 66 denotes a display changeover switch, which can change the display of the image display unit 28.

この機能により、光学ファインダー１０４を用いて撮影を行う際に、ＴＦＴ ＬＣＤ等から成る画像表示部への電流供給を遮断することにより、省電力を図ることが可能となる。   With this function, when photographing is performed using the optical viewfinder 104, it is possible to save power by cutting off the current supply to the image display unit including a TFT LCD or the like.

７０は各種ボタンやタッチパネル等からなる操作部で、メニューボタン、セットボタン、マクロボタン、マルチ画面再生改ページボタン、フラッシュ設定ボタン、単写／連写／セルフタイマー切り替えボタン、および本発明に関わるフレーミングアシスト表示指示ボタン等がある。またメニュー移動＋（プラス）ボタン、メニュー移動−（マイナス）ボタン、再生画像移動＋（プラス）ボタン、再生画像−（マイナス）ボタン、撮影画質選択ボタン、露出補正ボタン、日付／時間設定ボタン等もある。   An operation unit 70 includes various buttons, a touch panel, and the like. A menu button, a set button, a macro button, a multi-screen playback page break button, a flash setting button, a single shooting / continuous shooting / self-timer switching button, and a framing according to the present invention. There are assist display instruction buttons and the like. Menu move + (plus) button, menu move-(minus) button, playback image move + (plus) button, playback image-(minus) button, shooting quality selection button, exposure compensation button, date / time setting button, etc. is there.

７２はユーザーが撮像画像の倍率変更指示を行うズーム操作手段としてのズームスイッチ部である。以下、ズームスイッチ７２ともいう。このズームスイッチ７２は、撮像画角を望遠側に変更させるテレスイッチと、広角側に変更させるワイドスイッチからなる。このズームスイッチ７２を用いることにより、ズーム制御手段４４に撮影レンズ１０の撮像画角の変更を指示し光学ズーム操作を行うトリガとなる。また、画像処理回路２０による画像の切り出しや、画素補間処理などによる撮像画角の電子的な変更のトリガともなる。７４は被写体検出部で、被写体を検出する素子などがある。被写体として、顔検出する場合も考えられる。   Reference numeral 72 denotes a zoom switch unit as zoom operation means for a user to give an instruction to change the magnification of a captured image. Hereinafter, the zoom switch 72 is also referred to. The zoom switch 72 includes a tele switch that changes the imaging field angle to the telephoto side and a wide switch that changes the imaging angle of view to the wide angle side. By using the zoom switch 72, the zoom control unit 44 is instructed to change the imaging field angle of the photographing lens 10 and becomes a trigger for performing an optical zoom operation. In addition, it also serves as a trigger for electronic change of the imaging angle of view by image cutting by the image processing circuit 20 or pixel interpolation processing. Reference numeral 74 denotes a subject detection unit, which includes an element for detecting a subject. A case where a face is detected as a subject is also conceivable.

８０は電源制御手段で、電池検出回路、ＤＣ−ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成されており、電池の装着の有無、電池の種類、電池残量の検出を行う。また検出結果及びシステム制御回路５０の指示に基づいてＤＣ−ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体を含む各部へ供給する。   Reference numeral 80 denotes a power control means, which includes a battery detection circuit, a DC-DC converter, a switch circuit for switching a block to be energized, and the like, and detects whether or not a battery is installed, the type of battery, and the remaining battery level. Further, the DC-DC converter is controlled based on the detection result and the instruction of the system control circuit 50, and a necessary voltage is supplied to each part including the recording medium for a necessary period.

８２はコネクタ、８４はコネクタ、８６はアルカリ電池やリチウム電池等の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプター等からなる電源手段である。   Reference numeral 82 denotes a connector, 84 denotes a connector, and 86 denotes a primary battery such as an alkaline battery or a lithium battery, a secondary battery such as a NiCd battery, a NiMH battery, or a Li battery, an AC adapter, or the like.

９０及び９４はメモリカードやハードディスク等の記録媒体とのインタフェース、９２及び９６はメモリカードやハードディスク等の記録媒体と接続を行うコネクタである。   Reference numerals 90 and 94 denote interfaces with recording media such as memory cards and hard disks, and reference numerals 92 and 96 denote connectors for connecting to recording media such as memory cards and hard disks.

なお、本実施例では記録媒体を取り付けるインターフェース及びコネクタを２系統持つものとして説明している。もちろん、記録媒体を取り付けるインターフェース及びコネクタは、単数或いは複数、いずれの系統数を備える構成としても構わない。また、異なる規格のインターフェース及びコネクタを組み合わせて備える構成としても構わない。   In this embodiment, it is assumed that there are two interfaces and connectors for attaching the recording medium. Of course, the interface and the connector for attaching the recording medium may have a single or a plurality of systems and any number of systems. Further, a configuration including a combination of interfaces and connectors of different standards may be used.

インターフェース及びコネクタとしては、ＳＤカードやＣＦカード等の規格に準拠したものを用いて構成して構わない。   The interface and the connector may be configured using an SD card, a CF card, or the like that conforms to the standard.

さらに、インタフェース９０及び９４、そしてコネクタ９２及び９６をＰＣＭＣＩＡカードやＣＦ（コンパクトフラッシュ（登録商標））カード等の規格に準拠したものを用いて構成することも可能である。すなわちＬＡＮカードやモデムカード、ＵＳＢカード、ＩＥＥＥ１３９４カード、ＳＣＳＩカード、ＰＨＳ等の通信カード、等の各種通信カードを接続することにより、他のコンピュータやプリンタ等の周辺機器との間で画像データや画像データに付属した管理情報を転送し合うことが出来る。   Further, the interfaces 90 and 94, and the connectors 92 and 96 can be configured by using ones conforming to a standard such as a PCMCIA card or a CF (Compact Flash (registered trademark)) card. That is, by connecting various communication cards such as LAN cards, modem cards, USB cards, IEEE 1394 cards, SCSI cards, PHS and other communication cards, image data and images can be exchanged with other computers and peripheral devices such as printers. Management information attached to the data can be transferred.

１０２は、デジタルカメラ１００のレンズ１０を含む撮像部を覆う事により、撮像部の汚れや破損を防止するバリアである保護手段である。   Reference numeral 102 denotes protection means that is a barrier that prevents the imaging unit from being soiled or damaged by covering the imaging unit including the lens 10 of the digital camera 100.

１０４は光学ファインダであり、画像表示部２８による電子ファインダー機能を使用すること無しに、光学ファインダのみを用いて撮影を行うことが可能である。また、光学ファインダー１０４内には、表示部５４の一部の機能、例えば、合焦表示、手振れ警告表示、フラッシュ充電表示、シャッタースピード表示、絞り値表示、露出補正表示などが設置されている。   Reference numeral 104 denotes an optical viewfinder, which can take an image using only the optical viewfinder without using the electronic viewfinder function of the image display unit 28. In the optical viewfinder 104, some functions of the display unit 54, for example, a focus display, a camera shake warning display, a flash charge display, a shutter speed display, an aperture value display, an exposure correction display, and the like are installed.

１１０は通信手段でＵＳＢ、ＩＥＥＥ１３９４、ＬＡＮ、無線通信、等の各種通信機能を有する。   A communication unit 110 has various communication functions such as USB, IEEE1394, LAN, and wireless communication.

１１２は通信手段１１０によりデジタルカメラ１００を他の機器と接続するコネクタ或いは無線通信の場合はアンテナである。   Reference numeral 112 denotes a connector for connecting the digital camera 100 to another device by the communication unit 110 or an antenna in the case of wireless communication.

２００はメモリカードやハードディスク等の記録媒体である。   Reference numeral 200 denotes a recording medium such as a memory card or a hard disk.

記録媒体２００は、半導体メモリや磁気ディスク等から構成される記録部２０２、デジタルカメラ１００とのインタフェース２０４、デジタルカメラ１００と接続を行うコネクタ２０６を備えている。   The recording medium 200 includes a recording unit 202 composed of a semiconductor memory, a magnetic disk, or the like, an interface 204 with the digital camera 100, and a connector 206 for connecting with the digital camera 100.

２１０はメモリカードやハードディスク等の記録媒体である。   Reference numeral 210 denotes a recording medium such as a memory card or a hard disk.

記録媒体２１０は、半導体メモリや磁気ディスク等から構成される記録部２１２、デジタルカメラ１００とのインタフェース２１４、デジタルカメラ１００と接続を行うコネクタ２１６を備えている。   The recording medium 210 includes a recording unit 212 composed of a semiconductor memory, a magnetic disk, and the like, an interface 214 with the digital camera 100, and a connector 216 for connecting with the digital camera 100.

図２は、本発明ので課題とする、望遠レンズを備えたデジタルカメラにおける遠方の被写体のフレーミングの困難さを示す図である。図２（ａ）が目的の被写体をデジタルカメラの撮影領域の中央に収めた、撮影者の目的とするフレーミングであるとする。図２（ｂ）のように、わずかにデジタルカメラの角度が変わると、望遠の場合はすぐに撮影領域から被写体がずれてしまう。図２（ｂ）ではまだ被写体の一部が撮影領域内に収まっているため、撮影者は画像表示部２８を見ながら撮影領域中央に被写体を捉えるべくデジタルカメラ角度を調節することが可能である。しかし図２（ｃ）のように、撮影領域に被写体が入っておらず、被写体周辺の風景や背景も一様であったり特徴的な部分がなかったりすると、撮影者は被写体をデジタルカメラの撮影領域に収めるようにデジタルカメラ角度を調節することが困難になる。この傾向は望遠レンズの焦点距離が長くなればなるほど顕著となる。   FIG. 2 is a diagram showing the difficulty of framing a far-away subject in a digital camera equipped with a telephoto lens, which is a problem of the present invention. Suppose that FIG. 2A shows the framing intended by the photographer in which the target subject is placed in the center of the photographing area of the digital camera. As shown in FIG. 2B, when the angle of the digital camera is slightly changed, the subject is immediately deviated from the shooting area in the telephoto case. In FIG. 2B, since a part of the subject is still within the photographing region, the photographer can adjust the digital camera angle so as to capture the subject in the middle of the photographing region while looking at the image display unit 28. . However, as shown in FIG. 2C, when the subject does not enter the shooting area and the scenery and background around the subject are uniform or there is no characteristic part, the photographer takes the subject with the digital camera. It becomes difficult to adjust the angle of the digital camera to fit within the area. This tendency becomes more prominent as the focal length of the telephoto lens becomes longer.

図３は、遠方の目的物の方向に照準を向けるための直感的操作の例を示す図である。図３（ａ）では、遠方の目標物に向かい、人が細い筒を持っている。この筒を目標物の方向に向けることを目的とする時、図３（ｂ）のように人は目と目標物の間に筒を保持し、筒の片側から覗いて目標物が見えるように筒の角度を調節するのが最も直感的な方法である。このとき、まず目標物を目で見て、その視線上に筒を移動させ、筒を通して目標物が見えるように筒の角度を調節するというのが一般的な手順となろう。本発明は、望遠レンズを備えたデジタルカメラにおいても、これと同様の直感的操作により、容易に目標の被写体を撮影領域内に収められるように補助することを目的とする。   FIG. 3 is a diagram illustrating an example of an intuitive operation for aiming at the direction of a distant object. In FIG. 3A, a person has a thin cylinder facing a far target. When aiming to point this cylinder in the direction of the target, as shown in Fig. 3 (b), the person holds the cylinder between the eyes and the target so that the target can be seen through one side of the cylinder. The most intuitive way is to adjust the angle of the tube. At this time, it would be a general procedure to first look at the target object, move the cylinder on the line of sight, and adjust the angle of the cylinder so that the target can be seen through the cylinder. It is an object of the present invention to assist a digital camera equipped with a telephoto lens so that a target subject can be easily placed in a photographing region by an intuitive operation similar to this.

図４は、本発明の概念を示す図である。図４（ａ）では、遠方の被写体に向かい、撮影者が望遠レンズを備えたデジタルカメラを持っている。このデジタルカメラを被写体の方向に向けて撮影領域内に被写体を収めることを目的とする時、図４（ｂ）のように撮影者が目と被写体の間にデジタルカメラを保持することを撮影者に促す。しかし図４（ｂ）では、図３で示した筒の例とは異なり、デジタルカメラの画像表示部２８に電子ファインダー機能として表示される画像はデジタルカメラの備える望遠レンズを通して撮影される連続画像であり、容易に被写体を撮影範囲内に収めることができないことは図２で説明したとおりである。現に図４（ｂ）の図ではデジタルカメラの光軸は被写体の方向を向いておらず、デジタルカメラは被写体を撮影範囲に収めることができていない。しかしこのとき、デジタルカメラが撮影者の目と被写体の間にあるという条件が満たされているならば、デジタルカメラが撮影者の目の位置を検出することにより、図４（ｃ）のようにデジタルカメラの向きをどの方向に調節すれば被写体を撮影範囲に収めることができるかを知ることが可能となる。   FIG. 4 is a diagram showing the concept of the present invention. In FIG. 4A, a photographer has a digital camera equipped with a telephoto lens facing a distant subject. When it is intended to place the subject in the photographing area with the digital camera facing the subject, the photographer holds that the photographer holds the digital camera between the eyes and the subject as shown in FIG. Prompt. However, in FIG. 4B, unlike the cylinder example shown in FIG. 3, the image displayed as the electronic viewfinder function on the image display unit 28 of the digital camera is a continuous image taken through a telephoto lens provided in the digital camera. As described with reference to FIG. 2, the subject cannot be easily placed within the shooting range. Actually, in the diagram of FIG. 4B, the optical axis of the digital camera does not face the direction of the subject, and the digital camera cannot fit the subject in the shooting range. However, at this time, if the condition that the digital camera is between the photographer's eyes and the subject is satisfied, the digital camera detects the position of the photographer's eyes, as shown in FIG. It is possible to know in which direction the direction of the digital camera can be adjusted to fit the subject within the shooting range.

図５は、撮影者の目を撮影するための第２の撮像部の構成を説明する図である。図５（ａ）は、デジタルカメラの背面側（被写体撮影用撮像レンズ１０を備える面の反対側の面）を示している。画像表示部２８の中央の上部付近の位置に、第２の撮像部の撮影レンズ１２０を配置している。図５（ｂ）はデジタルカメラを横から見た図、図５（ｃ）はデジタルカメラを上から見た図であり、第２の撮像部（撮影レンズ１２０）の撮影範囲を示している。本発明に関わる機能は、撮影者がデジタルカメラを手で持って操作することを想定している。そのため撮影範囲はほぼ限定され、距離約２０ｃｍ〜５０ｃｍ、撮影画角３０°程度の設計としている。設計撮影範囲を限定することで撮影レンズ１２０をコンパクトに抑え、測距制御部４２による測距精度を高め、画像処理部２０の目検出精度を高めることに重点を置いている。   FIG. 5 is a diagram illustrating a configuration of a second imaging unit for photographing the eyes of the photographer. FIG. 5A shows the back side of the digital camera (the surface opposite to the surface including the imaging lens 10 for photographing a subject). The photographing lens 120 of the second imaging unit is disposed at a position near the upper center of the image display unit 28. FIG. 5B is a view of the digital camera as viewed from the side, and FIG. 5C is a view of the digital camera as viewed from above, showing the shooting range of the second image pickup unit (shooting lens 120). The function related to the present invention assumes that the photographer operates the digital camera by hand. Therefore, the shooting range is almost limited, and the design is such that the distance is about 20 cm to 50 cm and the shooting field angle is about 30 °. The emphasis is on limiting the design photographing range to keep the photographing lens 120 compact, improving the distance measurement accuracy by the distance measurement control unit 42, and improving the eye detection accuracy of the image processing unit 20.

図６を用いて、第１の撮像部の光軸（Ｃ２）に平行で画像表示部２８の中心を通る直線（Ｃ３）からの撮影者の目の変位量を、第２の撮像部の撮影画像から求める方法について説明する。撮影レンズ１０には手ぶれ補正用の光軸を変位させる光学系が含まれているが、ここで述べる第１の撮像部の光軸（Ｃ２）とは、手ぶれ補正用の光学系に依る光軸の変位を踏まえた光軸である。   Using FIG. 6, the amount of displacement of the photographer's eyes from a straight line (C3) parallel to the optical axis (C2) of the first imaging unit and passing through the center of the image display unit 28 is taken by the second imaging unit. A method of obtaining from an image will be described. The photographic lens 10 includes an optical system that displaces the optical axis for camera shake correction. The optical axis (C2) of the first imaging unit described here is an optical axis that depends on the optical system for camera shake correction. It is an optical axis based on the displacement of.

図６（ａ）は、第２の撮像部により撮影された撮影者の目を含む画像である。この画像から、画像処理回路２０の処理により目を検出する。検出アルゴリズムについては既知の方法を使用するためここでは詳述しない。今図６（ａ）のように、右目、左目の２つが検出されたものとする。図６（ｂ）は、図６（ａ）で検出した目の位置に関し、符号を施したものである。Ｃ１は画像の中心を指しているが、Ｃ１は第２の撮影レンズ１２０の光学中心を示す記号とする。Ｃ１から右目までの距離をＬ１、左目までの距離をＬ２とする。この場合Ｌ１＜Ｌ２であるため、本発明の望遠フレーミングアシスト機能の対象とする撮影者の目は右目と判定する。Ｃ１から右目位置までの距離Ｌ１の垂直方向成分をＬ１_ｈ、水平方向成分をＬ２_ｘとする。図６（ｃ）は、図６（ａ）、（ｂ）で検出した撮影者の目の位置を実空間（側面投影）上に示したものである。測距制御手段４２による制御結果から、図６（ｂ）で本発明機能の対象とした右目までの距離を求め、ｄとする。ｄがわかると、撮影画像中の距離Ｌ１_ｙの実空間における距離Ｌ１_ｙｒが求まる。画像表示部２８の中心から第２の撮影レンズ２１０までの距離をｈとする。第１の撮像部の光軸（Ｃ２）に平行で画像表示部２８の中心を通る直線（Ｃ３）と第２の撮影レンズ２１０の光軸Ｃ１のなす角をαとすると、Ｃ３からの変位量は（ｈ−ｄｓｉｎα）−Ｌ１_ｙｒｃｏｓαにより求められる。水平方向成分も同様の演算により求められる。図６（ｄ）は画像表示部２８に射影したベクトルを図示ししている。Ｃ３から撮影者の目の変位量の水平・垂直成分が求まると、図６（ｄ）に示す撮影者の目の位置からＣ３に下ろす垂線ベクトル（ベクトル１）が求まる。ここで、ベクトル１は撮影者の目の位置からＣ３に下ろす垂線（方向と距離）を示すものであり、第１の撮影レンズ１０の光軸Ｃ２との方向と距離を示すものではない。しかし本特許の目的である、望遠レンズを備えたデジタルカメラにおける被写体のフレーミングにおいて、デジタルカメラの筺体サイズ程度の水平変位による撮影画角の変動量は、デジタルカメラを構える角度変異による撮影画角変動量に比べて無視できるほど小さい。そこで本特許ではＣ１とＣ３の距離を無視し、前記ベクトル１に基づきフレーミングアシスト表示を行っている。図４での説明の通り撮影者が目と被写体の間にデジタルカメラ（画像表示部２８の中心）を保持していれば、このベクトル１の方向は、撮影者の見る画像表示部２８において、撮影領域内に収めたい被写体の存在する方向を指している。また図６（ｄ）に示すベクトル１の大きさを用いれば、測距結果ｄとのｔａｎ^−１演算により目的の被写体を撮影領域中心とする（厳密には、Ｃ２とＣ３の距離分の誤差を含む）デジタルカメラ姿勢までの角度変位量をを求めることが可能である。なお、図６（ｂ）の説明において望遠フレーミングアシスト機能の対象とする目の判別方法として、単純に第２の撮影レンズの光学中心Ｃ１からの距離に基づく方法を採る旨記述したが、以上のベクトル１を求める演算を、検出した複数の目それぞれに対して実施し、直線Ｃ３からの変位量が小さい方の目を判別する方法を採ってもよい。また、望遠フレーミングアシスト機能の対象とする目が僅かなデジタルカメラまたは撮影者の変位により切り替わることを防ぐため、一定のヒステリシスまたは判定周期を持たせて切り替えを行うよう設計することが望ましい。 FIG. 6A is an image including the eyes of the photographer taken by the second imaging unit. From this image, the eye is detected by the processing of the image processing circuit 20. The detection algorithm is not described in detail here because a known method is used. Assume that two right eyes and left eyes are detected as shown in FIG. FIG. 6B shows the eye positions detected in FIG. 6A with reference numerals. Although C1 indicates the center of the image, C1 is a symbol indicating the optical center of the second photographing lens 120. The distance from C1 to the right eye is L1, and the distance to the left eye is L2. In this case, since L1 <L2, the eye of the photographer who is the object of the telescopic framing assist function of the present invention is determined as the right eye. The vertical direction component of the distance L1 from C1 to the right eye position is L1 _h , and the horizontal direction component is L2 _x . FIG. 6C shows the position of the eye of the photographer detected in FIGS. 6A and 6B in real space (side projection). From the control result by the distance measurement control means 42, the distance to the right eye which is the object of the function of the present invention in FIG. If d is known, the distance L1 _yr in the real space of the distance L1 _y in the captured image can be obtained. The distance from the center of the image display unit 28 to the second photographing lens 210 is h. A displacement amount from C3, where α is an angle formed by a straight line (C3) parallel to the optical axis (C2) of the first imaging unit and passing through the center of the image display unit 28 and the optical axis C1 of the second photographing lens 210. Is determined by (h-dsinα) -L1 _yr cosα. The horizontal direction component is also obtained by the same calculation. FIG. 6D illustrates a vector projected on the image display unit 28. When the horizontal and vertical components of the displacement amount of the photographer's eyes are obtained from C3, a perpendicular vector (vector 1) to be lowered to C3 from the position of the eyes of the photographer shown in FIG. 6D is obtained. Here, the vector 1 indicates a perpendicular line (direction and distance) drawn from the eye position of the photographer to C3, and does not indicate the direction and distance from the optical axis C2 of the first photographing lens 10. However, in the framing of a subject in a digital camera equipped with a telephoto lens, which is the object of this patent, the amount of change in the shooting angle of view due to the horizontal displacement of the size of the digital camera's housing is the variation in the shooting angle of view due to the angle variation that holds the digital camera. Small enough to be ignored compared to the amount. Therefore, in this patent, the distance between C1 and C3 is ignored, and framing assist display is performed based on the vector 1. If the photographer holds the digital camera (the center of the image display unit 28) between the eyes and the subject as described in FIG. 4, the direction of the vector 1 is determined by the image display unit 28 viewed by the photographer. This indicates the direction in which the subject to be stored in the shooting area exists. If the magnitude of the vector 1 shown in FIG. 6D is used, the target subject is set to the center of the shooting region by tan ⁻¹ calculation with the distance measurement result d (strictly, an error corresponding to the distance between C2 and C3). It is possible to determine the amount of angular displacement up to the digital camera posture. In the description of FIG. 6B, it has been described that the method based on the distance from the optical center C1 of the second photographic lens is simply adopted as a method for discriminating the target eye of the telephoto framing assist function. The calculation for obtaining the vector 1 may be performed for each of the detected plurality of eyes, and a method of discriminating the eye having the smaller displacement amount from the straight line C3 may be adopted. In addition, it is desirable to design the switching with a certain hysteresis or determination cycle in order to prevent the target eye of the telescopic framing assist function from being switched due to slight displacement of the digital camera or the photographer.

図７は、本発明に関わるフローチャートである。図７のフローチャートは、デジタルカメラの撮影待機状態中のシーケンスであり、第１の撮像部の撮影画像が連続的に画像表示部２８に表示されている状態を前提としている。このフローの最中、ＳＷ１、ＳＷ２または動画記録の撮影指示が入力された場合はフローを抜け、静止画撮影シーケンスまたは動画記録開始フローに入る。Ｓ７０１はフレーミングアシスト表示指示ボタンが押下されているかどうかを判別している。フレーミングアシスト表示指示ボタンはデジタルカメラを撮影者が構えた時に容易に操作しうる位置に配置し、該ボタンが押下されている期間のみフレーミングアシストガイダンス機能が動作するよう構成されている。該ボタンが押されたとき、画像表示部２８の中心を通して目標被写体を覗くようにカメラを構えることを促すガイダンスを行ってもよい。該ボタンが押下されている場合、Ｓ７０２に進み第２の撮像部（撮影レンズ２１０、撮像部２１１）を動作させる。すでに動作している場合は何もしない。Ｓ７０３において、画像処理回路２０により撮影者の目を検出を実施する。Ｓ７０４では目の検出のあり／なしを判定しており、目が検出されなかった場合は何もしないで終了する。目が検出された場合はＳ７０５に進み、目が複数検出された場合に機能の対象とする目を選択する。Ｓ７０６では、機能の対象となる目が短期間にころころ切り替わることを防ぐための判別を行っている。判別方法については図６の説明で記述した、第２の撮影レンズの光学中心Ｃ１からの距離による判別にヒステリシスを持たせる方法を採用している。Ｓ７０６で目の切り換えが可能である場合にＳ７０７で対象の目を切り換える。Ｓ７０８で測距制御手段４２により目の位置を測距する。Ｓ７０８で、撮影画像中の目の位置と測距結果から、実空間上の目の位置を計算し、第１の撮像部の撮影レンズ１０の光軸に平行で画像表示部２８の中心を通る直線Ｃ３への垂線を示すベクトル１を求める。Ｓ７１０で、ベクトル１に基づく矢印アイコンを画像表示部２８に表示する。   FIG. 7 is a flowchart according to the present invention. The flowchart in FIG. 7 is a sequence in the shooting standby state of the digital camera, and is premised on a state in which captured images of the first imaging unit are continuously displayed on the image display unit 28. During this flow, if SW1, SW2 or a moving image recording shooting instruction is input, the flow exits and the still image shooting sequence or moving image recording start flow starts. In step S701, it is determined whether or not the framing assist display instruction button has been pressed. The framing assist display instruction button is arranged at a position where the digital camera can be easily operated when the photographer holds it, and the framing assist guidance function operates only during a period in which the button is pressed. When the button is pressed, guidance that prompts the user to hold the camera to look into the target subject through the center of the image display unit 28 may be provided. If the button is pressed, the process proceeds to S702 to operate the second imaging unit (the imaging lens 210 and the imaging unit 211). If it is already running, do nothing. In step S <b> 703, the eye of the photographer is detected by the image processing circuit 20. In S704, the presence / absence of eye detection is determined. If no eye is detected, the process ends without doing anything. If an eye is detected, the process proceeds to S705, and if a plurality of eyes are detected, an eye to be a function target is selected. In S706, a determination is made to prevent the function target eyes from switching in a short time. As a discrimination method, a method of giving hysteresis to the discrimination based on the distance from the optical center C1 of the second photographing lens described in the explanation of FIG. 6 is adopted. If the eye can be switched in S706, the target eye is switched in S707. In step S708, the distance control unit 42 measures the eye position. In S708, the position of the eye in real space is calculated from the position of the eye in the captured image and the distance measurement result, and passes through the center of the image display unit 28 parallel to the optical axis of the imaging lens 10 of the first imaging unit. A vector 1 indicating a perpendicular to the straight line C3 is obtained. In S710, an arrow icon based on the vector 1 is displayed on the image display unit 28.

図８は、本発明の機能により表示されるフレーミングアシストガイダンスアイコンの表示例を示している。このときフレーミングアシスト表示指示ボタンが押され、撮影者は目と目標とする被写体を結ぶ直線状にデジタルカメラの画像表示部２８の中心が来るようにデジタルカメラを構えている。図８（ａ）は僅かに左方向にデジタルカメラを傾ければ被写体が撮影領域に収まることを示し、図８（ｂ）はやや大きめに右上方向にデジタルカメラを傾ければ被写体が撮影領域に収まることを示している。ここでは、目標とするデジタルカメラ姿勢からの変位量に基づきアイコン（矢印）の大きさを変えているが、元々僅かな変位であることを想定した機能であるため矢印の向きを変えるだけとする構成でもよい。   FIG. 8 shows a display example of a framing assist guidance icon displayed by the function of the present invention. At this time, the framing assist display instruction button is pressed, and the photographer holds the digital camera so that the center of the image display unit 28 of the digital camera is in a straight line connecting the eyes and the target subject. FIG. 8A shows that if the digital camera is tilted slightly to the left, the subject will fit in the shooting area. FIG. 8B shows that if the digital camera is tilted slightly to the upper right, the subject will be in the shooting area. It shows that it fits. Here, the size of the icon (arrow) is changed based on the amount of displacement from the target digital camera posture, but since this is a function that originally assumes a slight displacement, only the direction of the arrow is changed. It may be configured.

なお、システム制御回路５０の制御は１つのハードウェアが行ってもよいし、複数のハードウェアが処理を分担することで、装置全体の制御を行ってもよい。   Note that the control of the system control circuit 50 may be performed by one piece of hardware, or the entire apparatus may be controlled by a plurality of pieces of hardware sharing the processing.

また、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。さらに、上述した各実施形態は本発明の一実施形態を示すものにすぎず、各実施形態を適宜組み合わせることも可能である。   Although the present invention has been described in detail based on the preferred embodiments thereof, the present invention is not limited to these specific embodiments, and various forms without departing from the gist of the present invention are also included in the present invention. included. Furthermore, each embodiment mentioned above shows only one embodiment of this invention, and it is also possible to combine each embodiment suitably.

また、上述した実施形態においては、本発明をデジタルカメラに適用した場合を例にして説明したが、これはこの例に限定されず被写体側を撮像する撮像手段と、撮影者側を撮像できる撮像手段とを有する撮像装置であれば適用可能である。すなわち、本発明は被写体側を撮影する撮像手段（アウトカメラ）とインカメラを有する携帯電話端末や携帯型の画像ビューワ、デジタルフォトフレーム、音楽プレーヤー、ゲーム機、電子ブックリーダーなどに適用可能である。   In the above-described embodiment, the case where the present invention is applied to a digital camera has been described as an example. However, the present invention is not limited to this example, and an imaging unit that images the subject side and an image that can image the photographer side are described. Any imaging device having a means can be applied. That is, the present invention can be applied to a mobile phone terminal having an image pickup means (out camera) and an in camera for photographing a subject side, a portable image viewer, a digital photo frame, a music player, a game machine, an electronic book reader, and the like. .

（他の実施形態）
本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）をネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムコードを読み出して実行する処理である。この場合、そのプログラム、及び該プログラムを記憶した記憶媒体は本発明を構成することになる。 (Other embodiments)
The present invention is also realized by executing the following processing. That is, software (program) that realizes the functions of the above-described embodiments is supplied to a system or apparatus via a network or various storage media, and a computer (or CPU, MPU, etc.) of the system or apparatus reads the program code. It is a process to be executed. In this case, the program and the storage medium storing the program constitute the present invention.

１０ 撮影レンズ
１２ 機械式シャッター
１４ 撮像素子
１６ Ａ／Ｄ変換器
１００ デジタルカメラ
１２０ 撮影レンズ
１２１ 撮像素子
１２２ Ａ／Ｄ変換器
DESCRIPTION OF SYMBOLS 10 Shooting lens 12 Mechanical shutter 14 Image pick-up element 16 A / D converter 100 Digital camera 120 Shooting lens 121 Image pick-up element 122 A / D converter

Claims (8)

撮影対象を撮影するための第１の撮像部と、
撮影者を撮影するための第２の撮像部と、
前記第１の撮像部により撮影される連続画像を表示する表示部と、
前記第２の撮像部により撮影される画像における撮影者の目の位置を抽出する目抽出部と、
前記目抽出部の出力に基づき、実際の撮影者の目の位置までの距離を抽出する距離抽出部と、
前記目抽出部と前記距離抽出部の出力に基づき、撮影者の目の位置と前記表示部の中心を結ぶ直線が前記第１の撮像部の光軸とのなす角を算出する算出部と、
前記算出部の算出結果に基づいて前記表示部の表示を変化させる表示制御手段と、
を有することを特徴とする撮像装置。 A first image pickup unit for shooting a shooting target;
A second imaging unit for photographing the photographer;
A display unit for displaying a continuous image captured by the first imaging unit;
An eye extraction unit that extracts the position of the eye of the photographer in the image captured by the second imaging unit;
Based on the output of the eye extraction unit, a distance extraction unit that extracts the distance to the actual photographer's eye position;
Based on outputs of the eye extraction unit and the distance extraction unit, a calculation unit that calculates an angle between a straight line connecting a photographer's eye position and the center of the display unit and the optical axis of the first imaging unit;
Display control means for changing the display of the display unit based on the calculation result of the calculation unit;
An imaging device comprising: 前記算出部による算出結果に基づき、撮影者の目の位置と表示部の中央を結ぶ直線が第１の撮像部の光軸と平行になるように、撮像装置角度を動かすことを撮影者に促すガイダンスを前記表示部に表示することを特徴とする請求項１に記載の撮像装置。 Based on the calculation result by the calculation unit, the photographer is prompted to move the imaging device angle so that a straight line connecting the position of the photographer's eyes and the center of the display unit is parallel to the optical axis of the first imaging unit. The imaging apparatus according to claim 1, wherein guidance is displayed on the display unit. フレーミングアシスト指示部材を備え、フレーミングアシスト指示部材が押下されている期間に前記ガイダンスを表示することを特徴とする請求項２に記載の撮像装置。 The imaging apparatus according to claim 2, further comprising a framing assist instruction member, wherein the guidance is displayed during a period in which the framing assist instruction member is pressed. 前記第２の撮像部により撮影される画像に２つ以上の目が存在する場合、
前記目抽出部は表示部の中央に近い目を抽出することを特徴とする請求項１乃至請求項３の何れか１項に記載の撮像装置。 When two or more eyes are present in the image captured by the second imaging unit,
The imaging apparatus according to claim 1, wherein the eye extraction unit extracts an eye close to a center of the display unit. 前記算出部において、撮影者の目の位置と前記表示部の中心を結ぶ直線が前記第１の撮像部の光軸とのなす角を算出する際、前記第１の撮像部の光軸とは、手ぶれ補正用光学系による変位を加味した光軸であることを特徴とする請求項１乃至請求項４の何れか１項に記載の撮像装置。 In the calculation unit, when calculating the angle formed by the straight line connecting the position of the photographer's eyes and the center of the display unit with the optical axis of the first imaging unit, what is the optical axis of the first imaging unit? The imaging apparatus according to any one of claims 1 to 4, wherein the imaging apparatus includes an optical axis in consideration of displacement by a camera shake correction optical system. 撮影対象を撮影するための第１の撮像部と、撮影者を撮影するための第２の撮像部と、前記第１の撮像部により撮影される連続画像を表示する表示部と、を有する撮像装置の制御方法であって、
前記第２の撮像部により撮影される画像における撮影者の目の位置を抽出する目抽出ステップと、
前記目抽出部の出力に基づき、実際の撮影者の目の位置までの距離を抽出する距離抽出ステップと、
前記目抽出ステップと前記距離抽出ステップの結果に基づき、撮影者の目の位置と前記表示部の中心を結ぶ直線が前記第１の撮像部の光軸とのなす角を算出する算出ステップと、
前記算出部の算出結果に基づいて前記表示部の表示を変化させる表示制御ステップとを有することを特徴とする撮像装置の制御方法。 An imaging having a first imaging unit for imaging a subject to be imaged, a second imaging unit for imaging a photographer, and a display unit that displays a continuous image captured by the first imaging unit. An apparatus control method comprising:
An eye extraction step of extracting the position of the eye of the photographer in the image captured by the second imaging unit;
Based on the output of the eye extraction unit, a distance extraction step of extracting a distance to the actual photographer's eye position;
Based on the results of the eye extraction step and the distance extraction step, a calculation step for calculating an angle formed by a straight line connecting a photographer's eye position and the center of the display unit with the optical axis of the first imaging unit;
A display control step of changing the display of the display unit based on a calculation result of the calculation unit. コンピュータを、請求項１乃至請求項５の何れか１項に記載された撮像装置の各手段として機能させるプログラム。 A program that causes a computer to function as each unit of the imaging apparatus according to any one of claims 1 to 5. コンピュータを、請求項１乃至請求項５の何れか１項に記載された撮像装置の各手段として機能させるプログラムを格納したコンピュータが読み取り可能な記憶媒体。
A computer-readable storage medium storing a program that causes a computer to function as each unit of the imaging apparatus according to any one of claims 1 to 5.