JP2010181490A - Imaging apparatus - Google Patents

Abstract

<P>PROBLEM TO BE SOLVED: To provide an imaging apparatus by which a photographer can photograph himself (herself) by accurately capturing a moment that the photographer shows expression matched with surrounding atmosphere when the photographer photographs himself (herself). <P>SOLUTION: The imaging apparatus includes: a face detection part 31 detecting the face of a person who exists in an image to be picked up by an imaging part 2; a photographer specification part 32 specifying the face of the photographer in the image by using at least information on position and/or size of the face detected by the face detection part in a self-photographing mode; an expression determination part 33 determining the expression of the face of the photographer specified by the photographer specification part 32; and a controller 14 controlling photographing operation by the imaging part 2 in the self-photographing mode according to a result of determination by the expression determination part 33. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、画像を撮像して該画像の電子的な画像データを生成する撮像装置に関する。   The present invention relates to an imaging apparatus that captures an image and generates electronic image data of the image.

近年、インターネット上でブログを開設し、自分の日常生活を公開する人が増えてきている。ブログでは写真が欠かすことのできない構成要素となっており、ブログの作成者本人が自分を被写体として自分自身で撮影した写真を載せるケースも多い。このような状況の下、自分撮りを容易に行うことを可能にする様々な技術が開示されている（例えば、特許文献１〜３を参照）。   In recent years, an increasing number of people have opened blogs on the Internet and disclosed their daily lives. In blogs, photos are an indispensable component, and there are many cases where the creator of the blog posts photos taken by himself as subjects. Various techniques have been disclosed that make it easy to take a selfie under such circumstances (see, for example, Patent Documents 1 to 3).

特開２００３−２２４７６１号公報Japanese Patent Laid-Open No. 2003-224761 特開２００７−３６４９２号公報JP 2007-36492 A 特開２００８−１１８２７６号公報JP 2008-118276 A

自分撮りを行う際、撮影者は撮影することに夢中で自分の表情にまで気が回らないため、表情がこわばってしまいがちである。このため、自分撮りによって撮影者を含む複数の人物の写真を撮影すると、撮影者だけが周囲の雰囲気と調和せずに硬い表情をしている写真が撮影されてしまうことがあった。このような写真は、単に人物間の表情のバランスが悪いだけでなく、その場の和やかな雰囲気や人物同士の親密度が伝わらなくなってしまうおそれもあるため、何らかの対策を施すことが望ましい。しかしながら、上述した従来技術では、撮影者の表情に関する対策が施されてはいなかった。   When taking a self-portrait, the photographer is crazy about taking a picture and does not care about his / her expression, so the expression tends to be stiff. For this reason, when taking a picture of a plurality of persons including the photographer by self-photographing, a photograph in which only the photographer has a hard expression without being in harmony with the surrounding atmosphere may be taken. Such a photograph is not only poor in the balance of facial expressions between persons, but also may cause a gentle atmosphere and intimacy between persons to be conveyed, so it is desirable to take some measures. However, in the above-described prior art, no measures are taken regarding the photographer's facial expression.

本発明は、上記に鑑みてなされたものであって、撮影者が自分撮りを行う際に、撮影者自身が周囲の雰囲気と調和した表情を見せている瞬間を的確に捉えて撮影することができる撮像装置を提供することを目的とする。   The present invention has been made in view of the above, and when the photographer takes a selfie, the photographer can accurately capture and capture the moment when the photographer himself shows an expression in harmony with the surrounding atmosphere. It is an object of the present invention to provide an imaging device that can be used.

上述した課題を解決し、目的を達成するために、本発明に係る撮像装置は、光学系を介して撮像した画像を光電変換することによって電子的な画像データを生成する撮像部を備え、該撮像部による撮影の動作モードとして撮影者が前記光学系を自分に向けて撮影する場合に設定する自分撮りモードを有する撮像装置であって、前記撮像部が撮像する画像中に存在する人物の顔を検出する顔検出部と、前記自分撮りモードで前記顔検出部が検出した顔の位置および／または大きさに関する情報を少なくとも用いることによって前記画像中の撮影者の顔を特定する撮影者特定部と、前記撮影者特定部が特定した撮影者の顔の表情を判定する表情判定部と、前記表情判定部の判定結果に応じて前記自分撮りモードにおける前記撮像部の撮影動作を制御する制御部と、を備えたことを特徴とする。   In order to solve the above-described problems and achieve the object, an imaging apparatus according to the present invention includes an imaging unit that generates electronic image data by photoelectrically converting an image captured through an optical system, An imaging apparatus having a self-portrait mode that is set when a photographer shoots the optical system toward the user as an operation mode of shooting by the image pickup unit, the face of a person existing in an image captured by the image pickup unit And a photographer identification unit that identifies the photographer's face in the image by using at least information on the position and / or size of the face detected by the face detection unit in the selfie mode A facial expression determination unit that determines the facial expression of the photographer identified by the photographer identification unit, and controls the photographing operation of the imaging unit in the self-portrait mode according to the determination result of the facial expression determination unit. A control unit for, characterized by comprising a.

また、本発明に係る撮像装置は、上記発明において、前記光学系の一部が表出する面の裏側に位置する面に設けられ、前記撮像部が生成した画像データに対応する画像を表示する表示部と、前記表示部の表面に設けられ、外部からの押圧による接触を検知するタッチパネルと、前記タッチパネルが検知した接触の位置を含む接触状態を検出する接触状態検出部と、前記接触状態検出部が検出した接触状態が所定時間継続している場合、前記動作モードを前記自分撮りモードに設定するモード設定部と、さらに備え、前記撮影者特定部は、前記顔検出部が検出した顔の位置および／または大きさに関する情報とともに前記接触状態を用いることによって前記画像中の撮影者の顔を特定することを特徴とする。   In the image pickup apparatus according to the present invention, in the above invention, an image corresponding to image data generated by the image pickup unit is provided on a surface located behind the surface on which a part of the optical system is exposed. A display unit; a touch panel that is provided on the surface of the display unit and detects contact caused by external pressure; a contact state detection unit that detects a contact state including a contact position detected by the touch panel; and the contact state detection And a mode setting unit that sets the operation mode to the self-portrait mode when the contact state detected by the unit continues for a predetermined time, and the photographer specifying unit is configured to detect the face detected by the face detection unit. The photographer's face in the image is specified by using the contact state together with information on the position and / or size.

また、本発明に係る撮像装置は、上記発明において、前記タッチパネルが検知する接触の位置と前記画像中の撮影者の顔の位置との相関関係を記憶する位置相関記憶部をさらに備え、前記撮影者特定部は、前記位置相関記憶部が記憶する相関関係を参照することによって前記画像中の撮影者の顔を特定することを特徴とする。   The imaging apparatus according to the present invention may further include a position correlation storage unit that stores a correlation between a contact position detected by the touch panel and a photographer's face position in the image. The person specifying unit specifies the photographer's face in the image by referring to the correlation stored in the position correlation storage unit.

また、本発明に係る撮像装置は、上記発明において、前記表情判定部は、前記撮影者の表情が笑顔であるか否かを判定することを特徴とする。   Moreover, the imaging device according to the present invention is characterized in that, in the above invention, the facial expression determination unit determines whether or not the photographer's facial expression is a smile.

また、本発明に係る撮像装置は、上記発明において、前記画像に含まれる色を判定する色判定部をさらに備え、前記色判定部は、前記撮影者の顔と同じ色を有する部分が非撮影者の近傍にあるか否かを判定し、前記制御部は、前記表情判定部の判定結果および前記色判定部の判定結果に応じて前記自分撮りモードにおける前記撮像部の撮影動作を制御することを特徴とする。   The imaging apparatus according to the present invention may further include a color determination unit that determines a color included in the image according to the above-described invention, and the color determination unit includes a portion that has the same color as the photographer's face. The control unit controls the photographing operation of the imaging unit in the self-portrait mode according to the determination result of the facial expression determination unit and the determination result of the color determination unit It is characterized by.

本発明によれば、自分撮りモードで検出した顔の位置および／または大きさに関する情報を少なくとも用いることによって撮影者を特定し、この特定した撮影者の顔の表情に応じて撮影動作を行うため、撮影者が自分撮りを行う際に、撮影者自身が周囲の雰囲気と調和した表情を見せている瞬間を的確に捉えて撮影することが可能となる。   According to the present invention, a photographer is identified by using at least information on the position and / or size of the face detected in the self-portrait mode, and a photographing operation is performed according to the identified facial expression of the photographer. When the photographer takes a self-portrait, it is possible to accurately capture and capture the moment when the photographer himself shows an expression in harmony with the surrounding atmosphere.

以下、添付図面を参照して本発明を実施するための最良の形態（以後、「実施の形態」と称する）を説明する。   The best mode for carrying out the present invention (hereinafter referred to as “embodiment”) will be described below with reference to the accompanying drawings.

（実施の形態１）
図１は、本発明の実施の形態１に係る撮像装置の構成を示すブロック図である。図２は、本実施の形態１に係る撮像装置の前面側の構成を示す斜視図である。図３は、本実施の形態１に係る撮像装置の背面側の構成を示す斜視図である。 (Embodiment 1)
FIG. 1 is a block diagram showing a configuration of an imaging apparatus according to Embodiment 1 of the present invention. FIG. 2 is a perspective view showing the configuration of the front side of the imaging apparatus according to the first embodiment. FIG. 3 is a perspective view illustrating a configuration on the back side of the imaging apparatus according to the first embodiment.

図１〜図３に示す撮像装置１は、画像を撮像し、この画像の電子的な画像データを生成する撮像部２と、撮像部２が生成した画像データに対して画像処理を施す画像処理部３と、画像処理部３で処理が施された画像データに対応する画像を表示する表示部４と、明るさを含む撮像部２の視野領域の状態を検知するセンサ部５と、撮像装置１の表面に設けられた各種ボタンからなり、操作信号等の入力を受け付ける入力ボタン６と、表示部４に積層して設けられ、外部からの押圧による接触を検知するタッチパネル７と、タッチパネル７で検知した接触の発生領域に関する情報を含む接触状態を検出する接触状態検出部８と、入力ボタン６による入力や接触状態検出部８の検出結果に基づいて撮像装置１が行う動作モードを設定するモード設定部９と、ＬＥＤ（Light Emitting Diode）を用いて実現され、撮像装置１が所定の撮影モード（後述する自分撮りモード）に設定されていることを少なくとも報知する報知部１０と、撮影日時の判定機能やタイマー機能を有する時計１１と、撮像部２の視野領域へ補助光を投射する補助光投射部１２と、撮像部２が撮影した画像データを含む各種情報を記憶する記憶部１３と、入力ボタン６やタッチパネル７から入力される操作信号などに応じて撮像装置１の動作を制御する制御部１４と、を備える。   The imaging apparatus 1 illustrated in FIGS. 1 to 3 captures an image, generates an electronic image data of the image, and image processing that performs image processing on the image data generated by the imaging unit 2. Unit 3, display unit 4 for displaying an image corresponding to the image data processed by image processing unit 3, sensor unit 5 for detecting the state of the field of view of imaging unit 2 including brightness, and imaging apparatus An input button 6 that includes various buttons provided on the surface of 1, receives an input of an operation signal or the like, is stacked on the display unit 4, and includes a touch panel 7 that detects contact caused by external pressure, and a touch panel 7. A mode for setting an operation mode to be performed by the imaging apparatus 1 based on the input by the input button 6 and the detection result of the contact state detection unit 8 and a contact state detection unit 8 that detects a contact state including information on the detected contact occurrence region. Setting 9 and an LED (Light Emitting Diode), and at least a notification unit 10 for notifying that the imaging apparatus 1 is set in a predetermined shooting mode (self-shooting mode to be described later), and a shooting date and time determination function And a clock 11 having a timer function, an auxiliary light projection unit 12 that projects auxiliary light onto the field of view of the imaging unit 2, a storage unit 13 that stores various types of information including image data captured by the imaging unit 2, and an input button 6 and the control part 14 which controls operation | movement of the imaging device 1 according to the operation signal etc. which are input from the touch panel 7.

撮像部２は、一または複数のレンズによって構成され、所定の視野領域に存在する被写体からの光を集光する光学系と、光学系が集光した光の入射量を調整する絞りと、レリーズ入力に応じて動作するシャッタと、絞りおよびシャッタを通過した光を受光して電気信号に変換するＣＣＤ（Charge Coupled Device）等の撮像素子と、撮像素子から出力されるアナログ信号に増幅やホワイトバランス等の信号処理を施した後、Ａ／Ｄ変換を行うことによってデジタルの画像データを生成する信号処理回路とを有する。   The imaging unit 2 includes one or a plurality of lenses, and includes an optical system that collects light from a subject existing in a predetermined visual field area, a diaphragm that adjusts the amount of incident light collected by the optical system, and a release. An image sensor such as a CCD (Charge Coupled Device) that receives the light that has passed through the aperture and the shutter and converts it into an electrical signal, and an analog signal output from the image sensor. And a signal processing circuit that generates digital image data by performing A / D conversion after performing signal processing such as the above.

画像処理部３は、撮像部２が生成した画像データに含まれる人物の顔をパターンマッチングによって検出する顔検出部３１と、顔検出部３１が検出した顔の位置および接触状態検出部８が検出した接触状態に基づいて画像中に存在する人物の顔のうち撮影者の顔を特定する撮影者特定部３２と、撮影者特定部３２が特定した撮影者の顔の表情を判定する表情判定部３３と、を有する。顔検出部３１は、記憶部１３のパターン情報記憶部１３２が記憶している顔のパターン情報を用いてパターンマッチングを行うことにより、撮像部２が撮像している画像（スルー画像）中の人物の顔の有無を検出する。表情判定部３３は、撮影者特定部３２が特定した撮影者の顔の表情が笑顔であるか否かをパターン情報に基づいて判定する。撮影者特定部３２は、タッチパネル７への外部からの接触位置と撮影者の顔の位置との対応関係に基づいて撮影者を特定する。   The image processing unit 3 detects the face of a person included in the image data generated by the imaging unit 2 by pattern matching, and detects the face position and contact state detection unit 8 detected by the face detection unit 31. A photographer specifying unit 32 that specifies a photographer's face among human faces existing in the image based on the contact state, and a facial expression determining unit that determines the facial expression of the photographer specified by the photographer specifying unit 32 33. The face detection unit 31 performs pattern matching using the face pattern information stored in the pattern information storage unit 132 of the storage unit 13, whereby a person in the image (through image) captured by the imaging unit 2. The presence or absence of a face is detected. The facial expression determination unit 33 determines whether the facial expression of the photographer specified by the photographer specifying unit 32 is a smile based on the pattern information. The photographer identifying unit 32 identifies the photographer based on the correspondence between the external touch position on the touch panel 7 and the photographer's face position.

表示部４は、撮像部２の光学系が表出する面（前面）の裏側に位置する面（背面）に設けられ、画像データのほかに撮像装置１の操作情報や撮影に関する情報を適宜表示する。表示部４は、液晶、プラズマまたは有機ＥＬ（Electro Luminescence）等からなる表示パネルを用いて実現される。   The display unit 4 is provided on a surface (rear surface) located on the back side of the surface (front surface) on which the optical system of the image capturing unit 2 is exposed, and appropriately displays operation information of the image capturing apparatus 1 and information on photographing in addition to image data. To do. The display unit 4 is realized using a display panel made of liquid crystal, plasma, organic EL (Electro Luminescence), or the like.

入力ボタン６は、レリーズ信号を入力するレリーズボタン６ａと、各種操作信号を入力する十字キー６ｂとを有する。   The input button 6 includes a release button 6a for inputting a release signal and a cross key 6b for inputting various operation signals.

タッチパネル７は、酸化インジウムスズの薄膜（ＩＴＯ膜）からなる透明抵抗膜を用いて実現され、外部からの押圧による透明抵抗膜の変化に応じた電圧変化を検出することによって押圧された位置を特定し、この特定した位置に応じた信号を入力する。   The touch panel 7 is realized by using a transparent resistance film made of a thin film (ITO film) of indium tin oxide, and identifies a pressed position by detecting a voltage change according to a change in the transparent resistance film due to an external press. Then, a signal corresponding to the specified position is input.

モード設定部９は、撮像装置１の動作モードとして、画像を撮影する撮影モードと、撮影済み画像を表示部４で再生表示する再生モードとを少なくとも設定する。このうち、撮影モードとしては、「通常撮影モード」および「自分撮りモード」の２種類を設定することができる。これら２種類の撮影モードの違いはレリーズ信号の入力方法にある。すなわち、通常撮影モードはレリーズボタン６ａを押下することによってレリーズ信号の入力を行うモードである一方、自分撮りモードはスルー画像中で撮影者と特定された人物の表情に応じてレリーズ信号の入力を行うモードである。モード設定部９は、通常撮影モードに設定されている状態でタッチパネル７に所定の押圧力が継続して加えられた場合、動作モードを自分撮りモードへ切り換える。   The mode setting unit 9 sets at least a shooting mode for shooting an image and a playback mode for playing back and displaying a shot image on the display unit 4 as operation modes of the imaging apparatus 1. Among these, two types of “normal shooting mode” and “selfie shooting mode” can be set as shooting modes. The difference between these two types of shooting modes lies in the release signal input method. That is, the normal shooting mode is a mode in which a release signal is input by pressing the release button 6a, while the self-shooting mode is a mode in which a release signal is input according to the facial expression of the person identified as the photographer in the through image. This is the mode to perform. The mode setting unit 9 switches the operation mode to the self-shooting mode when a predetermined pressing force is continuously applied to the touch panel 7 in a state where the normal shooting mode is set.

記憶部１３は、撮像部２が撮影し、画像処理部３によって処理が施された撮影済みの画像データを記憶する画像データ記憶部１３１と、顔検出部３１がパターンマッチングによって顔を検出する際に参照する顔のパターン情報を記憶するパターン情報記憶部１３２と、タッチパネル７が検知する外部からの接触の位置とスルー画像中の撮影者の顔の位置との相関関係を記憶する位置相関記憶部１３３と、撮像装置１が実行する各種プログラムを記憶するプログラム記憶部１３４とを有する。記憶部１３は、撮像装置１の内部に固定的に設けられるフラッシュメモリやＲＡＭ（Random Access Memory）等の半導体メモリを用いて実現される。なお、記憶部１３に、外部から装着されるメモリカード等の記録媒体に対して情報を記録する一方、記録媒体が記録する情報を読み出す記録媒体インターフェースとしての機能を具備させてもよい。   The storage unit 13 stores an image data storage unit 131 that stores captured image data that has been captured by the imaging unit 2 and processed by the image processing unit 3, and a face detection unit 31 that detects a face by pattern matching. A pattern information storage unit 132 that stores the pattern information of the face to be referred to, and a position correlation storage unit that stores the correlation between the position of the external contact detected by the touch panel 7 and the position of the photographer's face in the through image 133 and a program storage unit 134 that stores various programs executed by the imaging apparatus 1. The storage unit 13 is realized using a semiconductor memory such as a flash memory or a RAM (Random Access Memory) that is fixedly provided inside the imaging apparatus 1. Note that the storage unit 13 may be provided with a function as a recording medium interface that records information on a recording medium such as a memory card mounted from the outside and reads information recorded on the recording medium.

図４は、位置相関記憶部１３３が記憶する相関関係を示す図である。図５は、タッチパネル７の接触領域の区分を示す図である。図４に示すテーブル２００は、タッチパネル７の左半分の領域Ｓ₁に外部からの接触がある場合、スルー画像中で一番左側の人物を撮影者とする一方、タッチパネル７の右半分の領域Ｓ₂に外部からの接触がある場合、スルー画像中で一番右側にいる人物を撮影者とすることを示している。テーブル２００に示す相関関係は、複数の人物が並んだ状態でそのうちの一人が撮影を行う場合、両端に位置する人物のどちらかが撮影者となりやすいことに鑑みて定められたものである。 FIG. 4 is a diagram illustrating the correlation stored in the position correlation storage unit 133. FIG. 5 is a diagram showing the division of the contact area of the touch panel 7. In the table 200 shown in FIG. 4, when there is an external contact in the left half area S ₁ of the touch panel 7, the leftmost person in the through image is taken as the photographer, while the right half area S of the touch panel 7. _When there is an external contact in ₂ , it indicates that the person on the right side in the through image is the photographer. The correlation shown in the table 200 is determined in view of the fact that one of the persons located at both ends is likely to be a photographer when one of them captures a picture with a plurality of persons lined up.

制御部１４は、ＭＰＵ（Micro Processing Unit）等を用いて実現され、制御対象である撮像装置１の各構成部位とバスラインを介して接続されている。   The control part 14 is implement | achieved using MPU (Micro Processing Unit) etc., and is connected with each component of the imaging device 1 which is a control object via a bus line.

図６は、以上の構成を有する撮像装置１を自分撮りモードに設定して自分撮りを行う状況を示す図である。また、図７は、図６に示す状態のスルー画像の表示例を示す図である。図６に示す状況において、顔検出部３１がスルー画像に含まれる顔を検出した後、撮影者特定部３２がタッチパネル７への撮影者１０１の手１０１ｈの接触位置に応じて、二人の人物１０１、１０２のうち左側に位置する人物１０１が撮影者であることを特定する（以後、人物１０１を「撮影者１０１」といい、人物１０２を「非撮影者１０２」という）。その後、表情判定部３３が撮影者１０１の表情を判定し、図６および図７に示すように撮影者１０１の表情が笑顔でない場合には、報知部１０が所定のパターンでＬＥＤを点滅することによって警告を出力する。ＬＥＤの点滅を見た撮影者１０１は、自分の表情を変えて笑顔にする。図８は、図６に示す状況の後、報知部１０によって警告を受けた撮影者１０１が表情を変えた後の状況を示す図である。また、図９は、図８に示す状態のスルー画像の表示例を示す図である。制御部１４は、撮影者１０１の表情が笑顔になった場合に自動的に撮影を行う。   FIG. 6 is a diagram illustrating a situation in which the imaging apparatus 1 having the above configuration is set to the self-taking mode and the self-taking is performed. FIG. 7 is a diagram showing a display example of the through image in the state shown in FIG. In the situation shown in FIG. 6, after the face detection unit 31 detects a face included in the through image, the photographer specifying unit 32 determines two persons according to the contact position of the hand 101 h of the photographer 101 to the touch panel 7. It is specified that the person 101 located on the left side of 101 and 102 is a photographer (hereinafter, the person 101 is referred to as “photographer 101” and the person 102 is referred to as “non-photographer 102”). After that, the facial expression determination unit 33 determines the facial expression of the photographer 101, and when the facial expression of the photographer 101 is not a smile as shown in FIGS. 6 and 7, the notification unit 10 blinks the LED in a predetermined pattern. Will output a warning. The photographer 101 who has seen the blinking LED changes his / her facial expression and smiles. FIG. 8 is a diagram illustrating a situation after the photographer 101 who has received a warning by the notification unit 10 changes his / her facial expression after the situation illustrated in FIG. 6. FIG. 9 is a diagram showing a display example of the through image in the state shown in FIG. The control unit 14 automatically performs shooting when the photographer 101 smiles.

このように、本実施の形態１では、撮像装置１を自分撮りモードに設定して自分撮りを行う場合、撮影者１０１が操作に集中するあまり表情をこわばらせてしまっている場合であっても、撮像装置１がその状態を報知することによって撮影者１０１の表情を笑顔に変化させてから撮影することができる。なお、報知部１０に音声出力機能を具備させ、撮影者１０１の表情が笑顔でない場合には、「笑ってください。」等のメッセージを音声で出力するようにしてもよい。   As described above, in the first embodiment, when the image capturing apparatus 1 is set to the self-portrait mode and the self-portrait is performed, even if the photographer 101 is too stiff to concentrate on the operation, The imaging apparatus 1 can notify the state and change the facial expression of the photographer 101 to a smiling face before taking a picture. Note that the notification unit 10 may be provided with a voice output function, and if the photographer 101 is not smiling, a message such as “Please laugh” may be output by voice.

図１０は、撮像装置１が自分撮りモードによる撮影を行う場合の処理の概要を示すフローチャートである。図１０では、撮像装置１が初期状態として通常撮影モードに設定されているものとする。   FIG. 10 is a flowchart illustrating an outline of processing when the imaging apparatus 1 performs shooting in the self-portrait mode. In FIG. 10, it is assumed that the imaging apparatus 1 is set to the normal shooting mode as an initial state.

まず、表示部４がスルー画像を表示（ステップＳ１）し、制御部１４がスルー画像に対してピントの調整を自動的に行う（ステップＳ２）。   First, the display unit 4 displays a through image (step S1), and the control unit 14 automatically adjusts the focus on the through image (step S2).

その後、タッチパネル７への外部からの押圧による接触があり（ステップＳ３：Ｙｅｓ）、かつその接触が所定時間継続した場合（ステップＳ４：Ｙｅｓ）、モード設定部９は、撮像装置１の動作モードを自分撮りモードへ切り換える（ステップＳ５）。この後、報知部１０は、ＬＥＤを点灯することによって自分撮りモードに設定されていることを報知する（ステップＳ６）。報知部１０は、自分撮りモードに設定されている間、ＬＥＤを点灯し続ける。なお、タッチパネル７への外部からの接触があり（ステップＳ３：Ｙｅｓ）、かつその接触が所定時間継続していない場合（ステップＳ４：Ｎｏ）、撮像装置１はステップＳ３に戻る。   After that, when there is a touch to the touch panel 7 by an external press (step S3: Yes) and the contact continues for a predetermined time (step S4: Yes), the mode setting unit 9 sets the operation mode of the imaging device 1. Switch to the self-portrait mode (step S5). Then, the alerting | reporting part 10 alert | reports that it has set to self-shooting mode by lighting LED (step S6). The notification unit 10 keeps turning on the LED while the self-portrait mode is set. If there is an external contact with the touch panel 7 (step S3: Yes) and the contact has not continued for a predetermined time (step S4: No), the imaging device 1 returns to step S3.

ステップＳ３においてタッチパネル７への外部からの押圧による接触がない場合（ステップＳ３：Ｎｏ）、レリーズボタン６ａが押下されれば（ステップＳ７：Ｙｅｓ）、撮像装置１はステップＳ１５へ進む一方、レリーズボタン６ａが押下されなければ（ステップＳ７：Ｎｏ）、撮像装置１はステップＳ１へ戻る。   If there is no external touch to the touch panel 7 in step S3 (step S3: No), if the release button 6a is pressed (step S7: Yes), the imaging apparatus 1 proceeds to step S15, while the release button If 6a is not pressed (step S7: No), the imaging apparatus 1 returns to step S1.

以下、ステップＳ６で報知部１０が自分撮りモードに設定されていることを報知した後の処理を説明する。顔検出部３１は、スルー画像に含まれる顔を検出する（ステップＳ８）。この際、顔検出部３１は、パターン情報記憶部１３２が記憶する顔のパターン情報を参照してパターンマッチングを行うことにより、スルー画像に含まれる顔を検出する。   Hereinafter, the process after the notification unit 10 notifies that the self-portrait mode is set in step S6 will be described. The face detection unit 31 detects a face included in the through image (step S8). At this time, the face detection unit 31 detects a face included in the through image by performing pattern matching with reference to the face pattern information stored in the pattern information storage unit 132.

顔検出部３１が所定時間内に顔を検出した場合（ステップＳ９：Ｙｅｓ）、制御部１４は顔にピントが合うように再調整する（ステップＳ１０）。なお、顔検出部３１が検出した顔の中に、顔の一部しか検出しないものが含まれている場合には、報知部１０を介して警告を出力するようにしてもよい。   When the face detection unit 31 detects a face within a predetermined time (step S9: Yes), the control unit 14 performs readjustment so that the face is in focus (step S10). Note that if the face detected by the face detection unit 31 includes a part that detects only a part of the face, a warning may be output via the notification unit 10.

続いて、撮影者特定部３２は、テーブル２００を参照して撮影者を特定する（ステップＳ１１）。撮影者特定部３２が撮影者を特定できた場合（ステップＳ１２：Ｙｅｓ）、表情判定部３３は撮影者の表情を判定する（ステップＳ１３）。表情判定部３３が判定した結果、撮影者が笑顔である場合（ステップＳ１４：Ｙｅｓ）、撮像部２は制御部１４の制御のもとで画像の撮影を行う（ステップＳ１５）。この撮影動作の瞬間または直後に、報知部１０がＬＥＤを点滅させて撮影動作を報知し、所定時間経過後にＬＥＤを消灯するようにすればより好ましい。   Subsequently, the photographer identifying unit 32 identifies the photographer with reference to the table 200 (step S11). When the photographer identifying unit 32 can identify the photographer (step S12: Yes), the facial expression determining unit 33 determines the photographer's facial expression (step S13). If the photographer is smiling as a result of the determination by the facial expression determination unit 33 (step S14: Yes), the imaging unit 2 captures an image under the control of the control unit 14 (step S15). More preferably, the notification unit 10 flashes the LED to notify the shooting operation immediately or immediately after the shooting operation, and turns off the LED after a predetermined time has elapsed.

その後、制御部１４は、撮像部２によって生成され、画像処理部３によって画像処理が施された画像データに対し、時計１１の出力を参照してデータ生成日時等の情報を付加し、画像データ記憶部１３１に記録する（ステップＳ１６）。   Thereafter, the control unit 14 adds information such as the date and time of data generation to the image data generated by the imaging unit 2 and subjected to image processing by the image processing unit 3 with reference to the output of the clock 11, and the image data It records in the memory | storage part 131 (step S16).

ステップＳ１６の後、撮影を終了する終了指示が入力ボタン６によって入力された場合（ステップＳ１７：Ｙｅｓ）、撮像装置１は一連の処理を終了する。一方、ステップＳ１６の後、撮影の終了指示が入力ボタン６によって入力されない場合（ステップＳ１７：Ｎｏ）、撮像装置１はステップＳ１に戻る。   After step S <b> 16, when an end instruction to end shooting is input by the input button 6 (step S <b> 17: Yes), the imaging apparatus 1 ends a series of processes. On the other hand, after step S <b> 16, when the photographing end instruction is not input by the input button 6 (step S <b> 17: No), the imaging apparatus 1 returns to step S <b> 1.

ステップＳ９で顔検出部３１が所定時間内に顔を検出しなかった場合（ステップＳ９：Ｎｏ）、およびステップＳ１２で撮影者特定部３２が撮影者を特定できなかった場合（ステップＳ１２：Ｎｏ）、報知部１０は所定のパターンでＬＥＤを点滅することによって撮像装置１がエラー状態にあることを報知する（ステップＳ１８）。続いて、モード設定部９は、撮像装置１の動作モードを通常撮影モードへ切り換える（ステップＳ１９）。通常撮影モードへ切り換わると、報知部１０のＬＥＤは消灯する。その後、撮像装置１はステップＳ１７へ進む。   When the face detection unit 31 does not detect a face within a predetermined time in step S9 (step S9: No), and when the photographer identification unit 32 cannot identify the photographer in step S12 (step S12: No) The notification unit 10 notifies that the imaging device 1 is in an error state by blinking the LEDs in a predetermined pattern (step S18). Subsequently, the mode setting unit 9 switches the operation mode of the imaging device 1 to the normal shooting mode (step S19). When switching to the normal shooting mode, the LED of the notification unit 10 is turned off. Thereafter, the imaging apparatus 1 proceeds to step S17.

ステップＳ１３で表情判定部３３が判定した結果、撮影者が笑顔でない場合（ステップＳ１４：Ｎｏ）、報知部１０がステップＳ１９とは異なるパターンで点滅することによって警告を出力する（ステップＳ２０）。報知部１０は、警告に相当するパターンでＬＥＤを所定時間点滅した後、ＬＥＤを消灯する。その後、撮像装置１はステップＳ１７へ進む。   If the photographer is not smiling as a result of the determination by the facial expression determination unit 33 in step S13 (step S14: No), the notification unit 10 outputs a warning by blinking in a pattern different from step S19 (step S20). The notification unit 10 blinks the LED for a predetermined time in a pattern corresponding to a warning, and then turns off the LED. Thereafter, the imaging apparatus 1 proceeds to step S17.

なお、撮像装置１が初期状態として再生モードに設定されている場合にも、撮影者がタッチパネル７を所定時間継続して押圧することによって自分撮りモードへ移行することができるようにしてもよい。   Even when the imaging apparatus 1 is set to the playback mode as an initial state, the photographer may be able to shift to the self-portrait mode by continuously pressing the touch panel 7 for a predetermined time.

また、撮像装置１に電源が入っていない状態でタッチパネル７を所定時間継続して押圧した場合、自分撮りモードに設定した状態で電源をオンするようにしてもよい。   In addition, when the touch panel 7 is continuously pressed for a predetermined time in a state where the image pickup apparatus 1 is not turned on, the power may be turned on in a state where the self-portrait mode is set.

また、自分撮りモードで撮像部２が撮影を行う際に補助光投射部１２が補助光を投射する場合、制御部１４が通常撮影モードの撮影時よりも補助光の光度を低くする制御を行ってもよい。   Further, when the auxiliary light projection unit 12 projects auxiliary light when the imaging unit 2 performs photographing in the self-portrait mode, the control unit 14 performs control to lower the luminous intensity of the auxiliary light than during photographing in the normal photographing mode. May be.

以上説明した本発明の実施の形態１によれば、自分撮りモードで検出した顔の位置および／または大きさに関する情報を少なくとも用いることによって撮影者を特定し、この特定した撮影者の顔の表情に応じて撮影動作を行うため、撮影者が自分撮りを行う際に、撮影者自身が周囲の雰囲気と調和した表情を見せている瞬間を的確に捉えて撮影することが可能となる。   According to the first embodiment of the present invention described above, a photographer is identified by using at least information on the position and / or size of the face detected in the self-portrait mode, and the facial expression of the identified photographer Therefore, when the photographer takes a selfie, it is possible to accurately capture and capture the moment when the photographer himself shows an expression in harmony with the surrounding atmosphere.

また、本実施の形態１によれば、撮影者は撮像装置１の前面を自分の方へ向けた状態でタッチパネル７を接触するだけで自分撮りモードへ移行することができるため、とっさの判断に応じて迅速かつ容易に自分撮りを行うことができる。   Further, according to the first embodiment, the photographer can shift to the self-shooting mode only by touching the touch panel 7 with the front surface of the image pickup apparatus 1 facing the user. You can take a selfie quickly and easily.

また、本実施の形態１によれば、自分撮りモードではタッチパネルに接触するように撮像装置を把持すればよいため、持ち方の自由度が大きく、不自然な体勢で撮像装置１を持たないで済む。その結果、撮影時に手ブレを生じたり、手で撮像部や補助光投射部を覆ってしまうような不具合を防止することができる。また、レリーズボタンを押して撮影する場合と比較して、撮像装置から自分自身までの距離を遠くすることができるため、撮影者が自分撮りを行う際のアングルの選択の自由度が大きくなり、背景も含めて多様な構図で自分撮りを行うことができる。   Further, according to the first embodiment, in the self-portrait mode, it is only necessary to hold the imaging device so as to touch the touch panel. Therefore, the degree of freedom of holding is large, and the imaging device 1 is not held with an unnatural posture. That's it. As a result, it is possible to prevent inconveniences such as camera shake at the time of shooting or covering the image pickup unit and the auxiliary light projection unit with hands. In addition, compared to shooting by pressing the release button, the distance from the imaging device to itself can be increased, so that the photographer has a greater degree of freedom in selecting an angle when taking a selfie. You can take a selfie with various compositions.

なお、本実施の形態１では、タッチパネル７の外部からの接触位置に応じてテーブル２００を参照して撮影者の特定を行ったが、撮影者特定部３２は他の方法で撮影者を特定するようにしてもよい。例えば、複数の人が並んで撮影する場合には、図１１に示すように、撮像装置１から撮影者１０１の顔までの距離Ｌ１の方が撮像装置１から非撮影者１０２の顔までの距離Ｌ２よりも小さくなってしまう傾向にある。この場合のスルー画像は、図１２に示すように、撮影者１０１の顔が非撮影者１０２の顔よりも大きくなる。そこで、撮影者特定部３２は、画像に含まれる人物の顔のうち最も大きい顔を撮影者の顔と特定するようにしてもよい。   In the first embodiment, the photographer is specified by referring to the table 200 according to the contact position from the outside of the touch panel 7, but the photographer specifying unit 32 specifies the photographer by another method. You may do it. For example, when a plurality of people are shooting side by side, as shown in FIG. 11, the distance L1 from the imaging device 1 to the face of the photographer 101 is the distance from the imaging device 1 to the face of the non-photographer 102. It tends to be smaller than L2. In the through image in this case, the face of the photographer 101 is larger than the face of the non-photographer 102 as shown in FIG. Therefore, the photographer specifying unit 32 may specify the largest face among the human faces included in the image as the photographer's face.

（実施の形態２）
図１３は、本発明の実施の形態２に係る撮像装置の構成を示すブロック図である。同図に示す撮像装置２１は、画像処理部２２を除いて撮像装置１と同じ構成を有する。画像処理部２２は、顔検出部３１、撮影者特定部３２、表情判定部３３に加えて、撮像部２が撮像した画像に含まれる色を判定する色判定部３４をさらに有する。 (Embodiment 2)
FIG. 13 is a block diagram showing the configuration of the imaging apparatus according to Embodiment 2 of the present invention. The imaging device 21 shown in the figure has the same configuration as the imaging device 1 except for the image processing unit 22. In addition to the face detection unit 31, the photographer identification unit 32, and the facial expression determination unit 33, the image processing unit 22 further includes a color determination unit 34 that determines a color included in the image captured by the imaging unit 2.

図１４は、撮像装置２１を自分撮りモードに設定して自分撮りを行う状況を示す図である。図１５は、図１４に示す状態のスルー画像の表示例を示す図である。図１４に示す状況において、被写体である二人の人物のうち、撮像装置２１から見て右側に位置する撮影者１０３は、その左側に位置する非撮影者１０４の肩を抱きながら自分と非撮影者１０４を撮影しようとしている。撮像装置２１は、撮影者１０３の特定、撮影者１０３の表情の判定を行った後、色判定部３４によって撮影者１０３の顔と同じ色の部位（図１４に示す場合には撮影者１０３の手１０３ｈ）が非撮影者１０４の近傍に存在するか否かを判定する。   FIG. 14 is a diagram illustrating a situation in which the imaging apparatus 21 is set to the self-portrait mode and the self-portrait is performed. FIG. 15 is a diagram illustrating a display example of the through image in the state illustrated in FIG. In the situation shown in FIG. 14, the photographer 103 located on the right side when viewed from the imaging device 21 among the two persons as subjects is not photographed while holding the shoulder of the non-photographer 104 located on the left side. The person 104 is being photographed. The imaging device 21 identifies the photographer 103 and determines the facial expression of the photographer 103, and then the color determination unit 34 uses the same color as the photographer 103's face (in the case shown in FIG. It is determined whether or not the hand 103h) exists in the vicinity of the non-photographer 104.

図１６は、撮像装置２１が自分撮りモードによる撮影を行う場合の処理の概要を示すフローチャートである。図１６では、撮像装置２１が初期状態として通常撮影モードに設定されているものとする。図１６において、ステップＳ３１〜Ｓ４３の処理は、図１０におけるステップＳ１〜Ｓ１３の処理に順次対応している。なお、ステップＳ３７でレリーズボタン６ａが押下された場合には、後述するステップＳ４７へ進む。以下、ステップＳ４４以降の処理を説明する。   FIG. 16 is a flowchart illustrating an outline of processing when the imaging device 21 performs shooting in the self-portrait mode. In FIG. 16, it is assumed that the imaging device 21 is set to the normal shooting mode as an initial state. In FIG. 16, the processes of steps S31 to S43 correspond to the processes of steps S1 to S13 in FIG. If the release button 6a is pressed in step S37, the process proceeds to step S47 described later. Hereinafter, the process after step S44 is demonstrated.

ステップＳ４３において表情判定部３３が判定した結果、撮影者１０３が笑顔である場合（ステップＳ４４：Ｙｅｓ）、色判定部３４は撮影者１０３の顔の色を判定する（ステップＳ４５）。その後、非撮影者１０４の近傍に撮影者１０３の顔の色と同じ色の領域があれば（ステップＳ４６：Ｙｅｓ）、撮像部２が制御部１４の制御のもとで画像の撮影を行い（ステップＳ４７）、制御部１４が画像データを画像データ記憶部１３１へ記録する（ステップＳ４８）。本実施の形態２においても、ステップＳ４７の撮影動作の瞬間または直後に、報知部１０がＬＥＤを点滅させて撮影動作を報知し、所定時間経過後にＬＥＤを消灯するようにすればより好ましい。   When the photographer 103 is smiling as a result of the determination by the facial expression determination unit 33 in step S43 (step S44: Yes), the color determination unit 34 determines the face color of the photographer 103 (step S45). Thereafter, if there is a region having the same color as the face of the photographer 103 in the vicinity of the non-photographer 104 (step S46: Yes), the imaging unit 2 captures an image under the control of the control unit 14 ( In step S47), the control unit 14 records the image data in the image data storage unit 131 (step S48). Also in the second embodiment, it is more preferable that the notification unit 10 flashes the LED to notify the shooting operation immediately after or immediately after the shooting operation in step S47, and turns off the LED after a predetermined time has elapsed.

その後、撮影を終了する終了指示が入力ボタン６によって入力された場合（ステップＳ４９：Ｙｅｓ）、撮像装置２１は一連の処理を終了する。一方、ステップＳ４９で撮影の終了指示が入力ボタン６によって入力されない場合（ステップＳ４９：Ｎｏ）、撮像装置２１はステップＳ１に戻る。   Thereafter, when an end instruction for ending photographing is input by the input button 6 (step S49: Yes), the imaging device 21 ends a series of processes. On the other hand, when the photographing end instruction is not input by the input button 6 in step S49 (step S49: No), the imaging device 21 returns to step S1.

ステップＳ３９で顔検出部３１が所定時間内に顔を検出しなかった場合（ステップＳ３９：Ｎｏ）、およびステップＳ４２で撮影者特定部３２が撮影者を特定できなかった場合（ステップＳ４２：Ｎｏ）、報知部１０は所定のパターンでＬＥＤを点滅することによって撮像装置２１がエラー状態にあることを報知する（ステップＳ５０）。続いて、モード設定部９は、撮像装置２１の動作モードを通常撮影モードへ切り換える（ステップＳ５１）。通常撮影モードへ切り換わると、報知部１０のＬＥＤは消灯する。その後、撮像装置２１はステップＳ４９へ進む。   When the face detection unit 31 does not detect a face within a predetermined time in step S39 (step S39: No), and when the photographer identification unit 32 cannot identify the photographer in step S42 (step S42: No) The notification unit 10 notifies that the imaging device 21 is in an error state by blinking the LED in a predetermined pattern (step S50). Subsequently, the mode setting unit 9 switches the operation mode of the imaging device 21 to the normal shooting mode (step S51). When switching to the normal shooting mode, the LED of the notification unit 10 is turned off. Thereafter, the imaging device 21 proceeds to step S49.

ステップＳ４４で表情判定部３３が判定した結果、撮影者が笑顔でない場合（ステップＳ４４：Ｎｏ）、およびステップＳ４５で色判定部３４が判定した結果、非撮影者の近傍に撮影者の顔と同じ色の領域がない場合（ステップＳ４６：Ｎｏ）、報知部１０がステップＳ５０とは異なるパターンでＬＥＤを点滅することによって警告を出力する（ステップＳ５２）。報知部１０は、警告に相当するパターンでＬＥＤを所定時間点滅した後、ＬＥＤを消灯する。その後、撮像装置２１はステップＳ４９へ進む。   If the photographer is not smiling as a result of determination by the facial expression determination unit 33 in step S44 (step S44: No), and the result of determination by the color determination unit 34 in step S45 is the same as the photographer's face in the vicinity of the non-photographer. When there is no color region (step S46: No), the notification unit 10 outputs a warning by blinking the LED in a pattern different from step S50 (step S52). The notification unit 10 blinks the LED for a predetermined time in a pattern corresponding to a warning, and then turns off the LED. Thereafter, the imaging device 21 proceeds to step S49.

以上説明した本発明の実施の形態２によれば、自分撮りモードで検出した顔の位置および／または大きさに関する情報を少なくとも用いることによって撮影者を特定し、この特定した撮影者の顔の表情に応じて撮影動作を行うため、撮影者が自分撮りを行う際に、撮影者自身が周囲の雰囲気と調和した表情を見せている瞬間を的確に捉えて撮影することが可能となる。   According to the second embodiment of the present invention described above, the photographer is identified by using at least information on the position and / or size of the face detected in the self-portrait mode, and the facial expression of the identified photographer Therefore, when the photographer takes a selfie, it is possible to accurately capture and capture the moment when the photographer himself shows an expression in harmony with the surrounding atmosphere.

また、本実施の形態２によれば、撮影者の手が非撮影者の近傍にある状態を検知して撮影するため、人物間の親密度をより的確に表現することができる。   In addition, according to the second embodiment, since photographing is performed by detecting a state in which the photographer's hand is in the vicinity of the non-photographer, it is possible to more accurately represent the intimacy between persons.

また、本実施の形態２によれば、手のパターンでなく色を判定するため、手のように形状が複雑で動きが多く、パターンマッチングが困難な部分であっても容易に検出することが可能となる。   In addition, according to the second embodiment, since the color is determined instead of the hand pattern, even a part having a complicated shape, a lot of movement, and difficult pattern matching can be easily detected. It becomes possible.

また、本実施の形態２によれば、上記実施の形態１と同様、とっさの判断に応じて迅速かつ容易に自分撮りを行うことができ、撮影時の不具合を防止しつつ多様な構図で自分撮りを行うことができる。   Further, according to the second embodiment, as in the first embodiment, self-portrait can be performed quickly and easily according to the determination of the moment, and the user can take various compositions while preventing problems during shooting. You can take a picture.

なお、本実施の形態２において、非撮影者が肌を露出している場合などには誤検知してしまうおそれもあるため、このような場合を想定して、色判定とともに該当する色領域の動き判定を行い、動きが多い領域を手と見なすようにしてもよい。   In the second embodiment, there is a possibility that a non-photographer exposes the skin, which may cause a false detection. Therefore, assuming such a case, the corresponding color area is determined together with the color determination. A motion determination may be performed so that an area with a lot of motion is regarded as a hand.

（その他の実施の形態）
ここまで、本発明を実施するための最良の形態として実施の形態１、２を詳述してきたが、本発明はそれら２つの実施の形態によってのみ限定されるべきものではない。例えば、自分撮りモードにおけるレリーズ信号を撮影者が入力するようにしてもよい。この場合には、タッチパネル７をさらに強く押圧することによってレリーズ信号を入力するようにしてもよいし、通常のレリーズボタン６ａを押下することによってレリーズ信号を入力するようにしてもよい。前者の場合、レリーズ信号の入力時の押圧力は、撮影者が意識して強く押圧する程度の大きさを有していることが望ましい。 (Other embodiments)
So far, the first and second embodiments have been described in detail as the best mode for carrying out the present invention. However, the present invention should not be limited only by these two embodiments. For example, the photographer may input a release signal in the self-shooting mode. In this case, the release signal may be input by pressing the touch panel 7 more strongly, or the release signal may be input by pressing the normal release button 6a. In the former case, it is desirable that the pressing force at the time of inputting the release signal has such a magnitude that the photographer consciously presses it strongly.

また、本発明において、撮影した画像をブログなどに掲載するために、撮像装置に通信部を設け、撮影済みの画像を通信ネットワークを介して送受信可能な構成としてもよい。   In the present invention, in order to post a photographed image on a blog or the like, a communication unit may be provided in the imaging apparatus so that the photographed image can be transmitted / received via a communication network.

また、本発明において、スルー画像中の全ての人物の表情が笑顔になったタイミングで撮影動作を行うようにしてもよい。   In the present invention, the photographing operation may be performed at a timing when all the facial expressions of the person in the through image become smiling.

本発明の実施の形態１に係る撮像装置の構成を示すブロック図である。It is a block diagram which shows the structure of the imaging device which concerns on Embodiment 1 of this invention. 本発明の実施の形態１に係る撮像装置の前面側の構成を示す斜視図である。It is a perspective view which shows the structure of the front side of the imaging device which concerns on Embodiment 1 of this invention. 本発明の実施の形態１に係る撮像装置の背面側の構成を示す斜視図である。It is a perspective view which shows the structure of the back side of the imaging device which concerns on Embodiment 1 of this invention. タッチパネルの接触領域と画像中の撮影者の位置との相関関係を示す図である。It is a figure which shows the correlation with the contact area of a touchscreen, and the position of the photographer in an image. タッチパネルの接触領域の区分を示す図である。It is a figure which shows the division of the contact area of a touch panel. 本発明の実施の形態１に係る撮像装置が自分撮りモードに設定されている場合に自分撮りを行う状況を示す図である。It is a figure which shows the condition which performs the selfie when the imaging device which concerns on Embodiment 1 of this invention is set to the selfie mode. 図６に示す状況で撮像部が撮像する画像を示す図である。It is a figure which shows the image which an imaging part images in the condition shown in FIG. 図６に示す状況から報知部の報知によって撮影者が笑顔になった状況を示す図である。It is a figure which shows the condition where the photographer became a smile by the alerting | reporting part from the condition shown in FIG. 図８に示す状況で撮像部が撮像する画像を示す図である。It is a figure which shows the image which an imaging part images in the condition shown in FIG. 本発明の実施の形態１に係る撮像装置が自分撮りモードによる撮影を行う場合の処理の概要を示すフローチャートである。4 is a flowchart illustrating an outline of processing when the imaging apparatus according to Embodiment 1 of the present invention performs shooting in a self-portrait mode. 撮影者特定部における撮影者特定処理の別な例を示す図である。It is a figure which shows another example of the photographer specific process in a photographer specific part. 図１１に示す状況で撮像部が撮像する画像を示す図である。It is a figure which shows the image which an imaging part images in the condition shown in FIG. 本発明の実施の形態２に係る撮像装置の構成を示すブロック図である。It is a block diagram which shows the structure of the imaging device which concerns on Embodiment 2 of this invention. 本発明の実施の形態２に係る撮像装置が自分撮りモードに設定されている場合に自分撮りを行う状況を示す図である。It is a figure which shows the condition which performs the selfie when the imaging device which concerns on Embodiment 2 of this invention is set to the selfie mode. 図１４に示す状況で撮像部が撮像する画像を示す図である。It is a figure which shows the image which an imaging part images in the condition shown in FIG. 本発明の実施の形態２に係る撮像装置が自分撮りモードによる撮影を行う場合の処理の概要を示すフローチャートである。It is a flowchart which shows the outline | summary of a process in case the imaging device which concerns on Embodiment 2 of this invention performs imaging | photography by self-shooting mode.

１、２１ 撮像装置
２ 撮像部
３、２２ 画像処理部
４ 表示部
５ センサ部
６ 入力ボタン
６ａ レリーズボタン
６ｂ 十字キー
７ タッチパネル
８ 接触状態検出部
９ モード設定部
１０ 報知部
１１ 時計
１２ 補助光投射部
１３ 記憶部
１４ 制御部
３１ 顔検出部
３２ 撮影者特定部
３３ 表情判定部
３４ 色判定部
１０１、１０３ 撮影者
１０１ｈ、１０３ｈ 手
１０２、１０４ 非撮影者
１３１ 画像データ記憶部
１３２ パターン情報記憶部
１３３ 位置相関記憶部
１３４ プログラム記憶部
２００ テーブル DESCRIPTION OF SYMBOLS 1,21 Imaging device 2 Imaging part 3, 22 Image processing part 4 Display part 5 Sensor part 6 Input button 6a Release button 6b Cross key 7 Touch panel 8 Contact state detection part 9 Mode setting part 10 Notification part 11 Clock 12 Auxiliary light projection part DESCRIPTION OF SYMBOLS 13 Memory | storage part 14 Control part 31 Face detection part 32 Photographer specific part 33 Expression determination part 34 Color determination part 101,103 Photographer 101h, 103h Hand 102,104 Non-photographer 131 Image data storage part 132 Pattern information storage part 133 Position Correlation storage unit 134 Program storage unit 200 Table

Claims (5)

光学系を介して撮像した画像を光電変換することによって電子的な画像データを生成する撮像部を備え、該撮像部による撮影の動作モードとして撮影者が前記光学系を自分に向けて撮影する場合に設定する自分撮りモードを有する撮像装置であって、
前記撮像部が撮像する画像中に存在する人物の顔を検出する顔検出部と、
前記自分撮りモードで前記顔検出部が検出した顔の位置および／または大きさに関する情報を少なくとも用いることによって前記画像中の撮影者の顔を特定する撮影者特定部と、
前記撮影者特定部が特定した撮影者の顔の表情を判定する表情判定部と、
前記表情判定部の判定結果に応じて前記自分撮りモードにおける前記撮像部の撮影動作を制御する制御部と、
を備えたことを特徴とする撮像装置。 When an imaging unit that generates electronic image data by photoelectrically converting an image captured through an optical system is provided, and a photographer photographs the optical system toward the user as an operation mode of imaging by the imaging unit An imaging device having a selfie mode set to
A face detection unit for detecting a human face present in an image captured by the imaging unit;
A photographer identifying unit that identifies the photographer's face in the image by using at least information on the position and / or size of the face detected by the face detection unit in the self-portrait mode;
A facial expression determination unit that determines the facial expression of the photographer identified by the photographer identification unit;
A control unit that controls a shooting operation of the imaging unit in the selfie mode according to a determination result of the facial expression determination unit;
An imaging apparatus comprising: 前記光学系の一部が表出する面の裏側に位置する面に設けられ、前記撮像部が生成した画像データに対応する画像を表示する表示部と、
前記表示部の表面に設けられ、外部からの押圧による接触を検知するタッチパネルと、
前記タッチパネルが検知した接触の位置を含む接触状態を検出する接触状態検出部と、
前記接触状態検出部が検出した接触状態が所定時間継続している場合、前記動作モードを前記自分撮りモードに設定するモード設定部と、
さらに備え、
前記撮影者特定部は、
前記顔検出部が検出した顔の位置および／または大きさに関する情報とともに前記接触状態を用いることによって前記画像中の撮影者の顔を特定することを特徴とする請求項１に記載の撮像装置。 A display unit that is provided on a surface located behind the surface on which a part of the optical system is exposed, and that displays an image corresponding to the image data generated by the imaging unit;
A touch panel that is provided on the surface of the display unit and detects contact caused by external pressure;
A contact state detection unit for detecting a contact state including a contact position detected by the touch panel;
When the contact state detected by the contact state detection unit continues for a predetermined time, a mode setting unit that sets the operation mode to the selfie mode;
In addition,
The photographer specifying unit
The imaging apparatus according to claim 1, wherein the photographer's face in the image is specified by using the contact state together with information on the position and / or size of the face detected by the face detection unit. 前記タッチパネルが検知する接触の位置と前記画像中の撮影者の顔の位置との相関関係を記憶する位置相関記憶部をさらに備え、
前記撮影者特定部は、
前記位置相関記憶部が記憶する相関関係を参照することによって前記画像中の撮影者の顔を特定することを特徴とする請求項２に記載の撮像装置。 A position correlation storage unit that stores a correlation between the position of contact detected by the touch panel and the position of the photographer's face in the image;
The photographer specifying part
The imaging apparatus according to claim 2, wherein the photographer's face in the image is specified by referring to the correlation stored in the position correlation storage unit. 前記表情判定部は、
前記撮影者の表情が笑顔であるか否かを判定することを特徴とする請求項１〜３のいずれか一項に記載の撮像装置。 The facial expression determination unit
The imaging apparatus according to claim 1, wherein it is determined whether or not the photographer's facial expression is a smile. 前記画像に含まれる色を判定する色判定部をさらに備え、
前記色判定部は、
前記撮影者の顔と同じ色を有する部分が非撮影者の近傍にあるか否かを判定し、
前記制御部は、
前記表情判定部の判定結果および前記色判定部の判定結果に応じて前記自分撮りモードにおける前記撮像部の撮影動作を制御することを特徴とする請求項１〜４のいずれか一項に記載の撮像装置。 A color determination unit for determining a color included in the image;
The color determination unit
Determining whether a portion having the same color as the photographer's face is near the non-photographer;
The controller is
5. The photographing operation of the imaging unit in the self-portrait mode is controlled in accordance with a determination result of the facial expression determination unit and a determination result of the color determination unit. Imaging device.

Images