JP2010178119A - Digital camera - Google Patents

Digital camera Download PDF

Info

Publication number
JP2010178119A
JP2010178119A JP2009019262A JP2009019262A JP2010178119A JP 2010178119 A JP2010178119 A JP 2010178119A JP 2009019262 A JP2009019262 A JP 2009019262A JP 2009019262 A JP2009019262 A JP 2009019262A JP 2010178119 A JP2010178119 A JP 2010178119A
Authority
JP
Japan
Prior art keywords
image data
detected
person
smile
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2009019262A
Other languages
Japanese (ja)
Inventor
Tokimi Kuwata
旬美 鍬田
Masanaga Nakamura
正永 中村
Mayumi Nakayama
真由美 中山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP2009019262A priority Critical patent/JP2010178119A/en
Publication of JP2010178119A publication Critical patent/JP2010178119A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Details Of Cameras Including Film Mechanisms (AREA)
  • Image Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a digital camera capable of easily photographing all subject persons in the similar expression. <P>SOLUTION: The digital camera picks up an image to acquire image data, and recognizes faces and expressions for the image data. If a plurality of faces are detected in the image data, the image pickup is repeated so that all the persons may smile and give view line to the camera, and when all the persons smile and give view line to the camera, the image data is recorded in a recording medium. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、人物の表情を検出して画像記録の可否を決定するデジタルカメラに関する。   The present invention relates to a digital camera that detects the facial expression of a person and determines whether image recording is possible.

従来、画像データ中の人物の笑顔のレベルを評価可能な装置が知られている(例えば、特許文献1)。また、人物の喜怒哀楽の表情や視線の方向を検出し、所定の表情になったときに画像記録を行うカメラ(例えば、特許文献2)や、人物の目つぶりの有無を検出可能な装置(例えば、特許文献3)も知られている。   2. Description of the Related Art Conventionally, an apparatus capable of evaluating a person's smile level in image data is known (for example, Patent Document 1). In addition, a camera (for example, Patent Document 2) that detects a person's emotional expression or gaze direction and records an image when a predetermined expression is obtained, or a device capable of detecting the presence or absence of blinking of a person (For example, patent document 3) is also known.

特開2004−46591号公報JP 2004-46591 A 特開2001−51338号公報JP 2001-51338 A 特開2001−338303号公報JP 2001-338303 A

集合写真などでは、しばしば被写体人物の全員を同様の表情(例えば、笑顔あるいは非笑顔)で撮影したいという要望があるが、それを支援するカメラはない。   In group photographs and the like, there is often a desire to photograph all of the subject persons with the same facial expression (for example, smile or non-smile), but there is no camera that supports this.

本発明に係るデジタルカメラは、撮像により画像データを得る撮像手段と、画像データ中の人物の顔を検出する顔検出手段と、検出された顔の表情を検出する表情検出手段と、画像データ中に複数の顔が検出されたときに、複数の顔の全てが予め定められた特定の表情である、または特定の表情でないことが検出されると記録条件成立と判断する判定手段と、判定手段により記録条件成立と判断されるまで撮像を繰り返し、記録条件成立と判断されると画像データを記録媒体に記録する制御手段とを具備することを特徴とする。   The digital camera according to the present invention includes an imaging unit that obtains image data by imaging, a face detection unit that detects a human face in the image data, a facial expression detection unit that detects a facial expression of the detected face, Determining means for determining that the recording condition is satisfied when it is detected that all of the plurality of faces have a predetermined facial expression or not a specific facial expression when a plurality of faces are detected And a control unit that records image data on a recording medium when the recording condition is determined to be satisfied.

本発明によれば、被写体人物の全員を同様の表情で撮像することが容易に行える。   According to the present invention, it is possible to easily image all of the subject persons with the same facial expression.

本発明の一実施形態におけるデジタルカメラの制御ブロック図。1 is a control block diagram of a digital camera according to an embodiment of the present invention. 表情による画像記録可否設定の一例を示す図。The figure which shows an example of the image recording availability setting by a facial expression. 全員笑顔モード時の処理手順を示すフローチャート。The flowchart which shows the process sequence at the time of all smile mode. 図3の条件成立支援措置の詳細を示すフローチャート。FIG. 4 is a flowchart showing details of a condition establishment support measure of FIG. 3.

図1〜図3により本発明の一実施の形態を説明する。
図1は本実施形態におけるデジタルカメラの制御ブロック図である。なお、デジタルカメラは、デジタルカメラ機能を持つ機器全般を指す(例えば、カメラ機能付き携帯電話機も含む)。
An embodiment of the present invention will be described with reference to FIGS.
FIG. 1 is a control block diagram of the digital camera in the present embodiment. The digital camera refers to all devices having a digital camera function (for example, including a mobile phone with a camera function).

図1において、撮影レンズ1を透過した被写体光束は、撮像素子2で撮像され、その撮像信号は画像処理部3に入力される。画像処理部3を構成する画像処理回路3aは、入力された撮像信号に種々の処理を施して画像データを生成する。画像データは、表示回路3bによる処理を経て、カメラ背面などに設けられた液晶モニタ4に表示される。撮影モード設定時には、上記撮像および画像表示が繰り返され、いわゆるライブビュー表示(スルー画表示)が行われる。撮像指示がなされると改めて撮像が行われ、生成された画像データは記録/再生回路3cを介してメモリカード等の記録媒体5に記録される。   In FIG. 1, the subject luminous flux that has passed through the photographic lens 1 is imaged by the imaging device 2, and the imaging signal is input to the image processing unit 3. The image processing circuit 3a constituting the image processing unit 3 performs various processes on the input imaging signal to generate image data. The image data is displayed on a liquid crystal monitor 4 provided on the back of the camera or the like through processing by the display circuit 3b. When the shooting mode is set, the above imaging and image display are repeated, and so-called live view display (through image display) is performed. When an imaging instruction is given, imaging is performed again, and the generated image data is recorded on the recording medium 5 such as a memory card via the recording / reproducing circuit 3c.

一方、再生モードでは、記録媒体5に記録された画像データを記録/再生回路3cにて読み出し、画像処理回路3aおよび表示回路3bによる処理を経て液晶モニタ4に表示することができる。   On the other hand, in the reproduction mode, the image data recorded on the recording medium 5 can be read out by the recording / reproduction circuit 3c and displayed on the liquid crystal monitor 4 through the processing by the image processing circuit 3a and the display circuit 3b.

CPU6は、操作部7からの入力に応答して画像処理部3や不図示の回路を制御する。操作部7は、電源ボタンやレリーズボタン、再生操作や情報入力等で用いる各種操作部材等を含む。   The CPU 6 controls the image processing unit 3 and a circuit (not shown) in response to an input from the operation unit 7. The operation unit 7 includes a power button, a release button, various operation members used for reproduction operation, information input, and the like.

次に、顔認識および表情認識について説明する。
カメラは公知の顔認識機能を備え、画像データ中に被写体として人物が存在する場合は、その人物の顔領域の位置および大きさを検出し、顔部分にピントや露出が合うような制御を行う。1画像データ中に複数の顔を認識することが可能であり、認識された顔位置および大きさは、ライブビュー画像中の顔の位置に、顔の大きさに応じた顔認識枠を表示することでユーザに報知される。
Next, face recognition and facial expression recognition will be described.
The camera has a known face recognition function, and when a person is present as a subject in the image data, the position and size of the face area of the person are detected, and control is performed so that the face portion is focused and exposed. . A plurality of faces can be recognized in one image data, and a face recognition frame corresponding to the face size is displayed at the face position in the live view image. This is notified to the user.

さらに顔認識では、認識した顔の特徴情報に基づいてデータベース検索を行うことで、画像データ中の人物が誰であるかを特定することができる。これを可能とするために、カメラには顔認識用のデータベースが備えられ、所定の顔登録モードにおいて、人物を撮像した画像データと、その画像データから得た顔の特徴点と、その人物に関する情報(名前等)とを対応づけて複数人分登録することができる。顔の特徴情報しては、眉、目、鼻、唇の各端点、顔の輪郭点、頭頂点、顎の下端点などの特徴点と、各特徴点の相対距離などが含まれる。そして、撮像時に画像データから得た顔の特徴情報と、データベース内の特徴情報とを比較し、相似度が所定の閾値を上回るものが見つかった場合に人物特定となる。   Further, in face recognition, it is possible to specify who is the person in the image data by performing a database search based on the recognized face feature information. In order to make this possible, the camera is provided with a database for face recognition, and in a predetermined face registration mode, image data obtained by imaging a person, facial feature points obtained from the image data, and the person Information (names, etc.) can be registered for a plurality of people in association with each other. The facial feature information includes feature points such as eyebrow, eye, nose, lip end points, face contour points, head apex, lower chin end points, and relative distances between the feature points. Then, the facial feature information obtained from the image data at the time of imaging is compared with the feature information in the database, and the person is specified when the similarity is found to exceed a predetermined threshold.

表情認識は、上記顔認識で認識された画像データ中の顔の表情を認識する機能である。本実施形態では、表情として、「笑顔」、「喜び」、「悲しみ」、「怒り」、「驚き」といった喜怒哀楽の表情を検出できる。特に「笑顔」については、ちょっとした微笑み程度から大笑いまで、その度合い(以下、笑顔度)を数段階に分けて認識できる。笑顔以外の表情に対してレベル検出が行えるようにしてもよい(喜び度、悲しみ度、怒り度、驚き度など)。   Expression recognition is a function for recognizing facial expressions in the image data recognized by the face recognition. In this embodiment, emotional expressions such as “smile”, “joy”, “sadness”, “anger”, and “surprise” can be detected as facial expressions. In particular, “smile” can be recognized in several stages, ranging from a slight smile to a big smile. Level detection may be performed for facial expressions other than smiles (joy level, sadness level, anger level, surprise level, etc.).

さらに、被写体人物の所作として「ウインク」が検出できる他、視線がカメラ(レンズ)を向いているか否かをも検出できる。これらの表情、ウインク、視線の検出は、例えば背景技術に示した文献の手法を用いて行うことができる。   Furthermore, “wink” can be detected as an action of the subject person, and it can also be detected whether or not the line of sight faces the camera (lens). Detection of these facial expressions, winks, and lines of sight can be performed using, for example, the techniques of the literature shown in the background art.

各検出結果は、画像記録の有無に反映される。カメラは、撮影モード時に撮像を繰り返し、その都度得られる画像データに対して顔認識を行う。画像データ中に人物の顔が認識されると、表情認識を行い、人物が予め設定された表情になったことが検出されるまで、撮像、顔認識および表情認識が繰り返される。設定された表情になったことが検出されると、その表情で撮像した画像データが画像ファイルとして記録媒体5に記録される。これにより撮影者の望む表情の画像が得られる。   Each detection result is reflected in the presence or absence of image recording. The camera repeats imaging in the imaging mode and performs face recognition on the image data obtained each time. When a human face is recognized in the image data, facial expression recognition is performed, and imaging, facial recognition, and facial expression recognition are repeated until it is detected that the person has a preset facial expression. When it is detected that the set facial expression is reached, image data captured with the facial expression is recorded in the recording medium 5 as an image file. As a result, an image of the facial expression desired by the photographer can be obtained.

そして本実施形態では、画像記録の可否を決める表情を被写体となる人物ごとに設定し、その設定内容を上記顔認識用のデータベースに登録することができる。これを画像記録可否設定と呼び、設定方法の詳細は後述する。   In this embodiment, a facial expression that determines whether or not image recording is possible can be set for each person as a subject, and the setting contents can be registered in the face recognition database. This is called image recording enable / disable setting, and details of the setting method will be described later.

図2は画像記録可否設定の一例を示し、この例では3人分の情報が登録されている。図中、丸印は「選択」(記録可)を、バツ印は「非選択」(記録不可)をそれぞれ意味し、また笑顔度のパーセンテージは、笑顔と認識する範囲を示す。例えば「笑顔度10%」は、10%以上の笑顔の表情を意味し、ほんの少しでも笑ったら画像記録が許可される。「笑顔度50%」の場合は、ちょっとした微笑み程度では画像記録は許可されず、中程度以上の笑顔で初めて許可される。また、「笑顔度0%」は、笑顔非選択(笑顔では画像記録不可)を意味する。なお、パーセンテージの異なる笑顔は、同じ笑顔でも異なる表情と位置づける。   FIG. 2 shows an example of image recording permission / inhibition setting. In this example, information for three persons is registered. In the figure, a circle indicates “selected” (recording is possible), a cross indicates “non-selection” (recording is not possible), and the smile degree percentage indicates a range where a smile is recognized. For example, “smile degree of 10%” means a smile expression of 10% or more, and image recording is permitted if even a little smile. In the case of “smile degree of 50%”, image recording is not permitted with a slight smile level, but is permitted for the first time with a moderate smile level. “Smile level 0%” means that smile is not selected (images cannot be recorded with a smile). Smiles with different percentages are positioned as different facial expressions even with the same smile.

「ウインク」は、他の喜怒哀楽の表情とは異なり、被写体人物からの撮影許可または撮影催促の合図と捕らえる。別にウインクしている顔画像を取得したいわけではないので、ウインクが検出された場合は、所定時間(例えば、3秒〜5秒)経過後に改めて撮像を行い、その結果得られた画像データを記録することが望ましい。また「視線」は、被写体人物がカメラを向いていることを意味し、これが選択されている場合は、選択された他の表情や「ウインク」と「視線」とのAND条件が成立したときに画像記録が許可される。「視線」が非選択の場合は、視線の方向に拘わらず、選択された表情のいずれかが検出された場合に画像記録が許可される。   Unlike other facial expressions of emotion, “wink” can be considered as a signal for permission to shoot or a shooting prompt from the subject person. Since we do not want to acquire a winking face image separately, if a wink is detected, the image is taken again after a predetermined time (for example, 3 to 5 seconds), and the resulting image data is recorded. It is desirable to do. “Gaze” means that the subject person is facing the camera, and when this is selected, when another selected facial expression or AND condition between “wink” and “gaze” is satisfied Image recording is allowed. When “line of sight” is not selected, image recording is permitted when any of the selected facial expressions is detected regardless of the direction of the line of sight.

例えば人物Aの場合は、「悲しみ」以外の「笑顔度10%」、「喜び」、「怒り」、「驚き」、「ウインク」のいずれかが検出され、かつ視線がカメラを向いていることが検出された場合に画像記録が許可される。普段あまり笑わない人に対しては、少し笑っただけでも画像記録を許可する「笑顔度10%」が有効かも知れない。また、「悲しみ」の表情は撮りたくないと思った人物に対しては、「悲しみ」は非選択とするのがよい。   For example, in the case of the person A, any one of “smile degree” other than “sadness”, “joy”, “anger”, “surprise”, “wink” is detected, and the line of sight is facing the camera. Image recording is permitted when is detected. For those who don't usually laugh a little, “smile degree 10%” that allows image recording even with a little laugh may be effective. Also, for those who do not want to take the expression of “sadness”, it is better not to select “sadness”.

人物Bの場合は、「笑顔度50%」、「悲しみ」、「怒り」、「ウインク」のいずれかの表情が検出され、かつ視線がカメラを向いていることが検出された場合に画像記録が許可される。人物Cの場合は、カメラに視線を向けてウインクしない限り、いずれの喜怒哀楽の表情が検出されても画像記録は許可されない。表情を被写体任せにするときはこの設定が有効である。   In the case of the person B, an image is recorded when any expression of “smiling degree 50%”, “sadness”, “anger”, “wink” is detected and the line of sight is facing the camera. Is allowed. In the case of the person C, image recording is not permitted even if any emotional expression is detected unless the line of sight is directed toward the camera and winking is performed. This setting is effective when leaving the facial expression to the subject.

図2に示すような画像記録可否設定は、液晶モニタ4を見ながら簡単な操作で行えるようにすることが望ましい。例えば、顔認識用に登録してある人物の画像を液晶モニタ4に表示すると、その人物に対して設定入力が行えるようにすれば、対象人物の顔を見ながら適切な設定が行える。各選択項目に対し、所定操作で丸とバツが交互に切換えられるようにしてもよいし、各選択項目に対応するチェックボックスのチェックの有無で選択/非選択を決めるようにしてもよい。笑顔度のパーセンテージは、バー表示や数値入力で選択できるようにすればよい。液晶パネル4の表示面積によっては、1画面に複数の画像を表示し、複数人分の設定を行えるようにしてもよい。   It is desirable that the image recording enable / disable setting as shown in FIG. 2 can be performed by a simple operation while looking at the liquid crystal monitor 4. For example, when an image of a person registered for face recognition is displayed on the liquid crystal monitor 4, if setting input can be performed on the person, appropriate settings can be made while looking at the face of the target person. For each selection item, a circle and a cross may be alternately switched by a predetermined operation, or selection / non-selection may be determined depending on whether or not a check box corresponding to each selection item is checked. The percentage of smile level can be selected by bar display or numeric input. Depending on the display area of the liquid crystal panel 4, a plurality of images may be displayed on one screen so that settings for a plurality of people can be performed.

さらに本実施形態のカメラは、複数の人物を撮像することを前提とした2つのモードを備えている。第1のモードは、画面内の複数の人物全員が笑顔であり、かつ全員が視線をカメラに向けて初めて画像記録が許可されるモード(以下、「全員笑顔モード」)である。これによれば、全員が笑っている楽しい雰囲気の写真を容易に得ることができる。   Furthermore, the camera of the present embodiment has two modes on the premise that a plurality of persons are imaged. The first mode is a mode in which all of a plurality of persons on the screen are smiling, and image recording is permitted for the first time when all of them turn their eyes toward the camera (hereinafter, “all smile mode”). According to this, it is possible to easily obtain a fun atmosphere photo in which everyone is laughing.

一方、全員がまじめな顔で撮影されるべき集合写真もあることを考慮し、「全員まじめモード」も用意されている。これは、画面内の複数の人物全員がまじめ顔(非笑顔)で、かつ全員が視線をカメラに向けて初めて画像記録が許可されるモードである。   On the other hand, in consideration of the fact that there are group photos that everyone should take with a serious face, a “everyone serious mode” is also available. This is a mode in which image recording is permitted only when all of a plurality of persons on the screen have a serious face (non-smile) and all of them turn their eyes toward the camera.

図3は全員笑顔モード設定時の処理手順の一例を示すフローチャートである。
全員笑顔モードの設定に伴い、あるいは設定後に何らかの操作が行われるのに伴ってこのプログラムが起動され、まずステップS1で撮像を行い、画像データを得る。ステップS2では、得られた画像データに対して顔認識を行い、ステップS3で顔が検出されたか否かを判定する。否定されるとステップS1に戻り、肯定されるとステップS4に進む。
FIG. 3 is a flowchart showing an example of a processing procedure when the all-smile mode is set.
This program is activated in accordance with the setting of the all-smile mode or when some operation is performed after the setting. First, imaging is performed in step S1 to obtain image data. In step S2, face recognition is performed on the obtained image data, and it is determined whether or not a face is detected in step S3. If denied, the process returns to step S1, and if affirmed, the process proceeds to step S4.

ステップS4では表情認識を行い、ステップS5で全員笑っているか否かを判定する。笑っているか否かは、ここでは笑顔度が80%以上か否かで判定する。勿論、このパーセンテージは80%に限定されず、予めユーザが選択できるようにしてもよい。例えば全員を会心の笑顔で撮像したい場合は80%〜90%以上とすればよいし、少しでも笑っていればよい場合は10%〜20%以上とすればよい。また、単に笑顔か否かの判別しかできない(笑顔度を判別できない)カメラでは、全員笑顔か否かの判定でよい。   In step S4, facial expression recognition is performed, and in step S5, it is determined whether all are laughing. Whether or not the person is laughing is determined here based on whether or not the degree of smile is 80% or more. Of course, this percentage is not limited to 80% and may be selected by the user in advance. For example, 80% to 90% or more may be used to capture the whole face with a smiling face, and 10% to 20% or more may be used to laugh even a little. Further, in a camera that can only determine whether or not it is a smile (it cannot determine the degree of smile), it can be determined whether or not everyone is smiling.

ステップS5で全員笑っていると判定されると、ステップS6で全員の視線がカメラを向いているか否かを判定する。肯定されると記録条件成立と判断し、ステップS7で上記画像データを記録媒体5に記録して終了する。一方、一人でも笑顔でない人がいたり、一人でもカメラに視線を向けない人がいる場合は、記録条件不成立と判断し、ステップS8に進む(ステップS5,S6のいずれかが否定される)。ステップS8では、最初の顔認識から所定時間T1(例えば、10秒)が経過したか否かを判定し、否定されるとステップS1に戻って上記の処理を繰り返す。ステップS8が肯定された場合、すなわち所定時間T1が経過してもなお記録条件が成立しない場合はステップS9に進み、条件成立支援措置を行う。   If it is determined in step S5 that all the members are laughing, it is determined in step S6 whether or not all the eyes are facing the camera. If the determination is affirmative, it is determined that the recording condition is satisfied, and the image data is recorded on the recording medium 5 in step S7, and the process ends. On the other hand, if there is a person who is not alone or a person who does not turn his gaze toward the camera, it is determined that the recording condition is not satisfied, and the process proceeds to step S8 (any of steps S5 and S6 is denied). In step S8, it is determined whether or not a predetermined time T1 (for example, 10 seconds) has elapsed since the first face recognition. If the result is negative, the process returns to step S1 and the above processing is repeated. If step S8 is affirmed, that is, if the recording condition is not satisfied even after the predetermined time T1 has elapsed, the process proceeds to step S9 to perform a condition establishment support measure.

図4は条件成立支援措置の詳細を示している。ステップS91で笑っていない人がいると判定された場合はステップS92に進み、笑っていない人を特定する処理を行う。これは、笑っていない人の顔の特徴情報を取得し、上述したようにデータベース検索を行うことで、その人物の名前等を知る処理である。ステップS93では、人物特定処理の結果に基づいて、笑っていない人に笑うよう要請する。例えば、「○○さん、○×さん、笑ってください」のように音声で警告を発することが考えられる。これにより、笑っていなかった人が笑う可能性が高まる。   FIG. 4 shows the details of the condition establishment support measure. If it is determined in step S91 that there is a person who is not laughing, the process proceeds to step S92, and a process for specifying a person who is not laughing is performed. This is a process of acquiring facial feature information of a person who is not laughing and knowing the name of the person by performing a database search as described above. In step S93, a person who has not laughed is requested to laugh based on the result of the person specifying process. For example, it may be possible to issue a warning by voice such as “Please laugh, Mr. XX, XX”. This increases the likelihood that a person who has not laughed will laugh.

次に、ステップS94で視線をカメラに向けていない人がいると判定された場合は、ステップS95で同様にその人物を特定し、ステップS96で視線を向けるよう要請する。例えば、「○○さん、○×さん、こちらを向いてください」のように音声を発すればよく、これによりカメラを向いていなかった人がカメラを向く可能性が高まる。   Next, when it is determined in step S94 that there is a person who has not turned his / her line of sight to the camera, the person is similarly identified in step S95, and a request is made to turn his / her line of sight in step S96. For example, it is only necessary to utter a voice such as “Please turn here, Mr. XX, Mr. XX”, and this increases the possibility that a person who is not facing the camera faces the camera.

なお、ステップS92,S95の人物特定において、データベースに登録されていない人物が画面内にいた場合は、その人物を特定できないので、単に「笑ってください」、「こちらを向いてください」でよい。また、人物特定は特に行わなくてもよい。   It should be noted that in the person identification in steps S92 and S95, if a person who is not registered in the database is on the screen, the person cannot be identified, so simply “Please laugh” or “Look here”. Further, the person identification need not be performed.

図3のステップS10では、条件成立支援措置の開始から所定時間T2(例えば、数秒)が経過したか否かを判定し、経過していない場合はステップS1に戻り、経過している場合、つまり条件成立支援措置を行ってもなお条件が満たされない場合は、ステップS7に進んで画像データを記録する。   In step S10 of FIG. 3, it is determined whether or not a predetermined time T2 (for example, several seconds) has elapsed since the start of the condition establishment support measure. If not, the process returns to step S1, and if it has elapsed, If the condition is still not satisfied even after the condition establishment support measure is taken, the process proceeds to step S7 and image data is recorded.

ステップS11では、笑わない人、または視線をカメラに向けない人がいるまま画像記録を行ったか否かを判定する。ステップS10からステップS7に進んだ場合はステップS11が肯定され、この場合は、「笑っていない人がいます」、「カメラを向いていない人がいます」などの警告メッセージを画像とともに液晶モニタ4に表示する。誰が笑わなかったか、誰がカメラに視線を向けなかったかを明確にするために、画像中の該当者を矢印で指し示したり、該当者だけ色変えて表示するなど措置を行ってもよい。撮影者は、これらの表示を見て状況を把握し、再度撮像を行うか否かを決めることができる。   In step S11, it is determined whether or not the image recording is performed with a person who does not laugh or a person who does not turn his / her line of sight toward the camera. When the process proceeds from step S10 to step S7, step S11 is affirmed. In this case, a warning message such as “There is a person who is not laughing” or “There is a person who is not facing the camera” is displayed on the LCD monitor 4 together with an image. indicate. In order to clarify who has not laughed and who has not looked at the camera, measures such as pointing the corresponding person in the image with an arrow or changing the color of only the corresponding person may be taken. The photographer can grasp the situation by looking at these displays and decide whether or not to perform imaging again.

以上、全員笑顔モードについて説明したが、全員まじめモードも処理の流れは基本的に同じである。ただし、上記ステップS5の判定に代えて、全員まじめ顔(非笑顔)か否かの判定を行う。これは、例えば笑顔度10%以上であれば笑顔、それ以外はまじめ顔と判断するようにすればよい。また、条件成立支援措置において、まじめ顔でない人がいた場合は、「笑わないでください」などの音声を発する。   Although the all smile mode has been described above, the process flow is basically the same in the all serious mode. However, instead of the determination in step S5, it is determined whether or not all of them are serious faces (non-smiles). For example, the smile may be determined to be a smile when the smile degree is 10% or more, and the other face may be determined to be a serious face. In addition, when there is a person who is not a serious face in the condition establishment support measure, a voice such as “Please do not laugh” is issued.

なお、「視線」は特に考慮しなくてもよく、単に全員が笑顔あるいはまじめ顔であれば画像記録が行われるようにしてもよい。あるいは、全員が笑顔あるいはまじめ顔で、かつ少なくとも一人がカメラに視線を向けている場合に画像記録を行うようにしてもよい。また、「視線」を考慮するか否かを選択可能としてもよい。   Note that “line of sight” does not need to be considered in particular, and image recording may be performed if all the members are simply smiling or serious faces. Alternatively, image recording may be performed when everyone is smiling or with a serious face and at least one person is looking at the camera. Further, it may be possible to select whether or not to consider “line of sight”.

また、表情の判定は笑顔に限定されず、例えば全員が「笑顔」または「喜び」の表情であれば画像記録を行うようにしてもよいし、全員が「悲しみ」の表情でなければ画像記録を行う、または全員が「悲しみ」の表情でも「怒り」の表情でもなければ画像記録を行うようにしてもよい。上述した表情以外の表情を検出可能なカメラでは、その表情に基づいて画像記録の可否を決めてもよい。いずれの場合も「視線」は考慮してもしなくてもよく、考慮するか否かを選択可能としてもよい。   Also, facial expression determination is not limited to smiles. For example, if everyone has a “smiling” or “joyful” facial expression, image recording may be performed. If all of them are not “sad” or “angry”, the image may be recorded. In a camera capable of detecting facial expressions other than the facial expressions described above, whether or not to record an image may be determined based on the facial expressions. In either case, “line of sight” may or may not be considered, and whether or not to consider may be selectable.

1 撮影レンズ
2 撮像素子
3 画像処理部
4 液晶モニタ
5 記録媒体
6 CPU
DESCRIPTION OF SYMBOLS 1 Shooting lens 2 Image pick-up element 3 Image processing part 4 Liquid crystal monitor 5 Recording medium 6 CPU

Claims (7)

撮像により画像データを得る撮像手段と、
画像データ中の人物の顔を検出する顔検出手段と、
前記検出された顔の表情を検出する表情検出手段と、
画像データ中に複数の顔が検出されたときに、複数の顔の全てが予め定められた特定の表情である、または特定の表情でないことが検出されると記録条件成立と判断する判定手段と、
前記判定手段により前記記録条件成立と判断されるまで前記撮像を繰り返し、前記記録条件成立と判断されると前記画像データを記録媒体に記録する制御手段とを具備することを特徴とするデジタルカメラ。
Imaging means for obtaining image data by imaging;
Face detection means for detecting a human face in the image data;
Facial expression detection means for detecting the facial expression detected;
Determining means for determining that the recording condition is satisfied when it is detected that all of the plurality of faces have predetermined facial expressions or are not specific facial expressions when a plurality of faces are detected in the image data; ,
A digital camera comprising: a control unit that repeats the imaging until the recording unit determines that the recording condition is satisfied, and records the image data on a recording medium when the recording condition is determined to be satisfied.
画像データ中の人物がカメラに視線を向けているか否かを検出する視線検出手段を更に備え、
前記判定手段は、画像データ中に複数の顔が検出されたときに、複数の顔の全てが予め定められた特定の表情であることが検出され、かつ少なくとも1つの顔がカメラに視線を向けていることが検出されると前記記録条件成立と判断することを特徴とする請求項1に記載のデジタルカメラ。
Further comprising line-of-sight detection means for detecting whether or not a person in the image data is looking at the camera;
The determination unit detects that when a plurality of faces are detected in the image data, it is detected that all of the plurality of faces have a predetermined facial expression, and at least one face directs a line of sight toward the camera. The digital camera according to claim 1, wherein when it is detected that the recording condition is satisfied, it is determined that the recording condition is satisfied.
画像データ中の人物がカメラに視線を向けているか否かを検出する視線検出手段を更に備え、
前記判定手段は、画像データ中に複数の顔が検出されたときに、複数の顔の全てが予め定められた特定の表情であることが検出され、かつ複数の顔の全てがカメラに視線を向けていることが検出されると前記記録条件成立と判断することを特徴とする請求項1に記載のデジタルカメラ。
Further comprising line-of-sight detection means for detecting whether or not a person in the image data is looking at the camera;
When the plurality of faces are detected in the image data, the determination unit detects that all of the plurality of faces have a predetermined facial expression, and all of the plurality of faces look at the camera. 2. The digital camera according to claim 1, wherein it is determined that the recording condition is satisfied when it is detected that the camera is directed.
所定時間が経過しても前記判定手段が前記記録条件成立と判断しない場合に、条件成立のための要請を被写体人物に対して行う要請手段を更に備えることを特徴とする請求項1〜3のいずれか1項に記載のデジタルカメラ。   4. The apparatus according to claim 1, further comprising request means for making a request for satisfying a condition to a subject person when the determination means does not determine that the recording condition is satisfied even if a predetermined time has elapsed. The digital camera according to any one of the above. 前記要請手段は音声発声手段であることを特徴とする請求項4に記載のデジタルカメラ。   5. The digital camera according to claim 4, wherein the request unit is a voice utterance unit. 前記特定の表情は、「笑顔」であることを特徴とする請求項1〜5のいずれか1項に記載のデジタルカメラ。   The digital camera according to claim 1, wherein the specific facial expression is “smile”. 前記表情検出手段は、前記「笑顔」の度合いを複数段階に分けて検出可能であり、前記特定の表情は、所定の度合い以上の「笑顔」であることを特徴とする請求項6に記載のデジタルカメラ。   7. The expression according to claim 6, wherein the facial expression detection means can detect the degree of “smile” in a plurality of stages, and the specific facial expression is a “smile” having a predetermined degree or more. Digital camera.
JP2009019262A 2009-01-30 2009-01-30 Digital camera Pending JP2010178119A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009019262A JP2010178119A (en) 2009-01-30 2009-01-30 Digital camera

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009019262A JP2010178119A (en) 2009-01-30 2009-01-30 Digital camera

Publications (1)

Publication Number Publication Date
JP2010178119A true JP2010178119A (en) 2010-08-12

Family

ID=42708617

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009019262A Pending JP2010178119A (en) 2009-01-30 2009-01-30 Digital camera

Country Status (1)

Country Link
JP (1) JP2010178119A (en)

Similar Documents

Publication Publication Date Title
JP5276111B2 (en) Method and system for supporting so that composition of face can be determined during self-photographing
KR101444103B1 (en) Media signal generating method and apparatus using state information
JP5401420B2 (en) Imaging device
JP5195120B2 (en) Digital camera
JP2010068128A (en) Image capturing apparatus, existence or nonexistence decision method of image area, and program
JP2008219449A (en) Imaging device and control method thereof
JP2006319610A (en) Camera
JP2007288382A (en) Image display control device, image display control method, and image display control program
JP5137622B2 (en) Imaging apparatus and control method thereof, image processing apparatus and control method thereof
JP2003092701A (en) Imaging apparatus
CN105744179A (en) Image Capture Apparatus Capable of Processing Photographed Images
JP2010178259A (en) Digital camera
US20140285649A1 (en) Image acquisition apparatus that stops acquisition of images
JP2007049631A (en) Imaging apparatus
JP2008219450A (en) Imaging device and control method thereof
JP5157704B2 (en) Electronic still camera
JP2009260868A (en) Camera
JP2008219451A (en) Imaging device and control method thereof
JP2010041309A (en) Image pickup device, portable telephone terminal, image pickup method, program and recoding medium
JP2010178119A (en) Digital camera
JP5374612B2 (en) Image data identification method, imaging apparatus, program, and storage medium
JP5761323B2 (en) Imaging apparatus, imaging method, and program
JP2008167028A (en) Imaging apparatus
JP5002311B2 (en) IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM
JP5157761B2 (en) Electronic still camera