JP2008311885A - デジタルカメラ、カメラ付き携帯電話 - Google Patents

Abstract

【課題】従来技術における連続撮影は、装置に記憶されたフォーカス位置の順番で撮影されるため、撮影する順番を撮影前にユーザが確認することはできなかった。
【解決手段】本発明の撮像装置（０２００）では、撮像順序決定部（０２０３）にてユーザが決定した撮像順序に基づいて制御部（０２０４）が撮像部（０２０２）を制御して複数の被写体にピントを合わせて連続撮影を行うため、適切な撮像順序で被写体の連続撮像を行うことができる。
【選択図】 図２

Description

本発明は、デジタルカメラ、カメラ付き携帯電話などにおける撮像技術に関する。

近年のデジタルカメラでは連続撮影可能なものも多数開発されており、これらの連続撮影可能なデジタルカメラの多くは被写体のフォーカスの合わせ方などに特徴を有している。例えば、特許文献１では、撮影前にフォーカス位置の距離データを複数記憶しておき、記憶した複数の距離データに基づき、異なるフォーカス位置にて連続的に撮影することができる。特許文献２では、特許文献１と同じくフォーカス位置を変えながら連続的に撮影を行い、被写体にフォーカスが合った良好な画像のみを選択して記憶することとしている。
特開平７−１３１６９８号公報 特開２００４−１３５０２９号公報

しかしながら、従来技術における連続撮影は、予め装置に記憶されたデフォルトのフォーカス位置の順番で連続的に撮影されるため、被写体にピントが全く合っていない画像も多く、撮影処理に非常に無駄が生じていた。また、このようなピントが合っていない画像を含む複数の画像の中からピントが合った画像を探すことは処理が煩雑であり、特に、デジタルカメラやデジタルカメラ付き携帯電話などに備えられている液晶ディスプレイが小型である場合や、フォーカス位置による撮像画像の違いが微細である場合には、連続撮影した複数の同様の各画像において、いずれの被写体にピントが合っているのかを撮影後に確認することは非常に困難であった。そこで、本発明では、ピントを合わせて撮像を行いたい被写体のみを効率的に撮像する撮像装置を提供することを目的とする。

上記課題を解決するために、
（１）第一発明では、撮像領域の複数の被写体に対して各被写体に適した撮像条件を取得する撮像条件取得部と、前記撮像条件に基づいて各被写体を連続的に撮像する撮像部と、前記撮像部にて各被写体を撮像する撮像順序を決定する撮像順序決定部と、前記決定された撮像順序に応じて前記撮像部における撮像動作を制御する制御部と、からなる撮像装置を提供する。
（２）第二発明では、前記撮像部は、撮像直前に再度撮像条件を取得する撮像条件再取得手段を有することを特徴とする第一発明に記載の撮像装置を提供する。
（３）第三発明では、前記撮像順序決定部は、撮像装置と各被写体のフォーカス距離に応じて撮像順序を決定するフォーカス距離依存決定手段を有することを特徴とする第一発明又は第二発明に記載の撮像装置を提供する。
（４）第四発明では、撮像領域の被写体の顔領域を認識する顔領域認識部と、前記撮像順序決定部は、撮像領域に占める前記認識した顔領域が大きい順に撮像順序を決定する顔領域依存決定手段と、を有することを特徴とする第一発明から第三発明のいずれか一に記載の撮像装置を提供する。
（５）第五発明では、顔画像情報を保持する顔画像情報保持部と、撮像領域の被写体の顔画像情報である被写体顔画像情報を取得する被写体顔画像情報取得部と、前記保持された顔画像情報と、前記取得された被写体顔画像情報とを比較する顔画像情報比較部と、前記撮像順序決定部は、前記比較結果に応じて、取得した被写体顔画像情報と保持された顔画像情報とが同一人物であると判断した被写体が存在する場合には、該人物の撮像順序を他の被写体よりも上位にする顔画像情報依存決定手段と、を有することを特徴とする第一発明から第四発明のいずれか一に記載の撮像装置を提供する。
（６）第六発明では、前記顔画像情報保持部は、顔画像情報とその顔画像情報で識別される人物の写真を撮影した回数、メール回数、電話回数のいずれか一以上の応答頻度を示す応答頻度情報を関連付けて保持する応答頻度情報保持手段と、前記撮像順序決定部は、前記比較結果に応じて、取得した被写体顔画像情報と保持された顔画像情報とが同一人物であると判断した被写体が複数存在する場合には、前記応答頻度の多い順に撮像順序を決定する応答頻度情報依存決定手段と、を有する第五発明に記載の撮像装置を提供する。
（７）第七発明では、前記顔画像情報保持部は、顔画像情報とメールアドレスを関連付けて保持するメールアドレス保持手段と、前記比較結果に応じて、取得した被写体顔画像情報と保持された顔画像情報とが同一人物であると判断した被写体が存在する場合には、撮像部で該人物の撮像後に前記顔画像情報に関連付けられたメールアドレスに対して撮像画像を送信する撮像画像送信部と、を有する第五発明又は第六発明に記載の撮像装置を提供する。
（８）第八発明では、撮像領域の複数の被写体に対して各被写体に適した撮像条件を取得する撮像条件取得ステップと、撮像デバイスにて各被写体を撮像する撮像順序を決定する撮像順序決定ステップと、前記決定された撮像順序に応じて撮像デバイスにおける撮像動作を制御する制御ステップと、前記制御ステップでの制御により、前記撮像条件に基づいて各被写体を連続的に撮像する撮像ステップと、からなる撮像方法を提案する。

以上のような構成をとる本発明の撮像装置では、連続的にピントを合わせて撮影する被写体を選択して撮像順序を決定し、決定した撮像順序で撮像が行われるため、いずれの被写体にもピントが合っていない無駄な画像を取得することがなく、撮像したい被写体だけにピントを合わせて最適な順序で効率的に撮像処理を行うことができる。

本発明を実施するための最良の形態について、図面を用いて詳細に説明する。なお、本発明はこれら実施の形態になんら限定されるものではなく、その要旨を逸脱しない範囲において種々なる態様で実施しうる。なお、以下の実施形態と請求項の関係は次のとおりである。実施形態１は主として請求項１、２、８などについて説明する。実施形態２は主として請求項３などについて説明する、実施形態３は主として請求項４などについて説明する。実施形態４は主として請求項５、６、７などについて説明する。

≪実施形態１≫（実施形態１の概念）実施形態１について説明する。図１に本撮像装置として携帯電話を利用した場合の概要を例示する。図１に示すように、本撮像装置（０１００）は、複数の被写体（０１０７）が存在する場合に、いずれの被写体にピントを合わせて撮像するか、及び、複数の被写体をどのような順番で撮像するか、という各被写体の撮像順序を決定することを特徴とする撮像装置に関する。なお、決定した撮像順序（０１０２）は、撮像装置のディスプレイ（０１０１）等に表示された被写体（０１０３）に重ねて表示することで、いずれの被写体がどのような撮像順序で撮像されるのかを確認することができるようにしても良い。

（実施形態１の構成）図２に本実施形態にかかる撮像装置の機能ブロック図を示す。本実施形態にかかる「撮像装置」（０２００）は、「撮像条件取得部」（０２０１）と、「撮像部」（０２０２）と、「撮像順序決定部」（０２０３）と、「制御部」（０２０４）と、からなる。また、撮像部は「撮像条件再取得手段」（０２０５）を有していても良い。

（実施形態１の構成の説明）「撮像装置」（０２００）は、少なくとも撮像条件取得部（０２０１）、撮像部（０２０２）、撮像順序決定部（０２０３）、制御部（０２０４）から構成される装置であり、これらの構成及び機能に限られるものではない。例えば、これらの構成に加えて撮像条件再取得手段（０２０５）を備えていても良いし、実施形態２以降に記載の構成を備えていても良い。撮像装置は、デジタルカメラ、カメラ付き携帯電話、カメラ付きＰＤＡ、カメラ付きノートパソコン等といった、ＣＣＤカメラを備えた電子機器が該当する。

「撮像条件取得部」（０２０１）は、撮像領域の複数の被写体に対して被写体に適した撮像条件を取得するように構成されている。「撮像領域」とは、撮像する領域をいい、デジタルカメラやカメラ付き携帯電話では、通常はファインダーとして利用されるディスプレイに表示された範囲が撮像領域に該当する。「撮像条件」とは、フォーカス位置、絞り、シャッタースピード、フラッシュの有無などである。「被写体に適した撮像条件」とは、各被写体の撮影に適した撮像条件である。これらは、マニュアルで設定することとしても良いし、ＡＦ（ＡｕｔｏＦｏｃｕｓ）、ＡＥ（Ａｕｔｏｍａｔｉｃ Ｅｘｐｏｓｕｒｅ）などの機能を利用して、自動で設定することとしても良い。

撮像条件取得部では、撮像領域に複数の被写体（必ずしも人である必要は無い）が存在することを認識すると、ＡＦ、ＡＥなどを利用してこれら複数の被写体の最適条件を取得する。また、手動でフォーカス位置等を設定する場合には、フォーカス位置を示すフレームなどをディスプレイ上に表示してこれをユーザが移動させることでフォーカス位置を設定する。また、該フォーカス位置における絞り、シャッタースピード等を順次設定していく。このようにして設定された撮像条件は、記憶領域等に記憶される。

「撮像部」（０２０２）は、前記撮像条件に基づいて各被写体を連続的に撮像するように構成されている。撮像部は、ＣＣＤカメラなどからなる。撮像部では、ユーザによるシャッターの押下、タイマーによるシャッター設定などにより撮像指示を受け付けると、制御部での制御に基づいて設定された撮像順序にて各被写体にピントを合わせて連続的に撮像する。撮像部は、原則として撮像条件取得部にて取得された撮像条件にて各被写体を撮像するが、撮像部が「撮像条件再取得手段」（０２０５）を有する場合には、撮像直前にＡＦ，ＡＥ機能を利用して再度撮像条件を取得して撮像を行うこととしても良い。撮像条件再取得手段は、全ての被写体について再度撮像条件を取得するようにしても良いし、各被写体毎に撮像条件を再取得するようにしても良い。撮像条件再取得手段を備えている場合には、撮像条件取得部にて撮像条件を取得してから実際に撮像を行うまでの間に被写体が移動してしまったとしても、再度被写体の移動にあわせた最適な撮像条件を取得することができる。また、全ての被写体に対して撮像条件を再取得する必要がなく、例えば、風景などの動きが少ない被写体については、再度撮像条件を取得する必要性が乏しいため、個別に撮像条件の再取得を行うか否かを設定することができるようにすることが望ましい。

「撮像順序決定部」（０２０３）は、前記撮像部にて各被写体を撮像する撮像順序を決定するように構成されている。「撮像順序」とは、撮像部での連続撮影時に各被写体に対してピントを合わせて撮像が行われる順序である。撮像順序は手動で設定することとしても良いし、自動で設定することとしても良い。

図３から図５は、手動で撮像順序を決定する方法の具体例である。図３は、複数の被写体が撮像領域に表示された状態（図３（ａ））において、カーソル（０３０１）を表示し（図３（ｂ））、カーソルの操作で被写体の撮像順序を決定する様子を示す。カーソルは、デジタルカメラや携帯電話の十字キーを利用して移動させることができる。図１に例示する携帯電話の構造では、携帯電話の十字キー（０１０４）を利用してカーソルを操作することができる。まず、複数の被写体の中から１番目にピントを合わせて撮像を行いたい被写体にカーソルを合わせる。カーソルを被写体に合わせた状態で、「決定キー」に相当するキー（図１に示す０１０５など）を押下することで１番目にピントを合わせて撮像を行いたい被写体を選択することができる（図３（ｃ））。同様にして２〜４番目にピントを合わせて撮像する被写体の撮像順序を決定する（図３（ｄ））。このとき、決定した順番をディスプレイ上に表示することで撮像順序をユーザに明示することができる。なお、前記撮像条件取得部では、撮像条件を撮像順序を決定する際に取得することとしても良い。この場合、フォーカス位置を被写体上の決定キーが押下された位置とすることとしても良いし、選択された被写体の顔が存在する領域をＡＦ機能により自動認識して該領域をフォーカス位置としても良い。図３（ｃ）、（ｄ）では、選択された被写体の顔が存在する領域を認識して顔領域の中心をフォーカス位置としている。ただし、図３（ｄ）中<４>（図中は○数字）の番号が付された木は人物ではないため、顔領域ではなく相対的に明るい点などがフォーカス位置となる。また、図３（ｃ）、（ｄ）に示すように、決定キーが押下された箇所や被写体の顔領域に重ねて撮像順序を表示することで、ユーザは撮像順序と共にフォーカス位置まで確認することもでき、極めて利便性が向上する。

上記具体例において、ディスプレイがタッチパネルである場合には、被写体をタッチパネル上の操作により選択することも可能である。

図４は、カメラ付き携帯電話などを用いて撮像順序を決定する方法の具体例の一つである。図４は、撮像領域を１２分割してディスプレイ上に表示した状態である（図４（ａ））。この１２分割された各領域は、携帯電話の「テンキー（０〜９）、＊、＃」の１２のキーに対応しており、これらのキーを押下する順番で撮像順序を決定することができる。例えば、図１に示す携帯電話の構造では、０〜９、＊、＃の１２個のキー（０１０６）が図４の１２分割された撮像領域に対応する。例えば、ユーザがまず携帯電話の「５」キーを押下げすると、左から２番目、上から２番目の分割領域が選択されて点滅表示される（図４（ｂ））。そして、決定キーに相当するキーの押下げにより、当該領域の被写体が１番目にピントが合わされて撮像される被写体に決定される。なお、分割領域の選択中（点滅表示中）に十字キーなどにより選択された分割領域を上下左右に微調整可能としても良い。同様にして、「４」、「６」、「１」の順番に数字キーを押下げすることで、２〜４番目の分割領域を選択して撮像する被写体とその順序を決定することができる（図４（ｃ））。なお、撮像順序の決定と共に撮像条件を取得する場合には、分割領域の中心点をフォーカス位置とすると被写体の顔におけるピントがぶれてしまう可能性がある。このため、分割領域に含まれる被写体の顔の位置をＡＦ機能などにより自動認識し、顔が存在する領域をフォーカス位置とすることが望ましい（図４（ｄ））。

図５は、多点測距型の一眼デジタルカメラなどにおいて撮像順序を決定する方法の具体例の一つである。図５（ａ）は、多点測距型の一眼デジタルカメラなどがディスプレイ上に複数のフォーカスエリア（０５０１）をスーパーインポーズした場合を例示しており、この状態でいずれかのフォーカスエリアの位置を順番に選択することで被写体の撮影順序を決定することができる。図５（ｂ）では、複数のフォーカスエリアのいずれかを順番に選択して１から４の被写体の撮像順序を決定した様子を示している。なお、撮像順序の決定と共に撮像条件を取得する場合には、フォーカスエリアが存在する点をフォーカス位置とすると被写体の顔におけるピントがぶれてしまう可能性がある。このため、フォーカスエリア付近の被写体の顔の位置をＡＦ機能などにより自動認識し、顔が存在する領域をフォーカス位置とすることが望ましい（図５（ｃ））。

以上のようにして撮像順序が決定すると、決定した撮像順序は撮像条件と関連付けられて合焦点情報として記憶領域に記憶される。図６（ａ）にテーブル状に記憶された合焦点情報を例示する。合焦点情報とは、撮像順序、表示位置、距離、絞り、シャッタースピード、フラッシュの有無などを関連付けて保持する情報である。表示位置とは、ディスプレイ上の被写体の表示位置をＸＹ座標で表したものであり、フォーカス領域の中心点を表している。このため、表示位置の座標を中心として各被写体にピントが合うように各撮像条件が設定される。図６（ｂ）に座標軸と座標の関係を例示する。距離とは、デジタルカメラから被写体までのフォーカス距離を示す。フォーカス距離は、周知の測定技術により測定可能である。

「制御部」（０２０４）は、前記決定された撮像順序に応じて前記撮像部における撮像動作を制御するように構成されている。デジタルカメラのシャッターボタンなどの押下げを検知すると、制御部では、記憶領域に記憶された合焦点情報から撮像領域の被写体の撮像順序と、各被写体の撮像条件を参照し、撮像順序が１番目の被写体の撮像条件にてデジタルカメラの各種設定を行う。そして、制御部が撮像部へ撮像指示を出力し１番目の被写体に適した撮像条件にて複数の被写体の撮像が実行される。１番目の被写体に適した条件での撮像が実行されると、続いて２番目の被写体の撮像条件にてデジタルカメラの各種設定が行われ、撮像部への撮像指示が出力されて２番目の被写体に適した撮像条件にて複数の被写体の撮像が実行される。該処理が撮像順序が設定されている全ての被写体に対して行われることで、撮像部で連続的に各被写体にピントが合わされて最適な条件で撮像される。

（実施形態１のハードウェア構成）図７に本実施形態の撮像装置のハードウェア構成を示す。本撮像装置の構成要素である各部は、ハードウェアとハードウェア上で実行可能なソフトウェアからなる。ハードウェアとしては、演算処理を行うＣＰＵ（０７０１）、ソフトウェアや各データを一時的に記録するための揮発性メモリ（０７０２）、ソフトウェアなどの各データを記録するための不揮発性メモリ（０７０３）、撮像を行う撮像素子やレンズ絞りシャッターなどからなる撮像デバイス（０７０４）、データの入出力を行うためのＩ／Ｏデバイス（０７０５）、これらを繋ぐシステムバス（０７０６）などからなる。Ｉ／Ｏデバイスには必要に応じて十字キーやタッチパネル、ファインダーとして撮像領域を表示するディスプレイ等が接続される。また、ソフトウェアとしては、撮像順序を決定するための撮像順序決定プログラム、撮像順序に応じて撮像動作を制御する制御プログラム等である。これらのプログラムは、不揮発性メモリの所定のアドレスＡ１、Ａ２に格納されており、必要に応じて揮発性メモリの所定のアドレスａ１、ａ２に展開されて、ＣＰＵ（０７０１）による演算処理により動作する。不揮発性メモリや揮発性メモリには、上記プログラムの他にも、合焦点情報や撮像された画像ファイル等が記録される。

本撮像装置を構成する撮像条件取得部及び撮像部は撮像デバイスなどからなり、撮像順序決定部はＣＰＵ及び各メモリと撮像順序決定プログラムなどからなり、制御部はＣＰＵ及び各メモリと制御プログラムなどからなる。以下、本撮像装置の処理を具体的に説明する。

（実施形態１の具体例）図８を用いて本撮像装置の具体的な処理の流れを説明する。本撮像装置では、まず一般的な撮像モードと連続撮像モードの選択を行う（Ｓ０８０１）。一般的な撮像モードを選択した場合（Ｓ０８０２；ＮＯ）には、連続撮影を行わない一般的な撮像を行うため連続撮影を行うための処理を終了する。

連続撮像モードを選択した場合には、ＣＰＵでは、ディスプレイの撮像領域に撮像対象となる被写体を表示する（Ｓ０８０３）と共に、不揮発性メモリに格納された撮像順序決定プログラムを揮発性メモリのワーク領域に展開して起動する。撮像順序決定プログラムが起動すると、十字キーやタッチパネルなどの入力デバイスを利用してピントを合わせて撮像する対象となる被写体の決定と各被写体の撮像順序を受付可能な状態となる。この状態において、図３から図５に示した方法などにより、被写体の位置と各被写体の撮像順序を決定する。また、撮像順序と共に各被写体のフォーカス位置を定めても良い。まず、撮像順序＝１とし（Ｓ０８０４）、ユーザにより一つ目の撮像対象となる被写体が選択されると（Ｓ０８０５）、撮像順序決定プログラムでは撮像順序と、被写体の表示位置を記憶する（Ｓ０８０６）。そして、撮像デバイスでは該被写体についてその被写***置でのＡＦ，ＡＥを行い（Ｓ０８０７、Ｓ０８０８）、ＡＦ，ＡＥ情報などの撮像条件を撮像順序と共に合焦点情報として不揮発性メモリに記憶する（Ｓ０８０９）。このとき、ＡＦ，ＡＥ情報以外の情報、例えば、シャッタースピード、フラッシュの有無などの情報についても記憶しても良い。そして、２つ目以降の撮像対象となる被写体の入力があると（Ｓ０８１０；ＹＥＳ）、撮像順序を１増加させて（Ｓ０８１１）他の被写体についても同様の処理により撮像順序及び撮像条件が順次記憶される。これらの処理が完了すると、不揮発性メモリには図６（ａ）に示すような合焦点情報が記憶された状態となる。なお、撮像対象となる被写体の選択処理の完了は「決定キー」の２回押しや「終了キー」などを設けてこれを選択することで明示的に処理を終了することができる。

被写体の選択が終了し（Ｓ０８１０；ＮＯ）、撮像順序が決定すると、撮像処理に移行する。このとき、撮像装置が撮像条件再取得手段を備えている場合には、撮像直前に撮像条件を再取得するか否かを設定することができる。撮像条件を再取得する場合（Ｓ０８１２；ＹＥＳ）には、再取得を実行するか否かを示すフラグである再取得実行フラグを設定する（Ｓ０８１３）。再取得実行フラグは揮発性メモリに一時的に格納される。

以上の処理が終了した状態において、シャッタースイッチがＯＮになると（Ｓ０８１４）、ＣＰＵは不揮発性メモリに格納された制御プログラムを揮発性メモリのワーク領域に展開して起動する。制御プログラムは、不揮発性メモリに格納されている合焦点情報を参照して撮像順序が１番である被写体の表示位置を読み出し（Ｓ０８１５）、該被写体にピントが合うように撮像デバイスのフォーカスを設定し、同時に絞り等の設定も行う（Ｓ０８１６）。撮像装置が撮像条件再取得手段を備えており、かつ再取得実行フラグ＝１である場合（Ｓ０８１７；ＹＥＳ）には、一番目の被写体の位置で再度ＡＦ，ＡＥなどを行い撮像条件を再度取得する（Ｓ０８１８、Ｓ０８１９）。そして、撮像デバイスの設定が完了すると、シャッターが駆動し（Ｓ０８２０）、露光して（Ｓ０８２１）撮像が行われる。撮像が行われると、撮像素子から画像ファイルを読み出して（Ｓ０８２２）不揮発性メモリに記憶される（Ｓ０８２３）。不揮発性メモリに画像ファイルが記憶されると、次の被写体の撮像動作に移行し、制御プログラムは２番目の被写体について同様の処理を行う（Ｓ０８２４；ＹＥＳ）。そして、全ての選択した被写体について撮影を行い画像ファイルが記憶されると（Ｓ０８２４；ＮＯ）、連続撮影が終了する。この際、連続撮影した画像ファイルとは別に、撮像順序を明確に示すために、１枚目に撮影した画像に被写体のフォーカス位置、撮像順序等の情報を重畳した画像ファイルを記憶することとしても良い（Ｓ０８２５）。撮像した画像ファイルは、ファイル名を通常撮影した場合の画像ファイルと異なり、連続撮影された画像ファイルであることを直感的に認識しうるファイル名で保存することが望ましい。例えば、「ＡＡＡ＿０１．ｊｐｇ」、「ＡＡＡ＿０２．ｊｐｇ」というように、同一の識別子と連番であることを示す識別子とを組み合わせてファイル名とする。また、画像ファイルを不揮発性メモリに格納する前に、揮発性メモリに一時的に格納した段階でユーザが必要な画像ファイルを選択し、不必要な画像ファイルは不揮発性メモリに保存せずに揮発メモリから削除するようにしても良い。

撮像後の画像は、設定した撮像順序に応じて記憶されるため、どのような順番でいずれの被写体にピントが合わされたものであるかをユーザは撮像前に知ることができる。このため、撮像後にピントが合った画像ファイルを即座にその被写体である者に送信して渡すことなどができる。このため、撮像後にその被写体である者に画像ファイルを送信して渡す場合などには、ユーザが定めた撮像順序又は、ディスプレイ上に表示された撮像順序に基づいて、連続撮像した画像の中から即座にその者にピントが合わされている画像を探し出すことができる。

なお、以上のハードウェア構成及び処理の具体例は一例であり、他の同様なハードウェア構成にて本件発明を実現しても良い。

（実施形態１の効果）以上のような構成をとる本実施形態の撮像装置では、連続的にピントを合わせて撮影する被写体を選択して撮像順序を決定し、決定した撮像順序で撮像が行われるため、いずれの被写体にもピントが合っていない無駄な画像を取得することがなく、撮像したい被写体だけにピントを合わせて最適な順序で効率的に撮像処理を行うことができる。

≪実施形態２≫（実施形態２の概念）実施形態２について説明する。実施形態２では、実施形態１の撮像装置を基本とし、被写体のフォーカス距離により撮像順序を決定する点に特徴を有する撮像装置について説明する。

（実施形態２の構成）図９に本実施形態にかかる撮像装置の機能ブロック図を示す。本実施形態にかかる「撮像装置」（０９００）は、「撮像条件取得部」（０９０１）と、「撮像部」（０９０２）と、「撮像順序決定部」（０９０３）と、「制御部」（０９０４）とを基本とし、さらに、撮像順序決定部が「フォーカス距離依存決定手段」（０９０５）を有することを特徴とする。

（実施形態２の構成の説明）「フォーカス距離依存決定手段」（０９０５）は、撮像装置と各被写体のフォーカス距離に応じて撮像順序を決定するように構成されている。図１０は、フォーカス距離に応じて撮像順序を決定する方法の具体例である。まず、複数の被写体が撮像領域に表示された状態において（図１０（ａ））、カーソルを表示し、カーソルの操作で複数の被写体の中からピントを合わせて撮像を行いたい被写体にカーソルを合わせて複数の被写体を選択する（図１０（ｂ））。すなわち、図１０（ｂ）に表示された数字は被写体の選択順を示している。このとき、ピント調整のためのフォーカス位置を被写体上の決定キーが押下された位置とし、ＡＦ機能等を利用して撮像装置から各被写体までのフォーカス距離を測定する。また、フォーカス位置はＡＦ機能により被写体の顔が存在する領域を自動認識して決定することとしても良い。さらに、フォーカス距離以外の絞り値などの他の撮像条件についても取得しても良い。これをテーブル状に表したものを図１１に示す。フォーカス距離依存決定手段では、図１１のように各被写体に対応するフォーカス距離が取得されると、フォーカス距離の近い順又は遠い順に撮像順序を決定する。例えば、フォーカス距離の近い順に撮像順序を決定する場合には、図１１に示すテーブルでは、２番目に選択された被写体のフォーカス距離が最も近いため、該被写体の撮像順序が１番目、ということになる。また、同様にして、他の撮像条件で撮像される被写体についてもフォーカス距離に応じて撮像順序が決定する。図１０（ｃ）は、フォーカス距離依存撮像手段によって決定された撮像順序を○数字にて表示している様子を示している。このように、決定された撮像順序は撮影前に表示されることが望ましい。

なお、フォーカス距離は近い順であっても良いし、遠い順であっても良い。フォーカス距離を近い順、あるいは遠い順として撮像条件を決定すると、連続撮影の際にフォーカシングレンズの移動時間を短くすることができ、より効率的に撮像デバイスの制御を行うことができる。

また、フォーカス距離の遠い被写体よりもフォーカス距離が近い被写体の方が、同じ移動距離を移動した場合における撮像領域上の移動距離は大きくなる。すなわち、フォーカス距離が近い被写体は僅かに移動しただけでも撮像領域上の表示位置やフォーカス位置が大きく変化するが、フォーカス位置が遠くなるほど撮像領域上における被写体の動きの変化は小さくなる。すなわち、撮像条件取得部で取得した撮像条件を利用して撮像する場合には、フォーカス距離が近い被写体ほど早めに撮影することが望ましい。このため、フォーカス距離依存決定手段では、フォーカス距離の近い順に撮像順序を決定することが遠い順に決定する場合よりも望ましい。

撮像順序は、各被写体の選択作業中であっても、各被写体のフォーカス位置が定まれば即座に決定することも可能である。この場合には、被写体の選択時に取得したフォーカス位置に応じて撮像順序を適宜表示することとしても良い。例えば、図１２に示すように、一の被写体を選択してＡＦ機能によりフォーカス位置を取得すると、最初に選択された被写体は、他の被写体が選択されていない状態であれば、撮像順序は必然的に１番目となる。このため、撮像領域を表示しているディスプレイ上には撮像順序を示す○数字１を被写体の近傍（又は選択するために決定キーが押下された位置、以下同じ）に表示する（図１２（ａ））。次に別の被写体を選択すると、この２番目に選択した被写体についてＡＦ機能によりフォーカス位置を取得する。そして、２番目に取得したフォーカス距離と１番目に取得したフォーカス距離とを比較し、２番目の被写体のフォーカス距離の方が近ければ、ディスプレイ上には、○数字１を２番目に選択した被写体の近傍に表示し、○数字２を１番目に選択した被写体の近傍に表示する（図１２（ｂ））。一方、２番目に取得したフォーカス距離の方が遠ければディスプレイ上には○数字２を当該２番目の被写体の近傍に表示する（図１２（ｃ））。このようにして被写体の選択の旅にフォーカス距離を測定して撮像順序を表示した場合、ユーザは選択と同時にフォーカス距離に応じた撮像順序を確認することができる。

なお、撮像装置のＡＦ機能などにより、複数の被写体が存在する位置を自動で検出することができるのであれば、被写体の検出と各被写体にピントを合わせた撮像順序の決定を自動で行うことも可能である。ただし、例えばフォーカス距離の近い順に撮像順序が定められる、といった所定のルールにて撮像順序が定められることをディスプレイ上に表示するなどして予めユーザに知らせる手段を備えるか、所定のルールで定められた撮像順序を上記のようにディスプレイ上に表示することが望ましい。

上記の被写体の選択においては、実施形態１に記載したように、カーソルの代わりにタッチパネルを利用して選択しても良いし、撮像領域を１２分割して携帯電話の「テンキー（０〜９）、＊、＃」の１２のキーを利用して選択しても良いし、多点測距を利用して選択しても良い。ピントを合わせる被写体を選択した後の撮像順序の決定方法は上記カーソルの場合と同様である。

（実施形態２のハードウェア構成）図１３に本実施形態の撮像装置のハードウェア構成を示す。本撮像装置の構成要素である各部は、ハードウェアとハードウェア上で実行可能なソフトウェアからなる。ハードウェアとしては、演算処理を行うＣＰＵ（１３０１）、ソフトウェアや各データを一時的に記録するための揮発性メモリ（１３０２）、ソフトウェアなどの各データを記録するための不揮発性メモリ（１３０３）、撮像を行う撮像素子やレンズ絞りシャッターなどからなる撮像デバイス（１３０４）、データの入出力を行うためのＩ／Ｏデバイス（１３０５）、これらを繋ぐシステムバス（１３０６）などからなる。Ｉ／Ｏデバイスには必要に応じて十字キーやタッチパネルや、ファインダーとして撮像領域を表示するディスプレイ等が接続される。また、ソフトウェアとしては、撮像順序を決定するための撮像順序決定プログラム、撮像順序に応じて撮像動作を制御する制御プログラム等である。ただし、本実施形態の撮像順序決定プログラムは、撮像装置と各被写体のフォーカス距離に応じて撮像順序を決定するフォーカス距離依存決定機能が付加されている点で実施形態１の撮像順序決定プログラムとは相違する。これらのプログラムは、不揮発性メモリの所定のアドレスＡ１、Ａ２に格納されており、必要に応じて揮発性メモリの所定のアドレスａ１、ａ２に展開されて、ＣＰＵ（１３０１）による演算処理により動作する。不揮発性メモリや揮発性メモリには、上記プログラムの他にも、合焦点情報や撮像された画像ファイル等が記録される。

本撮像装置を構成する撮像条件取得部及び撮像部は撮像デバイスなどからなり、撮像順序決定部及びフォーカス距離依存決定手段はＣＰＵ及び各メモリと撮像順序決定プログラムなどからなり、制御部はＣＰＵ及び各メモリと制御プログラムなどからなる。以下、本撮像装置の処理を具体的に説明する。

（実施形態２の具体例）図１４を用いて本撮像装置の具体的な処理の流れを説明する。本撮像装置では、複数の被写体を選択して再取得実行フラグを付す処理まで（Ｓ１４０１〜Ｓ１４１３）は実施形態１の具体例における処理と同様である。そして、撮像順序決定プログラムのフォーカス距離依存決定機能を利用して、フォーカス距離に応じた撮像順序の並び替えを行う場合には、被写体のフォーカス位置の近い順に並び替えを行うか（Ｓ１４２７）、フォーカス位置の遠い順に並び替えを行うか（Ｓ１４２８）などの選択を受け付ける（Ｓ１４２６）。フォーカス距離の近い順に並び替えを行う指示を受け付けた場合には、不揮発性メモリの合焦点情報からフォーカス距離情報を読み出し、フォーカス距離の近い順に撮像順序を決定する。同様に、フォーカス距離の遠い順に並び替えを行う指示を受け付けた場合には、不揮発性メモリの合焦点情報からフォーカス距離情報を読み出し、フォーカス距離の遠い順に撮像順序を決定する。フォーカス距離に応じて並び替えを行わない場合には、実施形態１と同様に、撮像順序は被写体を選択した順番で決定する。以降の処理（Ｓ１４１４〜Ｓ１４２５）は実施形態１と同様であるため説明を省略する。

フォーカス距離に応じて撮像順序を決定した場合には、連続撮影の際にフォーカシングレンズの移動時間を短くすることができ、より効率的に撮像デバイスの制御を行うことができる。また、フォーカス距離が近い順に撮像順序を決定した場合には、移動の影響が大きい近い被写体から撮像することができるため、被写体の移動によるフォーカス位置のずれなどを極力抑えることができる。また、撮像後の画像は、被写体のフォーカス距離に応じた撮像順序にて記憶されるため、どのような順番でいずれの距離の被写体にピントが合わされて撮像されているかをユーザは撮像前に知ることができる。このため、撮像後にその被写体である者にピントが合った画像ファイルを送信して渡す場合などには、フォーカス距離又はフォーカス距離に応じてディスプレイ上に表示された撮像順序に基づいて、連続撮像した画像の中から即座にその者にピントが合わされている画像を探し出すことができる。

なお、以上のハードウェア構成及び処理の具体例は一例であり、他の同様なハードウェア構成にて本件発明を実現しても良い。

（実施形態２の効果）以上のような構成をとる本実施形態の撮像装置では、実施形態１の効果に加えて、撮像順序を被写体のフォーカス距離に応じて並び替えることができる。このため、連続撮影の際にフォーカシングレンズの移動時間を短くすることができ、より効率的に撮像デバイスの制御を行うことができる。また、被写体の移動によるフォーカス位置のずれなどを極力抑えることができる

≪実施形態３≫（実施形態３の概念）実施形態３について説明する。実施形態３では、実施形態１又は２の撮像装置を基本とし、被写体の顔領域の大きさにより撮像順序を決定する点に特徴を有する撮像装置について説明する。

（実施形態３の構成）図１５に本実施形態にかかる撮像装置の機能ブロック図を示す。本実施形態にかかる「撮像装置」（１５００）は、「撮像条件取得部」（１５０１）と、「撮像部」（１５０２）と、「撮像順序決定部」（１５０３）と、「制御部」（１５０４）と、「顔領域認識部」（１５０５）を有し、撮像順序決定部が「顔領域依存決定手段」（１５０６）を有することを特徴とする。また、実施形態２に記載した各構成を有することとしても良い。

（実施形態３の構成の説明）「顔領域認識部」（１５０５）は、撮像領域の被写体の顔領域を認識するように構成されている。「顔領域」とは、撮影領域上の被写体の顔が占める領域である。顔領域は、撮像領域として表示されたディスプレイ上の画像から、顔の輪郭形状、目、鼻、口、耳などの各パーツの距離間隔、肌の色情報などの情報を得て人間の顔として認識された領域である。

「顔領域依存決定手段」（１５０６）は、撮像順序決定部（１５０３）が有し、撮像領域に占める前記顔領域認識部にて認識した顔領域が大きい順に撮像順序を決定する手段である。撮像領域において、一般的に撮像装置に近い被写体ほど撮像領域に占める顔領域が大きくなる。このため、顔領域が大きい順に撮像順序を決定することで、近い被写体から順番にピントを合わせて撮像することができるので、実施形態２のフォーカス距離の近い順に撮像順序を決定する場合と同様の効果が期待できる。すなわち、連続撮影の際にフォーカシングレンズの移動時間を短くすることができ、より効率的に撮像デバイスの制御を行うことや、被写体の移動によるフォーカス位置のずれなどを極力抑えることができる。また、子供や大人を同時に撮像する場合には、必ずしも撮像装置からの距離が近い順に顔領域の大きさが大きくなるとは限らない。しかし、このような場合でも、撮像時に撮像領域における各被写体の顔領域の大きさをディスプレイ等を利用して視覚的に確認することができるため、撮像時に直感的に撮像順序を確認することができる。また、顔領域により決定された撮像順序を、ディスプレイ上に表示することで、より確実に撮像順序を利用者に知らせることができる。

図１６は、顔領域の大きさにより撮像順序を決定し、決定した撮像順序をディスプレイ上に表示する場合の具体例の一つを示す。まず、実施形態１又は２に記載の方法等を利用して、ピントを合わせて撮像する被写体を選択する。ユーザの選択によらず、自動で被写体を認識するようにしても良い。この際に図１６（ａ）に示すように、被写体を選択した順番を表示するようにしても良い。被写体の選択に応じて、ディスプレイ上の各被写体の顔領域が占める範囲をフレームで表示する。被写体の選択が終了すると、自動又はユーザからの指示により、顔領域依存決定手段を利用して顔領域の占める大きさに応じて撮像順序が決定される。顔領域の大きさは、顔領域として認識された範囲のピクセル数を計測したり、顔領域を示すフレームが占める面積を計測したりすることで算出することができる。図１６（ｂ）の○数字は算出された被写体の顔領域の大きい順に決定した撮像順序を表示している。これにより、ユーザは、撮像前にディスプレイ上に表示された撮像領域に占める顔領域の大きさからピントを合わせて撮像する被写体の順番を確認することができる。なお、決定された撮像順序は、ディスプレイ上に表示されることが望ましい。撮像順序を表示することで、より撮像順序を正確にユーザに知らせることができる。

（実施形態３のハードウェア構成）図１７に本実施形態の撮像装置のハードウェア構成を示す。本撮像装置の構成要素である各部は、ハードウェアとハードウェア上で実行可能なソフトウェアからなる。ハードウェアとしては、演算処理を行うＣＰＵ（１７０１）、ソフトウェアや各データを一時的に記録するための揮発性メモリ（１７０２）、ソフトウェアなどの各データを記録するための不揮発性メモリ（１７０３）、撮像を行う撮像素子やレンズ絞りシャッターなどからなる撮像デバイス（１７０４）、データの入出力を行うためのＩ／Ｏデバイス（１７０５）、これらを繋ぐシステムバス（１７０６）などからなる。Ｉ／Ｏデバイスには必要に応じて十字キーやタッチパネルや、ファインダーとして撮像領域を表示するディスプレイ等が接続される。また、ソフトウェアとしては、撮像順序を決定するための撮像順序決定プログラム、撮像順序に応じて撮像動作を制御する制御プログラム、顔領域の大きさを認識する顔領域認識プログラム等である。ただし、本実施形態の撮像順序決定プログラムは、撮像領域に占める顔領域の大きさに応じて撮像順序を決定する顔領域依存決定機能が付加されている点で実施形態１又は２の撮像順序決定プログラムとは相違する。これらのプログラムは、不揮発性メモリの所定のアドレスＡ１、Ａ２、Ａ３に格納されており、必要に応じて揮発性メモリの所定のアドレスａ１、ａ２、ａ３に展開されて、ＣＰＵ（１７０１）による演算処理により動作する。不揮発性メモリや揮発性メモリには、上記プログラムの他にも、合焦点情報や撮像された画像ファイル等が記録される。

本撮像装置を構成する撮像条件取得部及び撮像部は撮像デバイスなどからなり、撮像順序決定部及びフォーカス距離依存決定手段はＣＰＵ及び各メモリと撮像順序決定プログラムなどからなり、制御部はＣＰＵ及び各メモリと制御プログラムなどからなり、顔領域認識部はＣＰＵ及び各メモリと顔領域認識プログラムなどからなる。以下、本撮像装置の処理を具体的に説明する。

（実施形態３の具体例）図１８を用いて本撮像装置の具体的な処理の流れを説明する。本撮像装置では、複数の被写体を選択して再取得実行フラグを付す処理まで（Ｓ１８０１〜Ｓ１８１３）は実施形態１の具体例における処理と同様である。ただし、被写体の選択（Ｓ１８０５）の後、撮像順序及び被写体の位置と共に顔領域認識プログラムにより認識された顔領域の大きさについても記憶しておく。そして、撮像順序決定プログラムの顔領域依存決定機能を利用して、顔領域の大きさに応じた撮像順序の並び替えを行う場合（Ｓ１８２６；ＹＥＳ）には、顔領域の大きい順に撮像順序の並び替えを行い撮像順序を決定する（Ｓ１８２７）。顔領域の大きさに応じて並び替えを行わない場合（Ｓ１８２６；ＮＯ）には、実施形態１と同様に、撮像順序は被写体を選択した順番で決定する。以降の処理（Ｓ１８１４〜Ｓ１８２５）は実施形態１と同様であるため説明を省略する。

顔領域の大きさに応じて撮像順序を決定した場合には、撮像後の画像は、被写体の顔領域の大きい順の撮像順序にて記憶されるため、どのような順番でいずれの被写体にピントが合わされて撮像されているかをユーザは撮像前に知ることができる。このため、撮像後にその被写体である者に画像ファイルを送信して渡す場合などには、顔領域の大きさ又は、顔領域の大きさに応じてディスプレイ上に表示された撮像順序に基づいて、連続撮像した画像の中から即座にその者にピントが合わされている画像を探し出すことができる。

なお、以上のハードウェア構成及び処理の具体例は一例であり、他の同様なハードウェア構成にて本件発明を実現しても良い。

（実施形態３の効果）以上のような構成をとる本実施形態の撮像装置では、実施形態１の効果に加えて、撮像順序を被写体の顔領域の大きさに応じて並び替えることができる。このため、連続撮影の際にフォーカシングレンズの移動時間を短くすることができ、より効率的に撮像デバイスの制御を行うことや、被写体の移動によるフォーカス位置のずれなどを極力抑えることができる。さらに、被写体が撮像される順番がより分かりやすくなり、ユーザの利便性が向上する。

≪実施形態４≫（実施形態４の概念）実施形態４について説明する。実施形態４では、実施形態１から３の撮像装置のいずれかを基本とし、取得した被写体の顔画像情報により撮像順序を決定する点に特徴を有する撮像装置について説明する。

（実施形態４の構成）図１９に本実施形態にかかる撮像装置の機能ブロック図を示す。本実施形態にかかる「撮像装置」（１９００）は、「撮像条件取得部」（１９０１）と、「撮像部」（１９０２）と、「撮像順序決定部」（１９０３）と、「制御部」（１９０４）と、「顔画像情報保持部」（１９０５）と、「被写体顔画像情報取得部」（１９０６）と、「顔画像情報比較部」（１９０７）を有し、撮像順序決定部が「顔画像情報依存決定手段」（１９０８）を有することを特徴とする。また、顔画像情報保持部は「応答頻度情報保持手段」（１９０９）を、撮像順序決定部は「応答頻度情報依存決定手段」（１９１０）を上記構成に加えて有していても良い。さらに、顔画像情報保持部が「メールアドレス保持手段」（１９１１）を有し、「撮像画像送信部」（１９１２）を上記構成に加えて有していても良い。また、実施形態２又は３に記載した各構成を有することとしても良い。

（実施形態４の構成の説明）「顔画像情報保持部」（１９０５）は、顔画像情報を保持するように構成されている。顔画像情報とは、顔が表示された画像ファイルを含む情報である。例えば、撮像装置がデジタルカメラである場合には、過去に撮影した画像としてメモリに記憶されている画像のうち、顔が表示された画像ファイルがこれに該当し、撮像装置が携帯電話である場合には、携帯電話のアドレス帳などに記憶されている顔画像ファイルなどがこれに該当する。顔画像情報としては、目、鼻、口、顔の輪郭等の顔の特徴点を抽出して画像ファイルと共に保持していても良い。

「被写体顔画像情報取得部」（１９０６）は、撮像領域の被写体の顔画像情報である被写体顔画像情報を取得するように構成されている。被写体顔画像情報取得部は、撮像領域の被写体の顔領域を認識し、認識した顔領域に表示された画像を取得することで被写体顔画像情報を取得する。被写体顔画像情報取得部では、顔画像情報を取得する被写体をユーザが選択することとしても良いが、撮像装置にて自動で人物の顔を検出して被写体顔画像情報を取得することとしても良い。

「顔画像情報比較部」（１９０７）は、前記顔画像情報保持部に保持された顔画像情報と、前記被写体顔画像情報取得部にて取得された被写体顔画像情報とを比較するように構成されている。被写体顔画像情報取得部にて被写体顔画像情報を取得すると、顔画像情報比較部では、まず、取得した被写体顔画像情報から被写体の目、鼻、口、顔の輪郭等を特徴点として抽出する。そして、抽出された特徴点を顔画像情報保持部に保持されている顔画像情報と比較し、特徴点の一致不一致などから被写体顔画像情報にて表される人物の画像が、顔画像情報保持部に保持されている画像の中の人物に一致するか否かを判断する。なお、特開２００４−３２０２８６号公報などにより既に顔認証技術については開示されている通りである。上記比較した結果、特徴点の所定割合以上が合致する場合には、比較した両者は同一人物であるとの比較結果が出力される。なお、本実施形態における同一人物であるか否かの比較技術は、セキュリティ等に応用するものではないため、必ずしも厳密な同一性までを要求するものではない。このため、比較結果は、親子や兄弟姉妹など似ている人物を同一人物とみなす程度の誤差を許容するものである。

「顔画像情報依存決定手段」（１９０８）は、前記撮像順序決定部が有し、前記比較結果に応じて、取得した被写体顔画像情報と保持された顔画像情報とが同一人物であると判断した被写体が存在する場合には、該人物の撮像順序を他の被写体よりも上位にする手段である。

図２０に顔画像情報依存決定手段を用いた場合の具体例を示す。なお、説明のため、図中の各被写体にＡ，Ｂ，Ｃの番号を付している。まず、撮像装置は、被写体顔画像情報取得部にて撮像領域に表示された顔画像を認識して、人物の顔が表示されている領域を顔フレームで表す。このとき、仮に、便宜上Ａ，Ｂ，Ｃの順番で顔画像を認識したとして、この認識した順番を被写体に重ねて表示すると、図２０（ａ）に示すように、Ａ，Ｂ，Ｃの順番で１，２，３の番号が表示される。フォーカス領域は被写体の顔領域としている。この状態で、携帯電話の数字キー等を利用して被写体の撮像順序を選択することとしても良い（例えば、数字の「２」キーを押した場合には、被写体Ｂが撮像順序の１番目に選択されるなど）が、顔画像情報依存決定手段を備えている場合には、以下のように処理が行われる。

まず、被写体画像情報取得部では、選択された被写体Ａ，Ｂ，Ｃの被写体顔画像情報を取得し、顔画像情報比較部では、取得した画像を顔画像情報保持部にて保持されている顔画像情報と比較する。仮に、被写体Ｂ，Ｃの被写体顔画像情報が、顔画像情報保持部に保持されている顔画像情報との比較で同一人物であると判断された場合には、被写体Ｂ．Ｃの撮像順序を被写体Ａよりも上位にする。本ケースでは、被写体Ｂ，Ｃの撮像順序を被写体Ａよりも上位にし、被写体Ｂ，Ｃ間の順番は認識された順番とし、被写体Ｂ，Ｃ，Ａの順番で撮像順序を決定する。図２０（ｂ）では、顔画像情報依存決定手段により決定された撮像順序を○数字にて撮像領域上に表示した場合を示している。

「応答頻度情報保持手段」（１９０９）は、顔画像情報保持部が有し、顔画像情報とその顔画像情報で識別される人物の写真を撮影した回数、メール回数、電話回数のいずれか一以上の応答頻度を示す応答頻度情報を関連付けて保持する手段である。「顔画像情報で識別される人物の写真を撮影した回数」とは、顔画像情報保持部が保持している顔画像情報と合致した回数などで表すことができる。例えば、まず、ある人物Ｄを初めて撮影した際にその人物Ｄの顔画像から特徴的部分を抽出して顔画像情報として顔画像情報保持部にて保持し、人物Ｄの撮影回数のカウンターに１を設定する。そして、その後撮影した画像から同じように抽出した特徴点が人物Ｄの顔画像情報と一致すると、人物Ｄの撮影回数のカウンターを１増加し、２とする。このようにして撮影の度に特徴点を比較することで撮影回数をカウントすることができる。また、撮影回数ではなく、現在保持している撮像画像の中から人物Ｄが撮影されている画像枚数（画像ファイル数）をカウントしても良い。「メール回数」とは、電子メールの送受信回数や携帯電話を利用したメールサービス利用回数などで表すことができる。携帯電話を利用したメールサービスとは、各キャリアの利用者端末間など限られたキャリア同士でやり取りされるメッセージ交換サービスなどである。メール回数をカウントする場合には、少なくとも撮像装置が電子メール等の送受信機能を有することが必要である。「電話回数」とは、電話の発着信回数などで表すことができる。電話回数をカウントする場合には、少なくとも撮像装置が電話機能を有することが必要である。図２１（ａ）にこれらの応答頻度情報と顔画像情報とをテーブル状に関連付けて保持している様子を示す。各情報にはＩＤを付して識別している。

「応答頻度情報依存決定手段」（１９１０）は、前記撮像順序決定部が有し、前記顔画像情報比較部での比較結果に応じて、取得した被写体顔画像情報と保持された顔画像情報とが同一人物であると判断した被写体が複数存在する場合には、前記応答頻度の多い順に撮像順序を決定する手段である。「応答頻度の多い順に撮像順序を決定する」とは、応答頻度情報保持手段に保持されている応答頻度情報が、写真を撮影した回数、メール回数、電話回数いずれか一つであれば、単純に回数の多い者の順に撮像順序を決定する。また、写真を撮影した回数、メール回数、電話回数のいずれか二以上を有している場合には、応答頻度情報に優先順位を付すこととしても良い。例えば、まずは写真を撮影した回数の大小で撮像順序を決定し、写真を撮影した回数が同数の者が複数存在する場合には、メール回数の大小で撮像順序を決定するという具合である。また、各回数を単純に合計した回数を利用しても良いし、各回数に重み付けをして合計した回数を利用しても良い。

図２０及び図２１を用いて応答頻度情報に応じて撮像順序を決定する方法を説明する。図２０（ａ）に示すように被写体Ａ，Ｂ，Ｃがピントを合わせて撮像する被写体として選択された場合に、顔画像情報依存決定手段を利用して顔画像情報との比較結果に応じて被写体Ｂ，Ｃの撮像順序を上位にすることは既に説明した通りであるが、応答頻度情報依存決定手段では、さらに被写体Ｂ，Ｃ間の撮像順序を定めることができる。取得した被写体Ｂと被写体Ｃの被写体顔画像情報が、それぞれ顔画像情報保持部に保持されている「Ｆ−００１」、「Ｆ−０２１」で表される顔画像情報と一致し、顔画像情報比較部にてそれぞれが同一人物であるとの比較結果が得られると、図２１（ａ）に示すように、被写体Ｂ，Ｃはそれぞれ応答頻度情報のＩＤ「００３」とＩＤ「０２８」が対応することがわかる。そして、図２１（ｂ）に示すように合焦点情報にＩＤ欄を設けて、対応するＩＤを入力する。応答頻度情報依存決定手段では、顔画像情報ＩＤ欄のＩＤに基づいて、応答頻度情報保持手段に保持されている応答頻度情報を参照する。本ケースでは、各応答回数の合計回数が多い順に撮像順序を決定するとすると、図２１（ａ）に示す応答頻度情報が保持されている場合には、「ＩＤ：０２８」で表される被写体Ｃの方が「ＩＤ：００３」で表される被写体Ｂよりも各応答回数の合計回数が多いため、被写体Ｃの撮像順序を上位にする。この結果、最終的に決定される撮像順序は被写体Ｃ，Ｂ，Ａの順番となる。このとき、決定された撮像順序は、図２０（ｃ）に示すように撮像領域の被写体の近傍に表示されることが望ましい。

「メールアドレス保持手段」（１９１１）は、顔画像情報保持部が有し、顔画像情報とメールアドレスを関連付けて保持する手段である。「メールアドレス」とは、インターネットを利用して通信可能なメールアドレスのみならず、特定のキャリア間で利用可能なショートメールサービスのアドレス、携帯端末同士で赤外線通信やブルートゥース（登録商標）通信を行う場合の端末間の識別情報なども含まれる。顔画像情報保持部は、メールアドレス保持手段を有する場合には、図２１（ｃ）に示すように顔画像情報とメールアドレスを関連付けて保持する。なお、このとき、メールアドレスのみならず、そのメールアドレスと共に登録されている名称、電話番号なども保持していても良い。メールアドレス保持手段は、携帯電話などに備えているアドレス帳機能が該当する。また、図２０（ｄ）に示すように、顔画像情報と被写体顔画像情報が一致した場合には、メールアドレス保持手段を参照して、顔画像情報と関連付けられている登録名やメールアドレスを被写体に重畳表示するようにしても良い。

「撮像画像送信部」（１９１２）は、前記顔画像情報比較部での比較結果に応じて、前記被写体顔画像情報取得部にて取得した被写体顔画像情報と前記顔画像情報保持部に保持された顔画像情報とが同一人物であると判断した被写体が存在する場合には、撮像部で該人物の撮像後に前記顔画像情報に関連付けられたメールアドレスに対して撮像画像を送信するように構成されている。前記顔画像情報比較部にて被写体顔画像情報と顔画像情報とが同一人物であると判断した被写体が存在する場合には、撮像画像送信部では、図２１（ｃ）に示すように、顔画像情報に関連付けられたメールアドレスを、メールアドレス保持手段を参照して取得する。そして、メール機能を起動し、該人物にピントが合わされた画像ファイルを添付して取得したメールアドレスを宛先として送信する。これにより、撮像後にユーザがメール機能を起動して該人物に画像ファイルを送信する手間が削減され、利便性が向上する。

（実施形態４のハードウェア構成）図２２に本実施形態の撮像装置のハードウェア構成を示す。本撮像装置の構成要素である各部は、ハードウェアとハードウェア上で実行可能なソフトウェアからなる。ハードウェアとしては、演算処理を行うＣＰＵ（２２０１）、ソフトウェアや各データを一時的に記録するための揮発性メモリ（２２０２）、ソフトウェアなどの各データを記録するための不揮発性メモリ（２２０３）、撮像を行う撮像素子やレンズ絞りシャッターなどからなる撮像デバイス（２２０４）、データの入出力を行うためのＩ／Ｏデバイス（２２０５）、これらを繋ぐシステムバス（２２０６）などからなる。Ｉ／Ｏデバイスには必要に応じて十字キーやタッチパネルや、ファインダーとして撮像領域を表示するディスプレイ等が接続される。また、ソフトウェアとしては、撮像順序を決定するための撮像順序決定プログラム、撮像順序に応じて撮像動作を制御する制御プログラム、被写体顔画像情報を取得する被写体画像取得プログラム、顔画像情報を比較する顔画像情報比較プログラム等である。ただし、本実施形態の撮像順序決定プログラムは、顔画像情報の比較結果に応じて撮像順序を決定する顔画像情報依存決定機能が付加されている点で実施形態１から３の撮像順序決定プログラムとは相違する。撮像順序決定プログラムには、応答頻度情報依存決定機能を有していても良い。また、メール送信プログラムを有していても良い。これらのプログラムは、不揮発性メモリの所定のアドレスＡ１、Ａ２、Ａ３、Ａ４、Ａ５等に格納されており、必要に応じて揮発性メモリの所定のアドレスａ１、ａ２、ａ３、ａ４、ａ５等に展開されて、ＣＰＵによる演算処理により動作する。不揮発性メモリや揮発性メモリには、上記プログラムの他にも、合焦点情報や撮像された画像ファイル等が記録される。

本撮像装置を構成する撮像条件取得部及び撮像部は撮像デバイスなどからなり、撮像順序決定部及びフォーカス距離依存決定手段はＣＰＵ及び各メモリと撮像順序決定プログラムなどからなり、制御部はＣＰＵ及び各メモリと制御プログラムなどからなり、顔画像情報保持部は不揮発性メモリなどからなり、被写体顔画像情報取得部はＣＰＵ、各メモリ及びＩ／Ｏデバイスに接続されたディスプレイと被写体顔画像情報取得プログラムなどからなり、顔画像情報比較部はＣＰＵ及び各メモリと顔画像情報比較プログラムなどからなり、撮像画像送信部はＣＰＵ及び各メモリとメール送信プログラム、Ｉ／Ｏデバイスに接続されたネットワークデバイスなどからなる。以下、本撮像装置の処理を具体的に説明する。

（実施形態４の具体例）図２３を用いて本撮像装置の具体的な処理の流れを説明する。本撮像装置では、まず一般的な撮像モードと顔認識連続撮像モードの選択を行う（Ｓ２３０１）。一般的な撮像モードを選択した場合（Ｓ２３０２；ＮＯ）には、顔認識連続撮影を行わない一般的な撮像を行うため連続撮影を行うための処理を終了する。

顔認識連続撮像モードを選択した場合には、ＣＰＵでは、ディスプレイの撮像領域に撮像対象となる被写体を表示する（Ｓ２３０３）と共に、不揮発性メモリに格納された撮像順序決定プログラム及び被写体顔画像情報取得プログラム、被写体画像取得プログラム、顔画像情報比較プログラムを揮発性メモリのワーク領域に展開して起動する。撮像順序決定プログラムが起動すると、十字キーやタッチパネルなどを入力デバイスとし、ピントを合わせて撮像する対象となる被写体の決定と各被写体の撮像順序を受付可能な状態となる。この状態において、被写体の位置と各被写体の撮像順序を決定する。また、撮像順序と共に各被写体のフォーカス位置を定めても良い。まず、撮像順序＝１とし（Ｓ２３０４）、ユーザにより一つ目の撮像対象となる被写体が選択されると（Ｓ２３０５）、撮像順序決定プログラムでは撮像順序と、被写体の表示位置を記憶する（Ｓ２３０６）。そして、撮像デバイスでは該被写体についてその被写***置でのＡＦ，ＡＥを行い（Ｓ２３０７、Ｓ２３０８）、ＡＦ，ＡＥ情報などの撮像条件を撮像順序と共に合焦点情報として不揮発性メモリに記憶する（Ｓ２３０９）。

また、被写体顔画像情報取得プログラムにより、ディスプレイ上に表示されている各被写体の顔部分の画像から顔の特徴点部分を抽出し（Ｓ２３１０）、これを被写体顔画像情報として揮発性メモリに一時的に記憶する。被写体顔画像情報が揮発性メモリの所定のアドレスに記憶されると、顔画像情報比較プログラムでは、不揮発性メモリの所定のアドレスに格納されている顔画像情報を読み出し、揮発性メモリに格納された被写体顔画像情報と同一人物である顔画像情報が不揮発性メモリに格納されているか否かを顔の特徴点に基づいて比較しながら検索し、不揮発性メモリに格納されている顔画像情報と同一人物であるか否かを判断する（Ｓ２３１１）。同一人物であるとの判定結果が得られた場合には、図２１（ｂ）に示すように、合焦点情報のＩＤ欄に同一人物であると判定した顔画像情報のＩＤを入力する。そして、２つ目以降の被写体の選択についても同様の処理により撮像条件と共に人物一致フラグを合焦点情報に格納していく。このとき、選択された順番に仮の撮像順序を定めていく。被写体の選択が完了すると、顔画像情報に応じて撮像順序を決定する場合（Ｓ２３１４；ＹＥＳ）には、撮像順序決定プログラムでは、顔画像情報依存決定機能により合焦点情報のＩＤ欄にＩＤが入力されている被写体の撮像順序を上位にする（Ｓ２３１６）。

さらに、撮像順序決定プログラムが応答頻度情報決定機能を有している場合について説明する。応答頻度情報決定機能を利用するためには、予め不揮発性メモリに格納されている顔画像情報保持部とその顔画像情報で識別される人物の写真を撮影した回数、メール回数、電話回数のいずれか一以上の応答頻度を示す応答頻度情報を関連付けて保持している必要がある。応答頻度情報決定機能は、複数の被写体の合焦点情報のＩＤ欄にＩＤが入力されている場合に利用される。応答頻度情報決定機能を利用する場合には（Ｓ２３１７;ＹＥＳ）、ＩＤが入力された顔画像情報に関連付けられた応答頻度情報を不揮発性メモリから読み出し、応答頻度が多い被写体から順に撮像順序を決定する（Ｓ２３１８）。決定された撮像順序は、ディスプレイ上に表示することが望ましい。ユーザは表示された撮像順序を撮像前に視覚的に確認することができる。以降の撮像が実行されるまでの処理（Ｓ２３１９〜Ｓ２３２７）は実施形態１から３のいずれかと同様であるため説明を省略する。なお、本具体例では、処理フローを簡略化するため再取得実行フラグに関する処理を記載していないが、本具体例に再取得実行フラグに関する処理を付け加えることも可能である。

撮像後の画像は、顔画像情報が保持されている被写体の撮像順序が上位となっている。このとき、撮像前に撮像順序をディスプレイ表示するようにすることで、どのような順番でいずれの被写体にピントが合わされて撮像されているかをユーザは撮像前に知ることができる。また、顔画像情報が保持されている被写体は、撮像装置のユーザと親密である可能性が高いため、このような人物にピントが合わされた画像の撮像順序を上位とすることで、連続撮影した後の画像の中から効率的に親密な人物の画像をより効率的に探し出すことができる。

上記構成に加えて、メール送信プログラムを有する場合には、連続撮影された後に以下の処理が行われることになる。連続撮影が完了すると、不揮発性メモリの所定のアドレスに格納されているメール送信プログラムが揮発性メモリのワーク領域に展開されて起動する。メール送信プログラムでは、まず、合焦点情報のＩＤ欄にＩＤが入力されているか否か、すなわち、顔認証された人物がいるか否かを調べる。顔認証された人物がない場合には、メール送信プログラムはそのまま終了する。顔認証された人物がおり、メールを送信する場合には（Ｓ２３２８；ＹＥＳ）、ＩＤと撮像順序から、撮像後の画像ファイルを特定し、これを揮発性メモリに一時的に格納する。また、該ＩＤにて特定される被写体の顔画像情報に含まれているメールアドレスを検索し、メールアドレスが顔画像情報に含まれている場合には、前記揮発性メモリに可能された画像ファイルを添付ファイルとして該メールアドレス宛にメールを送信する（Ｓ２３２９）。

メール送信プログラムを有している場合には、自動的にピントが合った画像を被写体の当事者に送信することができるため、撮像後にユーザがメール機能を起動して該人物に画像ファイルを送信する手間が削減され、利便性が向上する。

なお、以上のハードウェア構成及び処理の具体例は一例であり、他の同様なハードウェア構成にて本件発明を実現しても良い。

（実施形態４の効果）以上のような構成をとる本実施形態の撮像装置では、実施形態１の効果に加えて、撮像順序を顔画像情報に応じて並び替えることができる。このため、被写体が撮像された画像をより効率的に探し出すことができ、ユーザの利便性が向上する。さらに、メール送信プログラムを備えている場合には、撮像した画像ファイルを送信する手間も削減されるため、より利便性が向上する。

<実施例>以下に、図２４、図２５を用いて撮像装置としてカメラ付き携帯電話を利用した場合の実施例を例示する。

図２４（ａ）は折り畳み型携帯電話を開いた状態におけるメインパネル側を示しており、図２４（ｂ）はサブパネル側を示している。携帯電話は、カーソルキー（２４０１）、決定キー（２４０２）、テンキー及び＊、＃キー（２４０３）、メインパネル（２４０４）、スピーカー（２４０５）、サブカメラ（２４０６）、メインカメラ（２４０７）、フラッシュ（２４０８）、サブパネル（２４０９）などから構成されている。カメラ付き携帯電話では、メインカメラにＣＣＤ素子が利用され、メインカメラを介して撮像条件を取得したり、撮像を実行したりすることができる。メインカメラを介して取得された画像は、メインパネルに表示される。メインパネルでは、撮像領域を表示すると共に、各種操作を行うためのカーソル表示やメニュー表示を行う。そして、カーソルキー及び決定キー、テンキー等で、撮像する被写体の選択、撮像順序の決定、撮像実行指示等の操作を行うことができる。

図２５はカメラ付き携帯電話の機能ブロック図である。カメラ付き携帯電話は、大きく撮像部（２５０１）、制御部（２５０２）、入出力部（２５０３）、メモリ部（２５０４）に分けられる。撮像部は、撮像条件に関わる撮影レンズ（２５０５）、絞り（２５０６）、シャッター（２５０７）と、これらの設定を行うＡＦ駆動回路（２５０８）、絞り駆動回路（２５０９）、シャッター駆動回路（２５１０）と、設定された撮像条件で撮像を行う撮像素子（２５１１）と、撮像素子からの電気的な信号を映像信号として処理をする映像信号処理部（２５１２）と、フォーカス位置、絞りの量などの撮像条件を取得するＡＦセンサ（２５１３）、ＡＥセンサ（２５１４）と、フラッシュ（２５１５）と、フラッシュの有無及びタイミング等を制御するフラッシュ制御回路（２５１６）などからなる。制御部は、撮像部にて取得された撮像画像から人物の特徴点を抽出する特徴点抽出部（２５１７）と、被写体に重ねて表示するフレームや数字などのキャラクタを生成するキャラクタ生成部（２５１９）と、生成したキャラクタを重ねて表示する対象となる被写体を指定する被写体指定部（２５２０）と、撮像部にて取得された画像とキャラクタ画像とを合成する画像合成部（２５１８）からなる。入出力部は、無線通信を行う無線部（２５２１）と、通信を制御する通信制御部（２５２２）と、制御部にて制御された画像をディスプレイ表示用に処理する表示処理部（２５２３）と、表示処理部にて処理された画像を表示する表示部（２５２４）と、スピーカーから出力する音声の処理及びマイクから入力された音声の処理を行う音声処理部（２５２５）と、処理された音声をスピーカーから出力する音声出力部（２５２６）と、音声を音声処理部にマイクなどにて音声を入力する音声入力部（２５２７）と、制御部に入力するための各種操作を行う操作部（２５２８）とからなる。メモリ部は、各種アプリケーションプログラムを記憶するプログラムメモリ（２５２９）と、撮影画像、合焦点情報、アドレス帳、履歴情報、特徴点情報を記憶する汎用メモリ（２５３０）とからなる。撮像部では、撮像条件を取得したり、撮像を実行したりすることができる。制御部では、撮像順序を定めるための各種操作を行うために表示する画像の生成、各種操作による指示を受け付け、プログラムメモリに記憶されたプログラムや汎用メモリに記憶された合焦点情報／アドレス帳／履歴情報を利用して撮像する被写体の選択及び撮像順序の決定、プログラムメモリに記憶された顔認証プログラムを利用して抽出した被写体の顔の特徴点の比較や認証、合焦点情報を読み出して撮像部における各種撮像条件の制御等を行うことができる。入出力部では、表示された撮像領域に対応する指示の入力や、シャッターの押下げによる撮像指示などを入力することができる。

実施形態１の概念図 実施形態１の機能ブロック図 被写体の撮像順序を決定する方法を説明する図（１） 被写体の撮像順序を決定する方法を説明する図（２） 被写体の撮像順序を決定する方法を説明する図（３） 合焦点情報を例示する図（１） 実施形態１のハードウェア構成を例示する図 実施形態１の処理の流れを例示する図 実施形態２の機能ブロック図 フォーカス距離に応じて被写体の撮像順序を決定する方法を説明する図（１） 合焦点情報を例示する図（２） フォーカス距離に応じて被写体の撮像順序を決定する方法を説明する図（２） 実施形態２のハードウェア構成を例示する図 実施形態２の処理の流れを例示する図 実施形態３の機能ブロック図 顔領域に応じて被写体の撮像順序を決定する方法を説明する図 実施形態３のハードウェア構成を例示する図 実施形態３の処理の流れを例示する図 実施形態４の機能ブロック図 顔認証に応じて被写体の撮像順序を決定する方法を説明する図 合焦点情報、応答頻度情報、メールアドレス等を例示する図 実施形態４のハードウェア構成を例示する図 実施形態４の処理の流れを例示する図 カメラ付き携帯電話の構造を例示する図 カメラ付き携帯電話の機能ブロック図

符号の説明

０２００ 撮像装置
０２０１ 撮像条件取得部
０２０２ 撮像部
０２０３ 撮像順序決定部
０２０４ 制御部
０２０５ 撮像条件再取得手段
０９０５ フォーカス距離依存決定手段
１５０５ 顔領域認識部
１５０６ 顔領域依存決定手段
１９０５ 顔画像情報保持部
１９０６ 被写体顔画像情報取得部
１９０７ 顔画像情報比較部
１９０８ 顔画像情報依存決定手段
１９０９ 応答頻度情報保持手段
１９１０ 応答頻度情報依存決定手段
１９１１ メールアドレス保持手段
１９１２ 撮像画像送信部

Claims (8)

1. 撮像領域の複数の被写体に対して各被写体に適した撮像条件を取得する撮像条件取得部と、
   前記撮像条件に基づいて各被写体を連続的に撮像する撮像部と、
   前記撮像部にて各被写体を撮像する撮像順序を決定する撮像順序決定部と、
   前記決定された撮像順序に応じて前記撮像部における撮像動作を制御する制御部と、
   からなる撮像装置。
2. 前記撮像部は、撮像直前に再度撮像条件を取得する撮像条件再取得手段を有することを特徴とする請求項１に記載の撮像装置。
3. 前記撮像順序決定部は、撮像装置と各被写体のフォーカス距離に応じて撮像順序を決定するフォーカス距離依存決定手段を有することを特徴とする請求項１又は２に記載の撮像装置。
4. 撮像領域の被写体の顔領域を認識する顔領域認識部と、
   前記撮像順序決定部は、撮像領域に占める前記認識した顔領域が大きい順に撮像順序を決定する顔領域依存決定手段と、
   を有することを特徴とする請求項１から３のいずれか一に記載の撮像装置。
5. 顔画像情報を保持する顔画像情報保持部と、
   撮像領域の被写体の顔画像情報である被写体顔画像情報を取得する被写体顔画像情報取得部と、
   前記保持された顔画像情報と、前記取得された被写体顔画像情報とを比較する顔画像情報比較部と、
   前記撮像順序決定部は、前記比較結果に応じて、取得した被写体顔画像情報と保持された顔画像情報とが同一人物であると判断した被写体が存在する場合には、該人物の撮像順序を他の被写体よりも上位にする顔画像情報依存決定手段と、
   を有することを特徴とする請求項１から４のいずれか一に記載の撮像装置。
6. 前記顔画像情報保持部は、顔画像情報とその顔画像情報で識別される人物の写真を撮影した回数、メール回数、電話回数のいずれか一以上の応答頻度を示す応答頻度情報を関連付けて保持する応答頻度情報保持手段と、
   前記撮像順序決定部は、前記比較結果に応じて、取得した被写体顔画像情報と保持された顔画像情報とが同一人物であると判断した被写体が複数存在する場合には、前記応答頻度の多い順に撮像順序を決定する応答頻度情報依存決定手段と、
   を有する請求項５に記載の撮像装置。
7. 前記顔画像情報保持部は、顔画像情報とメールアドレスを関連付けて保持するメールアドレス保持手段と、
   前記比較結果に応じて、取得した被写体顔画像情報と保持された顔画像情報とが同一人物であると判断した被写体が存在する場合には、撮像部で該人物の撮像後に前記顔画像情報に関連付けられたメールアドレスに対して撮像画像を送信する撮像画像送信部と、
   を有する請求項５又は６に記載の撮像装置。
8. 撮像領域の複数の被写体に対して各被写体に適した撮像条件を取得する撮像条件取得ステップと、
   撮像デバイスにて各被写体を撮像する撮像順序を決定する撮像順序決定ステップと、
   前記決定された撮像順序に応じて撮像デバイスにおける撮像動作を制御する制御ステップと、
   前記制御ステップでの制御により、前記撮像条件に基づいて各被写体を連続的に撮像する撮像ステップと、
   からなる撮像方法。

Images