JP4273852B2 - 画像撮影装置、プログラム - Google Patents
画像撮影装置、プログラム Download PDFInfo
- Publication number
- JP4273852B2 JP4273852B2 JP2003182894A JP2003182894A JP4273852B2 JP 4273852 B2 JP4273852 B2 JP 4273852B2 JP 2003182894 A JP2003182894 A JP 2003182894A JP 2003182894 A JP2003182894 A JP 2003182894A JP 4273852 B2 JP4273852 B2 JP 4273852B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- image data
- captured
- similar
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
- Processing Or Creating Images (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
【０００１】
【発明の属する技術分野】
この発明は、画像撮影装置およびそのプログラムに関する。
【０００２】
【従来の技術】
近年、撮影画像を電子データとして様々な記録媒体に記録できるデジタルスチルカメラ等が多く市販されるようになった。また、上記記録媒体の記録容量も年々大容量化が進み、誰もが手軽に、しかも撮影残り枚数を気にすることなく撮影を楽しめるようになってきている。一方で、撮影した画像データが大量になるにつれて、撮影時又は撮影後の画像データの整理についても多くの時間と労力が必要とされるようになり大変な作業となってきている。さらに、気軽に撮影が楽しめる反面、同じような構図での撮影による類似画像データも多くなり、不要な画像データを削除するなどして選別する作業も大変な作業となる。
【０００３】
上記問題を解決するために、例えば、特許文献１には、撮影した画像ファイルを撮影日時データ及び撮影位置データと関連づけ、画像ファイルに関連づけられた撮影日時データ又は撮影位置データ基づいて、画像データを階層構造をもったグループに分類し、表示することができ、さらに、使用者が多数の画像ファイルの中から目的のファイルを容易に選択することができ、階層構造をもったグループに基づいて画像ファイル群をメモリカードに記録することができる画像撮影装置について開示されている。
【０００４】
また、特許文献２には、被写体である人物が身に付けた信号部材からその人物固有のＩＤ情報を採取してその画像データに対応づけて記録し、内蔵メモリ又は記録メディアから画像データを読み出して外部記憶手段に記録する際には、画像データとともに読み出されたＩＤ情報ごとに外部記憶手段にフォルダを作成し、読み出された画像データをＩＤ情報で分類して該当するフォルダに保存する画像データの分類保存方法が開示されている。画像認識手法については、例えば特許文献３に開示されている。
【０００５】
【特許文献１】
特開２００１−２２８５２８号公報
【特許文献２】
特開２００３−０６９９３５号公報
【特許文献３】
特開２００２−００８０４２号公報
【０００６】
【発明が解決しようとする課題】
しかしながら、特許文献１にあっては、撮影した画像ファイルを撮影日時データ及び撮影位置データと関連づけ、画像ファイルに関連づけられた撮影日時データ又は撮影位置データ基づいて、画像データを階層構造をもったグループに分類するため、撮影後に撮影した画像データを整理する場合には、類似の画像データが不要な場合には、結局全ての画像データに目を通して必要な画像データか、不要な画像データかを判断して削除する必要がある。また、撮影時においては、既に同様の画像が撮影済みの場合にも、撮影者は気づかずに撮影を続けてしまう。
【０００７】
また、特許文献２にあっては、被写体である人物の身に付けた信号部材からその人物固有のＩＤ情報を採取してその画像データに対応づけて記録し、内蔵メモリ又は記録メディアから画像データを読み出して外部記憶手段に記録する際には、画像データとともに読み出されたＩＤ情報ごとに外部記憶手段にフォルダを作成し、読み出された画像データをＩＤ情報で分類するため、特許文献１と同様の問題に加え、撮影前にＩＤ情報の登録を行なっておく等の前準備が必要となる。
【０００８】
以上に述べた従来の画像撮影装置、画像整理装置及びプログラムにおける問題点は、撮影した画像データの整理において、撮影時において、既に類似の画像を撮影済みと気づくことなく、類似の画像を数多く撮影してしまうということである。さらに、記録媒体等に記録された大量の画像データの中から、類似した画像から画像状態の善し悪しを判断し、必要とする画像データのみを残しつつ整理するためには多くの時間と労力を費やさなければならないということである。
【０００９】
本発明の課題は、撮影時に既に類似の画像が撮影済みであることを使用者に報知し、不要な類似の画像を撮影しなくて済むようにすることである。
【００１０】
【課題を解決するための手段】
この発明は、カメラ撮影部で撮影された撮影済み画像を記録媒体に記録する画像撮影装置であって、画像撮影時における類似画像チェックの要否を示すモード情報を任意に設定する設定手段と、前記カメラ撮影部での撮影操作時に、前記設定手段で類似画像チェックのチェック要を示すモード情報が設定されているか否かを判別するモード判別手段と、類似画像チェック要を示すモード情報が設定されている場合には、当該撮影操作時に前記カメラ撮影部で撮影された撮影画像の内容を認識し、その撮影画像と類似する撮影済み画像が前記記録媒体に既に記録済みか否かを判別する類似判別手段と、前記類似判別手段で、類似する撮影済み画像が既に記録済みでないと判別された場合には、前記カメラ撮影部で撮影された撮影画像を前記記録媒体に対して新たに記録するよう制御し、類似する撮影済み画像が既に記録済みであると判別された場合には、前記カメラ撮影部で撮影された撮影画像を前記記録媒体に対して記録することを一時的に抑止するよう制御する記録制御手段と、前記記録制御手段で、前記画像の記録が一時的に抑止された際は、前記撮影操作で撮影された撮影画像と類似する画像が既に撮影済みであることを報知する報知手段と、を有することを特徴とする。
【００２８】
【発明の実施の形態】
以下、本発明の実施形態として実施例を図１〜図１１に基づいて説明する。
図１は本実施形態における画像撮影装置の内部構成を示す図である。同図において、画像撮影装置は、ＣＰＵ１１、カメラ撮影部１２、操作部１３、メモリ１４、画像文字認識部１５、表示部１６、画像メモリ部１７、記録媒体１８を有し、これらがバス１９を介して接続され、相互にデータの授受が行なえる構成となっている。
【００２９】
ＣＰＵ１１は中央演算処理部であり、メモリ１４に予め格納されている制御プログラムを実行することでこの画像撮影装置全体の動作を制御する。カメラ撮影部１２は、画像の撮影処理を司る部分で、ＣＰＵ１１からレリーズボタンの押下を通知されると、撮像レンズを介してＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）等の撮像素子上に結像された被写体像を、光電変換して電気信号に変えた後Ａ／Ｄ変換を行い、デジタル画像データにする。
【００３０】
操作部１３は、操作者の操作指示を受け付ける操作ボタン等であり、電源キー、レリーズボタン、種々の設定を行なう為の設定ボタン等から構成されている。操作者がこの操作部１３を操作すると操作内容がＣＰＵ１１に通知され、ＣＰＵ１１はその操作内容に基づいて他の要素の制御処理を行なう。メモリ１４は、ＣＰＵ１１によって実行されるプログラム等を記憶するＲＯＭや、ＣＰＵ１１がワークメモリとして用いるＲＡＭ等から構成されている。画像文字認識部１５は、撮影画像に写っている文字を文字データに変換するものである。尚、この画像文字認識部１５は、専用の回路によって実現しても、ＣＰＵ１１によるソフトウエア処理によって実現しても良い。表示部１６は、液晶モニタやそのドライバ等から構成されており、画像撮影時に撮影画像を表示したり、後述する電子掲示板へ表示させるデータの選択等の設定の際、種々の情報を操作者が確認できるように表示するものである。
【００３１】
画像メモリ部１７は、フラッシュメモリ等で構成される書き換え可能な不揮発性メモリであり、撮影した画像の画像データを記憶する。記録媒体１８は、ＳＤカード、フラッシュメモリカード、スマートメディアカード、メモリースティック、ＰＣカード等のメモリカードであり、画像撮影装置から着脱可能な可搬記録媒体であり、画像撮影装置に装着されるとバス１９に接続される。本実施形態の画像撮影装置は、操作者による操作部１３の操作指示に基づいて、ＣＰＵ１１がメモリ部１４のＲＡＭをワークメモリとして用いながらメモリ部１４内のプログラムを実行することによって、画像撮影装置の他の構成要素を制御して後述する各種処理を実現する。
【００３２】
図２、図３及び図１１は、本発明の実施形態を示すフローチャートである。本発明の実施形態は、図２〜図１０に整理処理の実施例の処理概要を示し、図２及び図１１において類似チェック処理の実施例の処理概要を示している。図２は、整理処理の実施例及び類似チェック処理の実施例の共通処理部を示しており、操作部１３であるシャッタ又は設定用ボタン等の操作がＣＰＵ１１に通知されると、ＣＰＵ１１は、図２に示す通常の撮影処理、図３に示す整理処理、又は図１１に示す類似チェック処理のいずれかの処理に移行する。
【００３３】
以下、図２〜図１０に基づいて、本発明の整理処理の実施例について説明をする。
図２は、操作部１３であるシャッタ及び設定用ボタン等の操作により、使用者が所望する処理に分岐する処理を示している。ＣＰＵ１１は、シャッタ操作が行なわれたことを示す割り込み信号等による通知があった場合には（ステップＳ２０１）、画像撮影を実施し、カメラ撮影部１２により、撮像レンズを介してＣＣＤ等の撮像素子上に結像された被写体像を、光電変換して電気信号に変えた後Ａ／Ｄ変換を行い、デジタル画像データにする（ステップＳ２０２）。デジタル化された画像データは、画像番号と関連づけられて記録媒体１８である例えばＳＤカードやメモリカード等の画像撮影装置から着脱可能な可搬記録媒体に記録される（ステップＳ２０３）。さらに、シャッタ操作が行なわれたことを示す割り込み信号等による通知を受けると、ＣＰＵ１１はステップＳ２０１からステップＳ２０３の処理を繰り返し実行される。
【００３４】
ステップＳ２０１において、ＣＰＵ１１への割り込み信号等による通知が、シャッタ操作を示すものでない場合には、さらに、シャッタハーフ操作を示すものであるかを判別し（ステップＳ２０４）、シャッタハーフ操作の通知である場合には、例えば操作部１３により設定される類似チェックモードの設定がされているかをチェックする（ステップＳ２０５）。類似チェックモードの設定がされていない場合には、モードの切り替え処理（ステップＳ２０９）に処理が移行され、類似チェックモードの設定がされている場合には、画像仮撮影を実施し、カメラ撮影部１２により、撮像レンズを介してＣＣＤ等の撮像素子上に結像された被写体像を、光電変換して電気信号に変えた後Ａ／Ｄ変換を行い、デジタル画像データにする（ステップＳ２０６）。一時的に撮影する仮撮影によりデジタル化された画像データは、画像メモリ部１７に割り当てられている仮画像データを格納する領域（以下、仮メモリとする）に格納される（ステップＳ２０７）。仮画像データが仮メモリに格納されると、ＣＰＵ１１の処理は類似チェック処理（ステップＳ２０８）に移行する。
【００３５】
ステップＳ２０４において、ＣＰＵ１１への割り込み信号等による通知が、シャッタハーフ操作を示すものでない場合、及びステップＳ２０５において類似チェックモードの設定がされていない場合には、モードの切り替え処理（ステップＳ２０９）に処理が移行される。ＣＰＵ１１への割り込み信号等による通知が、モード切り替えの通知である場合には、類似チェックモードの設定がされているかをチェックし（ステップＳ２１０）、類似チェックモードの設定がされている場合には、通常モードに設定が変更され（ステップＳ２１１）、類似チェックモードの設定がされていない場合には、類似チェックモードに設定が変更される（ステップＳ２１２）。通常モード又は類似チェックモードの設定がされると、ＣＰＵ１１は再び操作者からの操作待ち状態（ステップＳ２１３）となる。
【００３６】
ステップＳ２０９において、ＣＰＵ１１への割り込み信号等による通知が、モードの切り替え通知でない場合には（ステップＳ２０９）、操作部１３の整理ボタンが押下されたかをチェックする（ステップＳ２１４）。整理ボタンが押下されていない場合には、再び操作者からの操作待ち状態（ステップＳ２１３）となる。また、整理ボタンが押下された場合には、整理処理に処理が移行される（ステップＳ２１５）。
【００３７】
図２に示すフローチャートにおいて、整理処理（ステップＳ２１５）に処理が移行された場合の処理概要のフローチャートを図３に示す。
整理処理が開始されると（ステップＳ３００）、ＣＰＵ１１は、記録媒体１８である、例えばＳＤカードやメモリカード等の画像撮影装置から着脱可能な可搬記録媒体から撮影済み画像データを読出してメモリ１４のワーク用メモリ領域へ展開する（ステップＳ３０１）。画像データが読み出されると、その読み出された画像データは、図４に示すレイアウト番号テーブルに示す構図レイアウトパターンの画像データと比較され、一致、又は類似と判断される構図レイアウトパターンに対応するレイアウト番号を抽出する（ステップＳ３０２）。ステップＳ３０２により抽出されたレイアウト番号は、メモリ１４に展開されている画像認識テーブル（図５参照）の画像番号に対応するレイアウト番号にセットされる（ステップＳ３０３）。
【００３８】
ここで、画像データの構図レイアウトの認識方法は、従来より一般的に知られている手法をもって実施される。また、以後に記載される画像認識手法についても、従来より一般的に知られている手法をもって実施される。
例えば、図４に示すレイアウト番号テーブルを、メモリ１４に展開する。同図には、レイアウト番号として１から順に連続した番号が付され、それぞれのレイアウト番号に対応した構図レイアウトパターンには、ステップＳ３０１で読み出された画像データと比較するために用いる構図レイアウトのパターンである画像データ、又は構図レイアウトパターンの画像データを格納しているメモリ領域のアドレスが格納される。
【００３９】
構図レイアウトパターンである画像データは、ステップＳ３０１で読み出された画像データと比較するために用いられ、例えば、一人又は複数人の人物について、上半身のみのが撮影されている画像データ、全身が撮影されている画像データ、建物、建物や植物を組み合わせた背景の画像データ等が画像メモリ部１７に格納されている。
【００４０】
ＣＰＵ１１は、以上に述べたメモリ１４に展開されているレイアウト番号テーブル（図４参照）のレイアウト番号に対応する構図レイアウトパターンと、ステップＳ３０１で読み出された画像データとを逐次比較する。比較する際には、構図レイアウトパターンの画像データの形状に沿って、構図レイアウトパターンの画像データにおける各ドットのＲＧＢデータと、ステップＳ３０１で読み出された画像データにおける各ドットのＲＧＢデータとを比較する。比較した結果、画像データに対する構図レイアウトパターン画像データのＲＧＢデータの占有率を計算し、例えば８０％以上であれば一致、又は類似と判断して構図レイアウトパターンに対応するレイアウト番号を抽出する（ステップＳ３０２）。なお、上記占有率は、８０％に限られない。必要に応じて、０％〜１００％の間で適当な閾値を設定すればよい。
【００４１】
ＣＰＵ１１は、ステップＳ３０２により、一致、又は類似と判断された構図レイアウトパターンの画像データに対応したレイアウト番号を、メモリ１４に展開されている画像認識テーブル（図５参照）におけるレイアウト番号にセットする（ステップＳ３０３）。
【００４２】
ここで、図５に示す画像認識テーブルは、図２に示すＳ２０３で撮影された画像データに対応して１から順に番号が付された画像番号、画像番号に対応する画像データと一致、又は類似とステップＳ３０２で判断された図４に示す構図レイアウトパターンの画像データに対応するレイアウト番号、及びその画像データ内に認識される人物数で構成される。
【００４３】
ステップＳ３０２、及びステップＳ３０３により、ステップＳ３０１で読み出された画像データのレイアウト番号が決定されると、ＣＰＵ１１は、次の処理に移行する。ＣＰＵ１１は、ステップＳ３０１によりメモリ１４のワーク用メモリ領域へ展開された画像データについて、ステップＳ３０２、及びステップＳ３０３と同様の画像認識手法により、画像データ内の人物部分を認識し（ステップＳ３０４）、図５に示す画像認識テーブルの人物数に人物数をセットする（ステップＳ３０５）。
【００４４】
ここで、画像データの人物部分の認識方法は、上記にも示したようにステップＳ３０２及びステップＳ３０３と同様に、従来より一般的に知られている手法をもって実施される。
例えば、図４と同様のテーブル、人物番号テーブルを、メモリ１４に展開する。人物テーブルには、人物番号として１から順に連続した番号が付され、それぞれの人物番号に対応した人物パターンには、画像データと比較するために用いる人物パターンである画像データ、又は人物パターンの画像データを格納しているメモリ領域のアドレスが格納される。
【００４５】
人物パターンである画像データは、ステップＳ３０１で読み出された画像データと比較するために用いられ、例えば、正面向きの人物の画像データ、横向きの人物の画像データ、座った状態の人物の画像データ等が画像メモリ部１７に格納されている。
【００４６】
ＣＰＵ１１は、以上に述べたメモリ１４に展開されている人物番号テーブルの人物番号に対応する人物パターンの画像データと、ステップＳ３０１で読み出された画像データとを逐次比較する。比較する際には、人物パターンの画像データの形状に沿って、人物パターンの画像データにおける各ドットのＲＧＢデータと、ステップＳ３０１で読み出された画像データにおける各ドットのＲＧＢデータとを比較する。比較した結果、ステップＳ３０１で読み出された画像データに対する人物パターンの画像データのＲＧＢデータの占有率を計算し、例えば８０％以上であれば一致、又は類似と判断し、人物が撮影されていると判断する（ステップＳ３０４）。なお、上記占有率は、８０％に限られない。必要に応じて、０％〜１００％の間で適当な閾値を設定すればよい。
【００４７】
ＣＰＵ１１は、以上の手法により、順次画像データと人物パターンとを比較することにより、画像データ内に撮影されている人物数をカウントし、図５に示す画像認識テーブルの人物数にデータをセットする（ステップＳ３０５）。
ステップＳ３０６において、ＣＰＵ１１は、ＳＤカードやメモリカード等の画像撮影装置から着脱可能な可搬記録媒体に記録されている撮影済み画像データの全てに対して、ステップＳ３０１からステップＳ３０５の処理が終了したかを判断し、全てが終了していない場合には、再度ステップＳ３０１から処理を実施する（ステップＳ３０６）。
【００４８】
以上の処理によって、メモリ１４に展開されている図５に示す画像認識テーブルが作成され、ステップＳ３０１で読み出された画像データについて、構図レイアウト、及び撮影された人物の人物数が認識されることになる。
全ての画像データについて、ステップＳ３０１からステップＳ３０５の処理が完了すると、ＣＰＵ１１は、メモリ１４に展開されている分類テーブル（図６参照）の作成処理に移行し、分類処理を開始する。
【００４９】
ＣＰＵ１１は、メモリ１４に展開されている図５に示す画像認識テーブルを、同図レイアウト番号、及び人物数に基づいて分類する分類処理を実施し、図６に示す分類テーブルに、レイアウト番号、人物数、及び画像番号をセットする。
例えば、ＣＰＵ１１は、画像認識テーブルの画像番号に沿って、同一のレイアウト番号の画像番号を検索する。図５に示す例では、ＣＰＵ１１によって、レイアウト番号１に対する同一のレイアウト番号の画像番号として、画像番号１、画像番号２、画像番号４、画像番号５、画像番号６、画像番号７、画像番号９が検出される。同一のレイアウト番号の画像番号が検出されると、ＣＰＵ１１は、さらに人物数に基づいて画像番号を分類する。その結果、ＣＰＵ１１により、人物数が２である画像番号として、画像番号１、画像番号５、画像番号６、画像番号７、画像番号９が検出され、図６に示す分類テーブルにセットされている。さらに、人物数が４である画像番号として、画像番号２、画像番号４が図６の分類テーブルにセットされている。同様にして、図５に示す画像認識テーブルにセットされている画像番号全てに対してレイアウト番号、及び人物数に基づいて分類処理が実行され、図６に示す分類テーブルに結果がセットされる（ステップＳ３０７、ステップＳ３０８）。
【００５０】
ステップＳ３０７、及びステップＳ３０８によって分類テーブルが作成されると、ＣＰＵ１１は、メモリ１４に展開されている分類テーブル（図６参照）を参照し、同一分類番号に対して複数の画像番号がセットされているかをチェックし（図示せず）、同一分類番号に対して複数の画像番号がセットされている場合には、さらに細分類処理を開始する。細分類処理を実施するにあたって、図６に示す分類テーブル、及び図７に示す細分類テーブルが使用される。
【００５１】
ステップＳ３０９〜ステップＳ３１１では、ステップＳ３０７及びステップＳ３０８で処理された分類テーブルをさらに、画像データ内に撮影されている人物が同一人物であるかを判別し、同一人物が撮影されている画像データ毎に細分類される。
【００５２】
ステップＳ３０９において、ＣＰＵ１１は、メモリ１４に展開されている図６に示す分類テーブルの分類番号を参照する。次に、分類番号に対応する画像番号が複数セットされているかを判別する。画像番号が複数セットされていない場合には（分類番号に対応する画像番号が１対１の場合には）、ＣＰＵ１１は、次の分類番号を参照し、分類番号に対応した画像番号が複数セットされているかをチェックする。
【００５３】
分類テーブルの分類番号に対応する画像番号が複数セットされている場合には、ＣＰＵ１１は、分類テーブルの分類番号にセットされている各々の画像データに対して、順次画像データ内の人物部分の比較処理を実行する（ステップＳ３１０）。
【００５４】
ここで、人物部分の比較処理は、例えば次の処理手順によって実施される。すなわち、分類番号にセットされた１の画像データに対して、上述の公知技術によって画像データ内の人物部分を認識して抽出する。
また、画像データの人物部分の比較処理は、ステップＳ３０４でも記述したように、従来より一般的に知られている手法をもって実施される。
【００５５】
例えば、図４と同様のテーブル、人物番号テーブルを、メモリ１４に展開する。人物テーブルには、人物番号として１から順に連続した番号が付され、それぞれの人物番号に対応した人物パターンには、分類番号にセットされた１の画像データと比較するために用いる人物パターンである画像データ、又は人物パターンの画像データを格納しているメモリ領域のアドレスが格納される。
【００５６】
人物パターンである画像データは、分類番号にセットされた１の画像データと比較するために用いられ、例えば、正面向きの人物の画像データ、横向きの人物の画像データ、座った状態の人物の画像データ等が画像メモリ部１７に格納されている。
【００５７】
ＣＰＵ１１は、以上に述べたメモリ１４に展開されている人物番号テーブルの人物番号に対応する人物パターンの画像データと、分類番号にセットされた１の画像データとを逐次比較する。比較する際には、人物パターンの画像データの形状に沿って、人物パターンの画像データにおける各ドットのＲＧＢデータと、分類番号にセットされた１の画像データにおける各ドットのＲＧＢデータとを比較する。比較した結果、撮影された画像データに対する人物パターンの画像データのＲＧＢデータの占有率を計算し、例えば８０％以上であれば一致、又は類似と判断し、類似番号にセットされた１の画像データに対する人物パターンの画像データが特定される。同様にして、同一の分類番号にセットされている他の画像データ対しても人物パターンの画像データを特定する。
【００５８】
人物パターンの画像データが特定されると、ＣＰＵ１１は、分類番号にセットされた１の画像データに対する人物パターンの画像データと、同一の分類番号にセットされた他の画像データに対する人物パターンに対する画像データとが一致するかを判別することにより、同一人物であるかを判別する（ステップＳ３１０）。なお、上記占有率は、８０％に限られない。必要に応じて、０％〜１００％の間で適当な閾値を設定すればよい。
【００５９】
次に、同一分類番号にセットされた上記比較処理をしていない他の画像データに対しても、画像データ内の人物部分を認識して抽出する。同一分類番号内の１の画像データと上記他の画像データとを、例えば抽出された人物部分の形状、色情報（画像データにおけるＲＧＢデータ）等で比較し、同一人物かを判断する。同一人物であると判断された場合には、上記分類番号内の１の画像データと同じ細分類テーブルの細分類番号に画像番号がセットされる。同一分類番号内の全ての画像データに対して人物比較が終了すると、ＣＰＵ１１は、次の分類番号を参照し、画像番号が複数セットされているかを判別する処理を実施し、分類番号内に複数の画像番号がセットされている場合には、上記人物部分の比較処理が実施される。
【００６０】
以上のようにして、図６に示す分類テーブルにセットされている分類番号全てに対して人物部分比較処理が実施され、図７に示す細分類テーブルに示すデータがセットされる（ステップＳ３１１）。
例えば、図７の例では、細分類番号１には、画像番号１、画像番号５、画像番号７がセットされ、細分類番号２には、画像番号６、画像番号９がセットされている。
【００６１】
これは、図６に示す分類テーブルの分類番号１にセットされている画像番号全てに対して人物部分の比較処理を行なわれた結果、画像番号１、画像番号５、画像番号７の画像データには、同一のレイアウト（レイアウト番号１）で、同一の人物が２人撮影されていると判断されたことを示し、同様に、画像番号６、画像番号９の画像データには、同一のレイアウト（レイアウト番号１）で、細分類番号１の画像データにある人物とは異なる人物が２人撮影されていると判断されたことを示している。
【００６２】
以上に述べたステップＳ３１１までの処理によって、撮影された画像データは、同一の構図レイアウト、同一の人物（同じ人数）が撮影された画像データに分類される。ステップＳ３１２では、図７に示す細分類テーブルの各細分類番号にセットされている画像データ群について、画像状態の評価処理が実施される。画像状態を評価するにあたっては、例えば画像データ内に撮影されている人物部分の顔の画像状態で評価できる。画像状態の評価処理を実施するにあたっては、図７に示す細分類テーブル、図８に示す顔評価テーブル、及び図９に示す画像評価テーブルが使用される。
【００６３】
ＣＰＵ１１は、メモリ１４に展開されている細分類テーブル（図７参照）の細分類番号を参照し、細分類番号にセットされている複数の画像データの内から１つの画像データを選択する。ステップＳ３１０と同様に、従来技術により、選択された画像データに対して、人物部分の顔部分が認識され抽出される。
【００６４】
本実施例では、顔部分の評価に際して図８に示す顔評価テーブルを使用して、顔部分の撮影状態を評価する。画像メモリ部１７には、図８の顔評価テーブルにある「方向」（正面向きの状態、斜め向きの状態）、「隠れ度」（全面露出の状態、全面の３／４露出状態）、「開眼度」（目を開けた状態）について、比較するためのパターン画像データが格納されている。
【００６５】
また、顔部の評価に際しては、図８に示す顔評価テーブルの評価項目にあるように、「方向」にあっては、正面向きの状態の場合には３、斜め向きの状態の場合には１、その他の状態の場合には０とし、「隠れ度」にあっては、顔全面が露出されている状態の場合には３、顔全面の３／４が露出している状態の場合には１、その他の状態では０とし、また「開眼度」にあっては、目が開いた状態（良の状態）の場合には２、その他の状態（悪の状態）には０として点数を付し、これらの点数の合計点によって、顔部分の撮影状態が評価される。
【００６６】
顔部分の画像データが抽出されると、抽出された顔部分の画像データは順次、図８に示す顔評価テーブルの顔部番号と関連付けられる。顔部番号に対応する顔部画像データの各々は、ＣＰＵ１１によって、画像メモリ部１７に格納されている、「方向」（正面向きの状態、斜め向きの状態）、「隠れ度」（全面露出の状態、全面の３／４露出状態）、「開眼度」（目を開けた状態）について比較するためのパターン画像データと、形状、色情報（ＲＧＢデータ）等とが比較され、その占有率が、例えば８０％以上の場合には、一致又は類似と判断された上記比較のためのパターン画像データに対応する点数を図８に示す顔評価テーブルにセットされていく。なお、上記占有率は、８０％に限られない。必要に応じて、０％〜１００％の間で適当な閾値を設定すればよい。
【００６７】
図８には、細分類テーブル（図７参照）の細分類番号１にセットされている画像番号１について顔部の撮影状態を評価した結果が示されている。画像番号１には、２人の人物が撮影されているため（図７細分類テーブル「人物数」参照）、メモリ１４に展開されている顔評価テーブルには、顔部番号１と顔部番号２が抽出されてセットされている。顔部番号１の画像データは、評価項目である「方向」にあっては、斜め向き状態のパターン画像データと一致又は類似であると判断され、「隠れ度」にあっては、全面露出の状態のパターン画像データと一致又は類似であると判断され、また、「開眼度」にあっては、目を開けた状態のパターン画像データと一致又は類似とは判断されなかったことを表している。したがって、顔部番号１の評価点数は４となる。同様にして、顔部番号２の画像データに対しても評価され、評価点数は６となっている。
【００６８】
顔評価テーブルへのセットが完了すると、ＣＰＵ１１は、顔部番号毎の合計点を算出し、さらに、顔部番号毎の合計点の総和（画像データの総合評価点）を算出して、メモリ１４に展開されている図９に示す画像評価テーブルの画像番号に対応する画像データの総合評価点にセットする。
【００６９】
図９に示す画像評価テーブルの例では、細分類テーブル（図７参照）にある細分類番号１にセットされている画像番号１、画像番号５、及び画像番号７に対して、上記の説明と同様に顔評価テーブル（図８参照）を使用して画像状態を評価した結果を示している。
【００７０】
以上に述べた画像状態の評価処理が、図７に示す細分類テーブルにセットされている全ての細分類番号について実施される（ステップＳ３１２）。
ステップＳ３１２によって、細分類番号単位での各画像の画像状態の評価が完了すると、ＣＰＵ１１は、メモリ１４に展開されている画像評価テーブルを「総合評価点」の高い順にソートし（ステップＳ３１３）、細分類番号単位で、表示部１６に画像データを表示する（ステップＳ３１４）。ここで、本発明では、報知手段として、画像データ等の表示部１６への表示によって使用者への報知を行なっているが、音声による報知でもよい。
【００７１】
ＣＰＵ１１は、メモリ１４に展開されている画像評価テーブル（図９参照）の「総合評価点」の高い画像番号を整理対象として自動選択する（ステップＳ３１５）。整理対象の画像番号を選択すると、ＣＰＵ１１は、選択された画像番号について、整理してもよいかを使用者に問い合わせを行なうため、例えば表示部１６にその旨表示し、操作部１３からの指示待ち状態となる（ステップＳ３１６）。整理対象の画像番号が、選択された画像番号でない場合には、使用者により整理対象の画像番号が変更され、ＣＰＵ１１は、再度確認を行なうために、例えば表示部１６にその旨表示して、操作部１３からの指示待ち状態となる（ステップＳ３１７）。
【００７２】
ＣＰＵ１１は、使用者により、操作部１３から整理ＯＫの通知を受けると、選択されている画像番号に対応する画像データを残し、それ以外の画像データを全て削除する（ステップＳ３１８）。画像データの削除が終了し、画像データの整理処理が終了すると、ＣＰＵ１１は、図２に示すステップＳ２００において、使用者からの操作待ち状態となる。
【００７３】
以上の説明において、ステップＳ３０２における構図レイアウトを認識する処理、ステップＳ３０４における画像内の人物部分を認識する処理、ステップＳ３１０における指定分類内の各画像内で人物部分を比較する処理、ステップＳ３１２における細分類単位で各画像データの画像状態を評価する処理は、本実施例に記述した手法に限らない。画像データの認識処理は、従来より公知な手法（例えば、特許文献３を参照）を用いて実施可能である。また、以下に説明するステップＳ１１０１における仮撮影画像から構図レイアウトを認識する処理、ステップＳ１１０３における構図レイアウトを認識する処理、ステップＳ１１０８における仮撮影画像から人物部分を認識する処理、ステップＳ１１０９における類似画像データから人物部分を認識する処理においても同様に、従来より公知である手法（例えば、特許文献３を参照）を用いて実施可能である。
【００７４】
図３のステップＳ３０２等の画像認識処理は、あらかじめ決められた構図レイアウトに対応したレイアウト番号を決定することができればよく、ステップＳ３０２に記載した手法に限られない、例えば、明るさの急変する部分（エッジ）を特徴量として抽出するエッジ法により、撮影された画像データ及び構図レイアウトパターンの画像データのエッジを抽出し、両画像データのエッジを比較してレイアウト番号を決定してもよい。
【００７５】
ステップＳ３１５において、整理対象として自動選択される画像番号は、例えば最も「総合評価点」の高い画像番号でもよく、「総合評価点」に閾値を設定しておき、「総合評価点」が閾値以上のものを整理対象として選択するようにしてもよい。
【００７６】
ステップＳ３１２における細分類単位で各画像データの画像状態を評価するに際して、本実施例では、画像データ内に撮影された人物部分の内、顔の撮影状態に基づいて評価を実施したが、例えば、人物全体の撮影状態や構図レイアウトの撮影状態等、画像データ内に撮影された他の部分に基づいて評価を実施してもよい。また、図８に示す顔評価テーブルにおける評価項目についても本実施例で示した「方向」、「隠れ度」、「開眼度」に限らない。評価の精度や、カメラの処理能力等を考慮して評価項目を設定すればよい。
【００７７】
図１１は、本発明の類似チェック処理の実施例について示している。以下、図に基づいて説明をする。同図に示すフローチャートは、類似チェック処理（ステップＳ２０８）に処理が移行された場合の処理概要のフローチャートである。
類似チェック処理が開始されると（ステップＳ１１００）、ステップＳ１１０１では、ＣＰＵ１１によって、仮メモリに記憶されている画像データ（ステップＳ２０７）から、構図レイアウトが認識される。構図レイアウトを認識する手段は、図３の例えばＳ３０２での処理と同様に、従来より一般的に知られている手法をもって実施される。
【００７８】
例えば、図４に示すレイアウト番号テーブルを、あらかじめ用意しておく。同図には、レイアウト番号として１から順に連続した番号を付し、それぞれのレイアウト番号に対応した構図レイアウトパターンには、撮影された画像データと比較するために用いる構図レイアウトのパターンである画像データ、又は構図レイアウトパターンの画像データを格納しているメモリ領域のアドレスが格納される。
【００７９】
また、撮影された画像データと比較するために用いる構図レイアウトのパターンである画像データには、例えば、一人又は複数人の人物について、上半身のみのが撮影されている画像データ、全身が撮影されている画像データ、建物、建物や植物を含めた背景の画像データ等が画像メモリ部１７に格納されている。
【００８０】
ＣＰＵ１１は、以上に述べたメモリ１４に展開されているレイアウト番号テーブルのレイアウト番号に対応する構図レイアウトパターンと、撮影された画像データとを逐次比較する。比較する際には、構図レイアウトパターンの画像データの形状に沿って、撮影された画像データの各ドットのＲＧＢデータと、構図レイアウトのパターン画像データの各ドットのＲＧＢデータとを比較する。比較した結果、撮影された画像データに対する構図レイアウトパターン画像データのＲＧＢデータの占有率を計算し、例えば８０％以上であれば一致、又は類似と判断し構図レイアウトが特定される（ステップＳ１１０１）。なお、上記占有率は、８０％に限らない。必要に応じて、０％〜１００％の間で適当な閾値を設定すればよい。
【００８１】
さらに、ＣＰＵ１１は、既に記録媒体１８に記録済みの画像データを画像メモリ部１７等に読出し（ステップＳ１１０２）、ステップＳ１１０１と同様の処理により、構図レイアウトを認識する（ステップＳ１１０３）。
ＣＰＵ１１は、ステップＳ１１０１によって特定された構図レイアウトパターン及び、ステップＳ１１０３によって特定された構図レイアウトパターンとが一致又は類似であるかを判断し（ステップＳ１１０４）、一致又は類似でない場合には、ステップＳ１１０６に処理が移行する。上記構図レイアウトパターンが一致又は類似である場合には、撮影済み画像番号をメモリ１４に記憶し、ステップＳ１１０６にＣＰＵ１１の処理が移行される。ステップＳ１１０６において、ＣＰＵ１１は、記録媒体１８に記録済みの全ての画像データについて構図レイアウトの類似チェックが実施されたかを判別し、全ての画像データについて処理が完了していない場合には、ステップＳ１１０２に処理が戻り、再度ステップＳ１１０２〜ステップＳ１１０６の処理が実行される。
【００８２】
ステップＳ１１０６において、仮撮影画像の構図レイアウトと全ての撮影済み画像の構図レイアウトとの類似チェック処理が終了すると、ＣＰＵ１１は、構図レイアウトが類似の画像データの画像番号がメモリ１４に記憶されているかを判別する（ステップＳ１１０７）。メモリ１４に構図レイアウトが類似の画像データの画像番号が記憶されていない場合には、ＣＰＵ１１は、ステップＳ１１１６へと処理が移行する。メモリ１４に構図レイアウトが類似の画像データの画像番号が記憶されている場合には、さらに、仮撮影画像データの人物部分と、メモリ１４記憶されている全ての構図レイアウト類似画像データの人物部分との類似チェック処理が、ＣＰＵ１１によって実施される。
【００８３】
ステップＳ１１０８において、ステップＳ３０４と同様の手法によって、仮撮影画像から人物部分を認識し人物パターンの画像データが特定される。さらに、ＣＰＵ１１は、メモリ１４に記憶されている１の類似画像データからステップＳ３０４と同様の処理によって、人物部分を認識して人物部パターンを特定する。ステップＳ１１０８によって特定された人物パターンとステップＳ１１０９によって特定された人物パターンとが比較され、同一人物であるかが判断される（ステップＳ１１１０）。
【００８４】
ステップＳ１１１０において、仮撮影画像の人物部分と、メモリ１４に記憶されている類似画像データ（ステップＳ１１０４によって抽出した撮影済み画像番号に対応する画像データ）の人物部分とが同一人物であると判断されると、ＣＰＵ１１は、該当する類似画像データの画像番号を、メモリ１４に記憶する（ステップＳ１１１１）。さらに、ＣＰＵ１１は、メモリ１４に他の類似画像番号が記憶されているかをチェックし（ステップＳ１１１２）、他に類似画像番号が記憶されている場合には、ステップＳ１１０９に処理が移行し、再度ステップＳ１１０９からステップＳ１１１２の処理を実行する。
【００８５】
メモリ１４に記憶されている類似画像番号について、同一人物のチェックが完了すると、ＣＰＵ１１は、ステップＳ１１１３に処理が移行され、表示部１６に類似画像データ有りのメッセージ又は画像データ等を表示し、使用者に通知する。ＣＰＵ１１は、表示部１６へのメッセージ等の表示後、例えば図１０に示すように類似画像データを表示する（ステップＳ１１１４）。ＣＰＵ１１は、類似画像データの表示後、使用者からのシャッタ操作の通知があるかをチェックし（ステップＳ１１１５）、シャッタ操作である場合には、仮メモリ内に記録されている仮画像データを、記録媒体１８に記憶する。
【００８６】
ステップＳ１１１７において、ＣＰＵ１１は、シャッタ操作でない場合には、仮メモリ内に記憶されている仮画像データを消去し（ステップＳ１１１７）、類似チェック処理を終了して（ステップＳ１１１８）、図２に示すステップＳ２０１の処理に移行する。
【００８７】
図３の実施例に示した整理処理装置は、デジタルスチルカメラ等の撮影機能を必ずしも必要としない。例えば、パーソナルコンピュータ等を用いて、パーソナルコンピュータ等に接続された記録媒体に記録された画像データに対して整理処理を実現させてもよい。
【００８８】
以上に説明した実施例では、整理処理及び類似チェック処理について、１つの処理の一部として記載しているが、整理処理のみの機能、又は類似チェック処理のみの機能を有する画像撮影装置、画像整理装置、及びプログラムであってもよい。
【００９０】
【発明の効果】
本発明によると、撮影時に、既に類似画像を撮影してしまっていることを使用者に通知することにより、類似画像の撮影を未然に防止できるという効果を発揮するものである。
【図面の簡単な説明】
【図１】本実施形態における画像撮影装置の内部構成を示す図である。
【図２】本発明の実施形態の処理概要を示すフローチャートである。
【図３】本発明の整理処理の処理概要を示すフローチャートである。
【図４】レイアウト番号テーブルを示す図である。
【図５】画像認識テーブルを示す図である。
【図６】分類テーブルを示す図である。
【図７】細分類テーブルを示す図である。
【図８】顔評価テーブルを示す図である。
【図９】画像評価テーブルを示す図である。
【図１０】細分類画像の表示例を示す図である。
【図１１】本発明の類似チェック処理の処理概要を示すフローチャートである。
【符号の説明】
１１・・・ＣＰＵ
１２・・・カメラ撮影部
１３・・・操作部
１４・・・メモリ部
１５・・・画像文字認識部
１６・・・表示部
１７・・・画像メモリ部
１８・・・記録媒体部
１９・・・バス
【発明の属する技術分野】
この発明は、画像撮影装置およびそのプログラムに関する。
【０００２】
【従来の技術】
近年、撮影画像を電子データとして様々な記録媒体に記録できるデジタルスチルカメラ等が多く市販されるようになった。また、上記記録媒体の記録容量も年々大容量化が進み、誰もが手軽に、しかも撮影残り枚数を気にすることなく撮影を楽しめるようになってきている。一方で、撮影した画像データが大量になるにつれて、撮影時又は撮影後の画像データの整理についても多くの時間と労力が必要とされるようになり大変な作業となってきている。さらに、気軽に撮影が楽しめる反面、同じような構図での撮影による類似画像データも多くなり、不要な画像データを削除するなどして選別する作業も大変な作業となる。
【０００３】
上記問題を解決するために、例えば、特許文献１には、撮影した画像ファイルを撮影日時データ及び撮影位置データと関連づけ、画像ファイルに関連づけられた撮影日時データ又は撮影位置データ基づいて、画像データを階層構造をもったグループに分類し、表示することができ、さらに、使用者が多数の画像ファイルの中から目的のファイルを容易に選択することができ、階層構造をもったグループに基づいて画像ファイル群をメモリカードに記録することができる画像撮影装置について開示されている。
【０００４】
また、特許文献２には、被写体である人物が身に付けた信号部材からその人物固有のＩＤ情報を採取してその画像データに対応づけて記録し、内蔵メモリ又は記録メディアから画像データを読み出して外部記憶手段に記録する際には、画像データとともに読み出されたＩＤ情報ごとに外部記憶手段にフォルダを作成し、読み出された画像データをＩＤ情報で分類して該当するフォルダに保存する画像データの分類保存方法が開示されている。画像認識手法については、例えば特許文献３に開示されている。
【０００５】
【特許文献１】
特開２００１−２２８５２８号公報
【特許文献２】
特開２００３−０６９９３５号公報
【特許文献３】
特開２００２−００８０４２号公報
【０００６】
【発明が解決しようとする課題】
しかしながら、特許文献１にあっては、撮影した画像ファイルを撮影日時データ及び撮影位置データと関連づけ、画像ファイルに関連づけられた撮影日時データ又は撮影位置データ基づいて、画像データを階層構造をもったグループに分類するため、撮影後に撮影した画像データを整理する場合には、類似の画像データが不要な場合には、結局全ての画像データに目を通して必要な画像データか、不要な画像データかを判断して削除する必要がある。また、撮影時においては、既に同様の画像が撮影済みの場合にも、撮影者は気づかずに撮影を続けてしまう。
【０００７】
また、特許文献２にあっては、被写体である人物の身に付けた信号部材からその人物固有のＩＤ情報を採取してその画像データに対応づけて記録し、内蔵メモリ又は記録メディアから画像データを読み出して外部記憶手段に記録する際には、画像データとともに読み出されたＩＤ情報ごとに外部記憶手段にフォルダを作成し、読み出された画像データをＩＤ情報で分類するため、特許文献１と同様の問題に加え、撮影前にＩＤ情報の登録を行なっておく等の前準備が必要となる。
【０００８】
以上に述べた従来の画像撮影装置、画像整理装置及びプログラムにおける問題点は、撮影した画像データの整理において、撮影時において、既に類似の画像を撮影済みと気づくことなく、類似の画像を数多く撮影してしまうということである。さらに、記録媒体等に記録された大量の画像データの中から、類似した画像から画像状態の善し悪しを判断し、必要とする画像データのみを残しつつ整理するためには多くの時間と労力を費やさなければならないということである。
【０００９】
本発明の課題は、撮影時に既に類似の画像が撮影済みであることを使用者に報知し、不要な類似の画像を撮影しなくて済むようにすることである。
【００１０】
【課題を解決するための手段】
この発明は、カメラ撮影部で撮影された撮影済み画像を記録媒体に記録する画像撮影装置であって、画像撮影時における類似画像チェックの要否を示すモード情報を任意に設定する設定手段と、前記カメラ撮影部での撮影操作時に、前記設定手段で類似画像チェックのチェック要を示すモード情報が設定されているか否かを判別するモード判別手段と、類似画像チェック要を示すモード情報が設定されている場合には、当該撮影操作時に前記カメラ撮影部で撮影された撮影画像の内容を認識し、その撮影画像と類似する撮影済み画像が前記記録媒体に既に記録済みか否かを判別する類似判別手段と、前記類似判別手段で、類似する撮影済み画像が既に記録済みでないと判別された場合には、前記カメラ撮影部で撮影された撮影画像を前記記録媒体に対して新たに記録するよう制御し、類似する撮影済み画像が既に記録済みであると判別された場合には、前記カメラ撮影部で撮影された撮影画像を前記記録媒体に対して記録することを一時的に抑止するよう制御する記録制御手段と、前記記録制御手段で、前記画像の記録が一時的に抑止された際は、前記撮影操作で撮影された撮影画像と類似する画像が既に撮影済みであることを報知する報知手段と、を有することを特徴とする。
【００２８】
【発明の実施の形態】
以下、本発明の実施形態として実施例を図１〜図１１に基づいて説明する。
図１は本実施形態における画像撮影装置の内部構成を示す図である。同図において、画像撮影装置は、ＣＰＵ１１、カメラ撮影部１２、操作部１３、メモリ１４、画像文字認識部１５、表示部１６、画像メモリ部１７、記録媒体１８を有し、これらがバス１９を介して接続され、相互にデータの授受が行なえる構成となっている。
【００２９】
ＣＰＵ１１は中央演算処理部であり、メモリ１４に予め格納されている制御プログラムを実行することでこの画像撮影装置全体の動作を制御する。カメラ撮影部１２は、画像の撮影処理を司る部分で、ＣＰＵ１１からレリーズボタンの押下を通知されると、撮像レンズを介してＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）等の撮像素子上に結像された被写体像を、光電変換して電気信号に変えた後Ａ／Ｄ変換を行い、デジタル画像データにする。
【００３０】
操作部１３は、操作者の操作指示を受け付ける操作ボタン等であり、電源キー、レリーズボタン、種々の設定を行なう為の設定ボタン等から構成されている。操作者がこの操作部１３を操作すると操作内容がＣＰＵ１１に通知され、ＣＰＵ１１はその操作内容に基づいて他の要素の制御処理を行なう。メモリ１４は、ＣＰＵ１１によって実行されるプログラム等を記憶するＲＯＭや、ＣＰＵ１１がワークメモリとして用いるＲＡＭ等から構成されている。画像文字認識部１５は、撮影画像に写っている文字を文字データに変換するものである。尚、この画像文字認識部１５は、専用の回路によって実現しても、ＣＰＵ１１によるソフトウエア処理によって実現しても良い。表示部１６は、液晶モニタやそのドライバ等から構成されており、画像撮影時に撮影画像を表示したり、後述する電子掲示板へ表示させるデータの選択等の設定の際、種々の情報を操作者が確認できるように表示するものである。
【００３１】
画像メモリ部１７は、フラッシュメモリ等で構成される書き換え可能な不揮発性メモリであり、撮影した画像の画像データを記憶する。記録媒体１８は、ＳＤカード、フラッシュメモリカード、スマートメディアカード、メモリースティック、ＰＣカード等のメモリカードであり、画像撮影装置から着脱可能な可搬記録媒体であり、画像撮影装置に装着されるとバス１９に接続される。本実施形態の画像撮影装置は、操作者による操作部１３の操作指示に基づいて、ＣＰＵ１１がメモリ部１４のＲＡＭをワークメモリとして用いながらメモリ部１４内のプログラムを実行することによって、画像撮影装置の他の構成要素を制御して後述する各種処理を実現する。
【００３２】
図２、図３及び図１１は、本発明の実施形態を示すフローチャートである。本発明の実施形態は、図２〜図１０に整理処理の実施例の処理概要を示し、図２及び図１１において類似チェック処理の実施例の処理概要を示している。図２は、整理処理の実施例及び類似チェック処理の実施例の共通処理部を示しており、操作部１３であるシャッタ又は設定用ボタン等の操作がＣＰＵ１１に通知されると、ＣＰＵ１１は、図２に示す通常の撮影処理、図３に示す整理処理、又は図１１に示す類似チェック処理のいずれかの処理に移行する。
【００３３】
以下、図２〜図１０に基づいて、本発明の整理処理の実施例について説明をする。
図２は、操作部１３であるシャッタ及び設定用ボタン等の操作により、使用者が所望する処理に分岐する処理を示している。ＣＰＵ１１は、シャッタ操作が行なわれたことを示す割り込み信号等による通知があった場合には（ステップＳ２０１）、画像撮影を実施し、カメラ撮影部１２により、撮像レンズを介してＣＣＤ等の撮像素子上に結像された被写体像を、光電変換して電気信号に変えた後Ａ／Ｄ変換を行い、デジタル画像データにする（ステップＳ２０２）。デジタル化された画像データは、画像番号と関連づけられて記録媒体１８である例えばＳＤカードやメモリカード等の画像撮影装置から着脱可能な可搬記録媒体に記録される（ステップＳ２０３）。さらに、シャッタ操作が行なわれたことを示す割り込み信号等による通知を受けると、ＣＰＵ１１はステップＳ２０１からステップＳ２０３の処理を繰り返し実行される。
【００３４】
ステップＳ２０１において、ＣＰＵ１１への割り込み信号等による通知が、シャッタ操作を示すものでない場合には、さらに、シャッタハーフ操作を示すものであるかを判別し（ステップＳ２０４）、シャッタハーフ操作の通知である場合には、例えば操作部１３により設定される類似チェックモードの設定がされているかをチェックする（ステップＳ２０５）。類似チェックモードの設定がされていない場合には、モードの切り替え処理（ステップＳ２０９）に処理が移行され、類似チェックモードの設定がされている場合には、画像仮撮影を実施し、カメラ撮影部１２により、撮像レンズを介してＣＣＤ等の撮像素子上に結像された被写体像を、光電変換して電気信号に変えた後Ａ／Ｄ変換を行い、デジタル画像データにする（ステップＳ２０６）。一時的に撮影する仮撮影によりデジタル化された画像データは、画像メモリ部１７に割り当てられている仮画像データを格納する領域（以下、仮メモリとする）に格納される（ステップＳ２０７）。仮画像データが仮メモリに格納されると、ＣＰＵ１１の処理は類似チェック処理（ステップＳ２０８）に移行する。
【００３５】
ステップＳ２０４において、ＣＰＵ１１への割り込み信号等による通知が、シャッタハーフ操作を示すものでない場合、及びステップＳ２０５において類似チェックモードの設定がされていない場合には、モードの切り替え処理（ステップＳ２０９）に処理が移行される。ＣＰＵ１１への割り込み信号等による通知が、モード切り替えの通知である場合には、類似チェックモードの設定がされているかをチェックし（ステップＳ２１０）、類似チェックモードの設定がされている場合には、通常モードに設定が変更され（ステップＳ２１１）、類似チェックモードの設定がされていない場合には、類似チェックモードに設定が変更される（ステップＳ２１２）。通常モード又は類似チェックモードの設定がされると、ＣＰＵ１１は再び操作者からの操作待ち状態（ステップＳ２１３）となる。
【００３６】
ステップＳ２０９において、ＣＰＵ１１への割り込み信号等による通知が、モードの切り替え通知でない場合には（ステップＳ２０９）、操作部１３の整理ボタンが押下されたかをチェックする（ステップＳ２１４）。整理ボタンが押下されていない場合には、再び操作者からの操作待ち状態（ステップＳ２１３）となる。また、整理ボタンが押下された場合には、整理処理に処理が移行される（ステップＳ２１５）。
【００３７】
図２に示すフローチャートにおいて、整理処理（ステップＳ２１５）に処理が移行された場合の処理概要のフローチャートを図３に示す。
整理処理が開始されると（ステップＳ３００）、ＣＰＵ１１は、記録媒体１８である、例えばＳＤカードやメモリカード等の画像撮影装置から着脱可能な可搬記録媒体から撮影済み画像データを読出してメモリ１４のワーク用メモリ領域へ展開する（ステップＳ３０１）。画像データが読み出されると、その読み出された画像データは、図４に示すレイアウト番号テーブルに示す構図レイアウトパターンの画像データと比較され、一致、又は類似と判断される構図レイアウトパターンに対応するレイアウト番号を抽出する（ステップＳ３０２）。ステップＳ３０２により抽出されたレイアウト番号は、メモリ１４に展開されている画像認識テーブル（図５参照）の画像番号に対応するレイアウト番号にセットされる（ステップＳ３０３）。
【００３８】
ここで、画像データの構図レイアウトの認識方法は、従来より一般的に知られている手法をもって実施される。また、以後に記載される画像認識手法についても、従来より一般的に知られている手法をもって実施される。
例えば、図４に示すレイアウト番号テーブルを、メモリ１４に展開する。同図には、レイアウト番号として１から順に連続した番号が付され、それぞれのレイアウト番号に対応した構図レイアウトパターンには、ステップＳ３０１で読み出された画像データと比較するために用いる構図レイアウトのパターンである画像データ、又は構図レイアウトパターンの画像データを格納しているメモリ領域のアドレスが格納される。
【００３９】
構図レイアウトパターンである画像データは、ステップＳ３０１で読み出された画像データと比較するために用いられ、例えば、一人又は複数人の人物について、上半身のみのが撮影されている画像データ、全身が撮影されている画像データ、建物、建物や植物を組み合わせた背景の画像データ等が画像メモリ部１７に格納されている。
【００４０】
ＣＰＵ１１は、以上に述べたメモリ１４に展開されているレイアウト番号テーブル（図４参照）のレイアウト番号に対応する構図レイアウトパターンと、ステップＳ３０１で読み出された画像データとを逐次比較する。比較する際には、構図レイアウトパターンの画像データの形状に沿って、構図レイアウトパターンの画像データにおける各ドットのＲＧＢデータと、ステップＳ３０１で読み出された画像データにおける各ドットのＲＧＢデータとを比較する。比較した結果、画像データに対する構図レイアウトパターン画像データのＲＧＢデータの占有率を計算し、例えば８０％以上であれば一致、又は類似と判断して構図レイアウトパターンに対応するレイアウト番号を抽出する（ステップＳ３０２）。なお、上記占有率は、８０％に限られない。必要に応じて、０％〜１００％の間で適当な閾値を設定すればよい。
【００４１】
ＣＰＵ１１は、ステップＳ３０２により、一致、又は類似と判断された構図レイアウトパターンの画像データに対応したレイアウト番号を、メモリ１４に展開されている画像認識テーブル（図５参照）におけるレイアウト番号にセットする（ステップＳ３０３）。
【００４２】
ここで、図５に示す画像認識テーブルは、図２に示すＳ２０３で撮影された画像データに対応して１から順に番号が付された画像番号、画像番号に対応する画像データと一致、又は類似とステップＳ３０２で判断された図４に示す構図レイアウトパターンの画像データに対応するレイアウト番号、及びその画像データ内に認識される人物数で構成される。
【００４３】
ステップＳ３０２、及びステップＳ３０３により、ステップＳ３０１で読み出された画像データのレイアウト番号が決定されると、ＣＰＵ１１は、次の処理に移行する。ＣＰＵ１１は、ステップＳ３０１によりメモリ１４のワーク用メモリ領域へ展開された画像データについて、ステップＳ３０２、及びステップＳ３０３と同様の画像認識手法により、画像データ内の人物部分を認識し（ステップＳ３０４）、図５に示す画像認識テーブルの人物数に人物数をセットする（ステップＳ３０５）。
【００４４】
ここで、画像データの人物部分の認識方法は、上記にも示したようにステップＳ３０２及びステップＳ３０３と同様に、従来より一般的に知られている手法をもって実施される。
例えば、図４と同様のテーブル、人物番号テーブルを、メモリ１４に展開する。人物テーブルには、人物番号として１から順に連続した番号が付され、それぞれの人物番号に対応した人物パターンには、画像データと比較するために用いる人物パターンである画像データ、又は人物パターンの画像データを格納しているメモリ領域のアドレスが格納される。
【００４５】
人物パターンである画像データは、ステップＳ３０１で読み出された画像データと比較するために用いられ、例えば、正面向きの人物の画像データ、横向きの人物の画像データ、座った状態の人物の画像データ等が画像メモリ部１７に格納されている。
【００４６】
ＣＰＵ１１は、以上に述べたメモリ１４に展開されている人物番号テーブルの人物番号に対応する人物パターンの画像データと、ステップＳ３０１で読み出された画像データとを逐次比較する。比較する際には、人物パターンの画像データの形状に沿って、人物パターンの画像データにおける各ドットのＲＧＢデータと、ステップＳ３０１で読み出された画像データにおける各ドットのＲＧＢデータとを比較する。比較した結果、ステップＳ３０１で読み出された画像データに対する人物パターンの画像データのＲＧＢデータの占有率を計算し、例えば８０％以上であれば一致、又は類似と判断し、人物が撮影されていると判断する（ステップＳ３０４）。なお、上記占有率は、８０％に限られない。必要に応じて、０％〜１００％の間で適当な閾値を設定すればよい。
【００４７】
ＣＰＵ１１は、以上の手法により、順次画像データと人物パターンとを比較することにより、画像データ内に撮影されている人物数をカウントし、図５に示す画像認識テーブルの人物数にデータをセットする（ステップＳ３０５）。
ステップＳ３０６において、ＣＰＵ１１は、ＳＤカードやメモリカード等の画像撮影装置から着脱可能な可搬記録媒体に記録されている撮影済み画像データの全てに対して、ステップＳ３０１からステップＳ３０５の処理が終了したかを判断し、全てが終了していない場合には、再度ステップＳ３０１から処理を実施する（ステップＳ３０６）。
【００４８】
以上の処理によって、メモリ１４に展開されている図５に示す画像認識テーブルが作成され、ステップＳ３０１で読み出された画像データについて、構図レイアウト、及び撮影された人物の人物数が認識されることになる。
全ての画像データについて、ステップＳ３０１からステップＳ３０５の処理が完了すると、ＣＰＵ１１は、メモリ１４に展開されている分類テーブル（図６参照）の作成処理に移行し、分類処理を開始する。
【００４９】
ＣＰＵ１１は、メモリ１４に展開されている図５に示す画像認識テーブルを、同図レイアウト番号、及び人物数に基づいて分類する分類処理を実施し、図６に示す分類テーブルに、レイアウト番号、人物数、及び画像番号をセットする。
例えば、ＣＰＵ１１は、画像認識テーブルの画像番号に沿って、同一のレイアウト番号の画像番号を検索する。図５に示す例では、ＣＰＵ１１によって、レイアウト番号１に対する同一のレイアウト番号の画像番号として、画像番号１、画像番号２、画像番号４、画像番号５、画像番号６、画像番号７、画像番号９が検出される。同一のレイアウト番号の画像番号が検出されると、ＣＰＵ１１は、さらに人物数に基づいて画像番号を分類する。その結果、ＣＰＵ１１により、人物数が２である画像番号として、画像番号１、画像番号５、画像番号６、画像番号７、画像番号９が検出され、図６に示す分類テーブルにセットされている。さらに、人物数が４である画像番号として、画像番号２、画像番号４が図６の分類テーブルにセットされている。同様にして、図５に示す画像認識テーブルにセットされている画像番号全てに対してレイアウト番号、及び人物数に基づいて分類処理が実行され、図６に示す分類テーブルに結果がセットされる（ステップＳ３０７、ステップＳ３０８）。
【００５０】
ステップＳ３０７、及びステップＳ３０８によって分類テーブルが作成されると、ＣＰＵ１１は、メモリ１４に展開されている分類テーブル（図６参照）を参照し、同一分類番号に対して複数の画像番号がセットされているかをチェックし（図示せず）、同一分類番号に対して複数の画像番号がセットされている場合には、さらに細分類処理を開始する。細分類処理を実施するにあたって、図６に示す分類テーブル、及び図７に示す細分類テーブルが使用される。
【００５１】
ステップＳ３０９〜ステップＳ３１１では、ステップＳ３０７及びステップＳ３０８で処理された分類テーブルをさらに、画像データ内に撮影されている人物が同一人物であるかを判別し、同一人物が撮影されている画像データ毎に細分類される。
【００５２】
ステップＳ３０９において、ＣＰＵ１１は、メモリ１４に展開されている図６に示す分類テーブルの分類番号を参照する。次に、分類番号に対応する画像番号が複数セットされているかを判別する。画像番号が複数セットされていない場合には（分類番号に対応する画像番号が１対１の場合には）、ＣＰＵ１１は、次の分類番号を参照し、分類番号に対応した画像番号が複数セットされているかをチェックする。
【００５３】
分類テーブルの分類番号に対応する画像番号が複数セットされている場合には、ＣＰＵ１１は、分類テーブルの分類番号にセットされている各々の画像データに対して、順次画像データ内の人物部分の比較処理を実行する（ステップＳ３１０）。
【００５４】
ここで、人物部分の比較処理は、例えば次の処理手順によって実施される。すなわち、分類番号にセットされた１の画像データに対して、上述の公知技術によって画像データ内の人物部分を認識して抽出する。
また、画像データの人物部分の比較処理は、ステップＳ３０４でも記述したように、従来より一般的に知られている手法をもって実施される。
【００５５】
例えば、図４と同様のテーブル、人物番号テーブルを、メモリ１４に展開する。人物テーブルには、人物番号として１から順に連続した番号が付され、それぞれの人物番号に対応した人物パターンには、分類番号にセットされた１の画像データと比較するために用いる人物パターンである画像データ、又は人物パターンの画像データを格納しているメモリ領域のアドレスが格納される。
【００５６】
人物パターンである画像データは、分類番号にセットされた１の画像データと比較するために用いられ、例えば、正面向きの人物の画像データ、横向きの人物の画像データ、座った状態の人物の画像データ等が画像メモリ部１７に格納されている。
【００５７】
ＣＰＵ１１は、以上に述べたメモリ１４に展開されている人物番号テーブルの人物番号に対応する人物パターンの画像データと、分類番号にセットされた１の画像データとを逐次比較する。比較する際には、人物パターンの画像データの形状に沿って、人物パターンの画像データにおける各ドットのＲＧＢデータと、分類番号にセットされた１の画像データにおける各ドットのＲＧＢデータとを比較する。比較した結果、撮影された画像データに対する人物パターンの画像データのＲＧＢデータの占有率を計算し、例えば８０％以上であれば一致、又は類似と判断し、類似番号にセットされた１の画像データに対する人物パターンの画像データが特定される。同様にして、同一の分類番号にセットされている他の画像データ対しても人物パターンの画像データを特定する。
【００５８】
人物パターンの画像データが特定されると、ＣＰＵ１１は、分類番号にセットされた１の画像データに対する人物パターンの画像データと、同一の分類番号にセットされた他の画像データに対する人物パターンに対する画像データとが一致するかを判別することにより、同一人物であるかを判別する（ステップＳ３１０）。なお、上記占有率は、８０％に限られない。必要に応じて、０％〜１００％の間で適当な閾値を設定すればよい。
【００５９】
次に、同一分類番号にセットされた上記比較処理をしていない他の画像データに対しても、画像データ内の人物部分を認識して抽出する。同一分類番号内の１の画像データと上記他の画像データとを、例えば抽出された人物部分の形状、色情報（画像データにおけるＲＧＢデータ）等で比較し、同一人物かを判断する。同一人物であると判断された場合には、上記分類番号内の１の画像データと同じ細分類テーブルの細分類番号に画像番号がセットされる。同一分類番号内の全ての画像データに対して人物比較が終了すると、ＣＰＵ１１は、次の分類番号を参照し、画像番号が複数セットされているかを判別する処理を実施し、分類番号内に複数の画像番号がセットされている場合には、上記人物部分の比較処理が実施される。
【００６０】
以上のようにして、図６に示す分類テーブルにセットされている分類番号全てに対して人物部分比較処理が実施され、図７に示す細分類テーブルに示すデータがセットされる（ステップＳ３１１）。
例えば、図７の例では、細分類番号１には、画像番号１、画像番号５、画像番号７がセットされ、細分類番号２には、画像番号６、画像番号９がセットされている。
【００６１】
これは、図６に示す分類テーブルの分類番号１にセットされている画像番号全てに対して人物部分の比較処理を行なわれた結果、画像番号１、画像番号５、画像番号７の画像データには、同一のレイアウト（レイアウト番号１）で、同一の人物が２人撮影されていると判断されたことを示し、同様に、画像番号６、画像番号９の画像データには、同一のレイアウト（レイアウト番号１）で、細分類番号１の画像データにある人物とは異なる人物が２人撮影されていると判断されたことを示している。
【００６２】
以上に述べたステップＳ３１１までの処理によって、撮影された画像データは、同一の構図レイアウト、同一の人物（同じ人数）が撮影された画像データに分類される。ステップＳ３１２では、図７に示す細分類テーブルの各細分類番号にセットされている画像データ群について、画像状態の評価処理が実施される。画像状態を評価するにあたっては、例えば画像データ内に撮影されている人物部分の顔の画像状態で評価できる。画像状態の評価処理を実施するにあたっては、図７に示す細分類テーブル、図８に示す顔評価テーブル、及び図９に示す画像評価テーブルが使用される。
【００６３】
ＣＰＵ１１は、メモリ１４に展開されている細分類テーブル（図７参照）の細分類番号を参照し、細分類番号にセットされている複数の画像データの内から１つの画像データを選択する。ステップＳ３１０と同様に、従来技術により、選択された画像データに対して、人物部分の顔部分が認識され抽出される。
【００６４】
本実施例では、顔部分の評価に際して図８に示す顔評価テーブルを使用して、顔部分の撮影状態を評価する。画像メモリ部１７には、図８の顔評価テーブルにある「方向」（正面向きの状態、斜め向きの状態）、「隠れ度」（全面露出の状態、全面の３／４露出状態）、「開眼度」（目を開けた状態）について、比較するためのパターン画像データが格納されている。
【００６５】
また、顔部の評価に際しては、図８に示す顔評価テーブルの評価項目にあるように、「方向」にあっては、正面向きの状態の場合には３、斜め向きの状態の場合には１、その他の状態の場合には０とし、「隠れ度」にあっては、顔全面が露出されている状態の場合には３、顔全面の３／４が露出している状態の場合には１、その他の状態では０とし、また「開眼度」にあっては、目が開いた状態（良の状態）の場合には２、その他の状態（悪の状態）には０として点数を付し、これらの点数の合計点によって、顔部分の撮影状態が評価される。
【００６６】
顔部分の画像データが抽出されると、抽出された顔部分の画像データは順次、図８に示す顔評価テーブルの顔部番号と関連付けられる。顔部番号に対応する顔部画像データの各々は、ＣＰＵ１１によって、画像メモリ部１７に格納されている、「方向」（正面向きの状態、斜め向きの状態）、「隠れ度」（全面露出の状態、全面の３／４露出状態）、「開眼度」（目を開けた状態）について比較するためのパターン画像データと、形状、色情報（ＲＧＢデータ）等とが比較され、その占有率が、例えば８０％以上の場合には、一致又は類似と判断された上記比較のためのパターン画像データに対応する点数を図８に示す顔評価テーブルにセットされていく。なお、上記占有率は、８０％に限られない。必要に応じて、０％〜１００％の間で適当な閾値を設定すればよい。
【００６７】
図８には、細分類テーブル（図７参照）の細分類番号１にセットされている画像番号１について顔部の撮影状態を評価した結果が示されている。画像番号１には、２人の人物が撮影されているため（図７細分類テーブル「人物数」参照）、メモリ１４に展開されている顔評価テーブルには、顔部番号１と顔部番号２が抽出されてセットされている。顔部番号１の画像データは、評価項目である「方向」にあっては、斜め向き状態のパターン画像データと一致又は類似であると判断され、「隠れ度」にあっては、全面露出の状態のパターン画像データと一致又は類似であると判断され、また、「開眼度」にあっては、目を開けた状態のパターン画像データと一致又は類似とは判断されなかったことを表している。したがって、顔部番号１の評価点数は４となる。同様にして、顔部番号２の画像データに対しても評価され、評価点数は６となっている。
【００６８】
顔評価テーブルへのセットが完了すると、ＣＰＵ１１は、顔部番号毎の合計点を算出し、さらに、顔部番号毎の合計点の総和（画像データの総合評価点）を算出して、メモリ１４に展開されている図９に示す画像評価テーブルの画像番号に対応する画像データの総合評価点にセットする。
【００６９】
図９に示す画像評価テーブルの例では、細分類テーブル（図７参照）にある細分類番号１にセットされている画像番号１、画像番号５、及び画像番号７に対して、上記の説明と同様に顔評価テーブル（図８参照）を使用して画像状態を評価した結果を示している。
【００７０】
以上に述べた画像状態の評価処理が、図７に示す細分類テーブルにセットされている全ての細分類番号について実施される（ステップＳ３１２）。
ステップＳ３１２によって、細分類番号単位での各画像の画像状態の評価が完了すると、ＣＰＵ１１は、メモリ１４に展開されている画像評価テーブルを「総合評価点」の高い順にソートし（ステップＳ３１３）、細分類番号単位で、表示部１６に画像データを表示する（ステップＳ３１４）。ここで、本発明では、報知手段として、画像データ等の表示部１６への表示によって使用者への報知を行なっているが、音声による報知でもよい。
【００７１】
ＣＰＵ１１は、メモリ１４に展開されている画像評価テーブル（図９参照）の「総合評価点」の高い画像番号を整理対象として自動選択する（ステップＳ３１５）。整理対象の画像番号を選択すると、ＣＰＵ１１は、選択された画像番号について、整理してもよいかを使用者に問い合わせを行なうため、例えば表示部１６にその旨表示し、操作部１３からの指示待ち状態となる（ステップＳ３１６）。整理対象の画像番号が、選択された画像番号でない場合には、使用者により整理対象の画像番号が変更され、ＣＰＵ１１は、再度確認を行なうために、例えば表示部１６にその旨表示して、操作部１３からの指示待ち状態となる（ステップＳ３１７）。
【００７２】
ＣＰＵ１１は、使用者により、操作部１３から整理ＯＫの通知を受けると、選択されている画像番号に対応する画像データを残し、それ以外の画像データを全て削除する（ステップＳ３１８）。画像データの削除が終了し、画像データの整理処理が終了すると、ＣＰＵ１１は、図２に示すステップＳ２００において、使用者からの操作待ち状態となる。
【００７３】
以上の説明において、ステップＳ３０２における構図レイアウトを認識する処理、ステップＳ３０４における画像内の人物部分を認識する処理、ステップＳ３１０における指定分類内の各画像内で人物部分を比較する処理、ステップＳ３１２における細分類単位で各画像データの画像状態を評価する処理は、本実施例に記述した手法に限らない。画像データの認識処理は、従来より公知な手法（例えば、特許文献３を参照）を用いて実施可能である。また、以下に説明するステップＳ１１０１における仮撮影画像から構図レイアウトを認識する処理、ステップＳ１１０３における構図レイアウトを認識する処理、ステップＳ１１０８における仮撮影画像から人物部分を認識する処理、ステップＳ１１０９における類似画像データから人物部分を認識する処理においても同様に、従来より公知である手法（例えば、特許文献３を参照）を用いて実施可能である。
【００７４】
図３のステップＳ３０２等の画像認識処理は、あらかじめ決められた構図レイアウトに対応したレイアウト番号を決定することができればよく、ステップＳ３０２に記載した手法に限られない、例えば、明るさの急変する部分（エッジ）を特徴量として抽出するエッジ法により、撮影された画像データ及び構図レイアウトパターンの画像データのエッジを抽出し、両画像データのエッジを比較してレイアウト番号を決定してもよい。
【００７５】
ステップＳ３１５において、整理対象として自動選択される画像番号は、例えば最も「総合評価点」の高い画像番号でもよく、「総合評価点」に閾値を設定しておき、「総合評価点」が閾値以上のものを整理対象として選択するようにしてもよい。
【００７６】
ステップＳ３１２における細分類単位で各画像データの画像状態を評価するに際して、本実施例では、画像データ内に撮影された人物部分の内、顔の撮影状態に基づいて評価を実施したが、例えば、人物全体の撮影状態や構図レイアウトの撮影状態等、画像データ内に撮影された他の部分に基づいて評価を実施してもよい。また、図８に示す顔評価テーブルにおける評価項目についても本実施例で示した「方向」、「隠れ度」、「開眼度」に限らない。評価の精度や、カメラの処理能力等を考慮して評価項目を設定すればよい。
【００７７】
図１１は、本発明の類似チェック処理の実施例について示している。以下、図に基づいて説明をする。同図に示すフローチャートは、類似チェック処理（ステップＳ２０８）に処理が移行された場合の処理概要のフローチャートである。
類似チェック処理が開始されると（ステップＳ１１００）、ステップＳ１１０１では、ＣＰＵ１１によって、仮メモリに記憶されている画像データ（ステップＳ２０７）から、構図レイアウトが認識される。構図レイアウトを認識する手段は、図３の例えばＳ３０２での処理と同様に、従来より一般的に知られている手法をもって実施される。
【００７８】
例えば、図４に示すレイアウト番号テーブルを、あらかじめ用意しておく。同図には、レイアウト番号として１から順に連続した番号を付し、それぞれのレイアウト番号に対応した構図レイアウトパターンには、撮影された画像データと比較するために用いる構図レイアウトのパターンである画像データ、又は構図レイアウトパターンの画像データを格納しているメモリ領域のアドレスが格納される。
【００７９】
また、撮影された画像データと比較するために用いる構図レイアウトのパターンである画像データには、例えば、一人又は複数人の人物について、上半身のみのが撮影されている画像データ、全身が撮影されている画像データ、建物、建物や植物を含めた背景の画像データ等が画像メモリ部１７に格納されている。
【００８０】
ＣＰＵ１１は、以上に述べたメモリ１４に展開されているレイアウト番号テーブルのレイアウト番号に対応する構図レイアウトパターンと、撮影された画像データとを逐次比較する。比較する際には、構図レイアウトパターンの画像データの形状に沿って、撮影された画像データの各ドットのＲＧＢデータと、構図レイアウトのパターン画像データの各ドットのＲＧＢデータとを比較する。比較した結果、撮影された画像データに対する構図レイアウトパターン画像データのＲＧＢデータの占有率を計算し、例えば８０％以上であれば一致、又は類似と判断し構図レイアウトが特定される（ステップＳ１１０１）。なお、上記占有率は、８０％に限らない。必要に応じて、０％〜１００％の間で適当な閾値を設定すればよい。
【００８１】
さらに、ＣＰＵ１１は、既に記録媒体１８に記録済みの画像データを画像メモリ部１７等に読出し（ステップＳ１１０２）、ステップＳ１１０１と同様の処理により、構図レイアウトを認識する（ステップＳ１１０３）。
ＣＰＵ１１は、ステップＳ１１０１によって特定された構図レイアウトパターン及び、ステップＳ１１０３によって特定された構図レイアウトパターンとが一致又は類似であるかを判断し（ステップＳ１１０４）、一致又は類似でない場合には、ステップＳ１１０６に処理が移行する。上記構図レイアウトパターンが一致又は類似である場合には、撮影済み画像番号をメモリ１４に記憶し、ステップＳ１１０６にＣＰＵ１１の処理が移行される。ステップＳ１１０６において、ＣＰＵ１１は、記録媒体１８に記録済みの全ての画像データについて構図レイアウトの類似チェックが実施されたかを判別し、全ての画像データについて処理が完了していない場合には、ステップＳ１１０２に処理が戻り、再度ステップＳ１１０２〜ステップＳ１１０６の処理が実行される。
【００８２】
ステップＳ１１０６において、仮撮影画像の構図レイアウトと全ての撮影済み画像の構図レイアウトとの類似チェック処理が終了すると、ＣＰＵ１１は、構図レイアウトが類似の画像データの画像番号がメモリ１４に記憶されているかを判別する（ステップＳ１１０７）。メモリ１４に構図レイアウトが類似の画像データの画像番号が記憶されていない場合には、ＣＰＵ１１は、ステップＳ１１１６へと処理が移行する。メモリ１４に構図レイアウトが類似の画像データの画像番号が記憶されている場合には、さらに、仮撮影画像データの人物部分と、メモリ１４記憶されている全ての構図レイアウト類似画像データの人物部分との類似チェック処理が、ＣＰＵ１１によって実施される。
【００８３】
ステップＳ１１０８において、ステップＳ３０４と同様の手法によって、仮撮影画像から人物部分を認識し人物パターンの画像データが特定される。さらに、ＣＰＵ１１は、メモリ１４に記憶されている１の類似画像データからステップＳ３０４と同様の処理によって、人物部分を認識して人物部パターンを特定する。ステップＳ１１０８によって特定された人物パターンとステップＳ１１０９によって特定された人物パターンとが比較され、同一人物であるかが判断される（ステップＳ１１１０）。
【００８４】
ステップＳ１１１０において、仮撮影画像の人物部分と、メモリ１４に記憶されている類似画像データ（ステップＳ１１０４によって抽出した撮影済み画像番号に対応する画像データ）の人物部分とが同一人物であると判断されると、ＣＰＵ１１は、該当する類似画像データの画像番号を、メモリ１４に記憶する（ステップＳ１１１１）。さらに、ＣＰＵ１１は、メモリ１４に他の類似画像番号が記憶されているかをチェックし（ステップＳ１１１２）、他に類似画像番号が記憶されている場合には、ステップＳ１１０９に処理が移行し、再度ステップＳ１１０９からステップＳ１１１２の処理を実行する。
【００８５】
メモリ１４に記憶されている類似画像番号について、同一人物のチェックが完了すると、ＣＰＵ１１は、ステップＳ１１１３に処理が移行され、表示部１６に類似画像データ有りのメッセージ又は画像データ等を表示し、使用者に通知する。ＣＰＵ１１は、表示部１６へのメッセージ等の表示後、例えば図１０に示すように類似画像データを表示する（ステップＳ１１１４）。ＣＰＵ１１は、類似画像データの表示後、使用者からのシャッタ操作の通知があるかをチェックし（ステップＳ１１１５）、シャッタ操作である場合には、仮メモリ内に記録されている仮画像データを、記録媒体１８に記憶する。
【００８６】
ステップＳ１１１７において、ＣＰＵ１１は、シャッタ操作でない場合には、仮メモリ内に記憶されている仮画像データを消去し（ステップＳ１１１７）、類似チェック処理を終了して（ステップＳ１１１８）、図２に示すステップＳ２０１の処理に移行する。
【００８７】
図３の実施例に示した整理処理装置は、デジタルスチルカメラ等の撮影機能を必ずしも必要としない。例えば、パーソナルコンピュータ等を用いて、パーソナルコンピュータ等に接続された記録媒体に記録された画像データに対して整理処理を実現させてもよい。
【００８８】
以上に説明した実施例では、整理処理及び類似チェック処理について、１つの処理の一部として記載しているが、整理処理のみの機能、又は類似チェック処理のみの機能を有する画像撮影装置、画像整理装置、及びプログラムであってもよい。
【００９０】
【発明の効果】
本発明によると、撮影時に、既に類似画像を撮影してしまっていることを使用者に通知することにより、類似画像の撮影を未然に防止できるという効果を発揮するものである。
【図面の簡単な説明】
【図１】本実施形態における画像撮影装置の内部構成を示す図である。
【図２】本発明の実施形態の処理概要を示すフローチャートである。
【図３】本発明の整理処理の処理概要を示すフローチャートである。
【図４】レイアウト番号テーブルを示す図である。
【図５】画像認識テーブルを示す図である。
【図６】分類テーブルを示す図である。
【図７】細分類テーブルを示す図である。
【図８】顔評価テーブルを示す図である。
【図９】画像評価テーブルを示す図である。
【図１０】細分類画像の表示例を示す図である。
【図１１】本発明の類似チェック処理の処理概要を示すフローチャートである。
【符号の説明】
１１・・・ＣＰＵ
１２・・・カメラ撮影部
１３・・・操作部
１４・・・メモリ部
１５・・・画像文字認識部
１６・・・表示部
１７・・・画像メモリ部
１８・・・記録媒体部
１９・・・バス
Claims (4)
- カメラ撮影部で撮影された撮影済み画像を記録媒体に記録する画像撮影装置であって、
画像撮影時における類似画像チェックの要否を示すモード情報を任意に設定する設定手段と、
前記カメラ撮影部での撮影操作時に、前記設定手段で類似画像チェックのチェック要を示すモード情報が設定されているか否かを判別するモード判別手段と、
類似画像チェック要を示すモード情報が設定されている場合には、当該撮影操作時に前記カメラ撮影部で撮影された撮影画像の内容を認識し、その撮影画像と類似する撮影済み画像が前記記録媒体に既に記録済みか否かを判別する類似判別手段と、
前記類似判別手段で、類似する撮影済み画像が既に記録済みでないと判別された場合には、前記カメラ撮影部で撮影された撮影画像を前記記録媒体に対して新たに記録するよう制御し、類似する撮影済み画像が既に記録済みであると判別された場合には、前記カメラ撮影部で撮影された撮影画像を前記記録媒体に対して記録することを一時的に抑止するよう制御する記録制御手段と、
前記記録制御手段で、前記画像の記録が一時的に抑止された際は、前記撮影操作で撮影された撮影画像と類似する画像が既に撮影済みであることを報知する報知手段と、
を有することを特徴とする画像撮影装置。 - 前記記録制御手段は、前記カメラ撮影部で撮影された撮影画像の記録が一時的に抑止された後に、その撮影の続行指示があった場合には、当該撮影画像を前記記録媒体に対して新たに記録するよう制御する、ことを特徴とする請求項１記載の画像撮影装置。
- 前記報知手段は、類似画像が既に撮影済みであることを報知する際に、前記記録媒体に記録されていた類似する撮影済み画像を表示する、ことを特徴とする請求項１記載の画像撮影装置。
- コンピュータに、
カメラ撮影部で撮影された撮影済み画像を記録媒体に記録する機能と、
画像撮影時における類似画像チェックの要否を示すモード情報を任意に設定する設定機能と、
前記カメラ撮影部での撮影操作時に、類似画像チェックのチェック要を示すモード情報が設定されているか否かを判別する機能と、
類似画像チェック要を示すモード情報が設定されている場合には、当該撮影操作時に前記カメラ撮影部で撮影された撮影画像の内容を認識し、その撮影画像と類似する撮影済み画像が前記記録媒体に既に記録済みか否かを判別する機能と、
類似する撮影済み画像が既に記録済みでないと判別された場合には、前記カメラ撮影部で撮影された撮影画像を前記記録媒体に対して新たに記録するよう制御し、類似する撮影済み画像が既に記録済みであると判別された場合には、前記カメラ撮影部で撮影された撮影画像を前記記録媒体に対して記録することを一時的に抑止するよう制御する機能と、
前記画像の記録が一時的に抑止された際は、前記撮影操作で撮影された撮影画像と類似する画像が既に撮影済みであることを報知する機能と、
を実行させるためのプログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003182894A JP4273852B2 (ja) | 2003-06-26 | 2003-06-26 | 画像撮影装置、プログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003182894A JP4273852B2 (ja) | 2003-06-26 | 2003-06-26 | 画像撮影装置、プログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2005020409A JP2005020409A (ja) | 2005-01-20 |
| JP4273852B2 true JP4273852B2 (ja) | 2009-06-03 |
Family
ID=34183154
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003182894A Expired - Fee Related JP4273852B2 (ja) | 2003-06-26 | 2003-06-26 | 画像撮影装置、プログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4273852B2 (ja) |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPWO2007004519A1 (ja) * | 2005-06-30 | 2009-01-29 | オリンパス株式会社 | 検索システム及び検索方法 |
| JP4721111B2 (ja) | 2005-11-24 | 2011-07-13 | 富士ゼロックス株式会社 | 画像処理装置、画像処理システム、画像処理プログラムおよび画像処理方法 |
| JP4665731B2 (ja) * | 2005-11-25 | 2011-04-06 | 株式会社ニコン | カメラ、および画像管理プログラム |
| JP5147737B2 (ja) * | 2009-01-05 | 2013-02-20 | 株式会社日立製作所 | 撮像装置 |
| WO2013042766A1 (ja) | 2011-09-22 | 2013-03-28 | オリンパス株式会社 | 画像処理装置、画像処理システム、及び画像読出し装置 |
| JP6027745B2 (ja) * | 2012-01-10 | 2016-11-16 | オリンパス株式会社 | 画像処理装置 |
| JP6589900B2 (ja) * | 2017-01-27 | 2019-10-16 | 京セラドキュメントソリューションズ株式会社 | 映像処理装置 |
-
2003
- 2003-06-26 JP JP2003182894A patent/JP4273852B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2005020409A (ja) | 2005-01-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10839199B2 (en) | Image selecting device, image selecting method, image pickup apparatus, and computer-readable medium | |
| US7868924B2 (en) | Image capturing apparatus, image capturing method, album creating apparatus, album creating method, album creating system and computer readable medium | |
| JP3984029B2 (ja) | 画像処理装置およびプログラム | |
| JP5055939B2 (ja) | デジタルカメラ | |
| US20080218603A1 (en) | Imaging apparatus and control method thereof | |
| EP2053843B1 (en) | Camera and Image Recording Program Product | |
| US20050248681A1 (en) | Digital camera | |
| JP4039847B2 (ja) | 画像処理装置およびプログラム | |
| CN101262561B (zh) | 成像设备及其控制方法 | |
| JP4449354B2 (ja) | 画像撮影装置及びプログラム | |
| JP2008278458A (ja) | 撮像装置、画像表示装置、及びそのプログラム | |
| JP2008131330A (ja) | 画像表示装置および画像表示方法 | |
| JP5641813B2 (ja) | 撮像装置及び撮像方法、画像処理装置及び画像処理方法 | |
| JP2008146191A (ja) | 画像出力装置および画像出力方法 | |
| JP4273852B2 (ja) | 画像撮影装置、プログラム | |
| JP2011211621A (ja) | 画像表示処理装置、電子カメラ及びプログラム | |
| JP2003150617A (ja) | 画像処理装置およびプログラム | |
| JP2005323015A (ja) | デジタルカメラ | |
| JP5366676B2 (ja) | 撮像装置及びその制御方法とプログラム、記憶媒体 | |
| JP4603569B2 (ja) | 画像処理装置およびプログラム | |
| JP2014186580A (ja) | 認証装置、撮像装置、認証用データの登録方法、プログラム、および、記憶媒体 | |
| JP4371219B2 (ja) | デジタルカメラ | |
| JP2013121097A (ja) | 撮像装置及び方法、並びに画像生成装置及び方法、プログラム | |
| JP5428243B2 (ja) | 画像処理装置および電子カメラ並びに画像振り分けプログラム | |
| JP2003060956A (ja) | デジタルカメラ |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20051207 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080708 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080827 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090210 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090223 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120313 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120313 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130313 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130313 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140313 Year of fee payment: 5 |
|
| LAPS | Cancellation because of no payment of annual fees |