JP2009094946A - 撮像装置及び撮像装置における肖像権保護方法 - Google Patents

Abstract

【課題】撮像装置において、撮影された画像を公開するときに第三者に対するプライバシーや肖像権の侵害を防ぐ。
【解決手段】被写体を撮像して画像データを取得し、該取得した画像データから所定の対象物を検出する撮像装置において、検出した１つ以上の対象物（Ｋ１〜Ｋ４）に対して、対象物の大きさ、位置、変化量及び合焦評価値のうち１つ以上を含む情報に基づいて、それぞれ有効被写体か無効被写体かを判断し、無効被写体と判断された対象物（例えばＫ４）に対して肖像権保護処理を施す。
【選択図】図１５

Description

本発明は撮像装置に関し、特に撮像した画像においてプライバシーや肖像権の侵害を防ぐ肖像権保護方法に関するものである。

従来より、デジタルカメラ等の撮像装置によって取得した画像データから、例えば顔等の特定の対象物を検出し、検出した対象物を利用して行う様々な画像処理方法が提案されており、例えば画像データから顔領域を検出し、検出した顔領域に注目して画像を再生する画像処理装置が開示されている（特許文献１）。

一方、デジタルカメラ等の撮像装置によって被写体を撮影するときに、撮影者が所望する被写体の他に、例えば偶然通りかかった人物の顔等の撮影者が意図しない人物の顔も被写体として撮影してしまうことがある。

しかしながら近年ではプライバシーや肖像権の保護に対する意識が高まっているため、撮影によって得られた画像を公開するときに、画像に写ってしまった第三者に対するプライバシーや肖像権の保護が望まれている。

そこで取得した映像から人物の身振りや行為を検出し、検出した身振りや行為を分析して、この分析結果に応じて決定した画像領域に対して、ユーザ要求や利用シーンに応じた最適な抽象化処理を行う監視用撮像装置（特許文献２）や、画像において例えば顔等の構造物を特定できないように、構造物の特徴点のパラメータを変更して構造物を再構成する画像処理装置（特許文献３）、撮影されたくない領域にセンサを配置して、自動的にモザイク処理を施し、モザイク処理が施された画像を提供する画像提供装置（特許文献４）等が提案されている。
特開２００６−２９３７８２号公報 特開２００６−２９５２５１号公報 特開２００６−３１８３７７号公報 特開２００５−０２６９１７号公報

しかしながら、上記監視用撮像装置では、身振りや行為を分析するため、例えば同じ動作等をする人物の中から撮影者が所望しない人物を判断することは困難である。また上記画像処理装置や上記画像提供装置においては、画像処理の対象となる対象物を決定するときに、例えば偶然通りかかった人物や、意図しないで撮影視野内に入ってしまった人物等を考慮することは困難である。

本発明はかかる事情に鑑みてなされたものであり、撮影された画像を公開するときに第三者に対するプライバシーや肖像権の侵害を防ぐことができる撮像装置及び該撮像装置における肖像権保護方法を提供することを目的とするものである。

本発明の撮像装置は、被写体を撮像して画像データを取得する撮像手段と、
前記画像データから所定の対象物を検出する対象物検出手段と、
該対象物検出手段により検出された１つ以上の対象物に対して、それぞれ有効被写体か無効被写体かを判断する被写体判断手段と、
該被写体判断手段により無効被写体であると判断された前記対象物に対して肖像権を保護する肖像権保護手段とを備えてなること特徴とするものである。

また本発明の撮像装置は、前記被写体判断手段が、前記対象物検出手段により検出された対象物の大きさ、位置、変化量及び合焦評価値のうち１つ以上を含む情報に基づいて前記判断をするものであることが好ましい。

また本発明の撮像装置は、前記被写体判断手段により有効被写体と判断された前記対象物の数が、任意に設定された対象物の数よりも多いとき、前記各種情報の優先度の低いものの順に有効被写体から無効被写体に繰り下げ、
前記数よりも少ないとき、前記各種情報の優先度の高いものの順に無効被写体から有効被写体に繰り上げる有効被写体変更手段を備えていることが好ましい。

本発明の撮像装置は、前記肖像権保護手段を、前記無効被写体と判断された前記対象物に対してモザイク処理を施すものとすることができる。

また本発明の撮像装置は、前記肖像権保護手段を、前記無効被写体と判断された前記対象物に対してぼかし処理を施すものとすることができる。

また本発明の撮像装置は、前記肖像権保護手段を、前記無効被写体と判断された前記対象物に対してトリミング処理を施すものとすることができる。

また本発明の撮像装置は、前記肖像権保護手段を、前記無効被写体と判断された前記対象物があるときに警告するものとすることができる。

また本発明の撮像装置は、前記肖像権保護手段を、前記無効被写体と判断された前記対象物があるときに該対象物が含まれる画像データの印刷を不可能にするものとすることができる。

なお本発明の撮像装置は、上記肖像権保護手段を複数種類備え、そのうちの１つを選択して使用する選択手段を備えることができる。

本発明の肖像権保護方法は、被写体を撮像して画像データを取得し、該取得した画像データから所定の対象物を検出する撮像装置において、
前記検出した１つ以上の対象物に対して、該対象物の大きさ、位置、変化量及び合焦評価値のうち１つ以上を含む情報に基づいて、それぞれ有効被写体か無効被写体かを判断し、
無効被写体と判断された前記対象物に対して肖像権保護処理を施すことを特徴とする。

また本発明の肖像権保護方法は、被写体とする対象物の数を任意に設定し、
前記有効被写体と判断した前記対象物の数が、前記設定した対象物の数よりも多いときに、前記各種情報の優先度の低いものの順に有効被写体から無効被写体に繰り下げ、
前記数よりも少ないときに、前記各種情報の優先度の高いものの順に無効被写体から有効被写体に繰り上げることができる。

本発明の撮像装置及び撮像装置における肖像権保護方法によれば、被写体を撮像して取得した画像データから検出した１つ以上の対象物に対して、それぞれ有効被写体か無効被写体かを判断し、無効被写体と判断された対象物に対して肖像権保護処理を施すので、撮影者が所望しない被写体つまり第三者を無効被写体と判断することにより、第三者に対して自動的に肖像権保護処理が施されるので、撮影された画像を公開するときに第三者に対するプライバシーや肖像権の侵害を防ぐことができる。

また被写体とする対象物の数を任意に設定し、有効被写体と判断した対象物の数が設定した対象物の数よりも多いときに、対象物の大きさ、位置、変化量、合焦評価値の各種情報の優先度の低いものの順に有効被写体から無効被写体に繰り下げ、設定した対象物の数よりも少ないときに、前記各種情報の優先度の高いものの順に無効被写体から有効被写体に繰り上げることにより、有効被写体の検出精度を上げることができる。

以下、本発明にかかる撮像装置の一実施形態を、図面を参照して詳細に説明する。尚、以下の実施の形態では、本発明における撮像装置としてデジタルカメラを例に説明するが、本発明の適用範囲はこれに限定されず、例えば、防犯カメラ、カメラ付き携帯電話、カメラ付きＰＤＡ等、電子撮像機能を備えた他の電子機器に対しても適用可能である。

図１及び図２は、デジタルカメラの一例を示すものであり、それぞれ背面側及び前面側から見た斜視図である。デジタルカメラ１の本体１０の背面には、図１に示す如く、撮影者による操作のためのインターフェースとして、動作モードスイッチ１１、メニュー／ＯＫボタン１２、ズーム／上下矢印レバー１３、左右矢印ボタン１４、Ｂａｃｋ（戻る）ボタン１５、表示切替ボタン１６が設けられ、更に撮影のためのファインダ１７及び撮影並びに再生のための液晶モニタ１８が設けられている。また本体１０の上面には、シャッタボタン１９が設けられている。

動作モードスイッチ１１は、静止画撮影モード、動画撮影モード、再生モードの各動作モードを切り替えるためのスライドスイッチである。

メニュー／ＯＫボタン１２は、押下される毎に撮影モード、フラッシュ発光モード、肖像権保護モード、セルフタイマーＯＮ／ＯＦＦ、記録画素数や感度等の設定を行うための各種メニューを液晶モニタ１８に表示させたり、液晶モニタ１８に表示されたメニューに基づく選択・設定を確定させたりするためのボタンである。肖像権保護モードは、顔検出機能を使用してプライバシーや肖像権の侵害を防ぐためのモードである。

ズーム／上下矢印レバー１３は、上下方向にレバーを倒すことによって、撮影時には望遠／広角の調整を行い、各種設定時に液晶モニタ１８に表示されるメニュー画面中のカーソルを上下に移動して表示させるためのレバーである。左右矢印ボタン１４は、各種設定時に液晶モニタ１８に表示されるメニュー画面中のカーソルを左右に移動して表示させるためのボタンである。

Ｂａｃｋ（戻る）ボタン１５は、押下されることによって各種設定操作を中止し、液晶モニタ１８に１つ前の画面を表示するためのボタンである。表示切替ボタン１６は、押下されることによって液晶モニタ１８の表示のＯＮ／ＯＦＦ、各種ガイド表示、文字表示のＯＮ／ＯＦＦ等を切り替えるためのボタンである。

ファインダ１７は、撮影者が被写体を撮影する際に構図やピントを合わせるために覗くためのものである。ファインダ１７から見える被写体像は、本体１０の前面にあるファインダ窓２３を介して映し出される。

以上説明した各ボタン及びスイッチ等の操作によって設定された内容は、液晶モニタ１８中の表示や、ファインダ１７内のランプ、スライドレバーの位置等によって確認可能となっている。

また液晶モニタ１８は、撮影の際に被写体確認用のスルー画像が表示されることにより、電子ビューファインダとして機能する他、撮影後の静止画や動画の再生表示、各種設定メニューの表示を行う。

更に、本体１０の前面には、図２に示す如く、撮影レンズ２０、レンズカバー２１、電源スイッチ２２、ファインダ窓２３、フラッシュライト２４及びセルフタイマーランプ２５が設けられ、側面にはメディアスロット２６が設けられている。

撮影レンズ２０は、被写体像を所定の結像面上（本体１０内部にあるＣＣＤ等）に結像させるためのものであり、フォーカスレンズやズームレンズ等によって構成される。レンズカバー２１は、デジタルカメラ１の電源がオフ状態のとき、再生モードであるとき等に撮影レンズ２０の表面を覆い、汚れやゴミ等から撮影レンズ２０を保護するものである。

電源スイッチ２２は、デジタルカメラ１の電源のＯＮ／ＯＦＦを切り替えるためのスイッチである。フラッシュライト２４は、シャッタボタン１９が押下され、本体１０の内部にあるシャッタが開いている間に、撮影に必要な光を被写体に対して瞬間的に照射するためのものである。

セルフタイマーランプ２５は、セルフタイマーによって撮影する際に、シャッタの開閉タイミングすなわち露光の開始及び終了を被写体に知らせるためものである。メディアスロット２６は、メモリカード等の外部記録メディア７０が充填されるための充填口であり、外部記録メディア７０が充填されると、データの読み取り／書き込みが行われる。

図３にデジタルカメラ１の機能構成を示すブロック図を示す。図３に示す如く、デジタルカメラ１の操作系として、前述の動作モードスイッチ１１、メニュー／ＯＫボタン１２、ズーム／上下矢印レバー１３、左右矢印ボタン１４、Ｂａｃｋ（戻り）ボタン１５、表示切替ボタン１６、シャッタボタン１９、電源スイッチ２２と、これらのスイッチ、ボタン、レバー類の操作内容をＣＰＵ７５に伝えるためのインターフェースである操作系制御部７４が設けられている。

また、撮影レンズ２０を構成するものとして、フォーカスレンズ２０ａ及びズームレンズ２０ｂが設けられている。これらの各レンズは、モータとモータドライバからなるフォーカスレンズ駆動部５１、ズームレンズ駆動部５２によってステップ駆動され、光軸方向に移動可能な構成となっている。フォーカスレンズ駆動部５１は、ＡＦ処理部６２から出力されるフォーカス駆動量データに基づいてフォーカスレンズ２０ａをステップ駆動する。ズームレンズ駆動部５２は、ズーム／上下矢印レバー１３の操作量データに基づいてズームレンズ２０ｂのステップ駆動を制御する。

絞り５４は、モータとモータドライバとからなる絞り駆動部５５によって駆動される。この絞り駆動部５５は、ＡＥ（自動露出）処理部６３から出力される絞り値データに基づいて絞り５４の絞り径の調整を行う。

シャッタ５６は、メカニカルシャッタであり、モータとモータドライバとからなるシャッタ駆動部５７によって駆動される。シャッタ駆動部５７は、シャッタボタン１９の押下により発生する信号と、ＡＥ処理部６３から出力されるシャッタ速度データとに応じてシャッタ５６の開閉の制御を行う。

上記光学系の後方には、撮影素子であるＣＣＤ５８を有している。ＣＣＤ５８は、多数の受光素子がマトリクス状に配置されてなる光電面を有しており、光学系を通過した被写体光が光電面に結像され、光電変換される。光電面の前方には、各画素に光を集光させるためのマイクロレンズアレイ（不図示）と、ＲＧＢ各色のフィルタが規則的に配列されてなるカラーフィルタアレイ（不図示）とが配置されている。

ＣＣＤ５８は、ＣＣＤ制御部５９から供給される垂直転送クロック信号及び水平転送クロック信号に同期して、画素毎に蓄積された電荷を１ラインずつ読み出してシリアルなアナログ画像信号として出力する。各画素における電荷の蓄積時間、即ち露出時間は、ＣＣＤ制御部５９から与えられる電子シャッタ駆動信号によって決定される。そして上記光学系及びＣＣＤ５８、ＣＣＤ制御部５９を含めて撮像部（撮像手段）１００が構成される。

ＣＣＤ５８が出力するアナログ画像信号は、アナログ信号処理部６０に入力される。このアナログ信号処理部６０は、アナログ画像信号のノイズ除去を行う相関２重サンプリング回路（ＣＤＳ）と、アナログ画像信号のゲイン調整を行うオートゲインコントローラ（ＡＧＣ）と、アナログ画像信号をデジタル画像データに変換するＡ／Ｄコンバータ（ＡＤＣ）とからなる。そしてこのデジタル信号に変換されたデジタル画像データは、画素毎にＲＧＢの濃度値を持つＣＣＤ−ＲＡＷデータである。

タイミングジェネレータ７２は、タイミング信号を発生させるものであり、このタイミング信号がシャッタ駆動部５７、ＣＣＤ制御部５９、アナログ信号処理部６０に入力されて、シャッタボタン１９の操作と、シャッタ５６の開閉、ＣＣＤ５８の電荷取り込み、アナログ信号処理６０の処理の同期が取られる。フラッシュ制御部７３は、フラッシュ２４の発光動作を制御する。

画像入力コントローラ６１は、上記アナログ信号処理部６０から入力されたＣＣＤ−ＲＡＷデータをフレームメモリ６６に書き込む。このフレームメモリ６６は、画像データに対して後述の各種デジタル画像処理（信号処理）を行う際に使用する作業用メモリであり、例えば、一定周期のバスクロック信号に同期してデータ転送を行うＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）が使用される。

表示制御部７１は、フレームメモリ６６に格納された画像データをスルー画像として液晶モニタ１８に表示させるためのものであり、例えば、輝度（Ｙ）信号と色（Ｃ）信号を一緒にして１つの信号としたコンポジット信号に変換して、液晶モニタ１８に出力する。スルー画像は、撮影モードが選択されている間、所定時間間隔で取得されて液晶モニタ１８に表示される。また、表示制御部７１は、外部記録メディア７０に記憶され、メディア制御部６７によって読み出された画像ファイルに含まれる画像データに基づいた画像を液晶モニタ１８に表示させる。

顔検出部（対象物検出手段）６９は、フレームメモリ６８に格納された画像データつまりスルー画像から人物の顔を検出する。具体的には、顔に含まれる顔の特徴を有する領域（例えば肌色を有する、目を有する、顔の形状を有する等）を顔領域として検出するものであり、両目画像データのマッチングにより顔を検出してもよいし、目及び口の位置関係などから顔を検出してもよいし、顔の輪郭の検出、顔の肌に相当する色情報の検出等によって顔領域を特定するようにしてもよいし、公知の技術を使用することができる。

なおスルー画像において顔検出部６９により顔が検出されると、スルー画像上に検出された顔を囲む顔検出枠Ｋが表示される（図６参照）。また顔検出部６９は、例えば図示しない顔検出ボタンによって顔検出のＯＮ／ＯＦＦを設定するようにしてもよいし、メニュー／ＯＫボタン１２等によって顔検出のＯＮ／ＯＦＦを選択するようにしてもよいし、適宜変更可能である。また肖像権保護モードが選択されたときには顔検出はＯＮに設定される。

本実施形態では、人物の顔を検出するものとして以下説明するが、特別な建物等、別の対象物を検出するようにしてもよい。

顔判断部（被写体判断手段）８０は、顔検出部６９により検出された１つ以上の顔に対して、それぞれ有効顔（有効被写体）か無効顔（無効被写体）かを判断する。つまり顔検出部６９により検出された顔が、撮影者が所望する被写体であるか否かを判断する。このとき本実施形態では該判断は、顔の大きさ、位置、変化量、合焦評価値の情報に基づいて行うものとする。なお本発明はこれに限られるものではなく、例えば上記各種情報の一つのみに基づいて前記判断をしてもよいし、上記各種情報からいくつかを選択し、該選択された情報に基づいて前記判断をしてもよい。また上記各種情報とは別の情報をさらに加えて前記判断をしてもよいし、適宜変更可能である。なおこの顔判断部８０による前記判断については後で詳細に説明する。

有効顔変更部（有効被写体変更手段）８１は、顔判断部８０により有効顔と判断された顔の数を変更するものであり、該有効顔の数が、例えばユーザによってメニュー／ＯＫボタン１２、ズーム／上下矢印レバー１３、左右矢印ボタン１４等を操作することにより入力されて任意に設定された顔の数よりも多いときに、上記各種情報の優先度の低いものの順に有効顔から無効顔に繰り下げ、任意に設定された顔の数よりも少ないときに、上記各種情報の優先度の高いものの順に無効顔から有効顔に繰り上げる。なおこの優先度については後で詳細に説明する。

肖像権保護部（肖像権保護手段）８２は、顔判断部８０により無効顔であると判断された顔に対して、肖像権を保護するものである。具体的には無効顔に対してモザイク処理、ぼかし処理又はトリミング処理を施したり、無効顔があるときに警告したり、無効顔が含まれる画像データの印刷を不可能にしたりするものがあり、このような複数種類の肖像権保護部８２を備えてもよいし、１つの種類の肖像権保護部８２を備えてもよい。なお肖像権保護部８２については後で詳細に説明する。

ＡＦ処理部６２は、画像データに基づいて焦点位置を検出して合焦設定値（フォーカス駆動量）を決定し、フォーカス駆動量データを出力する（ＡＦ処理）。焦点位置の検出方式としては、例えば、ピントが合った状態では画像の合焦評価値（コントラスト値）が高くなるという特徴を利用して合焦位置を検出するパッシブ方式が適用される。

ＡＥ処理部６３は、画像データに基づいて被写体輝度（測光値）を測定し、測定した被写体輝度に基づいて絞り値及びシャッタスピード等の露出設定値を決定し、絞り値データ及びシャッタスピードデータを出力する（ＡＥ処理）。

ＡＷＢ処理部６４は、撮像時のホワイトバランスを自動調整する（ＡＷＢ処理）。なお、ＡＷＢ処理部６４は、撮像前でも、本撮影後でもホワイトバランスの調整を行うことができる。

画像処理部（画像処理手段）６８は、本画像の画像データに対してガンマ補正処理、輪郭強調（シャープネス）処理、コントラスト処理、ノイズ低減処理等の画質補正処理を施すと共に、ＣＣＤ−ＲＡＷデータを輝度信号であるＹデータと、青色色差信号であるＣｂデータ及び赤色色差信号であるＣｒデータとからなるＹＣデータに変換するＹＣ処理を行う。

なお本画像とは、撮影者によって撮影指示がなされた時、例えばシャッタボタン１９が全押し操作された時にＣＣＤ５８から取り込まれ、アナログ信号処理部６０、画像入力コントローラ６１経由でフレームメモリ６６に格納された画像データによる画像であり、この本画像を取得することを本撮影という。本画像の画素数の上限はＣＣＤ５８の画素数によって決定されるが、例えば、撮影者が設定可能な画質設定（ファイン、ノーマル等の設定）により、記録画素数を変更することができる。一方、スルー画像等の画素数は本画像より少なくてもよく、例えば、本画像の１／１６程度の画素数で取り込まれてもよい。

圧縮／伸長処理部６５は、画像処理部６８によって画質補正等の処理が行われた本画像の画像データに対して、例えばＪＰＥＧ等の圧縮形式で圧縮処理を行って、画像ファイルを生成する。この画像ファイルには、Ｅｘｉｆ形式等に基づいて、撮影日時や、肖像権保護モードで撮影された画像であるか等の付帯情報が格納されたタグが付加される。またこの圧縮／伸長処理部６５は、再生モードにおいては外部記録メディア７０から圧縮された画像ファイルを読み出し、伸長処理を行う。伸長後の画像データは表示制御部７１に出力され、表示制御部７１は画像データに基づいた画像を液晶モニタ１８に表示する。

メディア制御部６７は、図２におけるメディアスロット２６に相当し、外部記録メディア７０に記憶された画像ファイル等の読み出し、又は画像ファイルの書き込みを行う。

内部メモリ（記憶手段）８２は、デジタルカメラ１において設定される各種定数、及び、ＣＰＵ７５が実行するプログラム等を格納すると共にシャッタボタン１９が半押し及び全押しされたときに顔検出枠Ｋに関する各種情報が格納された顔検出タグを記憶する。なおこのとき各種情報は、顔検出枠Ｋの位置、大きさ（面積）及び合焦評価値等を含むものとする。ここで合焦評価値は、顔検出枠Ｋの内部領域における画像データをフィルタリング処理してその高周波成分を求め、該高周波成分の絶対値を積分した値とする。また顔検出枠Ｋの大きさ、つまり内部領域の面積は、例えば画素数に基づいて算出される。なお位置の算出方法については後で詳細に説明する。

ＣＰＵ７５は、各種ボタン、レバー、スイッチの操作や各機能ブロックからの信号に応じて、デジタルカメラ１の本体各部を制御する。なお上記肖像権保護部８２が複数種類備えられている場合には、そのうちの１つを選択する選択部（選択手段）としても機能する。これは例えばズーム／上下矢印レバー１３や左右ボタン１４等をユーザが操作することにより使用したい肖像権保護部８２を設定し、選択部としてのＣＰＵ７５がどの肖像権保護部８２が設定されているのか否かを判別することにより設定された肖像権保護部８２を選択する。

またデータバス７６は、画像入力コントローラ６１、各種処理部６２〜６５、６８、フレームメモリ６６、各種制御部６７、７１、顔検出部６９、顔判断部８０、有効顔変更部８１、肖像権保護部８２、内部メモリ７７及びＣＰＵ７５に接続されており、このデータバス７６を介して各種信号、データの送受信が行われる。

次に、以上の構成のデジタルカメラ１において肖像権保護モードの撮影時に行われる処理について説明する。図４はデジタルカメラ１の撮影処理のフローチャート、図５は顔判断処理のフローチャート、図６は撮像画像の一例を示す図、図７は顔の位置情報に基づく有効性判断を説明する図、図８は撮像画像の別の一例を示す図である。

デジタルカメラ１は、電源が入れられると図４Ａに示す如く、被写体の撮像を開始して（ステップＳ１）、表示制御部７１がスルー画像の表示制御を行う。スルー画像の表示とはフレームメモリ６８に格納された画像データを液晶モニタ１８に表示する処理であり、このスルー画像にて顔検出部６９が常時顔の検出を行い、液晶モニタ１８に検出された顔を囲む顔検出枠Ｋを表示する。

次にＣＰＵ７５は、シャッタボタン１９が半押し（Ｓ１）されたか否かを判別する（ステップＳ２）。シャッタボタン１９が半押しされていない場合（ステップＳ２；ＮＯ）には、ＣＰＵ７５はシャッタボタン１９が半押しされるまでステップＳ２の処理を繰り返し行い、シャッタボタン１９が半押し（Ｓ１）されている場合には（ステップＳ２；ＹＥＳ）、ＣＰＵ７５はＳ１時に顔検出部６９により検出された顔の顔検出タグ（Ｓ１顔検出タグ）を取得して内部メモリ７７に記憶する（ステップＳ３）。そしてＡＥ処理部６３及びＡＦ処理部６２がＡＥ処理及びＡＦ処理をそれぞれ行う（ステップＳ４）。

次にＣＰＵ７５は、シャッタボタン１９が全押し（Ｓ２）されたか否かを判別し（ステップＳ５）、シャッタボタン１９が全押しされていない場合（ステップＳ５；ＮＯ）には、ＣＰＵ７５はシャッタボタン１９の半押しが解除されたか否かを判別し（ステップＳ６）、半押しが解除されている場合（ステップＳ６；ＹＥＳ）には、ステップＳ２へ処理を移行する。シャッタボタン１９が、半押しが解除されていない場合（ステップＳ６；ＮＯ）には、ステップＳ５へ処理を移行して、ステップＳ５以降の処理を繰り返し行う。

一方、ステップＳ５にてシャッタボタン１９が全押し（Ｓ２）された場合（ステップＳ５；ＹＥＳ）には、ＣＰＵ７５がＳ２時に顔検出部６９により検出された顔の顔検出タグ（Ｓ２顔検出タグ）を取得して内部メモリ７７に記憶すると共に（ステップＳ７）、撮像部１００が被写体を本撮影する（ステップＳ８）。このとき本撮影により取得された本画像に対して画像処理部６８が画像処理を施してもよい。

そして次に、図４Ｂに示す如く、顔判断部８０が、Ｓ２時に顔検出部６９により検出された顔が有効顔か無効顔かを判断する顔判断処理を行う（ステップＳ９）。

顔判断処理は、図５Ａに示す如く、先ずＳ２顔検出タグの数（ｍ）つまり顔検出部６９によって検出された顔の数をカウントし（ステップＳ２０）、それぞれＳ２顔検出タグから顔検出枠Ｋの面積を算出する（ステップＳ２１）。なお本実施形態では、顔の大きさとして、顔検出枠Ｋ内の面積を算出するが、本発明はこれに限られるものではなく、例えば顔の輪郭の内側を面積としてもよいし、適宜変更可能である。そして算出した面積に基づいて、Ｓ２顔検出タグを面積の大きいものから順に、ステップＳ２３以降の処理へ送る（ステップＳ２２）。

先ずｎを初期化し（ステップＳ２３）、次にｎにｎ＋１を代入する（ステップ２４）。次にｎがｍよりも大きい（ｎ＞ｍ）か否かを判別し（ステップＳ２５）、ｎがｍ以下である場合（ステップＳ２５：ｎ＞ｍ；ＮＯ）には、さらにｎが１である（ｎ＝１）か否かを判別する（ステップＳ２６）。

そしてｎが１である場合（ステップＳ２６：ｎ＝１；ＹＥＳ）には、図５Ｂに示す如く、ステップＳ２２の処理によって最初に送られてきた顔、つまり顔検出部６９によって検出された顔のうち最も顔検出枠Ｋの面積の大きい顔（図６又は図８中、顔検出枠Ｋ１内の顔）であるため、ステップＳ３２の顔の大きさ情報に基づく有効性の判断を行わずに、顔の位置が有効であるか否かを判断する（ステップＳ２７）。

顔の位置の有効性を判断する方法としては、通常、撮影者が所望する被写体は撮影視野の中央に位置することが多いので、先ずデジタルカメラ１の有効画素数内で、顔が検出されても、検出された顔を有効顔としない端辺領域を決定する。本実施形態においては、例えばデジタルカメラ１の有効画素数を３０７２×２３０４ピクセルとし、端辺領域として上下左右の各端辺から例えば３００ピクセルの領域を設定する。

すると端辺領域ではない領域つまり顔が検出されたときに検出された顔が有効顔となる有効領域は、図７に示す如く、画像の左上を原点に設定する場合には、有効領域の左上の座標点Ｔ３００ｒ及び右下の座標点Ｔ３００ｓは下記式（１）（２）のように算出される。

一方、Ｓ２時に撮像された画像データにおいて、図６に示す如く、顔検出部６９により例えば4つの顔が検出されると、検出された顔をそれぞれ囲む顔検出枠Ｋ１〜Ｋ４が表示される。このとき各顔検出枠Ｋ１〜Ｋ４の左上Ｒの座標と右下Ｌの座標を例えば、

とすると、各顔検出枠Ｋ１〜Ｋ４の中心点Ｋ１ｓ〜Ｋ４ｓは下記式（３）〜（６）により算出されて、座標上では図７に示すように位置する。なおこの中心点Ｋｓは、Ｓ１時及びＳ２時に顔検出枠Ｋの位置情報として顔検出タグに格納され内部メモリ７７に記憶される。

これにより、Ｋ１ｓ、Ｋ２ｓ、Ｋ３ｓの座標は、上記有効領域内であるが、Ｋ４ｓの座標は端辺領域内であることがわかり、図５ＡのステップＳ２２にて面積の大きい順に送られてくるＳ２顔検出タグが顔検出枠Ｋ１、Ｋ２、Ｋ３である場合には、この枠内の顔の位置はそれぞれ端辺領域の外に位置するとして有効とし、顔検出枠Ｋ４である場合には、この枠内の顔の位置は端辺領域内に位置するとして無効と判断する。

そして顔の位置が有効ではないと判断された場合（ステップＳ２７；ＮＯ）には、この顔は無効顔であると判断し、この顔の顔検出タグに無効顔のタグを追加する（ステップＳ３１）。一方、顔の位置が有効であると判断された場合（ステップＳ２７；ＹＥＳ）には、次に顔の変化量が有効であるか否かを判断する（ステップＳ２８）。

顔の変化量の有効性を判断する方法としては、通常、撮影対象となる被写体は撮影されるのを待機しているので動かないことが多いため、顔の変化量が所定の閾値よりも大きい場合には、その顔は例えば偶然通りかかった人や意図しないで撮影視野内に入ってしまった、撮影者が所望しない人等の顔である可能性が高いとして無効と判断し、顔の変化量が所定の閾値よりも小さい場合には、撮影されるのを動かないで待機している、撮影者が所望する人である可能性が高いとして有効と判断する。

なお顔の変化量はＳ１時及びＳ２時に算出され内部メモリ７７にそれぞれ記憶された顔の中心点Ｋｓ１、Ｋｓ２の差異Δ（Ｒ１、Ｒ２）とすることができ、この差異Δ（Ｒ１、Ｒ２）のＲ１とＲ２がそれぞれ例えば閾値１０以内である場合にその顔の変化量を有効と判断する。この顔の変化量の情報は、顔検出タグに追加して記憶させる。

そして顔の変化量が有効ではないと判断された場合（ステップＳ２８；ＮＯ）には、この顔は無効顔であると判断し、この顔の顔検出タグに無効顔のタグを追加する（ステップＳ３１）。一方、顔の変化量が有効であると判断された場合（ステップＳ２８；ＹＥＳ）には、次に顔の合焦評価値が有効であるか否かを判断する（ステップＳ２９）。

顔の合焦評価値の有効性を判断する方法としては、通常、撮影者は所望する被写体にピントを合わせるので、ピントの合った被写体は合焦評価値が高くなる。よってＳ２時に算出され内部メモリ７７に記憶された合焦評価値が所定の閾値（例えば１）以上である場合には、その顔がピントの合った、撮影者の所望する顔である可能性が高いとして有効と判断し、合焦評価値が所定の閾値（例えば１）よりも小さい場合には、その顔がいわゆるピンボケで、撮影者の所望する顔である可能性が低いとして無効と判断する。

そして顔の合焦評価値が有効ではないと判断された場合（ステップＳ２９；ＮＯ）には、この顔は無効顔であると判断し、この顔の顔検出タグに無効顔のタグを追加する（ステップＳ３１）。一方、顔の合焦評価値が有効であると判断された場合（ステップＳ２９；ＹＥＳ）には、この顔は有効顔であると判断し、この顔の顔検出タグに有効顔のタグを追加する（ステップＳ３０）。

そしてステップＳ３０又はステップＳ３１により、顔が有効顔であるか無効顔であるかが判断されると、図５Ａに示す如く、ステップＳ２４へ処理を移行してｎに１を加え（ステップＳ２４）、ｎがｍよりも大きい（ｎ＞ｍ）か否かを判別し（ステップＳ２６）、ｎがｍ以下である場合（ステップＳ２５：ｎ＞ｍ；ＮＯ）には、さらにｎが１である（ｎ＝１）か否かを判別する（ステップＳ２６）。

ここで今回の判断の対象となる顔は、ステップＳ２２の処理によって２番目以降に送られてきた顔、つまり顔検出部６９によって検出された顔のうち最も顔検出枠Ｋの面積の大きい顔（図６又は図８中、顔検出枠Ｋ１内の顔）以外の顔（図６又は図８中、例えば２番目は顔検出枠Ｋ２内の顔、三番目は顔検出枠Ｋ３内の顔）であるため、ステップＳ３２にて顔の大きさが有効であるか否かを判断する（ステップＳ３２）。

顔の大きさの有効性を判断する方法としては、通常、撮影者が所望する被写体は撮影視野内で大きな領域を占めることが多い。よってＳ２時に算出され内部メモリ７７に記憶された顔の大きさが所定の閾値よりも大きい場合には撮影者が所望する顔である可能性が高いとして有効と判断し、顔の大きさが所定の閾値よりも小さい場合には撮影者が所望する顔である可能性が低いとして無効と判断する。

なお所定の閾値は、例えば図８に示す如く、最も面積の大きい顔検出枠Ｋ１の面積の１／２に設定することができる。つまり顔検出枠Ｋ１に対して判断対象となる顔の顔検出枠Ｋが面積比で１／２以上であれば有効と判断することができる。この場合、図８において顔検出枠Ｋ２内の顔の大きさは、面積Ｋ２／面積Ｋ１＞０．５となるため有効と判断し、顔検出枠Ｋ３内の顔の大きさも、面積Ｋ３／面積Ｋ１＞０．５となるため有効と判断する。また顔検出枠Ｋ４内の顔の大きさは、面積Ｋ４／面積Ｋ１＜０．５となるため無効と判断する。

そして顔の大きさが有効であると判断された場合（ステップＳ３２；ＹＥＳ）には、ステップＳ２７へ処理を移行して、以降の処理を繰り返し行う。一方、顔の大きさが有効ではないと判断された場合（ステップＳ３２；ＮＯ）には、この顔は無効顔であると判断し、この顔の顔検出タグに無効顔のタグを追加する（ステップＳ３１）。

そしてステップＳ３０又はステップＳ３１により、判断対象の顔が有効顔であるか無効顔であるかが判断されると、図５Ａに示す如く、ステップＳ２４へ処理を移行してｎに１を加え（ステップＳ２４）、ｎがｍよりも大きい（ｎ＞ｍ）か否かを判別し（ステップＳ２５）、ｎがＳ２顔検出タグの数（ｍ）よりも大きくなる（ステップＳ２５；ＮＯ）まで、つまり顔検出部６９によって検出された顔全てに対して有効顔であるか無効顔であるかの判断が終了するまでステップＳ２６以降の処理を繰り返して行う。

そしてｎがＳ２顔検出タグの数（ｍ）よりも大きくなる（ステップＳ２５；ＮＯ）、つまり顔検出部６９によって検出された顔全てに対して有効顔であるか無効顔であるかの判断が終了すると、顔判断部８０による顔判断処理は終了し、ＣＰＵ７５は図４Ｂに示す如く、処理をステップＳ１０へ移行して、有効顔変更部８１が有効顔変更処理を行う（ステップＳ１０）。

なお本実施形態では、顔判断処理として、顔の大きさ、位置、変化量及び合焦評価値の全てに基づいて有効性を判断したが、本発明はこれに限られるものではなく、例えば顔の大きさ、位置、変化量及び合焦評価値から１つ以上を選択して判断してもよい。また例えば、図５ＢのステップＳ２７の直前からステップＳ３０の前の間に、顔検出枠Ｋ内の明るさや顔の鮮鋭度等に基づいた有効性の判断処理を追加してもよい。

顔検出枠Ｋ内の明るさの有効性判断は、顔検出枠Ｋ内のＬ＊平均値を用いて行うことができる。計算方法としては、検出された各顔領域つまり顔検出枠Ｋ内のＲＧＢの平均値よりＸＹＺ値に変換し、ＸＹＺ値よりＬ*ａ*ｂに変換する。

先ずデジタルＲＧＢ値よりリニアＲＧＢ値に変換する。なおｓＲＧＢを仮定したとき、デジタルＲＧＢ値に対しリニアＲＧＢ値は下記式（７）で示すことができる。

そして下記式（８）によってリニアＲＧＢ値からＸＹＺ値に変換する。

次にＸＹＺ値からＬ*ａ*ｂに変換する。なおＸ，Ｙ，ＺはＸＹＺ変換値であり、Ｘｎ，Ｙｎ，ＺｎはＤ６５である。

輝度リニア変換後に、ＸＹＺ変換をした後で、下記式（９）によってＬａｂを算出する。

そして上記のようにして算出した各顔検出枠Ｋ内のＬ＊平均値が、例えば４０〜７０の範囲内であるときに有効と判断する。

また顔の鮮鋭度の有効性の判断は、離散フーリエ変換を用いた画像の鮮鋭度の公知の評価方法を使用することができる。ここで図９（ａ）に撮像画像の周波数成分の分布を示す図、図９（ｂ）に各空間周波数のパワースペクトルを濃淡画像として示す図を示す。

先ず下記式（１０）に示す離散フーリエ変換の式を用いて各周期の振幅を求める。

このとき得られる値はスペクトルと呼ばれ、振幅の絶対値の２乗で表された値をパワースペクトルと呼び、図９（ａ）に示す如く、実画像の周波数成分の分布を得ることができる。また図９（ｂ）に示す如く、図９（ａ）の各空間周波数のパワースペクトルを濃淡画像で示すと、座標の中心付近は低周波を表し、中心から離れる程高周波を表す。

顔の鮮鋭度の判断は、顔検出されたパワースペクトルが、設定した周波数ｆｋのパワースペクトルの値が例えば０．１以下の場合に顔の鮮鋭度が低いと判断し無効とする。

次に図４ＢのステップＳ１０の有効顔変更処理について説明する。図１０は有効顔変更処理のフローチャートである。有効顔変更処理は、図１０に示す如く、例えばユーザにより入力された任意の数を顔の数（ｍ）として設定する（ステップＳ４０）。次に図４ＢのステップＳ９の顔判断処理により判断された有効顔の数（ｎ）をカウントする（ステップＳ４１）。

そして、任意の設定した顔の数（ｍ）が有効顔の数（ｎ）よりも大きいか否かを判別し（ステップＳ４２）、大きい場合（ステップＳ４２；ＹＥＳ）には、無効顔のタグが追加された顔検出タグを読み込んで（ステップＳ４３）、読み込んだ顔検出タグの各種情報の優先度の高いものの順に有効顔に繰り上げて（ステップＳ４４）、無効顔から有効顔へタグを変更する。

ここで各種情報の優先度は、顔の大きさ情報においては、通常、撮影者が所望する被写体は撮影視野内で大きな領域を占めることが多いので、例えば顔の大きさつまり顔検出枠Ｋ内の面積が大きいものの順に優先度が高いものとする。また顔の位置情報においては、通常、撮影者が所望する被写体は撮影視野の中央に位置することが多いので、例えば画像において中央に近い顔の順に優先度が高いものとする。

また顔の変化量情報においては、通常、撮影対象となる被写体は撮影されるのを待機しているので動かないことが多い。従って例えは変化量が少ないものの順に優先度が高いものとする。また顔の合焦評価値においては、通常、撮影者は所望する被写体にピントを合わせるので、例えば合焦評価値の高いものの順に優先度が高いものとする。

一方、ステップＳ４２にて任意の設定した顔の数（ｍ）が有効顔の数（ｎ）よりも小さい場合（ステップＳ４２；ＮＯ）には、有効顔のタグが追加された顔検出タグを読み込んで（ステップＳ４５）、読み込んだ顔検出タグの各種情報の優先度の低いものの順に無効顔に繰り下げて（ステップＳ４６）、有効顔から無効顔へタグを変更する。

なおステップＳ４２にて、任意の設定した顔の数（ｍ）が有効顔の数（ｎ）と同じ数（ｍ＝ｎ）である場合には、以降の処理を行わずに、ＣＰＵ７５が図４ＢのステップＳ１１へ処理を以降する。このようにして有効顔変更部８１が有効顔変更処理を行うことにより、有効顔の検出精度を上げることができる。

そして有効顔変更処理が終了すると、ＣＰＵ７５が、図４Ｂに示す如く、処理をステップＳ１１へ移行し、ＣＰＵ７５が本画像上に無効顔があるか否かを判別する（ステップＳ１１）。無効顔がないと判別された場合（ステップＳ１１；ＮＯ）には、画像処理部６８によって画像処理が施された本画像を、表示制御部７１を介してモニタ１８に表示する処理を行うともにメディア制御部６９を介して外部記録メディア７０に記録する（ステップＳ１３）。なおこのとき画像処理が施された本画像データに対してさらに圧縮／伸長処理部６７によって圧縮処理が施されて画像ファイルが生成されてもよい。

そしてＣＰＵ７５は電源スイッチ２２によってオフ操作がなされたか否かを判別し（ステップＳ１４）、オフ操作がなされていたら（ステップＳ１４；ＹＥＳ）、デジタルカメラ１の電源をオフし、処理を終了する。オフ操作がなされていなかったら（ステップＳ１４；ＮＯ）、図４Ａに示す如く、ステップＳ１へ処理を移行し、ステップＳ１以降の処理を繰り返す。

一方、ステップＳ１１にて無効顔があると判別された場合（ステップＳ１１；ＹＥＳ）には、肖像権保護部８２が肖像権の保護処理を行う（ステップＳ１２）。

肖像権保護処理としては、上述したように、無効顔に対してモザイク処理又はぼかし処理を行うことができる。

モザイク処理は、下記式（１１）によって複数画素の集合いわゆるセルにおけるＲＧＢ値を平均化することにより行う。なお下記式（１１）においてｎは平均化するセルにおける画素数を示す。

ここで図１１（ａ）から（ｆ）にモザイク処理が施された顔領域の画像の一例を示す。例えば図１１に示す顔領域の画像の画素数が、２００×２００ピクセルである場合に、例えばｎ＝１×１で平均化を行ってモザイク処理を施すと、図１１（ａ）に示す如く、モザイク処理がされていない状態の画像となり、ｎの値が大きくなるにつれて図１１（ｂ）、（ｃ）、（ｄ）、（ｅ）の順に示す如く、顔の詳細が確認し難い画像となる。そしてｎ＝２００×２００で平均化を行ってモザイク処理を施すとセル内は均一な色になる。

またぼかし処理は、下記式（１２）のガウス関数を使用したぼかしフィルタによって行う公知の処理を使用することができる。

次に図１２に肖像権保護部８２によるモザイク又はぼかし処理のフローチャートを示す。肖像権保護部８２は、図１１に示す如く、先ず肖像権保護モードが設定されているか否かを判別し（ステップＳ５１）、設定されている場合（ステップＳ５１；ＹＥＳ）には、無効顔のタグを読み込んで（ステップＳ５２）、無効顔つまり無効顔を含む顔検出枠Ｋ内部の画像領域に対して上述したモザイク処理又はぼかし処理を行う（ステップＳ５３）。このときモザイク処理とぼかし処理とは、上述したように予め選択部としてのＣＰＵ７５により選択された肖像権保護部８２が施すことができる処理を行う。

そして無効顔に対してモザイク処理又はぼかし処理が施されると、画像処理が施された本画像を、表示制御部７１を介してモニタ１８に表示する処理を行うともにメディア制御部６９を介して外部記録メディア７０に記録する（ステップＳ５４）。

一方、ステップＳ５１にて肖像権保護モードが設定されていない場合（ステップＳ５１；ＮＯ）には、ステップＳ５４に処理を移行して、画像処理部６８による画像処理が施された本画像を、表示制御部７１を介してモニタ１８に表示する処理を行うともにメディア制御部６９を介して外部記録メディア７０に記録する（ステップＳ５４）。このようにして肖像権保護部８２による肖像権保護処理としてのモザイク処理又はぼかし処理を行う。

これにより無効顔と判断された顔に対して個人を特定し難くすることができるので、無効顔と判断された人物のプライバシーや肖像権を保護することができる。

なお本実施形態では、顔検出枠Ｋ内部の画像領域に対してモザイク処理又はぼかし処理を行うものとしたが、本発明はこれに限られるものではなく、例えば顔検出部６９が顔に含まれる顔の特徴を有する領域（特異点）として目を検出するものである場合には、目の周辺部のみに上記処理を施すことができる。また顔検出部６９が顔の輪郭を検出するものである場合には、顔の輪郭内部のみ、又は顔の輪郭内部以外の顔検出枠Ｋ内部全ての領域に上記処理を施すこともできる。

また肖像権保護処理としては、上述したように、無効顔があるときに警告処理を行うことができる。ここで図１３に肖像権保護部８２による警告処理のフローチャートを示す。

肖像権保護部８２は、図１３に示す如く、先ず肖像権保護モードが設定されているか否かを判別し（ステップＳ６１）、設定されている場合（ステップＳ６１；ＹＥＳ）には、無効顔が撮影されたことを警告する（ステップＳ６２）。警告手段としては、例えば液晶モニタ１８に再撮影を促すエラーメッセージ等を表示させてもよいし、警告音を発してもよいし、音声にて前記エラーメッセージを伝達するようにしてもよいし、適宜変更することができる。

こうすることにより、例えば撮影時に通りすがりの人物が撮影され、この人物の顔が無効顔だと判断された場合には、再度撮影をするように警告されるので、この人物の撮影された画像が液晶モニタ１８に表示されたり、記録メディア７０に記録されたりすることを防止できる。

一方、ステップＳ６１にて肖像権保護モードが設定されていない場合（ステップＳ６１；ＮＯ）には、ステップＳ６３に処理を移行して、画像処理が施された本画像を、表示制御部７１を介してモニタ１８に表示する処理を行うともにメディア制御部６９を介して外部記録メディア７０に記録する（ステップＳ６３）。このようにして肖像権保護部８２による肖像権保護処理としての警告処理を行う。

また肖像権保護処理としては、上述したように、無効顔に対してトリミング処理を行うことができる。ここで図１４に肖像権保護部８２によるトリミング処理のフローチャート、図１５（ａ）にトリミング処理前の撮影画像の一例、図１５（ｂ）にトリミング処理後の撮影画像の一例を示す。

肖像権保護部８２は、図１４に示す、先ず肖像権保護モードが設定されているか否かを判別し（ステップＳ７１）、設定されている場合（ステップＳ７１；ＹＥＳ）には、無効顔のタグを読み込んで（ステップＳ７２）、さらに無効顔の位置を読み込んで（ステップＳ７３）、無効顔を含むトリミング領域を算出して、確認のためにトリミング領域を例えばグレー網がけして液晶モニタ１８に表示する（ステップＳ７４）。

トリミング領域の算出は、図１５（ａ）に示す如く、有効顔として顔検出枠Ｋ１、Ｋ２、Ｋ３内の顔、無効顔として顔検出枠Ｋ４内の顔が撮影されたときに、この画像の縦横比が例えば４：５である場合には、図１５（ｂ）に示す如く、無効顔である顔検出枠Ｋ４内の顔を含まないで、かつ縦横比４：５を保持する最大面積の画像が残るように、該画像以外の無効顔を含む領域（図１５（ｂ）中、黒色領域）をトリミング領域として算出する。

そして算出されたトリミング領域に基づいてトリミングを開始し（ステップＳ７５）、トリミング処理が施された画像を、表示制御部７１を介してモニタ１８に表示する処理を行うともにメディア制御部６９を介して外部記録メディア７０に記録する（ステップＳ７６）。

一方、ステップＳ７１にて肖像権保護モードが設定されていない場合（ステップＳ７１；ＮＯ）には、ステップＳ７７に処理を移行して、画像処理が施された本画像を、表示制御部７１を介してモニタ１８に表示する処理を行うともにメディア制御部６９を介して外部記録メディア７０に記録する（ステップＳ７７）。このようにして肖像権保護部８２による肖像権保護処理としてのトリミング処理を行う。

上記のようにしてトリミング処理を行うことにより、例えば撮影時に通りすがりの人物が撮影され、この人物の顔が無効顔だと判断された場合には、この人物の顔は自動的にトリミングされるので、この人物が撮影された画像が液晶モニタ１８に表示されたり、記録メディア７０に記録されたりすることを防止できる。

なおこのトリミング処理は無効顔が画像の上下左右の端辺側に位置しているときには実行可能であるが、例えば無効顔が画像の中央等にある場合には上記方法にてトリミング領域を算出することができないので実行することができない。この場合、例えば選択部としてのＣＰＵ７５がトリミング処理以外の処理を施す肖像権保護部８２を再選択してもよい。

また肖像権保護処理としては、上述したように、無効顔が含まれる画像データの印刷を不可能にする印刷不能処理を行うことができる。ここで図１６に肖像権保護部８２による印刷不能処理のフローチャートを示す。

肖像権保護部８２は、図１６に示す、先ず肖像権保護モードが設定されているか否かを判別し（ステップＳ８１）、設定されている場合（ステップＳ８１；ＹＥＳ）には、画像データに印刷不可のタグを追加する（ステップＳ８２）。この印刷不可のタグは、例えばインクジェットプリンタ等の印刷機器において検出されると画像の印刷を不可能にする。そして画像処理が施された本画像を、表示制御部７１を介してモニタ１８に表示する処理を行うともにメディア制御部６９を介して外部記録メディア７０に記録する（ステップＳ８３）。

一方、ステップＳ８１にて肖像権保護モードが設定されていない場合（ステップＳ８１；ＮＯ）には、ステップＳ８３に処理を移行して、画像処理が施された本画像を、表示制御部７１を介してモニタ１８に表示する処理を行うともにメディア制御部６９を介して外部記録メディア７０に記録する（ステップＳ８３）。このようにして肖像権保護部８２による肖像権保護処理としての印刷不能処理を行う。

そして上記に説明した肖像権保護処理が終了すると（ステップＳ１２）、図４Ｂに示す如く、ＣＰＵ７５は電源スイッチ２２によってオフ操作がなされたか否かを判別し（ステップＳ１４）、オフ操作がなされていたら（ステップＳ１４；ＹＥＳ）、デジタルカメラ１の電源をオフし、処理を終了する。オフ操作がなされていなかったら（ステップＳ１４；ＮＯ）、図４Ａに示す如く、ステップＳ１へ処理を移行し、ステップＳ１以降の処理を繰り返す。このようにしてデジタルカメラ１は被写体の撮影を行う。

次にデジタルカメラ１により撮影された画像を例えばインクジェットプリンタ等の印刷機器によって印刷する印刷処理について説明する。ここで図１７に例えばインクジェットプリンタ等の印刷機器による印刷処理のフローチャートを示す。

撮影画像を印刷するときに印刷機器は、図１７に示す如く、先ず印刷画像が入力され（ステップＳ９１）、次に入力された画像ファイルに無効顔のタグがあるか否かを判別する（ステップＳ９２）。無効顔のタグがない場合（ステップＳ９２；ＮＯ）には、印刷機器は画像ファイルのデータに基づいて画像を印刷する（ステップＳ９３）。

一方、無効顔のタグがある場合（ステップＳ９２；ＹＥＳ）には、肖像権保護モードのタグがあるか否か、つまり肖像権保護モードで撮影された画像であるか否かを判別し（ステップＳ９４）、肖像権保護モードではない場合（ステップＳ９４；ＮＯ）には、ステップＳ９３へ処理を移行して、印刷機器は画像ファイルのデータに基づいて画像を印刷する（ステップＳ９３）。

また肖像権保護モードである場合（ステップＳ９４；ＹＥＳ）には、画像ファイルの印刷不可のタグがあるか否かを判別し（ステップＳ９５）、印刷不可のタグがある場合（ステップＳ９５；ＹＥＳ）には、例えば印刷機器の液晶パネル上等にエラーを表示する（ステップＳ９６）。なおエラーが表示されたときには画像の印刷は行われない。

一方、印刷不可のタグがない場合（ステップＳ９５；ＮＯ）には、肖像権保護印刷を行う（ステップＳ２７）ここで肖像権保護印刷とは、上述したように無効顔と判断された顔に対してモザイク処理、ぼかし処理又はトリミング処理等の肖像権保護処理が施された画像を印刷することをいう。

なお本実施形態では、印刷機器が無効顔のタグがある場合であっても、モザイク処理、ぼかし処理又はトリミング処理の肖像権保護処理が施された画像であれば印刷するようにしたが、例えばデジタルカメラ１で無効顔に対して、モザイク処理、ぼかし処理又はトリミング処理の肖像権保護処理が施されたときに、無効顔のタグを削除することにより、無効顔のタグがないのみに印刷するようにしてもよい。この場合印刷される画像は、前記肖像権保護処理が施された画像又は無効顔を含まない画像となる。

これにより、無効顔に対して前記肖像権保護処理が施された画像又は無効顔を含まない画像無効顔を含んだ画像のみを印刷することが可能となるので、無効顔を含む画像の誤印刷を防止することができる。

以上のように、本実施形態のデジタルカメラ１によれば、被写体を撮像して取得した画像データから検出した１つ以上の顔に対して、それぞれ有効顔か無効顔かを判断し、無効顔と判断された顔に対して肖像権保護処理を施すので、撮影者が所望しない顔つまり第三者を無効顔と判断することにより、第三者に対して自動的に肖像権保護処理が施されるので、撮影された画像を公開するときに第三者に対するプライバシーや肖像権の侵害を防ぐことができる。

また被写体とする顔の数を任意に設定し、有効顔と判断した顔の数が設定した顔の数よりも多いときに、顔の大きさ、位置、変化量、合焦評価値等の各種情報の優先度の低いものの順に有効顔から無効顔に繰り下げ、設定した顔の数よりも少ないときに、前記各種情報の優先度の高いものの順に無効顔から有効顔に繰り上げることにより、有効顔の検出精度を上げることができる。

なお本実施形態のデジタルカメラ１は、有効顔変更部８１を備えるものとしたが、本発明の撮像装置は有効顔変更部８１を備えていなくても良い。この場合、図４ＢのステップＳ１０の処理は行わない。

なお本発明の撮像装置は、上述した実施形態のデジタルカメラ１に限られるものではなく、本発明の趣旨を逸脱しない範囲において適宜変更可能である。

デジタルカメラの背面図 デジタルカメラの前面図 デジタルカメラの機能ブロック図 デジタルカメラの撮影処理のフローチャート（その１） デジタルカメラの撮影処理のフローチャート（その２） 顔判断処理のフローチャート（その１） 顔判断処理のフローチャート（その２） 撮像画像の一例を示す図 顔の位置情報に基づく有効性判断を説明する図 撮像画像の別の一例を示す図 （ａ）撮像画像の周波数成分の分布（ｂ）各空間周波数のパワースペクトルを濃淡画像 有効顔変更処理のフローチャート モザイク処理が施された顔領域の画像の一例 モザイク処理又はぼかし処理のフローチャート 警告処理のフローチャート トリミング処理のフローチャート （ａ）トリミング処理前の撮影画像（ｂ）トリミング処理後の撮影画像 印刷不能処理のフローチャート 印刷機器による印刷処理のフローチャート

符号の説明

１ 撮像装置
１００ 撮像部（撮像手段）
６９ 顔検出部（対象物検出手段）
７５ ＣＰＵ（選択手段）
８０ 顔判断部（被写体判断手段）
８１ 有効顔変更部（有効被写体変更手段）
８２ 肖像権保護部（肖像権保護手段）

Claims (11)

1. 被写体を撮像して画像データを取得する撮像手段と、
   前記画像データから所定の対象物を検出する対象物検出手段と、
   該対象物検出手段により検出された１つ以上の対象物に対して、それぞれ有効被写体か無効被写体かを判断する被写体判断手段と、
   該被写体判断手段により無効被写体であると判断された前記対象物に対して肖像権を保護する肖像権保護手段とを備えてなることを特徴とする撮像装置。
2. 前記被写体判断手段が、前記対象物検出手段により検出された対象物の大きさ、位置、変化量及び合焦評価値のうち１つ以上を含む情報に基づいて前記判断をするものであることを特徴とする請求項１に記載の撮像装置。
3. 前記被写体判断手段により有効被写体と判断された前記対象物の数が、任意に設定された対象物の数よりも多いとき、前記各種情報の優先度の低いものの順に有効被写体から無効被写体に繰り下げ、
   前記数よりも少ないとき、前記各種情報の優先度の高いものの順に無効被写体から有効被写体に繰り上げる有効被写体変更手段を備えていることを特徴とする請求項２に記載の撮像装置。
4. 前記肖像権保護手段が、前記無効被写体と判断された前記対象物に対してモザイク処理を施すものであることを特徴とする請求項１から３いずれか１項に記載の撮像装置。
5. 前記肖像権保護手段が、前記無効被写体と判断された前記対象物に対してぼかし処理を施すものであることを特徴とする請求項１から３いずれか１項に記載の撮像装置。
6. 前記肖像権保護手段が、前記無効被写体と判断された前記対象物に対してトリミング処理を施すものであることを特徴とする請求項１から３いずれか１項に記載の撮像装置。
7. 前記肖像権保護手段が、前記無効被写体と判断された前記対象物があるときに警告するものであることを特徴とする請求項１から３いずれか１項に記載の撮像装置。
8. 前記肖像権保護手段が、前記無効被写体と判断された前記対象物があるときに該対象物が含まれる画像データの印刷を不可能にするものであることを特徴とする請求項１から３いずれか１項に記載の撮像装置。
9. 前記肖像権保護手段を複数種類備え、そのうちの１つを選択して使用する選択手段を備えたことを特徴とする請求項１から８いずれか１項に記載の撮像装置。
10. 被写体を撮像して画像データを取得し、該取得した画像データから所定の対象物を検出する撮像装置において、
    前記検出した１つ以上の対象物に対して、該対象物の大きさ、位置、変化量及び合焦評価値のうち１つ以上を含む情報に基づいて、それぞれ有効被写体か無効被写体かを判断し、
    無効被写体と判断された前記対象物に対して肖像権保護処理を施すことを特徴とする肖像権保護方法。
11. 被写体とする対象物の数を任意に設定し、
    前記有効被写体と判断した前記対象物の数が、前記設定した対象物の数よりも多いときに、前記各種情報の優先度の低いものの順に有効被写体から無効被写体に繰り下げ、
    前記数よりも少ないときに、前記各種情報の優先度の高いものの順に無効被写体から有効被写体に繰り上げることを特徴とする請求項１０に記載の肖像権保護方法。