JP4808918B2 - 撮像装置 - Google Patents

Description

本発明は、画像中の赤目部分や金目部分などといった目に関する所定の不具合を検出し、検出された不具合を修正する画像修正装置および撮像装置に関する。

従来より、閃光を発する発光部を有する閃光装置を備えたカメラが知られている。ここで、人物や動物の目は、暗所においては瞳孔が大きく開かれることによってより多くの光が取り入れられるような構造となっている。したがって、暗所において瞳孔が大きく開かれた状態の人物や動物を、カメラに備えられた閃光装置を用いて写真撮影すると、大きく開かれた瞳孔を通して閃光装置の発光部で発せられた閃光が眼球内に入射し、その閃光が眼球の内面を覆う網膜の毛細血管によって反射されることによって、人物や動物の瞳孔部分が赤く再現される、いわゆる赤目現象が起きる場合がある。また、カメラに備えられた閃光装置を用いて写真撮影すると、閃光装置で発せられた閃光が眼球に対して入射する入射角によっては、眼球の最外層をとりまく強膜や角膜でその閃光が反射することによって、人物や動物の瞳孔部分が白みを帯びたように再現される、いわゆる金目現象が起きる場合もある。

近年のデジタル処理技術の発達に伴い、上述したような、人物や動物の瞳孔部分が赤く再現されたり白みを帯びたように再現される写真を表す画像データを取得し、取得された画像データにより表わされる画像中の赤目部分や金目部分を検出し、検出された赤目部分や金目部分を修正する画像処理装置や電子カメラが提案されている（例えば、特許文献１参照）。
特開２０００−３０５１４１号公報

上述した特許文献１に提案された、Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ（ＣＣＤ）固体撮像素子上に被写体の像を結像させて、その被写体を表す画像データを信号として取り込む電子カメラは、上述したような、写真撮影された人物や動物の画像中の赤目部分を検出し、検出された赤目部分を修正する画像処理装置の機能が搭載されたものである。また、この特許文献１に提案された電子カメラには、画像を表示する画像表示装置が備えられており、赤目部分が検出されることによって画像表示装置に人物や動物の目が赤目に再現された画像が表示され、表示に基づいて撮影者等のユーザは写真撮影で得られた画像中の赤目部分を確認し、赤目部分の修正を行うか否かを判断する。判断の結果、赤目部分の修正を指示した場合には、赤目部分が修正された後の画像が画像表示装置に表示されることによって、正確に修正されたか否かを確認する。

ところが、電子カメラに備えられる画像表示装置は、一般に画面の小さなものであるため、このような画面の小さな画像表示装置で赤目部分を目視で確認することは困難であり、赤目部分を見落とすおそれがある。

このような問題点を解消する手段として、画像表示装置に表示された画像中の赤目部分を拡大表示することによって目視による赤目部分の確認を容易にする手段が知られているが、複数の目が赤目に再現された画像では、確認作業が煩雑となる。

上記の問題は、カメラや写真の分野に限らず、例えばＷＥＢ上から取り込んだ画像などといった任意の画像に対して画像処理を施す場合など、画像処理分野で一般的に生じる。

本発明は、上記事情に鑑み、画像中の赤目部分や金目部分などといった目に関する所定の不具合を容易に確認することができる画像修正装置および撮像装置を提供することを目的とする。

上記目的を達成する本発明の画像修正装置は、
画像を表す画像データを取得する画像取得部と、
画像取得部により取得された画像データにより表わされる画像中の目に関する所定の不具合を検出し、検出された不具合を修正する修正部と、
修正部により不具合が検出された箇所数を、その箇所を含む画像とともに表示する画像表示部とを備えたものであることを特徴とする。

本発明の画像修正装置は、画像中の赤目部分や金目部分などといった目に関する所定の不具合が検出された箇所数を、その箇所を含む、上記修正部によってその不具合が修正される前の画像、あるいは上記修正部によってその不具合が修正された後の画像とともに表示するものであるため、例えば複数の目が赤目に再現された画像であっても、表示された箇所数を参照することによって不具合を見落とすような過ちを犯すことなく不具合を容易に確認することができる。

ここで、本発明の画像修正装置において、上記修正部は、画像中の不具合を検出するとともに、不具合が見つかった箇所に所定の基準で優先順位を付けるものであり、
画像表示部は、画像を表示するにあたって、修正部によって付けられた優先順位が高い箇所を優先して表示するものであることが好ましい。

例えば、撮影画角の中央に写っている被写体や、顔部分が大きく写っている被写体などに高い優先順位をつけ、それ以外の被写体に低い優先順位をつけることによって、主要な被写体を優先して確認し、通行人などのような不要な被写体の確認作業を省くことができる。

また、本発明の画像修正装置において、上記画像表示部は、画像を表示するにあたって、上記箇所の一覧を表示するものであることが好適である。

この好適な画像修正装置によると、不具合が見つかった箇所を一度に確認することができる。

また、本発明の画像修正装置において、上記画像表示部は、画像を表示するにあたって、上記箇所を拡大して表示するものであることが好ましい。

このように、画像中の目に関する所定の不具合が検出された箇所数が、その箇所が拡大して表示された画像とともに表示されれば、その不具合の確認がより一層容易である。

また、本発明の画像修正装置において、上記画像表示部は、画像を表示するにあたって、上記箇所を拡大しない通常画像と、その箇所を拡大した拡大画像とを表示するものであることが好適である。

この好適な画像修正装置によると、通常画像全体を確認しながら、不具合が検出された箇所の細部や位置を確認することができる。

また、本発明の画像修正装置は、上記画像表示部に表示された画像中の、修正部により不具合が検出された箇所を確認する操作を受け付ける確認部を備え、
画像表示部は、箇所数を表わす表示を行うにあたって、確認部で確認された数を差し引いた箇所数を表わす表示を行うものであることが好ましい。

このような確認部を備え、確認された数を差し引いた箇所数が表示される画像修正装置であれば、画像中の目に関する所定の不具合を見落としてしまった場合であっても、箇所数を参照することによって確実にその不具合を確認することができる。

また、本発明の画像修正装置において、上記修正部は、画像中の赤目部分を検出し、検出された赤目部分を修正するものであることがさらに好ましい。

目に関する所定の不具合のうち特に赤目は、心理的な違和感が強いのに対し、視覚的には確認が困難であるため、このような、画像中の赤目部分に対する修正確認が容易な画像修正装置は特に有用である。

さらに、上記本発明の画像修正装置において、上記画像表示部は、上記修正部により上記不具合が検出された目の数を上記箇所数として表示するものであってもよく、あるいは、上記画像表示部は、上記修正部により上記不具合が検出された人の数を上記箇所数として表示するものであってもよい。

また、上記目的を達成する本発明の第１の撮像装置は、
撮影光学系を経由してきた被写体光による被写体像を固体撮像素子上に結像させて被写体像を表す画像データを得る撮像装置において、
被写体像中の目に関する所定の不具合を検出し、検出された不具合を修正する修正部と、
修正部により不具合が検出された箇所を含む画像を表示するとともに、不具合が検出された箇所数を表わす表示を行う画像表示部とを備えたものであることを特徴とする。

“発明が解決しようとする課題”で説明したように、撮像装置に備えられる画像表示装置は、一般に画面の小さなものであるが、本発明の撮像装置のように、被写体像中の赤目部分や金目部分などといった目に関する所定の不具合が検出された箇所数を、その箇所を含む、上記修正部によってその不具合が修正される前の画像、あるいは上記修正部によってその不具合が修正された後の画像とともに表示するものであれば、例えば複数の目が赤目に再現された画像であっても、表示された箇所数を参照することによって不具合を見落とすような過ちを犯すことなく不具合を容易に確認することができる。

ここで、本発明の第１の撮像装置において、上記画像表示部は、画像を表示するにあたって上記箇所を拡大して表示するものであることが好ましい。

また、本発明の第１の撮像装置は、上記画像表示部に表示された画像中の、上記修正部により不具合が検出された箇所を確認する操作を受け付ける確認部を備え、
上記画像表示部は、上記箇所数を表示するにあたって、上記確認部で確認された数を差し引いた箇所数を表示するものであることも好ましい形態である。

また、本発明の第１の撮像装置において、上記修正部は、上記画像中の赤目部分を検出し、検出された赤目部分を修正するものであることがさらに好ましい。

さらに、本発明の第１の撮像装置において、上記画像表示部は、上記修正部により上記不具合が検出された目の数を上記箇所数として表示するものであってもよく、あるいは、上記画像表示部は、上記修正部により上記不具合が検出された人の数を上記箇所数として表示するものであってもよい。

また、上記目的を達成する本発明の第２の撮像装置は、
撮影光学系を経由してきた被写体光による被写体像を固体撮像素子上に結像させて被写体像を表す画像データを得る撮像部と、
被写体の撮影における撮影条件を取得する撮影条件取得部と、
撮像部で得られる画像データが表わす被写体像中に、目に関する所定の不具合が生じるか否かを上記撮影条件取得部で取得された撮影条件に基づいて推定する推定部とを備えたことを特徴とする。

被写体像中に目に関する所定の不具合が生じるか否かを予め推定しておくことによって、不具合が生じる場合には確実に確認を行うことができるうえ、不具合が生じない場合の確認作業を省くことができる。

また、本発明の第２の撮像装置において、上記撮像部での撮影に同期して閃光を発する閃光発光部と、
上記推定部での推定結果に応じて、閃光発光部における発光を制御する制御部とをさらに備えたことが好ましい。

撮影画像中に所定の不具合が生じると推定された場合に、例えば、閃光発光部における発光強度などを調整することによって、不具合の発生を低減することができる。

また、本発明の第２の撮像装置において、上記推定部で不具合が生じると推定された場合に、被写体像中の目に関する所定の不具合を検出して、検出された不具合を修正する修正部をさらに備えたことも好ましい。

撮影画像中に所定の不具合が生じると推定された場合に、被写体像中の不具合の検出および修正を行うことによって、不具合が生じていない見た目に好ましい画像を得ることができる。

あるいは、本発明の第２の撮像装置において、上記推定部で不具合が生じると推定された場合に、不具合が生じる旨を表わす警告を発する警告部をさらに備えたことも好ましい。

撮影者は、不具合が生じる旨を表わす警告を受けることによって、被写体との距離を変えて撮影を行うなどして、不具合の発生を未然に防ぐことができる。

また、本発明の第２の撮像装置において、閃光を発する閃光発光部をさらに備え、
上記撮像部は、閃光発光部における発光を避けて第１の画像データを得るとともに、閃光発光部における発光に同期して第２の画像データを得るものであり、
上記推定部は、第１の画像データが表わす第１の画像の色と、第２の画像データが表わす第２の画像の色とを比較して、色が所定程度以上異なる箇所に前記不具合が生じているとみなす不具合検出部を備えてもよい。

赤目などといった目に関する所定の不具合は、通常、閃光発光部における閃光が原因となる場合が多い。したがって、閃光を伴わずに得られた、不具合が生じていない第１の画像の色と、閃光を伴って得られた第２の画像の色とを比較して、それらの色が所定程度以上異なる箇所に不具合が生じているとみなすことによって、容易に撮影画像中の不具合を検出することができる。

本発明によれば、画像中の赤目部分や金目部分などといった目に関する所定の不具合を容易に確認することができる画像修正装置および撮像装置を提供することができる。

以下、本発明の実施形態について説明する。

ここでは、本発明を、Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ（ＣＣＤ）固体撮像素子上に被写体の像を結像させて、その被写体を表す画像データを信号として取り込む電子カメラに適用した実施形態について説明する。

図１は、本発明の一実施形態の電子カメラを前面斜め上から見た外観斜視図である。ここでは、先ず図１〜図３を参照して、電子カメラの一般的な構成について説明する。尚、本実施形態の電子カメラにおける本発明としての特徴は、後述する“第１自動赤目補正処理”モードおよび“第２自動赤目補正処理”モードの処理動作にあるが、これらのモードの動作説明については後で詳細に行う。

図１に示すカメラ１００は、図示しない写真フィルム上に写真撮影を行うカメラである。

このカメラ１００の前面には、撮影レンズ１０１ａを内部に備えたレンズ鏡胴１０１が備えられている。この撮影レンズ１０１ａは、入射した被写体光を、内部に配置されたＣＣＤ固体撮像素子（ここでは図示せず）の撮影面上に結像させ、そのＣＣＤ固体撮像素子で被写体を表す画像データが生成される。

また、このカメラ１００の前面には、閃光を発する閃光発光装置１０３、閃光発光装置１０３から発光された光量を計測する調光センサ１０２、点灯して被写体に撮影の開始を知らせるセルフタイマＬＥＤ１１５、および撮影者が被写体の位置などを定めるために覗く光学式ファインダ対物窓１０４ａが備えられている。この閃光発光装置１０３は、本発明にいう閃光発光部の一例にあたる。

また、このカメラ１００の上面の右端には、撮影時に押されるシャッタレリーズボタン１０５が備えられている。尚、背面上部に備えられた撮影モードダイヤル１１２については、図２を参照して説明する。

さらに、このカメラ１００の左側面の下方には、上から順に、写真撮影によって得られた画像データをパーソナルコンピュータなどに送信する際に使用されるＵｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ（ＵＳＢ）ケーブルが接続されるＵＳＢ端子１０６、およびカメラ１００に外部電源を供給する際に使用される電源ケーブルが接続される電源入力端子１０７が備えられている。

図２は、図１に示すカメラを背面斜め上から見た外観斜視図である。

このカメラ１００の背面には、光学式ファインダ接眼窓１０４ｂ、画像や日時を表示する液晶ディスプレイ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ：ＬＣＤ）パネル１０８、ＬＣＤパネル１０８による画像表示をオン／オフするためのＬＣＤパネル起動ボタン１０９、バリエーションの選択およびズームを行なう際に操作される十字キー１１０、例えば日付や日時の設定などといったメニューをＬＣＤパネル１０８上に表示させたり、そのメニューを確定する際に使用されるメニュー／ＯＫスイッチ１１１、各種操作によって変更された設定を無効にする際に使用されるキャンセルスイッチ１１６、後述する各種モードを選択する際に使用される撮影モードダイヤル１１２、写真撮影を行う“撮影記録”機能と、写真撮影されて記録された画像データを再生する“画像データ再生”機能とのうちのいずれかの機能を選択する際に使用される機能選択レバー１１３、および、機能選択レバー１１３の軸上に設けられたメインスイッチ１１４が備えられている。また、このカメラ１００では、十字キー１１０による操作に応じて、被写体像中の赤目部分を検出して検出された赤目部分を修正する“第１自動赤目補正処理”モードや“第２自動赤目補正処理”モードを選択することができる。尚、この“第１自動赤目補正処理”モードや“第２自動赤目補正処理”モードの詳細な説明は後述する。ここで、ＬＣＤパネル１０８は、本発明にいう画像表示部、および警告部それぞれの一例に相当するものである。

このカメラ１００では、機能選択レバー１１３を“撮影記録”側１１３ａにもっていくことによって“撮影記録”機能が選択され、機能選択レバー１１３を“画像データ再生”側１１３ｂにもっていくことによって“画像データ再生”機能が選択される。また、この機能選択レバー１１３によって“撮影記録”機能が選択されている場合には、撮影モードダイヤル１１２を回転させることによって、人物を写真撮影するのに適した“人物撮影”モード、風景を写真撮影するのに適した“風景撮影”モード、動きの速い被写体を写真撮影するのに適した“スポーツ”モード、シャッタレリーズボタン１０５が押下されてから実際に写真撮影されるまでに時差を与える“セルフタイマ”モード、および撮影者自身を写真撮影するのに適した“自己撮影”モードのうちのいずれかのモードを選択することができる。尚、モードが選択されない場合には、“人物撮影”モードが選択されたものとして撮影が行われる。

図３は、図１，図２に示すカメラの内部に配備された信号処理部の構成ブロック図である。

この図３に示す構成ブロック図を参照してカメラ１００内に配備された信号処理部の構成を説明する。

図１，図２に示すカメラ１００では、すべての処理がＣＰＵ２１１によって制御されている。ＣＰＵ２１１は、本発明にいう撮影条件取得部、および制御部それぞれの一例に相当する。

まず、各種スイッチについて説明する。

写真撮影の開始指示を行うシャッタレリーズボタン１０５（図１，図２参照）には、このシャッタレリーズボタン１０５の押下に同期して作動するシャッタスイッチ１０５ａが設けられている。このシャッタスイッチ１０５ａのオンオフ信号がＣＰＵ２１１へ入力される。ＣＰＵ２１１ではシャッタスイッチ１０５ａのオン信号を撮影開始の合図として受け取る。このときには、機能選択レバー１１３が”画像記録”側１１３ａに切り替えられており、写真撮影を行うことがＣＰＵ２１１で検知されている。

十字キー１１０ではＬＣＤパネル１０８に表示される選択メニューの、複数の項目の中のいずれかが選択できるようになっている。図３には十字キー１１０の接点１１０１〜１１０４が示されている。たとえば接点１１０１が押下されたら上方向へカーソルが移動する。また１１０２が押下されたら右方向へ移動するようになっている。そして、いずれかの接点１１０１〜１１０４が接続されてオンオフ信号がＣＰＵ２１１に入力されるとＣＰＵ２１１ではその移動指示に基づいてバス２２０を介してＬＣＤパネル１０８へカーソルの移動指示を転送する。そうすると複数表示されている項目の中のいずれかにカーソルが移動する。従って、ＬＣＤパネル１０８に表示されるカーソルに基づいて、ユーザは選択メニューの中の複数の項目のいずれかを、十字キー１１０によって選択することができる。ここで電子ズームが選択されると被写体の中央を中心として撮影画角内の一部領域が切り出され、電子ズームが行われる。このときには切り出しを行う領域のサイズの指定も行えるような構成になっている。

また、機能選択レバー１１３が”画像データ再生”側１１３ｂに切り替えられると記録メディア２４０からの再生が行われる。このときには写真撮影を行うための指示を行うシャッタスイッチ１０５ａなどからの信号が入力されても処理は行われない。

次にスイッチ以外の各種要素について説明する。

ＣＰＵ２１１には、上述した各種スイッチに加えて、図１にも示す閃光発光装置１０３、タイミングジェネレータ２１２、フォーカスレンズ２１６を駆動するためのモータドライバ２１７、光量調整装置３００に備えられたモータを駆動するためのモータドライバ２１４、およびＣＤＳＡＭＰ２１３が接続されている。

ユーザが写真撮影を行うときには、ＬＣＤパネル１０８上に被写体像が被写体の動きにあわせて表示されている。この表示されている被写体の像を見ながら、ユーザはフレーミングを行い、シャッタレリーズボタン１０５を押下して写真撮影を行う。このときにシャッタレリーズボタン１０５に同期して作動するシャッタスイッチ１０５ａがオンされることによってＣＰＵ２１１では撮影開始の指示がユーザから送られたことを知る。そこでＣＰＵ２１１では、発光を指示する信号を閃光発光装置１０３に出力するとともに、撮影開始を指示する信号をタイミングジェネレータ２１２へ出力する。閃光発光装置１０３では、発光の指示を受けて閃光を発する。また、タイミングジェネレータ２１２では撮影開始の指示を受けてＣＣＤ固体撮像素子２１０へシャッタレリーズボタン１０５が押下されたことを知らせる信号を供給する。この信号を受けてＣＣＤ固体撮像素子２１０ではシャッタレリーズボタン１０５が押されたときにＣＣＤ固体撮像素子２１０によって撮像されていた画像データをＲＧＢ信号として出力する。このときＣＣＤ固体撮像素子２１０から読み出されたＲＧＢ信号は雑音が多いので、ＣＰＵ２１１ではこの雑音を低減するためＣＤＳＡＭＰ２１３へも雑音低減処理を行うタイミング信号を出力する。

図１，図２に示す各種スイッチからの入力信号に応じてＣＰＵ２１１から出力される信号は以上のとおりである。

ここからはＣＣＤ固体撮像素子２１０で撮像された撮像信号がどのように処理されるかを順を追って説明する。

図２に示す機能選択レバー１１３が”画像記録”側１１３ａになっているときにシャッタレリーズボタン１０５が押下される場合を説明する。

ＣＰＵ２１１に接続されている機能選択レバー１１３が”画像記録”側１１３ａになっていてシャッタレリーズボタン１０５が押下されるとシャッタスイッチ１０５ａが接続されて、ＣＰＵ２１１ではシャッタレリーズボタン１０５の押下が検知される。このようにユーザによってシャッタレリーズボタン１０５が押下されるとＣＰＵ２１１からタイミングジェネレータ２１２に対して写真撮影の開始指示が行われる。この開始指示を受けてＣＣＤ固体撮像撮像素子２１０はＲＧＢ信号を出力する。

シャッタレリーズボタンが押されていなくても、画像表示装置２２７のＬＣＤパネル１０８には撮影レンズが向けられた方向の被写体像が常に表示されている。この表示されている被写体像は、ＣＣＤ固体撮像素子２１０から所定の時間間隔ごとに読み出されるＲＧＢ信号から成る画像データを画像信号処理回路２２２でＹＣ信号に変換し、そのＹＣ信号をＶｉｄｅｏＥｎｃｏｒｄｅｒ２２６を経由させて画像表示装置２２７に供給して得られるものである。このような被写体像の表示が行われているときにＡＥ＆ＡＷＢ検出回路２３１では露出調節が、ＡＦ検出回路２３０ではコントラストの検出が絶えず行われている。ここで、画像信号処理回路２２２は、本発明にいう修正部、および確認部の機能の一例を担うものであり、後述するように、写真撮影時には撮影画像中の赤目部分の検出と修正を行う。また、ＣＰＵ２１１と画像信号処理回路２２２とを合わせたものは、本発明にいう推定部、および不具合検出部それぞれの一例に相当する。

露出調節にあってはＣＣＤ固体撮像素子２１０から所定の時間間隔ごとに読み出されるＲＧＢ信号の輝度情報に基づいてＡＥ＆ＡＷＢ検出回路２３１で露出調整が行われる。ＡＥ＆ＡＷＢ検出回路２３１で露出調整が行われるとＣＰＵ２１１にその結果が伝えられ、ＣＰＵ２１１ではその結果に基づいてモータドライバ２１４に指示を出し、適正な露出となるような光量が得られるように、光量調整装置３００に備えられたモータが駆動される（以下では、輝度情報が取得されて光量調整装置３００が適正露光に調整されるまでの一連の処理を露出処理と称する）。また焦点調節にあってはＡＦ検出回路２３０でフォーカスレンズ２１６を移動させ、所定の時間間隔ごとにＡＦ検出回路２３０でＲＧＢ信号のコントラストの検出を行って焦点調節が行われる。ＡＦ検出回路２３０でコントラストの検出が行われるとＣＰＵ２１１にその結果が伝えられ、ＣＰＵ２１１ではその結果に基づいてモータドライバ２１７にフォーカスレンズ２１６の駆動指示を出し、検出されたコントラスが最大となる合焦点位置にフォーカスレンズ２１６が駆動される（以下では、コントラストが検出されて合焦点位置にフォーカスレンズ２１６が配されるまでの一連の処理を合焦処理と称する）。そしてフォーカスレンズ２１６が合焦点位置に配置されたら、ＣＰＵ２１１から画像取り込みの信号がタイミングジェネレータ２１２へ供給され、タイミングジェネレータ２１２から撮影開始信号がＣＣＤ固体撮像素子２１０に供給され、ＣＣＤ固体撮像素子２１０に蓄積された電荷がタイミングジェネレータ２１２の読み出し信号によってＲＧＢ信号としてＣＤＳＡＭＰ２１３側へ読み出される。

この読み出されたＲＧＢ信号が供給されたＣＤＳＡＭＰ２１３では、雑音低減の処理が行われて、雑音が除去されたＲＧＢ信号がＡ／Ｄ変換回路２１８へと供給される。Ａ／Ｄ変換回路２１８ではアナログのＲＧＢ信号がＡ／Ｄ変換されてデジタル信号のＲＧＢ信号に変換される。

なおＣＰＵ２１１と画像入力コントローラ２１９、メモリ（ＳＤＲＡＭ）２２１、画像信号処理回路２２２、圧縮処理回路２２３、メディアコントローラ２２４、ＵＳＢｃｏｎｔｒｏｌｌｅｒ２２５、ＶｉｄｅｏＥｎｃｏｒｄｅｒ２２６、ＡＦ検出回路２３０、ＡＥ＆ＡＷＢ検出回路２３１とはバス２２０によって接続されており、このバス２２０を介してアドレス、データなどの授受が行われる。そのバス２２０を介してデータの授受を行うためのレジスタがＣＰＵ２１１内には各種用意されていてこれらのレジスタの内容が各処理部の処理の進行状況に応じて書き換えられる。ＣＰＵ２１１内ではこのレジスタの内容を判読して処理が行われる。

デジタル信号に変換されたＲＧＢ信号は画像入力コントローラ２１９によってバス２２０側へ導かれてＣＰＵ２１１によって制御され、メモリ（ＳＤＲＡＭ）２２１に書き込まれる。ここで、画像入力コントローラ２１９は、本発明にいう画像取得部の一例に相当するものである。そしてＲＧＢ信号の取り込みが完了したら、今度はメモリ（ＳＤＲＡＭ）２２１からＲＧＢ信号が読み出されてバス２２０を経て画像信号処理回路２２２に供給される。画像信号処理回路２２２ではＲＧＢ信号からＹＣ信号への変換が行なわれ、さらに圧縮処理回路２２３で圧縮された画像データがメディアコントローラ２２４を介して記録メディア２４０にＪＰＥＧファイルとして記録される。

なお、ＵＳＢｃｏｎｔｒｏｌｌｅｒ２２５も図１，図２に示すカメラには備えられており、ＵＳＢ規格準拠の外部機器との接続も可能な構成になっている。

以上が図１，図２に示すカメラ１００で写真撮影が行われるときに記録メディア２４０に記録されるまでの画像データの流れである。

図４は、“第１自動赤目補正処理”モードが選択される場合における操作の流れを説明するフローチャートである。

まず、図２に示す機能選択レバー１１３を“撮影記録”側１１３ａにもっていくことによって“撮影記録”機能を選択し、撮影モードダイヤル１１２を回転させることによって所望の撮影モードを選択し、更に十字キー１１０による操作に応じて“第１自動赤目補正処理”モードを選択した後にシャッタレリーズボタン１０５を押下することによって写真撮影が行われる（ステップＳ１０１）。

ここで、図５は、ステップＳ１０１によって写真撮影された撮影画像の一例を示す図である。

ここでは、図２に示す撮影モードダイヤル１１２によって“人物撮影”モードが選択され、更に十字キー１１０による操作に応じて“第１自動赤目補正処理”モードが選択された後にシャッタレリーズボタン１０５が押下され、３人の人物４１０，４２０，４３０が写真撮影された撮影画像の例が示されている。

次に、図２に示す十字キー１１０による操作に応じて“第１自動赤目補正処理”モードを選択されていることを受けて、ステップＳ１０１によって写真撮影されて得られた撮影画像中の赤目部分を検出して検出された赤目部分を修正する自動赤目補正処理が開始される（ステップＳ１０２）。

次に、ステップＳ１０２による撮影画像中の赤目部分の検出で、赤目部分が検出されていた場合には（ステップＳ１０３：ＹＥＳ）、赤目部分が検出された人物の数のうち、後述する確認操作による確認がなされていない未確認箇所数が、自動赤目補正処理の施された後の赤目補正結果画像とともに、図２に示すＬＣＤパネル１０８に表示される（ステップＳ１０４）。ここで、未確認箇所数は、本発明にいう箇所数の一例に相当するものである。

また、ステップＳ１０２による撮影画像中の赤目部分の検出で、赤目部分が検出されなかった場合には（ステップＳ１０３：ＮＯ）、撮影画像を表す画像データが、図３に示すメディアコントローラ２２４を介して記録メディア２４０にＪＰＥＧファイルとして記録される（ステップＳ１１２）。

ここで、図６は、ステップＳ１０４によって自動赤目補正処理が施された後の赤目補正結果画像および未確認箇所数がＬＣＤパネルに表示された表示例を示す図である。

ここでは、図５に示す撮影画像に対して自動赤目補正処理が施された後の赤目補正結果画像が、自動赤目補正処理によって修正された人物４１１，４２１，４３１の顔４１１ａ，４２１ａ，４３１ａが実線の丸５１０，５２０，５３０で囲われるように強調されて、図２に示すＬＣＤパネル１０８に表示されるとともに、このＬＣＤパネル１０８の左上に、赤目部分が検出された人物の数のうち、後述する確認操作による確認がなされていない未確認箇所数６１０が表示された例が示されている。この図６に示す例では、ＬＣＤパネル１０８の左上に未確認箇所数６１０が“３”と表示され、３人の人物４１１，４２１，４３１すべてに対し赤目部分が検出されて修正されたことが示されている。

また、図７は、赤目補正結果画像および未確認箇所数における、図６とは別の表示例を示す図である。

図６の未確認箇所数６１０では、未確認箇所数が数字で表現されているが、図７のパート（Ａ）に示す未確認箇所数６１１では、未確認箇所数がバーによって表現されており、パート（Ｂ）に示す未確認箇所数６１２では、未確認箇所数が点の数によって表現されている。このように、未確認箇所数は数字以外で表現されてもよい。

以上のように、赤目補正結果画像中の赤目部分が検出されて確認がなされていない未確認箇所数が、赤目補正結果画像とともに表示されると、図６に示すように複数の人物の目が赤目に再現された画像であっても、表示された未確認箇所数を参照することによって、赤目部分を見落とすような過ちを犯すことなく赤目部分を容易に確認することができる。また、赤目補正結果画像中の赤目部分を有する顔が強調されて表示されると、赤目補正結果画像中の赤目部分の確認が、より一層容易である。

次に、ステップＳ１０４によって自動赤目補正処理が施された後の赤目補正結果画像による赤目部分の確認の結果、赤目部分が適切に検出され適切に修正されたものであるとユーザが判断した場合には、図２に示すメニュー／ＯＫスイッチ１１１を押下することによって（ステップＳ１０５：ＹＥＳ）、その赤目補正結果画像を表す画像データが、図３に示すメディアコントローラ２２４を介して記録メディア２４０にＪＰＥＧファイルとして記録される（ステップＳ１１２）。

このように、“第１自動赤目補正処理”モードでは、シャッタレリーズボタン１０５を押下して写真撮影が行われた後、ステップＳ１０５でメニュー／ＯＫスイッチ１１１を押下する１操作のみで赤目部分の確認が終了するため、赤目部分の確認が極めて簡単に行える。

また、ステップＳ１０４によって自動赤目補正処理が施された後の赤目補正結果画像による赤目部分の確認の結果、自動赤目補正処理によって修正された人物の顔を拡大して赤目部分を確認したい場合には、図２に示すキャンセルスイッチ１１６を押下することによって（ステップＳ１０５：ＮＯ）、図２に示す十字キー１１０による顔の選択が可能となる（ステップＳ１０６）。

ここで、図８は、ステップＳ１０６によって十字キーによる顔の選択が可能な赤目補正結果画像がＬＣＤパネルに表示された表示例を示す図である。

ここでは、図２に示す十字キー１１０によって顔が選択された人物４１１の顔４１１ａが実線の丸５１１で囲われ、十字キー１１０による顔の選択が可能な他の人物４２１，４３１の顔４２１ａ，４３１ａが破線の丸５２１，５３１で囲われた赤目補正結果画像が、図２に示すＬＣＤパネル１０８に表示された例が示されている。十字キー１１０による操作に応じて実線の丸５１０が別の人物の顔に移動して、所望の人物４１１，４２１，４３１の顔４１１ａ，４２１ａ，４３１ａを選択することができる。

また、図９は、ステップＳ１０６によって顔の選択が可能な赤目補正結果画像における、図８とは別の表示例を示す図である。

図９のパート（Ａ）には、十字キー１１０によって選択が可能な、図８に示す顔４１１ａ，４２１ａ，４３１ａに対応する顔５４１，５４２，５４３が、赤目補正結果画像の下に並べて一覧表示された表示例が示されており、パート（Ｂ）には、パート（Ａ）に示す赤目補正結果画像が表示されずに、顔５４１，５４２，５４３のみが一覧表示された表示例が示されている。十字キー１１０による操作に応じてポインタ５４０が移動して、一覧表示された顔５４１，５４２，５４３のなかから所望の顔を選択することができる。このように、自動赤目補正処理によって修正された人物の顔５４１，５４２，５４３を一覧表示することによって、それらの顔５４１，５４２，５４３を一度に確認することができる。本実施形態においては、ステップＳ１０６において、図８に示すように赤目補正結果画像が表示される例について説明を続ける。

次に、図２に示す十字キー１１０による操作に応じて所望の人物の顔を選択した後に、メニュー／ＯＫスイッチ１１１を押下することによって、選択された人物の顔が拡大されて、図２に示すＬＣＤパネル１０８に表示される（ステップＳ１０７）。

ここで、図１０は、ステップＳ１０７によって拡大された顔がＬＣＤパネルに表示された表示例を示す図である。

ここでは、図８に示す赤目補正結果画像の中の、顔が実線の丸５１０で囲われた人物４１１の顔４１１ａを選択した後に、メニュー／ＯＫスイッチ１１１を押下することによって、その顔４１１ａが拡大されて、図２に示すＬＣＤパネル１０８に表示された例が示されている。

また、図１１は、拡大された顔における、図１０とは異なる表示例を示す図である。

図１１のパート（Ａ）では、ＬＣＤパネル１０８が２つの領域１０８＿１，１０８＿２に分割されており、赤目補正結果画像が第１の領域１０８＿１に表示され、選択された顔４１１ａが拡大されて第２の領域１０８＿２に表示されている。このように、赤目補正結果画像と、拡大された顔とを並べて表示することによって、赤目補正が施された位置などを容易に確認することができる。また、ＬＣＤパネルを２つ以上備えている場合には、パート（Ｂ）に示すように、１つのパネル１０８Ａに撮影画像を表示し、他のパネル１０８Ｂに拡大された顔を表示してもよい。本実施形態においては、ステップＳ１０７によって、拡大された顔が図１０に示す表示方法で表示される例について説明する。

次に、ステップＳ１０７によって拡大された顔による、自動赤目補正処理が施された後の赤目部分の確認の結果、赤目部分が適切に検出され適切に修正されたものであるとユーザが判断した場合には、図２に示すメニュー／ＯＫスイッチ１１１を押下する確認操作によって（ステップＳ１０８：ＹＥＳ）、その拡大された顔の赤目部分に対する自動赤目補正処理が確定され、ステップＳ１０４に戻って画像の全体が、図２に示すＬＣＤパネル１０８に表示される。また、上述したようにしてこのＬＣＤパネル１０８の左上に表示される未確認箇所数は、このステップＳ１０８による確認操作を１回受けるごとに１つ差し引いた数が未確認箇所数として表示される。その後は、自動赤目補正処理が確定された人物以外の人物の選択が、上記と同様の手順で可能となる。

このように、確認された数を差し引いた未確認箇所数が表示される電子カメラであれば、赤目補正結果画像中の赤目部分を見落としてしまった場合であっても、未確認箇所数を参照することによって確実にその赤目部分を確認することができる。

また、ステップＳ１０７によって拡大された顔による、自動赤目補正処理が施された後の赤目部分の確認の結果、拡大された顔の目部分を更に拡大して赤目部分を確認したい場合には、図２に示すキャンセルスイッチ１１６を押下することによって（ステップＳ１０８：ＮＯ）、拡大された目部分が、図２に示すＬＣＤパネル１０８に表示される（ステップＳ１０９）。

ここで、図１２は、ステップＳ１０９によって拡大された目部分がＬＣＤパネルに表示された表示例を示す図である。

ここでは、図１０に示す拡大された顔４１１ａの目部分４１１ｂが拡大されて、図２に示すＬＣＤパネル１０８に表示された例が示されている。

尚、本実施形態の説明では、目部分が拡大表示される例として両目が拡大表示される例を示したが、片目ずつ拡大表示するものであってもよい。

次に、ステップＳ１０９によって拡大された目部分による、自動赤目補正処理が施された後の赤目部分の確認の結果、赤目部分が適切に検出され適切に修正されたものであるとユーザが判断した場合には、図２に示すメニュー／ＯＫスイッチ１１１を押下する確認操作によって（ステップＳ１１０：ＹＥＳ）、その拡大された顔の赤目部分に対する自動赤目補正処理が確定され、ステップＳ１０４に戻って画像の全体が、図２に示すＬＣＤパネル１０８に表示される。また、上述したようにしてこのＬＣＤパネル１０８の左上に表示される未確認箇所数は、このステップＳ１１０による確認操作を１回受けるごとに１つ差し引いた数が未確認箇所数として表示される。その後は、自動赤目補正処理が確定された人物以外の人物の選択が、上記と同様の手順で可能となる。

また、ステップＳ１０９によって拡大された目部分による、自動赤目補正処理が施された後の赤目部分の確認の結果、赤目部分の検出や修正において誤った検出や不適切な修正が施されたものであるとユーザが判断した場合には、図２に示すキャンセルスイッチ１１６を押下することによって（ステップＳ１１０：ＮＯ）、その拡大された目に対する赤目部分の検出や修正が取り消され（ステップＳ１１１）、ステップＳ１０４に戻って画像の全体が、図２に示すＬＣＤパネル１０８に表示される。また、上述したようにしてこのＬＣＤパネル１０８の左上に表示される未確認箇所数は、このステップＳ１１１による確認操作を１回受けるごとに１つ差し引いた数が未確認箇所数として表示される。その後は、自動赤目補正処理が確定され、あるいは取り消された人物以外の人物の選択が、上記と同様の手順で可能となる。

図１３は、“第２自動赤目補正処理”モードが選択される場合における操作の流れを説明するフローチャートである。

まず、図２に示す機能選択レバー１１３を“撮影記録”側１１３ａにもっていくことによって“撮影記録”機能を選択し、撮影モードダイヤル１１２を回転させることによって所望の撮影モードを選択し、更に十字キー１１０による操作に応じて“第２自動赤目補正処理”モードを選択した後にシャッタレリーズボタン１０５を押下することによって写真撮影が行われる（ステップＳ２０１）。

撮影が行われると、ＣＰＵ２１１は、図２に示す十字キー１１０による操作に応じて“第２自動赤目補正処理”モードが選択されていることを受けて、ステップＳ２０１によって写真撮影されて得られた撮影画像中の赤目部分を検出する。さらに、検出した赤目部分を修正する自動赤目補正処理を開始する（ステップＳ２０２）。

続いて、ステップＳ２０２による撮影画像中の赤目部分の検出で、赤目部分が検出されていた場合には（ステップＳ２０３：ＹＥＳ）、赤目部分が検出された人物の数（以下、この数を検出数と称する）が、自動赤目補正処理の施された後の赤目補正結果画像とともに、図２に示すＬＣＤパネル１０８に表示される（ステップＳ２０４）。

また、ステップＳ２０２による撮影画像中の赤目部分の検出で、赤目部分が検出されなかった場合には（ステップＳ２０３：ＮＯ）、撮影画像を表す画像データが、図３に示すメディアコントローラ２２４を介して記録メディア２４０にＪＰＥＧファイルとして記録される（ステップＳ２１３）。

ここで、図１４は、ステップＳ２０４によって自動赤目補正処理が施された後の赤目補正結果画像および検出数がＬＣＤパネルに表示された表示例を示す図である。

ここでは、ステップＳ２０１によって３人の人物４１０，４２０，４３０が写真撮影された、図５に示す撮影画像と同一の撮影画像に対して自動赤目補正処理が施された後の赤目補正結果画像が、自動赤目補正処理によって修正された人物４１１，４２１，４３１の顔４１１ａ，４２１ａ，４３１ａが実線の丸５１０，５２０，５３０で囲われるように強調されて、図２に示すＬＣＤパネル１０８に表示されるとともに、このＬＣＤパネル１０８の左上に、赤目部分が検出された検出数６２０が表示された例が示されている。この図１４に示す例では、ＬＣＤパネル１０８の左上に検出数６２０が“３”と表示され、３人の人物４１１，４２１，４３１すべてに対し赤目部分が検出されて修正されたことが示されている。

このように、赤目補正結果画像中の赤目部分が検出された検出数が、赤目補正結果画像とともに表示されると、図１４に示すように複数の人物の目が赤目に再現された画像であっても、表示された検出数を参照することによって、赤目部分を見落とすような過ちを犯すことなく赤目部分を容易に確認することができる。また、赤目補正結果画像中の赤目部分を有する顔が強調されて表示されると、赤目補正結果画像中の赤目部分の確認が、より一層容易である。

次に、ＣＰＵ２１１では、ステップＳ２０２において自動赤目補正処理が施された赤目部分に、確認の際の優先順番が付される。本実施形態においては、まず、「赤目部分のうち撮影画角の中央から近いもの」ほど優先順位が高く、続いて、「赤目部分の面積が広いもの」ほど優先順位が高くなるように優先順番が付される（ステップＳ２０５）。

次に、ステップＳ２０４によって自動赤目補正処理が施された後の赤目補正結果画像による赤目部分の確認の後に、後述する、顔や目部分が拡大表示された画像よる赤目部分の確認を行わない場合には、図２に示すキャンセルスイッチ１１６を押下することによって（ステップＳ２０６：ＮＯ）、その赤目補正結果画像を表す画像データが、図３に示すメディアコントローラ２２４を介して記録メディア２４０にＪＰＥＧファイルとして記録される（ステップＳ２１３）。

このように、“第２自動赤目補正処理”モードでは、シャッタレリーズボタン１０５を押下して写真撮影が行われた後、ステップＳ２０６でキャンセルスイッチ１１６を押下する１操作のみで赤目部分の確認が終了するため、赤目部分の確認が極めて簡単に行える。

また、ステップＳ２０４によって自動赤目補正処理が施された後の赤目補正結果画像による赤目部分の確認の結果、自動赤目補正処理によって修正された人物の顔を拡大して赤目部分を確認したい場合には、図２に示すメニュー／ＯＫスイッチ１１１を押下することによって（ステップＳ２０６：ＹＥＳ）、ステップＳ２０４によって顔が実線の丸で囲われるように強調されて表示された人物のうちの、ステップＳ２０５で付された優先順位が最も高い赤目部分を有する人物の顔が拡大されて、図２に示すＬＣＤパネル１０８に、未確認箇所数とともに表示される（ステップＳ２０７）。ここでいう未確認箇所数とは、上述した“第１自動赤目補正処理”モードにおける未確認箇所数と同様に、赤目部分が検出された人物の数のうち、後述する確認操作による確認がなされていない数をいい、この未確認箇所数も、本発明にいう箇所数の一例に相当するものである。

このように、確認された数を差し引いた未確認箇所数が表示される電子カメラであれば、赤目補正結果画像中の赤目部分を見落としてしまった場合であっても、未確認箇所数を参照することによって確実にその赤目部分を確認することができる。

ここで、図１５は、ステップＳ２０７によって拡大された顔および未確認箇所数がＬＣＤパネルに表示された表示例を示す図である。

ここでは、図１４に示す赤目補正結果画像の中の、顔４１１ａ，４２１ａ，４３１ａが実線の丸５１０，５２０，５３０で囲われた人物４１１，４２１，４３１のうちの人物４１１の顔４１１ａが拡大されて、図２に示すＬＣＤパネル１０８に表示されるとともに、このＬＣＤパネル１０８の左上に、赤目部分が検出された人物の数のうち、後述する確認操作による確認がなされていない未確認箇所数６１０が表示された例が示されている。

次に、ステップＳ２０７によって拡大された顔による、自動赤目補正処理が施された後の赤目部分の確認の結果、赤目部分が適切に検出され適切に修正されたものであるとユーザが判断した場合には、図２に示すメニュー／ＯＫスイッチ１１１を押下する確認操作によって（ステップＳ２０８：ＹＥＳ）、その拡大された顔の赤目部分に対する自動赤目補正処理が確定され、自動赤目補正処理が確定された人物以外の、ステップＳ２０４によって自動赤目補正処理が施された人物が存在する場合には（ステップＳ２１２：ＹＥＳ）、自動赤目補正処理が確定された人物を除いて、優先順位が最も高い赤目部分を有する人物の顔が拡大されて、図２に示すＬＣＤパネル１０８に表示される（ステップＳ２０７）。また、上述したようにしてこのＬＣＤパネル１０８の左上に表示される未確認箇所数６１０は、このステップＳ２０８による確認操作を１回受けるごとに１つ差し引いた数が未確認箇所数として表示される。

また、ステップＳ２０８：ＹＥＳによって拡大された顔の赤目部分に対する自動赤目補正処理が確定され、自動赤目補正処理が確定され、あるいは後述する“結果消去”モードによって取り消された人物以外の、ステップＳ２０４によって自動赤目補正処理が施された人物が存在しない場合には（ステップＳ２１２：ＮＯ）、そのステップＳ２０８：ＹＥＳによって確定され、あるいは後述する“結果消去”モードによって取り消された赤目補正結果画像を表す画像データが、図３に示すメディアコントローラ２２４を介して記録メディア２４０にＪＰＥＧファイルとして記録される（ステップＳ２１３）。

また、ステップＳ２０７によって拡大された顔による、自動赤目補正処理が施された後の赤目部分の確認の結果、拡大された顔の目部分を更に拡大して赤目部分を確認したい場合には、図２に示すキャンセルスイッチ１１６を押下することによって（ステップＳ２０８：ＮＯ）、拡大された目部分が、図２に示すＬＣＤパネル１０８に、未確認箇所数とともに表示される（ステップＳ２０９）。

ここで、図１６は、ステップＳ２０９によって拡大された目部分および未確認箇所数がＬＣＤパネルに表示された表示例を示す図である。

ここでは、図１５に示す拡大された顔４１１ａの目部分４１１ｂが拡大されて、図２に示すＬＣＤパネル１０８に表示されるとともに、このＬＣＤパネル１０８の左上に、赤目部分が検出された人物の数のうち、後述する確認操作による確認がなされていない未確認箇所数６１０が表示された例が示されている。

尚、本実施形態の説明では、目部分が拡大表示される例として両目が拡大表示される例を示したが、片目ずつ拡大表示するものであってもよい。

次に、ステップＳ２０９によって拡大された目部分による、自動赤目補正処理が施された後の赤目部分の確認の結果、赤目部分が適切に検出され適切に修正されたものであるとユーザが判断した場合には、図２に示すメニュー／ＯＫスイッチ１１１を押下する確認操作によって（ステップＳ２１０：ＹＥＳ）、その拡大された顔の赤目部分に対する自動赤目補正処理が確定され、自動赤目補正処理が確定された人物以外の、ステップＳ２０４によって自動赤目補正処理が施された人物が存在する場合には（ステップＳ２１２：ＹＥＳ）、自動赤目補正処理が確定された人物以外の人物のうち、最も優先順位の高い赤目部分を有する人物の顔が拡大されて、図２に示すＬＣＤパネル１０８に表示される（ステップＳ２０７）。また、上述したようにしてこのＬＣＤパネル１０８の左上に表示される未確認箇所数６１０は、このステップＳ２１０による確認操作を１回受けるごとに１つ差し引いた数が未確認箇所数として表示される。

また、ステップＳ２１０：ＹＥＳによって拡大された顔の赤目部分に対する自動赤目補正処理が確定され、自動赤目補正処理が確定され、あるいは後述する“結果消去”モードによって取り消された人物以外の、ステップＳ２０４によって自動赤目補正処理が施された人物が存在しない場合には（ステップＳ２１２：ＮＯ）、そのステップＳ２１０：ＹＥＳによって確定され、あるいは後述する“結果消去”モードによって取り消された赤目補正結果画像を表す画像データが、図３に示すメディアコントローラ２２４を介して記録メディア２４０にＪＰＥＧファイルとして記録される（ステップＳ２１３）。

ここで、未確認箇所数が小さくなるごとに、拡大表示される人物の顔における赤目部分の優先順位が低くなる。したがって、ステップＳ２０７からステップＳ２１２までの一連の処理を繰り返して、拡大された顔の赤目部分が重要ではなくなったと判断した場合には、ユーザが図２に示すキャンセルスイッチ１１６を押下することによって、ステップＳ２１２からステップＳ２１３の処理に進み、赤目補正結果画像を記録することができる。

また、ステップＳ２０９によって拡大された目部分による、自動赤目補正処理が施された後の赤目部分の確認の結果、赤目部分の検出や修正において誤った検出や不適切な修正が施されたものであるとユーザが判断した場合には、図２に示すキャンセルスイッチ１１６を押下する（ステップＳ２１０：ＮＯ）。

尚、本実施形態のカメラ１００で“第２自動赤目補正処理”モードを選択して写真撮影する場合には、拡大された目に対する赤目部分の検出や修正が取り消される“結果消去”モード、あるいはその拡大された目に対する赤目部分を手動で再修正することのできる“修正”モードのいずれかのモードがあらかじめ選択されて設定されているものとする。このようないずれかのモードがあらかじめ設定された基では、ステップＳ２１０：ＮＯでキャンセルスイッチ１１６が押下されると、あらかじめ設定されたいずれかのモードに自動的に移行する。

“結果消去”モードが設定されている場合には、ステップＳ２１０：ＮＯでキャンセルスイッチ１１６が押下されることによって、拡大された目に対する赤目部分の検出や修正が取り消され（ステップＳ２１１）、自動赤目補正処理が取り消された人物以外の、ステップＳ２０４によって自動赤目補正処理が施された人物が存在する場合には（ステップＳ２１２：ＹＥＳ）、自動赤目補正処理が取り消された人物以外の人物のうち、最も優先順位の高い赤目部分を有する人物の顔が拡大されて、図２に示すＬＣＤパネル１０８に表示される（ステップＳ２０７）。また、上述したようにしてこのＬＣＤパネル１０８の左上に表示される未確認箇所数６１０は、このステップＳ２１１による確認操作を１回受けるごとに１つ差し引いた数が未確認箇所数として表示される。

また、ステップＳ２１１によって拡大された顔の赤目部分に対する自動赤目補正処理が取り消され、自動赤目補正処理が取り消され、あるいは上述した確認操作によって確定された人物以外の、ステップＳ２０４によって自動赤目補正処理が施された人物が存在しない場合には（ステップＳ２１２：ＮＯ）、そのステップＳ２１１によって取り消され、あるいは上述した確認操作によって確定された赤目補正結果画像を表す画像データが、図３に示すメディアコントローラ２２４を介して記録メディア２４０にＪＰＥＧファイルとして記録される（ステップＳ２１３）。

次に、“修正”モードが設定されている場合には、ステップＳ２１０：ＮＯでキャンセルスイッチ１１６が押下されることによって、拡大された目に対する赤目部分の検出や修正の位置ずれや大きさ変更などといった誤った検出や不適切な修正を手動で再修正することができる。

以上で、本発明における第１実施形態の説明を終了し、本発明の第２実施形態の説明を行う。本実施形態のカメラは、図１から図３に示す第１実施形態のカメラ１００と同様の構成を有しており、これら図１から図３を本実施形態の説明でも用いて、第１実施形態との相違点のみ説明する。

図１７は、本実施形態のカメラで被写体を撮影して、撮影画像を保存するまでの一連の処理を示すフローチャートである。

まず、第１実施形態と同様に、ユーザが図２に示す機能選択レバー１１３を”画像記録”側１１３ａに合わせると、図３に示すＣＣＤ固体撮像素子２１０で所定の時間間隔ごとに被写体像が粗く読み取られ、ＲＧＢ信号が出力されて上述した一連の露出処理、および合焦処理が行われる（ステップＳ３０１のプレ撮影）。

オペレータは、図２に示す撮影モードダイヤル１１２を使ってモード（“人物撮影”モード、“風景撮影”モード、“スポーツ”モード、“セルフタイマ”モード、“自己撮影”モード）を選択し、さらに、閃光を伴ったフラッシュ撮影を行う場合には、図示しない閃光ボタンを押下することによってフラッシュ撮影を指定する。撮影モードダイヤル１１２および閃光ボタンの押下状況は、ＣＰＵ２１１に伝えられる。

ここで、閃光ボタンが押下されない場合には（ステップＳ３０２：ＮＯ）、ＣＰＵ２１１において、撮影画像中に赤目の不具合は生じないと推定されて、図１７のフローチャートではステップＳ３０２からステップＳ３１０に進む。

ユーザによってシャッタレリーズボタン１０５が押下されると、ＣＰＵ２１１ではシャッタレリーズボタン１０５の押下が検知される。さらに、ＣＰＵ２１１からタイミングジェネレータ２１２に対して写真撮影の開始指示が行われて、ＣＣＤ固体撮像素子２１０で被写体像が細かく読み取られ、図４のステップＳ１０１と同様の撮影処理が行われる（ステップＳ３１０）。

撮影が行われて得られた画像データには、画像信号処理回路２２２によって、階調補正処理などといった所定の画像処理が施され、画像処理が施された画像データが記録メディア２４０に記録される（図１７のステップＳ３１３）。この階調補正処理などといった画像処理は、従来から広範に行われている処理であり、本明細書では説明を省略する。

通常、フラッシュ撮影が行われない場合には、赤目などといった目に関する不具合は生じにくい。したがって、フラッシュ撮影が行われない場合には、赤目補正処理を省略することによって、処理を高速化することができる。

また、ユーザによって閃光ボタンが押下されており（ステップＳ３０２：ＹＥＳ）、モードとして“人物撮影”モード以外のモードが選択された場合（ステップＳ３０３：ＮＯ）にも、ＣＰＵ２１１において、撮影画像中に赤目の不具合は生じないと推定され、フローチャートのステップＳ３０３からステップＳ３１１に進んで撮影処理が行われる。

さらに、ユーザによって閃光ボタンが押下されており（ステップＳ３０２：ＹＥＳ）、モードとして“人物撮影”モードが選択されており（ステップＳ３０３：ＹＥＳ）、ステップＳ３０１のプレ撮影中の合焦処理において算出される、撮影画角の中央付近の被写体までの距離（被写体距離）が所定範囲外の距離である場合（ステップＳ３０４：ＮＯ）にも、ＣＰＵ２１１において、撮影画像中に赤目の不具合は生じないと推定されて、フローチャートのステップＳ３０４からステップＳ３１１に進んで撮影処理が行われる。

被写体距離が近すぎたり、遠すぎたりして、所定範囲外の距離である場合には、撮影画像中に人物が写っていても、赤目が生じている可能性が低い。また、本実施形態においては、モードとして“人物撮影”モード以外のモード（“風景撮影”モード、“スポーツ”モード、“セルフタイマ”モード、および“自己撮影”モード）が選択されている場合には、撮影画像中に人物が写っていなかったり、写っていても被写体距離が所定範囲外の距離であると推定して、赤目補正処理を省略している。尚、本実施形態においては、初期状態が“人物撮影”モードであるため、ユーザがモードを特に意識せずに撮影を行ってしまった場合であっても、“人物撮影”モードが採用されて（ステップＳ３０３：ＹＥＳ）、後述する赤目の不具合を未然に防ぐ撮影が行われる。初期状態が“人物撮影”モード以外のモードであるカメラの場合や、カメラが自動的に適切なモードを選択するオートモードの場合には、例えば、「モードが“人物撮影”モード（ステップＳ３０３）」、および「被写体距離が所定範囲内（ステップＳ３０４）」のうちのいずれか一方が真ならばステップＳ３０５以降の赤目の不具合を未然に防ぐ撮影処理に進むものであってもよい。

また、ユーザによって閃光ボタンが押下されており（ステップＳ３０２：ＹＥＳ）、モードとして“人物撮影”モードが選択されており（ステップＳ３０３：ＹＥＳ）、被写体距離が所定範囲内の距離である場合（ステップＳ３０４：ＹＥＳ）には、ＣＰＵ２１１において、撮影画像中に赤目が生じると推定される。このとき、ＣＰＵ２１１は、図２に示すＬＣＤパネル１０８に「赤目が発生します」という警告を表示させる（ステップＳ３０５）。ユーザは警告を受け取ることによって、「赤目が発生する可能性がある」ことを確実に認識することができる。

さらに、ＣＰＵ２１１は、図３に示す閃光発光装置１０３に指示を与え、閃光発光装置１０３おける発光強度や発光時間を赤目が生じにくい所定の値に調整する（ステップＳ３０６）。

閃光発光装置１０３の調整が終了し、ユーザによってシャッタレリーズボタン１０５が押下されると、ＣＰＵ２１１ではシャッタレリーズボタン１０５の押下が検知されて、閃光を伴った撮影処理が行われる（ステップＳ３０７）。このステップＳ３０７の撮影処理によって得られる画像データは、赤目の発生が未然に抑えられている。

また、ＣＰＵ２１１はＣＤＳＡＭＰ２１３に指示を与え、アンプゲインの調整を行う（ステップＳ３０８）。

撮影によって得られた画像データには、ステップＳ３１２と同様の画像処理が施され（ステップＳ３０９）、画像処理が施された画像データは記録メディア２４０に記録される（ステップＳ３１０）。

このように、撮影モードや、閃光の有無や、被写体距離などといった撮影条件に基づいて、撮影画像に赤目などといった不具合が生じるか否かを予め推定しておき、不具合が生じると推定された場合には、閃光発光装置における発光を調整することによって、赤目の発生を低減することができる。

また、本実施形態においては、赤目の発生が軽減されているため、撮影画像の確認作業が行われないが、警告が発せられた場合には、念のために確認作業を行ってもよい。

以上で、本発明における第２実施形態の説明を終了し、本発明における第３実施形態の説明を行う。本実施形態のカメラも、図１から図３に示す第１実施形態のカメラ１００と同様の構成を有しており、これら図１から図３を本実施形態の説明でも用いて、第１実施形態および第２実施形態との相違点のみ説明する。

本実施形態のカメラは、図１に示すシャッタレリーズボタン１０５が２段階に押下可能であり、１段目が押下されると上述したプレ撮影（露出処理、および合焦処理）が行われ、２段目が押下されると実際の撮影処理が行われる。

図１８は、本実施形態のカメラで被写体を撮影して、撮影画像を保存するまでの一連の処理を示すフローチャートである。

まず、ユーザは、図２に示す撮影モードダイヤル１１２を使ってモード（“人物撮影”モード、“風景撮影”モード、“スポーツ”モード、“セルフタイマ”モード、“自己撮影”モード）を選択し、さらに、閃光を伴ったフラッシュ撮影を行う場合には、図示しない閃光ボタンでフラッシュ撮影を指定する。さらに、自動赤目修正処理を行う場合には、十字キー１１０によって“自動赤目補正処理”モード（被写体像中の赤目部分を検出して検出された赤目部分を修正する）を選択する。十字キー１１０、撮影モードダイヤル１１２および閃光ボタンの設定状況は、ＣＰＵ２１１に伝えられる。

続いて、ユーザはカメラを所望の被写体に向けて、シャッタレリーズボタン１０５の一段目を押下する（ステップＳ４０１）。

閃光ボタンでフラッシュ撮影が選択されない場合には（図１８のステップＳ４０２：ＮＯ）、図１７のステップＳ３１０と同様な、閃光を伴わない撮影処理が行われ（ステップＳ４１１）、撮影処理によって得られた画像データが記録メディア２４０に記録される（ステップＳ４１０）。閃光を伴わない撮影における撮影画像中には、赤目などといった目に関する不具合が生じることは少ないため、赤目補正処理を省略することができる。

また、閃光ボタンでフラッシュ撮影が選択された場合には（図１８のステップＳ４０２：ＹＥＳ）、カメラの内部で、図１７のステップＳ３０１と同様のプレ撮影が行われ、閃光発光装置１０３からの閃光を伴わずに、画素が粗い画像データ（以下、この画素の粗い画像データを低解像度データと称する）が取得される（ステップＳ４０３）。この低解像度データは、本発明にいう第１の画像データの一例にあたり、低解像素データが表わす低解像度画像は、本発明にいう第１の画像の一例に相当する。

さらに、ユーザはシャッタレリーズボタン１０５の二段目を押下して、撮影を指示する（ステップＳ４０４）。

カメラの内部では図７のステップＳ３０７と同様な、閃光を伴う撮影処理が行われて、画素が細かい画像データ（以下、この画素が細かい画像データを高解像度データと称する）が取得される（ステップＳ４０５）。この高解像度データは、本発明にいう第２の画像データの一例にあたり、高解像素データが表わす高解像度画像は、本発明にいう第２の画像の一例に相当する。

ここで、“自動赤目補正処理”モードが選択されていない場合には（ステップＳ４０６：ＮＯ）、赤目補正処理が行われずに、取得された高解像度データが記録メディア２４０に記録される（ステップＳ４１０）。

“自動赤目補正処理”モードが選択されている場合には（ステップＳ４０６：ＹＥＳ）、画像信号処理回路２２２において、ステップＳ４０３で得られた低解像度データが表わす低解像度画像の色と、ステップＳ４０５で得られた高解像度データが表わす高解像度画像の色とが比較される（ステップＳ４０７）。本実施形態では、画像信号処理回路２２２によって、高解像度画像と低解像度画像の色相差が取得される。

ステップＳ４０７で取得された色相差が所定値よりも小さい場合（ステップＳ４０８：ＮＯ）、高解像度画像中に赤目が生じていないと推定され、画像信号処理回路２２２における赤目補正処理が行われずに、高解像度画像データが記録メディア２４０に記録される（ステップＳ４１０）。低解像度画像は閃光を伴わずに取得したため、赤目が生じている可能性が低い。一方、高解像度画像は閃光を伴って取得したため、赤目が生じている可能性が高いが、高解像度画像の色と低解像度の色との差が所定値より小さい場合、赤目が生じていないと判定される。

また、ステップＳ４０７で取得された色相差が所定値以上であった場合（ステップＳ４０８：ＹＥＳ）、画像信号処理回路２２２は、高解像度画像中の色相差が所定値以上である箇所に不具合が生じているとみなす。尚、高解像度画像中の不具合が生じている箇所における明度差が、その箇所の周辺部分における明度差よりも大きく変わっている場合、その箇所に生じている不具合は金目であると考えられ、その箇所における色相差や彩度差が、その箇所の周辺部分における色相差や彩度差よりも大きく変わっている場合、その箇所に生じている不具合は赤目であると考えられる。

不具合が検出されると、高解像度データには、図４のステップＳ１０２と同様な自動赤目補正処理が施され（ステップＳ４０９）、その赤目部分の確認作業が行われた後に、自動赤目補正処理が施された画像データが記録メディア２４０に記録される（ステップＳ４１０）。

このように、予め撮影画像に赤目が生じると推定される場合にのみ、赤目補正処理を行うことによって、処理の負担を軽減させることができるとともに、赤目補正処理が施された画像の確認作業を軽減させることもできる。

尚、本実施形態では、ＣＣＤ固体撮像素子上に被写体の像を結像させて、その被写体を表す画像データを信号として取り込む電子カメラに本発明を適用した例で説明したが、本発明は、これに限られるものではなく、取得された画像データにより表わされる画像中の目に関する所定の不具合を検出し、検出された不具合を修正し、不具合が検出された箇所数を、その箇所を含む画像とともに表示する、例えばパーソナルコンピュータなどで実現される画像修正装置にも適用することができる。

また、本実施形態の説明では、“第１自動赤目補正処理”モードあるいは“第２自動赤目補正処理”モードが選択されていることを受けて自動赤目補正処理が施される例を示したが、写真撮影後に必ず自動赤目補正処理が施されるものや、閃光を用いた写真撮影後に必ず自動赤目補正処理が施されるものであってもよい。

また、上記説明では、撮影後すぐに赤目補正処理やその確認作業が行われる例について説明したが、本発明の画像修正装置および撮像装置は、まず撮影画像を複数取得しておき、赤目補正処理やその確認作業は後でまとめて行うものであってもよく、撮影後すぐに赤目補正処理を行い、その確認作業は後でまとめて行うものであってもよい。赤目補正処理の確認作業のみ後でまとめて行う場合、元の撮影画像と赤目修正後の修正画像とを保存しておき、確認作業後に不要な画像を消去する。また、この場合、画像全体を保存しておくのではなく、不具合が生じている画像部分のみ保存するものであってもよく、画像ではなく補正情報などを保存するものであってもよい。

また、上記では、不具合が生じる旨を表わす警告を画像表示部に表示する例について説明したが、本発明にいう警告は、例えば、ユーザが撮影時に覗くファインダなどに表示するものであってもよい。

また、上記では、不具合が生じる旨を表わす警告を画像表示部に表示する例について説明したが、本発明にいう警告部は、例えば、音声によって警告を発するものであってもよい。

また、上記では、不具合が生じる旨を表わす警告を発する警告部の例について説明したが、本発明にいう警告部は、撮影モードと連動して、例えば、自動赤目補正処理モードが設定されている場合に、補正処理が働く旨を表わす通告を発するものであってもよく、自動赤目補正処理モードが設定されておらずに、フラッシュ撮影が設定されている場合に、自動赤目補正処理モードの設定を進める勧告を発するものなどであってもよい。

また、上記では、閃光を伴わずに取得した第１の画像の色と、閃光を伴って取得した第２の画像の色との差によって、撮影画像中に不具合が生じているか否かを推定する例について説明したが、本発明の画像補正装置および撮像装置は、プレ撮影時にも閃光を発し、そのプレ撮影で取得された低解像度データに基づいて赤目検出や警告を行うものであってもよい。このように、プレ撮影で取得された低解像度データを使って赤目を検出しておくことによって処理が分散され、本撮影後の赤目補正処理にかかる時間を短縮することができる。

また、本実施形態の説明では、撮影画像中の赤目部分を検出し、検出された赤目部分を修正する例を示したが、本発明は、これに限られるものではなく、例えば金目部分などといった目に関する所定の不具合を検出し、検出された不具合を修正するものであってもよい。

また、本実施形態の説明では、本発明にいう「箇所数」の一例として、赤目部分が検出された人物の数を表す「未確認箇所数」を挙げたが、本発明にいう「箇所数」は、例えば赤目部分などといった不具合が検出された目の数であってもよい。

また、上記では、不具合が検出された箇所数を表示する例について説明したが、本発明にいう画像表示部は、例えば、不具合の程度ごとに、その程度における不具合の箇所数を表示するものであってもよい。

さらに、本実施形態の説明では、撮影画像中の赤目部分が検出された箇所数を、その箇所を含む、撮影画像中の赤目部分が検出されて修正された後の赤目補正結果画像とともに表示する例を示したが、本発明は、これに限られるものではなく、撮影画像中の赤目部分が検出された箇所数を、その箇所を含む、撮影画像中の赤目部分が検出されて修正される前の撮影画像とともに表示するものであってもよい。

本発明の第１実施形態のカメラを前面斜め上から見た外観斜視図である。 図１に示すカメラを背面斜め上から見た外観斜視図である。 図１，図２に示すカメラの内部に配備された信号処理部の構成ブロック図である。 “第１自動赤目補正処理”モードが選択される場合における操作の流れを説明するフローチャートである。 ステップＳ１０１によって写真撮影された撮影画像の一例を示す図である。 ステップＳ１０４によって自動赤目補正処理が施された後の赤目補正結果画像および未確認箇所数がＬＣＤパネルに表示された表示例を示す図である。 赤目補正結果画像および未確認箇所数における、図６とは別の表示例を示す図である。 ステップＳ１０６によって十字キーによる顔の選択が可能な赤目補正結果画像がＬＣＤパネルに表示された表示例を示す図である。 ステップＳ１０６によって顔の選択が可能な赤目補正結果画像における、図８とは別の表示例を示す図である。 ステップＳ１０７によって拡大された顔がＬＣＤパネルに表示された表示例を示す図である。 拡大された顔における、図１０とは異なる表示例を示す図である。 ステップＳ１０９によって拡大された目部分がＬＣＤパネルに表示された表示例を示す図である。 “第２自動赤目補正処理”モードが選択される場合における操作の流れを説明するフローチャートである。 ステップＳ２０４によって自動赤目補正処理が施された後の赤目補正結果画像および検出数がＬＣＤパネルに表示された表示例を示す図である。 ステップＳ２０７によって拡大された顔および未確認箇所数がＬＣＤパネルに表示された表示例を示す図である。 ステップＳ２０９によって拡大された目部分および未確認箇所数がＬＣＤパネルに表示された表示例を示す図である。 第２実施形態のカメラで被写体を撮影して、撮影画像を保存するまでの一連の処理を示すフローチャートである。 第３実施形態のカメラで被写体を撮影して、撮影画像を保存するまでの一連の処理を示すフローチャートである。

符号の説明

１００ カメラ
１０１ レンズ鏡胴
１０１ａ 撮影レンズ
１０２ 調光センサ
１０３ 閃光発光装置
１０４ａ 光学式ファインダ対物窓
１０４ｂ 光学式ファインダ接眼窓
１０５ シャッタレリーズボタン
１０５ａ シャッタスイッチ
１０６ ＵＳＢ端子
１０７ 電源入力端子
１０８ ＬＣＤパネル
１０９ ＬＣＤパネル起動ボタン
１１０ 十字キー
１１１ メニュー／ＯＫスイッチ
１１２ 撮影モードダイヤル
１１３ 機能選択レバー
１１３ａ “撮影記録”側
１１３ｂ “画像データ再生”側
１１４ メインスイッチ
１１５ セルフタイマＬＥＤ
１１６ キャンセルスイッチ
２１０ ＣＣＤ固体撮像素子
２１１ ＣＰＵ
２１２ タイミングジェネレータ
２１３ ＣＤＳＡＭＰ
２１４，２１７ モータドライバ
２１６ フォーカスレンズ
２１８ Ａ／Ｄ変換回路
２１９ 画像コントーラ
２２０ バス
２２１ メモリ（ＳＤＲＡＭ）
２２２ 画像信号処理回路
２２３ 圧縮処理回路
２２４ メディアコントローラ
２２５ ＵＳＢｃｏｎｔｒｏｌｌｅｒ
２２６ ＶｉｄｅｏＥｎｃｏｒｄｅｒ
２２７ 画像表示装置
２３０ ＡＥ検出回路
２３１ ＡＥ＆ＡＷＢ検出回路
２４０ 記録メディア
３００ 光量調整装置
４１０，４１１，４２０，４２１，４３０，４３１ 人物
４１１ａ，４２１ａ，４３１ａ 顔
４１１ｂ 目部分
５１０，５１１，５２０，５２１，５３０，５３１ 丸
６１０ 未確認箇所数
６２０ 検出数

Claims (5)

1. 撮影光学系を経由してきた被写体光による被写体像を固体撮像素子上に結像させて該被写体像を表す画像データを得、該画像データを記録する撮像装置において、
   前記画像データにより表わされる画像中の人物の目における赤目を検出し、検出された赤目を修正するとともに、該赤目が見つかった箇所に所定の基準で優先順位を付ける修正部と、
   前記修正部により赤目が検出された人物の数を表わす箇所数を、該箇所を含む画像とともに表示する画像表示部とを備え、
   前記画像表示部は、前記画像を表示するにあたって、前記修正部によって付けられた優先順位が高い箇所を優先して表示するものであることを特徴とする撮像装置。
2. 前記画像表示部は、前記画像を表示するにあたって、前記箇所の一覧を表示するものであることを特徴とする請求項１記載の撮像装置。
3. 前記画像表示部は、前記画像を表示するにあたって、前記箇所を拡大して表示するものであることを特徴とする請求項１記載の撮像装置。
4. 前記画像表示部は、前記画像を表示するにあたって、前記箇所を拡大しない通常画像と、該箇所を拡大した拡大画像とを表示するものであることを特徴とする請求項３記載の撮像装置。
5. 前記画像表示部に表示された画像中の、前記修正部により不具合が検出された箇所を確認する操作を受け付ける確認部を備え、
   前記画像表示部は、前記箇所数を表わす表示を行うにあたって、前記確認部で確認された数を差し引いた箇所数を表わす表示を行うものであることを特徴とする請求項１記載の撮像装置。

Images