JP2013115656A - 撮影機器 - Google Patents

Abstract

【課題】簡単な操作で、顔部等に処理を施した撮影画像を得る。
【解決手段】 撮影機器は、被写体を撮影して得た撮影画像を出力する撮像部と、前記撮影画像中の特定の領域を非公開領域として検出する検出部と、前記被写体の撮影に際して、前記非公開領域の少なくとも一部を覆うマスク画像を前記撮影画像に合成して合成画像を生成する合成制御部とを具備する。これにより、非公開領域が認識不能となり、非公開領域を含む画像が記録又は送信等された場合でも、個人情報等を保護することが可能となる。
【選択図】図１

Description

本発明は、アップロード用の撮影画像等の撮影に好適な撮影機器に関する。

近年、デジタルカメラなどの撮影機能付き携帯機器（撮影機器）は、画像処理を駆使して、様々な撮影機能を備えている。また、撮影機器においては、通信機能を備えたものもあり、撮影して得た画像を他の機器やネットワーク上に伝送することも可能である。

例えば、自分の周りで起こった日常を撮影して得た撮影画像を、インターネット等のネットワーク上にアップロードして、第３者との間で画像共有して楽しむこともできる。しかしながら、街の風景などの撮影時には、意図せず、撮影画像内に人の顔などが入ってしまうことがある。このような撮影画像が画像共有されると、肖像権やプライバシーの観点から好ましくない。

そこで、特許文献１においては、画像中の顔部にモザイクをかけることでプライバシーを保護する技術が開示されている。

特開２００９−２８４２３５号公報

しかしながら、特許文献１の技術では、モザイク処理に必要な設定が煩雑であるという問題があった。

本発明は、簡単な操作で、顔部等に処理を施した撮影画像を得ることができる撮影機器を提供することを目的とする。

本発明に係る撮影機器は、被写体を撮影して得た撮影画像を出力する撮像部と、前記撮影画像中の特定の領域を非公開領域として検出する検出部と、前記被写体の撮影に際して、前記非公開領域の少なくとも一部を覆うマスク画像を前記撮影画像に合成して合成画像を生成する合成制御部とを具備する。

本発明によれば、簡単な操作で、顔部等に処理を施した撮影画像を得ることができるという効果を有する。

本発明の一実施の形態に係る撮影機器の回路構成を示すブロック図。 合成モードの利用形態を説明するための説明図。 撮影画像と合成画像を説明するための説明図。 カメラ制御を説明するためのフローチャート。 図４中の合成画像作成処理を説明するためのフローチャート。 仮記憶部１４の記憶内容を模式的に説明するための説明図。 仮記憶部１４の記憶内容を模式的に説明するための説明図。 仮記憶部１４の記憶内容を模式的に説明するための説明図。 合成画像の表示例を示す説明図。

以下、図面を参照して本発明の実施の形態について詳細に説明する。

図１は本発明の一実施の形態に係る撮影機器の回路構成を示すブロック図である。本実施の形態は、撮影時に、撮影画像中の顔部等を非公開領域として検出し、この領域にマスク画像を合成して処理を行うモード（以下、合成モードという）での撮影を可能にするものである。本実施の形態の撮影機器においては、常に合成モードでの撮影を行うように構成してもよく、また、撮影画像をそのまま処理する通常モードと合成モードとを切換え可能に構成してもよい。

図１において、撮影機器本体１０は、ＣＣＤやＣＭＯＳセンサ等の撮像素子によって構成された撮像部１１を有している。撮像部１１は、撮影機器本体１０の前面に設けられた交換レンズ２０からの被写体像を光電変換して撮影画像信号を得る。

交換レンズ２０は、撮影機器本体１０の撮像部１１に被写体像を導く撮影光学系２１を有している。撮影光学系２１は、円筒状の部分を有するレンズ収納部２１ａ及びレンズを駆動制御するためのリング状の操作部２２を備えている。操作部２２はレンズ収納部２１ａの周方向に回動自在であると共に、光軸方向にスライド自在に構成されている。

回転操作判定部２３は、例えばフォトカプラやエンコーダー等によって構成されており、操作部２２の回転操作に基づく操作信号を制御部２５に出力するようになっている。また、スライド位置判定部２４は、例えば、複数のスイッチ等によって構成されており、操作部２２のスライド操作に基づく操作信号を制御部２５に出力するようになっている。制御部２５は、マイコン等によって構成される。

回転操作判定部２３からの操作信号は操作部２２の回転位置に対応しており、制御部２５は、操作部２２の回転位置に応じたフォーカス信号を生成して駆動部２６を制御する。撮影光学系２１には図示しない複数のレンズが設けられており、モーター等によって構成された駆動部２６はこれらのレンズを駆動してレンズ位置を変更し、ズーム制御及びフォーカス制御を行う。操作部２２を回転操作することで、回転操作に応じたピント微調整が行われる。

スライド位置判定部２４は、操作部２２のスライド位置として２つの状態を判定可能に構成することができる。制御部２５は、スライド位置の判定結果に基づいて、ピント合わせのモードとして通常モードとパンフォーカスモードとを切換える。例えば、制御部２５は、スライド位置判定部２４によってスライド位置が一方の位置であることが示された場合には、通常モードを設定して操作部２２の回転操作に基づくピント微調整を行う。

一方、制御部２５は、スライド位置が他方の位置であることが示された場合には、駆動部２６を制御してレンズを駆動し、特定の距離にピントが合うようにパンフォーカス制御を行う。この場合には、制御部２５は、操作部２２の回転操作に基づいてパンフォーカス設定の距離を変更する。

撮影光学系２１にはピント制御部２１ｂが設けられており、ピント制御部２１ｂはレンズの位置に対応した信号をピント位置判定部２７に出力する。ピント位置判定部２７は、ピント制御部２１ｂの出力に基づいてピント位置を判定して判定結果を制御部２５に出力する。制御部２５のピント換算部２５ａは、回転操作の判定結果及びピント位置の判定結果が与えられ、操作部２２の回転操作とレンズの移動量との換算を行って、ピント位置が回転操作に基づく所定の位置になるように、駆動部２６を制御する。

交換レンズ２０には、通信部２８が設けられている。また、撮影機器本体１０には通信部１３が設けられている。通信部２８は、所定の伝送路を介して撮影機器本体１０の通信部１３との間で情報の送受を行う。制御部２５は、撮影機器本体１０の通信部１３との間の通信が確立すると、図示しないメモリに格納したレンズ情報を通信部２８，１３によって撮影機器本体１０に送信させることができる。これにより、撮影機器本体１０は、交換レンズ２０がどのようなズーム機能を有しているか、ズームレンズの倍率、焦点距離、明るさナンバーや、ピント合わせのモード等を認識することができる。また、制御部２５は、通信部１３，２８介して撮影機器本体１０の信号処理及び制御部１２から制御信号が供給されて、信号処理及び制御部１２によって制御可能に構成されている。

なお、本実施の形態においては種々の交換レンズを採用することができる。図１では、回転及びスライド自在の操作部２２によってピント合わせのモードを設定可能な交換レンズを採用する例を示したが、撮影機器本体側でパンフォーカスモードを設定可能にしてもよく、ピント合わせのモードの設定機能や通信機能等を有していない交換レンズを採用してもよく、あるいは交換不能なレンズを採用してもよい。

撮影機器本体１０の撮像部１１は、信号処理及び制御部１２によって駆動制御されて、交換レンズ２０を介して被写体を撮影し、撮影画像を出力する。信号処理及び制御部１２は、撮像部１１に撮像素子の駆動信号を出力すると共に、撮像部１１からの撮影画像を読み出す。信号処理及び制御部１２は、読み出した撮影画像に対して、所定の信号処理、例えば、色調整処理、マトリックス変換処理、ノイズ除去処理、その他各種の信号処理を行う。

本実施の形態においては、撮影機器本体１０には、仮記憶部１４及び顔検出部１６が設けられている。仮記憶部１４は、信号処理及び制御部１２による信号処理後の撮影画像を仮記憶することができるようになっている。また、信号処理及び制御部１２は、撮影画像を顔検出部１６にも与える。

顔検出部１６は、公知の顔検出の手法によって、撮影画像中の人物の顔を検出する。例えば、顔検出部１６は、顔の明るさの特徴をモデル化した複数の濃淡画像と撮影画像とを順次比較することで、人物の顔を検出する手法を採用してもよい。また、顔検出部１６は、例えば笑顔の場合における口角の角度や目尻の角度、顔パーツの陰影の特徴を記憶したデータベースを利用することで、顔の表情を判定することもできる。更に、顔検出部１６は、多数の人物の顔の特徴量を記憶したデータベースを利用することで、撮影された人物の年齢、性別等を判定することも可能である。

信号処理及び制御部１２は、顔検出部１６の検出結果が与えられる。信号処理及び制御部１２は、大きさ及び位置判定部１２ａを有しており、大きさ及び位置判定部１２ａは、顔検出の検出結果によって、撮影画像中の顔部の大きさ及び位置を判定する。また、信号処理及び制御部１２は、コントラスト判定部１２ｂを有しており、コントラスト判定部１２ｂは、撮影画像中の顔部及びその周囲のコントラストを判定する。なお、コントラスト判定部１２ｂは、交換レンズ２０のピント合わせ処理にも用いられる。

信号処理及び制御部１２は、信号処理後の撮影画像を仮記憶部１４に与える。また、信号処理及び制御部１２は、撮影時には、ＲＯＭ１５に記憶されているマスク画像を読み出して仮記憶部１４に記憶させるようになっている。なお、信号処理及び制御部１２は、ＲＯＭ１５に記憶されているマスク画像の他に、ユーザが図示しないメモリに記録している画像をマスク画像として読み出して仮記憶部１４に記憶させるようにしてもよい。

信号処理及び制御部１２は、リサイズ処理部１２ｃ及び合成制御部１２ｄを有している。リサイズ処理部１２ｃは、仮記憶部１４に記憶されているマスク画像を読み出して、大きさ及び位置判定部１２ａの大きさの判定結果に従ってマスク画像の拡大又は縮小処理（以下、リサイズ処理という）を行う。合成制御部１２ｄは、仮記憶部１４に記憶されている撮影画像を読み出し、顔部の大きさに従ってリサイズ処理されたマスク画像（顔部合成画像）を、大きさ及び位置判定部１２ａの位置の判定結果に従って、撮影画像の顔部の位置に合成した合成画像を生成する。合成制御部１２ｄは、合成画像を仮記憶部１４の合成画像記憶部１４ａに記憶させる。

信号処理及び制御部１２は、仮記憶部１４に記憶されている撮影画像、マスク画像及び合成画像を読み出して表示部１９に与える。表示部１９はＬＣＤ（液晶表示パネル）等によって構成されており、信号処理及び制御部１２から与えられた画像を表示する。

また、信号処理及び制御部１２は、仮記憶部１４に記憶されている撮影画像や合成画像を読み出して圧縮処理し、圧縮後の画像を記録部１７に与えて記録させることができる。記録部１７としては、例えばカードインターフェースを採用することができ、記録部１７はメモリカード等の記録媒体に画像情報及び音声情報等を記録可能である。

また、撮影機器本体１０には、操作判定部１８も設けられている。操作判定部１８は、図示しないレリーズボタンや、撮影モード設定等の各種スイッチ等を有しており、ユーザ操作に基づく操作信号を発生して信号処理及び制御部１２に供給する。信号処理及び制御部１２は、操作信号に基づいて、各部を制御する。

更に、撮影機器本体１０にはタッチパネル１９ａが設けられている。例えば、タッチパネル１９ａを表示部１９の表示画面上に設けることで、ユーザが指で指し示した表示画面上の位置に応じた操作信号を発生することができる。これにより、ユーザは、表示部１９の表示画面上に表示された画像に対する選択操作等を簡単に行うことができる。

信号処理及び制御部１２は、各部を制御することで、ユーザ操作に基づく撮影モードを設定して、各撮影モードに応じた撮影機能を実現する。例えば、信号処理及び制御部１２は、操作判定部１８から合成モードを指示するための図示しないスイッチの操作に基づく操作信号が入力されると、合成モードを設定することができるようになっている。

また、信号処理及び制御部１２は、操作部２２のスライド操作によってパンフォーカスモードが設定された場合には、自動的に合成モードを設定するようにしてもよい。また、信号処理及び制御部１２は、オートフォーカスモードが設定された場合や、所定の時間以内にレリーズボタンを押し終える（一気押し）の場合等において、合成モードを設定するようにしてもよい。

合成モード時においては、信号処理及び制御部１２は、ユーザ操作に応じて、マスク画像の合成処理、マスク画像の変更処理、合成画像から合成されたマスク画像を除去するマスク画像除去処理を、各顔部毎に実施することができるようになっている。また、信号処理及び制御部１２は、マスク画像の合成処理、変更処理及び除去処理時における撮影画像、マスク画像及び合成画像を表示させることができると共に、これらの処理後の撮影画像及び合成画像を記録部１７に与えて記録させることができるようになっている。

撮影機器本体１０には、通信部３１が設けられており、通信部３１は、信号処理及び制御部１２に制御されて、記録部１７に記録された合成画像をインターネット等の図示しない伝送路を介して他の機器に送信することができるようになっている。例えば、信号処理及び制御部１２は、通信部３１によって、記録部１７に記録された合成画像を自動的に送信するモードを設定することができる。

次に、このように構成された実施の形態の動作について図２乃至図９を参照して説明する。図２は合成モードの利用形態を説明するための説明図であり、図３は撮影画像と合成画像を説明するための説明図である。

本実施の形態においては、パンフォーカスモードを設定することができる。パンフォーカスモードにおいては、予めパンフォーカスの距離を設定しておくことで、撮影時におけるピント合わせを不要にするものである。パンフォーカスモードを設定すると、例えば、散策中等において、気に入った風景をとっさに撮影する場合等においても、シャッターチャンスを逃さない撮影が容易となる。ネットワーク上の記録領域に撮影画像をアップロードして写真共有する場合等においては、このような撮影方法によって撮影されることが多い。

図２（ａ）はこのような撮影方法が採用される場面の例を示している。撮影者４１は、道路４２上を歩行中である。撮影者４１の前方には、ビル群４３やタワー４４等の建造物等の風景が見渡せる。ここで、撮影者４１が前方の風景を撮影しようとするものとする。図２（ｂ）に示すように、撮影者４１は手４５によってカメラ４６を構えて撮影を行う。この場合において、撮影範囲内に、人物４７が存在することがある。パンフォーカスモードは、手早く撮影を行う場合に適したものであり、このような撮影時に、ピント合わせが不要で簡単に撮影できる反面、意図しない人物が撮影されてしまうことがある。このような場合に、撮影画像をそのまま画像共有のためにアップロードすると、個人情報保護の観点から好ましくない。

そこで、本実施の形態においては、撮影時において、このような人物の顔部等にマスク画像を合成する合成モードを採用し、撮影画像中の人物を判別不能にする。図３（ａ）は撮影画像を示し、図３（ｂ）は合成画像を示している。

図３（ａ）は撮影された画像５１中に、建物の画像５２及び人物の画像５３が撮影されている様子を示している。画像５１においては、人物の顔部の画像５４が写された状態を示している。図３（ｂ）は図３（ａ）の撮影画像中の人物の顔部の画像５４上に、マスク画像５５を合成した合成画像５１ｂの一例を示している。図３（ａ），（ｂ）の比較から明らかなように、図３（ｂ）の合成画像５１ｂにおいては、顔の画像５４の大部分はマスク画像５５によって覆い隠されており、合成画像５１ｂに写された人物を特定することはできない。

次に、図４乃至図８を参照して合成モードを可能にするカメラ制御について説明する。図４はカメラ制御を説明するためのフローチャートであり、図５は図４中の合成画像作成処理を説明するためのフローチャートである。また、図６乃至図８は仮記憶部１４の記憶内容を模式的に説明するための説明図である。

なお、図４はオートフォーカスモード及びパンフォーカスモードを指定するユーザ操作を検出して合成モードを設定する例について示しているが、他の所定の操作、例えば、２段階で押下するシャッターボタンを短時間で一気に押し終える一気押し操作を検出して、合成モードを設定してもよく、また、撮影時にはユーザ操作に拘わらず、常に合成モードを設定するようにしてもよい。

例えば、撮影者が、交換レンズ２０の操作部２２をスライドさせる操作によって、制御部２５はパンフォーカスモードを設定することができる。パンフォーカスモードが設定されたことを示す情報は、制御部２５から通信部２８，３１を介して撮影機器本体１０の信号処理及び制御部１２に供給される。このように、ピント合わせ用の操作部２２をスライドさせるという簡単な操作によって、パンフォーカスモードを設定して、自動的に合成モードに移行することができる。

更に、通常モードから合成モードへの移行は、撮影機器本体１０の姿勢又は振動等を検出することで行ってもよい。例えば、手早く撮影行おうとした場合には、撮影機器本体１０を撮影位置に構える場合のように、姿勢が安定していない状態、或いは、直前に撮影機器本体１０の振動が大きくなる状態等が生じることがあるので、このような状態を検出することで、合成モードに移行するようにしても良い。

図４のステップＳ１において、信号処理及び制御部１２は撮影モードであるか否かを判定する。いま、撮影モードが指示されているものとする。この場合には、信号処理及び制御部１２は、ステップＳ２において、スルー画の表示及び顔検出を行う。信号処理及び制御部１２は撮像部１１からの撮影画像を取り込んで、所定の信号処理を施す。信号処理及び制御部１２は、信号処理後の撮影画像を顔検出部１６に出力すると共に、信号処理後の撮影画像を表示部１９に与えてスルー画を表示させる。

また、信号処理及び制御部１２は、ＲＯＭ１５からマスク画像を読み出して仮記憶部１４に記憶させる。図６は仮記憶部１４の記憶領域６１内に４つのマスク画像ＦＡ，ＦＣ，ＭＡ，ＭＣが格納されていることを模式的に示している。

信号処理及び制御部１２は、ステップＳ３においてオートフォーカスモードが指定されているか否かを判定し、指定されている場合にはステップＳ４においてオートフォーカスモードを設定し、ステップＳ５で撮影操作の有無を判定する。

ここで、撮影者がレリーズボタン等の操作によって撮影を行うものとする。この場合には、信号処理及び制御部１２は、次のステップＳ６に移行して、オートフォーカス又はパンフォーカスが設定されているか否かを判定する。

オートフォーカス又はパンフォーカスが設定されていない場合等においては、信号処理及び制御部１２は、通常モードを設定して撮影及び圧縮記録を行う（ステップＳ７）。即ち、信号処理及び制御部１２は、レリーズボタンの押下によって、撮像部１１からの撮影画像を取り込んで、所定の信号処理を行う。信号処理及び制御部１２は、信号処理後の撮影画像を圧縮して、記録部１７に与えて記録する。また、信号処理及び制御部１２は、ステップＳ８において、記録した撮影画像を表示部１９にも与えてレックビュー表示させる（ステップＳ８）。

信号処理及び制御部１２は、レックビュー表示の開始から所定時間経過後に（ステップＳ９）、レックビュー表示を終了させる（ステップＳ１０）。信号処理及び制御部１２は、次のステップＳ１１において、記録した撮影画像の通信が可能な状態で有るか否かを判定（ステップＳ１１）した後、通信可能であれば、ステップＳ１２において、通信部３１を制御して、記録した撮影画像を所定のネットワークに送信する。

ここで、撮影者が、オートフォーカスモード、パンフォーカスモードを指定する操作や、シャッターボタンを短時間に押し終える（一気押し）操作を行うものとする。この場合には、信号処理及び制御部１２は、合成モードを設定する。

例えば、撮影に際して、撮影者が交換レンズ２０の操作部２２をスライド操作して、パンフォーカスモードを指定している場合には、信号処理及び制御部１２は、ステップＳ６から処理をステップＳ１５に移行して、合成モードのための撮影と仮記憶を行う。

ステップＳ１５〜Ｓ２４は合成モードの処理を示している。信号処理及び制御部１２は、レリーズボタンの押下によって撮像部１１から転送された撮影画像を取り込んで信号処理した後、信号処理後の撮影画像を仮記憶部１４に与えて仮記憶させる。信号処理及び制御部１２は、ステップＳ１６においてマスク画像（顔部合成画像）を作成し、撮影画像と合成した合成画像を作成する。

図５は合成画像作成の具体的なフローの一例を示している。

顔検出部１６には、レリーズボタン等の撮影操作によって得られた撮影画像が信号処理及び制御部１２から供給され、顔検出部１６は、撮影画像中の顔検出処理を行う。更に、顔検出部１６は、撮影画像中の顔から当該人物の性別及び小児か否かを検出すると共に、顔の表情についても検出する。顔検出部１６の検出結果は信号処理及び制御部１２に与えられる。

信号処理及び制御部１２は、顔検出部１６の検出結果を元に、ステップＳ５１において顔が女性のものであるか否か、ステップＳ５２，５３において顔が小児のものであるか否かを判定する。信号処理及び制御部１２は、顔が男性の大人であると判定した顔部については、仮記憶部１４から男性で大人用のマスク画像ＭＡを選択して顔部合成画像に用いる（ステップＳ５７）。同様に、信号処理及び制御部１２は、顔が男性の小児であると判定した顔部については、仮記憶部１４から男性の小児用のマスク画像ＭＣを選択し（ステップＳ５６）、顔が女性の大人であると判定した顔部については、仮記憶部１４から女性の大人用のマスク画像ＦＡを選択し（ステップＳ５５）、顔が女性の小児であると判定した顔部については、仮記憶部１４から女性の小児用のマスク画像ＦＣを選択して（ステップＳ５４）、顔部合成画像に用いる。

信号処理及び制御部１２の大きさ及び位置判定部１２ａは、顔検出部１６の検出結果に基づいて、撮影画像中の顔部の大きさ及び位置を判定する（ステップＳ６０）。リサイズ処理部１２ｃは、各顔毎に選択されたマスク画像を、各顔の大きさに応じて夫々リサイズする（ステップＳ６１）。更に、信号処理及び制御部１２は、ステップＳ６２において、撮影画像中の各顔毎に顔の表情を判定し、表情に応じてマスク画像を選択すると共に変形させる。例えば、性別毎、大人と小児毎に複数のマスク画像が用意されている場合には、表情に応じてマスク画像を選択することができる。更に、選択したマスク画像を表情に応じて変形させることもできる。

また、信号処理及び制御部１２のコントラスト判定部１２ｂは、撮影画像中の顔部及びその周囲のコントラストを判定する（ステップＳ６４）。信号処理及び制御部１２は、選択したマスク画像のコントラストを顔部のコントラストに比べて十分に高く又は低くする（ステップＳ６５）。顔のコントラスト以外にも、背景のコントラストや色の判定結果を利用してもよい。また輪郭の太さを切り換えても良い。その場合は、ステップＳ６５の前で、顔部の周辺のコントラストや色を判定するステップを設ければよい。

合成モード時には、顔部を加工していることを明確に表した方がよいことが考えられる。このため、例えば顔のコントラストを求め、そのコントラストよりも高いコントラストのマスク画像を合成することで、顔部をマスク画像で置き換えたことが明確になるようにする。また、顔部の色を検出し、マスク画像を顔部の色よりも濃い色に補正するようにしてもよい。また、顔部の色が濃い人物については、薄い色のマスク画像を顔部に重ねるようにしてもよい。例えば、黒い顔の人物が撮影されている場合には、その顔部に白い花のマスク画像を合成する等の方法が考えられる。また、顔部の背景に対して、コントラストや色合いを強調したマスク画像を合成するようにしてもよい。これによって、背景や顔部から分離して見えるようにして、マスク画像であることを鑑賞者に分かりやすく認識できるようにすると共に、はっきりさせすぎて不自然にならないようにすることができる。

信号処理及び制御部１２の合成制御部１２ｄは、選択されてリサイズ、変形等が加えられたマスク画像を撮影画像の顔部に重ねた合成画像を生成して、仮記憶部１４の合成画像記憶部１４ａに記憶させる。

図７は仮記憶部１４及び合成画像記憶部１４ａに記憶されている撮影画像６２ａ、マスク画像ＦＡ，ＦＣ，ＭＡ，ＭＣ及び合成画像６２ｂの一例を示している。図７は図３（ａ），（ｂ）の撮影画像に対応した例を示しており、仮記憶された撮影画像６２ａには、人物の画像が含まれており、信号処理及び制御部１２は、この人物が女性の小児であるものと判定し、女性の小児用のマスク画像ＦＣを選択した例を示している。そして、図７の例では、信号処理及び制御部１２が、撮影画像６２ａの人物の顔部に、選択した後にリサイズ、変形等を加えたマスク画像ＦＣを重ねて合成した合成画像６２ａを生成したことを示している。

合成画像の作成が終わると、信号処理及び制御部１２は、ステップＳ１７において、この合成画像の記録の前にレックビュー表示を開始する。信号処理及び制御部１２は、合成画像記憶部１４ａから合成画像を読み出して、表示部１９に与えて表示させる。こうして、表示部１９の表示画面上において、図３（ｂ）に示す合成画像が表示される。

レックビュー表示の表示開始から所定時間が経過するまでは、ステップＳ２１〜Ｓ２４においてマスク画像の解除、設定操作が可能である。ユーザが撮影画像中のマスク画像が合成された顔部（以下、合成顔部という）を選択する操作、例えば、タッチパネル１９ａが設けられた表示部１９の表示画面上の合成顔部の位置をタッチする操作を行うと（ステップＳ２１）、この操作に応じた操作信号が信号処理及び制御部１２に与えられ、信号処理及び制御部１２は、合成画像からマスク画像を除去した画像を生成して（ステップＳ２２）、合成画像記憶部１４ａに記憶させる。

図８はこの例を示しており、合成画像記憶部１４ａに記憶されている画像６２ｂは、マスク画像が除去されている。信号処理及び制御部１２は、図８に示す画像６２ｂを表示部１９に与えて表示させる。即ち、表示部１９の表示画面上には、図３（ａ）に示す画像が表示されることになる。なお、説明の便宜上、一度合成処理された画像は、マスク画像が除去されたとしても合成画像と言うことがある。

この状態で、ユーザが画像中の顔部を選択する操作、例えば、表示部１９の表示画面上の顔部の位置をタッチする操作を行うと（ステップＳ２３）、この操作に応じた操作信号が信号処理及び制御部１２に与えられ、信号処理及び制御部１２は、画像上に再度マスク画像を合成した合成画像を生成して（ステップＳ２４）、合成画像記憶部１４ａに記憶させる。即ち、この場合には、合成画像記憶部１４ａには、図７に示す合成画像６２ｂが記憶されることになる。信号処理及び制御部１２は、図７に示す合成画像６２ｂを表示部１９に与えて表示させる。即ち、表示部１９の表示画面上には、再度図３（ｂ）に示す画像が表示されることになる。

レックビュー表示の表示開始から所定時間が経過するまで、マスク画像の解除、設定操作が可能であり、信号処理及び制御部１２は、所定時間経過すると、ステップＳ１８からステップＳ１９に処理を移行して、合成画像記憶部１４ａに記憶されている画像を記録部１７に与えて記憶させる。信号処理及び制御部１２は、ステップＳ２０においてレックビュー表示を終了させた後、処理をステップＳ１１に移行する。こうして、ステップＳ１２では、撮影画像中の人物の顔部にマスク画像を合成した合成画像を記録すると共に、アップロードすることが可能となる。

また、図４の例では、マニュアルフォーカス時においても、合成画像を表示して合成画像を確認することができるようになっている。信号処理及び制御部１２は、ステップＳ３，Ｓ３１においてオートフォーカス又はパンフォーカスが指定されているか否かを判定し、いずれも指定されていない場合には、ステップＳ３２において顔部がタッチされたか否かを判定する。レリーズボタンが押下される前のレックビュー表示時において、表示画面上の顔部がタッチされた場合には、信号処理及び制御部１２は、処理をステップＳ３３に移行して、合成画像を表示する。なお、ステップＳ３３の処理はステップＳ１６と同様の処理であり、レックビュー画像中の人物の顔部に、選択されたマスク画像がリサイズ、変形等の処理が施された後合成されて表示される。

撮影モードが指定されていない場合には、信号処理及び制御部１２は、ステップＳ４１において再生モードが指定されているか否かを判定する。再生モードが指定された場合には、信号処理及び制御部１２は、記録部１７に記録されている画像を読み出し、伸張処理等の所定の信号処理を施した後、表示部１９に与えて再生表示させる。信号処理及び制御部１２は、ステップＳ４３において再生画像の変更操作が行われていたか否かを判定し、他の画像を指定する変更操作があった場合には、指定された他の画像を読み出し、伸張処理等の所定の信号処理を施した後、表示部１９に与えて再生表示させる（ステップＳ４４）。

信号処理及び制御部１２は、ステップＳ４１において再生モードが指定されていないと判定した場合には、ステップＳ４５において通信可能で未送信の画像が記録部１７に記録されているか否かを判定する。信号処理及び制御部１２は、通信可能な未送信の画像が存在する場合には、ステップＳ４６において、当該未送信画像を読み出し、通信部３１によってネットワーク上に送信させる。

なお、図４のフローチャートでは、ステップＳ２１〜Ｓ２４において、マスク画像の解除、設定を行う例について説明したが、マスク画像の解除、設定の他にマスク画像の変更を可能にするようにしてもよい。例えば、信号処理及び制御部１２は、仮記憶部１４に格納されているマスク画像の一部又は全部をレックビュー表示時に合成画像に重ねて表示させるようにしてもよい。図９はこの場合の表示例を示す説明図である。図９において、レックビュー画像７１には、人物の顔部７２にマスク画像７３が合成されている。このレックビュー画像７１の所定の領域には、選択可能な複数のマスク画像７４が配置表示されている。

ユーザが変更前後のマスク画像を指定する操作を行うものとする。例えば、表示されているマスク画像のうち変更後のマスク画像として選択したいマスク画像をタッチしながらスライドさせて変更したい合成顔部又は顔部の位置に移動させる、即ち、ドラッグ操作することで、このような指定が可能である。

信号処理及び制御部１２は、この操作に応答して、ユーザによって指定されたマスク画像を選択して、大きさ及び位置判定部１２ａ、コントラスト判定部１２ｂ、リサイズ処理部１２ｃ及び合成制御部１２ｄにより、選択したマスク画像に対して、リサイズ、変形等の処理を施した後、処理後のマスク画像を指定された合成顔部のマスク画像と入れ替える又は新たに顔部に合成する。これにより、レックビュー表示期間であれば、マスク画像の設定、変更、解除を自由に行うことが可能である。

このように本実施の形態においては、撮影時において、撮影画像中の人物の顔部に、自動的にマスク画像を重ねた合成画像を生成することができる。これにより、撮影直後に記録した撮影画像をネットワーク上にアップロードする場合等においても、撮影された人物の個人情報を保護することができる。また、撮影者は、撮影時においてマスク画像が合成された合成画像を記録するか、マスク画像が合成されていない通常の撮影画像を記録するかを選択すると共に、簡単な操作でマスク画像を指定して合成することができ、利便性に優れている。更に、通常モードから合成モードへの移行は、パンフォーカスモードの設定操作等の極めて簡単な操作で行うことができ、操作性に優れている。

なお、上記実施の形態においては、通常モードから合成モードへの移行は、撮影機器本体の物理的な状態の変化を検出することで行ったが、撮影画像の状態によってモードの移行を行うようにしてもよい。例えば、撮影操作時において、撮影画像の中央に十分な大きさで人物が位置する場合には、この人物を被写体として撮影することを意図したものと考えることできるので、通常モードを設定する。逆に、スルー画中の被写体の動きを検出し、画面の中心から外れる方向に移動する人物、或いは移動量が大きい人物について、撮影を意図しない被写体であるものと判定して、これらの人物の顔部にマスク画像を合成する合成モードを設定するようにしてもよい。また、スルー画中の人物のうち、移動する人物は撮影を意図しない被写体と判定してマスク画像を合成し、移動しない人物は撮影を意図した被写体と判定してマスク画像を合成しないようにしてもよい。

また、上記実施の形態においては、人物の顔部の略全体を覆うマスク画像を合成する例について説明したが、目及びその周囲等の顔の一部のみを覆うマスク画像、顔部及び顔部周囲の部分まで覆うマスク画像、或いは人物全体を覆うマスク画像を合成するようにしてもよいことは、明らかである。

また、上記実施の形態においては、合成画像記憶部に記憶された合成画像のみをアップロードすると共に記録部に与えて記録する例について説明したが、合成画像だけでなく合成前の撮影画像についても同様に記録するようにしてもよい。更に、信号処理及び制御部によって、合成画像記憶部に記憶された合成画像については、圧縮した後通信部に与えてネットワーク上にアップロードすると共に、合成前の撮影画像については、圧縮処理した後記録部に与えて記録するようにしてもよい。

また、上記実施の形態においては、撮影画像から人物の顔部を検出してマスク画像を合成する例について説明したが、撮影画像中の非公開としたい領域、例えば、撮影画像中の看板や住所表示等の文字列の画像を検出して、文字列の画像を覆うマスク画像を合成するものにも同様に適用可能である。

さらに、上記実施形態においては、撮影のための機器として、デジタルカメラを用いて説明したが、カメラとしては、デジタル一眼レフカメラでもコンパクトデジタルカメラでもよく、ビデオカメラ、ムービーカメラのような動画用のカメラでもよく、さらに、携帯電話やスマートフォンなど携帯情報端末（ＰＤＡ：Personal Digital Assist）等に内蔵されるカメラでも勿論構わない。

本発明は、上記実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。

なお、特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。また、これらの動作フローを構成する各ステップは、発明の本質に影響しない部分については、適宜省略も可能であることは言うまでもない。

１０…撮影機器本体、１１…撮像部、１２…信号処理及び制御部、１２ａ…大きさ及び位置判定部、１２ｂ…コントラスト判定部、１２ｃ…リサイズ処理部、１２ｄ…合成制御部、１３，２８，３１…通信部、１４…仮記憶部、１４ａ合成画像記憶部、１６…顔検出部、１７…記録部、１９…表示部、１９ａ…タッチパネル、２１…撮影光学系、２２…操作部、２３…回転操作判定部、２４…スライド位置判定部、２５…制御部、２６…駆動部。

Claims (10)

1. 被写体を撮影して得た撮影画像を出力する撮像部と、
   前記撮影画像中の特定の領域を非公開領域として検出する検出部と、
   前記被写体の撮影に際して、前記非公開領域の少なくとも一部を覆うマスク画像を前記撮影画像に合成して合成画像を生成する合成制御部と
   を具備したことを特徴とする撮影機器。
2. 前記合成制御部は、所定のユーザ操作に応答して、前記マスク画像を合成する合成モードを自動的に設定する
   ことを特徴とする請求項１に記載の撮影機器。
3. 前記所定のユーザ操作は、オートフォーカスモード或いはパンフォーカスモードを指定する操作又はレリーズボタンを一気押しする操作である
   ことを特徴とする請求項２に記載の撮影機器。
4. 前記検出部は、
   人物の顔部を前記非公開領域として検出する
   ことを特徴とする請求項１乃至３のいずれか１つに記載の撮影機器。
5. 前記合成画像を前記撮影画像の記録又は送信前に表示する表示制御部
   を具備したことを特徴とする請求項１乃至４のいずれか１つに記載の撮影機器。
6. 前記検出部は、前記人物の顔部の特徴を検出し、
   前記合成制御部は、前記検出部の検出結果に基づいて、複数のマスク画像から前記撮像画像に合成するマスク画像を選択する
   ことを特徴とする請求項４に記載の撮影機器。
7. 前記合成制御部は、前記検出部の検出結果に基づいて、前記マスク画像をリサイズして前記撮像画像に合成する
   ことを特徴とする請求項６に記載の撮影機器。
8. 前記検出部は、前記人物の顔部の背景のコントラストを検出し、
   前記合成制御部は、前記検出部によるコントラストの検出結果に基づいて、前記マスク画像を強調する
   ことを特徴とする請求項４に記載の撮影機器。
9. 前記合成制御部は、前記表示制御部によって表示された合成画像に対するユーザ操作に応答して、前記マスク画像の合成を解除可能である
   ことを特徴とする請求項５に記載の撮影機器。
10. 前記合成制御部は、前記表示制御部によって表示された合成画像に対するユーザ操作に応答して、合成されているマスク画像の合成を解除して他のマスク画像を合成可能である
    ことを特徴とする請求項５に記載の撮影機器。

Images