JP2009118195A - 撮像装置および方法 - Google Patents

Abstract

【課題】撮像した元の画像とそれに付加情報を合成した画像とを確実に記録できるようにする。
【解決手段】記録する画像に対して合成する付加情報を生成する付加情報生成部と、撮像されている画像の記録要求を検知すると、固体撮像素子から得られた原画像の全領域の画像情報に基づく主画像１１０と、原画像の少なくとも一部の領域の画像情報に基づく副画像とを生成し、主画像１１０と副画像のいずれか一方に付加情報を合成して、主画像１１０および副画像の各画像データを記録装置に記録する記録処理部とを備える。付加情報としては、例えば、撮影した日付を示す日付情報１０１が生成される。また、副画像として、例えば、原画像の一部の領域を切り出した部分画像１２０が生成される。
【選択図】図４

Description

本発明は、固体撮像素子を用いて画像を撮像する撮像装置および方法に関し、特に、撮像画像の記録要求を検知したときに付加情報も記録しておくことが可能な撮像装置および方法に関する。

近年、撮影時にその画像に日付を写し込む機能を持つカメラは広く普及しており、利用者は、好みによりその機能をオン／オフして撮影を行うことが可能となっている。そして、このような機能はフィルムカメラだけでなく、デジタル方式のカメラにも搭載されるようになっている。例えば、日付表示機能をオンに設定して撮影を行うと、得られた画像に日付を合成した画像をモニタに一旦表示し、表示位置などの日付の表示状態を調整した後に、その合成画像のデータを記録媒体に記録する撮像装置が考えられていた（例えば、特許文献１参照）。

さらに、デジタル方式で記録された画像であれば、例えばパーソナルコンピュータ（ＰＣ）などにおいて後から日付を合成することも可能である。一般的に、デジタルスチルカメラによって撮影されて生成されたＪＰＥＧ（Joint Photographic Experts Group）などの画像ファイルにおいては、ＥＸＩＦ（Exchangeable Image File Format）と呼ばれる規格に従い、撮影した日時の情報がそのヘッダ領域に格納されている。従って、例えば、記録された画像ファイルをＰＣで再生する場合には、ヘッダ領域の日付情報を基に再生画像上に日付を合成して表示することができる。

また、このような画像ファイルをプリンタに転送して画像を印刷する場合でも、ヘッダ領域の日付情報を基に日付を合成した画像を印刷することも可能である。このようなプリンタとして、画像における印刷範囲を設定し、その印刷範囲内に日付情報が含まれていない場合には、ヘッダ領域から読み出した日付情報を印刷範囲内に合成して印刷するものがあった（例えば、特許文献２参照）。
特開２００１−３５８９３４号公報 特開２００６−１８７９４５号公報

ところで、上記のように日付を写し込む機能を備えたカメラにおいては、撮影時に日付を写し込んだ画像を記録することを望むユーザと、写し込まない元の画像を記録することを望むユーザの両方が存在する。ここで、撮影時に必ず日付を写し込むように設定した場合には、日付が合成された領域では元の画像情報が失われてしまうことが問題となる。これに対して、日付を写し込まない画像を記録するように設定したとしても、前述のように、ヘッダ領域に格納された日付情報を基に、再生時や印刷時に日付を写し込んだ画像を生成することは可能である。しかし、そのような日付合成処理の実行や各種設定のための操作を行うためにはある程度の知識が必要であり、ＰＣやプリンタなどの機器の操作が苦手なユーザにとっては簡単な操作とは言えなかった。

本発明はこのような点に鑑みてなされたものであり、撮像した元の画像とそれに付加情報を合成した画像とを確実に記録できるようにした撮像装置および方法を提供することを目的とする。

本発明では上記課題を解決するために、固体撮像素子を用いて画像を撮像する撮像装置において、記録する画像に対して合成する付加情報を生成する付加情報生成部と、撮像されている画像の記録要求を検知すると、前記固体撮像素子から得られた原画像の全領域の画像情報に基づく主画像と、前記原画像の少なくとも一部の領域の画像情報に基づく副画像とを生成し、前記主画像と前記副画像のいずれか一方に、前記付加情報生成部により生成された前記付加情報を合成して、前記主画像および前記副画像の各画像データを記録装置に記録する記録処理部と、を有することを特徴とする撮像装置が提供される。

このような撮像装置では、画像の記録要求を検知したとき、記録処理部の処理により、固体撮像素子から得られた原画像の全領域の画像情報に基づく主画像と、原画像の少なくとも一部の領域の画像情報に基づく副画像とが生成される。そして、これらの主画像と副画像のいずれか一方に、付加情報生成部により生成された付加情報が合成される。そして、このようにして生成された主画像の画像データと副画像の画像データとが、記録装置にともに記録される。

本発明の撮像装置によれば、いずれか一方に付加情報が合成された主画像と副画像の各データがともに記録されるので、ユーザが特に何の設定操作を行うことなく、付加情報が合成された画像のデータが記録されるとともに、原画像全体の画像情報を確実に残しておくことができる。

以下、本発明の実施の形態を図面を参照して詳細に説明する。
図１は、実施の形態に係る撮像装置の要部構成を示すブロック図である。
図１に示す撮像装置は、いわゆるデジタルスチルカメラであり、光学ブロック１１、ドライバ１１ａ、撮像素子１２、タイミングジェネレータ（ＴＧ）１２ａ、前処理回路１３、カメラ信号処理回路１４、画像変換処理部１５、画像メモリ１６、記録装置１７、グラフィック処理回路１８、ディスプレイ１９、システムコントローラ２０、および入力部２１を具備する。

光学ブロック１１は、被写体からの光を撮像素子１２に集光するためのレンズ、レンズを移動させてフォーカス合わせやズーミングを行うための駆動機構、シャッタ機構、アイリス機構などを具備している。ドライバ１１ａは、システムコントローラ２０からの制御信号に基づいて、光学ブロック１１内の各機構の駆動を制御する。

撮像素子１２は、例えば、ＣＣＤ（Charge Coupled Device）型、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）型などの固体撮像素子であり、ＴＧ１２ａから出力されるタイミング信号に基づいて駆動され、被写体からの入射光を電気信号に変換する。ＴＧ１２ａは、システムコントローラ２０の制御の下でタイミング信号を出力する。

前処理回路１３は、撮像素子１２から出力された画像信号に対して、ＣＤＳ（Correlated Double Sampling）処理によりＳ／Ｎ（Signal／Noise）比を良好に保つようにサンプルホールドを行い、さらにＡＧＣ（Auto Gain Control）処理により利得を制御し、Ａ／Ｄ変換を行ってデジタル画像データを出力する。

カメラ信号処理回路１４は、前処理回路１３からの画像データに対して、ＡＦ（Auto Focus）、ＡＥ（Auto Exposure）、各種画質補正処理のための検波処理や、検波情報を基にシステムコントローラ２０から出力される信号に応じた画質補正処理を施す。

画像変換処理部１５は、画像ＣＯＤＥＣ（Coder-Decoder）機能や画像の合成機能などを備える。例えば、カメラ信号処理回路１４から出力された１フレーム分の画像データを符号化し、静止画像のデータファイルとして記録装置１７に出力する。ここでは例として、カメラ信号処理回路１４で処理された１フレーム分の画像データをＪＰＥＧ（Joint Photographic Experts Group）方式で圧縮符号化するものとする。また、記録装置１７から読み出した画像データ（ここではＪＰＥＧデータ）を伸張復号化する機能も備えている。なお、この画像変換処理部１５では、静止画像だけでなく、動画像のデータを圧縮・伸張できるようにしてもよい。

さらに、画像変換処理部１５は、システムコントローラ２０からの命令に応じて、画像メモリ１６などに記憶された画像データに対して、その画像の一部に別の付加情報を合成した合成画像のデータを生成する機能も備えている。本実施の形態ではこの付加情報として、撮影された日付を示す文字情報を適用する。

画像メモリ１６は、例えばＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）などからなり、画像変換処理部１５で処理される画像データを一時的に格納する。
記録装置１７は、画像変換処理部１５からの符号化データを画像ファイルとして記録する装置であり、例えば、磁気テープ、光ディスクなどの可搬型記録媒体のドライブ装置、あるいはＨＤＤ（Hard Disk Drive）などとして実現される。

グラフィック処理回路１８は、カメラ信号処理回路１４から出力された画像データを、ディスプレイ１９に表示するための信号に変換して、ディスプレイ１９に供給する。ディスプレイ１９は、例えばＬＣＤ（Liquid Crystal Display）などからなり、グラフィック処理回路１８からの画像信号を基に画像を表示する。

システムコントローラ２０は、ＣＰＵ（Central Processing Unit）や、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）などのメモリを備えるマイクロコンピュータとして構成され、メモリに格納されたプログラムを実行することで、この撮像装置を統括的に制御する。また、このシステムコントローラ２０は、現在の日時をカウントする機能も備えている。

入力部２１は、各種の入力スイッチを備え、これらの入力スイッチに対するユーザによる操作入力に応じた制御信号を、システムコントローラ２０に出力する。
図２は、この撮像装置を背面から見たときの外観を示す図である。

図２では、上記構成の撮像装置を、ディスプレイ１９が搭載された側（例えば、光学ブロック１１の撮像レンズの取り付け面の裏側）から見たときの外観を示している。この撮像装置において、ディスプレイ１９には、撮像中の画像（モニタリング画像）や記録装置１７内の画像データに基づく再生画像などが表示される。また、このディスプレイ１９と同じ面やその側面には、撮影動作の制御や各種設定を行うための以下のような操作スイッチが設けられている。これらの操作スイッチは、図１の入力部２１を構成するものである。

シャッタキー３１は、モニタリング画像の表示中に撮像画像（静止画像）を記録させるためのボタンスイッチである。ズームキー３２，３３は、光学ブロック１１のズームレンズをそれぞれ広角側、望遠側に移動させるためのボタンスイッチである。メニューキー３４は、各種の動作制御項目や設定項目が配置されたメニュー画像をディスプレイ１９に表示させるためのボタンスイッチである。

日付切替キー３５は、画像の再生時などに、撮影された日付の情報を表示させるか否かを設定するためのボタンスイッチである。モードスイッチ３６は、記録装置１７に記録された画像の再生、静止画像撮影、動画像撮影などの動作モードを選択するためのスライド式スイッチである。

選択キー４１〜４４は、メニュー画像上の項目の選択位置（カーソル位置）を、それぞれ上方向、下方向、右方向、左方向に移動させるためのボタンスイッチである。決定キー４５は、選択キー４１〜４４によって移動された選択位置の項目を決定するためのボタンスイッチである。

ところで、上記構成の撮像装置は、撮影によって得られた原画像の上に付加情報を合成する機能を備えている。以下の説明では、このような付加情報の例として、撮影した日付を示す日付情報を挙げる。

図３は、日付情報の合成について説明するための画面表示例である。
図３（Ａ）は、日付情報が表示されていない原画像の例であり、図３（Ｂ）は、原画像の一部の領域に日付情報１０１が合成された合成画像の例を示している。既存のデジタルスチルカメラには、例えば、記録が要求されたときに、事前にユーザにより設定された設定情報に応じて、日付情報１０１を合成した合成画像、あるいは原画像のいずれか一方を記録するものがあった。また、他の例として、記録時には原画像を記録するとともに、その原画像の画像ファイルのヘッダ領域に撮影日の情報を記録しておき、後から日付情報１０１を合成できるようにしておくものもあった。

一般に、撮像装置に対する操作方法や撮影テクニックなどについて深い知識を持ち、各種の撮影設定を調整することが多いようなユーザほど、記録した画像に日付情報１０１を合成せずに、原画像の情報をそのまま残しておきたいと考える傾向がある。逆に、撮像装置の初心者や、機器の操作自体が苦手であるようなユーザの間では、記録した画像に日付情報１０１を始めから合成しておきたいという要望も根強い。特に後者の場合には、ヘッダ領域の情報を基に後から日付情報１０１を合成することが可能であっても、そのための操作方法を理解できなかったり、そのような操作自体を面倒と感じることが多く、さらに、そもそも撮影の前に日付情報１０１を合成するか否かを選択するという設定操作自体も面倒であり、デフォルトの状態から常に日付情報１０１を合成するように設定されていることを望んでいることも多い。

このようなすべての要望を満たすために、第１の実施の形態では、シャッタキー３１などにより画像記録が要求されたとき、撮影で得られた原画像と、その原画像に日付情報１０１を合成した合成画像とを、それぞれ個別のデータファイルとして記録装置１７に自動的に記録する。この場合には、撮像装置を再生モードとしたとき、記録装置１７内の画像ファイルを順次選択していくことで、上記の両方の画像を簡単に再生表示させることができる。また、これらの画像ファイルはＰＣなどでも正常に再生して画像を表示させることが可能であり、それぞれの画像を個別に印刷することもできる。すなわち、ユーザは、特別な知識がなくても、日付情報１０１が合成された画像と合成されていない画像とを容易に選択して、表示や印刷を実行させることができる。

しかし、このような第１の実施の形態では、１回の記録要求に応じて必ず画像２枚分の画像データが記録されるため、記録装置１７に記録可能な画像の枚数が半分になってしまう。また、記録時には画像２枚分の圧縮符号化処理が行われるので、記録要求のための操作入力を行ってから画像記録が完了するまでの待ち時間が長くなってしまう。そこで、次の第２の実施の形態では、日付情報１０１を含む画像と含まない画像のいずれか一方については、日付情報１０１が合成され得る領域の情報のみで構成される画像データを、記録装置１７に記録する。

図４は、第２の実施の形態において記録される画像の例を示す図である。
図４に示すように、第２の実施の形態では、撮影により得られた原画像の全領域の画像情報に基づく主画像１１０のデータと、原画像の画像領域内に設定された日付挿入領域１１１の画像情報に基づく部分画像１２０のデータとが、記録要求に応じて記録装置１７に記録される。日付挿入領域１１１は、撮影日を示す日付情報１０１を合成する際に、その日付情報１０１の全体を内包するように原画像の座標系（すなわち主画像１１０の座標系）にあらかじめ設定される領域であり、例えば、図４に破線で示すように、日付情報１０１の全体を内包するできるだけ小さい矩形領域として設定される。

そして、主画像１１０内の日付挿入領域１１１と、この領域に対応する部分画像１２０のいずれか一方に、日付情報１０１が合成された状態で記録装置１７に記録される。なお、本実施の形態では例として、図４のように主画像１１０の側に日付情報１０１が記録されるものとする。また、日付情報１０１としては日付を示す文字情報とするが、この他に、日付の文字が書き込まれた各種の画像情報であってもよい。

このように、１回の記録要求に応じて、主画像１１０と部分画像１２０の各画像データを必ず記録しておいた場合、主画像１１０内の日付挿入領域１１１のみを部分画像１２０に入れ替えることができるようになる。例えば、このような画像の入れ替えをＰＣなどで実現できる。従って、日付情報１０１が埋め込まれた画像と、日付情報１０１が埋め込まれていない元の画像の両方を確実に残しておくことができる。

しかし、本実施の形態ではさらに、主画像１１０のデータと部分画像１２０のデータとを互いに関連付けて記録しておくことで、上記のような日付挿入領域１１１における画像の入れ替えを撮像装置の内部で実行し、日付情報１０１が埋め込まれた画像とそうでない画像の両方を簡単な操作で再生表示させることができるようにする。ここではより好ましい例として、主画像１１０のデータファイルのヘッダ領域に、部分画像１２０のデータを格納しておく。

図５は、画像記録時の処理手順を示すフローチャートである。
ユーザによりシャッタキー３１が押下されて、画像の記録が要求されると、システムコントローラ２０の制御の下で、撮影により得られた１フレーム分の画像（原画像）のデータが、カメラ信号処理回路１４から画像変換処理部１５を介して画像メモリ１６に取り込まれる（ステップＳ１１）。

なお、記録時の画像サイズ（画素数）を設定可能である場合には、このステップＳ１１において、事前に設定された画像サイズ設定情報がシステムコントローラ２０からカメラ信号処理回路１４に通知され、カメラ信号処理回路１４はこの情報を基に出力画像データの画像サイズを変換する。すなわち、サイズ変換後の画像が原画像となる。

次に、画像変換処理部１５は、画像メモリ１６内の原画像のデータのうち、日付挿入領域１１１内のデータのみを読み込んで圧縮符号化し、部分画像１２０の圧縮データを生成する（ステップＳ１２）。なお、このとき生成された圧縮データは、画像メモリ１６に一旦記憶される。

次に、画像変換処理部１５は、システムコントローラ２０でカウントされている日付の情報を読み込み、この情報を基に日付情報１０１の合成位置を設定する。そして、画像メモリ１６内の原画像のデータを順次読み込みながら、日付挿入領域１１１内の合成位置に日付情報１０１を合成していき、日付情報１０１が埋め込まれた主画像１１０を圧縮符号化する（ステップＳ１３）。

なお、例えば、日付挿入領域１１１の位置が可変とされている場合には、ステップＳ１２において、事前に設定された日付挿入領域１１１の位置設定情報がシステムコントローラ２０から画像変換処理部１５に通知される。画像変換処理部１５は、この位置設定情報を基に、部分画像１２０の切り出しや、原画像への日付情報１０１の合成を行う。また、前述のように記録時の画像サイズが設定可能である場合には、画像変換処理部１５は、設定された画像サイズに応じて日付挿入領域１１１の位置や日付情報１０１の合成位置を決定する。なお、これらの日付挿入領域１１１の位置や日付情報１０１を構成する文字の位置・形状は、システムコントローラ２０から直接設定されてもよい。

次に、画像変換処理部１５は、主画像１１０の圧縮データのヘッダ領域に、ステップＳ１２で画像メモリ１６に記憶しておいた部分画像１２０の圧縮データを格納し、このように生成した画像ファイルを記録装置１７に記録する（ステップＳ１４）。

以上の処理によれば、撮像画像の記録時には日付情報１０１が合成された状態の画像を記録しておくことが可能であるので、ユーザは特に何の操作を行うことなく、撮影日付が挿入された画像を再生表示させたり、印刷することが可能となる。この点は、特に機器の操作に慣れていないユーザにとっては大きなメリットとなる。逆に、撮影日付を含まない画像を必要とするユーザにとっては、日付情報１０１が合成された領域における原画像のデータがヘッダ領域に残されているために、このデータを用いて次の図６や図７で説明する処理により原画像を確実に復元できるというメリットがある。

なお、ステップＳ１４の記録処理では、ＥＸＩＦなどの所定の規格に従った画像ファイルを記録する場合には、部分画像１２０の圧縮データをヘッダ領域内のオプション領域に記憶しておくことが望ましい。これにより、記録した画像ファイルを、ＰＣなど、この撮像装置以外の一般の機器に転送したときに、少なくとも主画像１１０の圧縮データを確実に再生して利用することができる。

図６は、記録した画像ファイルを再生する際の処理手順を示すフローチャートである。
図２に示したモードスイッチ３６への操作により再生モードが選択され、記録装置１７に記録された静止画像ファイルのいずれかが選択されて再生表示が要求されると、以下の処理が開始される。まず、画像変換処理部１５は、記録装置１７から読み出した画像ファイルから主画像１１０のデータを伸張復号化し、処理後の画像データをグラフィック処理回路１８に出力する。これにより、主画像１１０がディスプレイ１９に表示される（ステップＳ２１）。

次に、システムコントローラ２０は、ユーザにより日付情報１０１の表示をオフするための操作入力が行われたか否かを判定する（ステップＳ２２）。なお、このステップＳ２２では、例えば、日付切替キー３５の押下を検知することで、日付表示をオフすることが要求されたと判定する。また、メニュー画像を通じて日付表示をオフする要求が行われてもよい。ただし、日付切替キー３５のように、日付表示をオフするための専用のスイッチが設けられることで、ユーザの操作を簡単にすることができる。また、このステップＳ２２の判定処理は、ステップＳ２１で選択された画像ファイルが、そのヘッダ領域に部分画像１２０が格納されたものである場合のみ行われる。

日付表示をオフする要求が行われた場合、システムコントローラ２０はそのことを画像変換処理部１５に通知する。通知を受けた画像変換処理部１５は、再生中のファイルのヘッダ領域から部分画像１２０のデータを抽出して、伸張復号化する。そして、復号化された部分画像１２０を主画像１１０内の日付挿入領域１１１の画像と入れ替えた画像のデータを生成して、グラフィック処理回路１８に出力する。これにより、日付挿入領域１１１が日付情報１０１の埋め込まれていない画像に入れ替えられた画像が、ディスプレイ１９に表示される（ステップＳ２３）。さらに、画像変換処理部１５は、日付挿入領域１１１を入れ替えた画像のデータを圧縮符号化し、得られた画像データを、元の画像ファイルとは別の新たな画像ファイルとして記録装置１７に記録する（ステップＳ２４）。

なお、ステップＳ２３で日付挿入領域１１１が入れ替えられた画像が表示された後、ユーザの操作によりその画像のデータの記録が要求された場合にのみ、ステップＳ２４の記録処理が行われるようにしてもよい。例えば、ステップＳ２３での画像表示の直後に、この画像を保存するか否かをユーザに問う文字情報を画面上に合成表示し、決定キー４５の押下などにより保存が要求された場合に、ステップＳ２４の記録処理を行う。

ステップＳ２４で新たな画像ファイルが記録された後、および、ステップＳ２２で日付表示をオフするための操作入力が行われなかった場合、システムコントローラ２０は、ユーザの入力操作により次の画像ファイルが選択されて、その画像ファイルに対する表示要求が行われたか否かを判定する（ステップＳ２５）。表示要求が行われた場合、ステップＳ２１に戻って、表示要求が行われた画像ファイルの再生処理が行われる。

一方、ステップＳ２５で次の画像ファイルに対する表示要求が行われなかった場合、システムコントローラ２０は、ユーザの入力操作などにより再生モードの終了（あるいは撮像装置の動作終了など）が要求されたか否かを判定し（ステップＳ２６）、要求された場合には再生モードの処理を終了する。一方、要求されなかった場合には、ステップＳ２２に戻って、日付表示をオフする要求の有無が判定される。

以上の図６の処理によれば、図５の処理により記録された画像ファイルをユーザが選択することで、日付情報１０１が合成された画像が再生表示され、この状態から日付切替キー３５を押下するといった簡単な操作を行うことで、日付情報１０１を取り除いた原画像を表示させることができる。さらにこのとき、表示された原画像のデータを記録装置１７に自動的に記録させることもでき、その場合には、簡単な操作で日付情報１０１を取り除いた原画像のデータを記録させることも可能となる。

なお、以上の説明では、撮像画像の記録時には日付情報１０１が合成された画像を主画像１１０とした画像ファイルを記録するようにしたが、逆に、日付情報１０１が合成されていない原画像を主画像１１０としてもよい。この場合ユーザは、撮影日付が挿入された画像が必要となったときに、簡単な操作でそのような画像を表示させ、新たな画像ファイルとして得ることができる。

また、撮像画像の記録時に、主画像１１０を、日付情報１０１が合成された画像とするか、あるいは合成されていない画像とするかを、ユーザによる事前の操作により任意に設定できるようにしてもよい。さらに、次の図７で説明するように、日付挿入領域１１１が入れ替えられた場合に、その画像を新たなファイルとして記録するのではなく、元のファイルに上書きして記録するようにしてもよい。

図７は、第３の実施の形態における再生表示時の処理手順を示すフローチャートである。
再生モードが選択され、記録装置１７に記録された静止画像ファイルのいずれかが選択されて再生表示が要求されると、図６のステップＳ２１と同様の手順で、要求された画像ファイルの伸張復号化が行われて、主画像１１０がディスプレイ１９に表示される（ステップＳ３１）。

次に、システムコントローラ２０は、ユーザにより撮影日付の表示切り替え要求のための操作入力が行われたか否かを判定する（ステップＳ３２）。この判定は、図６のステップＳ２２と同様に、例えば、日付切替キー３５の押下が検知されることや、メニュー画像を通じた表示切り替えの要求操作が検知されることで行われる。

撮影日付の表示切り替えが要求された場合、システムコントローラ２０はそのことを画像変換処理部１５に通知する。通知を受けた画像変換処理部１５は、再生中のファイルのヘッダ領域から部分画像１２０のデータを抽出して伸張復号化し、復号化された部分画像１２０を主画像１１０内の日付挿入領域１１１の画像と入れ替えた画像のデータを生成する。そして、そのデータがグラフィック処理回路１８に出力されることで、日付挿入領域１１１が入れ替えられた画像がディスプレイ１９に表示される（ステップＳ３３）。

なお、このとき画像変換処理部１５は、部分画像１２０と入れ替える前の、主画像１１０における日付挿入領域１１１の画像を切り出し、その画像データを画像メモリ１６に一時的に記憶しておく。また、新たに生成した主画像１１０のデータも画像メモリ１６に記憶しておく。

この状態で、システムコントローラ２０は、ユーザの操作により、日付挿入領域１１１が入れ替えられた状態の画像ファイルの記録が要求されたか否かを判定する（ステップＳ３４）。ここでは例えば、ステップＳ３３での画像表示の直後に、この画像を保存するか否かをユーザに問う文字情報を画面上に合成表示し、決定キー４５の押下などを検知することで、記録が要求されたことを判定することができる。

画像の記録が要求された場合、システムコントローラ２０はそのことを画像変換処理部１５に通知する。通知を受けた画像変換処理部１５は、ステップＳ３３で新たに生成して画像メモリ１６に記憶しておいた主画像１１０のデータを圧縮符号化する。さらに、ステップＳ３３において元の主画像１１０の日付挿入領域１１１から切り出し、画像メモリ１６に記憶しておいた画像のデータを圧縮符号化する。そして、その画像データを新たな主画像１１０の画像データのヘッダ領域に格納して、部分画像１２０のデータを入れ替える（ステップＳ３５）。画像変換処理部１５は、このようにして生成された画像データを元の画像ファイルに上書きして記録する（ステップＳ３６）。

なお、ステップＳ３５では、圧縮符号化処理の手法によっては、新たな主画像１１０および部分画像１２０の各データについてあらためて圧縮符号化処理を行わず、元の圧縮データ上でそれぞれの日付挿入領域１１１の画像データのみを入れ替えることで、新たな画像ファイルを生成してもよい。

また、ステップＳ３３での表示処理後、ステップＳ３４のようにさらなる操作入力を受け付けることなく、ステップＳ３５，Ｓ３６の処理を実行するようにしてもよい。
ステップＳ３６で画像ファイルの上書きが行われた後、および、ステップＳ３２，Ｓ３４でそれぞれ表示切り替え要求、画像記録要求が要求されなかった場合には、システムコントローラ２０は、ユーザの入力操作により次の画像ファイルが選択されて、その画像ファイルに対する表示要求が行われたか否かを判定する（ステップＳ３７）。表示要求が行われた場合、ステップＳ３１に戻って、表示要求が行われた画像ファイルの再生処理が行われる。

一方、ステップＳ３７で次の画像ファイルに対する表示要求が行われなかった場合、システムコントローラ２０は、ユーザの入力操作などにより再生モードの終了（あるいは撮像装置の動作終了など）が要求されたか否かを判定し（ステップＳ３８）、要求された場合には再生モードの処理を終了する。一方、要求されなかった場合には、ステップＳ３２に戻って、表示切り替え要求の有無が判定される。

以上の図７の処理によれば、部分画像１２０のデータがヘッダ領域に格納された画像ファイルをユーザが選択して、その画像が再生表示された後、日付切替キー３５を押下するといった簡単な操作を行うことで、日付挿入領域１１１の画像をその時点の部分画像１２０に入れ替えた画像を表示させることができる。さらに、記録要求を行うことで、あるいは自動的に、日付挿入領域１１１の画像と部分画像１２０とを入れ替えた状態で元の画像ファイルを更新することができる。従って、このような簡単な操作によって、記録画像における撮影日付の表示状態を簡単に切り替えることができ、切り替え後の画像ファイルを用いて印刷などを行うことができるようになる。

なお、以上の第２，第３の実施の形態では、撮像画像を記録する際に、ヘッダ領域に格納する部分画像１２０のデータを圧縮符号化していたが、この部分画像１２０については圧縮しない状態でヘッダ領域に格納してもよい。あるいは、主画像１１０よりも圧縮率を低くして圧縮符号化してもよく、あるいは、部分画像１２０のみ可逆圧縮を行って符号化してもよい。これらの場合、画像ファイルのデータサイズが大きくなってしまうものの、再生モードで日付挿入領域１１１の画像を入れ替える場合の処理時間を短縮することができる。

また、図４に示したように、日付挿入領域１１１は日付情報１０１を構成する文字情報のすべてを包含しうる最小限の大きさを持てばよい。しかし、日付挿入領域１１１の取り方はこれに限ったことでなく、例えば、この日付挿入領域１１１における画像の切り出しや合成処理のための処理シーケンスや回路構成、使用可能なメモリ容量などに応じて適宜設定することができる。例えば、図４に示した日付挿入領域１１１の左上の画素から右側および下側の全領域を、日付挿入領域とすることができる。あるいは、図４に示した日付挿入領域１１１の上端と下端との間の全ライン領域、もしくは上端より下側の全ライン領域を、日付挿入領域とすることもできる。

また、画像全体を複数のブロックごとに圧縮符号化する手法を採る場合には、日付挿入領域をブロック単位で設定することが望ましい。さらに、圧縮処理時に隣接するブロック間の境界領域でフィルタ処理を行うことで、境界付近の画像のつながりを自然にするような圧縮符号化手法を採る場合には、日付挿入領域を、日付情報１０１を構成する文字情報がすべて包含される最小限の領域より所定画素数分だけ周囲に大きく設定すればよい。

また、上記の各実施の形態では、画像に合成する付加情報の例として撮影日付の情報を適用したが、付加情報としては他に、露出量、シャッタ速度などの撮像時の条件情報、撮像画像に含まれる被写体の情報（例えば、あらかじめ登録された人物のうち、撮像画像から検出された人物の識別情報など）などを適用することもできる。

また、以上の実施の形態では、本発明をデジタルスチルカメラなどの撮像専用の装置に適用した場合について説明したが、同様な静止画像の撮像機能を備えた携帯電話機、携帯端末などの各種の電子機器に、本発明を適用することも可能である。

実施の形態に係る撮像装置の要部構成を示すブロック図である。 撮像装置を背面から見たときの外観を示す図である。 日付情報の合成について説明するための画面表示例である。 第２の実施の形態において記録される画像の例を示す図である。 画像記録時の処理手順を示すフローチャートである。 記録した画像ファイルを再生する際の処理手順を示すフローチャートである。 第３の実施の形態における再生表示時の処理手順を示すフローチャートである。

符号の説明

１１……光学ブロック、１１ａ……ドライバ、１２……撮像素子、１２ａ……タイミングジェネレータ（ＴＧ）、１３……前処理回路、１４……カメラ信号処理回路、１５……画像変換処理部、１６……画像メモリ、１７……記録装置、１８……グラフィック処理回路、１９……ディスプレイ、２０……システムコントローラ、２１……入力部、３１……シャッタキー、３２，３３……ズームキー、３４……メニューキー、３５……日付切替キー、３６……モードスイッチ、４１〜４４……選択キー、４５……決定キー、１０１……日付情報、１１０……主画像、１１１……日付挿入領域、１２０……部分画像

Claims (12)

1. 固体撮像素子を用いて画像を撮像する撮像装置において、
   記録する画像に対して合成する付加情報を生成する付加情報生成部と、
   撮像されている画像の記録要求を検知すると、前記固体撮像素子から得られた原画像の全領域の画像情報に基づく主画像と、前記原画像の少なくとも一部の領域の画像情報に基づく副画像とを生成し、前記主画像と前記副画像のいずれか一方に、前記付加情報生成部により生成された前記付加情報を合成して、前記主画像および前記副画像の各画像データを記録装置に記録する記録処理部と、
   を有することを特徴とする撮像装置。
2. 前記記録処理部は、前記副画像として、前記原画像の一部の領域を切り出した部分画像を生成することを特徴とする請求項１記載の撮像装置。
3. 前記記録処理部は、前記主画像のデータに対して前記部分画像のデータを関連付けて記録することを特徴とする請求項２記載の撮像装置。
4. 前記記録装置内の前記主画像のデータを再生した後、その状態で画像入れ替え要求のための操作入力を検知すると、当該主画像のデータに関連付けられた前記部分画像のデータを前記記録装置から読み込み、当該主画像内の当該部分画像に対応する領域の画像情報を当該部分画像の画像情報と入れ替えた入れ替え画像を生成して再生する再生処理部をさらに有することを特徴とする請求項３記載の撮像装置。
5. 前記再生処理部は、生成した前記入れ替え画像のデータを、元の前記主画像のデータとは別のデータファイルとして前記記録装置に記録することを特徴とする請求項４記載の撮像装置。
6. 前記再生処理部は、前記画像入れ替え要求のための操作入力を検知すると、前記入れ替え画像を生成して再生するとともに、当該入れ替え画像のデータを自動的に前記記録装置に記録することを特徴とする請求項５記載の撮像装置。
7. 前記記録処理部は、前記部分画像のデータを対応する前記主画像のデータのヘッダ領域に格納し、
   前記再生処理部は、前記画像入れ替え要求のための操作入力に応じて前記入れ替え画像を生成した後、当該入れ替え画像の生成時に前記部分画像と入れ替えられた被入れ替え画像を、新たな前記部分画像として当該入れ替え画像のデータのヘッダ領域に格納し、当該入れ替え画像のデータを元の前記主画像のデータに上書きして記録することを特徴とする請求項４記載の撮像装置。
8. 前記再生処理部は、前記画像入れ替え要求のための操作入力を検知すると、前記入れ替え画像を生成して再生するとともに、前記被入れ替え画像を新たな前記部分画像として当該入れ替え画像のデータのヘッダ領域に格納して当該入れ替え画像のデータを元の前記主画像のデータに上書き記録する処理を、自動的に実行することを特徴とする請求項７記載の撮像装置。
9. 前記記録処理部は、前記記録要求に応じて、前記主画像における前記部分画像に対応する領域に前記付加情報を合成することを特徴とする請求項４記載の撮像装置。
10. 前記記録処理部は、前記部分画像のデータを対応する前記主画像のデータのヘッダ領域に格納することを特徴とする請求項３記載の撮像装置。
11. 前記付加情報生成部は、前記付加情報として、前記記録要求が検知された時点の日付情報を生成することを特徴とする請求項１記載の撮像装置。
12. 固体撮像素子を用いて画像を撮像するための撮像方法において、
    撮像されている画像の記録要求を検知すると、付加情報生成部が、記録する画像に対して合成する付加情報を生成し、
    前記記録要求の検知に応じて、記録処理部が、前記固体撮像素子から得られた原画像の全領域の画像情報に基づく主画像と、前記原画像の少なくとも一部の領域の画像情報に基づく副画像とを生成し、前記主画像と前記副画像のいずれか一方に、前記付加情報生成部により生成された前記付加情報を合成して、前記主画像および前記副画像の各画像データを記録装置に記録する、
    ことを特徴とする撮像方法。

Images