JPH11187307A

JPH11187307A - 撮像装置及び撮像方法

Info

Publication number: JPH11187307A
Application number: JP9348302A
Authority: JP
Inventors: Yasuhiko Shiomi; 泰彦塩見
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 1997-12-17
Filing date: 1997-12-17
Publication date: 1999-07-09

Abstract

(57)【要約】【課題】画像の撮影方法及び撮影された画像データの
保存方法を適切に設定することは、ユーザにとって煩雑
な作業であった。【解決手段】Ｓ１０７において、ユーザによって予め
設定された撮影モードが「スポーツモード」であれば、
Ｓ１０９の「撮影・記憶モード１」においてノーマル撮
影、可逆圧縮を行い、「ポートレートモード」であれば
Ｓ１１１の「撮影・記憶モード２」において高詳細撮
影、非可逆圧縮を行なう。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は撮像装置及び撮像方
法に関し、特に、撮影画像を電気信号として装置内に保
存する撮像装置及び撮像方法に関する。

【０００２】

【従来の技術】近年の画像処理技術の発達に伴い、該技
術を適用したデジタルスチルカメラ等の撮像装置の発達
も目覚ましいものがある。

【０００３】ここで、従来のデジタルスチルカメラの構
成を図１８に示し、その動作について簡単に説明する。

【０００４】同図において、９１はカメラ操作スイッチ
であり、カメラのメインスイッチ及びレリーズスイッチ
等で構成されている。カメラ操作スイッチ９１はユーザ
によって操作されるが、その状態変化を全体制御部８０
が検出し、その他の各構成ブロックヘの電源供給を開始
する。

【０００５】撮影画面範囲内の被写体像は、主撮影光学
系８１を通して撮像部８２上に結像し、撮像部８２から
の電気信号を各画素毎に順次Ａ／Ｄ変換部８３を介して
所定のデジタル信号に変換した後、プロセス処理部８４
へ入力する。プロセス処理部８４では、撮像部８２から
の各画素データに基いてＲＧＢの各色信号を生成する。
通常撮影前の状態では、この色信号をメモリ制御手段８
５を介してビデオメモリ８９に定期的（各フレーム毎）
に転送する事で、モニタ表示部９０を介したファインダ
表示等を行っている。

【０００６】また、ユーザがカメラ操作スイッチ９１を
操作することにより撮影動作を行った場合には、全体制
御部８０からの制御信号によって、プロセス処理部８４
からの１フレーム分の各画素データをフレームメモリ８
６に記憶し、続いてフレームメモリ８６内のデータを、
メモリ制御部８５及び作業用のワークメモリ８７によっ
て所定の圧縮フォーマットに基づいてデータ圧縮し、そ
の結果を、例えばフラッシュメモリ等の不揮発性メモリ
によって構成される外部メモリ８８に記憶する。尚、近
年の撮像装置開発技術の発達により、上記通常の撮影の
みならず、より詳細な画像データを得ることが選択的に
可能なカメラも登場しているが、この高詳細な画像デー
タについても、上記と同様に所定フォーマットにより圧
縮され、外部メモリ８８に記憶される。

【０００７】又、ユーザが既に撮影済みの画像データを
観察する場合には、上記外部メモリ８８に圧縮記憶され
たデータを、メモリ制御部８５において通常の撮影画素
毎のデータに伸張し、その結果をビデオメモリ８９へ転
送する事で、モニタ表示手段９０を介して該画像を観察
することが出来る。

【０００８】この様に、従来のデジタルスチルカメラに
おいては、撮影後の画像データをメモリ等へ記憶する
際、その撮影条件や撮影シーンに拘らず、予め定められ
た特定の圧縮形式や圧縮率によって画像データを記憶す
るか、若しくは、ユーザ自身によって設定された圧縮方
法及び圧縮率によって、画像データの圧縮が行われてい
た。

【０００９】

【発明が解決しようとする課題】しかしながら上記従来
のデジタルスチルカメラにおいては、撮影された画像デ
ータの保存は、撮影画像の内容に拘らずカメラ側で一律
に行われるため、必ずしも最適な状態（圧縮形態）で保
存されるとは限らない。これは、上記高詳細な画像デー
タを得るような撮影を行なった場合、即ち、画像データ
量がより大量となった場合でも同様である。

【００１０】又、ユーザ自身が撮影画像の保存方法を事
前に設定できる場合でも、撮影の度毎に、画像の圧縮方
法を撮影画像に応じて適切に設定することは非常に繁雑
な作業である。従って、特に緊急に撮影動作を行なうこ
とが困難となり、所謂シャッターチャンスを逃がしてし
まうことになる。また、この撮影画像の保存方法の設定
を、画像の撮影方法を設定することと同時に行なう場
合、特に熟達したユーザでない限り、更に困難な作業と
なる。

【００１１】本発明は上記問題点、即ち、画像の撮影方
法及び撮影された画像データの保存方法設定の煩雑さを
解消する為になされたものであり、本発明の第１の目的
は、撮影モードに応じて、撮影方法及び画像データの保
存方法を変更する撮像装置及び撮像方法を提供すること
である。

【００１２】また、第２の目的は、撮影時の装置状態に
応じて、撮影方法及び画像データの保存方法を変更する
撮像装置及び撮像方法を提案することである。

【００１３】また、第３の目的は、メモリ等へのデータ
保存状況に応じて、撮影方法及び画像データの保存方法
を変更する撮像装置及び撮像方法を提案することであ
る。

【００１４】

【課題を解決するための手段】上記目的を達成するため
の一手段として、本発明の撮像装置は以下の構成を備え
る。

【００１５】即ち、被写体像を結像し、光電変換により
画像信号を生成する撮像手段と、該撮像手段上に結像す
る被写体像の位置を所定量平行移動させる画素ずらし手
段と、該画素ずらし手段による複数回の移動毎に前記撮
像手段において得られた複数画面の画像データを合成す
る合成手段と、該合成手段により合成された画像データ
を所定形式に変換する形式変換手段と、該形式変換手段
により所定形式に変換された画像データを保持する保持
手段と、撮像装置の撮影モードを設定する設定手段と、
前記撮影モードに応じて、前記画像合成手段による画像
合成を制御する制御手段と、を有することを特徴とす
る。

【００１６】例えば、前記制御手段は、前記撮影モード
に応じて、前記画像合成手段における画像合成を行なう
か否かを制御することを特徴とする。

【００１７】更に、前記制御手段は、前記撮影モードに
応じて前記形式変換手段における変換方法を制御するこ
とを特徴とする。

【００１８】例えば、前記形式変換手段は、画像データ
を圧縮することを特徴とする。

【００１９】例えば、前記制御手段は、前記撮影モード
が第１のモードであった場合に前記画像合成手段におけ
る画像合成を行なわないように制御し、前記撮影モード
が第２のモードであった場合に前記画像合成手段におけ
る画像合成を行ない、前記形式変換手段において前記第
１のモード時よりも高い圧縮率による圧縮を行なうよう
に制御することを特徴とする。

【００２０】また、被写体像を結像し、光電変換により
画像信号を生成する撮像手段と、該撮像手段上に結像す
る被写体像の位置を所定量平行移動させる画素ずらし手
段と、該画素ずらし手段による複数回の移動毎に前記撮
像手段において得られた複数画面の画像データを合成す
る合成手段と、該合成手段により合成された画像データ
を所定形式に変換する形式変換手段と、該形式変換手段
により所定形式に変換された画像データを保持する保持
手段と、撮像装置の撮影時状態を検出する検出手段と、
前記撮影時状態に応じて、前記画像合成手段による画像
合成を制御する制御手段と、を有することを特徴とす
る。

【００２１】また、被写体像を結像し、光電変換により
画像信号を生成する撮像手段と、該撮像手段上に結像す
る被写体像の位置を所定量平行移動させる画素ずらし手
段と、該画素ずらし手段による複数回の移動毎に前記撮
像手段において得られた複数画面の画像データを合成す
る合成手段と、該合成手段により合成された画像データ
を所定形式に変換する形式変換手段と、該形式変換手段
により所定形式に変換された画像データを保持する保持
手段と、前記保持手段における画像データの保持状況に
応じて、前記画像合成手段による画像合成を制御する制
御手段と、を有することを特徴とする。

【００２２】

【発明の実施の形態】以下、本発明に係る一実施形態に
ついて、図面を参照して詳細に説明する。

【００２３】＜第１実施形態＞図１に、本実施形態にお
けるデジタルスチルカメラ（以下、単にカメラと称す
る）の全体構成を示すブロック図である。同図に於い
て、１はカメラ全体の制御を司るＣＰＵを含んだ全体制
御部である。２はカメラ自身の撮影モードを設定する為
の撮影モード設定部であり、ユーザによって、例えば動
体の撮影に最適な「スポーツモード」や、静止物の撮影
に最適な「ポートレートモード」等の設定を可能とする
スイッチ等により構成されている。１８はカメラの撮影
開始を指示するカメラ操作スイッチであり、メインスイ
ッチ及びレリーズスイッチ等を備える。

【００２４】３はカメラの主撮影光学系、４は後述する
様に撮像部６上に結像する被写体像を、空間的に平行に
ずらす為の光学手段である。この光学手段４としては、
特開平３−１８６８２３に示される様な、いわゆるシフ
ト補正光学系を使用している。通常、このシフト補正光
学系はカメラ全体の手ブレ防止機構において使用される
ものである。また、１７はブレセンサであり、通常、振
動ジャイロと呼ばれる角速度センサを２個使用し、異な
る２軸周りの角度ブレを別々に検出することにより、カ
メラ全体のブレ量を検出する。本実施形態のカメラにお
いては、全体制御部１においてブレセンサ１７の出力を
シフト補正光学系４を駆動するためのデータに変換し、
レンズ駆動部５を介してシフト補正光学系４内のレンズ
を動かすことにより、手持ち動作であっても被写体像が
ぶれずに常に所定の結像面で安定させることができる。

【００２５】撮像部６上に結像した被写体像信号は、モ
ニタ表示部１６において表示されるまでの各構成におい
て、全体制御部１の制御に基づいて以下に示す一連の映
像信号処理が施され、所定のデジタルデータに変換され
る。

【００２６】まず、ＣＣＤ等により構成される撮像部６
で所定時間にわたって蓄積された電荷（被写体像に対
応）を各画素毎に順次読み出すと同時に、Ａ／Ｄ変換部
７で該電荷量に相当する被写体輝度情報をデジタルデー
タに変換する。尚、撮像部６上にはＲＧＢ等の各色信号
等を生成するための光学色フィルタが貼り付けてある。
従って、撮像部６からの出力信号はＲＧＢ各色を交互に
示す信号となる。

【００２７】Ａ／Ｄ変換部７からの出力値は、実際の撮
影前の段階では、まずプロセス処理回路８へ入力されて
ダークレベル補正やγ変換等を行った後に、画像合成部
９へ入力される。

【００２８】ここで、画像合成部９における画像処理に
ついて、図２を参照して説明する。

【００２９】画像合成部９では図２に示す様な光学的フ
ィルタの配列に対して、グリーン（Ｇ）、及びレッド
（Ｒ）／ブルー（Ｂ）それぞれ異なる補間フィルタを使
用して、各画素毎のＲＧＢデータを合成している。ここ
で、この光学的フィルタの配列は一般的なベイヤー配列
であり、Ｇが市松、Ｒ／Ｂが線順次の、それぞれ異なる
配列となっている。一般に、撮像部６を構成する撮像素
子が単板であった場合、該撮像素子では例えば図２の左
側に示されるような配列となる。従って、該撮像素子か
ら入力された画像データの全ての画素に、ＲＧＢの全て
の色情報があるわけではないため、画像合成部９では図
２の中央に示した様な３×３のマトリクス行列を使用し
た補間フィルタ演算により、撮像素子上の全画素ポイン
トにおけるＲＧＢ色情報を作成する。

【００３０】ここで、図２の左側に示す撮像素子の画素
配列において、画素ａにおけるＧデータを作り出す場合
について説明する。この場合、画素ａとその周辺８画素
の各輝度データに、Ｇの補間フィルタの各係数をそれぞ
れ掛け合わせることにより、画素ａにおけるＧデータ値
を求める事が出来る。同図においては、画素ａの位置の
Ｇ出力に対する係数は「１」で、その上下左右は「０．
２５」、斜め方向は「０」である。従ってこの場合は、
実質的にはこの画素ａの位置の出力値のみでＧデータは
決定される。

【００３１】一方、画素ｂにおけるＧデータを作り出す
場合、同様に画素ｂ及びその周辺８画素の各輝度データ
に、Ｇの補間フィルタの係数をそれぞれ掛け合わせて求
める。この場合、画素ｂにおけるＧ出力は「０」である
ため、上下左右４画素のＧ出力の平均により、画素ｂに
おけるＧデータが決定される。

【００３２】Ｒ／Ｂの補間フィルタについても同様に
（但し、補間フィルタの形式は図示した様に異なってい
る）、全画素ポイントに対するＲ／Ｂデータを決定す
る。この様にして、最終的には図２の右側に示した様に
全画素ポイントに対するＲＧＢ各色毎の出力データを生
成する事が出来る。

【００３３】以上説明した様にして画像合成部９におい
て算出されたＲＧＢの各データは各フレーム毎にビデオ
メモリ１５に転送され、モニタ表示部１６によって撮影
画面のファインダ表示が行われる。

【００３４】以上が撮影前の画像処理である。次に、実
際の撮影時の画像処理について説明する。

【００３５】実際の撮影時には、プロセス処理回路８か
らの各出力値を、まずフレームメモリ１〜Ｎを有するフ
レームメモリ部１１へ直接転送し、全画面データを一旦
記憶する。次いで、画像合成部９においてこのフレーム
メモリ部１１の内容を上述した方法により合成し、出力
された各画素毎のＲＧＢデータをワークメモリ１３へ転
送する。更に、メモリ制御部１０においては、ワークメ
モリ１３の内容を所定の圧縮フォーマットに基いて圧縮
し、その結果をフラッシュメモリ等の不揮発性メモリに
より構成される外部メモリ１４に保存する。

【００３６】次に、既に撮影済みの画像をユーザが観察
する場合について説明する。外部メモリ１４に保存して
ある画像データを一旦メモリ制御部１０へ転送し、ここ
で所定の圧縮フォーマットに対応する伸張処理を行って
から、その結果をワークメモリ１３へ転送する。更にワ
ークメモリ１３上のデータを、画像合成部９を介してビ
デオメモリ１５ヘ転送する。これにより、モニタ表示部
１６を介して、既に撮影済みの画像をファインダ等へ表
示することができる。

【００３７】次に、本実施形態のカメラにおける撮影シ
ーケンスについて、図３のフローチャートを参照して簡
単に説明する。尚、以下の撮影シーケンスは、全体制御
部１によって制御されている。

【００３８】まず最初のステップＳ１００において、カ
メラ操作スイッチ１８内のメインスイッチ（メインＳ
Ｗ）が「オン」であるか否かの判定を行う。ユーザの操
作によりメインＳＷがオンになった場合には、直ちにス
テップＳ１０１へ進んで、図１に示したカメラの構成全
体への電源供給を行う。続いて、ステップＳ１０２でブ
レセンサ１７を起動することによりカメラ全体のユーザ
による手ブレ量の検出を開始する。そしてステップＳ１
０３で上述した様にレンズ駆動部５を介してシフト補正
光学系４を駆動する事で、実際のブレ補正を開始する。

【００３９】次にステップＳ１０４では、上述した様に
撮像部６からの信号をＡ／Ｄ変換部７、プロセス処理部
８、及び画像合成部９を介してビデオ信号に変換し、ス
テップＳ１０５で該ビデオ信号に対するモニタ表示を開
始する。従って、このステップＳ１０４、Ｓ１０５以降
は、各フレーム毎に上記映像信号処理動作を繰り返す事
になる。上記動作の後、ステップＳ１０６ではユーザに
よるレリーズ操作が行われたか否かを判定する為に、カ
メラ操作スイッチ１８内のレリーズスイッチ（レリーズ
ＳＷ）が「オン」であるか否かを検出し、オンであれば
直ちに撮影動作を開始する。

【００４０】本実施形態において実際の撮影動作を開始
する場合、まずステップＳ１０７に於いてカメラの撮影
モードの設定を判定する。本実施形態のカメラにおいて
は、撮影モード設定部２より、主として動いている被写
体等を投影する為のいわゆる「スポーツモード」か、又
は、主として止まっている被写体等を撮影する為のいわ
ゆる「ポートレートモード」がユーザにより設定され
る。ステップＳ１０７において「スポーツモード」が設
定されている場合にはステップＳ１０８へ進んで、実際
の撮影を行なう際のモードとして通常の「ノーマル撮影
モード」を設定する。そしてステップＳ１０９において
「撮影・記憶モード１」による実際の撮影及び該撮影デ
ータのフレームメモリ部１１への記憶を行なう。この
「撮影・記憶モード１」の動作については後述する。

【００４１】一方、ステップＳ１０７で「ポートレート
モード」が設定されている場合にはステップＳ１１０へ
進んで、実際の撮影を行なう際のモードとして「画素ず
らし撮影モード」を設定する。そしてステップＳ１１１
において「撮影・記憶モード２」による実際の撮影及び
該撮影データのフレームメモリ部１１への記憶を行な
う。この「撮影・記憶モード２」の動作については後述
する。

【００４２】以上のようにして、撮影データがいずれか
のモードによりフレームメモリ部１１に記憶された後、
ステップＳ１１２においてレリーズＳＷがオフであるか
否かの判定を行う。レリーズＳＷがオンのままなら処理
はこのままステップＳ１１２にとどまり、オフが検出さ
れるとステップＳ１００へ戻る。

【００４３】以上のように本実施形態においては、ユー
ザによって設定される「スポーツモード」や「ポートレ
ートモード」等の撮影モード設定に応じて、自動的に実
際の撮影を「ノーマル撮影」又は「画素ずらし撮影」の
いずれかに切り替えると共に、フレームメモリ部１１ヘ
の保存方法（圧縮方法）を切り替える。

【００４４】以下、上記「撮影・記憶モード１」及び
「撮影・記憶モード２」のそれぞれの動作について、詳
細に説明する。

【００４５】まず「スポーツモード」が設定された場合
の「撮影・記憶モード１」の動作について、図４のフロ
ーチャートを参照して説明する。

【００４６】プロセス処理部８からの出力は、フレーム
メモリ部１１内の複数のフレームメモリのいずれかに一
時的に記憶される。そこでまずステップＳ２００におい
て、フレームメモリを選択する為のパラメータＫに１を
セットすることにより、即ちフレームメモリ１を指定す
る。次にステップＳ２０１では、撮像部６での像データ
の蓄積動作が完了したか否かの判定を行って、蓄積が完
了する迄待機する。ここで、撮像部６が通常のＣＣＤ等
で構成されていた場合、所定時間の蓄積動作が完了する
と、その光電変換動作によって発生した電荷は直ちに転
送部へ転送されるため、その発生電荷を順次読み出して
いる最中であっても、次の電荷蓄積動作は行われている
ものとする。

【００４７】次にステップＳ２０２において、プロセス
処理部８において上述したように各画素データ毎のプロ
セス処理が行われ、その結果を順次フレームメモリＫ
（この場合フレームメモリ１）内に記憶していく。そし
てステップＳ２０３で１フレーム内の全ての画素データ
がフレームメモリＫに記憶された事を検出した時点で、
次のステップＳ２０４へ進む。

【００４８】ステップＳ２０４では、このフレームメモ
リＫの内容をまず画像合成部９へ転送し、ここで上述し
た様な補間処理により各画素毎のＲＧＢデータを生成
し、ステップＳ２０５にて該ＲＧＢデータを一旦ワーク
メモリ１３に転送する。この動作を１フレーム分連続し
て行い、ステップＳ２０６にて１フレーム分の処理が完
了した事を検出すると、ステップＳ２０７へ進む。

【００４９】ステップＳ２０７〜Ｓ２１１においては、
実際の撮影画像の圧縮及びデータ保存が行われる。まず
ステップＳ２０７では、メモリ制御部１０に対して実際
の画像を圧縮する方法として可逆圧縮の実行を設定す
る。この可逆圧縮のタイプとしては、静止画の圧縮の規
格を定めているＪＰＥＧ形式であるところのＤＰＣＭ
（Differential PCM）方式等を使用する。このＤＰＣＭ
方式は、画像データに含まれる画素の内、隣り合う画素
同士の差分のみを伝送符号化するという考えに基づいて
おり、この方法に依れば、原画像に対する圧縮率（作成
された画像サイズ／原画像サイズ×１００）は５０％程
度迄にしかならないが、どのような被写体の撮影データ
であっても完全に元の画像を復元出来る。従って、原画
像をこれ以上劣化させたくない場合等に利用するのに向
いている。

【００５０】ここで、ＤＰＣＭ方式による圧縮の具体例
を図６に示し、説明する。ここで原画像の輝度信号（若
しくはＲＧＢ各色信号毎）の２次元配列が図６の上側に
示す様になっているとした場合、原画像の配列をまず図
６の下側に示す様に、１次元の配列に変換する。この変
換は、図示されるように原画像の画素を左上から順に右
ヘサーチし、一番右端へ達したら今度はその真下の画素
データから左へ向かってサーチする。この様に原画像の
各画素データを順次１次元配列に変換し、次にこの１次
元上で１個前の画素データとの差分を取って符号化する
ことにより、圧縮を実現する。

【００５１】従って、図４のステップＳ２０８では上記
ＤＰＣＭ方式等の可逆圧縮を原画像のブロック毎に実行
し、ステップＳ２０９では圧縮された画像データをハフ
マン符号化等を利用して実際の圧縮符号データに変換す
る。尚、上記可逆圧縮は必ずしもブロック単位で行なわ
なくてもよい。ここでハフマン符号化とは、発生確率の
高い符号に短い符号長を、発生確率の低い符号に長い符
号長を割り当てることにより符号化効率を高めた符号化
方法である。次にステップＳ２１０において、符号化さ
れた画像データを順次外部メモリ１４に記憶していき、
ステップＳ２１１で全画像（全ブロック）の圧縮及び外
部メモリヘの保存が完了した事を検出して、「撮影・記
憶モード１」の処理を終了する。

【００５２】次に、「ポートレートモード」が設定され
た場合の「撮影・記憶モード２」の動作について説明す
る。

【００５３】まず、図７を参照して本実施形態における
画素ずらし撮影について説明する。図７において、上側
の図はオリジナル画像のＲＧＢ各配列を模式的に表した
ものであり、前述したベイヤー配列となっている。この
オリジナル画像のデータを次の１フレーム期間中に、図
１に示す補正光学部４を図中Ｘ方向に所定量偏心させる
事で、図７の下側左端の図に示すような、オリジナル画
像に対して水平方向に１画素ピッチ分だけずれた画像デ
ータを得る事が出来る。これを一回ずらしと称する。こ
の１回ずらしによって、原理的には各色毎に対して水平
方向の画像の空間周波数を２倍に向上する事が可能であ
る。

【００５４】次に、上記１回ずらし状態のまま、今度は
補正光学部４を図中Ｘ方向及びＹ方向に所定量偏心させ
る事で、図７の下側中央の図に示したような、オリジナ
ル画像に対して斜め方向に半画素ピッチ分ずれた画像デ
ータを得る事が出来る。これを２回ずらしと称する。更
に、２回ずらし状態のまま、補正光学部４を再びＸ方向
のみ偏心させる事で、図７の下側右端の図に示したよう
な、オリジナル画像に対して斜め方向に半画素ピッチ分
だけずれた画像データを得る事が出来る。これを３回ず
らしと称する。

【００５５】このように、オリジナル画像に対して各フ
レーム毎に所定画素ピッチずつずらしていき、オリジナ
ル、１回ずらし、２回ずらし、３回ずらしの計４枚の撮
影画像データを合成して組み合わせる事により、水平・
垂直方向共に画像の空間周波数を約２倍近く迄向上させ
る事が可能となる。

【００５６】次に、この画素ずらし撮影を行なう「撮影
・記憶モード２」の動作について、図５のフローチャー
トを参照して説明する。

【００５７】まずステップＳ２５０において、プロセス
処理部８からの出力を記憶するフレームメモリを選択す
る為のパラメータＫに１をセットすることにより、即ち
フレームメモリ１を指定する。次にステップＳ２５１で
は、撮像部６において像データの蓄積動作が完了したか
否かの判定を行って、蓄積が完了する迄待機する。

【００５８】撮像部６において、図７に示した様なオリ
ジナル画像の像蓄積動作が終了すると、次にステップＳ
２５２及びステップＳ２５３において、１回目の画素ず
らしを実現する為の補正光学部４の偏心データ量△Ｘ
(K)及び△Ｙ(K)を設定し、レンズ駆動部５を介して実際
に補正光学部４を偏心駆動する。この場合、最初の偏心
量△Ｘ(1)は、オリジナル画像に対して１画素ピッチだ
け撮像面上で被写体がずれるような量であり、△Ｙ(1)
はＹ方向に偏心させない為、０である。

【００５９】次にステップＳ２５４において、プロセス
処理部８において上述したように各画素データ毎のプロ
セス処理が行われ、その結果を順次フレームメモリＫ
（この場合フレームメモリ１）内に記憶していく。そし
てステップＳ２５５で１フレーム内の全ての画素データ
がフレームメモリＫに記憶された事を検出した時点で、
次のステップＳ２５６へ進む。

【００６０】ステップＳ２５６では、上記フレームメモ
リ設定パラメータＫの値がＮ（この場合４）に等しいか
否かの判定を行い、等しくない場合はステップＳ２５７
でＫの値を１だけカウントアップして、再びステップＳ
２５１で次の１フレームの蓄積が完了したか否かの判定
を実行する。そして像蓄積の完了を検出すると、今度は
ステップＳ２５２及びステップＳ２５３で、△Ｘ(2)及
び△Ｙ(2)に対してオリジナル画像に対して斜め方向に
半画素ピッチずらすような値を設定してから、前記ステ
ップＳ２５４〜Ｓ２５７の動作を繰り返す。更にもう一
度ステップＳ２５２及びＳ２５３を実行する場合には、
今度は△Ｘ(3)は前記２回目の画素ずらしに対して水平
方向に１画素ピッチずらすような値を設定し、△Ｙ(3)
は０とする。

【００６１】以上の様にして、ステップＳ２５６でＫの
値がＮ（この場合４）に等しくなる迄処理を繰り返すこ
とにより、図７に示した様な、各フレーム毎にＸ，Ｙ方
向に所定画素ピッチずつずれた４フレームの画像を得る
事が出来る。

【００６２】ここで、上記画素ずらし撮影に伴う補正光
学部４の動きを図８に示し、更に詳細に説明する。図８
においては、補正光学部４におけるＸ及びＹ方向の実際
の動きを時間軸ｔに対して示している。

【００６３】実際の撮影動作よりも前の段階では手ブレ
補正動作を行う為、図８の時間ｔが有効撮影期間以前に
おいて、補正光学部４はブレセンサ１７（実際にはＸ及
びＹ方向のそれぞれのブレを検出するため、２個を備え
る）からの出力に応じて、Ｘ及びＹ方向のぞれぞれに図
８に示す様に動いている。

【００６４】そして１回目の撮影（像蓄積終了）後、補
正光学部４はＸ方向のみ△Ｘ(1)だけ平行に偏心移動
し、この状態で手ぶれ補正は継続したまま２回目の撮影
を行う。２回目の撮影終了後、今度はＸ及びＹ方向にそ
れぞれ△Ｘ(2)、△Ｙ(2)だけ偏心移動し、更に３回目の
撮影を行う。再び３回目の撮影終了後、Ｘ方向のみ△Ｘ
(3)だけ偏心移動し、４回目の撮影を行った後、全ての
偏心を戻して画素ずらし撮影を完了する。

【００６５】図５に戻り、以上の様にしてステップＳ２
５８までに４フレームの画素ずらし画像を得る。次にス
テップＳ２５８以降では、実際に画素ずらしによって得
られた高密度の画像データを実際のＲＧＢ情報に変換す
る動作を行う。まずステップ２５８では、１回目の画素
ずらし撮影で取り込んだ画像データを記憶しているフレ
ームメモリを指定するパラメータＫの値を１に設定す
る。続いて、このフレームメモリの内容を画像合成部９
へ転送し（Ｓ２５９）、ここでは前述した「撮影・記憶
モード１」の場合と異なり、直ちに各画素毎の不足して
いるＲＧＢ情報に対する補間動作は実行せず、そのまま
ステップＳ２６０で１フレーム分の転送が完了したか否
かの判定のみを行う。ステップＳ２６０で１フレーム分
の転送が完了した事を検出すると、今度はステップＳ２
６１へ進み、ここで全撮影画像データの転送が完了した
事を検出する為に、Ｋの値がＮ（この場合４）に等しい
か否かを判定する。まだ全撮影画像データの転送が完了
していない場合には、ステップＳ２６２でＫの値を１カ
ウントアップし、再びステップＳ２５９へ進んで次のフ
レームメモリの内容の転送を開始する。

【００６６】最終的に全撮影データの転送が完了する
と、ステップＳ２６１でＫの値がＮに等しくなってステ
ップＳ２６３へ進み、ここで初めて全撮影画像データの
実際の合成を行う。

【００６７】この画像合成の様子を、図９を参照して説
明する。図９左側は、４回の画素ずらしにより得られる
各画素データの配列を空間的に再配置したもので、図２
に示したオリジナルのベイヤー配列の撮像素子の画像デ
ータと比較すると、水平及び垂直共に略２倍近くの空間
周波数を持つ画像データ配列となる。この画像データ配
列から水平及び垂直方向共に２倍の各ＲＧＢ情報を得る
為には、やはり図９中央に示したマトリクス行列で構成
される補間フィルタを使用した演算を行なう必要があ
る。

【００６８】まずＧ成分については、図９中央上に示す
ような、従来と同様の３×３マトリクス行列で充分であ
る。例えば画素配列における画素ａの位置のＧ信号を作
成する場合、点線で囲んだ画素ａ及びその周辺８画素の
各輝度データに、Ｇの補間フィルタの係数をそれぞれ掛
け合わせればよい。この場合、画素ａの位置のＧ出力に
対する係数は「１」で、その上下左右は「０．２５」で
あるが、この位置のＧ出力は「０」であるため、実質的
にはこの画素ａの位置の出力値のみでＧデータは決定す
る。一方、画素配列における画素ｂの位置のＧ信号を作
成する場合、同様に点線で囲んだ画素ｂ及びその周辺８
画素の各輝度データに、Ｇの補間フィルタの係数をそれ
ぞれ掛け合わせればよいが、この場合、画素ｂの位置の
Ｇ信号はないので、上下左右のＧ信号の平均値を使っ
て、この位置でのＧデータを決定する。

【００６９】次にＲ／Ｂ成分については、Ｇ成分よりも
複雑な処理が必要である。図９左端の画素配列からも解
るように、Ｒ／Ｂ成分の出力値については、水平方向に
対してはすぐ隣の画素データから補間出来るが、垂直方
向に対しては多少離れた位置の画素データを使って補間
する必要がある。従って、図９中央下に示した５×５の
マトリクス行列を使用する。尚、このマトリクス行列
は、その中央を中心とした上下の係数配列と、左右の係
数配列とは同様でないことを特徴とする。以上のような
演算を、ＲＧＢそれぞれに対して全画素配列毎に行う事
により、最終的には図９右端に示す様な、全画素配列に
対してのＲＧＢ情報を算出する事が出来る。

【００７０】以上のように画像合成部９において４フレ
ーム分の画素ずらし画像の合成が終了すると、次に該合
成画像データを圧縮・保存する為に、まずステップＳ２
６４で全てのデータを一旦ワークメモリ１３へ転送す
る。続いてステップＳ２６５では、圧縮タイプとして非
可逆圧縮を実行する事をメモリ制御回路１０に対して設
定する。

【００７１】ここで非可逆圧縮とは、原画像と全く同じ
画像への復元はできない圧縮形式である。この非可逆圧
縮の方法としては、静止画の圧縮の規格を定めているＪ
ＰＥＧ形式の中で、例えば８×８画素毎のブロックに分
割した上で、各画像の２次元の周波数データに変換す
る、いわゆるＤＣＴ（Discrete Cosine Transform）変
換等があり、この方法による圧縮を行なえば、原画像の
データ量をかなり減らす事が出来る。

【００７２】ＤＣＴ変換について図１０にその動作を模
式的に示し、詳細に説明する。上述した様に、ＤＣＴ変
換では画面全体を通常８×８画素毎のブロックに分割
し、各ブロック毎に同様の変換を実行する。図１０左端
はこの８×８画素ブロックの画素信号レベル例を表した
もので、この各画素信号レベルを下式によって各係数に
変換したものが、図１０中央上に示すブロックである。

【００７３】

【数１】

【００７４】この図１０中央上のブロックにおける左上
の係数は画像に含まれるＤＣ成分であり、その他の係数
は右下に向かうにつれて画像に含まれる高周波成分の程
度を表す。次に、この各係数を、図１０中央下に示した
量子化テーブルの各対応する値によって量子化すること
により、図１０右側に示す係数ブロックが得られる。そ
して、最終的に量子化後の係数ブロックを例えばハフマ
ン等の方式により符号化する。

【００７５】ここで量子化とは、ブロックの所定係数Ｓ
を量子化テーブルの対応する位置のデータで割った商に
変換することであり、例えば図１０中央上の係数ブロッ
クにおいて、i,j＝０であるＳ00の値は「２６０」であ
り、これを図１０中央下に示した対応する量子化テーブ
ルデータ「１６」で量子化した結果は「１６」となり、
図１０右端に示した係数ブロックの左上角に現れる。従
って、図１０中央上に示した周波数データに変換した結
果に対して、図１０中央下に示した量子化テーブルデー
タの値を変化させる事により、撮影画像の圧縮の程度を
任意に設定することができる。

【００７６】従って、本実施形態においては、ステップ
Ｓ２６６で上記画素ずらし後の合成画像に対して上記Ｄ
ＣＴ法等の非可逆圧縮を８×８画素のブロック単位に実
行し、ステップＳ２６７で上記「撮影・記憶モード１」
の場合と同様に、非可逆圧縮された画像データを、ハフ
マン符号化等により符号化する。この符号化された画像
データは、ステップＳ２６８で順次外部メモリ１４に記
憶され、ステップＳ２６９で全画像（全ブロック）の圧
縮及び外部メモリヘの保存が完了した事を検出して、
「撮影・記憶モード２」の処理を終了する。

【００７７】尚、本実施形態においては、画素ずらし撮
影により得た高精細な画像に対して非可逆圧縮を施して
からメモリ等へ保存する例について説明した。このよう
に、高詳細な画像に対して画質の劣化が生じるような圧
縮方法を採用することは矛盾するようであるが、通常、
ＤＣＴ変換等により圧縮した場合の画質劣化は、圧縮率
を極端に上げない限り、ごくわずかである。従って、画
素ずらし撮影によりかなり高精細な画像を合成すること
により、圧縮率の設定を適当な値に設定する事で、画像
の高精細性を保つことは可能である。

【００７８】尚、本実施形態においては画素ずらしによ
り４フレームを撮影して合成する例について説明を行な
ったが、もちろん画素ずらし撮影されるフレーム数はこ
の例に限定されるものではない。

【００７９】以上説明したように本実施形態によれば、
ユーザの設定した撮影モードに応じて、通常撮影を行う
か、画素ずらし撮影を行うかを自動的にカメラ自体が決
定する為、ユーザの要求通りの画質での撮影が行われ
る。又、撮影した画像のメモリヘの保存もカメラ側で最
適な圧縮方法を自動的に決定する為、ユーザが圧縮率等
を判断をする必要がない。従って、デジタル画像等を熟
知しないユーザでも適切な撮影が可能となる。

【００８０】＜第２実施形態＞以下、本発明に係る第２
実施形態について、図１１〜図１４のフローチャートを
参照して説明する。尚、第２実施形態におけるデジタル
スチルカメラの構成は図１と同様であるため説明を省略
するが、各構成の番号はそのまま参照する。

【００８１】上述した第１実施形態においては、ユーザ
により設定された撮影モードに応じて、撮影方法及び撮
影画像データの圧縮方法を決定する例について説明し
た。第２実施形態においては、実際の撮影時のブレ状態
に応じて、撮影方法及び撮影画像データの圧縮方法を決
定することを特徴とする。

【００８２】図１１は、第２実施形態のカメラにおける
撮影シーケンスを示すフローチャートである。尚、この
撮影シーケンスはカメラの全体制御部１によって制御さ
れていることは言うまでもない。

【００８３】まずステップＳ３００〜Ｓ３０７に示すカ
メラの撮影準備動作については、上述した第１実施形態
の図３におけるステップＳ１００〜Ｓ１０７の動作と全
く同様であるため、説明を省略する。

【００８４】レリーズＳＷがオンとなって撮影準備が整
うと、ステップＳ３０７で撮影モードが、「スポーツモ
ード」であるか「ポートレートモード」であるかの判定
を行ない、「スポーツモード」であればステップＳ３０
８で実際の撮影を行なう際のモードとして通常の「ノー
マル撮影モード」を設定する。尚、ノーマル撮影とは１
回露光による撮影である。そしてステップＳ３０９に進
んで、「連写撮影モード」が設定されているか否かの判
定を行う。ここで、「連写撮影モード」とは、カメラの
１回のレリーズ操作によって連続した複数の画像を撮影
し、その結果をメモリ等へ保存するモードである。ステ
ップ３０９で「連写撮影モード」が設定されていない場
合はステップＳ３１０へ進み、「撮影・記憶モード１」
による実際の撮影及び該撮影データのフレームメモリ部
１１への記憶を行なう。この「撮影・記憶モード１」の
動作については、上述した第１実施形態において図４の
フローチャートに示した処理と同様であるため、説明は
省略するが、基本的には撮影画像を可逆圧縮可能なファ
イル形式に変換してメモリ等へ保存するといった、標準
的な撮影・記憶を実行する。

【００８５】一方、ステップＳ３０９で、「連写撮影モ
ード」が設定されていた場合には、ステップＳ３１１へ
進んで、「撮影・記憶モード３」を実行する。この「撮
影・記憶モード３」においては、連写により撮影された
１コマ目のみを可逆圧縮してその他は非可逆圧縮するこ
とにより、連写撮影による撮影データの保存量を最低限
にするが、その詳細については後述する。

【００８６】一方、ステップＳ３０７にてカメラの撮影
モードが「ポートレートモード」に設定されている場合
には、ステップＳ３１２で実際の撮影を行なう際のモー
ドとして「画素ずらし撮影モード」を設定する。この画
素ずらし撮影は上述した第１実施形態と同様であるた
め、説明を省略する。

【００８７】次に、ステップＳ３１３において、現在の
ブレ量が大きいか否かの判定を行う。ここでブレ量の判
定方法としては、ブレセンサ１７の出力を参照するか、
若しくは撮像部６の各フレーム毎の画像の相関に基づい
て、撮像面上のブレを直接検出して判定を行う。尚、フ
レーム毎の画像相関に基づいてブレ判定を行なった方
が、実際に補正光学部４によってブレ補正を行った後の
ブレ残り量を正確に検出することができるが、ここでは
この判定方法についての説明は省略する。

【００８８】ステップＳ３１３においてブレ量が所定レ
ベルよりも小さい場合には、ステップＳ３１４へ進んで
「撮影・記憶モード２」を実行する。この「撮影・記憶
モード２」は、上述した第１実施形態と同様であるため
説明を省略するが、基本的には複数の画素ずらし撮影に
より高精細な撮影画像を得、非可逆圧縮により保存する
ものである。

【００８９】一方、ステップＳ３１３でブレ量が所定レ
ベルよりも大きい場合には、「撮影・記憶モード２」を
実行することは適当でない。

【００９０】画素ずらし撮影においては、当然時系列的
に撮像手段の空間的位置をずらしていく為に、複数フレ
ームの画像データが必要であり、従って撮影時間が伸び
てしまう事で、ブレの影響を受け易い。即ち、画素ずら
しによる１画素や１／２画素のずれ量よりもブレによる
ずれ量の方が大きくなってしまった場合、画像を合成す
る際に各撮影画像の空間的な配列自身の関係が崩れるた
め、合成画像の画質はかえって劣化してしまう可能性が
あるためである。

【００９１】従ってこの場合にはステップＳ３１５に進
み、「撮影・記憶モード４」を実行する。この「撮影・
記憶モード４」においては、たとえ「画素ずらし撮影モ
ード」が設定されていても、画素ずらしによる画質向上
が望めないため、「撮影・記憶モード１」の様な標準的
な撮影及び記憶を行なう。この詳細については後述す
る。

【００９２】以下、上記「撮影・記憶モード３」及び
「撮影・記憶モード４」のそれぞれの動作について、詳
細に説明する。

【００９３】まず「連写モード」が設定された場合の
「撮影・記憶モード３」の動作について、図１２及び図
１３のフローチャートを参照して説明する。

【００９４】まずステップＳ３５０において、プロセス
処理部８からの出力を一時的に記憶するフレームメモリ
を選択する為のパラメータＫに１を代入し、フレームメ
モリ１を指定する。次にステップＳ３５１では、撮像部
６での像データの蓄積動作が完了したか否かの判定を行
って、蓄積が完了する迄ここで待機する。第１実施形態
においても説明した様に、撮像部６がＣＣＤ等により構
成されている場合、所定時間の蓄積動作が完了すると、
その光電変換動作によって発生した電荷が直ちに転送部
へ転送されるため、その発生電荷を順次読み出している
最中であっても次の電荷蓄積動作は行っている。

【００９５】従って、次のステップＳ３５２において
は、上述した様に各画素データ毎にプロセス処理した結
果を、順次にフレームメモリＫ（この場合フレームメモ
リ１）内に記憶していき、ステップＳ３５３で１フレー
ム内の全ての画素データがフレームメモリＫに記憶され
た事を検出した時点で、次のステップＳ３５４へ進む。

【００９６】ステップＳ３５４では、「連写撮影モー
ド」で所定回数の撮影が完了したか否かの判定を行う為
に、フレームメモリの指定を行うパラメータＫの値がＮ
に等しいか否かの判定を行う。もちろん、このＮは予め
ユーザによって連写する撮影枚数として設定されてい
る。ここで、Ｋの値がまだＮに達していない場合は、ス
テップＳ３５５へ進んでＫの値を１カウントアップし、
再びステップＳ３５１へ進んで、次の撮影（像の蓄積）
が完了したか否かの判定を行う。そして所定枚数の撮影
が終了すると、ステップＳ３５４でパラメータＫの値が
Ｎに等しくなり、処理は次にステップＳ３５６へ進む。

【００９７】ステップＳ３５６では、まずフレームメモ
リの指定を行う為、パラメータＫに１を設定する。続い
て、ステップＳ３５７では、このフレームメモリＫ（フ
レームメモリ１）の内容を画像合成部９へ転送し、ここ
で第１実施形態で説明したように各画素毎の不足してい
るＲＧＢ情報に対する補間動作を実行し、その結果をス
テップＳ３５８で一旦ワークメモリ１３に転送する。こ
の動作を１フレーム分連続して行い、ステップＳ３５９
にて１フレーム分の処理が完了した事を検出すると、ス
テップＳ３６０へ進む。

【００９８】ステップＳ３６０では、実際の画像を圧縮
する方法として可逆圧縮の実行をメモリ制御部１０に対
して設定する。この可逆圧縮の具体的方法としては、上
述した第１実施形態で示した「撮影・記憶モード１」に
おけるＤＰＣＭ法を実行し、以下ステップＳ３６１〜Ｓ
３６４については、「撮影・記憶モード１」の動作を示
した図４のステップＳ２０８〜Ｓ２１１と同様であるた
め、説明を省略する。以上の処理により、連写モードで
撮影した１コマ目は、可逆圧縮されて保存される。

【００９９】ステップＳ３６４において１コマ目の撮影
画像の全ブロックの保存が完了すると、今度はステップ
Ｓ３６５へ進み、ここで次のフレームメモリの設定を行
う為、パラメータＫに２を設定する。続いて、ステップ
Ｓ３６６では、このフレームメモリＫ（フレームメモリ
２）の内容を画像合成部９へ転送し、ここで前記補間動
作を実行した後、ステップＳ３６７にてワークメモリ１
３に転送する。この動作を１フレーム分連続して行い、
ステップＳ３６８にて１フレーム分の処理が完了した事
を検出すると、次にステップＳ３６９に進む。

【０１００】ステップＳ３６９では、実際の画像を圧縮
する方法として、非可逆圧縮をメモリ制御部１０に対し
て設定する。この非可逆圧縮の具体的方法としては、第
１実施形態における「撮影・記憶モード２」で説明した
ＤＣＴ変換等を実行する。従ってステップＳ３７０で
は、撮影画像を例えば８×８画素毎のブロックに分割し
た上でＤＣＴ変換を実行し、次にステップＳ３７１でハ
フマン符号化等の符号化処理を行ってから、ステップＳ
３７２でこの符号化データを外部メモリ１４へ保存す
る。更に、ステップＳ３７３で全ブロックの圧縮・保存
が完了したか否かの判定を行う。全ブロックの圧縮・保
存が完了していない場合は再びステップＳ３７０へ戻っ
て上記動作を繰り返すが、全ブロックの外部メモリ１４
ヘの保存が完了するとステップＳ３７４へ進む。

【０１０１】ステップＳ３７４では、全撮影画像に対す
る圧縮・保存が完了したか否かの判定を行う為、フレー
ムメモリの設定パラメータＫの値が所定値Ｎに達したか
どうかをチェックする。まだ完了していない場合はステ
ップＳ３７５でＫの値を１カウントアップした後、再び
ステップＳ３６６へ戻って次の撮影画像に対する圧縮・
保存動作を繰り返す事になる。従って、最終的に全撮影
画像に対しての圧縮・保存動作が完了した時点で、「撮
影・記憶モード３」の動作は終了する。

【０１０２】以上説明したように、第２実施形態の「撮
影・記憶モード３」においては、連写した１コマ目のみ
を可逆圧縮し、その他のコマは非可逆圧縮を実行する。
即ち、連写撮影モードに特化したデータ圧縮、保存を行
なう。

【０１０３】次に、ユーザによるブレ量が大きい場合の
「撮影・記憶モード４」の動作について、図１４のフロ
ーチャートを参照して説明する。

【０１０４】まずステップＳ４００〜Ｓ４０７に示す動
作は、画素ずらし撮影を行った全画像をフレームメモリ
に取り込む迄の動作である。これは上述した第１実施形
態における「操影・記憶モード２」を示した図５のフロ
ーチャートにおいてステップＳ２５０〜Ｓ２５７に示し
た動作と同様であるため、説明を省略する。

【０１０５】画素ずらしによる所定枚数の撮影が終了す
ると、ステップＳ４０６でパラメータＫの値がＮに等し
くなり、ステップＳ４０８へ進む。

【０１０６】ステップＳ４０８では、まずフレームメモ
リの指定を行う為、パラメータＫに１を設定する。続い
てステップＳ４０９では、このフレームメモリＫ（フレ
ームメモリ１）の内容を画像合成部９へ転送し、全画素
分のＲＧＢ情報を作成する前記補間動作を実行した結果
をステップＳ４１０で一旦ワークメモリ１４に転送す
る。この動作を１フレーム分連続して行い、ステップＳ
４１１にて１フレーム分の処理が完了した事を検出する
と、ステップＳ４１２へ進む。

【０１０７】ステップＳ４１２では、画像を圧縮する方
法として、可逆圧縮をメモリ制御部１０に対して設定す
る。この可逆圧縮の具体的方法としては、第１実施形態
の「撮影・記憶モード１」において説明したＤＰＣＭ法
を実行する。以下、ステップＳ４１３〜Ｓ４１６につい
ては、図４に示した「撮影・記憶モード１」におけるス
テップＳ２０８〜Ｓ２１１と同様であるため、説明を省
略する。

【０１０８】ステップＳ４１６において１コマ目の撮影
画像の全ブロックの保存が完了すると、ステップＳ４１
７へ進み、ここで全撮影画像の圧縮・保存が完了したか
否かの判定を行う。全画像分が完了していない場合に
は、ステップＳ４１８へ進んでフレームメモリの設定を
行うパラメータＫの値を１カウントアップし、再びステ
ップＳ４０９へ進んで次の撮影画像に対する圧縮・保存
を行う。即ち、外部メモリ１４には画素ずらし撮影され
た枚数分の撮影画像データが、そのまま可逆圧縮されて
蓄積される。

【０１０９】以上説明した様に第２実施形態において
は、たとえ画素ずらし撮影モードが自動的に選択された
場合でも、撮影前のブレ量が大きく、このまま画像合成
を実行しても高画質化が期待出来ない場合には、画像合
成を行なわないばかりでなく、圧縮方法も切り替える。
即ち、ブレ量に応じて各フレームデータを別々に記憶す
るか、又は各フレーム画像を合成した１つの画像データ
として記憶するかを決定する。

【０１１０】尚、第２実施形態においては撮影前にブレ
量を判定する例について説明を行なったが、この判定は
撮影中に行なってもよい。例えば、「撮影・記憶モード
４」を示した図１４におけるステップＳ４００〜Ｓ４０
７の間に、ブレ判定を行なうこともできる。

【０１１１】また、検出されたブレ量が大きい場合に、
たとえ画素ずらし撮影モードが設定されていても該撮影
された複数フレームの画像合成を行なわない例について
説明を行なったが、例えばブレ量が大きい場合に、画素
ずらし撮影を行なわないようにすることももちろん可能
である。

【０１１２】以上説明したように第２実施形態によれ
ば、カメラの撮影時においてユーザ自身の手ブレ量が大
きい場合、たとえ画素ずらし撮影モードが設定されてい
ても、画素ずらしにより撮影された複数の画像の合成は
個々枚毎に留め、撮影画像の保存方法も自動的に変更す
ることにより、撮影画像においてブレによる画質劣化の
影響を抑制することができる。

【０１１３】＜第３実施形態＞以下、本発明に係る第３
実施形態について、図１５，図１６のフローチャートを
参照して説明する。尚、第３実施形態におけるデジタル
スチルカメラの構成は図１と同様であるため説明を省略
するが、各構成の番号はそのまま参照する。

【０１１４】上述した第１実施形態及び第２実施形態に
おいては、撮影モード及びブレ状態に応じて、撮影方法
及び撮影画像データの圧縮方法を決定する例について説
明した。第３実施形態においては、撮影画像データを記
憶するメモリの空き状況に応じて、撮影方法及び撮影画
像データの圧縮方法を決定することを特徴とする。

【０１１５】図１５は、第３実施形態のカメラにおける
撮影シーケンスを示すフローチャートである。尚、この
撮影シーケンスはカメラの全体制御部１によって制御さ
れていることは言うまでもない。

【０１１６】まずステップＳ５００〜Ｓ５０７に示すカ
メラの撮影準備動作については上述した第１実施形態の
図３におけるステップＳ１００〜Ｓ１０７の動作と全く
同様であるため、説明を省略する。

【０１１７】レリーズＳＷがオンとなって撮影準備が整
うと、ステップＳ５０７で撮影モードが、「スポーツモ
ード」であるか「ポートレートモード」であるかの判定
を行ない、「スポーツモード」であればステップＳ５０
８で実際の撮影を行なう際のモードとして通常の「ノー
マル撮影モード」を設定する。尚、ノーマル撮影とは１
回露光による撮影である。そしてステップＳ５０９に進
んで、「連写撮影モード」が設定されているか否かの判
定を行う。ここで、「連写撮影モード」とは、カメラの
１回のレリーズ操作によって連続した複数の画像を撮影
し、その結果をメモリ等へ保存するモードである。「連
写撮影モード」が設定されていない場合はステップＳ５
１０へ進み、外部メモリ１４の記憶容量が充分であるか
否かの判定を行なう。

【０１１８】ここで、外部メモリ１４の記憶容量の判定
方法について、図１７を参照して詳細に説明する。図１
７は、外部メモリ１４に撮影画像を取り込んでいった場
合のメモリ使用状況を示したものであり、第３実施形態
においては、１回目の撮影結果をアドレス０に、２回目
の撮影結果をアドレス１にというように、アドレスの下
位のメモリから順次記憶していく。各撮影毎に撮影画面
の情報量は異なるため、アドレス値と画像の撮影番号と
は必ずしも一致しない。従って、メモリ自体の最終アド
レス（ｍ）とポインタが現在示しているアドレス（ｎ＋
１）との値から、残りのメモリ容量がどの位あるのかを
知ることができる。尚、得られた残り容量が後続の処理
において十分であるか否かを判定するために、そのしき
い値を予め設定しておく必要がある。もちろん、該しき
い値をユーザによって変更可能としても良い。

【０１１９】外部メモリ１４の残り容量が十分である場
合、ステップＳ５１１へ進んで「撮影・記憶モード１」
による実際の撮影及び該撮影データのフレームメモリ部
１１への記憶を行なう。この「撮影・記憶モード１」の
動作については、上述した第１実施形態において図４の
フローチャートに示した処理と同様であるため、説明は
省略するが、基本的には撮影画像を可逆圧縮可能なファ
イル形式に変換してメモリ等へ保存するといった、標準
的な撮影・記憶を実行する。

【０１２０】一方、ステップＳ５１０で残り容量が不十
分であった場合には、強制的にステップＳ５２０へ進
み、ここで「撮影・記録モード５」を実行する。この
「撮影・記憶モード５」の動作の詳細については後述す
るが、即ち、少ないメモリ容量でも撮影画像を記憶でき
るように、撮影を１コマのみ（以下、単写撮影）とし、
その撮影画像を高圧縮率で圧縮し、記録するモードであ
る。

【０１２１】一方、ステップ５０９で「連写撮影モー
ド」が選択されていた場合には、ステップＳ５１２へ進
んで、外部メモリ１４の記憶容量が充分であるか否かの
判定を行う。ここで残り容量が充分である場合にはステ
ップＳ５１３へ進んで「撮影・記憶モード３」を実行す
る。この「撮影・記憶モード３」は、上述した第２実施
形態と同様であるため説明を省略するが、基本的には撮
影した１コマ目のみ可逆圧縮を実行し、その他は非可逆
圧縮を実行するものである。

【０１２２】又、ステップＳ５１２で外部メモリ１４の
記憶容量が所定レベル以下である場合には、やはりステ
ップＳ５２０へ進み、「撮影・記録モード５」を実行す
る。即ち、第３実施形態においては、たとえ「連写モー
ド」が設定されていても、外部メモリ１３の空き容量が
少ない場合には、強制的に単写撮影を行ない、その撮影
画像の圧縮も非可逆圧縮等の圧縮率の高い圧縮方法を選
択する。

【０１２３】次に、ステップＳ５０７にてカメラの「撮
影モード」が「ポートレートモード」に設定されている
場合について説明する。「ポートレートモード」が選択
されている場合には、ステップＳ５１４で「画素ずらし
撮影モード」を設定する。この「画素ずらし撮影モー
ド」は、上述した第１実施例と同様であるため、説明を
省略する。

【０１２４】次に、ステップＳ５１５でこの時のブレ量
が大きいか否かの判定を行う。この判定処理も、上述し
た第２実施形態と同様である。

【０１２５】ブレ量が所定レベルよりも小さい場合には
ステップＳ５１６へ進み、まず外部メモリ１４の記憶容
量が十分であるか否かの判定を行う。記憶容量が十分で
ある場合には、ステップＳ５１７へ進んで「撮影・記憶
モード２」を実行する。この「撮影・記憶モード２」は
第１実施形態と同様であり、画素ずらし撮影による複数
の撮影画像を合成し、該合成画像に対して非可逆圧縮を
行うものである。

【０１２６】一方、ステップＳ５１６で外部メモリ１４
の記憶容量が所定レベルよりも少ない場合には、やはり
ステップＳ５２０へ進み、「撮影・記憶モード５」を実
行する。即ち、「画素ずらし撮影モード」が選択されて
いる場合でも、メモリ容量が少ない場合には強制的に単
写撮影を行ない、更に非可逆圧縮を実行する事でメモリ
の使用量を節約する。

【０１２７】また、ステップＳ５１５でブレ量が所定レ
ベルよりも大きい場合には、次にステップＳ５１８で、
外部メモリ１４の記憶容量が十分であるか否かの判定を
行い、十分である場合には、ステップＳ５１９で「撮影
・記憶モード４」を実行する。この「撮影・記憶モード
４」の動作は、第２実施形態で説明した図１４のフロー
チャートと同様であるため、説明は省略する。

【０１２８】又、ステップＳ５１８でメモリ容量が所定
レベルよりも少ない場合には、ステップＳ５２０へ進ん
で「撮影・記憶モード５」を実行する。即ち、「画素ず
らし撮影モード」が選択されている場合でも強制的に単
写撮影を行い、且つ非可逆圧縮を実行する。

【０１２９】以上のように第３実施形態においては、撮
影画像データを記憶する外部メモリ１４における残り容
量が十分でない場合には、「撮影・記憶モード５」を実
行する。以下、「撮影・記憶モード５」の動作を図１６
のフローチャートを参照して詳細に説明する。

【０１３０】図１６において、ステップＳ５５０〜Ｓ５
５６の動作は、第１実施形態において図４に示した「撮
影・記憶モード１」のステップＳ２００〜Ｓ２０６と同
様であり、１回の撮影動作後に画像信号を全てフレーム
メモリＫに記憶し、このフレームメモリＫ（フレームメ
モリ１）の内容を画像合成部９へ転送して前記ＲＧＢ情
報の補間動作を実行し、ワークメモリ１３に転送する。

【０１３１】次にステップＳ５５７では、実際の画像を
圧縮する方法として、非可逆圧縮をメモリ制御部１０に
対して設定する。この非可逆圧縮の具体的方法として
は、第１実施形態の「撮影・記憶モード２」において説
明したＤＣＴ変換等を実行し、以下ステップＳ５５８〜
Ｓ５６１については、図５に示すステップＳ２６５〜Ｓ
２６９と同様であるため、説明を省略する。

【０１３２】以上のように、「撮影・記憶モード５」に
おいては、残り外部メモリ容量が少ないので、強制的に
単写撮影を行ない、更に圧縮率の高い非可逆圧縮でのデ
ータ圧縮・保存を実行する。

【０１３３】以上説明したように第３実施形態によれ
ば、カメラの撮影モードがどのように設定されていて
も、外部メモリ１４の残り容量が少ない場合には、強制
的に単写撮影、及び高圧縮率による圧縮を行ない、記憶
すべき撮影画像データ量をより減少させることができ
る。従って、ユーザはメモリ残量を気にすることなく、
最大限の撮影が可能となる。

【０１３４】＜他の実施形態＞なお、本発明は、複数の
機器（例えばホストコンピュータ，インタフェイス機
器，撮像装置，プリンタなど）から構成されるシステム
に適用しても、一つの機器からなる装置（例えば、デジ
タルスチルカメラ，デジタルビデオカメラなど）に適用
してもよい。

【０１３５】また、本発明の目的は、前述した実施形態
の機能を実現するソフトウェアのプログラムコードを記
録した記憶媒体を、システムあるいは装置に供給し、そ
のシステムあるいは装置のコンピュータ（またはＣＰＵ
やＭＰＵ）が記憶媒体に格納されたプログラムコードを
読出し実行することによっても、達成されることは言う
までもない。

【０１３６】この場合、記憶媒体から読出されたプログ
ラムコード自体が前述した実施形態の機能を実現するこ
とになり、そのプログラムコードを記憶した記憶媒体は
本発明を構成することになる。

【０１３７】プログラムコードを供給するための記憶媒
体としては、例えば、フロッピディスク，ハードディス
ク，光ディスク，光磁気ディスク，ＣＤ−ＲＯＭ，ＣＤ
−Ｒ，磁気テープ，不揮発性のメモリカード，ＲＯＭな
どを用いることができる。

【０１３８】また、コンピュータが読出したプログラム
コードを実行することにより、前述した実施形態の機能
が実現されるだけでなく、そのプログラムコードの指示
に基づき、コンピュータ上で稼働しているＯＳ（オペレ
ーティングシステム）などが実際の処理の一部または全
部を行い、その処理によって前述した実施形態の機能が
実現される場合も含まれることは言うまでもない。

【０１３９】さらに、記憶媒体から読出されたプログラ
ムコードが、コンピュータに挿入された機能拡張ボード
やコンピュータに接続された機能拡張ユニットに備わる
メモリに書込まれた後、そのプログラムコードの指示に
基づき、その機能拡張ボードや機能拡張ユニットに備わ
るＣＰＵなどが実際の処理の一部または全部を行い、そ
の処理によって前述した実施形態の機能が実現される場
合も含まれることは言うまでもない。

【０１４０】

【発明の効果】以上説明したように本発明によれば、撮
像装置に設定された撮影モードに応じて撮影方法、及び
撮影画像データの圧縮方法を自動的に切り替える事によ
り、被写体に応じた最適な撮影方法、及びその撮影画像
データの保存が繁雑な作業なしに可能となる。

【０１４１】また、更に撮像装置の撮影時の動作状態
（手ブレ等）に応じて撮影方法及び撮影画像データの圧
縮方法を適切に切り替えることにより、撮影画像の動作
状態による影響を抑制することができる。

【０１４２】また、更に撮影画像データを保存するメモ
リ容量に応じて撮影方法及び撮影画像データの圧縮方法
を適切に切り替えることにより、限られたメモリ容量で
最大限の撮影が可能となる。

【０１４３】このように撮像装置側において自動的に適
切な撮影方法及び撮影データ保存方法を決定するため、
撮影操作に習熟していないユーザであっても、快適に撮
影を行なうことができる。

【０１４４】

【図面の簡単な説明】

【図１】本発明に係る一実施形態におけるデジタルスチ
ルカメラの構成を示すブロック図である。

【図２】本実施形態における色合成のための補間方法を
説明する図である。

【図３】本実施形態におけるカメラシーケンス示すフロ
ーチャートである。

【図４】本実施形態における撮影・記憶モード１の動作
を示すフローチャートである。

【図５】本実施形態における撮影・記憶モード２の動作
を示すフローチャートである。

【図６】本実施形態における撮影画像の可逆圧縮方法を
説明する図である。

【図７】本実施形態における画素ずらし撮影の原理を説
明する図である。

【図８】本実施形態における画素ずらし撮影に伴う補正
光学系の動きを説明する図である。

【図９】本実施形態における画素ずらし撮影を行った場
合の色合成を説明する図である。

【図１０】本実施形態における撮影画像の非可逆圧縮方
法を説明する図である。

【図１１】本発明に係る第２実施形態におけるカメラシ
ーケンスを示すフローチャートである。

【図１２】第２実施形態における撮影・記憶モード３の
動作を示すフローチャートである。

【図１３】第２実施形態における撮影・記憶モード３の
動作を示すフローチャートである。

【図１４】第２実施形態における撮影・記憶モード４の
動作を示すフローチャートである。

【図１５】本発明に係る第３実施形態におけるカメラシ
ーケンスを示すフローチャートである。

【図１６】第３実施形態における撮影・記憶モード５の
動作を示すフローチャートである。

【図１７】第３実施形態におけるメモリの使用状態を説
明する図である。

【図１８】従来のデジタルスチルカメラの構成を示すブ
ロック図である。

【符号の説明】

１全体制御部２撮影モード設定部４補正光学系６撮像部８プロセス処理部９画像合成部１０メモリ制御部１１フレームメモリ１４外部メモリ１７ブレセンサ

Claims

【特許請求の範囲】

【請求項１】被写体像を結像し、光電変換により画像
信号を生成する撮像手段と、該撮像手段上に結像する被写体像の位置を所定量平行移
動させる画素ずらし手段と、該画素ずらし手段による複数回の移動毎に前記撮像手段
において得られた複数画面の画像データを合成する合成
手段と、該合成手段により合成された画像データを所定形式に変
換する形式変換手段と、該形式変換手段により所定形式に変換された画像データ
を保持する保持手段と、撮像装置の撮影モードを設定する設定手段と、前記撮影モードに応じて、前記画像合成手段による画像
合成を制御する制御手段と、を有することを特徴とする
撮像装置。
【請求項２】前記制御手段は、前記撮影モードに応じ
て、前記画像合成手段における画像合成を行なうか否か
を制御することを特徴とする請求項１記載の撮像装置。
【請求項３】前記制御手段は、前記撮影モードに応じ
て更に前記形式変換手段における変換方法を制御するこ
とを特徴とする請求項２記載の撮像装置。
【請求項４】前記形式変換手段は、画像データを圧縮
することを特徴とする請求項３記載の撮像装置。
【請求項５】前記制御手段は、前記撮影モードが第１
のモードであった場合に前記画像合成手段における画像
合成を行なわないように制御し、前記撮影モードが第２
のモードであった場合に前記画像合成手段における画像
合成を行ない、前記形式変換手段において前記第１のモ
ード時よりも高い圧縮率による圧縮を行なうように制御
することを特徴とする請求項４記載の撮像装置。
【請求項６】前記設定手段は、被写体の状態に応じた
撮影モードを任意に設定することを特徴とする請求項１
記載の撮像装置。
【請求項７】更に、撮影時における撮像装置全体のブ
レによる影響を補正する手ブレ補正手段を有し、前記画素ずらし手段は、前記手ブレ補正手段によって画
素ずらしを行なうことを特徴とする請求項１記載の撮像
装置。
【請求項８】被写体像を結像し、光電変換により画像
信号を生成する撮像手段と、該撮像手段上に結像する被写体像の位置を所定量平行移
動させる画素ずらし手段と、該画素ずらし手段による複数回の移動毎に前記撮像手段
において得られた複数画面の画像データを合成する合成
手段と、該合成手段により合成された画像データを所定形式に変
換する形式変換手段と、該形式変換手段により所定形式に変換された画像データ
を保持する保持手段と、撮像装置の撮影時状態を検出する検出手段と、前記撮影時状態に応じて、前記画像合成手段による画像
合成を制御する制御手段と、を有することを特徴とする
撮像装置。
【請求項９】前記制御手段は、前記撮影時状態に応じ
て、前記画像合成手段における画像合成を行なうか否か
を制御することを特徴とする請求項８記載の撮像装置。
【請求項１０】前記検出手段は、撮影時における撮像
装置全体のブレの度合を検出することを特徴とする請求
項９記載の撮像装置。
【請求項１１】前記制御手段は、前記ブレの度合が所
定値以上であった場合に前記画像合成手段における画像
合成を行なわないように制御し、前記ブレの度合が所定
値未満であった場合に前記画像合成手段における画像合
成を行なうように制御することを特徴とする請求項１０
記載の撮像装置。
【請求項１２】前記制御手段は、前記ブレの度合に応
じて前記形式変換手段における変換方法を制御すること
を特徴とする請求項１１記載の撮像装置。
【請求項１３】前記形式変換手段は、画像データを圧
縮することを特徴とする請求項１２記載の撮像装置。
【請求項１４】更に、前記ブレによる撮影時の影響を
補正する手ブレ補正手段を有し、前記画素ずらし手段は、前記手ブレ補正手段によって画
素ずらしを行なうことを特徴とする請求項８記載の撮像
装置。
【請求項１５】被写体像を結像し、光電変換により画
像信号を生成する撮像手段と、該撮像手段上に結像する被写体像の位置を所定量平行移
動させる画素ずらし手段と、該画素ずらし手段による複数回の移動毎に前記撮像手段
において得られた複数画面の画像データを合成する合成
手段と、該合成手段により合成された画像データを所定形式に変
換する形式変換手段と、該形式変換手段により所定形式に変換された画像データ
を保持する保持手段と、前記保持手段における画像データの保持状況に応じて、
前記画像合成手段による画像合成を制御する制御手段
と、を有することを特徴とする撮像装置。
【請求項１６】前記制御手段は、前記保持手段におけ
る画像データの保持状況に応じて、前記画像合成手段に
おける画像合成を行なうか否かを制御することを特徴と
する請求項１５記載の撮像装置。
【請求項１７】前記制御手段は、前記保持手段の未使
用容量に応じて、前記画像合成手段による画像合成を行
なうか否かを制御することを特徴とする請求項１６記載
の撮像装置。
【請求項１８】前記制御手段は、前記保持手段の未使
用容量が所定値未満であった場合に前記画像合成手段に
おける画像合成を行なわないように制御し、前記保持手
段の未使用容量が所定値以上であった場合に前記画像合
成手段における画像合成を行なうように制御することを
特徴とする請求項１７記載の撮像装置。
【請求項１９】前記制御手段は、前記保持手段の未使
用容量に応じて前記形式変換手段における変換方法を制
御することを特徴とする請求項１８記載の撮像装置。
【請求項２０】前記形式変換手段は、画像データを圧
縮することを特徴とする請求項１９記載の撮像装置。
【請求項２１】前記制御手段は、前記保持手段の未使
用容量が所定値未満であった場合に、前記形式変換手段
において該未使用容量が所定値以上であった場合よりも
高い圧縮率による圧縮を行なうことを特徴とする請求項
２０記載の撮像装置。
【請求項２２】更に、前記ブレによる撮影時の影響を
補正する手ブレ補正手段を有し、前記画素ずらし手段は、前記手ブレ補正手段によって画
素ずらしを行なうことを特徴とする請求項１５記載の撮
像装置。
【請求項２３】撮像手段上に被写体像を結像し、光電
変換により画像信号を生成する撮像装置における撮像方
法であって、操作者が撮影モードを設定するモード設定工程と、操作者が前記撮像手段による撮影開始を指示する撮影指
示工程と、前記モード設定工程において第１のモードが設定された
場合に、前記撮像手段により１画面の画像データを得る
ノーマル撮影工程と、前記ノーマル撮影工程において得られた画像データを第
１の形式に変換する第１の変換工程と、前記モード設定工程において第２のモードが設定された
場合に、前記撮像手段上に結像する被写体像の位置を所
定量平行移動させて複数画面の画像データを得る画素ず
らし撮影工程と、該画素ずらし工程において得られた複数画面の画像デー
タを合成する合成工程と、前記前記合成工程において合成された画像データを第２
の形式に変換する第２の変換工程と、前記第１及び第２の形式に変換された画像データを記憶
手段に保存する保存工程と、を有することを特徴とする
撮像方法。
【請求項２４】前記第１の変換工程においては画像デ
ータを前記第１の形式に圧縮し、前記第２の変換工程においては、画像データを前記第１
の形式よりも高い圧縮率となる第２の形式に圧縮するこ
とを特徴とする請求項２３記載の撮像方法。
【請求項２５】更に、撮像装置のブレの度合を検出す
るブレ検出工程を有し、前記ブレの度合が所定値以上であった場合に、前記合成
工程における画像データの合成を行なわないことを特徴
とする請求項２４記載の撮像方法。
【請求項２６】更に、前記記憶手段の未使用容量を検
知する容量検知工程を有し、前記記憶手段の未使用容量が所定値未満であった場合
に、前記ノーマル撮影工程による撮影を行ない、更に、
前記第２の変換工程において前記ノーマル撮影工程にお
いて得られた画像データを前記第２の形式に変換するこ
とを特徴とする請求項２５記載の撮像方法。
【請求項２７】撮像手段上に被写体像を結像し、光電
変換により画像信号を生成する撮像装置における撮像方
法のプログラムコードが格納されたコンピュータ可読メ
モリであって、操作者が撮影モードを設定するモード設定工程のコード
と、操作者が前記撮像手段による撮影開始を指示する撮影指
示工程のコードと、前記モード設定工程において第１のモードが設定された
場合に、前記撮像手段により１画面の画像データを得る
ノーマル撮影工程のコードと、前記ノーマル撮影工程において得られた画像データを第
１の形式に変換する第１の変換工程のコードと、前記モード設定工程において第２のモードが設定された
場合に、前記撮像手段上に結像する被写体像の位置を所
定量平行移動させて複数画面の画像データを得る画素ず
らし撮影工程のコードと、該画素ずらし工程において得られた複数画面の画像デー
タを合成する合成工程のコードと、前記前記合成工程において合成された画像データを第２
の形式に変換する第２の変換工程のコードと、前記第１及び第２の形式に変換された画像データを記憶
手段に保存する保存工程のコードと、を有することを特
徴とするコンピュータ可読メモリ。