JP3398141B2 - デジタルカメラおよび画像処理装置 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、電子スチルカメラ
等のデジタルカメラならびに画像処理装置に係り、例え
ば、画像データをＭＰＥＧ（Moving Picture Expert Gr
oup）およびＪＰＥＧ（Joint Photographic Coding Exp
ert Group）規格に従って符号化・復号化する機能を備
えたものに関する。

【０００２】

【従来の技術】近年、１９世紀以来の銀塩写真技術を使
用したカメラに代わって、電子スチルカメラの需要がま
すます拡大している。電子スチルカメラにおいては、画
像データを伝送および蓄積する際に、画像データを圧縮
してデータ量を減らすことにより効率的に処理するため
に、データの圧縮・伸張技術として「ＪＰＥＧ」方式が
用いられている。このＪＰＥＧ方式は、ＩＳＯ（Intern
ational Organization for Standardization）／ＩＥＣ
（International Electrotechnical Commission）傘下
のＪＰＥＧ委員会（ISO/IEC 10918-1）によって標準化
されている。

【０００３】ＪＰＥＧ方式はＪＰＥＧアルゴリズムとも
呼ばれ、その技術の核となるのが離散コサイン変換（Ｄ
ＣＴ；Discrete Cosine Transform）である。そして、
ＪＰＥＧ方式は、電子スチルカメラだけでなく、ＣＤ−
ＲＯＭ（CD-Read Only Memory）システム等の画像デー
タの処理にも広く利用されている。また、ＪＰＥＧ方式
によれば動画像データの圧縮・伸張を行うことも可能で
あるため、ＪＰＥＧ方式を用いた電子スチルカメラには
動画像の撮影機能を備えたものもある。このようにＪＰ
ＥＧ方式を用いて動画像データの圧縮・伸張を行う技術
は、Ｍ−ＪＰＥＧ（Motion-JPEG）と呼ばれる。

【０００４】ところで、マルチメディアで扱われる情報
は、膨大な量で且つ多種多様であり、これらの情報を高
速に処理することがマルチメディアの実用化を図る上で
必要となってくる。情報を高速に処理するためには、デ
ータの圧縮・伸長技術が不可欠となる。そのようなデー
タの圧縮・伸長技術としては「ＭＰＥＧ」方式があげら
れる。このＭＰＥＧ方式は、ＩＳＯ／ＩＥＣ傘下のＭＰ
ＥＧ委員会（ISO/IECJTC1/SC29/WG11）によって標準化
されている。

【０００５】ＭＰＥＧビデオパートで用いられる技術の
核となるのが、動き補償付予測（ＭＣ；Motion Compens
ated prediction）とＤＣＴである。ＭＣとＤＣＴを併
用した符号化技術は、ハイブリッド符号化技術と呼ばれ
る。つまり、ＭＰＥＧ方式は、ＪＰＥＧ方式にＭＣを組
み合わせた技術であるといえる。ＭＰＥＧ方式は、各種
蓄積メディア（ビデオＣＤ（Compact Disc）、ＣＤ−Ｒ
ＯＭ、ＤＶＤ、ビデオテープ、不揮発性半導体メモリを
用いたメモリカード、等）、ＬＡＮ（Local Area Netwo
rk）等の各種通信メディア、各種放送メディア（地上波
放送、衛星放送、ＣＡＴＶ（Community Antenna Televi
sion））を含む伝達メディア全般に対応している。

【０００６】このようなＭＰＥＧ方式を利用した電子ス
チルカメラ等のデジタルカメラにあっては、動画像の撮
影中に動画像の１フレーム分に相当する静止画像をスナ
ップショットとして記録できるようにすることが要望さ
れており、例えば、特開平１１−７５１４８号公報に同
様の技術が開示されている。そして、このような動画像
の撮影中に静止画像をスナップショットとして記録可能
なデジタルカメラにおいて、静止画像データをスナップ
ショットとして退避・保存するための専用の記憶領域を
設けることも知られている。

【０００７】

【発明が解決しようとする課題】従来例のように、静止
画像データをスナップショットとして退避・保存するた
めの専用の記憶領域を設けるものにあっては、スナップ
ショットのためのスチル撮影が指示されるまでは、この
専用の記憶領域は活用されない。すなわち、スナップシ
ョット記録のためだけの記憶領域を設ける必要があり、
メモリ部の面積が大きくなりコスト高となる。また、メ
モリ部の面積を小さく抑えて、その中にスナップショッ
ト記録のための記憶領域を確保した場合、そのぶん動画
記録のための記憶領域が少なくなって動画記録を円滑に
行うことができない問題が生じる。

【０００８】本発明は、デジタルカメラや画像処理装置
において、斯かる問題点を解消することをその目的とす
る。

【０００９】

【課題を解決するための手段】請求項１のデジタルカメ
ラは、動画像の撮影中に動画像の一部に相当する静止画
像を記録可能なデジタルカメラにおいて、入力されたデ
ータを順次記憶するための複数の記憶領域を有する記憶
手段と、前記記憶領域がサイクリックに使用されるよう
前記記憶手段の入出力を制御する制御手段とを含み、前
記制御手段が、前記複数の記憶領域の内、任意の記憶領
域にデータを保存したときに、残りの記憶領域がサイク
リックに使用されるよう前記記憶手段の入出力を制御す
るメモリ制御装置を備え、前記記憶手段は、入力された
動画像データを前記複数の記憶領域に順次記憶し、前記
制御手段が、前記複数の記憶領域の内、前記静止画像の
保存指示のタイミングでデータを取り込んだときに、そ
のデータを記憶した記憶領域を除く残りの記憶領域に前
記動画像データが取り込まれるよう前記記憶手段の入出
力を制御することをその要旨とする。

【００１０】請求項２のデジタルカメラは、請求項１に
記載の発明において、前記個々の記憶領域には、前記動
画像データが１画面単位で記憶されることをその要旨と
する。請求項３のデジタルカメラは、請求項１又は２に
記載の発明において、前記制御手段が、再び前記静止画
像の保存指示のタイミングでデータを取り込んだとき、
前に保存したデータをキャンセルし、新たに取り込んだ
データを記憶する記憶領域を除く残りの記憶領域に前記
動画像データが取り込まれるよう前記記憶手段の入出力
を制御することをその要旨とする。請求項４のデジタル
カメラは、請求項１又は２に記載の発明において、前記
制御手段が、再び前記静止画像の保存指示のタイミング
でデータを取り込んだとき、前に保存したデータを記憶
する記憶領域と新たに取り込んだデータ記憶する記憶領
域とを除く残りの記憶領域に前記動画像データが取り込
まれるよう前記記憶手段の入出力を制御することをその
要旨とする。

【００１１】請求項５のデジタルカメラは、請求項１乃
至４のいずれか１項に記載の発明において、前記動画像
データを符号化する動画像符号化手段と、前記静止画像
を符号化する静止画像符号化手段とを更に備え、前記制
御手段は、前記動画像符号化手段による符号化処理の終
了後に、前記記憶手段に記憶されている画像データを前
記静止画像符号化手段に送出することをその要旨とす
る。請求項６の発明は、画像データをメモリに格納する
ための制御を行うメモリ制御装置を備えた画像処理装置
において、前記メモリは、動画像および静止画像のデー
タをそれぞれ所定の画像処理に付するためにそれらを一
時的に格納する共通化エリアを有し、前記メモリ制御装
置は、静止画像データの格納に当たっては、その共通化
エリアのうち既に処理が済んだ動画像のデータが存在す
る領域を利用する一方、動画像データの格納に当たって
は、その共通化エリアのうち未処理の静止画像データが
格納されている領域以外の領域を順次利用することをそ
の要旨とする。請求項７の発明は、画像データをメモリ
に格納するための制御を行うメモリ制御装置を備えたデ
ジタルカメラにおいて、前記メモリは、動画像を撮影中
に静止画像の撮影が指示された場合、動画像および静止
画像のデータをそれぞれ所定の画像処理に付するために
それらを一時的に格納する共通化エリアを有し、前記メ
モリ制御装置は、静止画像データの格納に当たっては、
その共通化エリアのうち既に処理が済んだ動画像のデー
タが存在する領域を利用する一方、動画像データの格納
に当たっては、その共通化エリアのうち未処理の静止画
像データが格納されている領域以外の領域を順次利用す
ることをその要旨とする。

【００１２】請求項８のデジタルカメラは、請求項７に
記載の発明において、動画像の撮影中に２回目の静止画
像の撮影が指示された場合、前記メモリ制御装置は、２
回目の静止画像データの格納に当たっては、１回目に撮
影された静止画像データが格納されている領域以外の領
域を利用することをその要旨とする。請求項９のデジタ
ルカメラは、請求項８に記載の発明において、使用者の
指示にしたがい、前記１回目に撮影された静止画像デー
タと２回目に撮影された静止画像データとのうち、一方
を選択して最終的に保存する制御部をさらに備えたこと
をその要旨とする。請求項１０のデジタルカメラは、請
求項７に記載の発明において、動画像の撮影中に２回目
の静止画像の撮影が指示された場合、前記メモリ制御装
置は、２回目の静止画像データの格納に当たっては、１
回目に撮影された静止画像データが格納されている領域
を上書きして利用することをその要旨とする。

【００１３】

【発明の実施の形態】本発明を具体化した一実施形態を
図面に基づいて説明する。図１は、ＪＰＥＧおよびＭＰ
ＥＧ方式を用いた電子スチルカメラ１のブロック回路図
である。電子スチルカメラ１は、撮像デバイス２、信号
処理回路３、画像データ補正回路４、ＪＰＥＧコア回路
５、ＭＰＥＧコア回路６、フレームバッファ７、表示回
路８、ディスプレイ９、メモリカード１０、入出力回路
１１、データバス１２，１３、制御コア回路１４、操作
ボタン群１５から構成されている。

【００１４】制御コア回路１４は、操作ボタン群１５の
ＯＮ／ＯＦＦ信号に応じて、電子スチルカメラ１の各構
成要素２〜１３を制御する。操作ボタン群１５は、静止
画記録ボタン１５ａ、動画記録ボタン１５ｂおよびその
他の操作ボタン１５ｃを有している。撮像デバイス２は
ＣＣＤ（Charge Coupled Device）等から構成され、被
写体画像を撮影して出力信号を生成する。信号処理回路
３は、Ａ／Ｄ変換回路を含み、撮像デバイス２の出力信
号をＡ／Ｄ変換した後、ホワイトバランス調整やガンマ
補正等を行って、画面単位で、例えば画素数が縦１２０
０×横１６００の原画像データを生成する。信号処理回
路３の生成したデジタルの原画像データは、データバス
１２を介して、フレームバッファ７または表示回路８の
少なくともいずれかへ転送される。

【００１５】表示回路８は、データバス１２を介して転
送されてきた１画面ずつの画像データから画像信号を生
成する。ディスプレイ９は、表示回路８の生成した画像
信号を被写体画像として表示する。フレームバッファ７
は書き換え可能な半導体メモリ（例えば、ＳＤＲＡＭ
（Synchronous Dynamic RAM）、ＤＲＡＭ、ラムバスＤ
ＲＡＭ、等）から構成され、データバス１２を介して転
送されてきた画面、すなわちフレーム単位で画像データ
を記憶すると共に、記憶した画像データを１画面ずつ読
み出す。また、このフレームバッファ７には、動画像記
録中、静止画記録ボタン１５ａのＯＮ信号に応じて、該
当する１フレーム分の静止画像データを一時的に退避し
て記憶する記憶領域７ａ（以下、退避用記憶領域７ａと
もいう）を備えている。尚、記憶領域７ａが本発明にお
ける「記憶手段」の一例である。

【００１６】フレームバッファ７から読み出された１画
面ずつの画像データは、データバス１２を介して画像デ
ータ補正回路４へ転送される。画像データ補正回路４
は、信号処理回路３から入力された画像データに対し、
後述する補正処理を行う。画像データ補正回路４の生成
した補正処理後の１画面ずつの画像データは、データバ
ス１２を介して、ＪＰＥＧコア回路５又はＭＰＥＧコア
回路６へ転送される。

【００１７】メモリカード１０は電子スチルカメラ１に
対して着脱可能に装着されており、メモリカード１０内
にはフラッシュメモリ１０ａが設けられている。フラッ
シュメモリ１０ａは、データバス１３を介して転送され
てきた１画面ずつの圧縮画像データを書き込んで記憶す
ると共に、記憶した圧縮画像データを１画面ずつ読み出
してデータバス１３へ転送する。

【００１８】入出力回路１１は、データバス１３を介し
て転送されてきた１画面ずつの画像データを、電子スチ
ルカメラ１に接続された外部機器（例えば、外部ディス
プレイ、パーソナルコンピュータ、プリンタ、等）へ出
力すると共に、当該外部機器から入力された画像データ
をデータバス１３へ転送する。メモリカード１０から読
み出された画像データまたは入出力回路１１を介して入
力された画像データは、データバス１３を介してＪＰＥ
Ｇコア回路５又はＭＰＥＧコア回路６へ転送される。

【００１９】ＪＰＥＧコア回路５は、図２に示すとお
り、ＤＣＴ回路１６、量子化回路１７、ハフマン符号化
回路１８、ハフマン復号回路１９、逆量子化回路２０、
逆ＤＣＴ（ＩＤＣＴ；Inverse DCT）回路２１から構成
されている。ＪＰＥＧコア回路５においては、１画面の
画像データがＪＰＥＧ方式の規格によって定められた複
数のマクロブロックに分割され、その各ブロック毎に圧
縮・伸張処理が行われる。ここで、ＤＣＴ回路１６，量
子化回路１７，ハフマン符号化回路１８はＪＰＥＧエン
コーダを構成し、静止画像データの圧縮・符号化処理を
行い、ハフマン復号回路１９，逆量子化回路２０，逆Ｄ
ＣＴ回路２１はＪＰＥＧデコーダを構成する。尚、ＪＰ
ＥＧコア回路５（ＪＰＥＧエンコーダ）が本発明におけ
る「静止画像符号化手段」の一例である。

【００２０】ＤＣＴ回路１６は、フレームバッファ７か
ら読み出された１画面ずつの画像データに対して、１画
面の画像データを１ブロック単位で取り込み、その画像
データに対して２次元の離散コサイン変換（ＤＣＴ：Di
screte Cosine Transform）を行ってＤＣＴ係数を生成
する。量子化回路１７は、ＤＣＴ回路１６から供給され
たＤＣＴ係数を、図示しないＲＡＭに記憶された量子化
テーブルに格納されている量子化しきい値を参照して量
子化する。

【００２１】ハフマン符号化回路１８は、量子化回路１
７にて量子化されたＤＣＴ係数を、図示しないＲＡＭに
記憶されたハフマンテーブルに格納されているハフマン
符号を参照して可変長符号化することにより、圧縮され
た画像データを１画面ずつ生成する。ハフマン符号化回
路１８の生成した圧縮画像データは、データバス１３を
介して、メモリカード１０または入出力回路１１の少な
くともいずれかへ転送される。

【００２２】ＭＰＥＧコア回路６は、ＪＰＥＧコア回路
５に第１および第２ＭＣ（動き補償付予測）回路２２
ａ，２２ｂを付加して構成される。したがって、ＤＣＴ
回路１６、量子化回路１７、ハフマン符号化回路１８、
ハフマン復号回路１９、逆量子化回路２０、逆ＤＣＴ回
路２１は、ＪＰＥＧコア回路５とＭＰＥＧコア回路６と
で共有化され、制御コア回路１４からの切替信号によ
り、ＪＰＥＧコア回路５を使用するのか、また、これに
第１および第２ＭＣ回路２２ａ，２２ｂを付加したＭＰ
ＥＧコア回路６を使用するのかが選択される。但し、Ｊ
ＰＥＧとＭＰＥＧとでは、上記した量子化テーブルおよ
びハフマンテーブルを別々に備えるものとする。

【００２３】ＭＰＥＧコア回路６においては、１画面の
画像データがＭＰＥＧ方式の規格によって定められた複
数のマクロブロックに分割され、その各ブロック毎に圧
縮・伸張処理が行われる。ここで、ＤＣＴ回路１６，量
子化回路１７，ハフマン符号化回路１８、ＭＣ回路２２
ａはＭＰＥＧエンコーダを構成し、動画像データの圧縮
符号化処理を行い、ハフマン復号回路１９，逆量子化回
路２０，逆ＤＣＴ回路２１、ＭＣ回路２２ｂはＭＰＥＧ
デコーダを構成する。尚、ＭＰＥＧコア回路６（ＭＰＥ
Ｇエンコーダ）が本発明における「動画像符号化手段」
の一例である。

【００２４】そして、ＭＰＥＧエンコーダの生成した圧
縮画像データも、データバス１３を介して、メモリカー
ド１０または入出力回路１１の少なくともいずれかへ転
送される。ＪＰＥＧコア回路５又はＭＰＥＧコア回路６
において、ハフマン復号回路１９は、データバス１３を
介して転送されてきた１画面ずつの圧縮画像データを、
ハフマン符号を参照して可変長復号することにより、伸
張された画像データを１画面ずつ生成する。

【００２５】逆量子化回路２０は、ハフマン復号回路１
９の生成した１画面ずつの伸張画像データを、量子化し
きい値を参照して逆量子化することにより、ＤＣＴ係数
を生成する。逆ＤＣＴ回路２１は、逆量子化回路２０の
生成したＤＣＴ係数に対して２次元の離散コサイン逆変
換（ＩＤＣＴ：Inverse DCT）を行う。ここで、ＭＰＥ
Ｇコア回路６においては、逆ＤＣＴ回路２１にて離散コ
サイン逆変換が行われた１画面ずつの伸張画像データに
対し第２ＭＣ回路２２ｂによりＭＣ処理を施す。

【００２６】ＪＰＥＧコア回路５又はＭＰＥＧコア回路
６からの伸張画像データは、データバス１２を介してフ
レームバッファ７へ転送される。そして、フレームバッ
ファ７は、ＪＰＥＧコア回路５又はＭＰＥＧコア回路６
からデータバス１２を介して転送されてきた１画面ずつ
の画像データを書き込んで記憶する。また、表示回路８
は、フレームバッファ７からデータバス１２を介して転
送されてきた１画面ずつの画像データから画像信号を生
成し、その画像信号はディスプレイ９上で被写体画像と
して表示される。

【００２７】画像データ補正回路４は、図３に示すとお
り、デジタルフィルタ部２３、ＲＯＭ２４およびタイミ
ング制御部２５から構成されている。デジタルフィルタ
部２３は、非循環型デジタルフィルタである空間フィル
タ、例えばＦＩＲ（Finite Impulse Response）フィル
タを含み、図４に示すとおり、信号処理回路３から入力
されたｎビットの入力信号をサンプリング周期毎に遅延
させるためのｎ個の遅延器２６…と、ｎ＋１個の乗算器
２７…と、この乗算器２７…からの信号を畳み込むため
の加算器２８とから構成される。乗算器２７…の各係数
ａn，ａn-1……ａ2，ａ1は、フィルタの特性を決定する
係数であり、動画像データをフィタリング処理する場合
の係数と静止画像データをフィルタリング処理する場合
の係数とが予めＲＯＭ２４内に書き込まれてある。ＲＯ
Ｍ２４に記憶させている係数は、予め製造段階において
シミュレーションにより適切な値に設定される。

【００２８】例えば、動画像データをフィルタリング処
理する場合には、線形補間等の考え方を用い、サンプリ
ング周期毎に各係数の値を変化させることで、良好な低
画素密度画像を得る。一例として、横方向の画素数を２
／３にする場合を考える。いま、仮に原画像において３
個の画素ｐ1〜ｐ3が横向きに配列されており、動画像デ
ータに対するフィルタリング処理により、これらの画素
を２個の画素ｑ1，ｑ2に変換する。このために、ｑ1と
ｑ2をそれぞれｐ1，ｐ2，ｐ3の一次線形和で表現する。
すなわち、画素数をどの程度減らすか、その比率を定め
た上で、線形和の各係数を実験等で定めればデータ量低
減のためのフィルタリング処理が実現する。一例とし
て、画素数を例えば縦４８０×横７２０に低減しても良
い。一方、静止画像データをフィルタリング処理する場
合には、高周波領域を強調するように各係数の値を設定
し、ハイパスフィルターを形成しても良い。こうするこ
とで、画素数を一定に維持したまま、エッジ部の劣化の
ない鮮明化された画像を得ることができる。

【００２９】尚、本実施形態にあっては、ｎ＝８に設定
しているが、これには当然設計の自由度がある。タイミ
ング制御部２５は、制御コア回路１４の制御に従って、
ＲＯＭ２４からの係数の読み出しのタイミング、入出力
データのラッチのタイミング、フィルタ演算のタイミン
グ等を制御する。斯かる構成に基づいて、画像データの
記録動作を図５〜図８に示すフローチャートに従って説
明する。

【００３０】図５において、静止画記録ボタン１５ａが
ＯＮされると、図６に示す静止画像処理が行われ、動画
記録ボタン１５ｂがＯＮされると、図７に示す動画像処
理が行われる。 （静止画像記録）図６において、撮像デバイス２から取
り込まれた原画像信号は、静止画記録ボタン１５ａのＯ
Ｎ信号に対応するタイミングで信号処理回路３に入力さ
れ、ここで１画面のデジタルの原画像データに変換され
て、フレームバッファ７に取り込まれる（Ｓ１）。そし
て、フレームバッファ７から１画面の原画像データが、
画像データ補正回路４に送出されると共に表示回路８に
送出されてディスプレイ９上に静止画像が表示される
（Ｓ２）。

【００３１】画像データ補正回路４に取り込まれたデー
タは、画像データ補正回路４において、上述した静止画
像対応の補正処理が行われ（Ｓ３）、補正後のデータが
ＪＰＥＧコア回路５に入力され、所定の圧縮・符号化処
理が行われた後（Ｓ４）、フラッシュメモリ１０ａに記
録される（Ｓ５）。 （動画像記録）図７において、撮像デバイス２から取り
込まれた原画像信号は、動画記録ボタン１５ｂのＯＮ信
号に対応するタイミングで信号処理回路３に入力され、
ここで１画面ずつのデジタルの原画像データに変換され
て、フレームバッファ７に順次取り込まれる（Ｓ１
１）。そして、フレームバッファ７から１画面ずつの原
画像データが、画像データ補正回路４に送出されると共
に表示回路８に送出されてディスプレイ９上に動画像が
表示される（Ｓ１２）。

【００３２】画像データ補正回路４に順次取り込まれた
データは、画像データ補正回路４において、上述した動
画像対応の補正処理が行われ（Ｓ１３）、補正後のデー
タがＭＰＥＧコア回路６に入力され、所定の圧縮・符号
化処理が行われた後（Ｓ１４）、フラッシュメモリ１０
ａに記録される（Ｓ１５）。この動作は、動画記録ボタ
ン１５ｂから再びＯＮ信号が送出されるまで続行される
（Ｓ１６）。 （スナップショット記録）図７において、動画像の記録
期間中に、静止画記録ボタン１５ａからＯＮ信号が送出
されると、制御コア回路１４は、スナップショットのた
めのスチル撮影が外部から指示されたと判断し、図８に
示すスナップショット処理を実行する（Ｓ１７）。

【００３３】図８において、動画像の記録期間中に、静
止画記録ボタン１５ａからＯＮ信号が送出されると、１
フレーム分の画像データをフレームバッファ７の退避用
記憶領域７ａに一時的に退避・記憶させる（Ｓ２１）。
この退避動作のあいだ、動画像の記録動作はそのまま継
続される。すなわち、撮像デバイス２から取り込まれた
原画像信号が信号処理回路３に入力され、ここで１画面
ずつのデジタルの原画像データに変換されて、フレーム
バッファ７に順次取り込まれる（Ｓ２２）。そして、フ
レームバッファ７から１画面ずつの原画像データが、画
像データ補正回路４に送出されると共に表示回路８に送
出される。

【００３４】画像データ補正回路４に順次取り込まれた
データは、画像データ補正回路４において、上述した動
画像対応の補正処理が行われ（Ｓ２３）、補正後のデー
タがＭＰＥＧコア回路６に入力され、所定の圧縮・符号
化処理が行われた後（Ｓ２４）、フラッシュメモリ１０
ａに記録される（Ｓ２５）。ここで、本実施形態では、
フレームバッファ７から表示回路に対し、１画面ずつの
原画像データを送出すると共に退避用記憶領域７ａに退
避させた１フレーム分の画像データをも送出する。こう
することで、ディスプレイ９上には現在撮影中の動画像
とスナップショットとして記録したい静止画像とが並行
表示される（Ｓ２６）。図９はディスプレイ９上での動
画像と静止画像とを並行表示させる一例を示しており、
静止画像１００を主画面とし、画面右上に、画面の１／
１６の大きさで動画像２００を表示させる。

【００３５】静止画像の表示は所定時間（例えば５秒
間）行われ、５秒経過すると動画像のみの表示に切り替
わり（Ｓ２７）、図７に示す通常の動画像処理に戻る
（Ｓ２８）。使用者は、静止画像が並行表されている５
秒の間に、所望のスナップショットを撮影することがで
きたか否かをディスプレイ９上で確認することができ
る。

【００３６】また、５秒経過する前に、再び静止画記録
ボタン１５ａからＯＮ信号が送出されると、そのＯＮ信
号に対応するタイミングで取り込まれたデータに基づい
てＳ２１〜Ｓ２７の処理を行う（Ｓ２９）。この場合、
退避用記憶領域７ａの内容は新しいデータに置き換わ
る。図１０は動画像処理およびスナップショット処理に
おけるフレームバッファ７の使用状況を説明するための
図である。同図において、フレームバッファ７は、４個
の通常の記憶領域Ａ〜Ｄを備え、各記憶領域Ａ〜Ｄに
は、それぞれ１画面（１フレーム）分のデータが格納さ
れる。もちろん、記憶領域の数は、カメラ１の仕様に応
じて適宜変更される。

【００３７】図１０において、図７に示す通常の動画像
処理では、図１０（ａ）のとおり、信号処理回路３から
の１画面ずつのデジタルの原画像データは、Ａ→Ｂ→Ｃ
→Ｄの順に順次格納され、先に入ったものから順にデー
タバス１２に出力される（First-In First-Out）。そし
て、最後の記憶領域Ｄにデータが格納されると、再び記
憶領域Ａが使用される。すなわち、記憶領域Ａ〜Ｄがサ
イクリックに使用される。フレームバッファ７のサイク
リックな利用には、ＬＲＵ（Least Recently Used）ア
ルゴリズム、その他ページメモリ制御方法が採用されて
もよい。

【００３８】動画像の処理中、スナップショットのため
に静止画記録ボタン１５ａからＯＮ信号が送出される
と、そのＯＮ信号に対応するタイミングで取り込まれた
データが、ある記憶領域に格納され、その領域がそのま
ま静止画像データの退避用記憶領域７ａとして使用され
る。例えば、スナップショット記録のタイミングで取り
込まれたデータが、３番目の記憶領域Ｃに格納された場
合は、図１０（ｂ）のとおり、その記憶領域Ｃが退避用
記憶領域７ａとして使用され、それ以降の動画像処理に
おいては、記憶領域Ａ，Ｂ，Ｄがサイクリックに使用さ
れる。その後、再びスナップショット記録のタイミング
で取り込まれたデータが、今度は２番目の記憶領域Ｂに
格納された場合、図１０（ｃ）のとおり、３番目の記憶
領域Ｃのデータがキャンセル、すなわち保護の対象から
外されて、２番目の記憶領域Ｂが退避用記憶領域７ａと
して使用され、それ以降の動画像処理においては、それ
以外の記憶領域Ａ，Ｃ，Ｄがサイクリックに使用され
る。

【００３９】尚、本発明においては、記憶領域Ａ〜Ｄを
順序通りに使用することが望ましいが、例えば、ＡＣＤ
ＢＡＣ…やＡＣＤＡＢＣ…のように使用しても良く、要
は、記憶領域が複数存在する場合には、前のデータと次
のデータとで異なる記憶領域を使用するよう制御すれば
良く、このような形態であっても、本発明における「サ
イクリックに使用する」ことの概念に含まれる。また、
当初、記憶領域を２個のみ準備した場合には、スナップ
ショットの記録データを保存することで、それ以降の動
画像データは、１つの記憶領域に取り込まれた後、順次
出力されることになるが、このような形態であっても、
本発明における「サイクリックに使用する」ことの概念
に含まれる。

【００４０】動画像記録が終了すると、図７において、
制御コア回路１４は、動画像の記録動作中に、上記した
静止画像の退避動作が行われたか否かを判定し（Ｓ１
８）、退避動作が行われている場合、退避用記憶領域７
ａに記憶されている１フレーム分のデータをデータバス
１２を介して画像データ補正回路４に転送し、上述した
静止画像記録と同様の処理を行う（Ｓ１９）。

【００４１】以上に説明した本実施形態の電子スチルカ
メラ１にあっては、以下のとおりの作用効果を奏する。 （１）動画像の撮影中に、スナップショットとして静止
画像を抽出することができるので、電子スチルカメラと
しての機能が向上する。 （２）スナップショットとして撮影した静止画像をディ
スプレイ９上に表示させるので、使用者は、スナップシ
ョットの撮影具合を容易に確認することができ、気に入
らなければ直ちに撮り直せば良く、スナップショットの
撮影ミスの発生度合いを軽減することができる。したが
って、電子スチルカメラとしての商品的価値を高めるこ
とができる。

【００４２】（３）上記（２）に加え、現在撮影中の動
画像を並行表示させるので、動画像の撮影状態もリアル
タイムに確認することができる。 （４）上記（２）（３）に加え、ディスプレイ９上で
は、スナップショットとして記録すべき静止画像を主画
面とし、動画像は画面の例えば１／１６のサイズで小さ
く表示させるので、スナップショットの撮影具合をきわ
めて容易に確認することができる。

【００４３】（５）上記（２）に加え、スナップショッ
トとして記録すべき静止画像は、一時的にディスプレイ
９上に表示されるだけなので、動画像記録のディスプレ
イ９上での確認作業を長時間阻害することがない。 （６）図１０に示すとおり、スナップショットのための
スチル撮影が指示されるまでは退避用記憶領域７ａを設
けず、すべて通常の記憶領域として利用するため、フレ
ームバッファ７の利用効率が高まる。

【００４４】（７）静止画像データをデータ補正回路４
を用いて、より最適な画像に補正することができる。 （８）動画像データはもとより、静止画像データもデー
タ補正回路４を通過するよう構成したので、静止画像に
別途補正処理したい場合であっても、ＲＯＭ２４内に係
数を記憶させるだけでよく、低コストで機能を向上させ
ることができる。

【００４５】しかも、別途、静止画像専用の補正回路を
設ける必要がないので、機器の大型化および消費電力の
増大を防止することができる。 （９）ＪＰＥＧコア回路５およびＭＰＥＧコア回路６に
おいて、ＤＣＴ回路１６、量子化回路１７、ハフマン符
号化回路１８、ハフマン復号回路１９、逆量子化回路２
０、逆ＤＣＴ（ＩＤＣＴ；Inverse DCT）回路２１を共
用しているので、電子スチルカメラ１の構成や演算処理
アルゴリズムなどを簡略化することができる。

【００４６】（１０）スナップショットのために退避用
記憶領域７ａを設けたので、静止画像と動画像の区分お
よび検索が容易になり、より迅速な再生が可能になる。 （１１）スナップショットのためのスチル撮影が指示さ
れた場合に、画像データ補正回路４に入力する前の１フ
レーム分の画像データを記憶領域７ａに一時的に退避・
記憶させるので、その後に画像データ補正回路４におい
てフィルタリング処理する際、垂直方向にフィルタリン
グ処理したりズーム処理したりすることが容易になると
ともに動画像記録を中断することなく行うことができ
る。

【００４７】本発明は上記実施形態に限定されるもので
はなく、以下のように変更してもよく、その場合でも同
等もしくはそれ以上の作用・効果を得ることができる。 （イ）図８のＳ２６において、ディスプレイ９上に、静
止画像のみを表示させる。 （ロ）図８のＳ２６において、ディスプレイ９上に並行
表示させる静止画像と動画像のサイズを逆転させる（動
画像を主画面とする）。また、静止画像の表示の許否を
使用者がボタン等により指定できる構成とする。

【００４８】（ハ）図８のＳ２９において、新たに撮影
されたスナップショットのための画像データを古いデー
タを置き換えずに、並列的に記憶させる。すなわち、図
１１に示すとおり、通常の動画像処理ではフレームバッ
ファ７の記憶領域Ａ〜Ｄをサイクリックに使用する（図
１１（ａ））。次に、１枚目のスナップショット記録の
タイミングで取り込まれたデータが、３番目の記憶領域
Ｃに格納された場合は、その記憶領域Ｃを退避用記憶領
域７ａとして使用し（図１１（ｂ））、それ以降の動画
像処理においては、それ以外の３個の記憶領域Ａ，Ｂ，
Ｄをサイクリックに使用する。そして、２枚目のスナッ
プショット記録のタイミングで取り込まれたデータが、
２番目の記憶領域Ｂに格納された場合は、２番目と３番
目の記憶領域Ｂ，Ｃを退避用記憶領域７ａとして使用し
（図１１（ｃ））、それ以降の動画像処理においては、
２個の記憶領域Ａ，Ｄをサイクリックに（交互に）使用
する。

【００４９】こうすることで、複数枚のスナップショッ
トを記録することができる。尚、スナップショットを記
録することができる枚数は、増やせば増やすほど、動画
像処理においてフレームバッファ７を使用することがで
きる領域が減るので、動画像処理時にフレームバッファ
７のオーバーフローが発生しない程度に設定する必要が
ある。また、この場合、制御コア回路１４は、使用者に
よる選択ボタン１５ｃなどの操作に伴い、記録した複数
枚のスナップショットのうち、いずれか１枚を選択して
最終的に保存するようにしてもよい。 （ニ）図８のＳ２９において、新たに撮影されたスナッ
プショットのための画像データを格納するための領域
を、古いデータが格納されている領域を上書きして利用
する。

【００５０】（ホ）メモリカード１０に代えて、光磁気
ディスク、光ディスク、磁気ディスクなどを用いる。 （ヘ）スナップショットのためのスチル撮影が指示され
た場合、画像データ補正回路４にて処理が終了した後の
画像データを退避用記憶領域７ａに一時的に退避・記憶
させる。こうすることにより、その後にＪＰＥＧコア回
路５で所定の圧縮処理を行う際にデータの取り出し処理
を容易に行うことができる。

【００５１】（ト）静止画像データは画像データ補正回
路４を通さない。 （チ）動画像データの圧縮・伸長にＭ−ＪＰＥＧ技術を
用いる。 （リ）静止画像データの圧縮・伸長にＪＰＥＧ以外に
も、差分処理をベースとする差分ＹＵＶやブロックベー
スのアダマール（Hadamard）変換、スラント（Slant）
変換、ハール（Haar）変換方式を利用した圧縮・伸長技
術を用いる。 （ヌ）スナップショットと動画像の一方を主画面に表示
することを述べたが、いずれを主画面に設定するかを使
用者から選択可能としてもよい。制御コア回路１４は、
使用者による選択ボタン１５ｃなどの操作に伴い、いず
れを主画面に表示するか切り替えてもよい。さらに、使
用者の指示にしたがい、制御コア回路１４は、スナップ
ショットの表示を禁止するモードを有してもよいし、使
用者が表示を指示する時間だけ表示してもよい。

【００５２】

【発明の効果】本発明は、円滑な動画記録動作を維持し
つつ、省面積化及び低コスト化を実現することが可能な
デジタルカメラおよび画像処理装置を提供することがで
きる。

【図面の簡単な説明】

【図１】本発明を具体化した実施形態における電子スチ
ルカメラのブロック回路図である。

【図２】本実施形態におけるＪＰＥＧコア回路およびＭ
ＰＥＧコア回路の概略を示すブロック図である。

【図３】本実施形態における画像データ補正回路の概略
を示すブロック図である。

【図４】本実施形態における画像データ補正回路のフィ
ルタ部を示す回路図である。

【図５】本実施形態における電子スチルカメラの動作を
示すフローチャートである。

【図６】本実施形態における電子スチルカメラの動作を
示すフローチャートである。

【図７】本実施形態における電子スチルカメラの動作を
示すフローチャートである。

【図８】本実施形態における電子スチルカメラの動作を
示すフローチャートである。

【図９】本実施形態における電子スチルカメラのスナッ
プショット記録時のディスプレイ画面を示す図である。

【図１０】本実施形態におけるフレームバッファの使用
形態を説明するための図である。

【図１１】本実施形態におけるフレームバッファの使用
形態の別例を説明するための図である。

【符号の説明】

１ 電子スチルカメラ ２ 撮像デバイス ３ 信号処理回路 ４ 画像データ補正回路 ５ ＪＰＥＧコア回路 ６ ＭＰＥＧコア回路 ７ フレームバッファ ８ 表示回路 ９ ディスプレイ １０ メモリカード １０ａ フラッシュメモリ １１ 入出力回路 １２，１３ データバス １４ 制御コア回路 １５ａ 静止画記録ボタン １５ｂ 動画記録ボタン １５ｃ 選択ボタン １６ ＤＣＴ回路 １７ 量子化回路 １８ ハフマン符号化回路 １９ ハフマン復号回路 ２０ 逆量子化回路 ２１ 逆ＤＣＴ回路 ２２ａ，２２ｂ ＭＣ回路 ２３ デジタルフィルタ部 ２４ ＲＯＭ ２５ タイミング制御部 ２６ 遅延器 ２７ 乗算器 ２８ 加算器

フロントページの続き (58)調査した分野(Int.Cl.⁷，ＤＢ名) H04N 5/76 - 5/956 H04N 7/24 - 7/68 H04N 101:00 G11B 20/10 - 20/12

Claims (10)

(57)【特許請求の範囲】
1. 【請求項１】 動画像の撮影中に動画像の一部に相当す
   る静止画像を記録可能なデジタルカメラにおいて、入力されたデータを順次記憶するための複数の記憶領域
   を有する記憶手段と、前記記憶領域がサイクリックに使
   用されるよう前記記憶手段の入出力を制御する制御手段
   とを含み、前記制御手段が、前記複数の記憶領域の内、
   任意の記憶領域にデータを保存したときに、残りの記憶
   領域がサイクリックに使用されるよう前記記憶手段の入
   出力を制御するメモリ制御装置を備え 、 前記記憶手段は、入力された動画像データを前記複数の
   記憶領域に順次記憶し、前記制御手段が、前記複数の記
   憶領域の内、前記静止画像の保存指示のタイミングでデ
   ータを取り込んだときに、そのデータを記憶した記憶領
   域を除く残りの記憶領域に前記動画像データが取り込ま
   れるよう前記記憶手段の入出力を制御することを特徴と
   したデジタルカメラ。
2. 【請求項２】 前記個々の記憶領域には、前記動画像デ
   ータが１画面単位で記憶されることを特徴とした請求項
   １に記載のデジタルカメラ。
3. 【請求項３】 前記制御手段が、再び前記静止画像の保
   存指示のタイミングでデータを取り込んだとき、前に保
   存したデータをキャンセルし、新たに取り込んだデータ
   を記憶する記憶領域を除く残りの記憶領域に前記動画像
   データが取り込まれるよう前記記憶手段の入出力を制御
   することを特徴とした請求項１又は２に記載のデジタル
   カメラ。
4. 【請求項４】 前記制御手段が、再び前記静止画像の保
   存指示のタイミングでデータを取り込んだとき、前に保
   存したデータを記憶する記憶領域と新たに取り込んだデ
   ータ記憶する記憶領域とを除く残りの記憶領域に前記動
   画像データが取り込まれるよう前記記憶手段の入出力を
   制御することを特徴とした請求項１又は２に記載のデジ
   タルカメラ。
5. 【請求項５】 前記動画像データを符号化する動画像符
   号化手段と、前記静止画像を符号化する静止画像符号化
   手段とを更に備え、前記制御手段は、前記動画像符号化
   手段による符号化処理の終了後に、前記記憶手段に記憶
   されている画像データを前記静止画像符号化手段に送出
   することを特徴とした請求項１乃至４のいずれか１項に
   記載のデジタルカメラ。
6. 【請求項６】 画像データをメモリに格納するための制
   御を行うメモリ制御装置を備えた画像処理装置におい
   て、 前記メモリは、動画像および静止画像のデータをそれぞ
   れ所定の画像処理に付するためにそれらを一時的に格納
   する共通化エリアを有し、 前記メモリ制御装置は、静止画像データの格納に当たっ
   ては、その共通化エリアのうち既に処理が済んだ動画像
   のデータが存在する領域を利用する一方、動画像データ
   の格納に当たっては、その共通化エリアのうち未処理の
   静止画像データが格納されている領域以外の領域を順次
   利用することを特徴とした画像処理装置。
7. 【請求項７】 画像データをメモリに格納するための制
   御を行うメモリ制御装置を備えたデジタルカメラにおい
   て、 前記メモリは、動画像を撮影中に静止画像の撮影が指示
   された場合、動画像および静止画像のデータをそれぞれ
   所定の画像処理に付するためにそれらを一時的に格納す
   る共通化エリアを有し、 前記メモリ制御装置は、静止画像データの格納に当たっ
   ては、その共通化エリアのうち既に処理が済んだ動画像
   のデータが存在する領域を利用する一方、動画像データ
   の格納に当たっては、その共通化エリアのうち未処理の
   静止画像データが格納されている領域以外の領域を順次
   利用することを特徴としたデジタルカメラ。
8. 【請求項８】 動画像の撮影中に２回目の静止画像の撮
   影が指示された場合、前記メモリ制御装置は、２回目の
   静止画像データの格納に当たっては、１回目に撮影され
   た静止画像データが格納されている領域以外の領域を利
   用することを特徴とした請求項７に記載のデジタルカメ
   ラ。
9. 【請求項９】 使用者の指示にしたがい、前記１回目に
   撮影された静止画像データと２回目に撮影された静止画
   像データとのうち、一方を選択して最終的に保存する制
   御部をさらに備えたことを特徴とした請求項８に記載の
   デジタルカメラ。
10. 【請求項１０】 動画像の撮影中に２回目の静止画像の
    撮影が指示された場合、前記メモリ制御装置は、２回目
    の静止画像データの格納に当たっては、１回目に撮影さ
    れた静止画像データが格納されている領域を上書きして
    利用することを特徴とした請求項７に記載のデジタルカ
    メラ。