JP4403340B2

JP4403340B2 - 画像記録装置及び画像記録／再生装置

Info

Publication number: JP4403340B2
Application number: JP2000227808A
Authority: JP
Inventors: 芳紀冨田
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2000-07-27
Filing date: 2000-07-27
Publication date: 2010-01-27
Anticipated expiration: 2020-07-27
Also published as: JP2002044531A

Description

【０００１】
【発明の属する技術分野】
本発明は、撮像素子を用いて撮像したデジタルビデオ信号を動画像又は静止画像として、記録媒体を介して記録／再生するための撮像装置、画像記録装置、画像記録／再生装置及び画像伝送方法に関する。
【０００２】
【従来の技術】
従来より、撮像素子を用いて撮像した撮像信号に基づくデジタルビデオ信号を離散コサイン変換(DCT:Discrete Cosine Transform) やウエーブレット変換と可変長符号により圧縮し、磁気テープや磁気ディスク、光ディスクなどの記録媒体に記録するようにしたデジタルビデオカメラの開発が進められている。このようなデジタルビデオカメラでは、動画記録モードばかりでなく、静止画記録モードが用意されている。デジタルビデオカメラの静止画記録モードでは静止画用の圧縮記録を行い、動画記録モードでは動画用の圧縮記録を行って記録媒体に記録される。静止画記録モードに設定すると、１つのフレームの画像信号が約５秒間繰り返して記録される。静止画記録モードは、静止画をデジタルデータで記録できるので、パーソナルコンピュータに取り込んで処理したり、直接プリントアウトしたりする場合に利用できる。
【０００３】
ここで、画像信号は、一般的に周波数の低域にスペクトルが集中し、高域に行くに従ってスペクトルが減少する傾向にある。ＤＣＴやウエーブレット変換では、この性質を使用し、直交変換により帯域毎に信号を分割することで、各基底のスペクトルに偏りを持たせる。そして、各基底のスペクトルに偏りを持たせたデータを量子化し、発生確率の高いシンボルには短い符号を与え、発生確率の低いシンボルには長い符号を与えることによりデータの圧縮が行われる。
【０００４】
【発明が解決しようとする課題】
ところで、従来のデジタルビデオカメラにおいては動画像の、あるフレームをＪＰＥＧ静止画として取り出す場合には、動画解像度と同程度の静止画（７２０pixels×４８４pixels）しか取り出すことができなかった。
【０００５】
また、より解像度の高い静止画を撮影できるようにしたデジタルビデオカメラにおいては、動画撮影（テレビジョンモニタ解像度程度）と静止画撮影は、ユーザが意識的に撮影時に選択しなければならず、同時に撮影されない。
【０００６】
そこで、本発明の目的は、動画撮影と静止画撮影を同時に行い、しかも高解像度の静止画像を得ることができるようにした撮像装置、画像記録装置、画像記録／再生装置及び画像伝送方法を提供することにある。
【０００８】
【課題を解決するための手段】
本発明に係る画像記録装置は、所定の読み出し周期で撮像信号が読み出される撮像素子と、動画像のフレーム周期の整数Ｎ（Ｎ≧２）倍の周期毎に１フレーム期間は、第１の解像度の撮像信号を上記撮像素子から読み出す第１の動作モードと、他のフレーム期間は、上記第１の解像度よりも低い第２の解像度の撮像信号を上記撮像素子から読み出す第２の動作モードとの２種類の動作モードで、上記撮像素子を駆動する駆動手段を有する撮像手段と、上記撮像手段から出力された撮像信号に解像度変換処理を施して、上記動画像のフレーム周期の整数Ｎ（Ｎ≧２）倍の周期毎の１フレーム期間に上記第１の解像度の撮像信号を上記第１の解像度及び上記第２の解像度よりも低い第３の解像度の画像信号に変換するとともに、上記他のフレーム期間に上記第２の解像度の撮像信号を該第３の解像度の画像信号に変換する解像度変換処理手段と、上記第３の解像度の画像信号に圧縮処理を施す圧縮処理手段と、上記圧縮処理手段により圧縮処理が施された上記第３の解像度の画像信号と、上記解像度変換処理により上記第１の解像度の画像信号から除去された該第１の解像度の情報を与える高周波成分の信号とを記録媒体に記録する記録手段と、上記各手段の動作を制御する制御手段とを備える。
【０００９】
また、本発明に係る画像記録／再生装置は、所定の読み出し周期で撮像信号が読み出される撮像素子と、動画像のフレーム周期の整数Ｎ（Ｎ≧２）倍の周期毎に１フレーム期間は、第１の解像度の撮像信号を上記撮像素子から読み出す第１の動作モードと、他のフレーム期間は、上記第１の解像度よりも低い第２の解像度の撮像信号を上記撮像素子から読み出す第２の動作モードとの２種類の動作モードで、上記撮像素子を駆動する駆動手段を有する撮像手段と、上記撮像手段から出力された撮像信号に解像度変換処理を施して、上記動画像のフレーム周期の整数Ｎ（Ｎ≧２）倍の周期毎の１フレーム期間に上記第１の解像度の撮像信号を上記第１の解像度及び上記第２の解像度よりも低い第３の解像度の画像信号に変換するとともに、上記他のフレーム期間に上記第２の解像度の撮像信号を該第３の解像度の画像信号に変換する解像度変換処理手段と、上記第３の解像度の画像信号に圧縮／伸長処理を施す圧縮／伸長処理手段と、記録時には、上記圧縮処理手段により圧縮処理が施された第３の解像度の画像信号と、上記解像度変換処理により上記第１の解像度の画像信号から除去された該第１の解像度の情報を与える高周波成分の信号とを記録媒体に記録し、再生時には、上記記録媒体から上記高周波成分の信号と該高周波成分の信号に対応する上記第３の解像度の画像信号とを再生して、該高周波成分の信号と該第３の解像度の画像信号から上記第１の解像度の画像信号を生成する記録／再生手段と、上記各手段の動作を制御する制御手段とを備える。
【００１１】
【発明の実施の形態】
以下、本発明の実施の形態について図面を参照して詳細に説明する。
【００１２】
本発明は、例えば図１に示すような構成の画像記録／再生システム１０に適用される。
【００１３】
この画像記録／再生システム１００は、データバス１０を介して接続された撮像部２０、記憶部３０、フィルタ処理部４０、画像圧縮／伸長処理部５０及び記録／再生部６０、映像出力部７０と、これらを制御する制御部８０などからなる。
【００１４】
上記制御部８０は、マイクロコンピュータを用いたシステムコントローラ８１からなり、シャッタボタン８２の押圧操作入力を受け付けて、記録動作モードの制御を行う。すなわち、この画像記録／再生システム１００は、上記シャッタボタン８２の押圧操作をトリガとして記録動作を開始するようになっており、上記システムコントローラ８１が上記シャッタボタン８２の押圧操作入力を検知することにより、記録動作モードの制御を行う。
【００１５】
上記撮像部２０は、駆動回路２１により駆動されるＣＣＤイメージセンサなどの固体撮像素子２２を備え、この固体撮像素子２２により得られた撮像信号が撮像信号処理回路２３に供給されるようになっている。上記撮像信号処理回路２３では、上記固体撮像素子２２により得られた撮像信号を輝度信号と色差信号に変換する。
【００１６】
この画像記録／再生システム１００において、上記駆動回路２１は、固体撮像素子２２から高解像度の撮像信号を読み出す第１の動作モードと低解像度の撮像信号を読み出す第２の動作モードの２種類の動作モードを切り替えて上記固体撮像素子２２を駆動できるようになっている。
【００１７】
第１の動作モードでは、図２の（Ａ），（Ｂ）に示すように、全画素の信号を２つのフィールドに分けて読み出すように固体撮像素子２２を駆動することによって、上記固体撮像素子２２から高解像度（例えば２５６０×１９２０画素）の撮像信号を読み出す。また、第２の動作モードでは、図３に示すように、８ライン中２ラインを読み出すことで、高解像度モードの１／４の期間で全有効エリアの信号を出力するように固体撮像素子２２を駆動することによって、上記固体撮像素子２２から低解像度（例えば２５６０×４８０画素）の撮像信号を読み出す。これにより、この画像記録／再生システム１００における撮像部２０では、Ｎフレーム周期で１フレームだけ第１の動作モードで上記固体撮像素子２２を駆動し、他の（Ｎ−１）フレームは第２の動作モードで上記固体撮像素子２２を駆動することにより、図４に示すように、低解像度の撮像信号を動画の撮像出力として得ると同時に、Ｎフレーム毎に１フレームだけ高解像度の撮像信号を静止画の撮像出力として得ることができる。
【００１８】
第１の動作モードで固体撮像素子２２を駆動することにより得られた高解像度の撮像信号は、記憶部２０に一度取り込まれる。この記憶部２０に取り込まれた高解像度の撮像信号から、フィルタ処理部４０により縦方向及び横方向に１／４に帯域制限された低解像度の画像（６４０×４８０画素）が作成される。このフィルタ処理部４０により作成された低解像度の画像は、画像圧縮／伸長処理部５０によりＭＰＥＧ−２やＤＶフォーマットなどで画像圧縮され、低解像度動画ストリームとして画像記録／再生部６０で記録媒体に記録される。同時に、上記フィルタ処理部４０により低解像度の画像を作成する際に上記高解像度の撮像信号から除去された高域成分は、上記低解像度動画ストリームのメタデータとして上記画像記録／再生部６０で記録媒体に記録される。
【００１９】
また、第２の動作モードで固体撮像素子２２を駆動することにより得られた低解像度の撮像信号は、記憶部３０に一度取り込まれる。この記憶部２０に取り込まれた低解像度の撮像信号から、フィルタ処理部４０により横方向に１／４に帯域制限された低解像度の画像（６４０×４８０画素）が作成される。このフィルタ処理部４０により作成された低解像度の画像は、画像圧縮／伸長処理部５０によりＭＰＥＧ−２やＤＶフォーマットなどで画像圧縮され、低解像度動画ストリームとして上記画像記録／再生部６０で記録媒体に記録される。
【００２０】
すなわち、この画像記録／再生システム１００におけるシステムコントローラ８１は、上記シャッタボタン８２の押圧操作入力を検知することにより記録動作モードの制御に入ると、図５のフローチャートに示すように、先ず、フレーム番号ｎを０に設定するとともに、第１の動作モードで固体撮像素子２２を駆動することにより得られた高解像度の撮像信号の処理を行う周期をＮ（Ｎ≧２）を設定する初期化を行う（ステップＳ１）。
【００２１】
次に、撮像動作中であるか否かを判定する（ステップＳ２）。
【００２２】
このステップＳ２における判定結果がＹｅｓすなわち撮像動作中である場合には、Ｆｒａｍｅ％Ｎ＝＝０？（ここで％剰余演算子である）すなわち処理する撮像信号のフレーム番号を周期Ｎで割った余り（剰余）が０であるか否かを判定する（ステップＳ３）。なお、上記ステップＳ２における判定結果がＮｏすなわち撮像動作中でない場合には、記録動作モードの制御を終了する。
【００２３】
そして、上記ステップＳ３の判定結果がＹｅｓすなわち剰余が０である場合には、第１の動作モードで固体撮像素子２２を駆動することにより高解像度の撮像信号を得て高解像度処理を行う（ステップＳ４）。また、上記ステップＳ３の判定結果がＮｏすなわち剰余が０でない場合には、第２の動作モードで固体撮像素子２２を駆動して低解像度の撮像信号を得て低像度処理を行う（ステップＳ５）。
【００２４】
上記ステップＳ４の高解像度処理では、図６のフローチャートに示すように、先ず、撮像部２０の駆動回路２１の動作モードを第１の動作モードに切り替える（ステップＳ４１）。
【００２５】
次に、上記第１の動作モードで固体撮像素子２２を駆動することにより得られた高解像度の画像（２５６０×１９２０画素）をフィルタ処理部４０により縦方向及び横方向に低域成分と高域成分に分割し、図７に示すように、低域成分（ＬＬ）、垂直方向高域成分（ＬＨ）、水平方向高域成分（ＨＬ）、対角方向高域成分（ＨＨ）の４つの帯域成分に分割する（ステップＳ４２）。
【００２６】
そして、上記ステップＳ４２の帯域分割処理により得られた上記垂直方向高域成分（ＬＨ）、水平方向高域成分（ＨＬ）及び対角方向高域成分（ＨＨ）をメタデータとして上記画像記録／再生部６０で記録媒体に記録する（ステップＳ４３）。
【００２７】
また、上記ステップＳ４２の帯域分割処理により得られた上記低域成分（ＬＬ）をフィルタ処理部４０により縦方向及び横方向に低域成分と高域成分に分割し、図７に示すように、低域成分（ＬＬＬＬ）、垂直方向高域成分（ＬＬＬＨ）、水平方向高域成分（ＬＬＨＬ）、対角方向高域成分（ＬＬＨＨ）の４つの帯域成分に分割する（ステップＳ４４）。
【００２８】
そして、上記ステップＳ４４の帯域分割処理により得られた上記垂直方向高域成分（ＬＬＬＨ）、水平方向高域成分（ＬＬＨＬ）及び対角方向高域成分（ＬＬＨＨ）をメタデータとして上記画像記録／再生部６０で記録媒体に記録する（ステップＳ４５）。
【００２９】
さらに、上記ステップＳ４４の帯域分割処理により得られた上記低域成分（ＬＬＬＬ）の画像（６４０×４８０画素）を画像圧縮／伸長処理部５０によりＭＰＥＧ−２やＤＶフォーマットなどで画像圧縮する（ステップＳ４６）。
【００３０】
そして、上記ステップＳ４６の画像圧縮処理により得られた低解像度画像の圧縮データを低解像度動画ストリームとして上記画像記録／再生部６０で記録媒体に記録する（ステップＳ４７）。
【００３１】
また、上記ステップＳ５の低解像度処理では、図８のフローチャートに示すように、先ず、撮像部２０の駆動回路２１の動作モードを第２の動作モードに切り替える（ステップＳ５１）。
【００３２】
次に、上記第２の動作モードで固体撮像素子２２を駆動することにより得られた低解像度の画像（２５６０×４８０画素）の横方向をフィルタ処理部４０により１／４の周波数に帯域制限し（ステップＳ５２）、水平方向を１／４にリサンプリングする（ステップＳ５３）。
【００３３】
次に、このようにして得られた低解像度の画像（６４０×４８０画素）を画像圧縮／伸長処理部５０によりＭＰＥＧ−２やＤＶフォーマットなどで画像圧縮する（ステップＳ５４）。
【００３４】
そして、上記ステップＳ５４の画像圧縮処理により得られた低解像度画像の圧縮データを低解像度動画ストリームとして上記画像記録／再生部６０で記録媒体に記録する（ステップＳ５５）。
【００３５】
このようにして記録媒体に記録された動画及び静止画は、次のようにして再生される。
【００３６】
すなわち、この画像記録／再生システム１００において、動画再生時には、画像記録／再生部６０で記録媒体から取り出された圧縮ストリームの中で、動画データに相当する部分についてＭＰＥＧ−２やＤＶフォーマットに対応したデコード処理を画像圧縮／伸長処理部５０により行い、映像出力部７０を介して映像信号として出力する。
【００３７】
また、静止画再生時には、画像記録／再生部６０で記録媒体から取り出された圧縮ストリームから静止画の元となる高解像度画像の低域成分が圧縮された部分を取り出し、ＭＰＥＧ−２やＤＶフォーマットに対応したデコード処理が画像圧縮／伸長処理部５０により行い、伸長した低解像度画像を記憶部２０に貼り付けるとともに、映像出力部７０を介して映像信号として出力する。さらに、高域部分のメタデータを上記画像記録／再生部６０で記録媒体から取り出し、所定の復元処理を行い、記憶部２０に貼り付ける。このようにして記憶部２０に貼り付けた画像データからフィルタ処理部４０により１枚の高解像度画像を復元する。このようにして復元された高解像度画像は、画像圧縮／伸長処理部５０により適当な画像処理が施されて、例えばＪＰＥＧ圧縮などの圧縮処理が施されて上記画像記録／再生部６０で記録媒体に１枚の静止画として記録される。
【００３８】
なお、復元された高解像度画像は、上記動画及び静止画のストリームを記録媒体に記録する画像記録／再生部６０とは異なる記録装置を用いて記録媒体に記録してもよい。
【００３９】
この画像記録／再生システム１００において、ユーザはカムコーダを使用する感覚で動画ライブラリを撮り溜めながら、その中で気に入ったシーンを、より解像度の高い静止画として取り出すことができる。
【００４０】
ここで、上述の画像記録／再生システム１００では、撮像部２０においてＮフレーム周期で１フレームだけ第１の動作モードで固体撮像素子２２を駆動し、他の（Ｎ−１）フレームは第２の動作モードで上記固体撮像素子２２を駆動することにより、低解像度の撮像信号を動画の撮像出力として得ると同時に、Ｎフレーム毎に１フレームだけ高解像度の撮像信号を静止画の撮像出力として得るようにしたが、撮像部２０の固体撮像素子２２から常に静止画用の高解像度の撮像信号を読み出すようにして、フィルタ処理部４０により動画用の低解像度画像を作るようにしてもよい。
【００４１】
また、上述の画像記録／再生システム１００では、動画用の低解像度画像は、所定のフォーマット例えばＪＰＥＧ，ＤＶ、ＭＰＥＧなどで記録し、静止画用の高解像度画像の高域成分をメタデータとして記録したが、図９及び図１０の各フローチャートに示すように、上述のステップＳ４２〜Ｓ４６及びステップＳ５４の処理をステップＳ４２’〜ステップＳ４６’及びステップＳ５４’の処理に置き換えることにより、低解像度及び高解像度のデータを全てＪＰＥＧ−２０００などの空間解像度がスケーラブルであるフォーマットに準拠して記録することも可能である。
【００４２】
ここで、ＪＰＥＧ−２０００では、画像圧縮の手法として、画像のほとんどのエネルギーを、その全体のエネルギーを保持しながら、サンプルの小部分に集中させることが可能なウェーブレット変換によるサブバンド符号化が採用されている。このサブバンド符号化は、ウエーブレット変換を行うためのフィルタによって、デジタル信号の帯域分割を行い、デジタル信号の圧縮を行うものであり、入力された信号に対して、異なる通過帯域を有する複数のフィルタでフィルタリング処理を施した後、各周波数帯域に応じた間隔でダウンサンプリングを施し、各フィルタの出力信号のエネルギーの偏りを利用して圧縮を行うものである。サブバンド符号化及びウエーブレット変換を用いた帯域分割による信号処理に関しては、例えば文献「ウエーブレット変換とサブバンド符号化」マーチン・ヴエターリ著、電子情報通信学会誌Vol1.74 No.12 pp1275-1278 １９９１年１２月に説明されている。
【００４３】
ウエーブレット変換を行うためのフィルタとして用いられるローパスフィルタ(LPF:Low Pass Filter) 及びハイパスフィルタ(LPF:High Pass Filter)の係数の一例を図１１の（Ａ）及び（Ｂ）に示すとともに、これらのフィルタ特性を図１２に示す。ウエーブレット変換では、これらのフィルタを画像の縦方向及び横方向に適用し、帯域を制限してから、サンプルを１／２に間引く処理を行い、図１３に模式的に示すように、１回目の処理により、低域成分（ＬＬ）、垂直方向高域成分（ＬＨ）、水平方向高域成分（ＨＬ）、対角方向高域成分（ＨＨ）の４つの帯域成分に分割する。低域成分（ＬＬ）は、横方向及び縦方向ともにＬＰＦをかけたものであり、垂直方向高域成分（ＬＨ）は、横方向にＬＰＦ、縦方向にＨＰＦをかけたものであり、水平方向高域成分（ＨＬ）は、横方向にＨＰＦ、縦方向にＬＰＦをかけたものであり、対角方向高域成分（ＨＨ）は、横方向及び縦方向ともにＨＰＦをかけたものである。ウエーブレット変換では、さらに、低域成分（ＬＬ）に関して、同様にフィルタをかけ、同様の処理を再帰的に行う。
【００４４】
さらに、上述の画像記録／再生システム１００では、動画及び静止画のストリームを記録／再生部６０により記録媒体を介して記録／再生するようにしたが、上記記録／再生部６０を通信手段に置き換えて、伝送系を介して動画及び静止画を伝送する画像伝送システムに本発明を適用することもできる。
【００４５】
【発明の効果】
以上のように、本発明によれば、動画撮影と静止画撮影を同時に行い、しかも高解像度の静止画像を得ることができるので、ユーザはカムコーダを使用する感覚で動画ライブラリを撮り溜めながら、その中で気に入ったシーンを、より解像度の高い静止画として取り出すことができる。本発明では、動画像フレーム周期の２以上の整数倍の周期で２倍以上解像度の高い静止画を動画と同時に撮影することができる。
【図面の簡単な説明】
【図１】本発明を適用した画像記録／再生システムの構成を示す図である。
【図２】上記画像記録／再生システムにおける撮像部の固体撮像素子から高解像度の撮像信号を読み出す第１の動作モードの動作説明に供する図である。
【図３】上記撮像部の固体撮像素子から低解像度の撮像信号を読み出す第２の動作モードの動作説明に供する図である。
【図４】上記撮像部の固体撮像素子から読み出される撮像信号の解像度の概略を示す図である。
【図５】上記画像記録／再生システムにおけるシステムコントローラによる記録動作モードの制御内容を示すフローチャートである。
【図６】上記画像記録／再生システムにおける高解像度処理の手順を示すフローチャートである。
【図７】上記画像記録／再生システムにおいて解像度変換された画像の解像度の概略を示す図である。
【図８】上記画像記録／再生システムにおける低解像度処理の手順を示すフローチャートである。
【図９】上記画像記録／再生システムにおいてＪＰＥＧ−２０００に準拠して高解像度処理を行う場合の処理手順を示すフローチャートである。
【図１０】上記画像記録／再生システムにおいてＪＰＥＧ−２０００に準拠して低解像度処理を行う場合の処理手順を示すフローチャートである。
【図１１】ウエーブレット変換を行うためのフィルタとして用いられるＬＰＦ及びＨＰＦの係数の一例を示す図である。
【図１２】上記ＬＰＦ及びＨＰＦのフィルタ特性を示す図である。
【図１３】ウエーブレット変換より解像度変換された画像の解像度の概略を示す図である。
【符号の説明】
１０データバス、２０撮像部、２１駆動回路、２２固体撮像素子、２３撮像信号処理回路、３０記憶部、４０フィルタ処理部、５０画像圧縮／伸長処理部、６０記録／再生部、７０映像出力部、８０制御部、８１システムコントローラ、８２シャッタボタン８２、１００画像記録／再生システム

Claims

所定の読み出し周期で撮像信号が読み出される撮像素子と、動画像のフレーム周期の整数Ｎ（Ｎ≧２）倍の周期毎に１フレーム期間は、第１の解像度の撮像信号を上記撮像素子から読み出す第１の動作モードと、他のフレーム期間は、上記第１の解像度よりも低い第２の解像度の撮像信号を上記撮像素子から読み出す第２の動作モードとの２種類の動作モードで、上記撮像素子を駆動する駆動手段を有する撮像手段と、
上記撮像手段から出力された撮像信号に解像度変換処理を施して、上記動画像のフレーム周期の整数Ｎ（Ｎ≧２）倍の周期毎の１フレーム期間に上記第１の解像度の撮像信号を上記第１の解像度及び上記第２の解像度よりも低い第３の解像度の画像信号に変換するとともに、上記他のフレーム期間に上記第２の解像度の撮像信号を該第３の解像度の画像信号に変換する解像度変換処理手段と、
上記第３の解像度の画像信号に圧縮処理を施す圧縮処理手段と、
上記圧縮処理手段により圧縮処理が施された上記第３の解像度の画像信号と、上記解像度変換処理により上記第１の解像度の画像信号から除去された該第１の解像度の情報を与える高周波成分の信号とを記録媒体に記録する記録手段と、
上記各手段の動作を制御する制御手段とを備える画像記録装置。
上記第１の解像度の撮像信号及び上記第２の解像度の撮像信号は、横方向の画素数が同じである請求項１記載の画像記録装置。
上記制御手段は、上記他のフレーム期間は、上記解像度変換処理により除去された第１の解像度の情報を与える高周波成分の信号を上記記録媒体に記録しないように上記記録手段を制御する請求項１記載の画像記録装置。
動画像解像度の画像信号、動画像解像度より高い解像度の情報を与える高域成分の信号及び解像度変換した動画像解像度の画像信号を空間解像度がスケーラブルであるフォーマットに準拠したフォーマットで記録する請求項１記載の画像記録装置。
所定の読み出し周期で撮像信号が読み出される撮像素子と、動画像のフレーム周期の整数Ｎ（Ｎ≧２）倍の周期毎に１フレーム期間は、第１の解像度の撮像信号を上記撮像素子から読み出す第１の動作モードと、他のフレーム期間は、上記第１の解像度よりも低い第２の解像度の撮像信号を上記撮像素子から読み出す第２の動作モードとの２種類の動作モードで、上記撮像素子を駆動する駆動手段を有する撮像手段と、
上記撮像手段から出力された撮像信号に解像度変換処理を施して、上記動画像のフレーム周期の整数Ｎ（Ｎ≧２）倍の周期毎の１フレーム期間に上記第１の解像度の撮像信号を上記第１の解像度及び上記第２の解像度よりも低い第３の解像度の画像信号に変換するとともに、上記他のフレーム期間に上記第２の解像度の撮像信号を該第３の解像度の画像信号に変換する解像度変換処理手段と、
上記第３の解像度の画像信号に圧縮／伸長処理を施す圧縮／伸長処理手段と、
記録時には、上記圧縮処理手段により圧縮処理が施された第３の解像度の画像信号と、上記解像度変換処理により上記第１の解像度の画像信号から除去された該第１の解像度の情報を与える高周波成分の信号とを記録媒体に記録し、再生時には、上記記録媒体から上記高周波成分の信号と該高周波成分の信号に対応する上記第３の解像度の画像信号とを再生して、該高周波成分の信号と該第３の解像度の画像信号から上記第１の解像度の画像信号を生成する記録／再生手段と、
上記各手段の動作を制御する制御手段とを備える画像記録／再生装置。
上記第１の解像度の撮像信号及び上記第２の解像度の撮像信号は、横方向の画素数が同じである請求項５記載の画像記録／再生装置。