JP3604732B2 - 映像システム - Google Patents
映像システム Download PDFInfo
- Publication number
- JP3604732B2 JP3604732B2 JP15086994A JP15086994A JP3604732B2 JP 3604732 B2 JP3604732 B2 JP 3604732B2 JP 15086994 A JP15086994 A JP 15086994A JP 15086994 A JP15086994 A JP 15086994A JP 3604732 B2 JP3604732 B2 JP 3604732B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- time
- video
- information
- circuit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
- H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/37—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability with arrangements for assigning different transmission priorities to video input data or to video coded data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
- H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/78—Television signal recording using magnetic recording
- H04N5/782—Television signal recording using magnetic recording on tape
- H04N5/783—Adaptations for reproducing at a rate different from the recording rate
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/907—Television signal recording using static stores, e.g. storage tubes or semiconductor memories
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
- H04N9/806—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal
- H04N9/8063—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal using time division multiplex of the PCM audio and PCM video signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Color Television Systems (AREA)
- Details Of Television Scanning (AREA)
- Television Signal Processing For Recording (AREA)
Description
【０００１】
【産業上の利用分野】
本発明は、映像情報の記録再生を行う映像システムに関するものである。
【０００２】
【従来の技術】
従来、動画像情報を記録／再生する場合、再生する地域の標準的なテレビ方式に準ずるのが一般的であった。そのため、日本やアメリカ等のＮＴＳＣ圏内では毎秒３０画面で、欧州等のＰＡＬ圏内では毎秒２５画面の撮像が行われていた。
【０００３】
【発明が解決しようとしている課題】
しかしながら上記従来例では、再生する地域別にＮＴＳＣ圏内ではＮＴＳＣ、ＰＡＬ圏内ならＰＡＬというようにテレビ方式を選択する必要があり、撮像された映像情報に汎用性を持たせられないという問題点を有していた。
【０００４】
【課題を解決するための手段】
本発明は、前記した課題を解決するためになされたものであり、請求項１に記載の映像システムは、被写体からの撮像光を第１のフレームレートの映像信号に変換する変換手段と、前記映像信号を動き補償付予測符号化により符号化する符号化手段と、前記符号化手段により符号化した前記映像信号を格納するメモリと、前記メモリから読み出した前記映像信号を伸張する伸張手段と、前記伸張手段により伸張した前記映像信号に対して駒落とし処理を施すことで前記第１のフレームレートよりも低い第２のフレームレートの映像信号を出力する信号処理手段と、前記信号処理手段の後段に配置され、モードに応じて係数を設定可能なローパスフィルタと、を備えたことを特徴とする。
【０００６】
【実施例】
以下、図面を用いて本発明の実施例について説明する。
【０００７】
《実施例１》
図１に本発明実施例の映像システムの構成ブロック図を示す。まず記録時は、アナログ音声信号入力端子１，２より各々左（以下Ｌと略す）、右（以下Ｒと略す）のステレオ音声信号が入力され、Ａ／Ｄ変換器３，４にてデジタル音声信号に変換される。デジタル音声信号は、各々オーディオ信号処理回路５，６にて各種雑音除去やダイナミックレンジの制限等の処理を施し、オーディオデータ圧縮回路７において音声信号用のデータ圧縮処理を行う。例えば、動画圧縮専門家グループ（ＭＰＥＧ）で提案されている適応変換符号化（ＡＴＡＣ，ＡＴＲＡＣ，ＡＳＰＥＣ等）や帯域分割符号化（ＭＵＳＩＣＡＭ，ＳＢ／ＡＤＰＣＭ等）を用いてもよいし、Ｌ／Ｒの相関を用いた２チャンネル混合でのベクトル符号化等を用いても構わない。
【０００８】
次に、ビデオ信号入力端子８より入力された映像信号は、Ａ／Ｄ変換器３，４よりも高速処理が可能なＡ／Ｄ変換器９にて、デジタルビデオ信号に変換される。このデジタルビデオ信号はビデオ信号処理回路１０において前処理を行った後に、ビデオデータ圧縮回路１１にて、データ量を数１０〜数１００分の１程度に圧縮される。例えば動画を例に取れば、時間的な画像相関を用いたフレーム間相関処理と、上記の手法における画質劣化を減少させるための動き補償、さらにこれを時間軸で前方向から行う前方向予測フレーム（Ｐピクチャ）や、前後（過去と未来）から行う両方向予測フレーム（Ｂピクチャ）による圧縮等を適宜組み合わせることで実現可能である。具体的には、ＭＰＥＧで提案されているアルゴリズムのＭＰＥＧ−１では、１／２インチＶＴＲ程度の標準画質、ＭＰＥＧ−２ではＮＴＳＣ以上の画質を確保することができる。
【０００９】
次に後述するＩＤ信号発生回路１２からのデータと、音声データ及び映像データとをデータ合成回路１３にて合成し、メインメモリ１４へ格納する。このメインメモリ１４は、メモリコントローラ１５によってメモリアドレスや書き込み／読み出し等の制御が行われている。さらにメモリコントローラ１５は、システムコントローラ１６にて、動作の切り換え等の装置全体としての制御が行われている。このシステムコントローラ１６は、操作キー１７により記録／再生／検索及び動作モード（動画記録モード、静止画記録モード等）の指示が入力され、これを受けてメモリコントローラ１５の制御を行うと同時に、メモリの残量や動作状況及び記録／再生時間等を示すタイムコード等の情報を表示部１８に表示し、アドレス情報生成回路１９へもタイムコード等を知らせる。このタイムコードには主に２種類ある。１つ目は記録媒体もしくは映像プログラムの冒頭からの経過時間やカメラ撮影の累積時間等であり、２つ目は記録またはカメラ撮影時の年月日や時分秒フレームの時刻等である。後者のタイムコード発生のために、カレンダクロック発生回路２０を備えている。
【００１０】
アドレス情報生成回路１９は、メモリコントローラ１５からの情報格納状況等のデータを受け取り、各情報のデータ量等を示す情報としてＩＤ信号発生回路１２へデータを転送する。ＩＤ信号発生回路１２では、システムコントローラ１６からの情報に基づいて、タイムコード、画質や音声のモード選択信号等を生成し、またメモリコントローラ１５からの情報に基づいて、映像や音声のデータ量（可変長符号化の場合はデータ長）と、データを格納したメモリ上の先頭アドレス値を生成し、各ＩＤごとに１データブロックとしてひとまとめにし、データ合成回路１３にてデータブロックを構成する。このデータブロックの格納されているメインメモリの先頭番地を順次メインメモリ１４中のＩＤファイルに書き込んでいく。
【００１１】
図２に固体メモリで構成されたメインメモリ１４中のデータ格納例を示す。図２の上部に示すように横軸を時間軸とした場合、所定時間Ｔ０ 毎にＩＤデータが生成され、先頭から０１，０２，０３・・・と番号がつけられる。そしてその下に示した固体メモリのアドレス空間に格納され、そのＩＤデータの後には、可変長符号化により処理期間ごとにデータ量の異なる映像及び音声の情報データが順次格納されていく。そのためＩＤデータ発生は一定間隔（Ｔ０ ）であるが、メモリ上のアドレス空間では図示のように等間隔にはならない。そこで、検索時にデータブロックに高速アクセスできるようにするために、データブロックの格納場所を示すアドレスをひとまとめにしたＩＤファイルを生成しておく。このＩＤファイルは、データブロックの先頭番地だけを整然とメインメモリの記憶容量に応じて、予め設定されたエリアに格納するものである。
【００１２】
このようなデータブロックにおいて、ＩＤデータは固定長で、図２の例では合計１０種類の基本情報を有している。これらの基本情報は、タイムコード、記録時間とのトレードオフで画質や音質を選択し、可変長のオーディオ及びビデオの各データの先頭番地及びデータ量を格納する。映像方式の判別は、入力映像情報に応じて伸張や圧縮の方式を選択する。削除済フラグは、一度記録したデータを消去する際に、物理的なデリーと処理の前に復帰可能な論理消去状態として、前記フラグにて通常の再生を禁止するものである。
【００１３】
ここで音声データは、Ｌ，Ｒ各チャンネルの初期化情報（リセットデータ）と圧縮処理を施した可変長のオーディオデータで構成される。映像データは、例えばフレーム内符号化等による初期化画面（映像リセットデータ）と各種の圧縮方式により、可変長符号化された圧縮データにより構成されている。各ＩＤデータ毎に、以上の構成の映像データと音声データが一組としてデータブロックを構成しており、本データブロックは、時間軸により定義された間隔で生成される点に特徴がある。
【００１４】
次に図３に、入力端子８から入力される映像信号の構成図を示す。この映像信号は、アメリカや日本等で使用されているテレビジョン方式であり秒間３０フレーム（２：１インターレースでは６０フィールド）で構成されるＮＴＳＣと欧州にて使用されているテレビジョン方式である秒間２５フレーム（２：１インターレースでは５０フィールド）で構成されるＰＡＬの双方を満足するもので、時間軸方向の構造は図３のＦ０１からＦ１６の様になる。
【００１５】
そしてＮＴＳＣの場合はＦ０１，Ｆ０６，Ｆ１１，Ｆ１６の各画面を用い、ＰＡＬの場合はＦ０３，Ｆ０９，Ｆ１５の各画面を用いれば良い。ここでＮＴＳＣとＰＡＬの各構成画面は必ずしもＦ０１とＦ０３から開始する必要は無く、各方式間にて所定間隔を維持していれば相対関係は変化するものであり、どの位置から開始しても良いことはいうまでもない。
【００１６】
次により高い時間分解能を確保する為に２：１インターレースで画面を構成する場合の画素構成を図４に示す。ここでは後述するＭＰＥＧ（動画像符号化標準化グループ）の標準入力画面として規定されているＳＩＦ（入力源規格）の有効画素数でＮＴＳＣとＰＡＬの大きい方の数値（垂直２８８画素×水平３５２画素）を選ぶ。このＳＩＦ画面はノンインタレースのフレーム構造を想定しており、記録時には前記画素すべてを処理しておき、再生時に必要に応じてインターレース構造に変換して出力する。例えば、ＮＴＳＣでは図３のＦ０１を奇数フィールドとして再生し、Ｆ０６を偶数フィールドとして再生する。
【００１７】
ＰＡＬとの互換再生を考慮しない場合には記録時にインターレース構造に変換しておくことでデータ量を更に削減することも可能である。また、ＰＡＬ再生の場合には図３のＦ０３を奇数フィールドとして再生し、Ｆ０９を偶数フィールドとして再生すればよい。これと偶数画面おきの繰り返し周期なので、再生時にインターレース変換処理が必要となる。ＮＴＳＣとＰＡＬをそれぞれ再生する場合、一画面内では、垂直方向の余分な走査線情報を捨てるか、或は補間フィルターにて走査線数の変換を行い出力／表示をすれば良い。
【００１８】
図５に、画像の時間軸方向のサンプリングタイミングを示す。基本サンプリング周期は、秒間３００画面であり、そのうち５画面周期でＮＴＳＣのサンプリングが行われ、６画面周期でＰＡＬのサンプリングが行われる。このような周期でサンプリングされた画面における動きベクトルを図６及び図７に概念的に示す。図６は本発明の秒間３００駒の隣接画面Ｔ０ とＴａ 間で動きベクトルＭＶａを検出する図であり、ボールの放物線運動が短時間では動きベクトルにより直線運動で良く近似されている様子がわかる。また図７は、ＮＴＳＣの例でＴ０ とＴｂ 間の５駒間おいた画面内で動きベクトルＭＶｂを検出する図である。
【００１９】
これらを踏まえ図８に時間あたりのフレーム数に応じた画像情報量を模式的に示す。Ａは毎秒３００フレームの場合であり、Ｂは毎秒６０フレームの場合である。フレーム間の時間間隔が短い毎秒３００フレームの場合の方が毎秒６０フレームの場合に比較して動き量の変化が１／５と少ないため、画素差分の出現頻度がＡの方がＢに比べてゼロ軸への集中度が極めて高い傾向を示すことがわかる。この傾向をデータ量削減に利用することが可能であり、例えば図９に示すようなＶＬＣ（可変長符号）をこの発生頻度に対応させると、動き量が少ないために動きベクトルそのものが小さくなり、動きベクトルの予測精度が向上するので予測誤差データの発生量を抑圧することができる。なお映像信号としては、ＨＤＴＶ方式やＨ．２６１により規定されるテレビ電話の国際規格であるＱＣＩＦ、ＣＩＦ等の他の形態であっても構わない。以上のようなデータ処理により、図１のメインメモリ１４にＡＶデータを格納することになるが、ＩＣカード等の交換可能なメモリ形態を採ることも可能である。
【００２０】
次に、図１０にデータの検索性向上のために採られたデータファイル構成を示し、以下これについて説明する。インデックス情報は、レベルＩからレベルＩＶまで設定可能で、本実施例では前述の大中小の見出しを各々レベルＩからＩＩＩに割り当て、レベルＩＶは未使用のため、すべてゼロを割り当てている。この最小レベル単位にインデックスワードを構成している。
【００２１】
ＩＤファイルの項目には、開始ＩＤ番号と終了ＩＤ番号が、時刻ファイル項目には開始時刻の年月日及び時分秒が、目次ファイルの項目には必要に応じてインデックス情報の項目には必要に応じてインデックスの目次名称が登録される。もちろんブランクでも構わない。
【００２２】
時刻ファイルは、インデックス情報の生成指示の出された時刻を、入力中のＡＶデータと対応したＩＤファイルに時刻データとして格納するためのもので、時刻を元にした検索作業が迅速に行える。すでに説明したとおりＩＤファイルは、一定時間間隔で生成しているので、撮影開始時刻と終了時刻がわかれば、途中の任意の時刻とＡＶデータの対応づけが可能である。また、目次ファイルの目次情報は、書籍で言うところの章や段落等に相当し、音楽で言えば楽章や小節等に相当するものである。
【００２３】
次に図１１は図１の回路構成を概略的に示したものである。図１１において、インデックス生成回路４１は、図１のＩＤ信号発生回路１２内にあり、時刻ファイル４２と目次ファイル４３を生成し、ＩＤファイル４４に格納する。そしてさらにメインメモリ１４内に形成されるＡＶデータファイル４５に格納される。また、情報処理回路４６は、図１のオーディオ信号、ビデオ信号の処理回路を１つで表したもので、情報入出力回路４７は図１のＡ／ＤあるいはＤ／Ａ変換器等を１つで表したものである。
【００２４】
次に記録時のファイル作成動作を図１２のフローチャートに沿って説明する。入力端子から映像及び音声信号が入力されている状態で、ステップ６０１において操作キー１７により指示が入力されると、ステップ６０２において記録開始命令かどうか判断し、記録命令である場合にはステップ６０３に進む。そしてステップ６０３では日付が変わったかどうかを判断し、変わった場合にはステップ６０４に進みインデックスの大見出しであるレベルＩを更新し、ステップ６０５に進む。日付が変わっていない場合にはステップ６０５に直接進む。
【００２５】
ステップ６０５では電源が操作されたかどうかを判断し、操作された場合にはステップ６０６に進みインデックスの中見出しであるレベルＩＩを更新し、ステップ６０７に進む。電源が操作されていない場合にはステップ６０７に直接進む。ステップ６０７ではインデックスの小見出しであるレベルＩＩＩを更新し、ステップ６０８に進む。ステップ６０８では年月日を時刻ファイルに格納し、ステップ６０９では時分秒を時刻ファイルに格納する。そしてステップ６１０に進み、目次情報をつけるかどうかを判断し、つける場合にはステップ６１１に進み、つけられた目次情報を目次ファイルに格納し、ステップ６１２に進む。つけない場合にはステップ６１２に直接進む。
【００２６】
ステップ６１２では開始ＩＤ番号を設定し、ステップ６１３に進んでＩＤファイルの更新を開始する。そしてステップ６１４において撮影が終了したかどうかを判断し、終了した場合にはステップ６１５に進んで、終了番号を設定する。そしてステップ６１６に進んでＩＤファイルの更新を終了し、一連の動作が終了する。これらの処理は、図１のＩＤ発生回路１２で行われる。
【００２７】
次に図１３は図１に示した映像記録再生システムにおける記録系回路の詳細図である。撮像光学系５０から入射した被写体からの光線像はＣＣＤ５１の焦点面上に結像する。ＣＣＤ５１で光電変換された映像信号は信号処理回路５２にてテレビジョン信号に準拠した形態に変換される。処理された映像信号は１画面メモリ５３を用いた動き検出回路５４で画像の動き情報を検出し、この動き情報に基づき動き補償予測回路５５において動き補償予測を行い現信号との差を演算し、残差演算回路５６において予測残差（誤差）を演算する。その結果と画像の動き情報ＭＶを符号化回路５７にて符号化する。符号量確認回路５８にて符号量を確認し、ゲート回路５９において符号量制御の他にも図１４に示すように画面変化量（デルタ）が所定値以下であると判断された場合（Ｆ０５，Ｆ０９，Ｆ１２，Ｆ１４）には、ＩＤ発生回路６０にて生成された画面の識別情報はデータ多重化回路６１で処理するが画像情報は符号化していない。これらの符号化処理の結果をメモリ６２へ格納する。
【００２８】
次に再生時の動作について説明する。図１において操作キー１７にて再生を指示すると、システムコントローラ１６は、表示部１８に再生動作中の旨を表示し、メモリコントローラ１５でメモリアドレスとリード／ライトを制御し、メインメモリ１４から格納された情報信号である映像情報とステレオ（または２チャンネル分の）音声信号とこれらの検索のためのＩＤ情報を読み出す。
【００２９】
上記したようにＩＤ、オーディオ、ビデオの３種類のデータが混合された状態（シリアルデータ情報）でデータ分配回路２１へ情報供給される。データ分配回路２１にて、データは各々以下の通り分配される。ビデオデータは、ビデオデータ伸張回路２２にて、記録時のデータ圧縮処理とは逆のデータ伸張処理を施し、前記した記録時の入力信号と同等のビデオ信号を再生して、データ選択回路２３へ出力する。データ選択回路２３では、アナログの映像モニタ用の映像信号を加算器２４へ、そしてデジタルビデオ出力端子２５へ供給するデータを出力する。
【００３０】
ＩＤデータは、検索情報再生回路２６にて各ＩＤ毎に図２に示した情報を検出し、モニタのための表示情報を表示情報生成回路２７にて生成し、復元されたビデオデータと加算器２４にて合成し、Ｄ／Ａ変換器２８にて汎用性のあるアナログ信号に変換し、映像モニタ２９に表示する。
【００３１】
オーディオデータも、オーディオデータ伸張回路３０にてビデオデータと同様にデータ伸張処理を施し、記録時の入力信号と同等の音声信号を再生する。データ選択回路２３にて音響モニタ３１に出力するためにアナログ変換するＡ／Ｄ変換器３２とデジタルオーディオ端子３３に供給するデータを出力する。映像と音声の各データは、前記のＩＤ信号を用いて、再生信号処理に要する遅延時間等によるずれを補正し再生する。そして表示情報生成回路２７からの情報に同期させ、各々の映像及び音声の再生信号をデータ選択回路２３より出力する。
【００３２】
再生時のファイル検索動作を図１５のフローチャートに沿って説明する。まず、ステップ７０１において時刻ファイルを用いて検索するのかどうかを判断し、検索する場合にはステップ７０２に進み開始年月日、開始時刻等の検索条件を設定する。そしてステップ７０３に進み、検索条件式を生成し、ステップ７０４で時刻ファイルをサーチする。そしてステップ７０５において条件を満足しているかどうかを判断し、満足している場合にはステップ７０６に進んで、そのインデックスを抽出する。満足していない場合にはステップ７０４を繰り返す。
【００３３】
またステップ７０１で時刻ファイルによる検索を行わない場合には、ステップ７０８に進んでインデックスサーチを行う。そしてステップ７０９に進んでインデックスの変化を検索する場合には、ステップ７０９に進んで目次があるかどうかを判断し、検索しない場合にはステップ７０８に戻る。目次がある場合にはステップ７１０に進んで、目次名称の表示を行い、ステップ７１２に進む。目次がない場合にはステップ７１２に直接進む。ステップ７１２ではインデックスを選択し、ステップ７１３に進む。
【００３４】
ステップ７１３では開始ＩＤの読み込みを行い、ステップ７１４に進んで終了ＩＤ番号の読み込みを行う。そしてステップ７１５でＩＤファイルにアクセスし、ステップ７１６で開始ＡＶアドレスを読み込む。そしてステップ７１７で終了ＡＶアドレスを読み込み、ステップ７１８でＡＶファイルにアクセスする。そしてステップ７１９でＡＶデータを再生し、ステップ７２０においてそのアドレスが終了したかどうかを判断する。終了していない場合にはステップ７１９に戻り、終了した場合にはステップ７２１に進んで時刻ファイルの検索を行い、一連の動作を終了する。
【００３５】
次に図１６は、図１に示した映像記録再生システムにおける再生系回路の詳細図であり、以下これに沿って説明する。希望の再生モード及び再生画面を入力キー６３からシスコン（システムコンピュータ）６４へ指示すると、この再生指示に対応したメモリアドレス設定をアドレス回路６５が実行する。そして読み出しアドレスに応じてメインメモリ６６から格納された情報が読み出される。読み出された情報は、画像データとＩＤ情報に分配器６７で分離され、画像等の主情報は復号器６８へ転送され、ＩＤ再生回路６９にて再構成されたＩＤデータに応じて動き補償回路７０にて動き補償画像補間を行い、信号処理回路７１で標準テレビ信号に準拠させた信号として出力する。
【００３６】
ここで、撮像系で秒間３００画面の時間分解能を確保しているので、再生時にＮＴＳＣやＰＡＬで再生すると１／５〜１／６の駒落とし処理を施すわけだが、各画面が最大でも１／３００秒の露光時間となり時間軸方向でのサンプリングの折り返しが発生する。そこで、視覚特性的に違和感を生じない様にするために信号処理回路７１の後段にＬＰＦ（ローパスフィルタ）７２が設けられている。このＬＰＦはフィールドメモリ等の画面遅延回路を巡回型で係数加算した構成が一般的である。このＬＰＦ７２の循環係数を再生モードに応じて最適化することで、不要な時間分解能の低下を防止できる。
【００３７】
次に図１７は、ＮＴＳＣ規格の標準速度再生の場合の画面構成である。図１７の上部にメモリ格納状態の画面構成を示し、下部が１／５駒落とし処理を施した結果ＮＴＳＣ規格となった状態である。また図１８は、ＰＡＬ規格の１／２速度再生の場合の画面構成であり、その上部がメモリ格納状態の画面構成で、下部が１／３駒落とし処理を施した結果ＰＡＬ規格の２倍の画面枚数となった状態である。読み出しの時間あたりの枚数はＰＡＬ規格そのものなので、２倍の時間をかけて出力処理することとなり、結果的に１／２速度のスローモーション再生が実現できる。ここで、斜線で示したＦ０１，Ｆ０７，Ｆ１３が標準のＰＡＬ規格画面で、この時間間隔の１／２で網点表示の画面Ｆ０４，Ｆ１０，Ｆ１６が時間分解能を向上させている。また、例えば４フレーム分のデータから３画面を再生する場合には、秒間３００フレームで撮像された映像の持つ時間分解能よりも高い分解能が必要になるが、そのような時には各フレーム間で補間画像を作成することでより高い時間分解能を得ることができる。
【００３８】
以上のように本実施例では、時間軸方向の分解能が向上したためにスポーツ等の動きの速い被写体を撮影の対象とする場合にも、画面間のつながりが自然になり、見やすく高画質の映像を提供できるようになった。また、時間軸方向の分解能を向上させると映像信号の圧縮処理を行う際に画面間の情報量が減少するため、データの発生量を削減することが可能になった。さらに撮像した映像情報に使用上の制約を設けないため汎用性の高い情報として使用することが可能になった。例えばＮＴＳＣとＰＡＬを必要に応じて同じシステムで再生可能になったため、従来のように再生する地域に応じて記録時にテレビ方式を選択する必要がなくなった。
【００３９】
【発明の効果】
以上説明したように、本発明によれば、被写体からの撮像光を実際に出力する映像信号のフレームレートよりも高いフレームレートの映像信号に変換することで、動き補償付予測符号化により符号化する場合の動きベクトルの予測精度を向上させることができる。
また、時間軸方向の分解能を向上させることができ、画面間の情報量を減少させ、符号化データの発生量を削減することができる。さらに、モードに応じて係数を設定可能なローパスフィルタを設けたことにより、複数のモードで共通のローパスフィルタを使用可能であり、駒落とし処理を施すモードにおいて生じる視覚特性的な違和感を、係数を変更するだけで軽減させることができる。
【図面の簡単な説明】
【図１】本発明実施例の映像システムの構成ブロック図である。
【図２】本発明実施例のメインメモリのデータ格納を示す図である。
【図３】本発明実施例の映像信号の構成図である。
【図４】本発明実施例の画面構成図である。
【図５】本発明実施例のサンプリングタイミング図である。
【図６】本発明実施例の動き検出の概念図である。
【図７】本発明実施例の動き検出の概念図である。
【図８】本発明実施例の画面間差分の出現頻度分布図である。
【図９】本発明実施例のＶＬＣの符号化テーブルの図である。
【図１０】本発明実施例のデータファイル構成図である。
【図１１】本発明実施例の映像システムの該略図である。
【図１２】本発明実施例の記録時のファイル作成動作のフローチャートである。
【図１３】本発明実施例の記録系回路の詳細図である。
【図１４】本発明実施例の符号化時の画面間引きの概念図である。
【図１５】本発明実施例の再生時のファイル検索動作のフローチャートである。
【図１６】本発明実施例の再生系回路の詳細図である。
【図１７】本発明実施例のＮＴＳＣ標準再生時の画面構成図である。
【図１８】本発明実施例のＰＡＬの１／２倍速再生時の画面構成図である。
【符号の説明】
５４ 動き検出回路
５５ 動き補償予測回路
５７ 符号化回路
５８ 符号量確認回路
７０ 動き補償回路
７１ 信号処理回路
【産業上の利用分野】
本発明は、映像情報の記録再生を行う映像システムに関するものである。
【０００２】
【従来の技術】
従来、動画像情報を記録／再生する場合、再生する地域の標準的なテレビ方式に準ずるのが一般的であった。そのため、日本やアメリカ等のＮＴＳＣ圏内では毎秒３０画面で、欧州等のＰＡＬ圏内では毎秒２５画面の撮像が行われていた。
【０００３】
【発明が解決しようとしている課題】
しかしながら上記従来例では、再生する地域別にＮＴＳＣ圏内ではＮＴＳＣ、ＰＡＬ圏内ならＰＡＬというようにテレビ方式を選択する必要があり、撮像された映像情報に汎用性を持たせられないという問題点を有していた。
【０００４】
【課題を解決するための手段】
本発明は、前記した課題を解決するためになされたものであり、請求項１に記載の映像システムは、被写体からの撮像光を第１のフレームレートの映像信号に変換する変換手段と、前記映像信号を動き補償付予測符号化により符号化する符号化手段と、前記符号化手段により符号化した前記映像信号を格納するメモリと、前記メモリから読み出した前記映像信号を伸張する伸張手段と、前記伸張手段により伸張した前記映像信号に対して駒落とし処理を施すことで前記第１のフレームレートよりも低い第２のフレームレートの映像信号を出力する信号処理手段と、前記信号処理手段の後段に配置され、モードに応じて係数を設定可能なローパスフィルタと、を備えたことを特徴とする。
【０００６】
【実施例】
以下、図面を用いて本発明の実施例について説明する。
【０００７】
《実施例１》
図１に本発明実施例の映像システムの構成ブロック図を示す。まず記録時は、アナログ音声信号入力端子１，２より各々左（以下Ｌと略す）、右（以下Ｒと略す）のステレオ音声信号が入力され、Ａ／Ｄ変換器３，４にてデジタル音声信号に変換される。デジタル音声信号は、各々オーディオ信号処理回路５，６にて各種雑音除去やダイナミックレンジの制限等の処理を施し、オーディオデータ圧縮回路７において音声信号用のデータ圧縮処理を行う。例えば、動画圧縮専門家グループ（ＭＰＥＧ）で提案されている適応変換符号化（ＡＴＡＣ，ＡＴＲＡＣ，ＡＳＰＥＣ等）や帯域分割符号化（ＭＵＳＩＣＡＭ，ＳＢ／ＡＤＰＣＭ等）を用いてもよいし、Ｌ／Ｒの相関を用いた２チャンネル混合でのベクトル符号化等を用いても構わない。
【０００８】
次に、ビデオ信号入力端子８より入力された映像信号は、Ａ／Ｄ変換器３，４よりも高速処理が可能なＡ／Ｄ変換器９にて、デジタルビデオ信号に変換される。このデジタルビデオ信号はビデオ信号処理回路１０において前処理を行った後に、ビデオデータ圧縮回路１１にて、データ量を数１０〜数１００分の１程度に圧縮される。例えば動画を例に取れば、時間的な画像相関を用いたフレーム間相関処理と、上記の手法における画質劣化を減少させるための動き補償、さらにこれを時間軸で前方向から行う前方向予測フレーム（Ｐピクチャ）や、前後（過去と未来）から行う両方向予測フレーム（Ｂピクチャ）による圧縮等を適宜組み合わせることで実現可能である。具体的には、ＭＰＥＧで提案されているアルゴリズムのＭＰＥＧ−１では、１／２インチＶＴＲ程度の標準画質、ＭＰＥＧ−２ではＮＴＳＣ以上の画質を確保することができる。
【０００９】
次に後述するＩＤ信号発生回路１２からのデータと、音声データ及び映像データとをデータ合成回路１３にて合成し、メインメモリ１４へ格納する。このメインメモリ１４は、メモリコントローラ１５によってメモリアドレスや書き込み／読み出し等の制御が行われている。さらにメモリコントローラ１５は、システムコントローラ１６にて、動作の切り換え等の装置全体としての制御が行われている。このシステムコントローラ１６は、操作キー１７により記録／再生／検索及び動作モード（動画記録モード、静止画記録モード等）の指示が入力され、これを受けてメモリコントローラ１５の制御を行うと同時に、メモリの残量や動作状況及び記録／再生時間等を示すタイムコード等の情報を表示部１８に表示し、アドレス情報生成回路１９へもタイムコード等を知らせる。このタイムコードには主に２種類ある。１つ目は記録媒体もしくは映像プログラムの冒頭からの経過時間やカメラ撮影の累積時間等であり、２つ目は記録またはカメラ撮影時の年月日や時分秒フレームの時刻等である。後者のタイムコード発生のために、カレンダクロック発生回路２０を備えている。
【００１０】
アドレス情報生成回路１９は、メモリコントローラ１５からの情報格納状況等のデータを受け取り、各情報のデータ量等を示す情報としてＩＤ信号発生回路１２へデータを転送する。ＩＤ信号発生回路１２では、システムコントローラ１６からの情報に基づいて、タイムコード、画質や音声のモード選択信号等を生成し、またメモリコントローラ１５からの情報に基づいて、映像や音声のデータ量（可変長符号化の場合はデータ長）と、データを格納したメモリ上の先頭アドレス値を生成し、各ＩＤごとに１データブロックとしてひとまとめにし、データ合成回路１３にてデータブロックを構成する。このデータブロックの格納されているメインメモリの先頭番地を順次メインメモリ１４中のＩＤファイルに書き込んでいく。
【００１１】
図２に固体メモリで構成されたメインメモリ１４中のデータ格納例を示す。図２の上部に示すように横軸を時間軸とした場合、所定時間Ｔ０ 毎にＩＤデータが生成され、先頭から０１，０２，０３・・・と番号がつけられる。そしてその下に示した固体メモリのアドレス空間に格納され、そのＩＤデータの後には、可変長符号化により処理期間ごとにデータ量の異なる映像及び音声の情報データが順次格納されていく。そのためＩＤデータ発生は一定間隔（Ｔ０ ）であるが、メモリ上のアドレス空間では図示のように等間隔にはならない。そこで、検索時にデータブロックに高速アクセスできるようにするために、データブロックの格納場所を示すアドレスをひとまとめにしたＩＤファイルを生成しておく。このＩＤファイルは、データブロックの先頭番地だけを整然とメインメモリの記憶容量に応じて、予め設定されたエリアに格納するものである。
【００１２】
このようなデータブロックにおいて、ＩＤデータは固定長で、図２の例では合計１０種類の基本情報を有している。これらの基本情報は、タイムコード、記録時間とのトレードオフで画質や音質を選択し、可変長のオーディオ及びビデオの各データの先頭番地及びデータ量を格納する。映像方式の判別は、入力映像情報に応じて伸張や圧縮の方式を選択する。削除済フラグは、一度記録したデータを消去する際に、物理的なデリーと処理の前に復帰可能な論理消去状態として、前記フラグにて通常の再生を禁止するものである。
【００１３】
ここで音声データは、Ｌ，Ｒ各チャンネルの初期化情報（リセットデータ）と圧縮処理を施した可変長のオーディオデータで構成される。映像データは、例えばフレーム内符号化等による初期化画面（映像リセットデータ）と各種の圧縮方式により、可変長符号化された圧縮データにより構成されている。各ＩＤデータ毎に、以上の構成の映像データと音声データが一組としてデータブロックを構成しており、本データブロックは、時間軸により定義された間隔で生成される点に特徴がある。
【００１４】
次に図３に、入力端子８から入力される映像信号の構成図を示す。この映像信号は、アメリカや日本等で使用されているテレビジョン方式であり秒間３０フレーム（２：１インターレースでは６０フィールド）で構成されるＮＴＳＣと欧州にて使用されているテレビジョン方式である秒間２５フレーム（２：１インターレースでは５０フィールド）で構成されるＰＡＬの双方を満足するもので、時間軸方向の構造は図３のＦ０１からＦ１６の様になる。
【００１５】
そしてＮＴＳＣの場合はＦ０１，Ｆ０６，Ｆ１１，Ｆ１６の各画面を用い、ＰＡＬの場合はＦ０３，Ｆ０９，Ｆ１５の各画面を用いれば良い。ここでＮＴＳＣとＰＡＬの各構成画面は必ずしもＦ０１とＦ０３から開始する必要は無く、各方式間にて所定間隔を維持していれば相対関係は変化するものであり、どの位置から開始しても良いことはいうまでもない。
【００１６】
次により高い時間分解能を確保する為に２：１インターレースで画面を構成する場合の画素構成を図４に示す。ここでは後述するＭＰＥＧ（動画像符号化標準化グループ）の標準入力画面として規定されているＳＩＦ（入力源規格）の有効画素数でＮＴＳＣとＰＡＬの大きい方の数値（垂直２８８画素×水平３５２画素）を選ぶ。このＳＩＦ画面はノンインタレースのフレーム構造を想定しており、記録時には前記画素すべてを処理しておき、再生時に必要に応じてインターレース構造に変換して出力する。例えば、ＮＴＳＣでは図３のＦ０１を奇数フィールドとして再生し、Ｆ０６を偶数フィールドとして再生する。
【００１７】
ＰＡＬとの互換再生を考慮しない場合には記録時にインターレース構造に変換しておくことでデータ量を更に削減することも可能である。また、ＰＡＬ再生の場合には図３のＦ０３を奇数フィールドとして再生し、Ｆ０９を偶数フィールドとして再生すればよい。これと偶数画面おきの繰り返し周期なので、再生時にインターレース変換処理が必要となる。ＮＴＳＣとＰＡＬをそれぞれ再生する場合、一画面内では、垂直方向の余分な走査線情報を捨てるか、或は補間フィルターにて走査線数の変換を行い出力／表示をすれば良い。
【００１８】
図５に、画像の時間軸方向のサンプリングタイミングを示す。基本サンプリング周期は、秒間３００画面であり、そのうち５画面周期でＮＴＳＣのサンプリングが行われ、６画面周期でＰＡＬのサンプリングが行われる。このような周期でサンプリングされた画面における動きベクトルを図６及び図７に概念的に示す。図６は本発明の秒間３００駒の隣接画面Ｔ０ とＴａ 間で動きベクトルＭＶａを検出する図であり、ボールの放物線運動が短時間では動きベクトルにより直線運動で良く近似されている様子がわかる。また図７は、ＮＴＳＣの例でＴ０ とＴｂ 間の５駒間おいた画面内で動きベクトルＭＶｂを検出する図である。
【００１９】
これらを踏まえ図８に時間あたりのフレーム数に応じた画像情報量を模式的に示す。Ａは毎秒３００フレームの場合であり、Ｂは毎秒６０フレームの場合である。フレーム間の時間間隔が短い毎秒３００フレームの場合の方が毎秒６０フレームの場合に比較して動き量の変化が１／５と少ないため、画素差分の出現頻度がＡの方がＢに比べてゼロ軸への集中度が極めて高い傾向を示すことがわかる。この傾向をデータ量削減に利用することが可能であり、例えば図９に示すようなＶＬＣ（可変長符号）をこの発生頻度に対応させると、動き量が少ないために動きベクトルそのものが小さくなり、動きベクトルの予測精度が向上するので予測誤差データの発生量を抑圧することができる。なお映像信号としては、ＨＤＴＶ方式やＨ．２６１により規定されるテレビ電話の国際規格であるＱＣＩＦ、ＣＩＦ等の他の形態であっても構わない。以上のようなデータ処理により、図１のメインメモリ１４にＡＶデータを格納することになるが、ＩＣカード等の交換可能なメモリ形態を採ることも可能である。
【００２０】
次に、図１０にデータの検索性向上のために採られたデータファイル構成を示し、以下これについて説明する。インデックス情報は、レベルＩからレベルＩＶまで設定可能で、本実施例では前述の大中小の見出しを各々レベルＩからＩＩＩに割り当て、レベルＩＶは未使用のため、すべてゼロを割り当てている。この最小レベル単位にインデックスワードを構成している。
【００２１】
ＩＤファイルの項目には、開始ＩＤ番号と終了ＩＤ番号が、時刻ファイル項目には開始時刻の年月日及び時分秒が、目次ファイルの項目には必要に応じてインデックス情報の項目には必要に応じてインデックスの目次名称が登録される。もちろんブランクでも構わない。
【００２２】
時刻ファイルは、インデックス情報の生成指示の出された時刻を、入力中のＡＶデータと対応したＩＤファイルに時刻データとして格納するためのもので、時刻を元にした検索作業が迅速に行える。すでに説明したとおりＩＤファイルは、一定時間間隔で生成しているので、撮影開始時刻と終了時刻がわかれば、途中の任意の時刻とＡＶデータの対応づけが可能である。また、目次ファイルの目次情報は、書籍で言うところの章や段落等に相当し、音楽で言えば楽章や小節等に相当するものである。
【００２３】
次に図１１は図１の回路構成を概略的に示したものである。図１１において、インデックス生成回路４１は、図１のＩＤ信号発生回路１２内にあり、時刻ファイル４２と目次ファイル４３を生成し、ＩＤファイル４４に格納する。そしてさらにメインメモリ１４内に形成されるＡＶデータファイル４５に格納される。また、情報処理回路４６は、図１のオーディオ信号、ビデオ信号の処理回路を１つで表したもので、情報入出力回路４７は図１のＡ／ＤあるいはＤ／Ａ変換器等を１つで表したものである。
【００２４】
次に記録時のファイル作成動作を図１２のフローチャートに沿って説明する。入力端子から映像及び音声信号が入力されている状態で、ステップ６０１において操作キー１７により指示が入力されると、ステップ６０２において記録開始命令かどうか判断し、記録命令である場合にはステップ６０３に進む。そしてステップ６０３では日付が変わったかどうかを判断し、変わった場合にはステップ６０４に進みインデックスの大見出しであるレベルＩを更新し、ステップ６０５に進む。日付が変わっていない場合にはステップ６０５に直接進む。
【００２５】
ステップ６０５では電源が操作されたかどうかを判断し、操作された場合にはステップ６０６に進みインデックスの中見出しであるレベルＩＩを更新し、ステップ６０７に進む。電源が操作されていない場合にはステップ６０７に直接進む。ステップ６０７ではインデックスの小見出しであるレベルＩＩＩを更新し、ステップ６０８に進む。ステップ６０８では年月日を時刻ファイルに格納し、ステップ６０９では時分秒を時刻ファイルに格納する。そしてステップ６１０に進み、目次情報をつけるかどうかを判断し、つける場合にはステップ６１１に進み、つけられた目次情報を目次ファイルに格納し、ステップ６１２に進む。つけない場合にはステップ６１２に直接進む。
【００２６】
ステップ６１２では開始ＩＤ番号を設定し、ステップ６１３に進んでＩＤファイルの更新を開始する。そしてステップ６１４において撮影が終了したかどうかを判断し、終了した場合にはステップ６１５に進んで、終了番号を設定する。そしてステップ６１６に進んでＩＤファイルの更新を終了し、一連の動作が終了する。これらの処理は、図１のＩＤ発生回路１２で行われる。
【００２７】
次に図１３は図１に示した映像記録再生システムにおける記録系回路の詳細図である。撮像光学系５０から入射した被写体からの光線像はＣＣＤ５１の焦点面上に結像する。ＣＣＤ５１で光電変換された映像信号は信号処理回路５２にてテレビジョン信号に準拠した形態に変換される。処理された映像信号は１画面メモリ５３を用いた動き検出回路５４で画像の動き情報を検出し、この動き情報に基づき動き補償予測回路５５において動き補償予測を行い現信号との差を演算し、残差演算回路５６において予測残差（誤差）を演算する。その結果と画像の動き情報ＭＶを符号化回路５７にて符号化する。符号量確認回路５８にて符号量を確認し、ゲート回路５９において符号量制御の他にも図１４に示すように画面変化量（デルタ）が所定値以下であると判断された場合（Ｆ０５，Ｆ０９，Ｆ１２，Ｆ１４）には、ＩＤ発生回路６０にて生成された画面の識別情報はデータ多重化回路６１で処理するが画像情報は符号化していない。これらの符号化処理の結果をメモリ６２へ格納する。
【００２８】
次に再生時の動作について説明する。図１において操作キー１７にて再生を指示すると、システムコントローラ１６は、表示部１８に再生動作中の旨を表示し、メモリコントローラ１５でメモリアドレスとリード／ライトを制御し、メインメモリ１４から格納された情報信号である映像情報とステレオ（または２チャンネル分の）音声信号とこれらの検索のためのＩＤ情報を読み出す。
【００２９】
上記したようにＩＤ、オーディオ、ビデオの３種類のデータが混合された状態（シリアルデータ情報）でデータ分配回路２１へ情報供給される。データ分配回路２１にて、データは各々以下の通り分配される。ビデオデータは、ビデオデータ伸張回路２２にて、記録時のデータ圧縮処理とは逆のデータ伸張処理を施し、前記した記録時の入力信号と同等のビデオ信号を再生して、データ選択回路２３へ出力する。データ選択回路２３では、アナログの映像モニタ用の映像信号を加算器２４へ、そしてデジタルビデオ出力端子２５へ供給するデータを出力する。
【００３０】
ＩＤデータは、検索情報再生回路２６にて各ＩＤ毎に図２に示した情報を検出し、モニタのための表示情報を表示情報生成回路２７にて生成し、復元されたビデオデータと加算器２４にて合成し、Ｄ／Ａ変換器２８にて汎用性のあるアナログ信号に変換し、映像モニタ２９に表示する。
【００３１】
オーディオデータも、オーディオデータ伸張回路３０にてビデオデータと同様にデータ伸張処理を施し、記録時の入力信号と同等の音声信号を再生する。データ選択回路２３にて音響モニタ３１に出力するためにアナログ変換するＡ／Ｄ変換器３２とデジタルオーディオ端子３３に供給するデータを出力する。映像と音声の各データは、前記のＩＤ信号を用いて、再生信号処理に要する遅延時間等によるずれを補正し再生する。そして表示情報生成回路２７からの情報に同期させ、各々の映像及び音声の再生信号をデータ選択回路２３より出力する。
【００３２】
再生時のファイル検索動作を図１５のフローチャートに沿って説明する。まず、ステップ７０１において時刻ファイルを用いて検索するのかどうかを判断し、検索する場合にはステップ７０２に進み開始年月日、開始時刻等の検索条件を設定する。そしてステップ７０３に進み、検索条件式を生成し、ステップ７０４で時刻ファイルをサーチする。そしてステップ７０５において条件を満足しているかどうかを判断し、満足している場合にはステップ７０６に進んで、そのインデックスを抽出する。満足していない場合にはステップ７０４を繰り返す。
【００３３】
またステップ７０１で時刻ファイルによる検索を行わない場合には、ステップ７０８に進んでインデックスサーチを行う。そしてステップ７０９に進んでインデックスの変化を検索する場合には、ステップ７０９に進んで目次があるかどうかを判断し、検索しない場合にはステップ７０８に戻る。目次がある場合にはステップ７１０に進んで、目次名称の表示を行い、ステップ７１２に進む。目次がない場合にはステップ７１２に直接進む。ステップ７１２ではインデックスを選択し、ステップ７１３に進む。
【００３４】
ステップ７１３では開始ＩＤの読み込みを行い、ステップ７１４に進んで終了ＩＤ番号の読み込みを行う。そしてステップ７１５でＩＤファイルにアクセスし、ステップ７１６で開始ＡＶアドレスを読み込む。そしてステップ７１７で終了ＡＶアドレスを読み込み、ステップ７１８でＡＶファイルにアクセスする。そしてステップ７１９でＡＶデータを再生し、ステップ７２０においてそのアドレスが終了したかどうかを判断する。終了していない場合にはステップ７１９に戻り、終了した場合にはステップ７２１に進んで時刻ファイルの検索を行い、一連の動作を終了する。
【００３５】
次に図１６は、図１に示した映像記録再生システムにおける再生系回路の詳細図であり、以下これに沿って説明する。希望の再生モード及び再生画面を入力キー６３からシスコン（システムコンピュータ）６４へ指示すると、この再生指示に対応したメモリアドレス設定をアドレス回路６５が実行する。そして読み出しアドレスに応じてメインメモリ６６から格納された情報が読み出される。読み出された情報は、画像データとＩＤ情報に分配器６７で分離され、画像等の主情報は復号器６８へ転送され、ＩＤ再生回路６９にて再構成されたＩＤデータに応じて動き補償回路７０にて動き補償画像補間を行い、信号処理回路７１で標準テレビ信号に準拠させた信号として出力する。
【００３６】
ここで、撮像系で秒間３００画面の時間分解能を確保しているので、再生時にＮＴＳＣやＰＡＬで再生すると１／５〜１／６の駒落とし処理を施すわけだが、各画面が最大でも１／３００秒の露光時間となり時間軸方向でのサンプリングの折り返しが発生する。そこで、視覚特性的に違和感を生じない様にするために信号処理回路７１の後段にＬＰＦ（ローパスフィルタ）７２が設けられている。このＬＰＦはフィールドメモリ等の画面遅延回路を巡回型で係数加算した構成が一般的である。このＬＰＦ７２の循環係数を再生モードに応じて最適化することで、不要な時間分解能の低下を防止できる。
【００３７】
次に図１７は、ＮＴＳＣ規格の標準速度再生の場合の画面構成である。図１７の上部にメモリ格納状態の画面構成を示し、下部が１／５駒落とし処理を施した結果ＮＴＳＣ規格となった状態である。また図１８は、ＰＡＬ規格の１／２速度再生の場合の画面構成であり、その上部がメモリ格納状態の画面構成で、下部が１／３駒落とし処理を施した結果ＰＡＬ規格の２倍の画面枚数となった状態である。読み出しの時間あたりの枚数はＰＡＬ規格そのものなので、２倍の時間をかけて出力処理することとなり、結果的に１／２速度のスローモーション再生が実現できる。ここで、斜線で示したＦ０１，Ｆ０７，Ｆ１３が標準のＰＡＬ規格画面で、この時間間隔の１／２で網点表示の画面Ｆ０４，Ｆ１０，Ｆ１６が時間分解能を向上させている。また、例えば４フレーム分のデータから３画面を再生する場合には、秒間３００フレームで撮像された映像の持つ時間分解能よりも高い分解能が必要になるが、そのような時には各フレーム間で補間画像を作成することでより高い時間分解能を得ることができる。
【００３８】
以上のように本実施例では、時間軸方向の分解能が向上したためにスポーツ等の動きの速い被写体を撮影の対象とする場合にも、画面間のつながりが自然になり、見やすく高画質の映像を提供できるようになった。また、時間軸方向の分解能を向上させると映像信号の圧縮処理を行う際に画面間の情報量が減少するため、データの発生量を削減することが可能になった。さらに撮像した映像情報に使用上の制約を設けないため汎用性の高い情報として使用することが可能になった。例えばＮＴＳＣとＰＡＬを必要に応じて同じシステムで再生可能になったため、従来のように再生する地域に応じて記録時にテレビ方式を選択する必要がなくなった。
【００３９】
【発明の効果】
以上説明したように、本発明によれば、被写体からの撮像光を実際に出力する映像信号のフレームレートよりも高いフレームレートの映像信号に変換することで、動き補償付予測符号化により符号化する場合の動きベクトルの予測精度を向上させることができる。
また、時間軸方向の分解能を向上させることができ、画面間の情報量を減少させ、符号化データの発生量を削減することができる。さらに、モードに応じて係数を設定可能なローパスフィルタを設けたことにより、複数のモードで共通のローパスフィルタを使用可能であり、駒落とし処理を施すモードにおいて生じる視覚特性的な違和感を、係数を変更するだけで軽減させることができる。
【図面の簡単な説明】
【図１】本発明実施例の映像システムの構成ブロック図である。
【図２】本発明実施例のメインメモリのデータ格納を示す図である。
【図３】本発明実施例の映像信号の構成図である。
【図４】本発明実施例の画面構成図である。
【図５】本発明実施例のサンプリングタイミング図である。
【図６】本発明実施例の動き検出の概念図である。
【図７】本発明実施例の動き検出の概念図である。
【図８】本発明実施例の画面間差分の出現頻度分布図である。
【図９】本発明実施例のＶＬＣの符号化テーブルの図である。
【図１０】本発明実施例のデータファイル構成図である。
【図１１】本発明実施例の映像システムの該略図である。
【図１２】本発明実施例の記録時のファイル作成動作のフローチャートである。
【図１３】本発明実施例の記録系回路の詳細図である。
【図１４】本発明実施例の符号化時の画面間引きの概念図である。
【図１５】本発明実施例の再生時のファイル検索動作のフローチャートである。
【図１６】本発明実施例の再生系回路の詳細図である。
【図１７】本発明実施例のＮＴＳＣ標準再生時の画面構成図である。
【図１８】本発明実施例のＰＡＬの１／２倍速再生時の画面構成図である。
【符号の説明】
５４ 動き検出回路
５５ 動き補償予測回路
５７ 符号化回路
５８ 符号量確認回路
７０ 動き補償回路
７１ 信号処理回路
Claims (2)
- 被写体からの撮像光を第１のフレームレートの映像信号に変換する変換手段と、
前記映像信号を動き補償付予測符号化により符号化する符号化手段と、
前記符号化手段により符号化した前記映像信号を格納するメモリと、
前記メモリから読み出した前記映像信号を伸張する伸張手段と、
前記伸張手段により伸張した前記映像信号に対して駒落とし処理を施すことで前記第１のフレームレートよりも低い第２のフレームレートの映像信号を出力する信号処理手段と、
前記信号処理手段の後段に配置され、モードに応じて係数を設定可能なローパスフィルタと、
を備えたことを特徴とする映像システム。 - 前記第２のフレームレートは、ＮＴＳＣ規格またはＰＡＬ規格に対応したフレームレートであることを特徴とする請求項１に記載の映像システム。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP15086994A JP3604732B2 (ja) | 1994-07-01 | 1994-07-01 | 映像システム |
| US08/493,654 US5739865A (en) | 1994-07-01 | 1995-06-22 | Image processing system with selective reproduction using thinning out or interpolation |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP15086994A JP3604732B2 (ja) | 1994-07-01 | 1994-07-01 | 映像システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH0818888A JPH0818888A (ja) | 1996-01-19 |
| JP3604732B2 true JP3604732B2 (ja) | 2004-12-22 |
Family
ID=15506162
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP15086994A Expired - Fee Related JP3604732B2 (ja) | 1994-07-01 | 1994-07-01 | 映像システム |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US5739865A (ja) |
| JP (1) | JP3604732B2 (ja) |
Families Citing this family (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4456675B2 (ja) * | 1996-04-17 | 2010-04-28 | 株式会社日立製作所 | 映像記録再生装置及び映像記録再生方法 |
| US20050041132A1 (en) * | 1996-12-02 | 2005-02-24 | Nikon Corporation | Electronic camera |
| JP3596307B2 (ja) * | 1998-09-28 | 2004-12-02 | 日本ビクター株式会社 | 撮像装置 |
| JP2001210013A (ja) * | 1999-11-15 | 2001-08-03 | Hitachi Ltd | データ再生装置 |
| JP3487259B2 (ja) | 2000-05-22 | 2004-01-13 | 日本電気株式会社 | 映像表示装置とその表示方法 |
| JP2003032677A (ja) * | 2001-07-18 | 2003-01-31 | Hitachi Ltd | 動画像圧縮符号化装置 |
| US7272658B1 (en) * | 2003-02-13 | 2007-09-18 | Adobe Systems Incorporated | Real-time priority-based media communication |
| JP5036410B2 (ja) * | 2007-05-31 | 2012-09-26 | キヤノン株式会社 | 撮像装置及びその制御方法 |
| CN101399945B (zh) * | 2007-09-29 | 2012-03-14 | 新奥特硅谷视频技术有限责任公司 | 一种在pal制式环境下支持ntsc制式编辑的方法 |
| CN101399928B (zh) * | 2007-09-29 | 2012-03-14 | 新奥特硅谷视频技术有限责任公司 | 一种非线性编辑*** |
Family Cites Families (24)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP0146713B2 (en) * | 1983-10-19 | 1996-04-10 | Nippon Hoso Kyokai | Multiplex subsampling transmission system for a high definition color television picture signal |
| US5014116A (en) * | 1988-03-10 | 1991-05-07 | Kabushiki Kaisha Toshiba | Color television system |
| JP2696901B2 (ja) * | 1988-04-08 | 1998-01-14 | ソニー株式会社 | サンプリング周波数変換回路 |
| AU612543B2 (en) * | 1989-05-11 | 1991-07-11 | Panasonic Corporation | Moving image signal encoding apparatus and decoding apparatus |
| FR2651402B1 (fr) * | 1989-08-22 | 1991-10-25 | Europ Rech Electr Lab | Dispositif de conversion de frequence trame et du nombre de lignes pour un recepteur de television haute definition. |
| US5504532A (en) * | 1989-09-07 | 1996-04-02 | Advanced Television Test Center, Inc. | Bi-directional television format digital signal converter with improved luminance signal-to-noise ratio |
| US4998167A (en) * | 1989-11-14 | 1991-03-05 | Jaqua Douglas A | High resolution translation of images |
| JPH03192392A (ja) * | 1989-12-22 | 1991-08-22 | Yamashita Denshi Sekkei:Kk | 映像信号出力装置 |
| US5093720A (en) * | 1990-08-20 | 1992-03-03 | General Instrument Corporation | Motion compensation for interlaced digital television signals |
| US5428399A (en) * | 1991-04-15 | 1995-06-27 | Vistek Electronics Limited | Method and apparatus for image translation with improved motion compensation |
| GB9110639D0 (en) * | 1991-05-15 | 1991-07-03 | British Broadcasting Corp | Method of video bandwidth reduction with high quality compatible signal |
| US5229853A (en) * | 1991-08-19 | 1993-07-20 | Hewlett-Packard Company | System for converting a video signal from a first format to a second format |
| GB2259212B (en) * | 1991-08-27 | 1995-03-29 | Sony Broadcast & Communication | Standards conversion of digital video signals |
| US5357281A (en) * | 1991-11-07 | 1994-10-18 | Canon Kabushiki Kaisha | Image processing apparatus and terminal apparatus |
| US5335013A (en) * | 1992-01-16 | 1994-08-02 | Faber Robert A | Method and apparatus for video camera image film simulation |
| KR950002658B1 (ko) * | 1992-04-11 | 1995-03-24 | 주식회사금성사 | 영상신호의 압축 부호화 및 복호화장치 |
| JPH06197334A (ja) * | 1992-07-03 | 1994-07-15 | Sony Corp | 画像信号符号化方法、画像信号復号化方法、画像信号符号化装置、画像信号復号化装置及び画像信号記録媒体 |
| US5461420A (en) * | 1992-09-18 | 1995-10-24 | Sony Corporation | Apparatus for coding and decoding a digital video signal derived from a motion picture film source |
| US5384598A (en) * | 1992-10-20 | 1995-01-24 | International Business Machines Corporation | System and method for frame differencing video compression and decompression with frame rate scalability |
| US5450140A (en) * | 1993-04-21 | 1995-09-12 | Washino; Kinya | Personal-computer-based video production system |
| US5337089A (en) * | 1993-06-07 | 1994-08-09 | Philips Electronics North America Corporation | Apparatus for converting a digital video signal which corresponds to a first scan line format into a digital video signal which corresponds to a different scan |
| US5408270A (en) * | 1993-06-24 | 1995-04-18 | Massachusetts Institute Of Technology | Advanced television system |
| US5430486A (en) * | 1993-08-17 | 1995-07-04 | Rgb Technology | High resolution video image transmission and storage |
| US5453792A (en) * | 1994-03-18 | 1995-09-26 | Prime Image, Inc. | Double video standards converter |
-
1994
- 1994-07-01 JP JP15086994A patent/JP3604732B2/ja not_active Expired - Fee Related
-
1995
- 1995-06-22 US US08/493,654 patent/US5739865A/en not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| JPH0818888A (ja) | 1996-01-19 |
| US5739865A (en) | 1998-04-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7098959B2 (en) | Frame interpolation and apparatus using frame interpolation | |
| EP1176830A1 (en) | Improved processing apparatus, image recording apparatus and image reproduction apparatus | |
| JP3604732B2 (ja) | 映像システム | |
| JP4121590B2 (ja) | 画像表示装置及びその特殊再生制御装置 | |
| JP3609571B2 (ja) | 画像再生装置 | |
| JP3746540B2 (ja) | 画像処理装置 | |
| JP4191385B2 (ja) | Ｍｐｅｇ符号化信号のトリックプレイ再生 | |
| JP4027337B2 (ja) | 映像情報記録装置および映像情報記録方法ならびに映像情報再生装置および映像情報再生方法 | |
| JP3104776B2 (ja) | 画像再生装置及び画像復号装置 | |
| JP3599369B2 (ja) | 記録装置 | |
| JP3235917B2 (ja) | 画像記録再生装置 | |
| JP3206462B2 (ja) | ディジタル画像信号記録装置及び再生装置 | |
| JP3733248B2 (ja) | 再生装置及びその方法 | |
| JPH06339113A (ja) | 動画像記録再生装置 | |
| JP2005229553A (ja) | 画像処理装置 | |
| JP3606634B2 (ja) | 画像データ記録装置およびディジタル画像データの記録方法ならびにディジタル画像データの再生装置および方法 | |
| JPH06181560A (ja) | 記録再生装置 | |
| JP3647102B2 (ja) | 撮像装置 | |
| JP2841098B2 (ja) | 画像処理方法 | |
| JP3705459B2 (ja) | ディジタル画像信号記録装置及び画像信号記録再生装置 | |
| JPH05328298A (ja) | 映像記録装置 | |
| JPH0787446A (ja) | 光ディスク記録装置及び光ディスク再生装置及び光ディスク | |
| JP2000354220A (ja) | 記録装置 | |
| JPH11220702A (ja) | 映像記録及び再生装置、映像表示装置、及び映像伝送方式 | |
| JP2000041222A (ja) | 映像再生装置とその方法および映像表示装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20040921 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20040930 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20071008 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081008 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091008 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091008 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101008 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101008 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111008 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111008 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121008 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131008 Year of fee payment: 9 |
|
| LAPS | Cancellation because of no payment of annual fees |