JPH099224A

JPH099224A - リップシンク制御装置を用いた動画像および音声コーデック装置

Info

Publication number: JPH099224A
Application number: JP15194995A
Authority: JP
Inventors: Yoshikazu Fukuhara; 義和福原; Hideyuki Yoshida; 秀行吉田
Original assignee: Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Holdings Corp
Priority date: 1995-06-19
Filing date: 1995-06-19
Publication date: 1997-01-10

Abstract

(57)【要約】【目的】被写体の口の動きと音声が一致するようにす
る。【構成】動きベクトル検出回路４aは、カメラ１で撮
像した被写体の動きが大きいときは、ブロックサイズを
小さくして性能を向上させ、そのブロックマッチング演
算回路群の演算量に応じた遅延レベルのリップシンク制
御信号Ｌsをリップシンク制御回路14aに出力しリップシ
ンクを行う。また、被写体の動きが小さいときには、ブ
ロックサイズを大きくしてブロックマッチング演算回路
群の演算処理の時間を大幅に短縮し、適応的にリップシ
ンクの遅延時間を短くする。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、テレビ会議システム等
の通信機器分野における動画像および音声コーデック装
置に関し、特に音声データの圧縮後および伸長前に行う
リップシンク制御装置に関するものである。

【０００２】

【従来の技術】近年、リップシンク制御装置は、画像コ
ーデック側の画像データの圧縮、伸長による遅れが画像
の動きによって変化するにもかかわらず音声データの遅
延量は伝送レートによる固定制御が主流となっている。
以下、図面を参照しながら従来のリップシンク制御装置
について説明を行う。

【０００３】図５は従来の動きベクトル検出回路を用い
た動画像および音声コーデック装置の機能ブロック図で
ある。まず、画像系はカメラ１からの入力ビデオ信号
(ＮＴＳＣ)はＡ／Ｄ変換器２によってＡ／Ｄ変換され、
ライン変換器３でITC-TH261(例えばＣＩＦ)という世界
共通の中間フォーマットに変換が施される。そして、Ｃ
ＩＦ変換により符号化した映像信号は動きベクトル検出
回路４にて動き補償を施し、符号化およびＤＣＴ部５で
動き補償された画像フレーム間予測信号に符号化され
る。また、動きベクトル検出回路４から生成される前画
像フレームの再生画像信号との差分信号を符号化および
ＤＣＴ部５のＤＣＴにて離散コサイン変換を行い変換係
数をジグザグスキャン配列にした後、量子化部６で量子
化される。そして、その量子化されたデータを可変長符
号化部７にてさらにデータ圧縮した後、誤り検出訂正部
８で誤り訂正符号化を行い、マルチメディア多重，分離
部９によって定められたデータ構造に従う一つのビット
列に多重化して公衆回線網Ｎへ伝送される。

【０００４】次に音声系はマイク11からの入力音声信号
はＡ／Ｄ変換器12によってＡ／Ｄ変換され、音声符号化
器13で音声圧縮され、リップシンク制御回路14にて画像
系の遅れに見合った音声の遅延がＣＰＵ10より制御線Ｌ
₁を介して固定制御される。そして、マルチメディア多
重，分離部９によって定められたデータ構造に従う一つ
のビット列に多重化して公衆回線網Ｎへ伝送される。

【０００５】なお、ＣＰＵ10は制御検出部15を介してカ
メラ１の方向制御と、それに伴う音声符号化器13の制御
およびリップシンク制御回路14の固定制御を行う。

【０００６】図６は図５に示す従来の動きベクトル検出
回路４のブロック図であり、16は、入力画像としての16
×16画素からなるブロックデータａおよび記憶画像とし
ての32×32画素からなるブロックデータｂを入力して、
記憶画像のブロックデータｂから読み出すブロックの位
置を少しずつずらしていくウィンドサーチ回路、17はブ
ロックマッチング演算を行い残差ｆを計算する256個の
演算回路を備えた演算エレメント部、18は得られた残差
値から最小値の残差ｆｍを求める比較回路、19は動きベ
クトル情報として、動きベクトル(座標Ｖx，Ｖy、残差
ｆｍ)と同一座標での残差ｆｓをシリアル出力にする出
力回路である。

【０００７】まず、演算エレメント部17でのブロックマ
ッチング演算は、次の(数１)で表されるブロックデータ
ａ，ｂとの差分絶対値の総和を残差ｆとして計算してい
る。

【０００８】

【数１】

【０００９】なお、32×32画素のブロックデータｂを16
×16画素のウィンド(ブロックデータａ)でサーチするの
で、水平、垂直方向に各々16回、合計256回の試行が必
要になる。

【００１０】このように各演算エレメント部17の演算回
路17a，17b……17nからの残差出力ｆは合計256個の比較
回路18に出力されるが、比較回路18はこれらの大小を比
較して最小値の残差ｆｍを検出し、その時のクロック係
数値から動きベクトルの座標Ｖx，Ｖyを算出している。

【００１１】そして音声系に対して、映像系のこのよう
な動きベクトル演算等による遅れの情報は伝達されない
ため、図５のリップシンク制御回路14は、映像系の平均
的な遅れから推測した固定設定値となっている。なおこ
の固定設定値は、片方向０〜500msec程度となってお
り、ＣＰＵ10から設定される。

【００１２】

【発明が解決しようとする課題】しかしながら、上記し
た従来の動きベクトル検出回路では、演算エレメント部
17での全探索によるブロックマッチング演算を実行し、
被写体の動きレベルに関わらず全ての演算を行っている
ためリップシンクの遅延時間を動きレベルに応じて切り
換える手段を持たず固定に設定していた。そのため被写
体の口の動きと声が一致しない現象が起き自然性が損な
われていた。

【００１３】本発明は上記課題を解決し、第１の発明の
目的は連続するフレーム間で画素ブロックの動きを合理
的に推測し、かつ毎秒に処理する画像フレーム数を制御
(間引き)して、被写体の動きのレベルに応じた演算を行
って画像フレーム間予測精度の改善をはかり、間引きし
た画像フレームの動きベクトルは予測検出して補い、演
算の試行回数を削減して効率の良い演算を実行すること
が可能な動きベクトル検出回路と、かつその動きベクト
ルの演算遅延情報をリップシンク制御回路に伝送し適応
的に音声データを遅延するものである。

【００１４】また、第２の発明の目的は、連続する画像
フレーム間の伝送速度を合理的に推定し、その画像フレ
ーム間の伝送速度情報をリップシンク制御装置に伝送し
適応的に音声データを遅延するものである。

【００１５】

【課題を解決するための手段】本発明の第１の発明は、
その目的を達成するため被写体の動きに応じてカメラの
方向を制御するＣＰＵと、前記ＣＰＵがカメラを方向制
御する際、毎秒処理する画像フレーム数を制御する画像
フレーム制御回路と、前記画像フレーム制御回路からの
出力から間引かれた画像フレームの動きベクトルを予測
する動きベクトル予測検出回路と、入力画像の被写体の
動きレベルを判別するフィルターおよびユーザーがブロ
ックサイズを選択可能なスイッチ回路群と、ブロックマ
ッチング演算を行うウィンドサーチ回路およびブロック
マッチング演算回路群と、前記ウィンドサーチ回路およ
びブロックマッチング演算回路群の出力の大小比較を行
う比較回路群と、前記比較回路群の出力を動きベクトル
として出力する出力回路とからなる動きベクトル検出回
路並びに前記比較回路群からのｎビット遅延情報を遅延
させる遅延レベル出力回路と、前記画像フレーム制御回
路からの出力から間引かれた画像フレームのリップシン
クを予測するリップシンク予測検出回路と、符号化され
た音声データをリップシンク制御信号によって前記音声
データの遅延量が決定される遅延テーブルを切り換える
マルチプレクサとからなるリップシンク制御回路を有す
ることを特徴とする。

【００１６】また、本発明の第２の発明は、その目的を
達成するため、カメラからの動画像を圧縮する画像圧縮
回路と、マイクからの音声を圧縮する音声圧縮回路と、
前記画像圧縮回路で処理された画像ごとの時系列一貫番
号ＴＲデータを読み出し、単位時間内のＴＲデータ差よ
り前画像フレームと次画像フレーム間の伝送時間を判別
し、前記判別された時間より、予め得られている画像フ
レーム間時間と音声データ同期ずれ量テーブルから音声
信号を遅延させ画像と音声の同期をとるＣＰＵとからな
るリップシンク制御回路を有することを特徴とする。

【００１７】

【作用】第１の発明によれば、被写体の動きが大きいと
き、ブロックサイズを小さくして性能を向上させその演
算量に応じた遅延レベルでリップシンクが動作し、被写
体の動きが小さいときには、ブロックサイズを大きくし
て演算処理の時間を大幅に短縮することができ、適応的
にリップシンクの遅延時間も短くする。また、カメラの
動きに対しては音声を伴った追随性の向上を可能にし、
またユーザーがブロックサイズを選択して画質を調整す
ることも可能になる。

【００１８】また、第２の発明によれば、ＣＰＵが画像
圧縮回路で処理された画像ごとの時系列一貫番号ＴＲデ
ータを読み出し、単位時間内のＴＲデータ差より前画像
フレームと次画像フレーム間の伝送時間を判別し、前記
判別された時間より、予め得られている画像フレーム間
時間と音声データ同期ずれ量テーブルから音声信号を遅
延させ画像と音声の同期をとることができる。

【００１９】

【実施例】図１は本発明の第１の実施例におけるリップ
シンク制御装置を用いた動画像および音声コーデック装
置の機能ブロック図である。図１において前記従来例の
図５と同じ機能ブロックには同じ符号を付し、その説明
を省略する。ここで、従来例とは異なり、画像系の遅れ
に見合った音声の遅延が、ＣＰＵ10より固定制御するこ
となく、動きベクトル検出回路４aからの制御線Ｌ₂を介
してリップシンク制御回路14aへリップシンク制御信号
Ｌsを適応的に加え制御する点に特徴がある。

【００２０】図２は図１の動きベクトル検出回路４aお
よびリップシンク制御回路14aのブロック図を示す。動
きベクトル検出回路４aにおける21は入力画像の被写体
の動きレベルを判別するフィルターおよびユーザーがブ
ロックサイズを選択可能なスイッチ21a，21b……21nか
らなるスイッチ回路群(以下、フィルターおよびスイッ
チ回路群という)である。22はブロックマッチング演算
を行うウィンドサーチ回路およびブロックマッチング演
算回路群である。これは、ブロック内にブロックサイズ
22a，22b……22n

【００２１】

【外１】

【００２２】を有し、図２の左から順にブロックササイ
ズは半減していくように配置されている。そして、後述
するようにブロックサイズが小さくなると、計算量が増
加し、左から順に遅延が小さい方から大きい方へ移行す
る。23は前記ウィンドサーチ回路およびブロックマッチ
ング演算回路群22の出力の大小比較を行う比較回路群で
ある。

【００２３】これらフィルターおよびスイッチ回路群2
1，ウィンドサーチ回路およびブロックマッチング演算
回路群22，比較回路群23は、それぞれ１対１に対応する
ｎ＋１個のユニットからなる。また24は出力回路、26は
画像フレーム制御回路であり、ＣＰＵ10がカメラ１を方
向制御する際、毎秒処理する画像フレーム数を制御す
る。27は動きベクトル予測検出回路であり、前記画像フ
レーム制御回路26からの出力から間引かれた画像フレー
ムの動きベクトル20を予測する。28は前記ブロックサイ
ズ22a，22b……22nをユーザーが選択するためのスイッ
チである。

【００２４】次にリップシンク制御回路14aにおける29
は前記比較回路群23からのｎビット遅延情報(図１のリ
ップシンク制御信号Ｌs)を遅延させる遅延レベル出力回
路である。30は前記画像フレーム26からの出力から間引
かれた画像フレームのリップシンクを予測するリップシ
ンク予測検出回路である。31は音声符号化器13で符号化
された音声データ33をリップシンク制御信号Ｌsによっ
て前記音声データ33の遅延量が決定される遅延テーブル
32(０，５……500ms)を切り換えるマルチプレクサであ
る。

【００２５】図３は本発明の第１の実施例におけるブロ
ックマッチングの基準画像と前画像フレーム検索領域と
の幾何学的関係図であって、図中、Ｃは基準画像であ
り、Ｍ×Ｎブロックでなる現フレームを示し、Ｄは前画
像フレームにおける探索領域画像である。以上のように
構成された図２に示す動きベクトル検出回路とリップシ
ンク制御回路の動作を説明する。

【００２６】今、第ｎフレームの１つ前のフレームであ
るところの第(ｎ−１)フレームの画像が送信、受信の両
端において蓄えられるとし、この情報と次の第ｎフレー
ムの差分情報をもとにして、被写体の動きエリアを検出
する。それには、画面をサブブロックに分割しておき、
このサブブロックをいずれかの方向にどれだけの画素数
を動かしたとき、第ｎフレーム内でパターンマッチング
がとれるかで動きベクトル(方向と移動量)を検出する。
このことをすべてのサブブロックについて行い動きベク
トルを伝送する。同時に送信端ではこの動きベクトルを
使用して動き予測した第ｎフレーム画像データを作る。
実際の第ｎフレーム画像データとの差分は予測誤差と呼
ばれ符号化し伝送される。受信端では、既に蓄えられて
いる第(ｎ−１)フレーム情報と送られてきた動きベクト
ルおよび予測差分から第ｎフレームを復元する。

【００２７】ここで、図２のブロックマッチング演算回
路群22におけるブロックマッチング演算では、図３にお
いて、前フレームは(Ｍ＋２ｐ)×(Ｎ＋２ｐ)の全領域で
あって、サブブロックＣ(基準画像)は、その動きのレベ
ルに応じて、動きがなければ(Ｍ＋２ｐ)×(Ｎ＋２ｐ)を
サブブロックＣとして、あるいは、動きレベルが大きけ
れば、最大(Ｎ×Ｎ)サイズとしてブロックマッチング演
算を行う。このときの探索する領域は、前フレームＤの
うち、サブブロックＣに相当する領域ごとに(Ｄ領域)Ｃ
と比較する。

【００２８】そして(数２)で表されるサブブロックＣ，
ブロックＤとの差分絶対値の総和を残差ｆとして計算し
ている。

【００２９】

【数２】

【００３０】そしてこの処理では、動き推定は±Ｐ画素
またはライン／フレームの範囲で行われ、全画素シフト
(水平方向)および全ラインシフト(垂直方向)を考えた力
ずくの探索は(２Ｐ)²回のコスト関数の計算を必要とす
る。

【００３１】その際、前述のようにブロックサイズ(Ｍ
×Ｎ)を動きレベルに応じて変化させるとコスト関数の
計算量も変化するため、例えば静止状態のときはブロッ
クサイズ(Ｍ×Ｎ)を大きく設定して、コスト関数の計算
量を減少させ、効率よくすることができる。

【００３２】ここで、図２に示すように、フィルターお
よびスイッチ回路群21の各段間には次段がオンすると切
れるスイッチ28が設けられているので、例えば、記憶画
像のブロックデータｂが静止画像であるとき、初段のフ
ィルターおよびスイッチ回路21aがオンするとともに、
フィルターおよびスイッチ回路群21bとの間にスイッチ2
8がウィンドサーチ回路およびブロックマッチング演算
回路群22の初段のブロックサイズ22a(Ｍ／２⁰×Ｎ／
２⁰)のみを有効とし、次段以下を無効とするので、最も
大きなブロックサイズによるマッチング演算が行われ
る。

【００３３】そして、これより記憶画像のブロックデー
タｂの動きレベルが上昇すると、２段目のフィルターお
よびスイッチ回路21bと２段目のウィンドサーチ回路お
よびブロックマッチング演算回路群22の22b(ブロックサ
イズＭ／２¹×Ｎ／２¹)のみ有効となる。さらに動きベ
クトルに応じてブロックサイズを変更することにより、
計算量をできるだけ、少なくして、通信機器の追随性を
向上することができる。

【００３４】このフィルターおよびスイッチ回路群21は
ＣＰＵ10からもブロックサイズ22a，22b……22nを切り
換え可能なスイッチ構成になっており、ブロックサイズ
を固定させるマニュアル制御も可能である。

【００３５】次に図２に示す動きベクトル検出回路４a
およびリップシンク制御回路14aを用いた図１の動作を
説明する。ＣＰＵ10はカメラ１の方向制御をしている場
合、ＣＰＵ10はその方向制御内容に基づいて、ブロック
サイズおよび画像フレーム数の制御を行う。例えばカメ
ラ１の制御速度が速い場合、カメラ１の動きに対する追
従性を向上させるための手段は以下のとおりである。

【００３６】まず、第１にＣＰＵ10はブロックサイズを
許容範囲内で大きく設定して、コスト関数の計算量を減
少させて、ブロック歪み等画質は低下するが動きに対す
る追従性を優先させることができる。そして、制御線Ｌ
₂へのリップシンク制御信号Ｌsは、選択されたブロック
サイズに基づいたｎビットの情報が伝送される。

【００３７】第２に画質は低下させずに動きに対する追
従性を向上させるため、ＣＰＵ10はブロックサイズを小
さく設定し、コスト関数が増加して処理時間が長くなっ
た分、毎秒に処理する画像フレーム数を制御(間引き)し
て、情報量を削減する。そして間引きした画像フレーム
の動きベクトルは前後の画像フレームの動きベクトルか
ら予測検出して補足する。そして、制御線Ｌ₂のリップ
シンク制御信号Ｌsも、選択されたブロックサイズに基
づいたｎビットの情報と間引きした画像フレームは前後
の遅延レベルから予測検出したｎビットの情報が伝送さ
れる。このリップシンク制御信号の遅延レベルの一例を
表１に示す。

【００３８】

【表１】

【００３９】以上説明したように本実施例は、被写体の
動きの速さに応じたブロックサイズで動きベクトル演算
処理をするため、リップシンク処理もその選択されたブ
ロックサイズを基準に遅延設定される。これによって被
写体の動きレベルに関わらず、被写体の口の動きと声が
一致するようになる。

【００４０】図４は本発明の第２の実施例におけるリッ
プシンク制御装置を用いた動画像および音声コーデック
装置の機能ブロック図である。前記図１と同じ機能ブロ
ックには同じ符号を付し、その説明を省略する。図４に
おいて、34はカメラ１からの動画像を圧縮する画像圧縮
回路、35はマイク11からの音声を圧縮する音声圧縮回
路、36は前記音声圧縮回路35で圧縮された音声をＣＰＵ
10の制御により所定時間だけ遅延させる信号遅延回路、
37は予め得られている画像フレーム間時間と音声データ
同期ずれ量デーブル、38は回線インターフェース(Ｉ／
Ｆ)である。

【００４１】次に動作を説明すると、まずカメラ１から
入った画像信号は画像圧縮回路34「ＩＴＣ−ＴＨ．26
1」のアルゴリズムで圧縮される。次にマルチメディア
多重・分離部９で音声信号やその他データと多重化され
回線インターフェース38を介して公衆回線網Ｎに伝送さ
れる。

【００４２】ここで、「ＩＴＣ−ＴＨ．261」のアルゴ
リズム上で処理されている画像ごとの時系列一貫番号
“ＴＲ”データをＣＰＵ10に読み込み画像搬出スピード
を演算する。画像ごとのスピードは次の手順で求める。
まずＣＰＵ10に読み込んだ“ＴＲ”データを｛ｎ２｝と
して記憶する。次に設定する単位時間後“ＴＲ”データ
を読み込む、これを｛ｎ１｝とする。この２つのデータ
より｛ｎ１−ｎ２｝を演算すると単位時間内の画像の駒
数が得られる。この単位時間内の“ＴＲ”データ差より
前画像フレームと次画像フレーム間の伝送時間を判別す
る。

【００４３】判別された時間より予め得られている画像
フレーム間時間と音声データ同期ずれ量テーブル37から
音声信号処理回路ラインに挿入されている信号遅延回路
36を制御し音声信号を遅延させ画像と音声の同期あわせ
を行う。

【００４４】以上説明したように本実施例は、画像圧縮
ブロックより搬出している画像フレームスピードから画
像処理スピードを判断してリップシンク処理の遅延量を
制御する。これによって、画像フレームスピードが速い
ときは、遅延量が少なく逆に遅いときは遅延量を大きく
して被写体の口の動きと音声が一致するようになる。

【００４５】

【発明の効果】以上説明したように本発明の第１の発明
は、被写体の動きの速さに応じたブロックサイズで動き
ベクトル演算処理されるため、リップシンク処理もその
選択されたブロックサイズを基準に遅延されることによ
って、被写体の動きレベルに関わらず被写体の口の動き
と音声が一致するようになる。

【００４６】また、第２の発明は、画像圧縮ブロックよ
り搬出している画像フレームスピードから画像処理スピ
ードを判断してリップシンク処理の遅延量を制御するこ
とによって、画像フレームスピードが速いときは、遅延
量が少なく逆に遅いときは遅延量を大きくして被写体の
口の動きと音声が一致するようになる。

【図面の簡単な説明】

【図１】本発明の第１の実施例におけるリップシンク制
御装置を用いた動画像および音声コーデック装置の機能
ブロック図である。

【図２】図１の動きベクトル検出回路およびリップシン
ク制御回路のブロック図である。

【図３】本発明の第１の実施例におけるブロックマッチ
ングの基準画像と前画像フレーム探索領域の幾何学的関
係図である。

【図４】本発明の第２の実施例におけるリップシンク制
御装置を用いた動画像および音声コーデック装置の機能
ブロック図である。

【図５】従来の動きベクトル検出回路を用いた動画像お
よび音声コーデック装置の機能ブロック図である。

【図６】図５の動きベクトル検出回路の機能ブロック図
である。

【符号の説明】

１…カメラ、２，12…Ａ／Ｄ変換器、３…ライン変
換器、４a…動きベクトル検出回路、５…符号化お
よびＤＣＴ部、６…量子化部、７…可変長符号化
部、８…誤り検出訂正部、９…マルチメディア多
重，分離部、 10…ＣＰＵ、 11…マイク、 13…音声
符号化器、 14a…リップシンク制御回路、15…制御検
出部、 21…フィルターおよびスイッチ回路群、 22…
ウィンドサーチ回路およびブロックマッチング演算回路
群、 23…比較回路群、 24…出力回路、 26…画像フ
レーム制御回路、 27…動きベクトル予測検出回路、28
…スイッチ、 29…遅延レベル出力回路、 30…リップ
シンク予測検出回路、 31…マルチプレクサ、 32…遅
延テーブル、 34…画像圧縮回路、 35…音声圧縮回
路、 36…信号遅延回路、 37…画像フレーム間時間と
音声データ同期ずれ量テーブル、 38…回線インターフ
ェース(Ｉ／Ｆ)。

Claims

【特許請求の範囲】

【請求項１】被写体の動きに応じてカメラの方向を制
御するＣＰＵと、前記ＣＰＵがカメラを方向制御する
際、毎秒処理する画像フレーム数を制御する画像フレー
ム制御回路と、前記画像フレーム制御回路からの出力か
ら間引かれた画像フレームの動きベクトルを予測する動
きベクトル予測検出回路と、入力画像の被写体の動きレ
ベルを判別するフィルターおよびユーザーがブロックサ
イズを選択可能なスイッチ回路群と、ブロックマッチン
グ演算を行うウィンドサーチ回路およびブロックマッチ
ング演算回路群と、前記ウィンドサーチ回路およびブロ
ックマッチング演算回路群の出力の大小比較を行う比較
回路群と、前記比較回路群の出力を動きベクトルとして
出力する出力回路とからなる動きベクトル検出回路並び
に前記比較回路群からのｎビット遅延情報を遅延させる
遅延レベル出力回路と、前記画像フレーム制御回路から
の出力から間引かれた画像フレームのリップシンクを予
測するリップシンク予測検出回路と、符号化された音声
データをリップシンク制御信号によって前記音声データ
の遅延量が決定される遅延テーブルを切り換えるマルチ
プレクサとからなるリップシンク制御回路を有すること
を特徴とするリップシンク制御装置を用いた動画像およ
び音声コーデック装置。
【請求項２】前記ＣＰＵは、前記ブロックマッチング
演算回路群の動作制御において、ブロックサイズの大き
さを制御してコスト関数の計算量の減少、情報量の削減
を行うことを特徴とする請求項１記載のリップシンク制
御装置を用いた動画像および音声コーデック装置。
【請求項３】カメラからの動画像を圧縮する画像圧縮
回路と、マイクからの音声を圧縮する音声圧縮回路と、
前記画像圧縮回路で処理された画像ごとの時系列一貫番
号ＴＲデータを読み出し、単位時間内のＴＲデータ差よ
り前画像フレームと次画像フレーム間の伝送時間を判別
し、前記判別された時間より、予め得られている画像フ
レーム間時間と音声データ同期ずれ量テーブルから音声
信号を遅延させ画像と音声の同期をとるＣＰＵとからな
るリップシンク制御回路を有することを特徴とするリッ
プシンク制御装置を用いた動画像および音声コーデック
装置。