JPH0775077A

JPH0775077A - Ｔｖ電話装置

Info

Publication number: JPH0775077A
Application number: JP5243906A
Authority: JP
Inventors: Makoto Senda; 誠千田
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 1993-09-03
Filing date: 1993-09-03
Publication date: 1995-03-17

Abstract

(57)【要約】（修正有）【目的】装置コストを低減できるＴＶ電話装置を提供
する。【構成】複数端末との画像，音声の相互通信を、少な
くとも画像圧縮伸長処理手段１０を用いて行うＴＶ電話
装置で、画像圧縮伸長処理手段１０は、複数端末からの
各画像データを各々蓄積する画像蓄積手段と、複数の画
像記憶手段と、画像蓄積手段に蓄積されている各画像デ
ータのうちの１つを選択する選択手段と、前記画像記憶
手段に記憶されている前記画像データの前画像データを
読み出す読出手段と、前記画像データと前記前画像デー
タとを復号化する復号化手段と、この復号化手段により
復号化した画像データを複数の画像記憶手段のうちの空
の画像記憶手段に書き込む書込手段とを有するものであ
る。この構成により、各画像データを時分割処理で復号
化することができ、画像圧縮伸長処理手段１０の復号化
手段は複数でなく一つですみ、回路規模の縮小が可能で
装置コストを低減できる。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、ＴＶ電話装置に関し、
特にデジタル通信回線を介して、映像及び音声の送受信
を行うＴＶ電話装置に関する。

【０００２】

【従来の技術】従来のアナログ電話回線に接続した電話
機間の交信では、音声のみ伝送可能であり、伝送速度も
低速であった。

【０００３】しかし、近年、通信技術や半導体技術，光
技術の進歩に伴い、デジタル電話回線が整備され、高速
で大容量のデータの伝送が可能になった。

【０００４】特に、デジタル伝送の特徴としては、伝送
によるデータの品質低下が無く送受両側で同レベルの品
質が保たれること、伝送データのメディアの特性に応じ
た伝送路を必要とせず、メディアの統合が図れること等
があり、復号メディア端末間の伝送が可能になった。従
って、従来の音声のみの交信から画像をも同時に伝送す
る電話端末が出現している。

【０００５】こうした状況の中、異なる復号端末間にお
いても相互通信が可能になるようＣＣＩＴＴ等による国
際標準化が進められており、デジタル電話回線を用いた
テレビ電話装置，テレビ会議システム等のＡＶ（Ａｕｄ
ｉｏＶｉｓｕａｌ）サービスとして、ＡＶサービス用
のサービス規定，プロトコル規定，マルチメディア多重
化フレーム構成規定がＣＣＩＴＴ勧告（または草案）
Ｈ.320，Ｈ.242，Ｈ.221等として発表されている。

【０００６】Ｈ.221では、６４Ｋｂｐｓから１９２０Ｋ
ｂｐｓまでのＡＶサービスにおけるフレーム構成及び端
末能力の交換や通信モードのＦＡＳ（ＦｒａｍＡｌｉ
ｇｎｍｅｎｔＳｉｇｎａｌ），ＢＡＳ（ＢｉｔＡｌ
ｌｏｃａｔｉｏｎＳｉｇｎａｌ）の符号割当が定義さ
れている。

【０００７】Ｈ.242では、ＢＡＳを用いたＡＶ端末間で
の能力交換及び通信モード切り替え等のプロトコルが定
義され、Ｈ.320ではＡＶサービス全般のシステムアスペ
クトが定義されている。

【０００８】上記勧告（または勧告草案）においては、
エンドツーエンドの物理コネクションの設定及びインチ
ャネルでのＦＡＳによる同期確立後、インチャネルでＢ
ＡＳを用いた端末能力の交換シーケンス，通信モードの
指定によるモード切り替えシーケンス等の手順により端
末間で画像，音声，データ等のマルチメディア通信を行
うための方法が規定されている。

【０００９】但し、各端末において自己の端末能力を状
況に応じて変化させたり交換された能力の範囲内でどの
通信モードを用いるかは規定の範囲外である。

【００１０】マルチメディア通信における各メディアの
転送速度は、音声データは音声符号化方式を指定するこ
とで決定され、制御データは、その使用の有無，使用す
る場合の転送速度を指定することにより決定され、設定
した通信路全体のデータ転送速度から、音声データの転
送速度と制御データの転送速度を引いた残りが画像デー
タの転送速度になる。

【００１１】

【発明が解決しようとうする課題】しかしながら、上記
従来例のＴＶ電話装置によれば、１端末との相互通信し
かできず、他地点との相互通信を考えた場合には、回線
部は当然複数持つ必要がある。更に、画像や音声の通信
をする際には、通信路の通信容量に限りがあるのでデー
タを圧縮伸張する符号化復号化が行われる。

【００１２】ここで、音声データの圧縮の場合には、画
像に比べればデータ量も少ないので、データを圧縮伸張
する符号化復号化部を同時に通信する端末台数分持つこ
とはさほど問題にはならない。

【００１３】しかし、画像データの圧縮伸張を行う場合
には、アルゴリズムも複雑で、かつ、データ量も多いた
め高速の演算処理が要求され、このような符号化複合化
部を同時に通信する端末台数分持つことは、回路規模の
増大、使用するメモリ容量の増大を招き、装置コストが
高騰してしまうという問題がある。

【００１４】そこで、本発明は、回路規模の縮小が可能
で装置コストを低減できるＴＶ電話装置を提供すること
を目的とする。

【００１５】

【課題を解決するための手段】本発明は、複数の端末と
の画像，音声の相互通信を、少なくとも画像データの圧
縮、伸長処理を行う画像圧縮伸長処理手段を用いて行う
ＴＶ電話装置において、前記画像圧縮伸長処理手段は、
複数の端末からの各画像データを各々蓄積する画像蓄積
手段と、複数の画像記憶手段と、前記画像蓄積手段に蓄
積されている各画像データのうちの１つを選択する選択
手段と、前記画像記憶手段に記憶されている前記選択手
段により選択した画像データの前画像データを読み出す
読出手段と、前記選択手段により選択した画像データと
読出手段により読み出した前画像データとにより復号化
する復号化手段と、この復号化手段により復号化した画
像データを前記複数の画像記憶手段のうちの空の画像記
憶手段を選択して書き込む書込手段とを有するものであ
る。

【００１６】前記複数の画像記憶手段の数は、同時に通
信が必要な端末数より少なくとも一つ多く設定する。

【００１７】

【作用】前記ＴＶ電話装置の作用を説明する。

【００１８】このＴＶ電話装置の画像蓄積手段は、複数
の端末からの各画像データを各々蓄積する。前記選択手
段は、前記画像蓄積手段に蓄積されている各画像データ
のうちの１つを選択する。

【００１９】また、前記読出手段は、画像記憶手段に記
憶されている前記選択手段により選択した画像データの
前画像データを読み出す。

【００２０】前記復号化手段は、前記選択手段により選
択した画像データと読出手段により読み出した前画像デ
ータとを復号化する。

【００２１】この復号化手段により復号化された画像デ
ータは、前記書込手段により選択される前記複数の画像
記憶手段のうちの空の画像記憶手段に書き込まれる。

【００２２】このような動作により、複数端末からの複
数の画像データを時分割処理で復号化することができ、
画像圧縮伸長処理手段の復号化手段は複数でなく一つで
すみ、回路規模の縮小が可能で装置コストを低減でき
る。

【００２３】また、前記複数の画像記憶手段の数を、同
時に通信が必要な端末数より少なくとも一つ多くだけ設
定することですみ、この点からも回路規模の縮小が可能
で装置コストを低減できる。

【００２４】

【実施例】以下、本発明の一実施例を図面を参照して説
明する。

【００２５】図１は本発明の一実施例に係わるＴＶ電話
装置の構成ブロック図で、特に、回線数を４回線とし、
同時通信先を４端末とした場合を示すものである。

【００２６】同図に示すＴＶ電話装置は、全体の制御を
行うシステム制御部１２と、このシステム制御部１２に
接続した本装置の制御をするための制御情報入力に使用
するキーボード，タッチパネル等の操作部１１と、シス
テム制御部１２の指示により、音声入力手段としてハン
ドセット１，マイク２，スピーカ３を切り換える機能、
音量レベル調整のための利得調整機能、ハンドセット１
がオンフック状態かオフフック状態かを検知するオン／
オフ検知機能、音声入出力手段として、マイク２とスピ
ーカ３を使用した時にエコーを消去するためのエコーキ
ャンセル機能，ダイヤルトーン，呼出トーン，ビジート
ーン，着信音等のトーン生成機能を持つ音声インターフ
ェース部４と、システム制御部１２の制御により、６４
ｋｂｐｓＰＣＭ（Ａ−ｌａｗ），６４ｋｂｐｓＰＣＭ
（μ−ｌａｗ），７ｋＨｚオーディオ（ＳＢ−ＡＤＰＣ
Ｍ），３２ｋｂｐｓＡＤＰＣＭ，１６ｋｂｐｓ（例え
ば、ＡＰＣ−ＡＢ）８ｋｂｐｓ等の音声符号化／復号化
アルゴリズムに従って、送信音声信号をＡ／Ｄ変換し符
号化する機能、受信音声信号を復号化してＤ／Ａ変換す
る機能を持つ４個構成の音声符号化部５ａ、音声復号化
部５ｂ及び音声合成部５ｃからなる音声圧縮伸長処理手
段５と、標準装備され人物を撮影するカメラ６、本装置
の画像入力手段の一つであり、絵や画面などを入力する
ための書画カメラ７及び前記カメラ６又は書画カメラ７
よりの入力画像や相手からの受信画像やシステム制御部
１２からの画像を表示する表示部８を接続し、前記シス
テム制御部１２の指示により、書画カメラ７等からの入
力画像の切り換え機能、上述した各画像の表示切り換え
及び表示分割機能、書画カメラ７等の各画像入出力部の
映像信号と電気的／信号的に整合をとるための信号変換
機能を持つ画像入力部９ａ及び画像出力部９ｂからなる
画像入出力処理手段９と、送信画像をＡ／Ｄ変換し符号
化する機能を持った画像符号化部１０ａ及び受信画像を
復号化しＤ／Ａ変換する機能をもつ復号化手段としての
画像復号化部１０ｂからなる画像圧縮伸長処理手段１０
と、前記音声符号化部５ａからの音声データ、画像符号
化部１０ａからの画像データ、システム制御部１２から
の制御データを送信フレーム単位に多重化するととも
に、受信フレームを構成単位の各メディアに分離し前記
音声復号化部５ｂ、画像復号化部１０ｂに転送する多重
分離部１３（ＣＣＩＴＴ勧告としては、Ｈ.221があ
る。）と、ＩＳＤＮユーザ網インターフェースに従って
回線を制御する４個構成の回線インターフェース部１４
とを具備している。

【００２７】尚、図１中、１５は管理テーブル等を記憶
する記憶部である。

【００２８】前記画像圧縮伸長処理手段１０は、大容量
の画像の生データに、動き補償，駒落とし，フレーム間
補償及びフレーム間補償，ＤＣＴ変換，ベクトル量子化
変換などの種々の手法によって帯域圧縮を行い、小容量
化してデジタル回線で伝送可能にしている。

【００２９】現在、ＩＳＤＮ回線の基本インターフェー
スが６４ｋｂｐｓであるが、この伝送速度でも伝送可能
な画像の符号化方式としてはＣＣＩＴＴ勧告草案Ｈ.261
がある。

【００３０】前記システム制御部１２は、ＣＰＵ，ＲＯ
Ｍ，ＲＡＭ，補助記憶装置，キャラクタジェネレータ，
画像信号生成回路等を備え、各部の状態を監視し装置全
体の制御，状態に応じた操作／表示画面作成及びアプリ
ケーションプログラムの実行などを行うようになってい
る。

【００３１】前記ＴＶ電話装置によれば、４個構成の回
線インターフェース部１４と４個構成の多重分離部１３
とにより通信先である４端末と同時に通信が可能とな
る。

【００３２】前記音声復号化部５ｂは４個あるので４端
末から受信した音声符号化データを同時に復号化が可能
である。

【００３３】次に、前記画像圧縮伸長処理手段１０にお
ける画像復号化部１０ｂについて図２を参照して詳述す
る。

【００３４】この画像復号化部１０ｂは、画像符号化デ
ータのＢＣＨフレームをはずすための第１乃至第４ＢＣ
Ｈ復号化部１６，１７，１８，１９と、ＢＣＨフレーム
がはずされ画像データ多重化フレームを一次蓄積し後段
の処理との同期をとる画像蓄積手段としての第１乃至第
４受信バッファ２０，２１，２２，２３と、第１乃至第
４受信バッファ２０，２１，２２，２３の画像符号化デ
ータのうち復号化する画像符号化データの一つを選択す
る選択手段としての復号化選択部２４と、画像データ多
重化フレームのフレームヘッダとＧＯＢヘッダをはずす
画像フレーム分離部２５と、画像データを可変長復号化
するＶＬＤ部２６と、各マクロブロック（ＭＢ）の係数
データを逆量子化する逆量子化部２７と、係数データを
基に逆ＤＣＴする逆ＤＣＴ部２８と、フレームヘッダの
内容を解読するＦＨ（フレームヘッダ）解読部２９と、
ＧＯＢヘッダの内容を解読するＧＯＢＨ解読部３０、マ
クロブロックの内容を解読するＭＢＨ解読部３１、ＧＯ
Ｂヘッダ及びマクロブロックヘッダからのヘッダ情報の
量子化ステップサイズを設定するステップサイズ設定部
３２と、ＩＮＴＥＲモード時に受信した画像データと前
フレームの画像データとの差分を演算器５５でとって画
像記憶手段としての第１乃至第５フレームメモリ３９乃
至４３に書込むか、ＩＮＴＲＡモード時に受信した画像
データをそのまま第１乃至第５フレームメモリ３９乃至
４３に書込むかを切換える切換部３３，３４と、画像デ
ータをフィルタ処理するか否かを切換えるフィルタ処理
切換部３５，３６と、動き補償モード時に前フレームの
画像データにフィルタ処理をするフィルタ３７と、復号
化時に第１乃至第５フレームメモリ３９乃至４３のアク
セス時にメモリアドレスを出力しメモリ制御をするフレ
ームメモリ第１制御部３８と、画像データを画像出力部
９ｂへ出力する際の第１乃至第５フレームメモリ３９乃
至４３へのアクセス時にメモリアドレスを出力するフレ
ームメモリ第２制御部４８と、第１乃至第５フレームメ
モリ３９乃至４３への書込み時に第１乃至第５フレーム
メモリ３９乃至４３のいずれに書込むかを選択する書込
手段としての書込切換部４４と、ＩＮＴＥＲモード時に
前フレームを参照するがそのときに第１乃至第５フレー
ムメモリ３９乃至４３のいずれから読み出すかを選択す
る読出手段としての読出切換部４５と、この画像復号化
部１０ｂの全体を制御する復号化制御部４６と、管理テ
ーブル等を記憶する記憶部４７と、前記画像出力部９ｂ
へ出力する画像データを選択するフレームメモリ選択部
４９と、前記フレームメモリ第１制御部３８、フレーム
メモリ第２制御部４８のアドレスの出力を選択するアド
レス選択部５０乃至５４とを具備している。

【００３５】上記の構成により、複数の画像データを時
分割で処理し、あたかも同時に処理しているように見せ
ることが可能となる。

【００３６】次に、前記画像出力部９ｂについて内部構
成を図３を参照して説明する。

【００３７】この画像出力部９ｂは、前記復号化部１０
ｂからの画像データを画素密度変換する画素密度変換部
６３と、各端末からの画像データを別々に記憶する画像
メモリ６２、画像メモリへの画像データの書込み読み出
し時のメモリ空間を指定する画像メモリ制御部５５と、
各端末からの画像データを記憶するメモリ空間領域登録
しておく記憶部５６、カラールックアップテーブル５７
と、グラフィック画像データのある特定のデータの時に
画像データに切換える制御を行う画像データ制御部５８
と、グラフィック画像データと受信画像データとを切換
える画像データ切換部５９と、ビデオ同期信号発生部６
０と、Ａ／Ｄ変換部６１とを具備している。

【００３８】このような構成の画像出力部９ｂにより、
カラールックアップテーブル５７からのグラフィックデ
ータを画面前面に表示し、その画面上に複数の受信画像
データをウィンドゥ表示させることができる。また、受
信画像データ上にスーパーインポーズ表示のようにカラ
ールックアップテーブル５７からのグラフィックデータ
を表示させることも可能である。

【００３９】さらに、複数の受信画像データが重なり合
った時に、その重なり部分をどちらかの受信画像を選択
して表示することができる。

【００４０】上記構成のＴＶ電話装置の動作を説明する
が、その前に画像データの符号化処理について図４乃至
図６を参照して簡単に説明する。

【００４１】Ｈ.261勧告草案においては、取り扱う画像
信号は、ＮＴＳＣ，ＰＡＬ，デジタルテレビ規格などの
異なった複数の規格が存在するため、お互いに通信がで
きるように世界共通の画像信号フォーマットを採用して
いる。

【００４２】このフォーマットは、図４に示すようなＣ
ＩＦフォーマットと称し、標本数が輝度Ｙは３５２画素
×２８８ライン、色差Ｃｒ，Ｃｂは１７６画素×１４４
ラインで規定されている。

【００４３】標本点（サンプリング点）については、色
差（Ｃｒ，Ｃｂ）は、図６に示す輝度４地点（Ｙ１，Ｙ
２，Ｙ３，Ｙ４）の等距離にある点と定められている。

【００４４】更に、ＣＩＦフォーマットの１／４は図６
に示すＱＣＩＦフォーマットと称し、標本数が輝度Ｙは
１７６画素×１４４ライン、色差ブロックＣｒ，Ｃｂ
は、８３画素×７２ラインで定義されている。

【００４５】ここで、上記フォーマットは、ＧＯＢフォ
ーマット複数個で構成され、そのＧＯＢフォーマットは
ＭＢフォーマット３３個で構成され、更に、ＭＢフォー
マットは８画素×８ラインの輝度ブロックＹ１，Ｙ２，
Ｙ３，Ｙ４の４ブロックと８画素×８ラインの色差ブロ
ックＣｒ，Ｃｂの２ブロックで構成されており、階層構
造になっている。

【００４６】この階層構造により符号化をＭＢ単位で行
うことが可能となる。

【００４７】ＧＯＢは、標本数が輝度ブロック１７６画
素×４８ライン、色差ブロックＣｒ，Ｃｂ８８画素×２
４ラインに定義され、ＣＩＦフォーマットの１／１２，
ＱＣＩＦフォーマットの１／３に相当し、ＧＯＢの番号
がＣＩＦフォーマットではＧＯＢ１からＧＯＢ１２ま
で、ＱＣＩＦフォーマットではＧＯＢ１，ＧＯＢ３，Ｇ
ＯＢ５が割り当てられている。

【００４８】次に、符号化され画像データのフレーム構
成は図５に示すような多重化フレーム構成となってい
る。但し、ここでは説明の都合上、ＦＨ（フレームヘッ
ダ）を付加したまま説明することとする。

【００４９】図５に示すように、画面の１フレームのデ
ータの先頭にＦＨがつき、画面を１２分割した１ブロッ
クをＧＯＢとして、ＧＯＢ１からＧＯＢ１２まで順次伝
送される。ＦＨ及びＧＯＢの分割方法は、図５に示すよ
うになっている。

【００５０】即ち、ＦＨは、ＰＳＣとＴＲとＰＴＹＰＥ
で構成されている。

【００５１】ＰＳＣはフレーム開始符号で２０ビットの
“０００００００００００００００１００００”
である。ＴＲはフレーム番号で５ボットの“１”から
“３０”までの値を使用する。ＰＴＹＰＥはタイプ情報
で６ビットで、スプリット・スクリーン指示情報，書画
カメラ指示情報，画面凍結解除，情報源フォーマット指
示情報（ＣＩＦ，ＱＣＩＦ）が含まれている。つまり、
前記ＦＨ解読部２９は、上記内容の解読結果をフレーム
メモリ第１制御部３８及び符号化制御部４６に送ること
になる。

【００５２】次に、ＧＯＢヘッダは、ＧＢＳＣとＧＮと
ＧＱＵＡＮＴで構成されている。ＧＢＳＣはＧＯＢ開始
符号で１６ビットの“００００００００００００
０００１”である。ＧＮはＧＯＢ番号で４ビットで
“１”から“１２”まで使用する。ＧＮが“０”の場合
にはＰＳＣで使用しているので、ＦＨのＰＳＣとＧＯＢ
のＧＢＳＣ＋ＧＮは、共に２０ビットで連続した値とみ
なすことができる。

【００５３】ＧＱＵＡＮＴは量子化特性情報で５ビット
で量子化ステップサイズの情報を含む。

【００５４】ＭＢヘッダはＭＢ（マクロブロック）と称
する画素ブロックのヘッダである。ＭＢは上述したよう
に、３３個のＭＢで１つのＧＯＢを構成しており、１Ｍ
Ｂは８画素×８ラインの輝度信号（Ｙ）４個と８画素×
８ラインの色差信号（Ｃｂ，Ｃｒ）２個で構成されてい
る。

【００５５】ここで、各ブロックの番号として、Ｙには
１から４まで、Ｃｂには５、Ｃｒには６の番号が割当て
られている。

【００５６】このＭＢヘッダはＭＢＡとＭＴＹＰＥとＭ
ＱＵＡＮＴとＭＶＤとＣＢＰで構成されている。

【００５７】ＭＢＡはＭＢの位置を表すマクロブロック
アドレスで先頭のＭＢのみ絶対値で、それ以降は、差分
の可変長符号である。

【００５８】ＭＴＹＰＥはＭＢのタイプ情報で、ＩＮＴ
ＲＡ（フレーム内符号化），ＩＮＴＥＲ（フレーム間差
分符号化），ＭＣ（動き補償付きフレーム間差分符号
化），ＦＩＬ（フィルター）などそのＭＢのデータに処
理を施した処理タイプが挿入されている。ＭＱＵＡＮＴ
はＧＱＵＡＮＴと同じである。

【００５９】ＭＶＤは動きベクトル情報である。ＣＢＰ
は有意ブロックパターンで先ほどのＭＢのＹの４個とＣ
ｒ，Ｃｂのうちの有効な画素ブロックの番号を情報とし
て含んでいる。このＭＢヘッダのあとには、圧縮符号化
した画像データが先述したように、Ｙ４個Ｃｒ，Ｃｂの
うち有意ブロックとなった画素ブロックが番号順に入っ
ている。

【００６０】次に、回線に出力されるデータは、図８に
示すようなフォーマットの誤り訂正フレームである。

【００６１】１フレームは、Ｓｎ（誤り訂正フレーム）
ビットが１ビット、Ｆｉ（フィル識別子）が１ビット、
画像データが４９２ビット、誤り訂正パリティーが１８
ビットの計５１２ビットで構成されている。更に、この
フレームが８フレームで１マルチフレームを構成してい
る。尚、Ｆｉは”１”のとき画像データを意味し、”
０”のとき無効データを意味する。

【００６２】このような画像データの圧縮方法及び画像
フォーマットは、ＣＣＩＴＴでＨ.261 勧告として既に
勧告化されており、その勧告に準拠していれば、他の勧
告に準拠したＴＶ電話装置とも相互通信が可能となる。

【００６３】次に、符号化方法を簡単に説明すると、ま
ず、自然界の映像には画素間の相関が強いことや周波数
成分が低周波に集中し高周波は小さいこと等を利用して
フレーム内のデータを８画素×８画素のブロックとし２
次元ＤＣＴ変換するフレーム内符号化と、前フレームと
現フレームの同位置の画像ブロックにおいて両者の相関
が強いときにフレーム間の差分を取りその差分値に対し
て８画素×８画素のブロックを２次元ＤＣＴ変換するフ
レーム間符号化と、前フレームから現フレームへ類似し
た画像ブロックが相対的に隣接移動した場合に、これを
検知してその画像ブロックの移動量と移動方向の情報を
送るのみで画像データそのものを送らずに済ませること
で発生データ量を減らす動き補償と、ＤＣＴ変換後の各
周波数ごとの係数値が低周波数領域では値が発生する
が、高周波領域では値が発生しにくくゼロ値が続くこと
を利用したゼロランレングス符号化と、データの発生量
に応じてデータの量子化ステップ幅を変更することでデ
ータの発生量を調整する量子化と、発生頻度の高いデー
タパターンに対しては短い符号値を、発生頻度の低いデ
ータパターンに対しては長い符号値を割当てることで、
トータル的に発生したデータ量よりも少ないデータ量に
変換する可変長符号化と、フレームをスキップして、画
像データそのものを落してしまう駒落し等とからなる複
数の圧縮技術をハイブリットにし低レートの通信におい
ても動画像を通信可能としている。

【００６４】次に、本実施例のＴＶ電話装置の動作説明
を行う。

【００６５】まず、各端末から送信され回線インターフ
ェース部１４、多重分離部１３を経て画像復号化部１０
ｂに至った各々符号化されている画像データは、各々別
々に第１乃至第４ＢＣＨ復号化部１６乃至１９によりＢ
ＣＨ復号化されて各々第１乃至第４受信バッファ２０乃
至２３に蓄積される。

【００６６】前記符号化制御部４６は、復号化する前に
第１乃至第４受信バッファ２０乃至２３の蓄積状況を検
索し、画像データのフレームヘッダを検知し、又は、第
１乃至第４受信バッファの蓄積容量を算出する（Ｈ.261
では、ＱＣＩＦフォーマットでは１フレーム当り最大６
４ｋｂｉｔ、ＣＩＦフォーマットでは１フレーム当り最
大２５６ｋｂｉｔと定められている）。

【００６７】第１乃至第４受信バッファ２０乃至２３の
いずれか一つ以上に１フレーム以上の画像データが蓄積
されているようであれば、符号化制御部４６は１フレー
ム以上蓄積されている第１乃至第４受信バッファ２０乃
至２３のうちの一つを選択して、ＢＣＨ復号化されてい
る画像データを読み出し、その画像データに対してＶＬ
Ｄ部２６、逆量子化部２７、逆ＤＣＴ部２８等により復
号化処理を施して通常の画像データに変換する。

【００６８】ＩＮＴＥＲモードのときには、選択された
いずれかの受信バッファ２０乃至２３からの画像データ
の前画像データを蓄積している第１乃至第５フレームメ
モリ３９乃至４３のうちのいずれかを前記記憶部４７に
登録されているフレームメモリ管理テーブルを基に検索
して、読出切換部４５によりその前画像データを読み出
し、フィルタ処理が必要で有ればフィルタ３７でフィル
タ処理を実行し、切換部３３、３４で演算器５５を選択
して、既述した動作で復号化された画像データと前記前
画像データとを加算し、加算処理後の画像データを、前
記書込切換部４４により前記記憶部４７に登録されてい
るフレームメモリ管理テーブルの管理データを基に検索
した空いている第１乃至第５フレームメモリ３９乃至４
３のうちのいずれかに書き込む。

【００６９】また、ＩＮＴＲＡモードのときには、読出
切換部４５による第１乃至第５フレームメモリ３９乃至
４３のうちのいずれかからの読み出しはなく、復号化さ
れた画像データを切換部３３、３４により演算器５５を
オフにして、先ほど書込切換部４４で選択した第１乃至
第５フレームメモリ３９乃至４３のうちのいずれかに書
き込む。

【００７０】また、画像データを画像出力部９ｂへ転送
する際には、フレームメモリ選択部４９により読み出す
画像データを記憶している第１乃至第５フレームメモリ
３９乃至４３のうちのいずれかを選択し、前記フレーム
メモリ第２制御部４８からのアドレスデータに基づいて
当該画像データを読み出す。

【００７１】このような画像データの転送の際には、画
像復号化部１０ｂから画像出力部９ｂへその画像データ
が前記第１乃至第４受信バッファ２０乃至２３のうちの
いずれかからの画像データであるかを示すデータをも転
送する。

【００７２】図９は、復号化されている画像データのフ
レーム制御タイミングを示している。

【００７３】同図に示すように、１フレーム分の画像デ
ータの復号化処理時間がフレーム処理周期よりも短くな
るように設定している。

【００７４】例えば、前記４端末と同時に通信したとき
に、各端末からの画像データのフレームレートが最大
７．５フレーム／秒の時（Ｋパラメータ＝４）には、
７．５×４の３０フレーム／秒がフレーム処理周期とな
る。

【００７５】また、図９に示す各ブロックの大きさは処
理時間を示している。ブロック内のＡ乃至Ｄの文字及び
１、２、…等の数字はフレーム識別番号で、前記第１乃
至第４受信バッファ２０乃至２３がＡ乃至Ｄに各々対応
し、１、２、…等の数字はフレーム番号を示している。

【００７６】例えば、Ａ1は第１受信バッファ２０のフ
レーム番号１番目を意味している。図９に示す書込みＦ
Ｍは、前記画像データが書込まれる第１乃至第５フレー
ムメモリ３９乃至４３を意味し、また、読み出しＦＭ
は、前記画像データと加算されるための前画像データが
読み出される第１乃至第５フレームメモリ３９乃至４３
を意味している。

【００７７】このことから、画像データがＡ2 で、書込
みＦＭがＦＭ4 で、読み出しＦＭがＦＭ1の場合には、
第１受信バッファ２０の２番目のフレームメモリから読
み出された復号化されている画像データを、ＩＮＴＥＲ
モードのときは読み出しＦＭがＦＭ１で蓄積されている
第１フレームメモリ３９から読み出した前回の第１受信
バッファ２０から送られている画像データと加算して、
第４フレームメモリ４２に書込み、ＩＮＴＲＡモードの
ときはそのまま第４フレームメモリ４２に書込むことを
表している。

【００７８】また、前記第１受信バッファ２０に復号化
すべき画像データが１フレーム分蓄積されていない場合
には、そのフレーム処理周期中は何もしない。

【００７９】さらに、符号化されている画像データを復
号化している途中で、エラーが発生した場合には、直ち
に復号化処理を中断し、書込まれつつある第１乃至第５
フレームメモリ３９乃至４３は更新されずに引続き空の
第１乃至第５フレームメモリ３９乃至４３として登録さ
れる。また、読み出されていた第１乃至第５フレームメ
モリ３９乃至４３も更新されず、引続き保持されて、次
回の復号化処理まで持越される。

【００８０】図９から分かるように、第１乃至第５フレ
ームメモリ３９乃至４３は第１乃至第４受信バッファ２
０乃至２３と常に固定的に対応しているわけではなく、
常に空いている若番の第１乃至第５フレームメモリ３９
乃至４３を選択して画像データの書込みを行う。

【００８１】このためフレーム処理周期毎に第１乃至第
５フレームメモリ３９乃至４３の使用状況を管理する必
要がある。

【００８２】図１０にはそのフレームメモリ管理テーブ
ルが示されている。このフレームメモリ管理テーブル
は、前記記憶部４７に記憶されており、各フレーム周期
毎に最初に画像データの書込みのための第１乃至第５フ
レームメモリ３９乃至４３を参照し、書込みが終了する
と、加算するために読み出されていた第１乃至第５フレ
ームメモリ３９乃至４３の画像データは古くなり、この
古い画像データは不要となるため当該第１乃至第５フレ
ームメモリ３９乃至４３は空として登録され、書込まれ
ていた第１乃至第５フレームメモリ３９乃至４３の画像
データが古い画像データに取って替ることになるため当
該第１乃至第５フレームメモリ３９乃至４３が新規に登
録される。

【００８３】図１０には、図９に示す矢印の位置での登
録状況が示されている。

【００８４】即ち、第２受信バッファ２１からの画像デ
ータを、第２フレームメモリ４０から読み出した画像デ
ータに加算し、第５フレームメモリ４３への書込みが終
了したところなので、第２フレームメモリ４０が空き、
第５フレームメモリ４３の画像データがＢ2 となってい
る。

【００８５】復号化された画像データを画像出力部９ｂ
へ転送するために第１乃至第５フレームメモリ３９乃至
４３から読み出す場合には、フレーム処理周期の１周期
前に復号化処理された画像データを次のフレーム処理周
期の時に読み出すことで、制御の容易化を図れる。

【００８６】但し、復号化のために書込み処理中の第１
乃至第５フレームメモリ３９乃至４３であれば、第１乃
至第５フレームメモリ３９乃至４３のうちのいずれから
画像データを読み出しても良い。

【００８７】また、その読み出された画像データととも
に、フレーム識別番号の情報も前記画像出力部９ｂへ転
送される。

【００８８】画像出力部９ｂへ転送された画像データ
は、画素密度変換部６３により画素密度変換されて、画
像メモリ６２へ記憶される。

【００８９】この場合に、画像メモリ制御部５５は、記
憶部５６に記憶されている各相手端末に割振られたメモ
リ空間ａ乃至ｄを参照して、前記フレーム識別番号によ
り対応するメモリ空間ａ乃至ｄへ当該画像データを書込
む。

【００９０】書込まれた画像データを表示する場合に
は、画像データ切換部５９により当該メモリ空間ａ乃至
ｄから読み出し、Ａ／Ｄ変換部５９によりＡ／Ｄ変換し
た後前記表示部８に送る。

【００９１】画像メモリ６２のメモリ空間ａ乃至ｄは、
前記第１乃至第４受信バッファ２０乃至２３の各画像デ
ータに対応している。

【００９２】このように、複数端末からの複数の画像デ
ータを上述した動作で時分割処理し復号化することによ
り、画像復号化部１０ｂは複数持たずに一つで良くな
り、かつ、画像復号化部１０ｂの第１乃至第５フレーム
メモリ３９乃至４３の数も同時に通信する必要がある端
末の台数の数に１つ分加算した数だけであれば良いの
で、複数の端末と同時に通信する場合でも経済的に画像
復号化部１０ｂを構築することができる。

【００９３】

【発明の効果】以上説明した本発明によれば、上述した
構成としたので、複数端末からの複数の画像データを時
分割処理で復号化でき、復号化手段は複数持たずに一つ
でよく回路規模の縮小を通じて装置コストを低減できる
ＴＶ電話装置を提供することができる。

【００９４】また、本発明によれば、画像記憶手段の数
も同時に通信する必要がある端末の台数の数に１つ分加
算した数だけですみ、この点からも回路規模の縮小を通
じて装置コストを低減できるＴＶ電話装置を提供するこ
とができる。

【図面の簡単な説明】

【図１】本発明のＴＶ電話装置の実施例を示すブロック
図である。

【図２】本実施例の画像復号化部の構成を示すブロック
図である。

【図３】本実施例の画像出力部の構成を示すブロック図
である。

【図４】本実施例の画像データのフォーマットを示す説
明図である。

【図５】本実施例の画像データのフォーマットを示す説
明図である。

【図６】本実施例の画像データのサンプリング点を示す
説明図である。

【図７】本実施例の画像データの多重化フレームを示す
説明図である。

【図８】本実施例の画像データの誤り訂正フレームを示
す説明図である。

【図９】本実施例の画像データのフレーム制御タイミン
グを示す説明図である。

【図１０】本実施例の画像データのフレーム管理テーブ
ルを示す説明図である。

【符号の説明】

５音声圧縮伸長手段１０画像圧縮伸長手段１２システム制御部２０乃至２３第１乃至第４受信バッファ２４復号化選択部４４書込切換部３９乃至４３第１乃至第５フレームメモリ４５読出切換部

Claims

【特許請求の範囲】

【請求項１】複数の端末との画像，音声の相互通信
を、少なくとも画像データの圧縮、伸長処理を行う画像
圧縮伸長処理手段を用いて行うＴＶ電話装置において、
前記画像圧縮伸長処理手段は、複数の端末からの各画像
データを各々蓄積する画像蓄積手段と、複数の画像記憶
手段と、前記画像蓄積手段に蓄積されている各画像デー
タのうちの１つを選択する選択手段と、前記画像記憶手
段に記憶されている前記選択手段により選択した画像デ
ータの前画像データを読み出す読出手段と、前記選択手
段により選択した画像データと読出手段により読み出し
た前画像データとにより復号化する復号化手段と、この
復号化手段により復号化した画像データを前記複数の画
像記憶手段のうちの空の画像記憶手段を選択して書き込
む書込手段とを有することを特徴とするＴＶ電話装置。
【請求項２】前記複数の画像記憶手段の数は、同時に
通信が必要な端末数より少なくとも一つ多いものである
請求項１記載のＴＶ電話装置。