JPS6390953A

JPS6390953A - マルチメデイア通信装置

Info

Publication number: JPS6390953A
Application number: JP61237489A
Authority: JP
Inventors: Toshihiko Wakahara; 若原　俊彦; Takahiko Hisaki; 久樹　隆彦; Fumio Kishino; 岸野　文郎; Hiroshi Yasuda; 浩安田; Hideo Kuroda; 英夫黒田
Original assignee: Nippon Telegraph and Telephone Corp
Current assignee: Nippon Telegraph and Telephone Corp
Priority date: 1986-10-06
Filing date: 1986-10-06
Publication date: 1988-04-21

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】（１）発明の属する技術分野本発明は１動画、静止画、音声等の各種メディアを組合
わせて通信会議等を行うマルチメディア通信装置に関す
るものである。

（２）従来の技術従来のこの種の通信方式として１例えば動画および音声
を個別の符号化装置を用いてそれぞれ１．４６４　Ｍｂ
／ｓ、　　６４　ｋ　ｂ／ｓの速度に符号化し、フレー
ム同期パターンを含めて１．５３６　Ｍｂ／ｓに時分割
多重化して伝送する方法がある（〔ｌ〕参照）。

この方法においては、各メディア毎の符号化装置は上述
の特定の速度に固定化されており２例えば全然話をして
いない時でも音声信号として６４　ｋ　ｂ／ｓを固定的
に割り当てているため非効率的である。すなわち、動画
あるいは音声等のメディア毎に常に一定の伝送速度で符
号化するように制御されているので２例えば会議参加者
の動きが大きく、映像の情ｔｉｌｔを多く発生している
時でもメディア毎に一定速度に抑えられるため、映像フ
レーム数の削減による９落としゃ標本化画素数の削減に
よる解像度の劣化を生ずるという欠点があった。この欠
点は伝送速度が低くなると更に顕著となる。

〔１〕黒田他「テレビ会議用１．５　Ｍｂ／ｓフレーム
間符号化装置」通研実報、３３．魚１１，１９８４゜（３）発明の目的本発明は、従来方式の欠点を解決するため１通信中に与
えられた伝送路の容量の中で各メディアに対する情ｆｌ
ｉｔの割り当てを簡易な手段で変えられるようにするこ
とにより伝送品質の向上をはかろうとするもので、以下
図面について詳細に説明する。

（４）発明の構成（４−１）発明の特徴と従来の技術との差異本発明は、
動画、静止画および音声符号化信号等の組合わせからな
るマルチメディア通信装置において２通信中にそれぞれ
のメディアで発生する情報量を検出し、与えられた伝送
容量の中でそれぞれのメディアの伝送容量を変化させる
機能を持たせることにより２画信号の高品質化をはかる
ことを特徴とする。したがって５従来の技術とは。

各メディアで発生する情報量を検知して、その発生量に
対応して１回線分の伝送容量の中でそれぞれの符号化速
度を変化させるように制御する機能を付加した点が異な
る。

（４−２）実施例第１図は１本発明によるマルチメディア通信端末の構成
例であり、ｌは動画用のカメラ、２は動画用のモニタ、
３は静止画用のカメラ、４は静止画用のモニタ、５は音
声用のマイク、６はスピーカ、７は制御用のキーボード
、８は動画符号化・復号装置、９は静止画符号化・復号
装置、１０は音声符号化・復号装置、１１はシステム制
御部。

１２は伝送制御部、１３は伝送路インタフェースである
。

この端末を用いて相手端末と相互通信を行う場合には、
映像はカメラ１又は３により５音声はマイク５により信
号が取り出され、それぞれ符号化・復号装置８又は９お
よび１０により冗長度抑圧符号化され、伝送制？ｆｆ１
１部１２で多重化されインタフェース１３を介して伝送
路に送出される。ここで伝送制御部１２で多重化される
際に、伝送路からクロックを抽出するとともに、端末間
で同期をとって情報フレーム毎に各メディアの情報を送
出する。すなわち、システム制御部１１では、動画。

静止画および音声符号化信号の情報発生量を常時検出し
、音声レベルの検出結果をもとに規定の値よりも小さい
場合には無音と見なし音声符号化動作を停止させるよう
に音声符号化・復号装置１０を制御するとともに、動画
及び静止画メディアに音声情報の削減分の情報を割り当
てられるよう符号化・復号装置８および９を制御する。

一方、受信側では、伝送路からの信号は一旦バッファに
書き込まれ、情報フレームの先頭にあるメディア識別ビ
ットにより動画、静止画あるいは音声に分離し、それぞ
れの符号化・復号装置８，９．１０で復号される。この
時、各符号化・復号装置では情報フレームを卆灸出して
おり、それぞれの１青幸りがない場合には、繰り返し読
み出すか、又は音声の場合には無音として処理する。こ
の後、それぞれモニタ２又は４．スピーカ６に出力され
る。以上の説明において、動画及び音声は常時伝送して
いるが、静止画については常に伝送するとは限らず。

キーボード７から通信開始あるいは終了の制御を行う。

第２図（ａ）は動画符号化・復号装置８の構成例を示し
、第２図＜ｂ＞は１０の音声符号化・復号装置の構成例
を示したものである。この第２図（ａ）において、２１
はＡ／Ｄ変換器、２２はベクトル量子化器、２３は可変
長符号器、２４は送信バッファ、２５はＤ／Ａ変換器、
２６は量子化復号器、２７は可変長復号器、２８は受信
バッファである。カメラからのアナログ信号はＡ／Ｄ変
換器２１でディジタル化され、ベクトル量子化器２２お
よび可変長符号器２３で量子化・符号化されバッファ２
４に送出される。受信側では、受信信号の同期をとって
一旦バソファ２８に蓄積し。

復号して元のアナログ信号にｍｌ換する。ここで。

バッファ２４内のメモリ量を検出することにより動画情
報発生量を求め、これをシステム制御部１１に伝える。

また、可変長符号器２３では、システム制御部１１から
の指示にもとづき符号割り当てを変化させ、無音区間の
場合にはコマ数を増加させたり２通常の画素数で符号化
させる。

一方、音声系は第２図（ｂ）に示される。図において、
２９はＡ／Ｄ変換器、３０はレベル検出器、３１はＡＤ
ＰＣＭ符号器、３２は送信バッファ、３３はＤ／Ａ変換
器、３４はＡＤＰＣＭ復号器、３５は受信バッファであ
る。マイクからの音声信号はＡ／Ｄ変ｔｆＡ器２９でデ
ィジタル化されるとともに５　レベル検出器３０で音声
信号のレベルを検出して有音か無音かを判定する。この
結果はシステム制御部１１に伝えられ、無音の場合には
ＡＤＰＣＭ符号器３１の動作を停止させる。受信側では
、同期をとった後でＡＤＰＣＭ復号器３４で復号化し、
Ｄ／Ａ変換器３３で元のアナログ信号に変換する。

この構成において従来の方式と異なる点は、無音を検出
した場合には音声の符号化動作を停止させるとともに、
音声の情報量を削減した分だけ映像の情報量の割り当て
を拡大して伝送容量を増加させることにある。なお、静
止画の符号器についても動画と同様の制御が可能であり
、静止画以外のデータにも適用可能である。上記説明に
おいて。

映像の符号化方式としてベクトル量子化を想定したが、
直交変換符号化を用いてもよく、またこれらを組合わせ
たり、他の符号化方式を用いてもよい。また、音声の符
号化方式としてレベル検出による有音／無音分離符号化
を用いて説明したが。

他の方式２例えば特徴パラメータを抽出し、このパラメ
ータ数を増減させることにより符号化情報量を可変にす
る方式を用いてもよい。

第３図は１本通借方式における情報フレームフォーマッ
トの例を示したもので１通常の同期フレームパターンビ
ットの後にメディア識別のためのビットおよび情報ビッ
トからなる。このフォーマ７）上で、情報発生量に対応
して情報フレーム単位に各メディア毎の情報を多重化し
て伝送することにより、特にＸシリーズ勧告に準拠した
誤り再送することな（、誤り訂正符号を用いた簡易な伝
送の実現が可能となる。

このようにして、動画、静止画及び音声の各メディアで
発生する情報量を常時検出し１例えば無音区間では映像
信号に対する情報量の割り当てを大きくすることにより
、従来の方式では廃棄していた画像情報を伝送すること
が可能となり、コマ落としや画素間引きによる解像度の
劣化を少なくすることが出来る。すなわち、無音区間の
ように音声情報の発生量が少ない場合には、映像に割り
当てる伝送容量を増大させ品質を向上させることが可能
になる。

（５）発明の詳細な説明したように１本発明によれば、テレビ会議等にお
いて音声通話をしていない時には高解像度の相手画面が
見られ９品質が向上するというメリットを有する。また
１本発明では、フレームフォーマット上でメディア毎に
フレーム割り当てを変化させ多重化法を変更するだけで
あり、伝送手順としてＨＤＬＣ手順のような複雑な手順
を用いず１誤り訂正符号のような間車な回路で構成でき
るので、ハードウェア規模を少なく経済的に構成できる
メリットも有する。

【図面の簡単な説明】

第１図は５本発明によるマルチメディア端末の構成例、
第２図は、動画および音声の符号化・復号装置の構成例
、第３図は、情報フレーム構成例である。１・・・動画用のカメラ、２・・・動画用のモニタ、３
・・・静止画用のカメラ、４・・・静止画用のモニタ、
５・・・音声用のマイク、６・・・スピーカ１７・・・
キーボード、８・・・動画符号化・復号装置、９・・・
静止画符号化・復号装置、１０・・・音声符号化・復号
装置、１１・・・システム制御部、１２・・・伝送制御
部、１３・・・伝送路インタフェース、２１・・・Ａ／
Ｄ変換器、２２・・・ベクトル量子化器、２３・・・可
変長符号器、２４・・・送信バッファ５２５・・・Ｄ／
Ａ変換器、２６・・・量子化復号器、２７・・・可変長
復号器、２日・・・受信バッファ７２９・・・Ａ／Ｄ変
換器、３０・・・レベル検出器、３１・・・ＡＤＰＣＭ
符号器、３２・・・送信バッファ、３３・・・Ｄ／Ａ変
換器、３４・・・ＡＤＰＣＭ復号器、３５・・・受信バ
ッファ。不毛明ｊ；よるＸ）レテメセア記ち堵禾ア渾渾斥ｑ列蜀
　１　閃

Claims

【特許請求の範囲】少なくとも動画、静止画および音声を含むメディアのう
ちの２つ以上のメディアの組合わせを用いて相互に送受
信するマルチメディア通信装置において、動画および静止画カメラからの映像信号を指定された符
号化情報量の大きさに圧縮して符号化する手段、マイクからの音声信号を指定された符号化情報量の大き
さに圧縮して符号化する手段、該動画・静止画符号化信号および音声符号化信号の発生
情報量を監視し情報フレーム単位に該動画、静止画およ
び音声メディアに対する割り当て制御を行う手段、該動画、静止画符号化信号および音声符号化信号の合計
の伝送容量を一定の速度の送信信号として多重化し伝送
路に送信する手段、受信信号から情報フレーム単位にメディアを識別し動画
、静止画符号化信号および音声符号化信号に分離する手
段、映像符号化信号を復号し動画および静止画モニタに送出
する手段、音声符号化信号を復号しマイクに送出する手段を有する
ことを特徴とするマルチメディア通信装置。