JP3437191B2 - 端末装置及び端末装置の制御方法 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、複数の回線に接続さ
れ、映像等の送受信を行う端末装置に関する。

【０００２】

【従来の技術】従来から知られているアナログの電話回
線を使用する場合、デジタルデータは低速でしか伝送で
きなかった。

【０００３】しかし近年に至って通信技術や半導体技
術，光技術の進歩に伴い、デジタル回線が整備され、高
速で大容量のデータの伝送が可能になった。

【０００４】特に、デジタル伝送の特徴としては、伝送
による品質低下がなく同レベルの品質が保たれること、
伝送データのメディアの特性に応じた伝送路を必要とせ
ず、メディアの統合が図れることなどがあり、複合メデ
ィア端末間の伝送が可能になった。よって、従来の音声
のみの電話から、映像をも同時に伝送する電話端末が出
現している。

【０００５】また、こうした状況の中、異なる複数端末
間においても相互通信が可能になるようＣＣＩＴＴなど
による国際標準化が進められており、デジタル回線を用
いたテレビ電話，テレビ会議システムなどのＡＶ（Ａｕ
ｄｉｏ Ｖｉｓｕａｌ）サービスとして、ＡＶサービス
用のサービス規定，プロトコル規定，マルチメディア多
重化フレーム構成規定がＣＣＩＴＴ勧告（または草案）
Ｈ．３２０，Ｈ．２４２，Ｈ．２２１などとして発表さ
れている。

【０００６】上記Ｈ．２２１では、６４ｋｂｐｓから１
９２０ｋｂｐｓまでのＡＶサービスにおけるフレーム構
成および端末能力の交換や通信モードのＦＡＳ（Ｆｒａ
ｍｅＡｌｉｇｎｍｅｎｔ Ｓｉｇｎａｌ），ＢＡＳ（Ｂ
ｉｔ Ａｌｌｏｃａｔｉｏｎ Ｓｉｇｎａｌ）の符号割
当が定義されている。またＨ．２４２ではＢＡＳを用い
たＡＶ端末間での能力交換および通信モード切替えなど
のプロトコルが定義され、Ｈ．３２０ではＡＶサービス
全般のシステムアスペクトが定義されている。

【０００７】上記勧告または勧告草案においては、エン
ドツーエンドの物理コネクションの設定およびインチャ
ネルでのＦＡＳによる同期確立後、インチャネルでＢＡ
Ｓを用いた端末能力の交換シーケンス，通信モードの指
定によるモード切替えシーケンスなどの手順により端末
間で画像，音声，データなどのマルチメディア通信を行
うための方法が規定されている。

【０００８】但し、各端末において自己の端末能力を状
況に応じて変化させたり、交換された能力の範囲内でど
の通信モードを用いるかは、規定の範囲外である。

【０００９】マルチメディア通信における各メディアの
情報転送速度は、音声情報は音声符号化方式を指定する
ことで決定され、データ情報は、その使用の有無，使用
する場合の転送速度を指定することにより決定され、設
定した通信路全体の情報転送速度から、音声情報の転送
速度とデータ情報の転送速度を引いた残りが画像情報の
転送速度になる。

【００１０】このような複合メディア端末の一例を図２
３に示す。本図において、１は音声入出力手段の一つで
あるハンドセット、２は音声入力手段の一つであるマイ
ク、３は音声出力手段の一つであるスピーカである。４
は後述するシステム制御部１４の指示により、音声入出
力手段としてのハンドセット１，マイク２，スピーカ３
を切り換える機能、音量レベル調整のために利得を調整
する利得調整機能、ハンドセット１がオンフック状態か
オフフック状態かを検知するオン／オフ検知機能、音声
入出力手段としてマイク２とスピーカ３を使用したとき
にエコーを消去するエコーキャンセル機能、ダイヤルト
ーン・呼出しトーン・ビジートーン・着信トーン等のト
ーンを生成するトーン生成機能をもつ音声インタフェー
ス部である。

【００１１】５はシステム制御部１４の指示により６４
ｋｂｐｓ ＰＣＭ（Ａ−ｌａｗ），６４ｋｂｐｓ ＰＣ
Ｍ（μ−ｌａｗ），６４ｋｂｐｓ／５６ｋｂｐｓ／４８
ｋｂｐｓ（ＳＢ−ＡＤＰＣＭ），３２ｋｂｐｓ ＡＤＰ
ＣＭ，１６ｋｂｐｓ（例えばＡＰＣ−ＡＢ），８ｋｐｂ
ｓ等の音声符号化／復号化アルゴリズムに従って送信音
声信号をＡ／Ｄ（アナログ／デジタル）変換して符号化
する機能、受信音声信号を復号化してＤ／Ａ変換する機
能をもつ音声符号化復号化部である。この音声符号化復
号化部５は音声符号化部５ａおよび音声復号化部５ｂを
有する。

【００１２】６は画像入力手段の１つであり自画像等を
入力するためのカメラ、７は画像入力手段の１つであり
絵や図面等を入力するための書画カメラである。８はカ
メラ６または書画カメラ７よりの入力画像、あるいは空
いてからの受信画像やシステム制御部１４からの画像を
表示する表示部（表示手段）である。９はシステム制御
部１４の指示により生じる画像入力手段の切換え機能、
上述した各画像の表示切換えおよび表示分割機能、およ
び各画像入出力の映像信号と電気的／物理的に整合をと
るための信号変換機能をもつビデオインタフェース部で
ある。このビデオインタフェース部は、画像入力部９ａ
と画像出力部９ｂを有する。

【００１３】１０は送信画像をＡ／Ｄ変換して符号化す
る機能、受信画像を復号化してＤ／Ａ変換する機能をも
つ画像符号化復号化部であり、この画像符号化復号化部
１０は、大容量の画像の生データに、動き補償，こま落
し，フレーム間補償およびフレーム内補償，ＤＣＴ変
換，ベクトル量子化変換などの種々の手法によって帯域
圧縮を行い、小容量化し、デジタル回線で画像データを
伝統可能にしている。この画像符号化復号化部１０は、
画像符号化部１０ａおよび画像復号化部１０ｂを有す
る。現在、ＩＳＤＮ（デジタル総合サービス網）回線の
基本インタフェースが６４ｋｂｐｓであるが、この伝送
速度でも伝送可能な画像の符号化方式としてはＣＣＩＴ
Ｔ勧告草案Ｈ．２６１がある。

【００１４】１１はデータ通信を行うためのデータ端末
である。１２はデータ端末１１およびシステム制御部１
４からの送信データを多重分離化部１５へ通知すると共
に、受信データをデータ端末１１またはシステム制御部
１４へ通知するデータインタフェース部である。１３は
制御情報入力のために使用するキーボード，タッチパネ
ル等の操作部である。１４はＣＰＵ，ＲＯＭ，ＲＡＭ，
補助記憶装置，キャラクタジェネレータ，画像信号生成
回路等を備え、各部の状態を監視し、装置全体の制御，
状態に応じた操作／表示画面の作成およびアプリケーシ
ョンプログラムの実行等を行うシステム制御部である。

【００１５】１５は音声符号化復号化部５からの音声デ
ータ，ビデオ符号化復号化部１０からの画像データ，デ
ータインタフェース部１２からのデータ，システム制御
部１４からのＢＡＳ（Ｂｉｔ Ａｌｌｏｃａｔｉｏｎ
Ｓｉｇｎａｌ）を送信フレーム単位に多重化すると共
に、受信フレームを構成単位の各メディアに分離し各部
に通知する多重分離化部であり、ＣＣＩＴＴ勧告のＨ．
２２１に従ったものである。１６はＩＳＤＮユーザー網
インタフェースに従って回線を制御する回線インタフェ
ース部である。

【００１６】

【発明が解決しようとする課題】課題１ しかしながら、上記従来例のマルチメディア端末によれ
ば、１端末との相互通信しかできない。多地点との相互
通信を考えた場合には、回線部は当然複数持つ必要があ
る。さらに、画像や音声の通信をする際には、通信路の
通信容量に限りがあるのでデータの圧縮伸長する符号化
復号化が行われる。この為、画像復合化部も同時に相互
通信する端末数分だけ持つ必要がある。

【００１７】この中で、音声の圧縮は画像に比べればデ
ータ量も少ないので、復号化部を複数持つのは、さほど
コストアップにならずに実現できる。

【００１８】しかし、画像の圧縮の場合にはアルゴリズ
ムも複雑で且つデータ量も多いので、回路規模は膨大に
なり、高速な演算処理が必要となる。また、使用する記
憶容量も非常に大きくなるため、同一の画像復号化部を
複数持つことは可能であっても、経済性を考えた場合に
は、余り現実的ではない。

【００１９】よって本発明の第１の目的は、複数の画像
復号化部を持つことなく、多地点のマルチメディア端末
との同時通信を可能とした端末装置を提供することにあ
る。

【００２０】課題２ このように、多地点との相互通信を考えた場合には、回
線部や音声・画像の復号部は、同時通信する端末の数だ
け必要になるのは当然であるが、さらに、多地点となる
と伝送容量も増えるため、各メディアを効率よく伝送す
ることが必要となる。

【００２１】しかし、送信端末に対して、標準機能とし
て多地点接続している旨を知らせる手段は設けられてい
ない。もしそのような機能を付加した場合には、特殊な
端末同士しかその機能を利用できないことになる。

【００２２】また、相手端末が多地点接続しているのを
送信端末が知らない場合には、無駄なデータを転送する
ことになる。例えば、画面を４分割して４地点の映像を
同時にモニタする時には、画面に表示する際にはフルサ
イズの映像として伝送されたデータが１／４となってし
まうので、かなり無駄なデータが転送されることにな
る。

【００２３】本発明の第２の目的は、多地点における通
常の端末との通信を可能とした端末装置を提供すること
にある。

【００２４】課題３ さらに、複数端末から画像データを受信する際に、通常
は、フレーム単位に画像データを処理して合成するが、
各端末によりフレームの転送レートが異なる場合には、
各フレームの画像データに不足が発生してしまい、復号
化部が誤動作してしまうことがある。

【００２５】本発明の第３の目的は、フレームの転送ル
ートが各端末で異なる場合にも容易に画面合成が行え、
且つ復号化部においても誤動作が生じないようにした端
末装置を提供することにある。

【００２６】課題４ しかも、複数端末から画像データを受信する際に、同時
に通信する端末数が回線の数に等しい端末より少ない場
合には、フレーム単位に画像データを処理して合成する
と、画像データに不足が発生してしまい、復号化部で誤
動作が生じてしまう。

【００２７】本発明の第４の目的は、同時に通信する端
末数が回線の数より少ない場合にも、その不足分を容易
に補完処理して復号化部が誤動作しないようにした端末
装置を提供することにある。

【００２８】課題５ 多地点間制御装置では、上述したように、圧縮されてい
る画像を一度復号化して合成後に符号化するために、こ
の符号化復号化部は、同時に通信する端末台数分必要に
なり、また、合成編集部も大容量も生画像データを高速
に処理する必要もあり、装置としては非常に大規模のも
のとなり、大変高価なものとなってしまう。

【００２９】また、多地点の端末の画像を１画面に表示
する場合には、各端末の画像を縮小して合成する必要が
あるのでさらに処理が複雑になる上に、端末は縮小され
る分だけ無駄なデータを送信することになる。

【００３０】さらに、複数地点の画像が１画面に表示さ
れると、どの画像がどの地点の端末の画像であるかを判
別するのが難しいという問題がある。

【００３１】よって本発明の第５の目的は、表示画像と
端末地点との関係を明確に識別し得るよう構成した記録
装置を提供することにある。

【００３２】課題６ さらに複数地点の画像の中で特に注目すべき地点につい
て画面を大きくしたり、動きを良くしたり、画質を向上
させるということも考慮すると、全ての復号化部につい
て高速な画像データ処理能力が要求されるので、構成上
非常に無駄が生じるという問題がある。

【００３３】よって本発明の第６の目的は上述の点に鑑
み、表示される画面をメイン画面とサブ画面に分けるこ
とにより、簡易な構成のまま、必要とされる十分な表示
態様を実現し得る端末装置を提供することにある。

【００３４】

【課題を解決するための手段】かかる目的を達成するた
めに本発明に係わる端末装置は、複数の回線を介して最
大Ｎ台（Ｎ：２以上の整数）の端末と同時通信が可能な
端末装置であって、前記回線の各々に接続され、１／Ｎ
縮小画面フォーマットの符号化された画像データをそれ
ぞれ抽出する複数の分離手段と、前記１／Ｎ縮小画面を
規定サイズの１画面内において最大Ｎ個収納し得るよ
う、前記符号化された画像データのヘッダ部に含まれる
前記符号化された画像データの画面上の割り当て位置を
示す位置指定情報を変更する表示位置制御手段と、前記
複数の分離手段により抽出され、前記表示位置制御手段
によって処理された複数の前記１／Ｎ縮小画面フォーマ
ットの符号化された画像データを多重化して、前記規定
サイズの１画面フォーマットの符号化データを生成する
多重化手段と、前記多重化手段によって処理された前記
規定サイズの１画面フォーマットの符号化データを復号
化する復号化手段とを具備したことを特徴とする。

【００３５】また、本発明に係わる端末装置の制御方法
は、複数の回線を介して最大Ｎ台（Ｎ：２以上の整数）
の端末と同時通信が可能な端末装置の制御方法であっ
て、前記回線の各々に接続され、１／Ｎ縮小画面フォー
マットの符号化された画像データをそれぞれ抽出する複
数の分離工程と、前記１／Ｎ縮小画面を規定サイズの１
画面内において最大Ｎ個収納し得るよう、前記符号化さ
れた画像データのヘッダ部に含まれる前記符号化された
画像データの画面上の割り当て位置を示す位置指定情報
を変更する表示位置制御工程と、前記複数の分離工程で
抽出され、前記表示位置制御工程で処理された複数の前
記１／Ｎ縮小画面フォーマットの符号化された画像デー
タを多重化して、前記規定サイズの１画面フォーマット
の符号化データを生成する多重化工程と、前記多重化工
程で処理された前記規定サイズの１画面フォーマットの
符号化データを復号化する復号化工程とを有することを
特徴とする。

【００３６】

【００３７】

【００３８】

【００３９】

【００４０】

【００４１】

【００４２】

【００４３】

【００４４】

【００４５】

【００４６】

【００４７】

【００４８】

【００４９】

【００５０】

【実施例】以下、本発明の一実施例を図面を参照して説
明する。

【００５１】実施例１ 図１は本発明の一実施例に係わるマルチメディア端末の
構成ブロック図である。同図において、１は、本装置の
音声入出力手段の一つであるハンドセット、２は、本装
置の音声入出力手段の一つであるマイク、３は、本装置
の音声出力手段の一つであるスピーカである。４は、シ
ステム制御部１４の指示により、音声入出力手段として
ハンドセット１，マイク２，スピーカ３を切り換える機
能と、音量レベル調整のための利得調整機能と、ハンド
セット１がオンフック状態かオフフック状態かを検知す
るオン／オフ検知機能と、音声入出力手段としてマイク
２とスピーカ３を使用した時にエコーを消去するための
エコーキャンセル機能と、ダイヤルトーン，呼出トー
ン，ビジートーン，着信音などのトーン生成機能をもつ
音声インタフェース部である。

【００５２】５は、システム制御部１４の指示により、
６４ｋｂｐｓ ＰＣＭ（Ａ−ｌａｗ），６４ｋｂｐｓ
ＰＣＭ（μ−ｌａｗ），７ｋＨｚオーディオ（ＳＢ−Ａ
ＤＰＣＭ），３２ｋｂｐｓ ＡＤＰＣＭ，１６ｋｂｐｓ
（たとえば、ＡＰＣ−ＡＢ）８ｋｂｐｓなどの音声符号
化／復号化アルゴリズムにしたがって送信音声信号をＡ
／Ｄ変換し符号化する機能と、受信音声信号を復号化し
てＤ／Ａ変換する機能を持つ音声符号化復号化部であ
る。

【００５３】６は自画像等を入力するカメラ、７は本装
置の画像入力手段の一つであり絵や図面などを入力する
ための書画カメラ、８はカメラ６または書画カメラ７よ
りの入力画像や相手からの受信画像やシステム制御部１
４からの画像を表示する表示部である。９は、システム
制御部の指示により、画像入力手段の切り換え機能と、
上述した各画像の表示切り換えおよび表示分割機能と、
各画像入出力部の映像信号と電気的／信号的に整合をと
るための信号変換機能をもつ画像入出力部である。

【００５４】１０は、送信画像をＡ／Ｄ変換して符号化
する機能と、受信画像を復号化しＤ／Ａ変換する機能を
もつ画像符号化復号化部であり、大容量の画像の生デー
タに、動き補償，駒落とし，フレーム間補償およびフレ
ーム間補償，ＤＣＴ変換，ベクトル量子化変換などの種
々の手法によって帯域圧縮を行い、小容量化してデジタ
ル回線での伝送を可能にしている。

【００５５】現在、ＩＳＤＮ回線の基本インタフェース
が６４ｋｂｐｓであるが、この伝送速度でも伝送可能な
画像の符号化方式としてはＣＣＩＴＴ勧告草案Ｈ．２６
１がある。

【００５６】１１は、データ通信を行うためのデータ端
末である。１２は、データ端末１１およびシステム制御
部１４からの送信データを多重分離化部１５へ通知する
と共に、受信データをデータ端末１１またはシステム制
御部へ通知するデータインタフェース部である。１３
は、本装置の制御をするために制御情報入力に使用する
キーボード，タッチパネルなどの操作部である。１４
は、ＣＰＵ，ＲＯＭ，ＲＡＭ，補助記憶装置，キャラク
タジェネレータ，画像信号生成回路などを備え、各部の
状態を監視して装置全体の制御，状態に応じた操作／表
示画面作成およびアプリケーションプログラムの実行な
どを行うシステム制御部である。

【００５７】１５は、音声符号化復号化部５からの音声
データ，ビデオ符号化復号化部１０からの画像データ，
データインターフェース部１２からのデータ，システム
制御部１４からのＢＡＳ（Ｂｉｔ Ａｌｌｏｃａｔｉｏ
ｎ Ｓｉｇｎａｌ）を送信フレーム単位に多重化すると
共に、受信フレームを構成単位の各メディアに分離し各
部に通知する多重分離部であり、ＣＣＩＴＴ勧告として
は、Ｈ．２２１がある。

【００５８】多重分離部１５は、回線インタフェース部
１６に対応して、１６は、ＩＳＤＮユーザ網インタフェ
ースに従って回線を制御する回線インタフェース部であ
る。この回線インターフェース部１６は４端末と同時通
信できるように４個で構成されている。多重分離化部１
５は、回線インタフェース部１６に対応して４個で構成
されている。

【００５９】１７は、本実施例特有の画像制御部であ
る。

【００６０】次に、端末能力のネゴシエーションや端末
能力の変更を行う方法について述べる。まず、ＩＳＤＮ
回線で通信する場合、図２に示すように、アウトバンド
信号（つまりＤｃｈ）を用いて発呼する。

【００６１】図２に示すように、端末Ａから端末Ｂへの
呼設定と、端末Ｂから端末Ａへの応答でＢｃｈでの通信
が可能になる。通信路としては、ほかにＤｃｈ，Ｈ０，
Ｈ１などもあるがＢｃｈのみで説明し、以下は省略す
る。

【００６２】次に、この通信可能となったＢｃｈを用い
て勧告Ｈ．２４２に従い、図３に示すようにＢｃｈのイ
ンバンド信号手順（つまり、Ｂｃｈ内をデータ部と制御
部に割り付け、その制御部によって制御する）が行われ
る。この制御を、インチャネル制御手順というので、以
後は、この名称を用いる。このインチャネル制御を実行
するに当たり、Ｂｃｈ内に制御ビットが必要になるの
で、そのフレーム構成がＨ．２２１で規定されている。

【００６３】このフレーム構成を図４に示す。図４のマ
ルチフレーム構造は、Ｂｃｈ（６４ｋｂｐｓ）時のもの
である。

【００６４】まず、マルチフレーム構造は、１オクテッ
ト／１２５μｓｅｃを基本として、（ａ）のように、１
フレーム＝８０オクテット、（ｂ）のように、１サブチ
マルフレーム＝２フレーム、（ｃ）のように、１マルチ
フレーム＝８サブマルチフレームの構造を有し、ビット
方向には、８ｋｂｐｓのサブチャネルが＃１から＃８ま
で定義されている。

【００６５】ただし、＃８サブチャネルだけは、転送レ
ートが、６．４ｋｂｐｓとなり、制御ビットとして、Ｆ
ＡＳ（Ｆｒａｍｅ Ａｌｉｇｎｍｅｎｔ Ｓｉｇｎａ
ｌ）とＢＡＳ（Ｂｉｔｒａｔｅ Ａｌｌｏｃａｔｉｏｎ
Ｓｉｇｎａｌ）の信号が挿入されている。

【００６６】このＦＡＳとＢＡＳによりＢｃｈのインチ
ャネル制御が可能となる。ＦＡＳは、フレームおよびマ
ルチフレーム同期に使用されている。ＢＡＳは、サブチ
ャネルなどの多重方法を決定するに必要な端末能力の情
報の交換あるいは能力設定に使用される。特に、ＢＡＳ
は、データ通信中であってもサブマルチフレーム（２０
ｍｓｅｃ）毎に切り換えは可能である。

【００６７】次に、図３について、手順を説明する。

【００６８】まず、Ｂｃｈが通信可能状態になると、端
末Ａ，Ｂともに、ＦＡＳを送信する。この時の端末能力
は、初期状態のモード０（オーディオとＦＡＳ，ＢＡＳ
のみのモード）である。このＦＡＳは、相手端末で探索
され、Ｈ．２４２で規定されたフレーム同期確立の条件
が満たされると、図５に示すＦＡＳ内のビット構成の中
のＡを“０”にして送信する。Ａ＝０を端末が受信する
ことで、相手端末がフレーム同期が確立したことが確認
される。

【００６９】次に、自端末の伝達能力を、ＢＡＳで相手
端末に送信し、互いに、相手端末の端末能力を認識す
る。いわゆる、伝達能力の交換である。

【００７０】もし、この時点で互いが通信可能であれ
ば、データの通信が開始される。能力変更が必要な場合
は、同様に、ＢＡＳを用いてコマンドとして所望の端末
能力を送信し、相手端末がその能力を設定完了後、デー
タの通信を開始する。

【００７１】データの通信は送受信で独立しており、同
期の確立も端末能力の設定も別々に行われる。よって、
片方向だけ同期はずれが発生したり、送受でデータの種
別が異なる場合もある。

【００７２】データの通信が完了し呼を切断するときに
は、まず切断する側（図３では端末Ａ）がＢＡＳを用い
てモード０にする。これにより、Ｂｃｈのインチャネル
制御は初期状態に戻る。

【００７３】次に、図２に示すように、Ｄｃｈのアウト
バンド手順で切断と解放が行われてすべての通信が完了
する。

【００７４】図５は、ＦＡＳ内のビット構成を示してい
る。

【００７５】Ａビットは、フレーム同期はずれの表示で
ある。Ｅビットは、ＣＲＣ誤りが発生したか否かの表示
である。Ｃ₁ ，Ｃ₂ ，Ｃ₃ ，Ｃ₄ は、ＣＲＣ４のビット
である。Ｎ１からＮ５は、マルチフレームの番号付け用
である。

【００７６】Ｒ１からＲ４は、チャネル番号である。

【００７７】ＴＥＡは、端末装置アラームで、端末内部
の故障により入力信号を受け取ったりこれに反応できな
い場合に“１”をセットする。

【００７８】図６は、ＢＡＳ内のビット構成を示してい
る。

【００７９】図６の（ａ）に示すように、上位３ビット
は属性を表し、残り５ビットでその属性の属性値を表
す。

【００８０】また図６の（ｂ）は、属性の内容を示す。
属性値は、例えば、転送レート値、コーディック種別、
各メディア特有のパラメータ値などが定義されている。

【００８１】本実施例においては、複数端末と回線接続
し同時に相互通信可能であるが、その際に接続される全
端末に対して、画像の伝達能力に制限を設ける必要があ
る。

【００８２】具体的には、図３に示した能力ＢＡＳの送
信時に、図６（ｂ）の端末能力２の中に含まれている画
像フォーマット（ＱＣＩＦまたはＣＩＦ）をＱＣＩＦに
設定し、全端末からは、画像データのＱＣＩＦのみ受信
可能とする。ＣＩＦ，ＱＣＩＦについては、詳細の説明
は後述するが、簡単には、ＱＣＩＦの画素数は、ＣＩＦ
の１／４と定義されている。ただし、接続端末数が１台
の場合には、通常通りである。

【００８３】また、接続端末数が複数端末から１端末に
変更になった場合には、画像フォーマットをＱＣＩＦか
らＣＩＦに変更し、能力ＢＡＳをその端末へ送信するこ
とで、伝達能力に制限を設けることもできる。

【００８４】逆に、接続端末が１端末から複数端末に変
更になった場合には、全端末に対して、画像フォーマッ
トをＱＣＩＦに設定した能力ＢＡＳを送信することで、
伝達能力に制限を設けることもできる。

【００８５】このようにして、画像を受信する端末が相
手端末から受信する画像フォーマットに制限を設ける制
御をすることで、送信端末から所望の画像データを受信
することが可能となる。

【００８６】図７は、画像制御部１７およびその周辺部
のブロック構成を示す。本図において１８は、多重分離
部１５から受信したデータに対してＢＣＨの誤り訂正処
理を施し、誤り訂正フレームを外し、画像データにする
ＢＣＨ／画像分離部である。１９は、その画像データ中
におけるＧＯＢヘッダ中のＧＮ（ＧＯＢ Ｎｕｍｂｅ
ｒ）を変換するＧＮ変換部である。２０はデータバッフ
ァ、２１はゲート回路、２２はＢＣＨの訂正パリティを
付けて誤り訂正フレーム化するＢＣＨ／画像多重部、２
３はシステム制御部１４からの指示を受けて上記の各部
を制御する制御部である。

【００８７】多重分離部１５からのデータは、図９に示
すようなフォーマットの誤り訂正フレームである。

【００８８】１フレームは、誤り訂正フレームビットが
１ビット、フィル識別子が１ビット、画像データが４９
２ビット、誤り訂正パリティが１８ビットの５１２ビッ
トで構成されている。さらに、このフレームが８フレー
ムで１マルチフレームを構成している。

【００８９】ＢＣＨ／画像分離部１８は、誤り訂正フレ
ームビットでマルチフレームの同期をとり、誤り訂正パ
リティにより画像データに対して、誤り訂正処理を施し
て、フィル識別子で画像データの有効・無効を調べ、有
効で有ればＧＮ変換部１９へその画像データを転送す
る。

【００９０】ＧＮ変換部１９は、この受信した画像デー
タの内容の解読を行う。この画像データの構成は図１０
に示すような多重化フレーム構成となっている。本図の
（ａ）のように、画面の１フレームのデータの先頭にＦ
Ｈ（フレームヘッダ）がつき、画面を１２分割した１ブ
ロックをＧＯＢとして、ＧＯＢ１からＧＯＢ１２まで順
次伝送される。

【００９１】このＧＯＢの分割方法を、図１１に示す。

【００９２】Ｈ．２６１勧告草案においては、取り扱う
ビデオ信号は、ＮＴＳＣ，ＰＡＬ，デジタルテレビ規格
などの異なった複数の規格が存在するため、互いに通信
ができるように世界共通のビデオ信号フォーマットを採
用している。このフォーマットは、ＣＩＦフォーマット
と称し、標本数が輝度Ｙは３５２画素×２８８ライン、
色差Ｃｒ，Ｃｂは１７６画素×１４４ラインで規定され
ている。さらに、ＣＩＦの１／４はＱＣＩＦフォーマッ
トと称し、標本数が輝度Ｙは１７６画素×１４４ライ
ン、色差Ｃｒ，Ｃｂは、８８画素×７２ラインで定義さ
れている。

【００９３】ＧＯＢは、標本数が輝度１７６画素×４８
ライン、色差Ｃｒ，Ｃｂは８８画素×２４ラインに定義
され、ＣＩＦの１／１２，ＱＣＩＦの１／３に相当す
る。

【００９４】ここで、図１１に示すように、ＧＯＢの番
号としてＣＩＦではＧＯＢ１からＧＯＢ１２まで、ＱＣ
ＩＦではＧＯＢ１，ＧＯＢ３，ＧＯＢ５が割り当てられ
ている。

【００９５】図１０（ｂ）は、図１０（ａ）のＦＨ（フ
レームヘッダ）とＧＯＢの内容を示している。このＦＨ
（フレームヘッダ）は、ＰＳＣとＴＲとＰＴＹＰＥで構
成されている。ＰＳＣはフレーム開始符号であり、２０
ビットの“００００ ００００ ００００ ０００１
００００”からなる。ＴＲはフレーム番号であり、５ビ
ットの“１”から“３０”までの値を使用する。ＰＴＹ
ＰＥはタイプ情報（６ビット）であり、スプリット・ス
クリーン指示情報，書画カメラ指示情報，画面凍結解
除，情報源フォーマット指示情報（ＣＩＦ，ＱＣＩＦ）
が含まれている。

【００９６】ＧＯＢヘッダは、ＧＢＳＣとＧＮとＧＱＵ
ＡＮＴで構成されている。ＧＢＳＣはＧＯＢ開始符号で
あり、１６ビットの“００００ ００００ ００００
０００１”からなる。ＧＮはＧＯＢ番号で４ビットであ
り、“１”から“１２”まで使用する。ＧＮが“０”の
場合にはＰＳＣで使用しているので、ＦＨのＰＳＣとＧ
ＯＢのＧＢＳＣ＋ＧＮは、共に２０ビットで連続した値
とみなすことができる。ＧＱＵＡＮＴは量子化特性情報
であり、５ビットで量子化ステップサイズの情報を含
む。

【００９７】ＭＢヘッダはマクロブロック（以後、ＭＢ
と称する）と称する画素ブロックのヘッダである。ＭＢ
は３３個のＭＢで１つのＧＯＢを構成しており、１ＭＢ
は８画素×８ラインの輝度信号（Ｙ）４個と８画素×８
ラインの色差信号（Ｃｂ，Ｃｒ）２個で構成されてい
る。

【００９８】ここで、各ブロックの番号として、Ｙには
１から４まで、Ｃｂには５、Ｃｒには６の番号が割当て
られている。このＭＢヘッダはＭＢＡとＭＴＹＰＥとＭ
ＱＵＡＮＴとＭＶＤとＣＢＰで構成されている。

【００９９】ＭＢＡはＭＢの位置を表すマクロブロック
アドレスであり、先頭のＭＢのみ絶対値で、それ以降
は、差分の可変長符号である。ＭＴＹＰＥはＭＢのタイ
プ情報であり、ＩＮＴＲＡ（フレーム内符号化），ＩＮ
ＴＥＲ（フレーム間差分符号化），ＭＣ（動き補償付フ
レーム間差分符号化），ＦＩＬ（フィルター）などその
ＭＢのデータに処理を施した処理タイプが挿入されてい
る。ＭＱＵＡＮＴはＧＱＵＡＮＴと同じである。

【０１００】ＭＶＤは動きベクトル情報である。ＣＢＰ
は有意ブロックパターンであり、先ほどのＭＢのＹの４
個とＣｒ，Ｃｂのうちの有効な画素ブロックの番号を情
報として含んでいる。このＭＢヘッダのあとには、圧縮
符号化した画素データが上述したように、すなわちＹ４
個Ｃｒ，Ｃｂのうち有意ブロックとなった画素ブロック
が番号順に入っている。

【０１０１】ここで、ＦＨのＰＳＣおよびＧＯＢのＧＢ
ＳＣとＧＮは、復号器側でＦＨやＧＯＢのヘッダがサー
チできるようにそれ以外のデータには存在しないような
唯一のデータパターンになっている。

【０１０２】図７に示したＧＮ変換部１９では、図１０
に示した画像データ多重化フレームのＧＢＳＣをサーチ
し、ＧＢＳＣの後のＧＮを解読し、このＧＮの値を他の
値に置換する機能を持っている。

【０１０３】バッファ２０はＧＮ変換部１９からの画像
データをバッファリングして転送タイミングを非同期化
し、ゲート回路２１のタイミングでＢＣＨ／画像多重部
２２に画像データが転送される。ＢＣＨ／画像多重部２
２は、この画像データを図９に示した誤り訂正フレーム
に戻し、画像復号化部１０（図１参照）に転送する。

【０１０４】図８は、上述した画像制御部１７を複数使
用することで、４台の端末から同時受信を行う場合の構
成を示す。本図において、端末Ａからの受信画像データ
については、回線インタフェース部１６（ａ）と多重分
離部１５（ａ）と画像制御部１７（ａ）により図７と同
様の構成がとられているので、上述した処理が行われ、
端末Ｂ，端末Ｃ，端末Ｄの受信画像データも同様の処理
がなされる。そのため、各端末からの受信データは同時
に並列処理が可能である。

【０１０５】各端末からの伝達能力の交換の際に、自端
末の画像受信伝達能力をＱＣＩＦとして相手端末に伝え
ておき、相手端末からはＱＣＩＦのフォーマットで画像
データを受信し、図１２（ａ）に示すように、４端末か
ら受信した４個のＱＣＩＦをＣＩＦに納まるように再構
成する。

【０１０６】そのため、図８に示したシステム制御部１
４から各画像制御部１７（ａ）〜１７（ｄ）に対し、各
端末からの画像をＣＩＦ画面のどの位置に表示するかを
指示する。各画像制御部は、指示された通りにＧＮ変換
部１９でＧＮの値を変換する。

【０１０７】例えば、図１２（ａ）のＱＣＩＦ（Ａ）に
表示するには、図１２（ｂ）に示すように、ＧＮ値は変
換しない。ＱＣＩＦ（Ｂ）の場合には、現ＧＮ値にすべ
て＋１した値にＧＮ値を置換する。同様に、ＱＣＩＦ
（Ｃ）の場合には現ＧＮ値にすべて＋６した値、ＱＣＩ
Ｆ（Ｄ）の場合には現ＧＮ値にすべて＋７した値に置換
する。

【０１０８】こうしてＧＮ値が変換された各々のＱＣＩ
Ｆの画像データは、各々のバッファ部でバッファリング
され、各々のゲート回路により時分割多重されてＣＩＦ
の画像データ多重化フレームとなる。

【０１０９】このゲート回路の動作を図１３に示す。こ
こで信号ａ，ｂ，ｃ，ｄは、各画像制御部１７に含まれ
ているＢＣＨ／画像分離部１８からの画像データであ
る。受信している画像データはＱＣＩＦであるので、Ｆ
Ｈと３個のＧＯＢで構成されている。これらの画像デー
タに指示されたようにＧＮ変換してバッファリングす
る。

【０１１０】図１３の例は、端末Ａを図１２（ａ）のＱ
ＣＩＦ（Ａ）に、端末ＢをＱＣＩＦ（Ｂ）に、端末Ｃを
ＱＣＩＦ（Ｃ）に、端末ＤをＱＣＩＦ（Ｄ）に表示する
ための例である。

【０１１１】また、図１３に示した信号ｆ，ｇ，ｈ，ｉ
は、画像制御部Ａ，Ｂ，Ｃ，Ｄ（図８参照）に含まれる
ゲート回路のＯＮ／ＯＦＦの信号である。すなわち
“Ｈ”の時時にゲートを開き、“Ｌ”の時にゲートを閉
じる。この信号の制御により、信号ｅに示すように各端
末のＱＣＩＦのＧＯＢが多重化され、ＣＩＦの１２個の
ＧＯＢとなり、ＢＣＨ／画像多重化部２２に転送され
る。

【０１１２】画像復号化部１０では、ＣＩＦのフォーマ
ットとして画像データのデコードを行い、このデコード
された画像が画像出力部９を介して表示部８の画面に表
示される。この画面には、４端末の画像が画面を４分割
して同時に表示されている。このようにして、４端末同
時に映像を受信し、かつ同時に画面表示が可能となる。

【０１１３】実施例２ 図１４は、本発明のその他の実施例による画像制御部の
詳細を示すブロック図である。本図において、３０は、
多重分離部１５から受信したデータに対してＢＣＨの誤
り訂正処理を施し、誤り訂正フレームを外し、画像デー
タにするためのＢＣＨ／画像分離部である。３１は、そ
の画像データ中のフレームヘッダ（ＦＨ）を解読する機
能を持つＦＨ解読部である。３２は、そのＦＨを画像デ
ータから取り除くＦＨ削除部である。３３は、画像デー
タにおけるＧＯＢヘッダ中のＧＮ（ＧＯＢ Ｎｕｍｂｅ
ｒ）を変換するＧＮ変換部である。３４はデータバッフ
ァ、３５はＧＯＢデータを発生するＧＯＢ発生部、３６
はゲート回路、３７はＦＨ無しの画像データにＦＨを挿
入するＦＨ挿入部、３８はＢＣＨの訂正パリティを付け
て誤り訂正フレーム化するＢＣＨ／画像多重部、３９は
切替スイッチ、４０はシステム制御部１４からの指示を
受けて上記の各部を制御する制御部である。

【０１１４】多重分離部１５からのデータは、図９に示
したようなフォーマットの誤り訂正フレームである。

【０１１５】１フレームは、誤り訂正フレームビットが
１ビット、フィル識別子が１ビット、画像データが４９
２ビット、誤り訂正パリティが１８ビットの５１２ビッ
トで構成されている。さらに、このフレームが８フレー
ムで１マルチフレームを構成している。

【０１１６】ＢＣＨ／画像分離部３０は、誤り訂正フレ
ームビットでマルチフレームの同期をとり、誤り訂正パ
リティにより画像データに対して、誤り訂正処理をして
フィル識別子で画像データの有効・無効を調べ、有効で
あればＦＨ削除部３２に転送する。これと同時にＦＨ解
読部３１にも転送する。

【０１１７】このＦＨ解読部３１は、ＦＨの探索に入り
ＦＨを見つけると解読を開始すると同時に、ＦＨ削除部
３２に通知し、これを受けて、ＦＨ削除部３２はＦＨの
削除をする。ＦＨ解読部３１は解読結果を制御部４０に
通知する。

【０１１８】次に、ＦＨ削除部３２でＦＨを削除された
画像データは、ＧＮ変換部３３へ転送される。ＧＮ変換
部３３は、この画像データの内容の解読にはいる。この
画像データの構成は、図１０に示したような多重化フレ
ーム構成となっている。ただし、ここでは説明の都合
上、ＦＨを付加したまま説明をすることとする。

【０１１９】図１０（ａ）はＧＯＢのブロックによる構
成を示している。このように画面の１フレームのデータ
の先頭にＦＨがつき、画面を１２分割した１ブロックを
ＧＯＢとしては、ＧＯＢ１からＧＯＢ１２まで順次伝送
される。ＧＯＢの分割方法については、図１１に示した
とおりであるので、説明は省略する。

【０１２０】図１０（ｂ）は、図１０（ａ）のＦＨ（フ
レームヘッダ）とＧＯＢの詳細の内容を示している。こ
のＦＨは、ＰＳＣとＴＲとＰＴＹＰＥで構成されてい
る。ＰＳＣはフレーム開始符号であり、２０ビットの
“００００ ００００ ０００００００１ ００００”
からなる。ＴＲはフレーム番号であり、５ビットの
“１”から“３０”までの値を使用する。ＰＴＹＰＥは
タイプ情報（６ビット）であり、スプリット・スクリー
ン指示情報，書画カメラ指示情報，画面凍結解除，情報
源フォーマット指示情報（ＣＩＦ，ＱＣＩＦ）が含まれ
ている。つまり、ＦＨ解読部３１は、上記内容の解読結
果を制御部４０に通知することになる。

【０１２１】ＧＯＢヘッダは、ＧＢＳＣとＧＮとＧＱＵ
ＡＮＴで構成されている。ＧＢＳＣはＧＯＢ開始符号で
あり、１６ビットの“００００ ００００ ００００
０００１”からなる。ＧＮはＧＯＢ番号で４ビットであ
り、“１”から“１２”まで使用する。ＧＮが“０”の
場合にはＰＳＣで使用しているので、ＦＨのＰＳＣとＧ
ＯＢのＧＢＳＣ＋ＧＮは、共に２０ビットで連続した値
とみなすことができる。

【０１２２】ＧＱＵＡＮＴは量子化特性情報で５ビット
であり、量子化ステップサイズの情報を含む。

【０１２３】ＭＢヘッダはマクロブロック（ＭＢ）と称
する画素ブロックのヘッダである。ＭＢは３３個のＭＢ
で１つのＧＯＢを構成しており、１ＭＢは８画素×８ラ
インの輝度信号（Ｙ）４個と８画素×８ランプの色差信
号（Ｃｂ，Ｃｒ）２個で構成されている。

【０１２４】ここで、各ブロックの番号として、Ｙには
１から４まで、Ｃｂには５、Ｃｒには６の番号が割当て
られている。このＭＢヘッダはＭＢＡとＭＴＹＰＥとＭ
ＱＵＡＮＴとＭＶＤとＣＢＰで構成されている。

【０１２５】ＭＢＡはＭＢの位置を表すマクロブロック
アドレスであり、先頭のＭＢのみ絶対値で、それ以降
は、差分の可変長符号である。ＭＴＹＰＥはＭＢのタイ
プ情報であり、ＩＮＴＲＡ（フレーム内符号化），ＩＮ
ＴＥＲ（フレーム間差分符号化），ＭＣ（動き補償付き
フレーム間差分符号化），ＦＩＬ（フィルター）などそ
のＭＢのデータに処理を施した処理タイプが挿入されて
いる。ＭＱＵＡＮＴはＧＱＵＡＮＴと同じである。

【０１２６】ＭＶＤは動きベクトル情報である。ＣＢＰ
は有意ブロックパターンであり、先ほどのＭＢのＹの４
個とＣｒ，Ｃｂのうちの有効な画素ブロックの番号を情
報として含んでいる。このＭＢヘッダのあとには、圧縮
符号化した画像データが上述したように、すなわちＹ４
個Ｃｒ，Ｃｂのうち有意ブロックとなった画素ブロック
が番号順に入っている。

【０１２７】ここで、ＦＨのＰＳＣおよびＧＯＢのＧＢ
ＳＣとＧＮは復号器側でＦＨやＧＯＢのヘッダがサーチ
できるようにそれ以外のデータには存在しないような唯
一のデータパターンになっている。

【０１２８】図１４に示したＧＮ変換部３３は、上記デ
ータの内容の解読をして図１０の画像データ多重化フレ
ームのＧＢＳＣをサーチし、ＧＢＳＣの後のＧＮを解読
し、このＧＮの値を他の値に置換する機能を持ってい
る。

【０１２９】バッファ部３４はＧＮ変換部３３からの画
像データをバッファリングし、転送タイミングを非同期
化し、ゲート部３６のタイミングでＦＨ挿入部３７へ画
像データが転送される。

【０１３０】切替スイッチ３９は制御部４０により制御
され、制御部４０がバッファ部３４の容量の状況をモニ
タし、もしバッファ部３４に充分転送可能なデータが無
い場合に、ＧＯＢ発生部３５側に切替え、ＧＯＢ発生部
３５のデータをゲート部３６に転送する。逆に、もしバ
ッファ部３４に転送可能な充分なデータがある場合に
は、バッファ側に切替え、バッファ部３４に蓄えられて
いるデータがゲート部３６に転送される。

【０１３１】ＧＯＢ発生部３５は、制御部４０よりＧＯ
ＢのＧＮ値が指示され、そのＧＮ値に相当するＧＯＢを
発生する。そして、切替スイッチ３９がＧＯＢ発生部側
に切替えられたとき、ゲート部３６に出力される。

【０１３２】ＦＨ挿入部３７では、ゲート部３６から出
力されたＦＨ無しの画像データに対し、ＦＨ削除部３２
で削除されたＦＨの替わりに制御部４０により生成され
たＦＨを画像データの先頭に挿入する。このＦＨ挿入部
３７は、端末が１対向の時には必要ないが、多地点接続
の時に有効である。それについては後で述べることとす
る。

【０１３３】ＦＨ挿入部３５で元の画像データに戻った
後、ＢＣＨ／画像多重部３８で、この画像データを図９
に示した誤り訂正フレームに戻し、画像復号化部１０
（図１参照）に転送する。

【０１３４】図１５は、上述した画像制御部１７を複数
使用することで、４台の端末からの同時受信する場合の
構成例を示す。本図において、端末Ａからの受信画像デ
ータについては、回線インタフェース部１６（ａ）と多
重分離部１５（ａ）と画像制御基本部Ａ５０（ａ）によ
り、図１４の点線で囲った部分と同様の構成がとられて
いるので、上述した処理が行われ、端末Ｂ，端末Ｃ，端
末Ｄの受信画像データも同様の処理がなされる。

【０１３５】すなわち、この場合には、４つの画像制御
基本部５０（ａ）〜５０（ｄ）をコントロールする全体
制御部５２が追加されるが、この全体制御部５２によ
り、画像制御基本部ＡからＤまでの４つのＦＨ無しの画
像データを各ゲート部に送り画像データの時分割多重化
を行い、さらに、ＦＨ挿入部３７に指示して多重化され
た画像データの先頭にＦＨを付加する。こうして生成さ
れた画像データはＢＣＨ／画像多重化部３８で誤り訂正
フレームに再生成され、画像復号化部に転送される。

【０１３６】以上により、各端末からの受信データは同
時に並列処理が可能である。

【０１３７】各端末からの伝達能力の交換の際に、自端
末の画像受信伝達能力をＱＣＩＦとして相手端末に伝え
ておき、相手端末からはＱＣＩＦのフォーマットで画像
データを受信し、図１２（ａ）に示したように、４端末
から受信した４個のＱＣＩＦをＣＩＦに納まるように再
構成する。

【０１３８】そのため、システム制御部１４から全体制
御部５２と各画像制御基本部５０（ａ）〜５０（ｄ）に
対し、各端末からの画像をＣＩＦ画面のどの位置に表示
するかを指示する。各画像制御基本部５０（ａ）〜５０
（ｄ）は、指示された通りにＧＮ変換部３３でＧＮの値
を変換する。

【０１３９】例えば、図１２（ａ）のＱＣＩＦ（Ａ）に
表示するには、図１２（ｂ）に示すように、ＧＮ値は変
換しない。ＱＣＩＦ（Ｂ）の場合には、現ＧＮ値にすべ
て＋１した値にＧＮ値を置換する。同様に、ＱＣＩＦ
（Ｃ）の場合には現ＧＮ値にすべて＋６した値、ＱＣＩ
Ｆ（Ｄ）の場合には現ＧＮ値にすべて＋７した値に置換
する。

【０１４０】こうしてＧＮ値が変換された各々のＱＣＩ
Ｆの画像データは、各々のバッファ部３４でバッファリ
ングされ、各々のゲート部３６により時分割多重されて
ＣＩＦの画像データ多重化フレームとなる。

【０１４１】図１６は、画像制御部の動作を示すタイミ
ング図である。本図において信号ａ，ｂ，ｃ，ｄは、各
画像制御基本部５０（ａ）〜５０（ｄ）において、ＢＣ
Ｈ／画像分離部３０からＦＨ削除部３２を経てＧＮ変換
部３３へ転送される画像データ信号である。例えば、信
号ａのＡ₁ ブロックはＡ端末から受信した１フレームの
画像データのブロックを示している。数字はシリアルナ
ンバである。つまり、この画像データブロックの内容は
受信している画像データがＱＣＩＦなので３個のＧＯＢ
で構成されている。

【０１４２】これらの画像データブロックに対して、シ
ステム制御部１４から指示されたようにＧＮ変換部３２
でＧＮ値を変換して、バッファ部３４でバッファリング
する。

【０１４３】信号ｅ，ｆ，ｇ，ｈは、バッファ部３４に
蓄えられている画像データを示している。例えば、信号
ｅのＡ₁ ブロックは、このＡ₁ ブロックがバッファ部３
４への入力が完了した時点から、ゲート部３６への転送
を開始するまでを示している。

【０１４４】信号ｉは全体制御部５２からＦＨ挿入部３
７への信号であり、各画像制御基本部５０（ａ）〜５０
（ｄ）からのＱＣＩＦの画像データを多重化しＣＩＦに
再構成した画像データフレームに対して、ＦＨを挿入す
るタイミングを示す。ＦＨ挿入部３７は、このｉ信号に
より、全体制御部５２から指示されたＦＨ情報を含むＦ
Ｈを挿入する。

【０１４５】信号ｋ，ｍ，ｏ，ｑは各画像制御基本部５
０（ａ）〜５０（ｄ）に含まれているゲート部３６のタ
イミング信号である。これらの信号が“Ｈ”の時、バッ
ファ部３４またはＧＯＢ発生部３５からのデータをＦＨ
挿入部３７へ転送する。

【０１４６】信号ｊ，ｌ，ｎ，ｐはそれぞれ信号ｋ，
ｍ，ｏ，ｑに対応しており、ゲート部３６からＦＨ挿入
部３７に転送される画像データを示している。例えば、
信号ｊのＡ₁ は、画像制御基本部Ａのバッファ部３４か
らの画像データブロックを示している。×印のブロック
は、バッファ部３４にデータが揃っていないとき、ある
いはタイミングをずらす必要があるときに、ＧＯＢ発生
部３５から不足分のＧＯＢブロックを発生させて不足分
を補ったことを意味している。

【０１４７】図１においては、端末Ａが図１２（ａ）の
ＱＣＩＦ（Ｄ），端末ＢがＱＣＩＦ（Ｃ），端末ＣがＱ
ＣＩＦ（Ｂ），端末ＤがＱＣＩＦ（Ａ）となり、画面に
表示される。

【０１４８】このＧＯＢ発生部３５により発生された画
像データブロックは、ＧＯＢのＧＮ値としてＧＮ変換部
３３で置換されたＧＮ値と同じＧＮを持つ、ＧＯＢブロ
ックである。ＧＯＢブロックの内容としては、ＭＢは係
数データがない場合には特に付ける必要はないのでＧＯ
Ｂヘッダのみとしても良いが、ＧＯＢヘッダの直後また
はＭＢブロックの直後に“００００ ０００１ １１
１”といった意味を持たない特別な符号を挿入して次へ
のタイミングを図る事は可能である。この符号は画像復
号部において捨てられる。

【０１４９】さらに、同時通信している端末数が３台か
２台の場合には、必ず画面に不足分が存在するので、通
信していない端末に該当する画像制御基本部は切替スイ
ッチ３９を常にＧＯＢ発生部３５側に切替えておき、Ｇ
ＯＢ発生部３５からのＧＯＢブロックを常に転送するよ
うにする。

【０１５０】ここで、この時のＧＯＢブロックの内容と
しては、前述したような意味のない特別な符号でも良い
が、この場合には復号部１０で捨てられてしまい画面が
更新されないので、画面をクリアするために、すべての
ＭＢに白か黒のデータになるような係数データをつけて
ＩＮＴＲＡモードとして用意しておき、定期的に転送す
るようにする。または、何かのメッセージが表示される
ように予め符号化したデータを用意しておき、転送する
ようにしておく。

【０１５１】図１６の信号ｒは、ＦＨ挿入部３７から出
力された画像データ信号である。ここで、黒く塗りつぶ
した部分は、各フレームのＦＨを示している。信号ｒに
示すように各端末のＱＣＩＦの３個のＧＯＢが多重化さ
れ、ＣＩＦの１２個のＧＯＢとなりＢＣＨ／画像多重化
部３８に転送される。

【０１５２】画像符号化部１０では、ＣＩＦのフォーマ
ットとして画像データのデコードをし、このデコードさ
れた画像が画像出力部９を経由して表示部８の画面に表
示される。この画面には、４端末の画像が画面を４分割
して同時に表示されている。このようにして、４端末同
時に映像を受信し、かつ同時に画面表示が可能となる。

【０１５３】実施例３ 図１７は、本発明の一実施例に係わるマルチメディア端
末の構成ブロック図である。同図において、１は、本装
置の音声入出力手段の一つであるハンドセット、２は、
本装置の音声入出力手段の一つであるマイク、３は、本
装置の音声出力手段の一つであるスピーカである。４
は、システム制御部１４の指示により、音声入出力手段
としてハンドセット１，マイク２，スピーカ３を切り換
える機能と、音量レベル調整のための利得調整機能と、
ハンドセット１がオンフック状態かオフフック状態かを
検知するオン／オフ検知機能と、音声入出力手段として
マイク２とスピーカ３を使用した時にエコーを消去する
ためのエコーキャンセル機能と、ダイヤルトーン，呼出
トーン，ビジートーン，着信音などのトーン生成機能を
もつ音声インタフェース部である。

【０１５４】５は、システム制御部１４の指示により、
６４ｋｂｐｓ ＰＣＭ（Ａ−ｌａｗ），６４ｋｂｐｓ
ＰＣＭ（μ−ｌａｗ），７ｋＨｚオーディオ（ＳＢ−Ａ
ＤＰＣＭ），３２ｋｂｐｓ ＡＤＰＣＭ，１６ｋｂｐｓ
（たとえば、ＡＰＣ−ＡＢ）８ｋｂｐｓなどの音声符号
化／復号化アルゴリズムにしたがって送信音声信号をＡ
／Ｄ変換し符号化する機能と、受信音声信号を復号化し
てＤ／Ａ変換する機能を持つ音声符号化復号化部であ
る。

【０１５５】６は自画像等を入力するカメラ、７は本装
置の画像入力手段の一つであり絵や図面などを入力する
ための書画カメラ、８はカメラ６または書画カメラ７よ
りの入力画像や相手からの受信画像やシステム制御部１
４からの画像を表示する表示部である。９は、システム
制御部の指示により、画像入力手段の切り換え機能と、
上述した各画像の表示切り換えおよび表示分割機能と、
各画像入出力部の映像信号と電気的／信号的に整合をと
るための信号変換機能をもつ画像入出力部である。

【０１５６】１０は、送信画像をＡ／Ｄ変換して符号化
する機能と、受信画像を復号化しＤ／Ａ変換する機能を
もつ画像符号化復号化部であり、大容量の画像の生デー
タに、動き補償，駒落とし，フレーム間補償およびフレ
ーム間補償，ＤＣＴ変換，ベクトル量子化変換などの種
々の手法によって帯域圧縮を行い、小容量化してデジタ
ル回線での伝送を可能にしている。

【０１５７】現在、ＩＳＤＮ回線の基本インタフェース
が６４ｋｂｐｓであるが、この伝送速度でも伝送可能な
画像の符号化方式としてはＣＣＩＴＴ勧告草案Ｈ．２６
１がある。

【０１５８】１１は、データ通信を行うためのデータ端
末である。１２は、データ端末１１およびシステム制御
部１４からの送信データを多重分離化部１５へ通知する
と共に、受信データをデータ端末１１またはシステム制
御部へ通知するデータインタフェース部である。１３
は、本装置の制御をするために制御情報入力に使用する
キーボード，タッチパネルなどの操作部である。１４
は、ＣＰＵ，ＲＯＭ，ＲＡＭ，補助記憶装置，キャラク
タジェネレータ，画像信号生成回路などを備え、各部の
状態を監視して装置全体の制御，状態に応じた操作／表
示画面作成およびアプリケーションプログラムの実行な
どを行うシステム制御部である。

【０１５９】１５は、音声符号化復号化部５からの音声
データ，ビデオ符号化復号化部１０からの画像データ，
データインターフェース部１２からのデータ，システム
制御部１４からのＢＡＳ（Ｂｉｔ Ａｌｌｏｃａｔｉｏ
ｎ Ｓｉｇｎａｌ）を送信フレーム単位に多重化すると
共に、受信フレームを構成単位の各メディアに分離し各
部に通知する多重分離部であり、ＣＣＩＴＴ勧告として
は、Ｈ．２２１がある。

【０１６０】多重分離部１５は、回線インタフェース部
１６に対応して、１６は、ＩＳＤＮユーザ網インタフェ
ースに従って回線を制御する回線インタフェース部であ
る。この回線インターフェース部１６は４端末と同時通
信できるように４個で構成されている。多重分離化部１
５は、回線インタフェース部１６に対応して４個で構成
されている。

【０１６１】１７は、本実施例特有の画像制御部であ
る。

【０１６２】６１は、本実施例の画像復号化された画像
データに対して、システム制御部１４からのキャラクタ
文字の埋め込みを行うスーパーインポーズ部である。

【０１６３】次に、端末能力のネゴシエーションや端末
能力の変更を行う方法について述べる。まず、ＩＳＤＮ
回線で通信する場合、図２に示すように、アウトバンド
信号（つまりＤｃｈ）を用いて発呼する。

【０１６４】図２に示すように、端末Ａから端末Ｂへの
呼設定と、端末Ｂから端末Ａへの応答でＢｃｈでの通信
が可能になる。通信路としては、ほかにＤｃｈ，Ｈ０，
Ｈ１などもあるがＢｃｈのみで説明し、以下は省略す
る。

【０１６５】次に、この通信可能となったＢｃｈを用い
て勧告Ｈ．２４２に従い、図３に示すようにＢｃｈのイ
ンバンド信号手順（つまり、Ｂｃｈ内をデータ部と制御
部に割り付け、その制御部によって制御する）が行われ
る。この制御を、インチャネル制御手順というので、以
後は、この名称を用いる。このインチャネル制御を実行
するに当たり、Ｂｃｈ内に制御ビットが必要になるの
で、そのフレーム構成がＨ．２２１で規定されている。

【０１６６】このフレーム構成を図４に示す。図４のマ
ルチフレーム構造は、Ｂｃｈ（６４ｋｂｐｓ）時のもの
である。

【０１６７】まず、マルチフレーム構造は、１オクテッ
ト／１２５μｓｅｃを基本として、（ａ）のように、１
フレーム＝８０オクテット、（ｂ）のように、１サブチ
マルフレーム＝２フレーム、（ｃ）のように、１マルチ
フレーム＝８サブマルチフレームの構造を有し、ビット
方向には、８ｋｂｐｓのサブチャネルが＃１から＃８ま
で定義されている。

【０１６８】ただし、＃８サブチャネルだけは、転送レ
ートが、６．４ｋｂｐｓとなり、制御ビットとして、Ｆ
ＡＳ（Ｆｒａｍｅ Ａｌｉｇｎｍｅｎｔ Ｓｉｇｎａ
ｌ）とＢＡＳ（Ｂｉｔｒａｔｅ Ａｌｌｏｃａｔｉｏｎ
Ｓｉｇｎａｌ）の信号が挿入されている。

【０１６９】このＦＡＳとＢＡＳによりＢｃｈのインチ
ャネル制御が可能となる。ＦＡＳは、フレームおよびマ
ルチフレーム同期に使用されている。ＢＡＳは、サブチ
ャネルなどの多重方法を決定するに必要な端末能力の情
報の交換あるいは能力設定に使用される。特に、ＢＡＳ
は、データ通信中であってもサブマルチフレーム（２０
ｍｓｅｃ）毎に切り換えは可能である。

【０１７０】次に、図３について、手順を説明する。

【０１７１】まず、Ｂｃｈが通信可能状態になると、端
末Ａ，Ｂともに、ＦＡＳを送信する。この時の端末能力
は、初期状態のモード０（オーディオとＦＡＳ，ＢＡＳ
のみのモード）である。このＦＡＳは、相手端末で探索
され、Ｈ．２４２で規定されたフレーム同期確立の条件
が満たされると、図５に示すＦＡＳ内のビット構成の中
のＡを“０”にして送信する。Ａ＝０を端末が受信する
ことで、相手端末がフレーム同期が確立したことが確認
される。

【０１７２】次に、自端末の伝達能力を、ＢＡＳで相手
端末に送信し、互いに、相手端末の端末能力を認識す
る。いわゆる、伝達能力の交換である。

【０１７３】もし、この時点で互いが通信可能であれ
ば、データの通信が開始される。能力変更が必要な場合
は、同様に、ＢＡＳを用いてコマンドとして所望の端末
能力を送信し、相手端末がその能力を設定完了後、デー
タの通信を開始する。

【０１７４】データの通信は送受信で独立しており、同
期の確立も端末能力の設定も別々に行われる。よって、
片方向だけ同期はずれが発生したり、送受でデータの種
別が異なる場合もある。

【０１７５】データの通信が完了し呼を切断するときに
は、まず切断する側（図３では端末Ａ）がＢＡＳを用い
てモード０にする。これにより、Ｂｃｈのインチャネル
制御は初期状態に戻る。

【０１７６】次に、図２に示すように、Ｄｃｈのアウト
バンド手順で切断と解放が行われてすべての通信が完了
する。

【０１７７】図５は、ＦＡＳ内のビット構成を示してい
る。

【０１７８】Ａビットは、フレーム同期はずれの表示で
ある。Ｅビットは、ＣＲＣ誤りが発生したか否かの表示
である。Ｃ₁ ，Ｃ₂ ，Ｃ₃ ，Ｃ₄ は、ＣＲＣ４のビット
である。Ｎ１からＮ５は、マルチフレームの番号付け用
である。

【０１７９】Ｒ１からＲ４は、チャネル番号である。

【０１８０】ＴＥＡは、端末装置アラームで、端末内部
の故障により入力信号を受け取ったりこれに反応できな
い場合に“１”をセットする。

【０１８１】図６は、ＢＡＳ内のビット構成を示してい
る。

【０１８２】図６の（ａ）に示すように、上位３ビット
は属性を表し、残り５ビットでその属性の属性値を表
す。

【０１８３】また図６の（ｂ）は、属性の内容を示す。
属性値は、例えば、転送レート値、コーディック種別、
各メディア特有のパラメータ値などが定義されている。

【０１８４】本実施例においては、複数端末と回線接続
し同時に相互通信可能であるが、その際に接続される全
端末に対して、画像の伝達能力に制限を設ける必要があ
る。

【０１８５】具体的には、図３に示した能力ＢＡＳの送
信時に、図６（ｂ）の端末能力２の中に含まれている画
像フォーマット（ＱＣＩＦまたはＣＩＦ）をＱＣＩＦに
設定し、全端末からは、画像データのＱＣＩＦのみ受信
可能とする。ＣＩＦ，ＱＣＩＦについては、詳細の説明
は後述するが、簡単には、ＱＣＩＦの画素数は、ＣＩＦ
の１／４と定義されている。ただし、接続端末数が１台
の場合には、通常通りである。

【０１８６】また、接続端末数が複数端末から１端末に
変更になった場合には、画像フォーマットをＱＣＩＦか
らＣＩＦに変更し、能力ＢＡＳをその端末へ送信するこ
とで伝達能力を変更することもできる。

【０１８７】逆に、接続端末が１端末から複数端末に変
更になった場合には、全端末に対して、画像フォーマッ
トをＱＣＩＦに設定した能力ＢＡＳを送信することで、
伝達能力に制限を設けることもできる。

【０１８８】このようにして、画像を受信する端末が相
手端末から受信する画像フォーマットに制限を設ける制
御をすることで、送信端末から所望の画像データを受信
することが可能となる。

【０１８９】図７は、画像制御部の詳細を示すブロック
図である。本図において、３０は、多重分離部１５から
受信したデータに対してＢＣＨの誤り訂正処理を施し、
誤り訂正フレームを外し、画像データにするためのＢＣ
Ｈ／画像分離部である。３１は、その画像データ中のフ
レームヘッダ（ＦＨ）を解読する機能を持つＦＨ解読部
である。３２は、そのＦＨを画像データから取り除くＦ
Ｈ削除部である。３３は、画像データにおけるＧＯＢヘ
ッダ中のＧＮ（ＧＯＢ Ｎｕｍｂｅｒ）を変換するＧＮ
変換部である。３４はデータバッファ、３５はＧＯＢデ
ータを発生するＧＯＢ発生部、３６はゲート回路、３７
はＦＨ無しの画像データにＦＨを挿入するＦＨ挿入部、
３８はＢＣＨの訂正パリティを付けて誤り訂正フレーム
化するＢＣＨ／画像多重部、３９は切替スイッチ、４０
はシステム制御部１４からの指示を受けて上記の各部を
制御する制御部である。

【０１９０】多重分離部１５からのデータは、図９に示
したようなフォーマットの誤り訂正フレームである。

【０１９１】１フレームは、誤り訂正フレームビットが
１ビット、フィル識別子が１ビット、画像データが４９
２ビット、誤り訂正パリティが１８ビットの５１２ビッ
トで構成されている。さらに、このフレームが８フレー
ムで１マルチフレームを構成している。

【０１９２】ＢＣＨ／画像分離部３０は、誤り訂正フレ
ームビットでマルチフレームの同期をとり、誤り訂正パ
リティにより画像データに対して、誤り訂正処理をして
フィル識別子で画像データの有効・無効を調べ、有効で
あればＦＨ削除部３２に転送する。これと同時にＦＨ解
読部３１にも転送する。

【０１９３】このＦＨ解読部３１は、ＦＨの探索に入り
ＦＨを見つけると解読を開始すると同時に、ＦＨ削除部
３２に通知し、これを受けて、ＦＨ削除部３２はＦＨの
削除をする。ＦＨ解読部３１は解読結果を制御部４０に
通知する。

【０１９４】次に、ＦＨ削除部３２でＦＨを削除された
画像データは、ＧＮ変換部３３へ転送される。ＧＮ変換
部３３は、この画像データの内容の解読にはいる。この
画像データの構成は、図１０に示したような多重化フレ
ーム構成となっている。ただし、ここでは説明の都合
上、ＦＨを付加したまま説明をすることとする。

【０１９５】図１０（ａ）はＧＯＢのブロックによる構
成を示している。このように画面の１フレームのデータ
の先頭にＦＨがつき、画面を１２分割した１ブロックを
ＧＯＢとしては、ＧＯＢ１からＧＯＢ１２まで順次伝送
される。ＧＯＢの分割方法については、図１１に示した
とおりであるので、説明は省略する。

【０１９６】Ｈ．２６１勧告草案においては、取り扱う
ビデオ信号は、ＮＴＳＣ，ＰＡＬ，デジタルテレビ規格
などの異なった複数の規格が存在するため、互いに通信
ができるように世界共通のビデオ信号フォーマットを採
用している。

【０１９７】このフォーマットは、ＣＩＦフォーマット
と称し、標本数が輝度Ｙは３５２画素×２８８ライン、
色素Ｃｒ，Ｃｂは１７６画素×１４４ラインで規定され
ている。

【０１９８】さらに、ＣＩＦの１／４はＱＣＩＦフォー
マットと称し、標本数が輝度Ｙは１７６画素×１４４ラ
イン、色素Ｃｒ，Ｃｂは８８画素×７２ラインで定義さ
れている。

【０１９９】ＧＯＢは、標本数が輝度１７６画素×４８
ライン、色素Ｃｒ，Ｃｂ８８画素×２４ラインに定義さ
れ、ＣＩＦｎｏ１／１２，ＱＣＩＦの１／３に相当す
る。ここで、図１１に示すように、ＧＯＢの番号がＣＩ
ＦはＧＯＢ１からＧＯＢ１２まで、ＱＣＩＦは、ＧＯＢ
１，ＧＯＢ３，ＧＯＢ５が割り当てられている。

【０２００】図１０（ｂ）は、図１０（ａ）のＦＨ（フ
レームヘッダ）とＧＯＢの詳細の内容を示している。こ
のＦＨは、ＰＳＣとＴＲとＰＴＹＰＥで構成されてい
る。ＰＳＣはフレーム開始符号であり、２０ビットの
“００００ ００００ ０００００００１ ００００”
からなる。ＴＲはフレーム番号であり、５ビットの
“１”から“３０”までの値を使用する。ＰＴＹＰＥは
タイプ情報（６ビット）であり、スプリット・スクリー
ン指示情報，書画カメラ指示情報，画面凍結解除，情報
源フォーマット指示情報（ＣＩＦ，ＱＣＩＦ）が含まれ
ている。つまり、ＦＨ解読部３１は、上記内容の解読結
果を制御部４０に通知することになる。

【０２０１】ＧＯＢヘッダは、ＧＢＳＣとＧＮとＧＱＵ
ＡＮＴで構成されている。ＧＢＳＣはＧＯＢ開始符号で
あり、１６ビットの“００００ ００００ ００００
０００１”からなる。ＧＮはＧＯＢ番号で４ビットであ
り、“１”から“１２”まで使用する。ＧＮが“０”の
場合にはＰＳＣで使用しているので、ＦＨのＰＳＣとＧ
ＯＢのＧＢＳＣ＋ＧＮは、共に２０ビットで連続した値
とみなすことができる。

【０２０２】ＧＱＵＡＮＴは量子化特性情報で５ビット
であり、量子化ステップサイズの情報を含む。

【０２０３】ＭＢヘッダはマクロブロック（ＭＢ）と称
する画素ブロックのヘッダである。ＭＢは３３個のＭＢ
で１つのＧＯＢを構成しており、１ＭＢは８画素×８ラ
インの輝度信号（Ｙ）４個と８画素×８ランプの色差信
号（Ｃｂ，Ｃｒ）２個で構成されている。

【０２０４】ここで、各ブロックの番号として、Ｙには
１から４まで、Ｃｂには５、Ｃｒには６の番号が割当て
られている。このＭＢヘッダはＭＢＡとＭＴＹＰＥとＭ
ＱＵＡＮＴとＭＶＤとＣＢＰで構成されている。

【０２０５】ＭＢＡはＭＢの位置を表すマクロブロック
アドレスであり、先頭のＭＢのみ絶対値で、それ以降
は、差分の可変長符号である。ＭＴＹＰＥはＭＢのタイ
プ情報であり、ＩＮＴＲＡ（フレーム内符号化），ＩＮ
ＴＥＲ（フレーム間差分符号化），ＭＣ（動き補償付き
フレーム間差分符号化），ＦＩＬ（フィルター）などそ
のＭＢのデータに処理を施した処理タイプが挿入されて
いる。ＭＱＵＡＮＴはＧＱＵＡＮＴと同じである。

【０２０６】ＭＶＤは動きベクトル情報である。ＣＢＰ
は有意ブロックパターンであり、先ほどのＭＢのＹの４
個とＣｒ，Ｃｂのうちの有効な画素ブロックの番号を情
報として含んでいる。このＭＢヘッダのあとには、圧縮
符号化した画像データが上述したように、すなわちＹ４
個Ｃｒ，Ｃｂのうち有意ブロックとなった画素ブロック
が番号順に入っている。

【０２０７】ここで、ＦＨのＰＳＣおよびＧＯＢのＧＢ
ＳＣとＧＮは復号器側でＦＨやＧＯＢのヘッダがサーチ
できるようにそれ以外のデータには存在しないような唯
一のデータパターンになっている。

【０２０８】図７に示したＧＮ変換部３３は、上記デー
タの内容の解読をして図１０の画像データ多重化フレー
ムのＧＢＳＣをサーチし、ＧＢＳＣの後のＧＮを解読
し、このＧＮの値を他の値に置換する機能を持ってい
る。

【０２０９】バッファ部３４はＧＮ変換部３３からの画
像データをバッファリングし、転送タイミングを非同期
化し、ゲート部３６のタイミングでＦＨ挿入部３７へ画
像データが転送される。

【０２１０】切替スイッチ３９は制御部４０により制御
され、制御部４０がバッファ部３４の容量の状況をモニ
タし、もしバッファ部３４に充分転送可能なデータが無
い場合に、ＧＯＢ発生部３５側に切替え、ＧＯＢ発生部
３５のデータをゲート部３６に転送する。逆に、もしバ
ッファ部３４に転送可能な充分なデータがある場合に
は、バッファ側に切替え、バッファ部３４に蓄えられて
いるデータがゲート部３６に転送される。

【０２１１】ＧＯＢ発生部３５は、制御部４０よりＧＯ
ＢのＧＮ値が指示され、そのＧＮ値に相当するＧＯＢを
発生する。そして、切替スイッチ３９がＧＯＢ発生部側
に切替えられたとき、ゲート部３６に出力される。

【０２１２】ＦＨ挿入部３７では、ゲート部３６から出
力されたＦＨ無しの画像データに対し、ＦＨ削除部３２
で削除されたＦＨの替わりに制御部４０により生成され
たＦＨを画像データの先頭に挿入する。このＦＨ挿入部
３７は、端末が１対向の時には必要ないが、多地点接続
の時に有効である。それについては後で述べることとす
る。

【０２１３】ＦＨ挿入部３５で元の画像データに戻った
後、ＢＣＨ／画像多重部３８で、この画像データを図９
に示した誤り訂正フレームに戻し、画像復号化部１０
（図１参照）に転送する。

【０２１４】図８は、上述した画像制御部１７を複数使
用することで、４台の端末からの同時受信する場合の構
成例を示す。本図において、端末Ａからの受信画像デー
タについては、回線インタフェース部１６（ａ）と多重
分離部１５（ａ）と画像制御基本部Ａ５０（ａ）によ
り、図１４の点線で囲った部分と同様の構成がとられて
いるので、上述した処理が行われ、端末Ｂ，端末Ｃ，端
末Ｄの受信画像データも同様の処理がなされる。

【０２１５】すなわち、この場合には、４つの画像制御
基本部５０（ａ）〜５０（ｄ）をコントロールする全体
制御部５２が追加されるが、この全体制御部５２によ
り、画像制御基本部ＡからＤまでの４つのＦＨ無しの画
像データを各ゲート部に送り画像データの時分割多重化
を行い、さらに、ＦＨ挿入部３７に指示して多重化され
た画像データの先頭にＦＨを付加する。こうして生成さ
れた画像データはＢＣＨ／画像多重化部３８で誤り訂正
フレームに再生成され、画像復号化部に転送される。

【０２１６】以上により、各端末からの受信データは同
時に並列処理が可能である。

【０２１７】各端末からの伝達能力の交換の際に、自端
末の画像受信伝達能力をＱＣＩＦとして相手端末に伝え
ておき、相手端末からはＱＣＩＦのフォーマットで画像
データを受信し、図１２（ａ）に示したように、４端末
から受信した４個のＱＣＩＦをＣＩＦに納まるように再
構成する。

【０２１８】そのため、システム制御部１４から全体制
御部５２と各画像制御基本部５０（ａ）〜５０（ｄ）に
対し、各端末からの画像をＣＩＦ画面のどの位置に表示
するかを指示する。各画像制御基本部５０（ａ）〜５０
（ｄ）は、指示された通りにＧＮ変換部３３でＧＮの値
を変換する。

【０２１９】例えば、図１２（ａ）のＱＣＩＦ（Ａ）に
表示するには、図１２（ｂ）に示すように、ＧＮ値は変
換しない。ＱＣＩＦ（Ｂ）の場合には、現ＧＮ値にすべ
て＋１した値にＧＮ値を置換する。同様に、ＱＣＩＦ
（Ｃ）の場合には現ＧＮ値にすべて＋６した値、ＱＣＩ
Ｆ（Ｄ）の場合には現ＧＮ値にすべて＋７した値に置換
する。

【０２２０】ここで、各画像制御部のＧＮ変換部３３の
ＧＮ値の変換情報（あるいは、ＱＣＩＦの位置情報）
は、蓄積部６２（図１７参照）に蓄積される。その際、
各回線ｉ／ｆからの回線番号および呼制御情報に含まれ
るユーザー情報、あるいは、操作者が予め回線番号と共
に登録していた情報との対応がとられ、図１９に示す対
応関係が登録される。

【０２２１】こうしてＧＮ値が変換された各々のＱＣＩ
Ｆの画像データは、各々のバッファ部３４でバッファリ
ングされ、各々のゲート部３６により時分割多重されて
ＣＩＦの画像データ多重化フレームとなる。

【０２２２】図１６は、画像制御部の動作を示すタイミ
ング図である。本図において信号ａ，ｂ，ｃ，ｄは、各
画像制御基本部５０（ａ）〜５０（ｄ）において、ＢＣ
Ｈ／画像分離部３０からＦＨ削除部３２を経てＧＮ変換
部３３へ転送される画像データ信号である。例えば、信
号ａのＡ₁ ブロックはＡ端末から受信した１フレームの
画像データのブロックを示している。数字はシリアルナ
ンバである。つまり、この画像データブロックの内容は
受信している画像データがＱＣＩＦなので３個のＧＯＢ
で構成されている。

【０２２３】これらの画像データブロックに対して、シ
ステム制御部１４から指示されたようにＧＮ変換部３２
でＧＮ値を変換して、バッファ部３４でバッファリング
する。

【０２２４】信号ｅ，ｆ，ｇ，ｈは、バッファ部３４に
蓄えられている画像データを示している。例えば、信号
ｅのＡ₁ ブロックは、このＡ₁ ブロックがバッファ部３
４への入力が完了した時点から、ゲート部３６への転送
を開始するまでを示している。

【０２２５】信号ｉは全体制御部５２からＦＨ挿入部３
７への信号であり、各画像制御基本部５０（ａ）〜５０
（ｄ）からのＱＣＩＦの画像データを多重化しＣＩＦに
再構成した画像データフレームに対して、ＦＨを挿入す
るタイミングを示す。ＦＨ挿入部３７は、このｉ信号に
より、全体制御部５２から指示されたＦＨ情報を含むＦ
Ｈを挿入する。

【０２２６】信号ｋ，ｍ，ｏ，ｑは各画像制御基本部５
０（ａ）〜５０（ｄ）に含まれているゲート部３６のタ
イミング信号である。これらの信号が“Ｈ”の時、バッ
ファ部３４またはＧＯＢ発生部３５からのデータをＦＨ
挿入部３７へ転送する。

【０２２７】信号ｊ，ｌ，ｎ，ｐはそれぞれ信号ｋ，
ｍ，ｏ，ｑに対応しており、ゲート部３６からＦＨ挿入
部３７に転送される画像データを示している。例えば、
信号ｊのＡ₁ は、画像制御基本部Ａのバッファ部３４か
らの画像データブロックを示している。×印のブロック
は、バッファ部３４にデータが揃っていないとき、ある
いはタイミングをずらす必要があるときに、ＧＯＢ発生
部３５から不足分のＧＯＢブロックを発生させて不足分
を補ったことを意味している。

【０２２８】図１においては、端末Ａが図１２（ａ）の
ＱＣＩＦ（Ｄ），端末ＢがＱＣＩＦ（Ｃ），端末ＣがＱ
ＣＩＦ（Ｂ），端末ＤがＱＣＩＦ（Ａ）となり、画面に
表示される。

【０２２９】このＧＯＢ発生部３５により発生された画
像データブロックは、ＧＯＢのＧＮ値としてＧＮ変換部
３３で置換されたＧＮ値と同じＧＮを持つ、ＧＯＢブロ
ックである。ＧＯＢブロックの内容としては、ＭＢは係
数データがない場合には特に付ける必要はないのでＧＯ
Ｂヘッダのみとしても良いが、ＧＯＢヘッダの直後また
はＭＢブロックの直後に“００００ ０００１ １１
１”といった意味を持たない特別な符号を挿入して次へ
のタイミングを図る事は可能である。この符号は画像復
号部において捨てられる。

【０２３０】さらに、同時通信している端末数が３台か
２台の場合には、必ず画面に不足分が存在するので、通
信していない端末に該当する画像制御基本部は切替スイ
ッチ３９を常にＧＯＢ発生部３５側に切替えておき、Ｇ
ＯＢ発生部３５からのＧＯＢブロックを常に転送するよ
うにする。

【０２３１】ここで、この時のＧＯＢブロックの内容と
しては、前述したような意味のない特別な符号でも良い
が、この場合には復号部１０で捨てられてしまい画面が
更新されないので、画面をクリアするために、すべての
ＭＢに白か黒のデータになるような係数データをつけて
ＩＮＴＲＡモードとして用意しておき、定期的に転送す
るようにする。または、何かのメッセージが表示される
ように予め符号化したデータを用意しておき、転送する
ようにしておく。

【０２３２】図１６の信号ｒは、ＦＨ挿入部３７から出
力された画像データ信号である。ここで、黒く塗りつぶ
した部分は、各フレームのＦＨを示している。信号ｒに
示すように各端末のＱＣＩＦの３個のＧＯＢが多重化さ
れ、ＣＩＦの１２個のＧＯＢとなりＢＣＨ／画像多重化
部３８に転送される。

【０２３３】画像復号化部１０では、ＣＩＦのフォーマ
ットとして画像データのデコードするため、画像復号化
部１０内のフレームメモリには図１２で示すような４地
点の画像が蓄積され処理されることになる。

【０２３４】次に、操作者が同一画面に多地点の画像を
表示させる時に、システム制御部１４から、キャラクタ
をその画像にスーパーインポーズさせることができる。

【０２３５】スーパーインポーズ部６１の内部構成図を
図１８に示す。画像復号化部から転送されてくる画像デ
ータは、同期検知部６３により水平同期、垂直同期を検
出し、切り換えタイミング発生部６５へ送られる。切り
換えタイミング発生部６５は、制御部６４から、キャラ
クタのスーパーインポーズする位置情報を受信し、前記
同期信号に基づいて位置のタイミング信号を発生し、ス
イッチ６７を切り換える。

【０２３６】スイッチ６７は、画像復号化部からの画像
データ（入力Ａ）とキャラクタジェネレータ６６から出
力される文字画像（入力Ｂ）を切り換えるスイッチであ
り、切り換えタイミング発生部６５からの切り換え指示
により、スイッチ６７を入力Ａから入力Ｂに切り換え
て、文字画像が画像データに埋め込まれる。

【０２３７】キャラクタジェネレータ６６は、制御部６
４から出力すべき文字コードを受信し、スイッチ６７へ
その文字コードに対応した文字画像を出力する。

【０２３８】このようにして、システム制御部１４から
の指示により、スーパーインポーズ部６１は、画像デー
タの指定した位置に、指定した文字を表示させることが
可能となる。

【０２３９】スーパーインポーズの別の方法としては、
一度画像データを画像メモリ上に展開し、その画像メモ
リ上で文字画像を上書きすることも可能である。

【０２４０】次に、ＧＮ変換時に登録しておいた図１９
の対応表に基づいて操作者の指示により、各画像番号に
対応する情報を読み出し、選択された情報の文字列をス
ーパーインポーズ部６１に転送する。

【０２４１】その際に、画像番号に相当する位置情報も
合わせて転送する。これにより、各画像番号に対応した
文字情報が画面上にスーパーインポーズされる。

【０２４２】実施例４ 図２０は、本発明の第４の実施例を示すブロック図であ
る、本実施例では、図１７に示したスーパーインポーズ
部６１の替わりに、画像変倍部７１を挿入してある。す
なわち、この７１は、画像復号化された画像データに変
倍を施す画像変倍部である。

【０２４３】以下には、本実施例と第３の実施例（図１
７参照）との相違点のみを述べる。

【０２４４】図１６に示した信号ｒは、ＦＨ挿入部３７
から出力された画像データ信号である。ここで、黒く塗
りつぶした部分は、各フレームのＦＨを示している。信
号ｒに示すように各端末のＱＣＩＦの３個のＧＯＢが多
重化され、ＣＩＦの１２個のＧＯＢとなりＢＣＨ／画像
多重化部３８に転送される（図１４参照）。画像復号化
部１０では、ＣＩＦのフォーマットとして画像データの
デコードするため、画像復号化部１０内のフレームメモ
リには図１２に示すような４地点の画像が蓄積され、処
理されることになる。

【０２４５】ここで、次にこのフレームメモリの４地点
の画像に対して、例えば会話の中心人物の地点の画像を
他の地点の画像より重点において表示させたい場合に、
その重点においた画像をメイン画面（あるいは親画面）
とし、それ以外をサブ画面（あるいは子画面）として表
示させる（あるいは表示しない）ことで、操作者の利便
性を向上させることができる。

【０２４６】まず、メイン画面に選ばれた地点への端末
に対しては受信の伝送能力を２ｃｈのＢｃｈ（例えば、
画像データ約１１２ｋｂｐｓ、音声データ１６ｋｂｐ
ｓ）として能力ＢＡＳを送信し、サブ画面に選ばれた地
点への端末に対しては１ｃｈのＢｃｈ（例えば、画像デ
ータ約４８ｋｂｐｓ、音声データ１６ｋｂｐｓ）として
能力ＢＡＳを送信し、選ばれなかった地点の端末に対し
ては能力ＢＡＳにおいて映像無しとするか、１ｃｈのＢ
ｃｈで音声能力を６４ｋｂｐｓ音声のみとして能力ＢＡ
Ｓを送信するか、画像制御部１７において受信されてい
る画像データを無効な画像データに置き換えるなどし
て、復号化部の処理能力をできるだけ多くメイン画面の
画像データの処理に割り当てるようにする。

【０２４７】こうして復号処理して蓄積された４地点の
画像データは画像変倍部７１（図２０参照）に転送され
る。

【０２４８】画像変倍部７１は、上述のような４地点の
画像を各々変倍する機能を有している。そのブロック図
を図２１に示す。

【０２４９】図２１において、７２は画像復号化部１０
から出力される画像データをシステム制御部１４からの
指示に従い変倍処理を行う変倍処理部、７３は変倍処理
部７２の処理用のメモリ、７４は変倍処理された画像デ
ータを格納する画像メモリである。

【０２５０】図２２に示す変倍の例は、画像データＱＣ
ＩＦ（Ａ）をメイン画面として、画像データＱＣＩＦ
（Ｂ），ＱＣＩＦ（Ｄ）をサブ画面として表示させる場
合である。

【０２５１】図２２に従いこれを説明する。変倍処理部
７２に画像データＱＣＩＦ（Ａ）が入力されると、シス
テム制御部１４からメイン画面の処理の指示が出されて
いるので、垂直方向については、処理用メモリ７３に数
ラインの画像データを蓄え、前後数ラインと重み付け加
算等のフィルタ処理を行いつつ、ライン挿入の補間を行
う。また水平方向については、ラインの画素について前
後数画素の重み付け加算等のフィルタ処理を行いつつ、
画素挿入の補間を行う。

【０２５２】こうして拡大生成された画像は、画像メモ
リ７４に転送される。

【０２５３】次に、画像データＱＣＩＦ（Ｂ）が入力さ
れると、システム制御部１４からサブ画面の処理の指示
が出されているので、垂直方向については、処理用メモ
リ７３に数ラインの画像データを蓄え、前後数ラインと
重み付け加算等のフィルタ処理を行いつつ、ライン間引
きの補正を行う。また水平方向については、ラインの画
素について前後数画素と重み付け加算等のフィルタ処理
を行いつつ、画素間引き補正を行う。

【０２５４】こうして縮小生成された画像は、画像メモ
リ７４に転送される。

【０２５５】ＱＣＩＦ（Ｃ）は、システム制御部１４よ
り表示しないとの指示が出されているので、画像データ
の入力は行われずパスされる。

【０２５６】ＱＣＩＦ（Ｄ）については、ＱＣＩＦ
（Ｂ）と同様で、縮小処理が行われて画像メモリ７４に
転送される。また、サブ画面はメイン画面上に上書きさ
れ、ウィンドウ表示のようになる。

【０２５７】こうして画像メモリ７４上に画像編集され
た画像データは、画像出力部９に転送され、表示部８に
表示される。

【０２５８】以上説明したように、上記実施例によれ
ば、多地点間において画像を同時に相互通信する際に、
従来の場合には、同時通信する端末数の数だけ持たなけ
ればならなかった画像の復号化部を１つ用意するだけで
実現することが可能となる。

【０２５９】よって、復号化部が追加される端末の数だ
け減らすことができ、かつ、送信されてくる複数画面の
合成も、例えばＧＯＢヘッダの変更を制御するだけ良い
ので、特に画面合成用の編集処理部も必要としない。

【０２６０】また、画像は送信端末でフルサイズの１／
Ｎ（Ｎは、最大通信可能な端末数）に縮小されて送られ
てくるので、画面合成するときに画像の縮小編集処理も
する必要がない。

【０２６１】さらに、復号部を複数持って画像合成する
場合には、復号化して合成した後再度符号化する為に画
像の劣化が生ずるが、上記実施例においては、復号化せ
ずに画面合成するので、画像の劣化はないという利点が
ある。

【０２６２】以上により、端末のシステム構成を機能を
落とさずに大幅に削減できるという格別な効果が得られ
る。

【０２６３】また、上実施例によれば、多地点間におい
て画像を同時に相互通信する際に、相手端末は自端末が
多地点接続していることを全く意識することなく、自端
末から送信端末に対して通常の手順により画像フォーマ
ットを制御し同時通信することが可能となる。

【０２６４】よって、標準規格に準拠した端末であれば
通信が可能であり、送信端末側は多地点間接続のための
特殊な手順を必要としない。

【０２６５】以上により、システム構成やほかの送信端
末の機能の変更によるコストアップなしに、システムに
多地点間の相互通信の機能を付加することでシステムの
コストパフォーマンスが大幅に向上するという効果があ
る。

【０２６６】さらに、伝送容量にも無駄がなくなり、通
信費のコスト削減にも効果がある。

【０２６７】さらに、複数端末からの画像データの各フ
レームの転送レートが異なる場合にも不足分を補うこと
ができるので、復号部で誤動作せずに同時受信が可能と
なり、送信端末に依存せず多地点間接続時に制約条件な
く通信可能となる。よって、端末およびシステムに対し
ては通常の構成のままで多地点間通信が安価に構築でき
るという効果がある。

【０２６８】さらに、上記実施例によれば、同時通信し
ている端末数が最大端末数Ｎに達しない場合にも、その
不足分を補うことができるので復号部で誤動作せずに同
時受信が可能となり、送信端末に依存せず多地点間接続
時に制約条件なく通信が可能となる。よって、端末およ
びシステム構成を通常のままで多地点間通信を安価に構
築できるという効果がある。

【０２６９】また、例えば画面をクリアするための画像
を用意し不足分の画面をクリアするよう構成することも
できるので、前に入力された画像が更新されずにそのま
ま表示されることもなくなる。また、定型のメッセージ
の画像を予め用意し不足画面に表示させることで、受信
されていない旨を操作者に知らせることも可能であるこ
とから、マン・マシン・インターフェースの利便性の向
上に効果がある。

【０２７０】

【０２７１】また、上記実施例によれば端末の地点の確
認だけでなく、通信相手の補助的な情報も表示させるこ
とが可能なので、通信相手に対してより理解を深めるこ
とができるなど、コミュニケーションの支援を計ること
ができるという効果がある。

【０２７２】

【０２７３】また、上記実施例によれば重要な画像のみ
画質を向上させて、それ以外は画質を通常あるいは通常
以下にして表示させることで、多地点の画像データ受信
に関して、無駄なく最適化が図れるという効果がある。

【発明の効果】以上説明したように、本発明によれば、
多地点間において画像を同時に相互通信する際に、従来
の場合には、同時通信する端末数の数だけ持たなければ
ならなかった画像の復号化部として規定サイズの１画面
フォーマットの符号化データを復号化する復号部を１つ
だけ有するだけで、また規定サイズの１画面フォーマッ
トの符号化データを復号化するという１つの復号工程で
同時に複数端末の画像を再現し、しかも同一画面上に再
現することが可能となる。また、画像は送信端末でフル
サイズの１／Ｎ（Ｎは、最大通信可能な端末数）に縮小
されて送られてくるので、画面合成するときに画像の縮
小編集処理もする必要がない。従って、装置の構成を大
規模かつ複雑化することがないので、コストの大幅な削
減が図れるという効果が得られる。

【図面の簡単な説明】

【図１】本発明の一実施例を示すブロック図である。

【図２】Ｄチャンネル通信手順を示す図である。

【図３】Ｂチャンネルのインチャネル制御を示す図であ
る。

【図４】ＣＣＩＴＴ Ｈ．２２１のフレーム構成図であ
る。

【図５】ＦＡＳのビット構成を示す図である。

【図６】ＢＡＳのビット構成を示す図である。

【図７】画像制御部の詳細構成図である。

【図８】画像制御部のユニット構成図である。

【図９】ＢＣＨ誤り訂正フレームを示す図である。

【図１０】画像データ多重化フレームを示す図である。

【図１１】ＣＩＦおよびＱＣＩＦフォーマットを示す図
である。

【図１２】ＧＮ（ＧＯＢ Ｎｕｎｂｅｒ）変換方法を示
す図である。

【図１３】画像制御部の動作を示すタイミング図であ
る。

【図１４】本発明のその他の実施例による画像制御部を
示すブロック図である。

【図１５】図１４に示した画像制御部のユニット図であ
る。

【図１６】図１５に示した各画像制御部の動作を示すタ
イミング図である。

【図１７】本発明のその他の実施例を示すブロック図で
ある。

【図１８】スーパーインポーズ部の内部構成図である。

【図１９】各画像の付帯情報を示す図である。

【図２０】本発明のその他の実施例を示すブロック図で
ある。

【図２１】画像変倍部の内部構成図である。

【図２２】画面表示と復号時の画像構成の対応を示す図
である。

【図２３】従来技術の説明図である。

【符号の説明】

１ ハンドセット ２ マイク ３ スピーカ ４ 音声インタフェース部 ５ 音声符号化復号化部 ６ カメラ ７ 書画カメラ ８ 表示部 ９ 画像入出力部 １０ 画像符号化復号化部 １１ データ端末 １２ データインタフェース部 １３ 操作部 １４ システム制御部 １５ 多重分離部 １６ 回線インタフェース部 １７ 画像制御部 ６１ スーパーインポーズ部 ７１ 画像変倍部

Claims (8)

(57)【特許請求の範囲】
1. 【請求項１】 複数の回線を介して最大Ｎ台（Ｎ：２以
   上の整数）の端末と同時通信が可能な端末装置であっ
   て、 前記回線の各々に接続され、１／Ｎ縮小画面フォーマッ
   トの符号化された画像データをそれぞれ抽出する複数の
   分離手段と、 前記１／Ｎ縮小画面を規定サイズの１画面内において最
   大Ｎ個収納し得るよう、前記符号化された画像データの
   ヘッダ部に含まれる前記符号化された画像データの画面
   上の割り当て位置を示す位置指定情報を変更する表示位
   置制御手段と、 前記複数の分離手段により抽出され、前記表示位置制御
   手段によって処理された複数の前記１／Ｎ縮小画面フォ
   ーマットの符号化された画像データを多重化して、前記
   規定サイズの１画面フォーマットの符号化データを生成
   する多重化手段と、 前記多重化手段によって処理された前記規定サイズの１
   画面フォーマットの符号化データを復号化する復号化手
   段と を具備したことを特徴とする端末装置。
2. 【請求項２】 請求項１において、前記位置指定情報を
   変更する際に、操作者の指示により指定された位置に対
   象となる１／Ｎ縮小画像を表示するよう新たな位置指定
   情報を割り当てることを特徴とする端末装置。
3. 【請求項３】 請求項１において、さらに１端末と画像
   の相互通信をする場合には、前記規定サイズの１画面フ
   ォーマットにより、または、前記１／Ｎ縮小画面フォー
   マットのどちらかにより受信可能である旨を相手端末に
   通知し、複数端末と画像の相互通信をする場合には、前
   記１／Ｎ縮小画面フォーマットでのみ受信可能である旨
   をすべての相手端末に通知する手段とを具備したことを
   特徴とする端末装置。
4. 【請求項４】 請求項１において、さらに前記１／Ｎ縮
   小画面データの転送フレームレートが各端末ごとに異な
   る場合、不足した画像データを生成する転送レート補償
   手段を具備したことを特徴とする端末装置。
5. 【請求項５】 請求項１において、Ｋ（Ｋ＜Ｎ）台の送
   信端末と同時通信を行う場合には、Ｎ台の送信端末との
   不足分となる（Ｎ−Ｋ）台ぶんの画像データを生成する
   不足データ補完手段を具備したことを特徴とする端末装
   置。
6. 【請求項６】 請求項５において、（Ｎ−Ｋ）台ぶんの
   不足している画像データについては予め蓄積してある定
   型のメッセージあるいは白画面か黒画面を発生させるこ
   とを特徴とする端末装置。
7. 【請求項７】 請求項１において、さらに 前記画像データの付帯情報を前記画像データに対応させ
   て登録する登録手段と、 復号化されたＮ地点の画像データを表示する際に、前記
   登録手段に登録された情報を基に、当該画像上あるいは
   その近傍に該情報を表示させる付加表示手段とを具備し
   たことを特徴とする端末装置。
8. 【請求項８】 複数の回線を介して最大Ｎ台（Ｎ：２以
   上の整数）の端末と同時通信が可能な端末装置の制御方
   法であって、 前記回線の各々に接続され、１／Ｎ縮小画面フォーマッ
   トの符号化された画像データをそれぞれ抽出する複数の
   分離工程と、 前記１／Ｎ縮小画面を規定サイズの１画面内において最
   大Ｎ個収納し得るよう、前記符号化された画像データの
   ヘッダ部に含まれる前記符号化された画像データの画面
   上の割り当て位置を示す位置指定情報を変更する表示位
   置制御工程と、前記複数の分離工程で抽出され、前記表示位置制御工程
   で処理された複数の前記１／Ｎ縮小画面フォーマットの
   符号化された画像データを多重化して、前記規定サイズ
   の１画面フォーマットの符号化データを生成する多重化
   工程と、 前記多重化工程で処理された前記規定サイズの１画面フ
   ォーマットの符号化データを復号化する復号化工程と を
   有することを特徴とする端末装置の制御方法。