JPH1093938A

JPH1093938A - 双方向画像通信の方法、装置、システム、及び記憶媒体

Info

Publication number: JPH1093938A
Application number: JP8243155A
Authority: JP
Inventors: Kiyoshi Oka; 潔岡
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 1996-09-13
Filing date: 1996-09-13
Publication date: 1998-04-10

Abstract

(57)【要約】【課題】処理状況に応じて不必要な画像通信処理を省
略することにより、効率的に双方向の画像通信を行う双
方向画像通信装置を提供する。【解決手段】制御手段１２０は、通信中の処理状況に
応じて、無駄な画像処理及び通信処理を省略するよう
に、装置１００の動作制御を行う。このとき、制御手段
１２０は、表示手段１１１のマルチウィンドウ環境下に
おいて、表示ウィンドウがユーザにとって可視か否かを
判別する。これにより、制御手段１２０は、上記無駄な
画像処理及び通信処理の存在を認識する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、テレビ電話やテレ
ビ会議に用いられる双方向画像通信の方法、装置、シス
テム、及びその通信処理が記憶された記憶媒体に関する
ものである。

【０００２】

【従来の技術】今日において、テレビ電話、テレビ会
議、オーディオグラフィック会議等、リアルタイムの音
声通信に何らかの画像情報を付加した、所謂アオーディ
オビジュアル（ＡＶ）サービスの体系的且つ調和のとれ
た実現化が進められている。ＡＶ通信は、ディジタル通
信網を用い、音声の他に静止画や動画等の各種の画像を
加えたマルチメディア通信であり、用途により多様な端
末の形態がありうる。これらは、ＣＰＵやネットワーク
を介して任意の組み合わせで対向しうるため、同種端末
間はもちろんのこと、異種端末間でも双方の端末に共通
の最大機能で相互接続を可能にする必要がある。

【０００３】そこで、上述のようなＡＶ通信等に用いら
れる双方向画像通信システムでは、従来、使用する端末
や通信経路がシステム専用のものであったため、端末の
通信能力や通信経路が固定であり、一旦アプリケーショ
ンが動作し始めると、その動作環境を通信中に変更する
必要が全くなかったが、近年では、標準のパーソナルコ
ンピュータ（以下、パソコンと言う）上等で双方向画像
通信を行う技術の研究が進められ、それに伴って多種多
様の画像圧縮方法や通信方法が存在するようになり、ま
た、それと同時に同様なアプリケーションが同じ環境下
で動作するようになった。

【０００４】しかしながら、上述のような環境下では、
各々のアプリケーションが必要とするＣＰＵ（Central
Processing Unit ）の処理能力や通信データ量等が実際
の能力を上回ることが発生する場合がある。

【０００５】そこで、上記双方向画像通信システムは、
例えば、図８に示すように、ウィンドウ環境Ｗ３上で最
前部に位置するアプリケーションＡＰ_Fを最も重要なア
プリケーションとしてＣＰＵ能力等を最も多く分配し、
図示していないその他のアプリケーションには残りの能
力を更に分配して使用することにより、できるだけ多く
のアプリケーションがＣＰＵやネットワークを共有でき
るような構成としている。

【０００６】また、上記双方向画像通信システムは、上
記図８中の矢印Ａ，Ｂ，Ｃに示すように、ウィンドウ環
境Ｗ３上で上述したような能力の分配方法が選択される
ことにより、最前部に位置するアプリケーションを優先
（矢印Ａ）することもでき、或いは全アプリケーション
を均等に扱う（矢印Ｃ）こともできるようになされてい
る。

【０００７】

【発明が解決しようとする課題】ところで、パソコン等
により双方向画像通信を行う場合、専用端末で双方向画
像通信を行う場合とは異なり、上記パソコン等の表示画
面上において、上記図８に示したような双方向画像通信
に用いるウィンドウの表示位置が固定されていない。す
なわち、ユーザは、他のウィンドウと同様に、双方向画
像通信に用いるウィンドウを表示画面中のあらゆる場所
に配置することができる。このため、例えば、双方向画
像通信に用いるウィンドウが他のウィンドウにより完全
に覆われてしまい、ユーザからは全く見えない位置に存
在することも考えられる。あるいは、双方向画像通信の
アプリケーションがアイコン化されている場合も考えら
れる。

【０００８】しかしながら、従来の双方向画像通信シス
テムでは、ユーザからは全く見えない位置に双方向画像
通信に用いるウィンドウが存在した場合や、双方向画像
通信に用いるウィンドウがアイコン化されていた場合に
も、画像通信に必要な処理（画像通信処理）が継続的に
行われていた。このため、無駄な画像通信処理が行われ
ることとなり、スムーズな双方向画像通信を行うことが
できなかった。また、双方向画像通信に必要なＣＰＵ能
力や通信データ量を節約することができなかった。

【０００９】そこで、本発明は、上記の欠点を除去する
ために成されたもので、処理状況に応じて不必要な画像
通信処理を省略することにより、効率的に双方向の画像
通信を行うことができる双方向画像通信方法を提供する
ことを目的とする。また、本発明は、処理状況に応じて
不必要な画像通信処理を省略することにより、効率的に
双方向の画像通信を行う双方向画像通信装置を提供する
ことを目的とする。また、本発明は、処理状況に応じて
不必要な画像通信処理を省略することにより、効率的に
双方向の画像通信を行う双方向画像通信システムを提供
することを目的とする。また、本発明は、処理状況に応
じて不必要な画像通信処理を省略することにより、効率
的に双方向の画像通信を行うことができる双方向画像通
信処理を記憶した記憶媒体を提供することを目的とす
る。

【００１０】

【課題を解決するための手段】本発明に係る双方向画像
通信方法は、双方向の画像通信を行う双方向画像通信方
法であって、処理状況に応じて不必要な画像通信処理を
省略する制御処理を行うことを特徴とする。また、上記
制御処理は、処理状況を判別する判別処理を行い、その
判別処理の結果に応じて不必要な画像通信処理を省略す
る処理であることを特徴とする。また、上記制御処理
は、処理状況を判別する判別処理を行い、その判別処理
の結果を示す情報を相手側に送信し、受信時には、受信
された相手側における判別処理の結果を示す情報に応じ
て不必要な画像通信処理を省略する処理であることを特
徴とする。また、上記判別処理は、マルチウィンドウ環
境下において、画像通信の表示ウィンドウがユーザから
可視か否かを判別する処理であることを特徴とする。ま
た、上記判別処理は、上記表示ウィンドウがアイコン化
されているか否かを判別することにより、上記表示ウィ
ンドウがユーザから可視か否かを判別する処理であるこ
とを特徴とする。また、上記判別処理は、上記表示ウィ
ンドウと共存する他のウィンドウにより上記表示ウィン
ドウが完全に覆われているか否かを判別することによ
り、上記表示ウィンドウがユーザから可視か否かを判別
する処理であることを特徴とする。本発明に係る双方向
画像通信方法は、受信された画像データに複数の処理ス
テップからなる画像受信処理を行うと共に、複数の処理
ステップからなる画像送信処理により画像データを送信
する双方向画像通信方法であって、相手側からの画像デ
ータを受信した際には、処理状況を判別する判別処理を
行い、その判別処理の結果に応じた処理ステップを上記
画像受信処理から省略することを特徴とする。また、上
記判別処理は、マルチウィンドウ環境下において、画像
通信の表示ウィンドウがユーザから可視か否かを判別す
る処理であることを特徴とする。また、上記判別処理
は、上記表示ウィンドウがアイコン化されているか否か
を判別することにより、上記表示ウィンドウがユーザか
ら可視か否かを判別する処理であることを特徴とする。
また、上記判別処理は、上記表示ウィンドウと共存する
他のウィンドウにより上記表示ウィンドウが完全に覆わ
れているか否かを判別することにより、上記表示ウィン
ドウがユーザから可視か否かを判別する処理であること
を特徴とする。本発明に係る双方向画像通信方法は、受
信された画像データに複数の処理ステップからなる画像
受信処理を行うと共に、複数の処理ステップからなる画
像送信処理により画像データを送信する双方向画像通信
方法であって、処理状況を判別する判別処理を行い、そ
の判別処理の結果の情報を送信し、相手側からのデータ
を受信した際には、その受信データに含まれる相手側に
おける判別処理の結果に応じた処理ステップを上記画像
送信処理から省略することを特徴とする。また、上記判
別処理は、マルチウィンドウ環境下において、画像通信
の表示ウィンドウがユーザから可視か否かを判別する処
理であることを特徴とする。また、上記判別処理は、上
記表示ウィンドウがアイコン化されているか否かを判別
することにより、上記表示ウィンドウがユーザから可視
か否かを判別する処理であることを特徴とする。また、
上記判別処理は、上記表示ウィンドウと共存する他のウ
ィンドウにより上記表示ウィンドウが完全に覆われてい
るか否かを判別することにより、上記表示ウィンドウが
ユーザから可視か否かを判別する処理であることを特徴
とする。本発明に係る双方向画像通信装置は、双方向の
画像通信を行う双方向画像通信装置であって、処理状況
に応じて不必要な画像通信処理を省略する制御手段を備
えることを特徴とする。また、上記制御手段は、処理状
況を判別する判別手段を含み、その判別手段の結果に応
じて不必要な画像通信処理を省略することを特徴とす
る。また、上記制御手段は、処理状況を判別する判別手
段を含み、その判別手段の結果を示す情報を相手側に送
信し、受信時には、受信された相手側における判別手段
の結果を示す情報に応じて不必要な画像通信処理を省略
することを特徴とする。また、マルイチウィンドウ環境
を有する表示手段を備え、上記判別手段は、上記表示手
段のマルチウィンドウ環境下において、画像通信の表示
ウィンドウがユーザから可視か否かを判別することを特
徴とする。また、上記判別手段は、上記表示ウィンドウ
がアイコン化されているか否かを判別することにより、
上記表示ウィンドウがユーザから可視か否かを判別する
ことを特徴とする。また、上記判別手段は、上記表示ウ
ィンドウと共存する他のウィンドウにより上記表示ウィ
ンドウが完全に覆われているか否かを判別することによ
り、上記表示ウィンドウがユーザから可視か否かを判別
することを特徴とする。本発明に係る双方向画像通信装
置は、受信された画像データに複数の処理ステップから
なる画像受信処理を行う画像受信処理手段と、複数の処
理ステップからなる画像送信処理により画像データを送
信する画像送信処理手段とを備える双方向画像通信装置
であって、上記画像受信処理手段により相手側からの画
像データが受信された際に、処理状況を判別する判別手
段と、上記判別手段の結果に応じた処理ステップを上記
画像受信処理から省略して動作するように上記画像受信
処理手段を制御する制御手段とを備えることを特徴とす
る。また、マルイチウィンドウ環境を有する表示手段を
備え、上記判別手段は、上記表示手段のマルチウィンド
ウ環境下において、画像通信の表示ウィンドウがユーザ
から可視か否かを判別することを特徴とする。また、上
記判別手段は、上記表示ウィンドウがアイコン化されて
いるか否かを判別することにより、上記表示ウィンドウ
がユーザから可視か否かを判別することを特徴とする。
また、上記判別手段は、上記表示ウィンドウと共存する
他のウィンドウにより上記表示ウィンドウが完全に覆わ
れているか否かを判別することにより、上記表示ウィン
ドウがユーザから可視か否かを判別することを特徴とす
る。本発明に係る双方向画像通信装置は、受信された画
像データに複数の処理ステップからなる画像受信処理を
行う画像受信処理手段と、複数の処理ステップからなる
画像送信処理により画像データを送信する画像送信処理
手段とを備える双方向画像通信装置であって、処理状況
を判別する判別手段と、上記判別手段の結果の情報を送
信し、上記画像受信処理手段により相手側からのデータ
が受信された際には、その受信データに含まれる相手側
における判別手段の結果に応じた処理ステップを上記画
像送信処理から省略して動作するように上記画像送信処
理手段を制御する制御手段とを備えることを特徴とす
る。また、マルイチウィンドウ環境を有する表示手段を
備え、上記判別手段は、上記表示手段のマルチウィンド
ウ環境下において、画像通信の表示ウィンドウがユーザ
から可視か否かを判別することを特徴とする。また、上
記判別手段は、上記表示ウィンドウがアイコン化されて
いるか否かを判別することにより、上記表示ウィンドウ
がユーザから可視か否かを判別することを特徴とする。
また、上記判別手段は、上記表示ウィンドウと共存する
他のウィンドウにより上記表示ウィンドウが完全に覆わ
れているか否かを判別することにより、上記表示ウィン
ドウがユーザから可視か否かを判別することを特徴とす
る。本発明に係る双方向画像通信システムは、双方向の
画像通信を行う双方向画像通信手段を含む双方向画像通
信システムであって、上記双方向画像通信手段は、処理
状況に応じて不必要な画像通信処理を省略する制御手段
を備えることを特徴とする。また、上記制御手段は、処
理状況を判別する判別手段を含み、その判別手段の結果
に応じて不必要な画像通信処理を省略することを特徴と
する。また、上記制御手段は、処理状況を判別する判別
手段を含み、その判別手段の結果を示す情報を相手側の
双方向画像通信手段に送信し、受信時には、受信された
相手側の判別手段の結果を示す情報に応じて不必要な画
像通信処理を省略することを特徴とする。また、上記双
方向画像通信手段は、マルイチウィンドウ環境を有する
表示手段を備え、上記判別手段は、上記表示手段のマル
チウィンドウ環境下において、画像通信の表示ウィンド
ウがユーザから可視か否かを判別することを特徴とす
る。また、上記判別手段は、上記表示ウィンドウがアイ
コン化されているか否かを判別することにより、上記表
示ウィンドウがユーザから可視か否かを判別することを
特徴とする。また、上記判別手段は、上記表示ウィンド
ウと共存する他のウィンドウにより上記表示ウィンドウ
が完全に覆われているか否かを判別することにより、上
記表示ウィンドウがユーザから可視か否かを判別するこ
とを特徴とする。本発明に係る双方向画像通信システム
は、双方向の画像通信を行う双方向画像通信手段を含
み、上記双方向画像通信手段は、受信された画像データ
に複数の処理ステップからなる画像受信処理を行う画像
受信処理手段と、複数の処理ステップからなる画像送信
処理により画像データを送信する画像送信処理手段とを
備える双方向画像通信システムであって、上記双方向画
像通信手段は、相手側からの画像データを受信した際
に、処理状況を判別する判別手段と、上記判別手段の結
果に応じた処理ステップを上記画像受信処理から省略し
て動作するように上記画像受信処理手段を制御する制御
手段とを備えることを特徴とする。また、上記双方向画
像通信手段は、マルイチウィンドウ環境を有する表示手
段を備え、上記判別手段は、上記表示手段のマルチウィ
ンドウ環境下において、画像通信の表示ウィンドウがユ
ーザから可視か否かを判別することを特徴とする。ま
た、上記判別手段は、上記表示ウィンドウがアイコン化
されているか否かを判別することにより、上記表示ウィ
ンドウがユーザから可視か否かを判別することを特徴と
する。また、上記判別手段は、上記表示ウィンドウと共
存する他のウィンドウにより上記表示ウィンドウが完全
に覆われているか否かを判別することにより、上記表示
ウィンドウがユーザから可視か否かを判別することを特
徴とする。本発明に係る双方向画像通信システムは、双
方向の画像通信を行う双方向画像通信手段を含み、上記
双方向画像通信手段は、受信された画像データに複数の
処理ステップからなる画像受信処理を行う画像受信処理
手段と、複数の処理ステップからなる画像送信処理によ
り画像データを送信する画像送信処理手段とを備える双
方向画像通信システムであって、上記双方向画像通信手
段は、処理状況を判別する判別手段と、上記判別手段の
結果の情報を相手側の双方向画像通信手段に送信し、上
記画像受信処理手段により相手側からのデータが受信さ
れた際には、その受信データに含まれる相手側の双方向
画像通信手段の判別手段の結果に応じた処理ステップを
上記画像送信処理から省略して動作するように上記画像
送信処理手段を制御する制御手段とを備えることを特徴
とする。また、上記双方向画像通信手段は、マルイチウ
ィンドウ環境を有する表示手段を備え、上記判別手段
は、上記表示手段のマルチウィンドウ環境下において、
画像通信の表示ウィンドウがユーザから可視か否かを判
別することを特徴とする。また、上記判別手段は、上記
表示ウィンドウがアイコン化されているか否かを判別す
ることにより、上記表示ウィンドウがユーザから可視か
否かを判別することを特徴とする。また、上記判別手段
は、上記表示ウィンドウと共存する他のウィンドウによ
り上記表示ウィンドウが完全に覆われているか否かを判
別することにより、上記表示ウィンドウがユーザから可
視か否かを判別することを特徴とする。本発明に係る記
憶媒体は、双方向の画像通信を行う双方向画像通信の処
理ステップをコンピュータにより読出可能に記憶した記
憶媒体であって、処理状況に応じて不必要な画像通信処
理を省略する制御処理ステップを記憶したことを特徴と
する。また、上記制御処理ステップは、処理状況を判別
する判別処理ステップを含み、その判別処理ステップの
結果に応じて不必要な画像通信処理を省略する処理ステ
ップであることを特徴とする。また、上記制御処理ステ
ップは、処理状況を判別する判別処理ステップを含み、
その判別処理ステップの結果を示す情報を相手側に送信
し、受信時には、受信された相手側における判別処理ス
テップの結果を示す情報に応じて不必要な画像通信処理
を省略する処理ステップであることを特徴とする。ま
た、上記判別処理ステップは、マルチウィンドウ環境下
において、画像通信の表示ウィンドウがユーザから可視
か否かを判別する処理ステップを含むことを特徴とす
る。また、上記判別処理ステップは、上記表示ウィンド
ウがアイコン化されているか否かを判別することによ
り、上記表示ウィンドウがユーザから可視か否かを判別
する処理ステップを含むことを特徴とする。また、上記
判別処理ステップは、上記表示ウィンドウと共存する他
のウィンドウにより上記表示ウィンドウが完全に覆われ
ているか否かを判別することにより、上記表示ウィンド
ウがユーザから可視か否かを判別する処理ステップを含
むことを特徴とする。本発明に係る記憶媒体は、受信さ
れた画像データに複数の処理ステップからなる画像受信
処理を行うと共に、複数の処理ステップからなる画像送
信処理により画像データを送信する双方向画像通信の処
理ステップをコンピュータにより読出可能に記憶した記
憶媒体であって、相手側からの画像データを受信した際
に、処理状況を判別する判別処理ステップと、上記判別
処理ステップの結果に応じた処理ステップを上記画像受
信処理から省略する制御処理ステップとを記憶したこと
を特徴とする。また、上記判別処理ステップは、マルチ
ウィンドウ環境下において、画像通信の表示ウィンドウ
がユーザから可視か否かを判別する処理ステップを含む
ことを特徴とする。また、上記判別処理ステップは、上
記表示ウィンドウがアイコン化されているか否かを判別
することにより、上記表示ウィンドウがユーザから可視
か否かを判別する処理ステップを含むことを特徴とす
る。また、上記判別処理ステップは、上記表示ウィンド
ウと共存する他のウィンドウにより上記表示ウィンドウ
が完全に覆われているか否かを判別することにより、上
記表示ウィンドウがユーザから可視か否かを判別する処
理ステップを含むことを特徴とする。本発明に係る記憶
媒体は、受信された画像データに複数の処理ステップか
らなる画像受信処理を行うと共に、複数の処理ステップ
からなる画像送信処理により画像データを送信する双方
向画像通信の処理ステップをコンピュータにより読出可
能に記憶した記憶媒体であって、処理状況を判別する判
別処理ステップと、上記判別処理ステップの結果の情報
を送信し、相手側からのデータを受信した際には、その
受信データに含まれる相手側における判別処理ステップ
の結果に応じた処理ステップを上記画像送信処理から省
略する制御処理ステップとを記憶したことを特徴とす
る。また、上記判別処理ステップは、マルチウィンドウ
環境下において、画像通信の表示ウィンドウがユーザか
ら可視か否かを判別する処理ステップを含むことを特徴
とする。また、上記判別処理ステップは、上記表示ウィ
ンドウがアイコン化されているか否かを判別することに
より、上記表示ウィンドウがユーザから可視か否かを判
別する処理ステップを含むことを特徴とする。また、上
記判別処理ステップは、上記表示ウィンドウと共存する
他のウィンドウにより上記表示ウィンドウが完全に覆わ
れているか否かを判別することにより、上記表示ウィン
ドウがユーザから可視か否かを判別する処理ステップを
含むことを特徴とする。

【００１１】

【作用】第１の本発明によれば、通信中の処理状況に応
じて、無駄な画像処理及び通信処理を省略する。第２の
発明によれば、通信中に無駄な画像処理及び通信処理が
あるか否かを常に調査し、無駄な処理であると判別した
場合には、その無駄な処理を省略する。第３の発明によ
れば、相手側に上記無駄な処理の存在を知らせる。一
方、受信時には、受信された情報、すなわち相手側で同
様にして判別して得られた上記無駄な処理があるか否か
を示す情報に応じて、無駄な画像処理及び通信処理を省
略する。第４の発明によれば、相手側からの画像データ
を受信した際には、無駄な画像処理及び通信処理が存在
するか否かを判別し、その判別結果により、無駄な処理
が存在すると判別した場合には、その無駄な処理に対応
した処理ステップを画像受信処理から省略する。第５の
発明によれば、無駄な画像処理及び通信処理があるか否
かを判別し、その判別結果を相手側に送信する。これに
より、上記判別結果が互いに送信されることとなり、相
手側において無駄な処理が存在するか否かを認識するこ
とができる。一方、相手側からのデータを受信した際に
は、その受信データに含まれる上記判別結果の情報によ
り、相手側に無駄な処理が存在した場合、その無駄な処
理に対応する処理ステップを画像送信処理から省略す
る。第６の発明によれば、マルチウィンドウ環境下にお
いて、表示ウィンドウがユーザにとって可視か否かを判
別することにより、上記無駄な処理の存在を認識する。
第７の発明によれば、上記表示ウィンドウがアイコン化
されているか否かを判別して、上記表示ウィンドウがユ
ーザから可視か否かを判別することにより、上記無駄な
処理の存在を認識する。第８の発明によれば、上記表示
ウィンドウと共存する他のウィンドウにより上記表示ウ
ィンドウが完全に覆われているか否かを判別して、上記
表示ウィンドウがユーザから可視か否かを判別すること
により、上記無駄な処理の存在を認識する。第９の本発
明によれば、制御手段は、通信中の処理状況に応じて、
無駄な画像処理及び通信処理を省略するように、装置の
動作制御を行う。第１０の発明によれば、上記制御手段
は、判別手段により、通信中に無駄な画像処理及び通信
処理があるか否かを常に調査し、無駄な処理であると判
別した場合には、その無駄な処理を省略するように、装
置の動作制御を行う。第１１の発明によれば、上記制御
手段は、上記判別手段の結果を示す情報を相手側に送信
するように、装置の動作制御を行うことにより、相手側
に上記無駄な処理の存在を知らせる。また、上記制御手
段は、受信時には、受信された情報、すなわち相手側の
判別手段で同様にして判別して得られた上記無駄な処理
があるか否かを示す情報に応じて、無駄な画像処理及び
通信処理を省略するように、装置の動作制御を行う。第
１２の発明によれば、画像受信処理手段により相手側か
らの画像データが受信された際に、判別手段は、無駄な
画像処理及び通信処理が存在するか否かを判別する。制
御手段は、上記判別手段の結果により、無駄な処理が存
在すると判別した場合には、その無駄な処理に対応した
処理ステップを画像受信処理から省略して動作するよう
に、上記画像受信処理手段を制御する。第１３の発明に
よれば、判別手段は、無駄な画像処理及び通信処理があ
るか否かを判別する。制御手段は、上記判別手段の結果
を示す情報を相手側に送信するように、画像送信処理手
段を制御する。これにより、上記判別手段の結果が互い
に送信されることとなり、相手側において無駄な処理が
存在するか否かを認識することができる。また、上記制
御手段は、上記画像受信処理手段で相手側からのデータ
が受信された際に、その受信データに含まれる上記判別
手段の結果の情報により、相手側に無駄な処理が存在し
た場合、その無駄な処理に対応する処理ステップを画像
送信処理から省略して動作するように、上記画像送信処
理手段を制御する。第１４の発明によれば、上記判別手
段は、表示手段のマルチウィンドウ環境下において、表
示ウィンドウがユーザにとって可視か否かを判別する。
これにより、上記制御手段は、上記無駄な処理の存在を
認識する。第１５の発明によれば、上記判別手段は、上
記表示ウィンドウがアイコン化されているか否かを判別
して、上記表示ウィンドウがユーザから可視か否かを判
別する。これにより、上記制御手段は、上記無駄な処理
の存在を認識する。第１６の発明によれば、上記判別手
段は、上記表示ウィンドウと共存する他のウィンドウに
より上記表示ウィンドウが完全に覆われているか否かを
判別して、上記表示ウィンドウがユーザから可視か否か
を判別する。これにより、上記制御手段は、上記無駄な
処理の存在を認識する。第１７の本発明によれば、双方
向画像通信手段において、制御手段は、通信中の処理状
況に応じて、無駄な画像処理及び通信処理を省略するよ
うに、上記双方向画像通信手段の動作制御を行う。第１
８の発明によれば、上記制御手段は、判別手段により、
通信中に無駄な画像処理及び通信処理があるか否かを常
に調査し、無駄な処理であると判別した場合には、その
無駄な処理を省略するように、上記双方向画像通信手段
の動作制御を行う。第１９の発明によれば、上記制御手
段は、上記判別手段の結果を示す情報を相手側に送信す
るように、上記双方向画像通信手段の動作制御を行うこ
とにより、相手側の双方向画像通信手段に上記無駄な処
理の存在を知らせる。また、上記制御手段は、受信時に
は、受信された情報、すなわち相手側の双方向画像通信
手段の判別手段で同様にして判別して得られた上記無駄
な処理があるか否かを示す情報に応じて、無駄な画像処
理及び通信処理を省略するような動作制御を行う。第２
０の発明によれば、双方向画像通信手段において、画像
受信処理手段により相手側からの画像データが受信され
た際に、判別手段は、無駄な画像処理及び通信処理が存
在するか否かを判別する。制御手段は、上記判別手段の
結果により、無駄な処理が存在すると判別した場合に
は、その無駄な処理に対応した処理ステップを画像受信
処理から省略して動作するように、上記画像受信処理手
段を制御する。第２１の発明によれば、双方向画像通信
手段において、判別手段は、無駄な画像処理及び通信処
理があるか否かを判別する。制御手段は、上記判別手段
の結果を示す情報を相手側の双方向画像通信手段に送信
するように、画像送信処理手段を制御する。これによ
り、双方向画像通信手段間で上記判別手段の結果を示す
情報が互いに送信されることとんり、相手側の双方向画
像通信手段において無駄な処理が存在するか否かを認識
することができる。また、上記制御手段は、上記画像受
信処理手段で相手側からのデータが受信された際に、そ
の受信データに含まれる上記判別手段の結果を示す情報
により、相手側の双方向画像通信手段に無駄な処理が存
在した場合、その無駄な処理に対応する処理ステップを
画像送信処理から省略して動作するように上記画像送信
処理手段を制御する。第２２の発明によれば、上記判別
手段は、表示手段のマルチウィンドウ環境下において、
表示ウィンドウがユーザにとって可視か否かを判別す
る。これにより、上記制御手段は、上記無駄な処理の存
在を認識する。第２３の発明によれば、上記判別手段
は、上記表示ウィンドウがアイコン化されているか否か
を判別して、上記表示ウィンドウがユーザから可視か否
かを判別する。これにより、上記制御手段は、上記無駄
な処理の存在を認識する。第２４の発明によれば、上記
判別手段は、上記表示ウィンドウと共存する他のウィン
ドウにより上記表示ウィンドウが完全に覆われているか
否かを判別して、上記表示ウィンドウがユーザから可視
か否かを判別する。これにより、上記制御手段は、上記
無駄な処理の存在を認識する。第２５の発明によれば、
コンピュータは、記憶媒体に記憶された処理ステップを
読み出し、読み出した処理ステップに従った動作制御を
行う。これにより、通信中の処理状況に応じて、無駄な
画像処理及び通信処理が省略される。第２６の発明によ
れば、上記コンピュータの動作制御により、通信中に無
駄な画像処理及び通信処理があるか否かが常に調査さ
れ、無駄な処理であると判別された場合には、その無駄
な処理が省略される。第２７の発明によれば、上記コン
ピュータの動作制御により、相手側に上記無駄な処理の
存在が知らせられる。一方、受信時には、受信された情
報、すなわち相手側で同様にして判別して得られた上記
無駄な処理があるか否かを示す情報に応じて、無駄な画
像処理及び通信処理が省略される。第２８の発明によれ
ば、コンピュータは、記憶媒体に記憶された処理ステッ
プを読み出し、読み出した処理ステップに従った動作制
御を行う。これにより、相手側からの画像データが受信
された際には、無駄な画像処理及び通信処理が存在する
か否かが判別され、その判別結果により、無駄な処理が
存在すると判別された場合には、その無駄な処理に対応
した処理ステップが画像受信処理から省略される。第２
９の発明によれば、コンピュータは、記憶媒体に記憶さ
れた処理ステップを読み出し、読み出した処理ステップ
に従った動作制御を行う。これにより、無駄な画像処理
及び通信処理があるか否かが判別され、その判別結果が
相手側に送信される。したがって、上記判別結果が互い
に送信されることとなり、相手側における無駄な処理が
存在するか否かを認識することができる。一方、相手側
からのデータが受信された際には、その受信データに含
まれる上記判別結果の情報により、相手側に無駄な処理
が存在した場合、その無駄な処理に対応する処理ステッ
プが画像送信処理から省略される。第３０の発明によれ
ば、上記コンピュータの動作制御により、マルチウィン
ドウ環境下において、表示ウィンドウがユーザにとって
可視か否かが判別される。これにより、上記無駄な処理
の存在が認識される。第３１の発明によれば、上記コン
ピュータの動作制御により、上記表示ウィンドウがアイ
コン化されているか否かが判別されることにより、上記
表示ウィンドウがユーザから可視か否かが判別される。
これにより、上記無駄な処理の存在が認識される。第３
２の発明によれば、上記コンピュータの動作制御によ
り、上記表示ウィンドウと共存する他のウィンドウによ
り上記表示ウィンドウが完全に覆われているか否かが判
別されることにより、上記表示ウィンドウがユーザから
可視か否かが判別される。これにより、上記無駄な処理
の存在が認識される。

【００１２】

【発明の実施の形態】以下、本発明の実施の形態につい
て図面を用いて説明する。

【００１３】まず、本発明の第１の実施の形態について
説明する。

【００１４】本発明に係る双方向画像通信方法は、例え
ば、図１に示すような双方向画像通信装置１００に適用
される。

【００１５】この双方向画像通信装置１００は、例え
ば、通常のウィンドウシステムを用いたオペレーティン
グシステムに搭載されており、上記図１に示すように、
画像復号化処理部１１０と、画像符号化処理部１４０
と、画像復号化処理部１１０及び画像符号化処理部１４
０に各々接続された符号化処理制御回路１２０と、これ
と同様にして画像復号化処理部１１０及び画像符号化処
理部１４０に各々接続されたネットワーク制御回路１３
０とを備えている。画像復号化処理部１１０は、ネット
ワーク制御回路１３０の出力が供給される受信回路１１
３と、受信回路１１３の出力が供給される復号化回路１
１２と、復号化回路１１２の出力が供給される表示器１
１１とを備えており、受信回路１１３及び復号化回路１
１２は、符号化処理制御回路１２０により各々制御され
るようになされている。画像符号化処理部１４０は、入
力回路１４１と、入力回路１４１の出力が供給される符
号化回路１４２と、符号化回路１４２の出力が供給され
る送信回路１４３とを備えており、送信回路１４３及び
符号化回路１４２は、符号化処理制御回路１２０により
各々制御され、送信回路１４３の出力がネットワーク制
御回路１３０に供給されるようになされている。

【００１６】上述のような双方向画像通信装置１００
は、複数の処理を同時に行うマルチタスク処理を採用し
ており、画像復号化処理部１１０での復号化処理と、画
像符号化処理部１４０での符号化処理とは、同時に行わ
れるようになされている。

【００１７】まず、双方向画像通信装置１００の一連の
動作について説明する。

【００１８】入力回路１４１は、相手側に送信すべき画
像を入力する。符号化回路１４２は、入力回路１４１で
入力された画像を相手側に送信するために、所定の符号
化処理を行うことにより圧縮する。送信回路１４３は、
符号化回路１４２で圧縮して得られた画像データを相手
側が解釈できる所定のデータフォーマットに変換する。
このとき、符号化処理制御回路１２０は、装置が動作し
ている環境上での双方向画像通信の重要度を見極め、適
切な画像処理が行われるように、符号化回路１４２及び
送信回路１４３を制御する。ネットワーク制御回路１３
０は、送信回路１４３で所定のデータフォーマットに変
換された画像データを相手側に送信する。

【００１９】また、ネットワーク制御回路１３０は、相
手側のから送られてくる画像データを受信する。受信回
路１１３は、ネットワーク制御回路１３０で受信された
画像データを後段の復号化回路１１２で伸張できるよう
に、データ変換処理を行う。復号化回路１１２は、受信
回路１１３でデータ変換された画像データを、所定の復
号化処理を行うことにより伸張する。このときも、符号
化処理制御回路１２０は、装置が動作している環境上で
の双方向画像通信の重要度を見極め、適切な画像処理が
行われるように、復号化回路１１２及び受信回路１１３
を制御する。表示器１１１は、復号化回路１１２で伸張
された画像データに基づいた画像を画面表示する。

【００２０】つぎに、符号化処理制御回路１２０につい
て具体的に説明する。

【００２１】この符号化処理制御回路１２０は、上述し
たように、装置が動作している環境上での双方向画像通
信の重要度を見極め、適切な画像処理が行われるよう
に、画像復号化処理部１１０及び画像符号化処理部１４
０の各動作を制御するものである。

【００２２】尚、ここでは、説明の簡単のために、画像
復号化処理部１１０の動作制御処理についてのみ以下説
明する。

【００２３】すなわち、符号化処理制御回路１２０は、
図２に示すフローチャートに従った動作が行われるよう
に画像復号化処理部１１０を制御するものである。

【００２４】その動作を上記図２を用いて説明すると、
先ず、ネットワーク制御回路１３０で一画面分の画像デ
ータが受信される。そして、符号化処理制御回路１２０
の制御により、受信回路１１３は、受信された一画面分
の画像データに付加されているヘッダ等を除去し、後段
の復号化回路１１２で実際に復号されるべき画像データ
のみを摘出する（ステップＳ２１）。

【００２５】次に、符号化処理制御回路１２０は、この
装置において双方向画像通信の表示用ウィンドウがアイ
コン化されているか否かを判断する（ステップＳ２
２）。

【００２６】ここで、この双方向画像通信装置１００
は、上述したように、通常のウィンドウシステムを用い
たオペレーティングシステムに搭載されており、上記オ
ペレーティングシステムでは、特定のウィンドウがアイ
コン化されているか否かを判断するためのＡＰＩが用意
されている。例えば、「ＭｉｃｒｏｓｏｆｔＷｉｎｄｏ
ｕｗｓ」では、”isiconic()”のようなファンクション
が用意されている。

【００２７】したがって、ステップＳ２２では、上述の
ようなＡＰＩにより、双方向画像通信の表示用ウィンド
ウがアイコン化されているか否かが判断される。

【００２８】その判断の結果、双方向画像通信の表示用
ウィンドウがアイコン化されていた場合、符号化処理制
御回路１２０は、ステップＳ２２以降のステップの処理
を省略し、ステップＳ２１に戻って次の画面の画像デー
タへの処理が行われるように、受信回路１１３を制御す
る。

【００２９】これにより、双方向画像通信装置１００で
は、双方向画像通信の表示用ウィンドウがアイコン化さ
れている状態中は、相手側からの画像データは受信する
が、ステップＳ２２以降の後述する復号化処理及び表示
処理の処理ステップが一切実行されないこととなる。

【００３０】一方、双方向画像通信の表示用ウィンドウ
がアイコン化されていない場合、符号化処理制御回路１
２０は、上記表示用ウィンドウがユーザにとって可視か
否かを判断する（ステップＳ２３）。

【００３１】この判断処理は、表示器１１１の表示画面
上に存在する他のウィンドウにより、双方向画像通信の
表示用ウィンドウが完全に覆われてしまい、ユーザから
見えなくなった状態であるか否かを判断することにより
行われる。

【００３２】例えば、図３に示すように、表示器１１１
の表示画面上（マルチウィンドウ環境上Ｗ３）におい
て、２つのアプリケーションのウィンドウｗとウィンド
ウｗ’が存在した場合、ウィンドウｗの座標（ｘ，ｙ）
＝（ａ’，ｂ’），（ｃ’，ｄ’）と、ウィンドウｗ’
の座標（ｘ，ｙ）＝（ａ，ｂ），（ｃ，ｄ）を持って、（ａ＞＝ａ’）＆＆（ｂ＞＝ｂ’）＆＆（ｃ＜＝ｃ’）＆＆（ｄ＜＝ｄ’）・・・条件式（１）なる条件を満たしたとき、ウィンドウｗがウィンドウ
ｗ’を完全に覆っている状態であると判断する。

【００３３】尚、（ａ’，ｂ’）は、ウィンドウｗの四
隅のうちの一点の座標を示し、（ｃ’，ｄ’）は、
（ａ’，ｂ’）に対向する位置に存在する上記四隅のう
ちの一点とする。また、（ａ，ｂ），（ｃ，ｄ）は、ウ
ィンドウｗ’の四隅の各点のうち、（ａ’，ｂ’），
（ｃ’，ｄ’）に対応した各点とする。

【００３４】そこで、例えば、図４に示すように、双方
向画像通信の表示用ウィンドウｒの座標（ａ，ｂ），
（ｃ，ｄ）が（４０，２０），（８０，４０）であり、
他のウィンドウｗの座標（ａ’，ｂ’），（ｃ’，
ｄ’）が（１０，３０），（６０，６０）であった場
合、上記条件式（１）に各座標値をあてはめてみると、ｂ＜ｂ’，ｃ＞ｃ’ となり、上記条件式（１）を満たさない。したがって、
この場合、双方向画像通信の表示用ウィンドウｒは、他
のウィンドウｗにより覆われていない状態である、と判
断される。

【００３５】一方、他のウィンドウｑの座標（ａ”，
ｂ”），（ｃ”，ｄ”）が（３０，１０），（９０，４
５）であった場合、上記条件式（１）を満たすこととな
り、したがって、双方向画像通信の表示用ウィンドウｒ
は、他のウィンドウｑにより完全に覆われた状態であ
る、と判断される。

【００３６】上述のようにして、符号化処理制御回路１
２０は、双方向画像通信の表示用ウィンドウよりも上位
に位置しているウィンドウ全てに対して、上記条件式
（１）を満たすか否かの判断処理を行う。これにより、
双方向画像通信の表示用ウィンドウが、他の１つのウィ
ンドウにより、又は他の複数のウィンドウにより、完全
に覆われた状態であるか否かが判断される。

【００３７】この判断処理の結果、双方向画像通信の表
示用ウィンドウがユーザから見えていない状態であった
場合、符号化処理制御回路１２０は、ステップＳ２３以
降のステップの処理を省略し、ステップＳ２１に戻って
次の画面の画像データへの処理が行われるように、受信
回路１１３を制御する。

【００３８】一方、双方向画像通信の表示用ウィンドウ
がユーザから完全に見えている状態であった場合、符号
化処理制御回路１２０は、受信回路１１３で得られた画
像データを復号するように復号化回路１１２を制御する
（ステップＳ２４）。

【００３９】そして、ステップＳ２４の処理により、復
号化回路１１２で復号された画像データは、表示器１１
１に供給され、双方向画像通信の表示用ウィンドウを用
いて画面表示される（ステップＳ２５）。

【００４０】上述のように、第１の実施の形態における
双方向画像通信装置１００は、双方向画像通信の表示用
ウィンドウがユーザから完全に見えていない時には、復
号化処理及び表示処理を行わないことにより、無駄な処
理を省くようになされているため、その分のＣＰＵ能力
を他のアプリケーションに分配することができる。すな
わち、双方向画像通信のアプリケーションが他のアプリ
ケーションと共存して動作していた場合に、アプリケー
ションの必要性に応じて処理を変更することにより、常
に適切な動作環境を得ることができる。したがって、双
方向画像通信装置１００は、効率的に双方向の画像通信
を行うことができ、装置の性能も向上させることができ
る。

【００４１】つぎに、本発明の第２の実施の形態につい
て説明する。

【００４２】本発明に係る双方行画像通信方法は、例え
ば、上記図１に示したような双方向画像通信装置１００
に適応される。

【００４３】この第２の実施の形態での双方向画像通信
装置１００は、構成に関しては上述した第１の実施の形
態と同様であるが、符号化処理制御回路１２０が行う処
理に関しては、上述した第１の実施の形態と異なってい
る。

【００４４】すなわち、この形態での双方向画像通信装
置１００は、可視フラグと符号化処理フラグの２種類の
フラグを用いており、符号化処理制御回路１２０の制御
により、可視フラグを相手側に送信して自端末の状態を
相手側に知らせ、また、符号化処理フラグの設定値に基
づいて符号化処理を行うようになされている。

【００４５】尚、第２の実施の形態での双方向画像通信
装置１００は、上述した第１の実施の形態での双方向画
像通信装置１００と同様の構成をしているため、その詳
細な説明は省略し、異なる箇所についてのみ以下説明す
る。また、ここでは、互いに画像通信を行う双方の通信
装置各々が、双方向画像通信装置１００と同様の構成を
しているものとする。

【００４６】まず、双方向画像通信装置１００で用いる
可視フラグと符号化処理フラグについて説明すると、こ
れら２種類の各フラグは、何れもＯＮ／ＯＦＦのみの２
値フラグである。

【００４７】可視フラグは、双方向画像通信の表示用ウ
ィンドウがユーザにとって可視であるか否かを示すもの
である。また、可視フラグは、初期設定はＯＮである
が、ユーザから双方向画像通信の表示用ウィンドウが見
えなくなった時点でＯＦＦに切り換わり、ユーザから双
方向画像通信の表示用ウィンドウが再度見えるようにな
ると、ＯＮに戻るようになされている。このような可視
フラグの変化状態が相手側に送信される。

【００４８】一方、符号化処理フラグは、符号化処理部
１４０において符号化処理が必要であるか否かを判断す
るためのものであり、相手側からの可視フラグによりト
グル状に変化するようになされている。すなわち、符号
化処理フラグは、可視フラグと同様に初期設定はＯＮで
あるが、ＯＮ状態で相手側から可視フラグが変化したこ
とを示す情報が送られてくると、ＯＦＦに切り換わるよ
うになされている。

【００４９】つぎに、符号化処理制御回路１２０につい
て説明する。

【００５０】この符号化処理制御回路１２０は、上述し
たような可視フラグ及び符号化処理フラグを用いて、図
５に示すフローチャートに従った動作が行われるように
画像復号化処理部１１０及び画像符号化処理部１４０を
制御するものである。

【００５１】その動作を上記図５を用いて説明すると、
先ず、符号化処理制御回路１２０は、符号化処理フラグ
がＯＮであるか否かを判断する（ステップＳ４１１）。

【００５２】この判断処理の結果、符号化処理フラグが
ＯＮであった場合、符号化処理制御回路１２０は、相手
側に送信すべき画像を入力するように入力回路１４１を
制御する（ステップＳ４１２）。

【００５３】次に、ステップＳ４１２の処理で入力回路
１４１で入力された画像は、符号化処理制御回路１２０
の制御により、符号化回路１４２で圧縮され（ステップ
Ｓ４１３）、送信回路１４３を介して、ネットワーク制
御回路１３０から相手側に送信される（ステップＳ４１
４）。

【００５４】そして、ステップＳ４１４の処理後、後述
するステップＳ４１５の処理に進む。

【００５５】また、上述したステップＳ４１１の判断処
理の結果、符号化処理フラグがＯＦＦであった場合も、
ステップＳ４１５の処理に進む。すなわち、この場合に
は、ステップＳ４１２〜Ｓ４１４による符号化処理及び
送信処理は行わず、ステップＳ４１５の処理に進む。

【００５６】ここで、可視フラグは、画像復号化処理部
１１０において、後述するステップＳ４０９の可視フラ
グ設定処理により、ＯＮ又はＯＦＦが設定されるように
なされている。

【００５７】そこで、ステップＳ４１５において、符号
化処理制御回路１２０は、可視フラグが以前の状態から
変化したか否かを判断する（ステップＳ４１６）。

【００５８】この判断処理の結果、可視フラグが以前の
状態から変化していた場合、符号化処理制御回路１２０
は、可視フラグが変化した旨を知らせるためのデータが
相手側に送信されるように送信回路１４３を制御する。
これにより、送信回路１４３は、可視フラグの変化状態
を示す情報を相手側に送信するデータに設定し、ネット
ワーク制御回路１３０は、そのデータを相手側に送信す
る。

【００５９】尚、可視フラグの変化状態を示す情報の送
信処理についての詳細な説明は後述する。

【００６０】そして、ステップＳ４１６の処理後、符号
化処理制御回路１２０は、ステップＳ４１１に戻り、符
号化処理フラグの判断処理を行う。

【００６１】また、上述したステップＳ４１６の判断処
理の結果、可視フラグが以前の状態から変化していない
場合、符号化処理制御回路１２０は、ステップＳ４１６
の送信処理は行わずに、ステップＳ４１１に戻り、符号
化処理フラグの判断処理を行う。

【００６２】上述のように、符号化処理制御回路１２０
は、符号化処理フラグにより、符号化処理部１４０で符
号化処理が必要か否かを判断し、符号化処理フラグがＯ
Ｎの場合のみ、符号化処理を行うように符号化処理部１
４０を制御するようになされている。

【００６３】一方、復号化処理部１１０での復号化処理
については、先ず、ネットワーク制御回路１３０で一画
面分の画像データが受信される。そして、符号処理制御
回路１２０の制御により、受信回路１１３は、受信され
た一画面分の画像データに付加されているヘッダ等を除
去し、後段の復号化回路１１２で実際に復号されるべき
画像データのみを摘出する（ステップＳ４０１）。

【００６４】次に、符号処理制御回路１２０は、受信さ
れたデータに基づいて、符号化処理フラグの設定処理が
必要であるか否かを判断する（ステップＳ４０２）。す
なわち、可視フラグの変化有りを示すデータが、受信さ
れたデータに含まれていた場合に、符号化処理フラグの
設定処理が必要であると判断する。

【００６５】この判断処理の結果、符号化処理フラグの
設定処理が必要であった場合、符号化処理フラグにＯＮ
又はＯＦＦに再設定する（ステップＳ４０３）。このよ
うにしてＯＮ又はＯＦＦに再設定された符号化処理フラ
グは、上述したステップＳ４１１の判断処理で用いられ
ることとなる。

【００６６】ステップＳ４０３の処理後、符号処理制御
回路１２０は、受信回路１１３で得られた画像データを
復号するように復号化回路１１２を制御する（ステップ
Ｓ４０４）。

【００６７】また、上述したステップＳ４０２の判断処
理の結果、符号化処理フラグの設定処理が必要でなかっ
た場合、符号処理制御回路１２０は、ステップＳ４０３
の設定処理を行わずに、ステップＳ４０４の処理を行
う。

【００６８】そして、ステップＳ４０４の処理後、復号
化回路１１２で復号された画像データは、表示器１１１
に供給され、双方向画像通信の表示用ウィンドウを用い
て画面表示される（ステップＳ４０５）。

【００６９】次に、符号処理制御回路１２０は、表示器
１１１における双方向画像通信の表示用ウィンドウの状
態を確認する。

【００７０】すなわち、符号処理制御回路１２０は、先
ず、上述した第１の実施の形態と同様にして、自端末に
おいて双方向画像通信の表示用ウィンドウがアイコン化
されているか否かを判断する（ステップＳ４０６）。

【００７１】この判断処理の結果、双方向画像通信の表
示用ウィンドウがアイコン化されていない場合、符号処
理制御回路１２０は、次に、上述した第１の実施の形態
と同様にして、自端末において双方向画像通信の表示用
ウィンドウがユーザにとって可視状態であるか否かを判
断する（ステップＳ４０７）。

【００７２】この判断処理の結果、双方向画像通信の表
示用ウィンドウがユーザにとって可視状態でなかった場
合、符号処理制御回路１２０は、前回処理でのステップ
Ｓ４０６及びステップＳ４０７の判断結果と、今回処理
でのステップＳ４０６及びステップＳ４０７の判断結果
とが異なるか否か、すなわち自端末の状態が以前の状態
と異なるか否かを判断する（ステップＳ４０８）。

【００７３】また、符号処理制御回路１２０は、上述し
たステップＳ４０６の判断処理の結果、双方向画像通信
の表示用ウィンドウがアイコン化されていた場合、ステ
ップＳ４０７の処理は行わずに、このステップＳ４０８
の判断処理を行う。

【００７４】ステップＳ４０８の判断処理の結果、自端
末の状態が以前の状態と異なる場合、符号処理制御回路
１２０は、可視フラグを再設定する（ステップＳ４０
９）。このステップＳ４０９で設定された可視フラグ
は、上述したステップＳ４１５の判断処理で用いられ、
この判断処理で可視フラグが変化したと判断された場合
に、次のステップＳ４１６により可視フラグが変化した
ことを示すデータが相手側に送信されることとなる。

【００７５】そして、ステップＳ４０８の処理後、符号
処理制御回路１２０は、ステップＳ４０１に戻って次の
画面の画像データへの処理が行われるように、受信回路
１１３を制御する。

【００７６】また、符号処理制御回路１２０は、上述し
たステップＳ４０７の判断処理の結果、双方向画像通信
の表示用ウィンドウがユーザにとって可視状態であった
場合、あるいは、上述したステップＳ４０８の判断処理
の結果、自端末の状態が以前の状態と同じ場合には、ス
テップＳ４０７又はＳ４０８以降のステップには進まず
に、ステップＳ４０１に戻って次の画面の画像データへ
の処理が行われるように、受信回路１１３を制御する。

【００７７】上述のように、符号処理制御回路１２０
は、自端末において双方向画像通信の表示用ウィンドウ
がユーザにとって可視状態であるか否か、また、その判
断結果により、自端末の状態が以前の状態と異なるか否
かにより、自端末の状態を相手側に知らせるための可視
フラグを設定するようになされている。

【００７８】つぎに、上述のようにして設定される可視
フラグの変化状態を相手側に送信するための処理につい
て説明する。

【００７９】ここで、双方向画像通信装置１００は、例
えば、勧告Ｈ．２２１に従った通信方式を採用している
ものとする。

【００８０】この通信方式（勧告Ｈ．２２１）では、Ｆ
ＡＳ（Frame Algnment SignaL ）コードや、ＢＡＳ（Bi
trate Allocation Signal ）コード等を含むデータを伝
送するようになされている。

【００８１】ＢＡＳコードでは、音声符号化モード、映
像符号化モード、転送レート、データレートの選択のた
めの能力符号ならびにコマンド符号が定義されている。
すなわち、ＢＡＳコードは、最初の３ビット（ｂ₀，ｂ
₁，ｂ₂）で属性を表し、残りの５ビット（ｂ₃，
ｂ₄，ｂ₅，ｂ₆，ｂ₇）で属性値を表すようになされ
ている。

【００８２】３ビットで表される属性については、図６
に示すように、（ｂ₀，ｂ₁，ｂ₂）＝（０００）が「オーディオ符号
化コマンド」、（ｂ₀，ｂ₁，ｂ₂）＝（００１）が「転送レートコマ
ンド」、（ｂ₀，ｂ₁，ｂ₂）＝（０１０）が「ビデオとその他
のコマンド」、（ｂ₀，ｂ₁，ｂ₂）＝（０１１）が「データコマン
ド」、（ｂ₀，ｂ₁，ｂ₂）＝（１００）が「端末能力１」、（ｂ₀，ｂ₁，ｂ₂）＝（１０１）が「端末能力２」、（ｂ₀，ｂ₁，ｂ₂）＝（１１０）が「未定義」、（ｂ₀，ｂ₁，ｂ₂）＝（１１１）が「エスケープ」、を各々意味している。

【００８３】そこで、双方向画像通信装置１００は、上
述のようなＢＡＳコードの「ビデオとその他のコマン
ド」（０１０）のカテゴリの一部として可視フラグの変
化状態を送信するデータに設定するように送信回路１４
３を制御する。

【００８４】これにより、上記図５に示したフローチャ
トにおいて、ステップＳ４１５の判断処理の結果、可視
フラグが以前の状態から変化していた場合、送信回路１
４３は、相手側に送信するデータのＢＡＳコードに、可
視フラグが変化したことを示す情報を設定することとな
る。そして、ネットワーク制御回路１３０により、可視
フラグが変化したことを示す情報が設定されたデータが
相手側に送信され、相手側では、送信されてきたデータ
のＢＡＳコードの値に基づいて、符号化処理フラグの設
定処理が行われることとなる。

【００８５】上述のように、第２の実施の形態における
双方向画像通信装置１００は、可視フラグの変化状態を
相手側に送信することにより、自端末の双方向画像通信
の表示用ウィンドウがユーザにとって見える位置に存在
するか否かを相手側に知らせ、一方、相手側から送信さ
れてきた可視フラグの変化状態の情報により、相手側の
端末において、双方向画像通信の表示用ウィンドウがユ
ーザにとって見える位置に存在しない場合に、符号化処
理部１４０での符号化処理を行わないことにより、無駄
な処理を省くようになされているため、その分のＣＰＵ
能力を他のアプリケーションに分配することができる。
また、この場合、データの送信処理も行われないため、
ネットワークのトラフィックも圧迫しなくなる。したが
って、双方向画像通信装置１００は、効率的に双方向の
画像通信を行うことができ、装置の性能も向上させるこ
とができる。

【００８６】例えば、勧告Ｈ．２６１に従った符号化／
復号化方式では、符号化処理に必要なＣＰＵ能力は、復
号化処理に必要なＣＰＵ能力と比べて３倍近くの能力を
要する。このような、符号化処理に多くのＣＰＵ能力を
要する符号化／復号化方式等を双方向画像通信装置１０
０に採用した場合には、上述したような効果は顕著であ
る。

【００８７】尚、上述した第２の実施の形態では、可視
フラグの変化状態の情報をＢＡＳコードの一部として相
手側に送信することとしたが、例えば、他のプロトコル
を用いた場合、図７（ａ）に示すように、送信するデー
タＳをヘッダ部Ｓ_Hと実データ部Ｓ_Dに分割し、送信す
るデータが画像データである場合には、上記図７（ｂ）
に示すように、ヘッダ部Ｓ_Hに画像データであることを
示す値Ｘを設定し、送信するデータが可視フラグである
場合には、ヘッダ部Ｓ_Hに可視フラグであることを示す
値Ｙを設定して、相手側に送信するようにしてもよい。
これにより、送信されてきたデータのヘッダ部Ｓ_Hの値
により、ヘッダ部Ｓ_Hに続く実データ部Ｓ_Dに画像デー
タが設定されているか、又は可視フラグの変化状態を示
す情報であるかを判断することができる。そして、送信
されてきたデータに可視フラグの変化状態を示す情報が
設定されていた場合には、その情報により、可視フラグ
がＯＮ（＝１：可視）であるかＯＦＦ（＝０：不可視）
であるかを判別して、相手側における双方向画像通信の
表示用ウィンドウの状態を把握することができる。

【００８８】また、上述した第１の実施の形態における
双方向画像通信装置１００、及び第２の実施の形態にお
ける双方向画像通信装置１００は、各々、本発明に係る
双方向画像通信装置を適用したものである。

【００８９】また、第１の実施の形態における双方向画
像通信装置１００、又は第２の実施の形態における双方
向画像通信装置１００を、ホストコンピュータやインタ
ーフェース機器等、複数の機器から構成されるシステム
に適用してもよい。このようなシステムは、本発明に係
る双方向画像通信システムに含まれることは言うまでも
ない。

【００９０】また、各種のデバイスと接続されることに
より、上記各種のデバイスを動作させるようになされた
装置又はシステム内のＣＰＵ又はＭＰＵ（Microprocess
or Unit ）等のコンピュータに、上述したような符号化
処理制御回路１２０で実行される処理、すなわち上記図
２又図５に示した処理を実現するためのソフトウェアの
プログラムコードを供給するようにしてもよい。この場
合、上記コンピュータは、供給されたプログラムコード
を内部メモリに格納して、そのプログラムコードに従っ
て上記各種デバイスを動作させるようする。このような
システムも、本発明に係る双方向画像通信システムに含
まれるものである。

【００９１】また、この場合、上記ソフトウェアのプロ
グラムコード自体が、上述した機能を実現することとな
る。したがって、そのプログラムコード自体、及びその
プログラムコードをコンピュータに供給する手段であ
る、例えば、上記プログラムコードを格納した上記メモ
リは、本発明に係る記憶媒体に含まれるものである。

【００９２】また、上記プログラムコードを格納する記
憶媒体としては、フロッピーディスク、ハードディス
ク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、磁気
テープ、不揮発性のメモリカード、及びＲＯＭ等を用い
ることができる。

【００９３】また、上記プログラムコードがコンピュー
タにおいて稼働しているＯＳ（オペレーティングシステ
ム）、又は他のアプリケーションソフト等と共同して上
述した機能を実現するようにしてもよい。この場合も、
上記プログラムコード自体、及び上記プログラムコード
を格納した上記メモリは、本発明に係る記憶媒体に含ま
れることは言うまでもない。

【００９４】また、コンピュータに供給されるプログラ
ムコードが、コンピュータの機能拡張ボードやコンピュ
ータに接続された機能拡張ユニットに備わるメモリに格
納された後、その格納されたプログラムコードの指示に
基づいて、上記機能拡張ボードや上記機能拡張ユニット
に備わるＣＰＵ等が実際の処理の一部又は全ての処理を
行い、その処理によって上述した機能を実現するように
してもよい。このようなシステムも、本発明に係る双方
向画像通信システムに含まれることは言うまでもない。

【００９５】

【発明の効果】以上説明したように本発明によれば、通
信中に無駄な画像処理や通信処理が存在するか否かを常
に調査し、無駄な処理と判断した場合には、その無駄な
処理を省略するように構成したことにより、よりスムー
ズな双方向の画像通信を行うことができる。したがっ
て、効率的に双方向の画像通信を行うことができる。ま
た、上記無駄な処理の存在を認識するために、画像通信
の表示ウィンドウがユーザにとっ可視か否かを判別する
ように構成したことにより、上記無駄な処理をユーザに
とっての必要性を基に判断することができる。これによ
り、自然な状態で上記無駄な処理を省略することができ
る。したがって、さらに効率的に双方向の画像通信を行
うことができる。また、上記無駄な処理の存在を認識す
るために、上記表示ウィンドウがアイコン化されている
か否かを判別するように構成したことにより、ユーザが
双方向画像通信を必要としていない場合には、上記表示
ウィンドウを明示的にアイコン化することにより、双方
向画像通信に必要なＣＰＵ能力等の能力やデータ通信量
を節約することができる。したがって、さらに効率的に
双方向の画像通信を行うことができる。また、上記無駄
な処理の存在を認識するために、上記表示ウィンドウと
共存する他のウィンドウにより上記表示ウィンドウが覆
われているか否かを判別するように構成したことによ
り、上記表示ウィンドウがユーザにとって見えなくなっ
た時点で、双方向画像通信に必要なＣＰＵ能力等の能力
やデータ通信量を節約することができる。したがって、
さらに効率的に双方向の画像通信を行うことができる。
また、相手側にも上記無駄な処理の存在を伝えるように
構成したことにより、自端末の処理状況を互いに伝える
ことができる。これにより、相手側においても、双方向
画像通信に必要なＣＰＵ能力等の能力やデータ通信量を
節約することができる。したがって、さらに効率的に双
方向の画像通信を行うことができる。

【図面の簡単な説明】

【図１】第１の実施の形態において、本発明に係る双方
向画像通信装置を適用した双方向画像通信装置の構成を
示すブロック図である。

【図２】上記双方向画像通信装置の動作を示すフローチ
ャートである。

【図３】ウィンドウ位置関係の算出処理を説明するため
の図である。

【図４】双方向画像通信の表示用ウィンドウが他のウィ
ンドウにより覆われている場合の一例を説明するための
図である。

【図５】第２の実施の形態において、上記双方向画像通
信装置の動作を示すフローチャートである。

【図６】勧告Ｈ．２２１を用いた場合において、可視フ
ラグの変化状態の情報を送信する処理を説明するための
図である。

【図７】他のプロトコルを用いた場合において、可視フ
ラグの変化状態の情報を送信する処理を説明するための
図である。

【図８】従来の双方向画像通信システムの表示用ウィン
ドウの状態を説明するための図である。

【符号の説明】

１００双方向画像通信装置１１０復号化処理部１１１表示器１１２復号化回路１１３受信回路１２０符号化処理制御回路１３０ネットワーク制御回路１４０符号化処理部１４１入力回路１４２符号化回路１４３送信回路

Claims

【特許請求の範囲】

【請求項１】双方向の画像通信を行う双方向画像通信
方法であって、処理状況に応じて不必要な画像通信処理を省略する制御
処理を行うことを特徴とする双方向画像通信方法。
【請求項２】上記制御処理は、処理状況を判別する判
別処理を行い、その判別処理の結果に応じて不必要な画
像通信処理を省略する処理であることを特徴とする請求
項１記載の双方向画像通信方法。
【請求項３】上記制御処理は、処理状況を判別する判
別処理を行い、その判別処理の結果を示す情報を相手側
に送信し、受信時には、受信された相手側における判別
処理の結果を示す情報に応じて不必要な画像通信処理を
省略する処理であることを特徴とする請求項１記載の双
方向画像通信方法。
【請求項４】受信された画像データに複数の処理ステ
ップからなる画像受信処理を行うと共に、複数の処理ス
テップからなる画像送信処理により画像データを送信す
る双方向画像通信方法であって、相手側からの画像データを受信した際には、処理状況を
判別する判別処理を行い、その判別処理の結果に応じた
処理ステップを上記画像受信処理から省略することを特
徴とする双方向画像通信方法。
【請求項５】受信された画像データに複数の処理ステ
ップからなる画像受信処理を行うと共に、複数の処理ス
テップからなる画像送信処理により画像データを送信す
る双方向画像通信方法であって、処理状況を判別する判別処理を行い、その判別処理の結
果の情報を送信し、相手側からのデータを受信した際に
は、その受信データに含まれる相手側における判別処理
の結果に応じた処理ステップを上記画像送信処理から省
略することを特徴とする双方向画像通信方法。
【請求項６】上記判別処理は、マルチウィンドウ環境
下において、画像通信の表示ウィンドウがユーザから可
視か否かを判別する処理であることを特徴とする請求項
２〜５の何れかに記載の双方向画像通信方法。
【請求項７】上記判別処理は、上記表示ウィンドウが
アイコン化されているか否かを判別することにより、上
記表示ウィンドウがユーザから可視か否かを判別する処
理であることを特徴とする請求項６記載の双方向画像通
信方法。
【請求項８】上記判別処理は、上記表示ウィンドウと
共存する他のウィンドウにより上記表示ウィンドウが完
全に覆われているか否かを判別することにより、上記表
示ウィンドウがユーザから可視か否かを判別する処理で
あることを特徴とする請求項６記載の双方向画像通信方
法。
【請求項９】双方向の画像通信を行う双方向画像通信
装置であって、処理状況に応じて不必要な画像通信処理を省略する制御
手段を備えることを特徴とする双方向画像通信装置。
【請求項１０】上記制御手段は、処理状況を判別する
判別手段を含み、その判別手段の結果に応じて不必要な
画像通信処理を省略することを特徴とする請求項９記載
の双方向画像通信方法。
【請求項１１】上記制御手段は、処理状況を判別する
判別手段を含み、その判別手段の結果を示す情報を相手
側に送信し、受信時には、受信された相手側における判
別手段の結果を示す情報に応じて不必要な画像通信処理
を省略することを特徴とする請求項９記載の双方向画像
通信装置。
【請求項１２】受信された画像データに複数の処理ス
テップからなる画像受信処理を行う画像受信処理手段
と、複数の処理ステップからなる画像送信処理により画
像データを送信する画像送信処理手段とを備える双方向
画像通信装置であって、上記画像受信処理手段により相手側からの画像データが
受信された際に、処理状況を判別する判別手段と、上記判別手段の結果に応じた処理ステップを上記画像受
信処理から省略して動作するように上記画像受信処理手
段を制御する制御手段とを備えることを特徴とする双方
向画像通信装置。
【請求項１３】受信された画像データに複数の処理ス
テップからなる画像受信処理を行う画像受信処理手段
と、複数の処理ステップからなる画像送信処理により画
像データを送信する画像送信処理手段とを備える双方向
画像通信装置であって、処理状況を判別する判別手段と、上記判別手段の結果の情報を送信し、上記画像受信処理
手段により相手側からのデータが受信された際には、そ
の受信データに含まれる相手側における判別手段の結果
に応じた処理ステップを上記画像送信処理から省略して
動作するように上記画像送信処理手段を制御する制御手
段とを備えることを特徴とする双方向画像通信装置。
【請求項１４】マルイチウィンドウ環境を有する表示
手段を備え、上記判別手段は、上記表示手段のマルチウィンドウ環境
下において、画像通信の表示ウィンドウがユーザから可
視か否かを判別することを特徴とする請求項１０〜１３
の何れかに記載の双方向画像通信装置。
【請求項１５】上記判別手段は、上記表示ウィンドウ
がアイコン化されているか否かを判別することにより、
上記表示ウィンドウがユーザから可視か否かを判別する
ことを特徴とする請求項１４記載の双方向画像通信装
置。
【請求項１６】上記判別手段は、上記表示ウィンドウ
と共存する他のウィンドウにより上記表示ウィンドウが
完全に覆われているか否かを判別することにより、上記
表示ウィンドウがユーザから可視か否かを判別すること
を特徴とする請求項１４記載の双方向画像通信装置。
【請求項１７】双方向の画像通信を行う双方向画像通
信手段を含む双方向画像通信システムであって、上記双方向画像通信手段は、処理状況に応じて不必要な
画像通信処理を省略する制御手段を備えることを特徴と
する双方向画像通信システム。
【請求項１８】上記制御手段は、処理状況を判別する
判別手段を含み、その判別手段の結果に応じて不必要な
画像通信処理を省略することを特徴とする請求項１７記
載の双方向画像通信システム。
【請求項１９】上記制御手段は、処理状況を判別する
判別手段を含み、その判別手段の結果を示す情報を相手
側の双方向画像通信手段に送信し、受信時には、受信さ
れた相手側の判別手段の結果を示す情報に応じて不必要
な画像通信処理を省略することを特徴とする請求項１７
記載の双方向画像通信システム。
【請求項２０】双方向の画像通信を行う双方向画像通
信手段を含み、上記双方向画像通信手段は、受信された画像データに複
数の処理ステップからなる画像受信処理を行う画像受信
処理手段と、複数の処理ステップからなる画像送信処理
により画像データを送信する画像送信処理手段とを備え
る双方向画像通信システムであって、上記双方向画像通信手段は、相手側からの画像データを受信した際に、処理状況を判
別する判別手段と、上記判別手段の結果に応じた処理ステップを上記画像受
信処理から省略して動作するように上記画像受信処理手
段を制御する制御手段とを備えることを特徴とする双方
向画像通信システム。
【請求項２１】双方向の画像通信を行う双方向画像通
信手段を含み、上記双方向画像通信手段は、受信された画像データに複
数の処理ステップからなる画像受信処理を行う画像受信
処理手段と、複数の処理ステップからなる画像送信処理
により画像データを送信する画像送信処理手段とを備え
る双方向画像通信システムであって、上記双方向画像通信手段は、処理状況を判別する判別手段と、上記判別手段の結果の情報を相手側の双方向画像通信手
段に送信し、上記画像受信処理手段により相手側からの
データが受信された際には、その受信データに含まれる
相手側の双方向画像通信手段の判別手段の結果に応じた
処理ステップを上記画像送信処理から省略して動作する
ように上記画像送信処理手段を制御する制御手段とを備
えることを特徴とする双方向画像通信システム。
【請求項２２】上記双方向画像通信手段は、マルイチ
ウィンドウ環境を有する表示手段を備え、上記判別手段は、上記表示手段のマルチウィンドウ環境
下において、画像通信の表示ウィンドウがユーザから可
視か否かを判別することを特徴とする請求項１８〜２１
の何れかに記載の双方向画像通信システム。
【請求項２３】上記判別手段は、上記表示ウィンドウ
がアイコン化されているか否かを判別することにより、
上記表示ウィンドウがユーザから可視か否かを判別する
ことを特徴とする請求項２２記載の双方向画像通信シス
テム。
【請求項２４】上記判別手段は、上記表示ウィンドウ
と共存する他のウィンドウにより上記表示ウィンドウが
完全に覆われているか否かを判別することにより、上記
表示ウィンドウがユーザから可視か否かを判別すること
を特徴とする請求項２２記載の双方向画像通信システ
ム。
【請求項２５】双方向の画像通信を行う双方向画像通
信の処理ステップをコンピュータにより読出可能に記憶
した記憶媒体であって、処理状況に応じて不必要な画像通信処理を省略する制御
処理ステップを記憶したことを特徴とする記憶媒体。
【請求項２６】上記制御処理ステップは、処理状況を
判別する判別処理ステップを含み、その判別処理ステッ
プの結果に応じて不必要な画像通信処理を省略する処理
ステップであることを特徴とする請求項２５記載の記憶
媒体。
【請求項２７】上記制御処理ステップは、処理状況を
判別する判別処理ステップを含み、その判別処理ステッ
プの結果を示す情報を相手側に送信し、受信時には、受
信された相手側における判別処理ステップの結果を示す
情報に応じて不必要な画像通信処理を省略する処理ステ
ップであることを特徴とする請求項２５記載の記憶装
置。
【請求項２８】受信された画像データに複数の処理ス
テップからなる画像受信処理を行うと共に、複数の処理
ステップからなる画像送信処理により画像データを送信
する双方向画像通信の処理ステップをコンピュータによ
り読出可能に記憶した記憶媒体であって、相手側からの画像データを受信した際に、処理状況を判
別する判別処理ステップと、上記判別処理ステップの結果に応じた処理ステップを上
記画像受信処理から省略する制御処理ステップとを記憶
したことを特徴とする記憶媒体。
【請求項２９】受信された画像データに複数の処理ス
テップからなる画像受信処理を行うと共に、複数の処理
ステップからなる画像送信処理により画像データを送信
する双方向画像通信の処理ステップをコンピュータによ
り読出可能に記憶した記憶媒体であって、処理状況を判別する判別処理ステップと、上記判別処理ステップの結果の情報を送信し、相手側か
らのデータを受信した際には、その受信データに含まれ
る相手側における判別処理ステップの結果に応じた処理
ステップを上記画像送信処理から省略する制御処理ステ
ップとを記憶したことを特徴とする記憶媒体。
【請求項３０】上記判別処理ステップは、マルチウィ
ンドウ環境下において、画像通信の表示ウィンドウがユ
ーザから可視か否かを判別する処理ステップを含むこと
を特徴とする請求項２６〜２９の何れかに記載の記憶媒
体。
【請求項３１】上記判別処理ステップは、上記表示ウ
ィンドウがアイコン化されているか否かを判別すること
により、上記表示ウィンドウがユーザから可視か否かを
判別する処理ステップを含むことを特徴とする請求項３
０記載の記憶媒体。
【請求項３２】上記判別処理ステップは、上記表示ウ
ィンドウと共存する他のウィンドウにより上記表示ウィ
ンドウが完全に覆われているか否かを判別することによ
り、上記表示ウィンドウがユーザから可視か否かを判別
する処理ステップを含むことを特徴とする請求項３０記
載の記憶媒体。