JP6020397B2 - 画像処理装置および画像処理システム - Google Patents

Description

本発明は、第１の表示装置に表示された画像（画像データ）を複数の第２の表示装置で共有させることのできる画像処理装置および画像処理システムに関する。

従来、企業や教育機関、行政機関等における会議等において、大型ディスプレイに背景画像を表示させ、この背景画像の上にユーザが文字や数字、図形等のストローク画像を描画可能な表示装置が利用されている。そして、その表示装置に表示された画像（その画像データ）を複数の情報端末装置で共有させる画面共有システムが開示されている（例えば、特許文献１参照）。

しかしながら、上記した従来の画面共有システムでは、画面サーバが供給する画像データに変化が生じると、その供給された画像データと先に供給された画像データとを比較することで代理サーバが画像データに変化が生じたか否かを判断する。

このため、従来の画面共有システムでは、代理サーバにおいて、供給された画像データと先に供給された画像データとを比較して画像データに変化が生じたか否かを判断することとなるので、ＣＰＵ（制御部）の利用率が高くなってしまうという課題がある。

本発明は、上記の事情に鑑みて為されたもので、画像処理装置における制御部の利用率を抑制しつつ第２の表示装置による第１の表示装置に表示された画像データの閲覧を可能とする画像処理装置を提供することを目的とする。

本発明に係る画像処理装置は、画像データが表示される第１の表示装置および第２の表示装置がネットワークを介して接続され、画像データを処理する画像処理装置であって、前記第２の表示装置からの画像データの送信要求を受信する受信部と、前記第１の表示装置に表示される画像データがユーザの操作に基づいて変化したか否かを判断する判断部と、前記判断部が前記第１の表示装置に表示される画像データがユーザの操作に基づいて変化していると判断した場合、画像データを前記第２の表示装置に送信する送信部と、を備え、前記判断部は、前記第１の表示装置に表示される画像データが変化しないと判断した場合、前記送信要求を受信する前に前記第１の表示装置に表示された画像データを縮小した第１比較用画像データと、前記送信要求を受信した後に前記第１の表示装置に表示されている画像データを縮小した第２比較用画像データと、を生成し、前記第１比較用画像データにおける各画素と前記第２比較用画像データにおける各画素とを比較して、変化している画素数の割合が予め設定した変化閾値を超えていると、前記第１の表示装置に表示される画像データが変化したものと判断することを特徴とする。

本発明に係る画像処理装置では、画像処理装置における制御部の利用率を抑制しつつ第２の表示装置による第１の表示装置に表示された画像データの閲覧を可能とすることができる。

本実施形態の実施例１の画像処理システムの全体構成図である。 実施例１の電子黒板のハードウェア構成図である。 実施例１の電子黒板の機能ブロック図である。 実施例１のファイル処理部の機能ブロック図である。 実施例１のサーバ部およびクライアント部の通信制御部の機能ブロック図である。 ページデータを示す概念図である。 ストロークデータを示す概念図である。 座標配列データを示す概念図である。 メディアデータを示す概念図である。 遠隔ライセンス管理テーブルを示す概念図である。 アドレス帳管理テーブルを示す概念図である。 バックアップデータを示す概念図である。 接続先管理テーブルを示す概念図である。 参加拠点管理テーブルを示す概念図である。 操作データを示す概念図である。 各画像レイヤの構成図である。 実施例１の各電子黒板の処理を示したシーケンス図である。 実施例１の各電子黒板の処理を示したシーケンス図である。 ＰＣと電子黒板との処理を示したシーケンス図である。 画面変化検知部において実行されるディスプレイの画像（画像データ）の変化の有無の判断処理を示すフローチャートである。 電子黒板（主催装置）において、イベント処理部とページ処理部と画面変化検知部とのページ切り替えのフラグを立てる際の処理を示したシーケンス図である。 実施例２の画面変化検知部において実行されるディスプレイの画像（画像データ）の変化の有無の判断処理を示すフローチャートである。 実施例２におけるイベント処理部とストローク処理部と画面変化検知部とのストローク編集のフラグを立てる際の処理を示したシーケンス図である。 実施例３の画面変化検知部において実行されるディスプレイの画像（画像データ）の変化の有無の判断処理を示すフローチャートである。 実施例３におけるＰＣとＨＴＴＰ画面共有部と画面変化検知部との送信用画像データを一時的に記憶する際の処理を示したシーケンス図である。 実施例３の画面変化検知部において実行される送信用画像データの送信要求を受信する前後でディスプレイに表示された画像（画像データ）が異なるか否かの判断処理を示すフローチャートである。 送信用画像データを複数のグリッドに分割した様子を示す説明図である。 実施例４におけるＰＣとＨＴＴＰ画面共有部と画面変化検知部との送信用画像データを一時的に記憶する際の処理を示したシーケンス図である。 実施例４の画面変化検知部において実行される送信用画像データの送信要求を受信する前後でディスプレイに表示された画像（画像データ）が異なるか否かの判断処理を示すフローチャートである。

以下に、本発明に係る画像処理装置、および画像処理システムの各実施例について図面を参照しつつ説明する。

＜画像処理システム１の概要＞
先ず、本発明に係る画像処理装置および画像処理システムの一実施例としての実施例１の画像処理装置（電子黒板２）およびそれを用いた画像処理システム１の構成を、図１を用いて説明する。その図１は、本実施形態の実施例１の画像処理システムの全体構成図である。なお、図１（実施例１の画像処理システム１）では、説明を簡略化するために、２台の電子黒板（画像処理装置）２ａ、２ｂと、これに付随する電子ペン４ａ、４ｂ等と、を示している。しかしながら、画像処理システム１は、３台以上の電子黒板（画像処理装置）や電子ペン等を利用するものであってもよく、実施例１の構成に限定されるものではない。また、図１（実施例１の画像処理システム１）では、説明を簡略化するために、３台のＰＣ８（第２の表示装置）を示している。しかしながら、画像処理システム１は、１台もしくは２台の第２の表示装置、あるいは４台以上の第２の表示装置を利用するものであってもよく、実施例１の構成に限定されるものではない。

画像処理システム１は、図１に示すように、画像処理装置としての２台の電子黒板２ａ、２ｂと、第２の表示装置としての３台のＰＣ(Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ)８ａ、８ｂ、８ｃと、を備える。その画像処理システム１は、電子黒板２ａ、２ｂと、ＰＣ８ａ、８ｂ、８ｃと、が通信ネットワーク９を介して通信可能に接続されて構成されている。その各電子黒板２ａ、２ｂは、電子ペン４ａ、４ｂ、ＵＳＢメモリ５ａ、５ｂ、ノートＰＣ(Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ)６ａ、６ｂ、およびテレビ（ビデオ）会議端末７ａ、７ｂからの信号の受信が可能とされている。また、各電子黒板２ａ、２ｂには、それぞれ第１の表示装置としてのディスプレイ３ａ、３ｂが設けられている。

画像処理システム１の一の拠点となる電子黒板２ａは、電子ペン４ａによって生じたイベントにより描画された画像（画像データ）を、ディスプレイ３ａに表示させることができる。そのイベントとは、ディスプレイ３ａに電子ペン４ａのペン先、または電子ペン４ａのペン尻によるタッチ（接触）が行われることを言う。なお、電子黒板２ａでは、電子ペン４ａだけでなく、ユーザの手Ｈａ等によって生じたイベントに基づいて、ディスプレイ３ａ上に表示されている画像（画像データ）を変更させることもできる。その手Ｈａ等によるイベントとは、画像の拡大および縮小、画像におけるページめくり等のジェスチャ（ジェスチャ操作）である。

その電子黒板２ａには、ＵＳＢメモリ５ａが接続可能とされている。電子黒板２ａは、接続されたＵＳＢメモリ５ａからＰＤＦ等の電子ファイルを読み出したり、接続されたＵＳＢメモリ５ａに電子ファイルを記憶したりすることができる。

また、電子黒板２ａには、ケーブル１０ａ１を介してノートＰＣ６ａが接続されている。そのケーブル１０ａ１は、ＤｉｓｐｌａｙＰｏｒｔ、ＤＶＩ(Ｄｉｇｉｔａｌ Ｖｉｓｕａｌ Ｉｎｔｅｒｆａｃｅ)、ＨＤＭＩ（登録商標）(Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）等の規格による通信が可能とされている。加えて、ケーブル１０ａ１は、ＶＧＡ(Ｖｉｄｅｏ Ｇｒａｐｈｉｃｓ Ａｒｒａｙ)の規格による通信が可能とされている。

そして、電子黒板２ａでは、ディスプレイ３ａに対する接触によってイベントを発生させ、このイベントを示すイベント情報を、マウスやキーボード等の入力装置によるイベントと同様に、ノートＰＣ６ａに送信する。同じく、電子黒板２ａには、上記した規格による通信が可能なケーブル１０ａ２を介して、テレビ（ビデオ）会議端末７ａが接続されている。なお、ノートＰＣ６ａ、およびテレビ会議端末７ａは、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の各種無線通信プロトコルに準拠した無線通信により、電子黒板２ａと通信するものとしてもよい。

一方、電子黒板２ｂが設置されている他の拠点では、電子黒板２ａと同様に、ディスプレイ３ｂを備えた電子黒板２ｂ、電子ペン４ｂ、ＵＳＢメモリ５ｂ、ノートＰＣ６ｂ、テレビ会議端末７ｂ、ケーブル１０ｂ１、ケーブル１０ｂ２が利用される。さらに、ユーザの手Ｈｂ等によって生じたイベントに基づいて、ディスプレイ３ｂ上に表示されている画像（画像データ）を変更させることもできる。

これにより、一の拠点で電子黒板２ａのディスプレイ３ａ上に描画された画像（画像データ）は、他の拠点で電子黒板２ｂのディスプレイ３ｂ上にも表示される。また、逆に他の拠点で電子黒板２ｂのディスプレイ３ｂ上に描画された画像（画像データ）は、一の拠点で電子黒板２ａのディスプレイ３ａ上に表示される。このように、画像処理システム１では、遠隔地において同じ画像（画像データ）を共有する遠隔共有処理を行うことができ、遠隔地での会議等に用いると非常に便利である。

各ＰＣ８ａ、８ｂ、８ｃは、上述したように、通信ネットワーク９を介して２台の電子黒板２ａ、２ｂと通信可能に接続されて画像処理システム１を構成している。この各ＰＣ８ａ、８ｂ、８ｃでは、ディスプレイ３ａ、３ｂ上に表示された画像のデータ（後述する送信用画像データ）が通信ネットワーク９を介してブラウザに送信されることで、そのデータに基づく画像を表示させることが可能とされている。これにより、各ＰＣ８ａ、８ｂ、８ｃは、ディスプレイ３に表示されている画像（画像データ）を閲覧することが可能となる。この各ＰＣ８ａ、８ｂ、８ｃは、画像処理システム１においては、画像処理装置としての電子黒板２ａ、２ｂの制御下で、ディスプレイ３に表示されている画像（画像データ）の閲覧のみが可能とされており、画像処理システム１における第２の表示装置として機能する。

なお、以下では、複数の電子黒板（実施例１では２台）のうち任意の電子黒板を示す場合には「電子黒板２」と示す。また、複数のＰＣ（第２の表示装置）（実施例１では３台）のうち任意のＰＣを示す場合には「ＰＣ８」と示す。複数のディスプレイ（実施例１では２つ）のうち任意のディスプレイを示す場合には「ディスプレイ３」と示す。複数の電子ペン（実施例１では２つ）のうち任意の電子ペンを示す場合には「電子ペン４」と示す。複数のＵＳＢメモリ（実施例１では２つ）のうち任意のＵＳＢメモリを示す場合には「ＵＳＢメモリ５」と示す。複数のノートＰＣ（実施例１では２台）のうち任意のノートＰＣを示す場合には「ノートＰＣ６」と示す。複数のテレビ会議端末（実施例１では２台）のうち任意のテレビ会議端末を示す場合には「テレビ会議端末７」と示す。また、複数のユーザの手（図１では２つ）のうち任意の手を示す場合には「手Ｈ」と示す。複数のケーブル（実施例１ではそれぞれ２本）のうち任意のケーブルを示す場合には「ケーブル１０」と示す。

また、実施例１（本実施形態）では、画像処理装置の一例として電子黒板２を用いた例を説明しているが、実施例１（本実施形態）の構成に限定されるものではない。その画像処理装置の他の例としては、電子看板（デジタルサイネージ）や、スポーツや天気予報等で利用されるテレストレータや、遠隔画像（映像）診断装置等があげられる。また、実施例１（本実施形態）では、情報処理端末の一例としてノートＰＣ６を用いた例を説明しているが、実施例１（本実施形態）の構成に限定されるものではない。その情報処理端末の他の例としては、デスクトップ型ＰＣや、タブレット型ＰＣや、ＰＤＡや、デジタルビデオカメラや、デジタルカメラや、ゲーム機等の画像フレーム（画像データ）を供給可能な端末があげられる。

さらに、実施例１（本実施形態）では、第２の表示装置の一例としてＰＣ８を用いた例を説明しているが、実施例１（本実施形態）の構成に限定されるものではない。その第２の表示装置の他の例としては、デスクトップ型ＰＣや、タブレット型ＰＣや、ＰＤＡや、デジタルビデオカメラや、デジタルカメラや、ゲーム機等の画像データを表示可能な端末があげられる。ついで、通信ネットワーク９には、インターネット、ＬＡＮ(Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ)、携帯電話通信網等が含まれる。また、実施例１（本実施形態）では、記録媒体の一例として、ＵＳＢメモリ５を用いた例を説明しているが、ＳＤカード等の各種記録メディアを用いるものであってもよく、この実施例１（本実施形態）に限定されるものではない。

＜電子黒板２のハードウェア構成＞
続いて、図２を用いて、画像処理装置の一例としての本実施形態の実施例１の電子黒板２におけるハードウェア構成について説明する。なお、図２は、電子黒板２のハードウェア構成図である。

電子黒板２は、図２に示すように、ＣＰＵ１０１と、ＲＯＭ１０２と、ＲＡＭ１０３と、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）１０４と、ネットワークコントローラ１０５と、外部記憶コントローラ１０６と、を備える。そのＣＰＵ１０１は、電子黒板２全体の動作を制御する。ＲＯＭ１０２は、ＩＰＬ（Ｉｎｉｔｉａｌ Ｐｒｏｇｒａｍ Ｌｏａｄｅｒ）等のＣＰＵ１０１の駆動に用いられるプログラムを記憶する。ＲＡＭ１０３は、ＣＰＵ１０１のワークエリアとして使用される。ＳＳＤ１０４は、電子黒板２全体の動作のためのプログラム等の各種データを記憶する。ネットワークコントローラ１０５は、通信ネットワーク９との通信を制御する。外部記憶コントローラ１０６は、接続されたＵＳＢメモリ５との通信を制御する。

また、電子黒板２は、キャプチャデバイス１１１と、ＧＰＵ(Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ)１１２と、ディスプレイコントローラ１１３と、を備える。そのキャプチャデバイス１１１は、ノートＰＣ６のディスプレイに対して映像情報を静止画または動画として表示させる。ＧＰＵ１１２は、グラフィクスを専門に扱う計算処理部である。ディスプレイコントローラ１１３は、ＧＰＵ１１２からの出力画像（画像データ）をディスプレイ３やテレビ会議端末７へ出力するために画面（画像）表示の制御および管理を行う。

さらに、電子黒板２は、センサコントローラ１１４と、接触センサ１１５と、を備える。そのセンサコントローラ１１４は、接触センサ１１５の処理を制御する。接触センサ１１５は、ディスプレイ３上に電子ペン４やユーザの手Ｈ等が接触したことを検知する。この接触センサ１１５は、実施例１では、赤外線遮断方式により座標の入力および座標の検出を行う。詳細には、接触センサ１１５では、ディスプレイ３の上側両端部に設置された２つ受発光装置（図示せず）が、ディスプレイ３と平行に複数の赤外線を放射する。そして、接触センサ１１５では、その複数の赤外線が、ディスプレイ３の周囲に設けられた反射部材によって反射されて、放射した光の光路と同一の光路上を戻ってくる光を受光素子で受光する。接触センサ１１５は、物体によって遮断された２つの受発光装置が放射した赤外線の識別情報としてのＩＤ(Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ)をセンサコントローラ１１４に出力（通知）する。すると、センサコントローラ１１４は、そのＩＤ（識別情報）に基づいて物体の接触位置である座標位置を特定する。なお、以下に示す全てのＩＤは、識別情報の一例である。

なお、接触センサ１１５では、実施例１では赤外線遮断方式を用いていたが、この実施例１の方式(構成)に限定されるものではない。その他の方式(構成)としては、静電容量の変化を検知することにより接触位置を特定する静電容量方式のタッチパネルをディスプレイ３（第１の表示装置）に用いることが挙げられる。また、その他の方式(構成)としては、対向する２つの抵抗膜の電圧変化によって接触位置を特定する抵抗膜方式のタッチパネルをディスプレイ３（第１の表示装置）に用いることが挙げられる。さらに、その他の方式(構成)としては、接触物体が表示部に接触することによって生じる電磁誘導を検知して接触位置を特定する電磁誘導方式のタッチパネルをディスプレイ３（第１の表示装置）に用いることが挙げられる。

また、電子黒板２は、電子ペンコントローラ１１６を備える。この電子ペンコントローラ１１６は、電子ペン４と通信することで、当該電子ペン４のディスプレイ３へのペン先のタッチ（接触）やペン尻のタッチ（接触）の有無を判断する。なお、電子ペンコントローラ１１６が、電子ペン４のペン先およびペン尻だけでなく、電子ペン４におけるユーザが握る部分や、電子ペン４におけるその他の部分へのタッチ（接触）の有無を判断するようにしてもよい。

その電子黒板２は、アドレスバスやデータバス等のバスライン１２０を備える。そのバスライン１２０は、ＣＰＵ１０１、ＲＯＭ１０２、ＲＡＭ１０３、ＳＳＤ１０４、ネットワークコントローラ１０５、および外部記憶コントローラ１０６を、電気的に接続する。さらに、バスライン１２０は、それらに加えて、キャプチャデバイス１１１、ＧＰＵ１１２、センサコントローラ１１４および電子ペンコントローラ１１６を、電気的に接続する。

なお、実施例１では、電子黒板２全体の動作のためのプログラムを、ＳＳＤ１０４に記憶させていたが、そのプログラムは、ＣＤ−ＲＯＭ等のコンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。

＜電子黒板２の機能構成＞
続いて、図３から図１６を用いて、電子黒板２の機能構成について説明する。先ずは、図３を用いて、電子黒板２の全体的な機能構成について説明する。図３は、電子黒板２の機能ブロック図である。

電子黒板２は、上述した図２に示すハードウェア構成およびプログラムによって、図３に示す各機能構成を有する。この電子黒板２は、最初に遠隔共有処理を開始する「主催装置」となり得るとともに、既に開始されている遠隔共有処理に後から参加する「参加装置」にもなり得る。電子黒板２は、大きく分けて、クライアント部２０およびサーバ部９０の両方により構成されている。すなわち、電子黒板２では、１台の筐体内に、クライアント部２０とサーバ部９０とが設けられている。そのクライアント部２０およびサーバ部９０は、電子黒板２の１台の筐体内で実現される機能である。そして、電子黒板２では、当該電子黒板２が主催装置となる場合には、クライアント部２０とサーバ部９０とが実現される。また、電子黒板２では、当該電子黒板２が参加装置となる場合には、クライアント部２０は実現されるが、サーバ部９０は実現されない。すなわち、図１において、電子黒板２ａが主催装置で、電子黒板２ｂが参加装置となる場合、電子黒板２ａのクライアント部２０は、同じ電子黒板２ａ内に実現されたサーバ部９０を介して、他の電子黒板２ｂのクライアント部２０と通信を行う。一方、電子黒板２ｂのクライアント部２０は、他の電子黒板２ａ内に実現されたサーバ部９０を介して、他の電子黒板２ａのクライアント部と通信を行う。先ず、主に図３から図５を用いて、クライアント部２０の機能構成について説明する。

〔クライアント部２０の機能構成〕
クライアント部２０は、映像取得部２１、座標検知部２２、自動調整部２３、接触検知部２４、イベント振分部２５、操作処理部２６、ジェスチャ処理部２７、映像重畳部２８、画像処理部３０、通信制御部６０、および閲覧送信制御部５００を有する。

その映像取得部２１は、ケーブル１０を介して電子黒板２に接続されたノートＰＣ６等の映像出力機器から出力される映像（画像データ）を取得する。映像取得部２１は、映像出力機器（ノートＰＣ６等）から画像信号（画像データ）を受信（取得）すると、この画像信号を解析する。そして、映像取得部２１は、画像信号によって形成される映像出力機器の表示画像である画像フレームの解像度や、その画像フレームの更新頻度等の画像情報を導出し、それらを画像処理部３０の後述する画像取得部３１に出力する。

座標検知部２２は、ディスプレイ３上でユーザにより生じたイベントの座標位置、すなわちディスプレイ３上においてタッチ（接触）された動作等の座標位置を検出する。また、座標検知部２２は、ディスプレイ３上においてタッチ（接触）された面積も検出する。

自動調整部２３は、座標検知部２２の調整を自動で行うものであり、その調整を電子黒板２の起動時に実行する。すなわち、自動調整部２３は、電子黒板２の起動時に起動され、接触センサ１１５が座標検知部２２へと適切な値を出力できるように、接触センサ１１５の光センサ方式におけるセンサーカメラの画像処理のパラメータを調整する。

接触検知部２４は、ユーザによって生じたイベントを検出する。すなわち、接触検知部２４は、ディスプレイ３上に電子ペン４のペン先、または電子ペン４のペン尻が押下（タッチ（接触））した動作等を検出する。

イベント振分部２５は、ユーザによって生じたイベントを、ストローク描画操作、ＵＩ（ユーザーインターフェース）操作、およびジェスチャ操作の各イベントに振り分ける。そのイベント振分部２５は、その振り分けを、座標検知部２２によって検知されたイベントの座標位置と、接触検知部２４によって検出された検出結果と、に基づいて行う。

そのストローク描画操作とは、ユーザが、電子ペン４や手Ｈによりディスプレイ３上に描画する操作である。すなわち、ストローク描画操作は、ディスプレイ３上に図１６に示す後述のストローク画像（Ｂ）が表示されている場合に、ユーザによるディスプレイ３上での電子ペン４の次の動作となる。ストローク描画操作は、ディスプレイ３上で電子ペン４が押下（接触）され、この押下した状態で電子ペン４が移動され、最終的にディスプレイ３上から電子ペン４が離れるまでのイベントである。このストローク描画操作により、例えば、アルファベット「Ｓ」や「Ｔ」等がディスプレイ３上に描画される。なお、このストローク描画操作には、画像（画像データ）を描画するだけではなく、既に描画された画像（画像データ）を削除したり、描画された画像（画像データ）を編集するイベントも含まれる。

ＵＩ操作は、ユーザがＵＩ画像（図１６の後述するＵＩ画像（Ａ）参照）上で行う操作である。このＵＩ操作としては、例えば、電子ペン４により描画される線の色や幅等を設定するための操作が挙げられる。ジェスチャ操作は、ユーザがジェスチャにより行う操作である。このジェスチャ操作としては、例えば、ユーザがディスプレイ３に手Ｈを接触させた状態でその手Ｈを移動させることで、画像の拡大（もしくは縮小）、表示領域の変更、またはページ切り替え等を行うための操作が挙げられる。

操作処理部２６は、イベント振分部２５によってＵＩ操作と判断（振り分け）されたものから、イベントを生じさせたＵＩの要素に従って、各種操作を実行する。このＵＩの要素としては、例えば、ボタン、リスト、チェックボックス、テキストボックスが挙げられる。

ジェスチャ処理部２７は、イベント振分部２５によってジェスチャ操作と判断（振り分け）されたものに対応した操作を実行する。

映像重畳部２８は、画像処理部３０の後述する表示重畳部３６で重畳（合成）された画像（画像データ）を映像として映像出力機器（ディスプレイ３等）に対して表示させる。また、映像重畳部２８は、映像出力機器（ノートＰＣ６等）からの映像に対して、他の映像出力機器（テレビ会議端末７等）から送られて来た映像をピクチャ・イン・ピクチャ（画面（画像）の一部に、小さな画面（画像）を別表示すること）する。さらに、映像重畳部２８は、ピクチャ・イン・ピクチャされてディスプレイ３の一部に表示された映像を、ディスプレイ３の全体に表示させるための切り替えを行う。

画像処理部３０は、各画像レイヤの重畳（合成）処理等（図１６参照）を行う。この画像処理部３０は、画像取得部３１、ストローク処理部３２、ＵＩ画像生成部３３、背景生成部３４、レイアウト管理部３５、表示重畳部３６、ページ処理部３７、およびファイル処理部４０を有する。加えて、画像処理部３０は、ページデータ記憶部３００、および遠隔ライセンス管理テーブル３１０を有する。

その画像取得部３１は、映像取得部２１で取得した映像から、その各フレームを画像（画像データ）として取得する。この画像（画像データ）は、重畳処理される各画像レイヤにおいて、映像出力機器（ノートＰＣ６等）からの出力画像（Ｃ）（図１６参照）に相当する。

ストローク処理部３２は、イベント振分部２５によって振り分け（判断）られたストローク描画操作に係るイベント基づいて、画像（画像データ）を描画したり、描画された画像（画像データ）を削除したり、描画された画像（画像データ）を編集したりする。そのストローク描画操作は、上述したように、電子ペン４のペン先のディスプレイ３へのタッチ（接触）、電子ペン４のペン尻のディスプレイ３へのタッチ（接触）、ユーザの手Ｈによるディスプレイ３へのタッチ（接触）等である。このストローク描画操作によって描画された画像は、重畳処理される各画像レイヤにおけるストローク画像（Ｂ）（図１６参照）に相当する。また、このストローク処理部３２により行われたストローク等に基づいた画像の描画、削除、編集の各結果は、後述する操作データとして、後述する操作データ記憶部８４０（図５参照）に記憶される。

ＵＩ画像生成部３３は、電子黒板２に予め設定されているＵＩ（ユーザーインターフェース）画像を生成する。このＵＩ画像は、重畳処理される各画像レイヤにおけるＵＩ画像（Ａ）（図１６参照）に相当する。

背景生成部３４は、ページ処理部３７がページデータ記憶部３００から読み出したページデータのうちのメディアデータを、ページ処理部３７から受信する。そして、背景生成部３４は、この受信したメディアデータを表示重畳部３６に出力する。そのメディアデータによる画像は、重畳処理される各画像レイヤにおける背景画像（Ｄ）（図１６参照）に相当する。背景画像のパターン（種類）としては、無地、グリッド表示等がある。

レイアウト管理部３５は、表示重畳部３６に対して、画像取得部３１、ストローク処理部３２およびＵＩ画像生成部３３（または背景生成部３４）から出力された各画像（各画像レイヤ）のレイアウトを示すレイアウト情報を管理している。これにより、レイアウト管理部３５は、表示重畳部３６に対して、出力画像（Ｃ）およびストローク画像（Ｂ）を、ＵＩ画像（Ａ）および背景画像（Ｄ）中のどの位置に表示させるかまたは非表示にさせるか等を指示することができる。

表示重畳部３６は、レイアウト管理部３５からのレイアウト情報に基づき、画像取得部３１、ストローク処理部３２およびＵＩ画像生成部３３（または背景生成部３４）から出力された各画像（画像データ）のレイアウトを行う。すなわち、表示重畳部３６は、図１６に示すように、画像取得部３１からの出力画像（Ｃ）、ストローク処理部３２からのストローク画像（Ｂ）、ＵＩ画像生成部３３からのＵＩ画像（Ａ）および背景生成部３４からの背景画像（Ｄ）を重畳する。表示重畳部３６は、その重畳を、レイアウト管理部３５によって指定されたレイアウトに従って行う。このように重畳された画像（画像データ）では、各画像（画像データ）が重なった状態においてユーザが見える側から順に、ＵＩ画像（Ａ）、ストローク画像（Ｂ）、出力画像（Ｃ）、および背景画像（Ｄ）の各レイアの構成となっている。

また、表示重畳部３６は、出力画像（Ｃ）と背景画像（Ｄ）を切り替えて（順番を入れ替えて）、ＵＩ画像（Ａ）およびストローク画像（Ｂ）に対して排他的に重畳することも可能である。加えて、表示重畳部３６は、次の処理を行うことができる。例えば、当初、ＵＩ画像（Ａ）、ストローク画像（Ｂ）および出力画像（Ｃ）が表示されている状態であるとする。すると、表示重畳部３６は、この状態において、電子黒板２と映像出力機器（ノートＰＣ６等）との間のケーブル１０が抜かれた場合には、レイアウト管理部３５の指定によって、出力画像（Ｃ）を重畳対象から外して背景画像（Ｄ）を表示させることができる。この場合に、表示重畳部３６は、表示（表示させる画像）の拡大、表示（表示させる画像）の縮小、表示領域の移動（画像を表示させる位置の移動）の処理も行う。

ページ処理部３７は、ストロークによる画像（Ｂ）のデータと出力画像（Ｃ）のデータとを、１つのページデータにまとめてページデータ記憶部３００に記憶させる。ストローク画像（Ｂ）のデータは、ストローク配列データＩＤで示されるストローク配列データ（各ストロークデータ）（図６参照）として、ページデータの一部を成す。出力画像（Ｃ）のデータは、メディアデータＩＤで示されているメディアデータ（図６参照）として、ページデータの一部を成す。そして、このメディアデータは、ページデータ記憶部３００から読み出されると、背景画像（Ｄ）のデータとして取り扱われる。

また、ページ処理部３７は、一旦記憶させたページデータのうちのメディアデータを、背景生成部３４を介して表示重畳部３６に送信することで、映像重畳部２８が背景画像（Ｄ）をディスプレイ３に再表示させることができる。また、ページ処理部３７は、ページデータのうちのストローク配列データ（各ストロークデータ）を、ストローク処理部３２に戻すことで、ストローク（ストローク画像（Ｂ））の再編集ができる状態にすることができる。更に、ページ処理部３７は、ページデータを削除したり複製したりすることもできる。

すなわち、ページ処理部３７がページデータ記憶部３００にページデータを記憶する時点でディスプレイ３上に表示されている出力画像（Ｃ）のデータは、一旦、ページデータ記憶部３００に記憶される。その出力画像（Ｃ）のデータは、その後にページデータ記憶部３００から読み出される際には、背景画像（Ｄ）を示すメディアデータとして読みされる。そして、ページ処理部３７は、ページデータ記憶部３００から読み出したページデータのうち、ストローク画像（Ｂ）を示すストローク配列データを、ストローク処理部３２に出力する。また、ページ処理部３７は、ページデータ記憶部３００から読み出したページデータのうち、背景画像（Ｄ）を示すメディアデータを、背景生成部３４に出力する。

ページデータ記憶部３００は、ページデータを記憶する（図６等参照）。そのページデータの概念図を図６に示す。ページデータは、ディスプレイ３に表示される１ページ分のデータ（後述するストローク配列データ（各ストロークデータ）およびメディアデータ）である。なお、ページデータに含まれるパラメータの種類が多いため、以下では、図６から図９に分けて、ページデータの内容を説明する。

ページデータは、図６に示すように、ページデータＩＤ、開始時刻、終了時刻、ストローク配列データＩＤ、およびメディアデータＩＤが関連付けて記憶されている。そのページデータＩＤは、任意の１ページを識別するための識別情報である。開始時刻は、このページの表示を開始した時刻を示す情報である。終了時刻は、ストローク（ストローク描画操作）やジェスチャ（ジェスチャ操作）等によるページの内容の書き換えが行われなくなった時刻を示す情報である。ストローク配列データＩＤは、電子ペン４やユーザの手Ｈによるストローク（ストローク描画操作）によって生じたストローク配列データを識別するための識別情報である。メディアデータＩＤは、メディアデータを識別するための識別情報である。そのストローク配列データは、ストローク画像（Ｂ）（図１６参照）をディスプレイ３上に表示させるためのデータである。また、メディアデータは、背景画像（Ｄ）（図１６参照）をディスプレイ３上に表示させるためのデータである。

このページデータでは、例えば、ユーザが電子ペン４によってアルファベット「Ｓ」を描く場合、一筆書きとなるため、ストローク配列データＩＤで示されるストローク配列データにおいて１つのストロークデータで一文字のアルファベット［Ｓ］が示される。すなわち、１つのストロークデータＩＤで識別される１つのストロークデータで一文字のアルファベット［Ｓ］が示される。ところが、ページデータでは、電子ペン４によってアルファベット「Ｔ」を描く場合、二筆書きとなるため、ストローク配列データＩＤで示されるストローク配列データにおいて２つのストロークデータで一文字のアルファベット「Ｔ」が示されることになる。すなわち、２つのストロークデータＩＤで識別される２つのストロークデータで一文字のアルファベット［Ｔ］が示される。

そのストローク配列データは、ストローク配列データの概念図である図７に示すように、詳細な情報を有する。１つのストローク配列データは、複数のストロークデータによって表される。そして、１つのストロークデータは、ストロークデータＩＤ、開始時刻、終了時刻、ストロークの色、ストロークの幅、および座標配列データＩＤを有し、それらが関連付けて記憶されている。そのストロークデータＩＤは、各ストロークデータを識別するための識別情報である。開始時刻は、この１つのストロークの書き始めの時刻を示す情報である。終了時刻は、この１つのストロークの書き終わりの時刻を示す情報である。ストロークの色は、この１つのストロークの色を示す情報である。ストロークの幅は、この１つのストロークの幅を示す情報である。座標配列データＩＤは、ストロークの通過点の配列（それを示す座標配列データ）を識別するための識別情報である。

その座標配列データは、座標配列データの概念図である図８に示すように、詳細な情報を有する。座標配列データでは、ディスプレイ３上の１点（Ｘ座標値、Ｙ座標値）、この１点を通過したとき（時刻）のストロークの開始時刻からの差分の時刻（ｍｓ）、および、この１点における電子ペン４の筆圧の各情報が関連付けて記憶されている。すなわち、１つの座標配列データは、このように関連付けられた１点の情報が集まって構成されており、図７に示す１つのストロークデータにおけるストローク（ストローク描画操作）の態様を示している。例えば、ユーザが電子ペン４によってアルファベット「Ｓ」を描く場合、一筆書きとなるが、「Ｓ」を描き終えるまでに複数の通過点を通過するため、１つの座標配列データは、これら複数の通過点の情報（複数の１点の情報）を有する。

メディアデータは、ページデータの記憶時にディスプレイ３に表示されている画像のデータであり、図９に示すように、詳細な情報を有する。この１つのメディアデータは、メディアデータの概念図であるメディアデータＩＤ、データ種類、記録時刻、Ｘ座標値、Ｙ座標値、幅、高さ、および画像データを有し、それらが関連付けて記憶されている。メディアデータＩＤは、各メディアデータを識別するための識別情報である。データ種類は、このメディアデータにおける種類を示す情報である。記録時刻は、このメディアデータがページ処理部３７からページデータ記憶部３００に記憶された時刻を示す情報である。Ｘ座標値およびＹ座標値は、ページデータによって表示される画像におけるメディアデータ（その基準位置）のディスプレイ３上での位置を示す情報である。幅および高さは、ページデータによって表示される画像におけるメディアデータの幅および高さ、すなわちメディアデータのディスプレイ３上に表示された際の大きさを示す情報である。画像データは、メディアデータの内容（メディアデータにおける画像）を示す情報である。このうち、ページデータによってディスプレイ３上に表示される画像の位置は、ディスプレイ３の左上端の座標を（Ｘ座標値、Ｙ座標値）＝（０、０）とした場合に、ページデータによって表示される画像の左上端の位置を示している。このメディアデータは、例えば、ディスプレイ３上に、背景画像（Ｄ）とストローク画像（Ｂ）とが表示されている場合には、背景画像（Ｄ）のデータとストローク画像（Ｂ）のデータとの両方を意味する。また、メディアデータは、例えば、ディスプレイ３上に、背景画像（Ｄ）が表示されず、ストローク画像（Ｂ）のみが表示されている場合には、ストローク画像（Ｂ）のデータを意味する。

遠隔ライセンス管理テーブル３１０（図３参照）は、遠隔共有処理を実行するために必要なライセンス情報を管理する。この遠隔ライセンス管理テーブル３１０では、図１０に示すように、プロダクトＩＤ、ライセンスＩＤ、および有効期限を有し、それらが関連付けて記憶されている。そのプロダクトＩＤは、電子黒板２を識別するための識別情報である。ライセンスＩＤは、認証に用いられるライセンスを識別するための識別情報である。有効期限は、ライセンスの有効期限を示す情報である。

（ファイル処理部４０の機能構成）
続いて、図４を用いて、図３に示す画像処理部３０のファイル処理部４０の機能構成について説明する。その図４は、ファイル処理部４０の機能ブロック図である。なお、以下では、最初に遠隔共有処理を開始する電子黒板２を「主催装置」とし、かつ既に開始されている遠隔共有処理に後から参加する電子黒板２を「参加装置」とする。

ファイル処理部４０は、リカバリ処理部４１、ファイル入力部４２ａ、ファイル出力部４２ｂ、ファイル変換部４３、ファイル送信部４４およびアドレス帳入力部４５を有する。また、ファイル処理部４０は、バックアップ処理部４６、バックアップ出力部４７、設定管理部４８、設定ファイル入力部４９ａ、設定ファイル出力部４９ｂおよびアドレス帳入力部５０を有している。さらに、ファイル処理部４０は、アドレス帳管理テーブル４１０、バックアップデータ記憶部４２０、設定ファイル記憶部４３０および接続先管理テーブル４４０を有している。

このうち、リカバリ処理部４１は、電子黒板２が異常終了した後に、その異常終了を検知し、未保存のページデータを復旧する。例えば、正常終了の場合は、ページデータがＰＤＦファイルとしてファイル処理部４０を介してＵＳＢ５に記録されるが、電源がダウンした等の異常終了の場合は、ページデータがページデータ記憶部３００に記録されたままになっている。そのため、再び、電源オンになった際に、リカバリ処理部４１は、ページデータ記憶部３００からページデータを読み出すことで復旧させる。このリカバリ処理部４１は、復旧した未保存のページデータをページデータ記憶部３００に記憶させる。

ファイル入力部４２ａは、ＵＳＢメモリ５から、ＰＤＦファイル（ＰＤＦ形式のファイル）を読み込み、その各ページをページデータとして取り込む。このファイル入力部４２ａは、取り込んだページデータをページデータ記憶部３００に記憶させる。

ファイル変換部４３は、ページデータ記憶部３００に記憶されているページデータを、適宜読み出してＰＤＦ形式のファイルに変換する。

ファイル出力部４２ｂは、ファイル変換部４３によって変換（生成）されたＰＤＦファイルをＵＳＢメモリ５へと出力して記憶させる。

ファイル送信部４４は、ファイル変換部４３によって変換（生成）されたＰＤＦファイルを、電子メールに添付して送信する。このファイルの送信先は、表示重畳部３６（図３参照）によってディスプレイ３上にアドレス帳管理テーブル４１０の内容が表示され、そのディスプレイ３上でユーザにより選択された宛先をファイル送信部４４が受け付けることによって決定される。そのディスプレイ３上でのユーザによる選択は、タッチパネル等の入力装置の操作により行われる。そのアドレス帳管理テーブル４１０には、図１１に示すように、宛先の名前および宛先の電子メールのメールアドレス（その情報）が関連付けて管理（記憶）されている。また、ファイル送信部４４は、ユーザがタッチパネル等の入力装置の操作により宛先として入力したメールアドレスを受け付けることにより、ファイルの送信先を決定することもできる。

アドレス帳入力部４５は、図４に示すように、ＵＳＢメモリ５から電子メールアドレスの一覧ファイル（アドレス帳）を読み込み、その読み込んだ一覧ファイルをアドレス帳管理テーブル４１０に記憶させて管理する。そのＵＳＢメモリ５からの電子メールアドレスの一覧ファイル（アドレス帳）は、ＣＳＶ（Ｃｏｍｍａ−Ｓｅｐａｒａｔｅｄ Ｖａｒｉａｂｌｅｓ）形式とされている。

バックアップ処理部４６は、ファイル出力部４２ｂによって出力されたファイルや、ファイル送信部４４によって送信されたファイルを、バックアップデータ記憶部４２０にバックアップデータとして記憶させる。これにより、バックアップ処理部４６は、それらのファイルをバックアップする。このため、バックアップ処理部４６によるこの動作がバックアップの処理となる。なお、ユーザがバックアップ設定しない場合は、バックアップ処理部４６は、このようなバックアップの処理は行わない。そのバックアップデータは、図１２に示すように、バックアップデータ記憶部４２０にＰＤＦ形式で記憶される。

バックアップ出力部４７は、図４に示すように、バックアップされたファイルすなわちバックアップデータ記憶部４２０に記憶されたバックアップデータを読み出して、ＵＳＢメモリ５に記憶する。この記憶、すなわちバックアップデータ記憶部４２０のバックアップデータをＵＳＢメモリ５に記憶させることには、ユーザによるタッチパネル等の入力装置の操作により、セキュリティーのためのパスワードの入力が必要な設定としている。そのＵＳＢメモリ５に記憶されるバックアップデータは、ＰＤＦ形式とされている。

設定管理部４８は、電子黒板２の各種設定情報を設定ファイル記憶部４３０に記憶したり読み出したりして管理する。この各種設定情報としては、例えば、ネットワーク設定、日付や時刻の設定、地域や言語の設定、メールサーバの設定、アドレス帳の設定、接続先リストの設定、バックアップに関する設定が挙げられる。なお、ネットワーク設定は、例えば、電子黒板２のＩＰアドレスの設定、ネットマスクの設定、デフォルトゲートウェイの設定、またはＤＮＳ(Ｄｏｍａｉｎ Ｎａｍｅ Ｓｙｓｔｅｍ)の設定等である。設定管理部４８は、電子黒板２の各種設定情報（その設定ファイル）を設定ファイル記憶部４３０に適宜記憶させることでき、それらを設定ファイル記憶部４３０から適宜読み出すことができる。

設定ファイル入力部４９ａは、ＵＳＢメモリ５に記憶されている設定ファイル（電子黒板２の各種設定情報）を読み込み、読み込んだ各種設定情報を電子黒板２の各種設定に反映させる。また、設定ファイル入力部４９ａは、読み込んだ電子黒板２の各種設定情報（その設定ファイル）を、設定管理部４８へと出力する。

設定ファイル出力部４９ｂは、設定管理部４８から読み込んだ電子黒板２の各種設定情報を、設定ファイルとしてＵＳＢメモリ５に出力して記憶させる。なお、この設定ファイル（電子黒板２の各種設定情報）は、ユーザが中身を見ることができないように、アクセス制限等によりセキュリティーを確保している。

アドレス帳入力部５０は、ＵＳＢメモリ５から遠隔共有処理の接続先ＩＰアドレスの一覧ファイル（接続先リスト）を読み込み、接続先管理テーブル４４０に記憶させて管理する。そのＵＳＢメモリ５からの遠隔共有処理の接続先ＩＰアドレスの一覧ファイル（接続先リスト）は、ＣＳＶ形式とされている。その接続先管理テーブル４４０は、電子黒板２が遠隔共有処理に参加しようとする参加装置である場合に、次のように機能するテーブルである。接続先管理テーブル４４０は、この参加装置（電子黒板２）のユーザが、主催装置としての役割を果たす電子黒板２のＩＰアドレスを入力する手間を削減するために、図１３に示すように、それらを予め管理しておく。この接続先管理テーブル４４０では、参加されることが可能な主催装置としての電子黒板２が設置されている拠点の名称、および主催装置としての電子黒板２のＩＰアドレスが関連付けて管理（記憶）されている。

なお、接続先管理テーブル４４０は、無くてもよい。但し、この場合には、参加装置（電子黒板２）のユーザは、主催装置との間で遠隔要求処理の開始するために、タッチパネル等の入力装置によって、主催装置のＩＰアドレスを入力する必要がある。このため、参加装置のユーザは、電話や電子メール等によって、主催装置（電子黒板２）のユーザから、主催装置としての電子黒板２のＩＰアドレスを知得する必要がある。

（通信制御部６０の機能構成）
次に、図５を用いて、画像処理部３０の通信制御部６０の機能構成について説明する。通信制御部６０は、通信ネットワーク９を介して、他の電子黒板２と行う通信や、同じ電子黒板２のサーバ部９０における後述する通信制御部７０と行う通信を、制御する。ここで、他の電子黒板２とは、説明対象としての機能部（前文では通信制御部６０）が設けられていない電子黒板２を言い、同じ電子黒板２とは、説明対象としての機能部が設けられた電子黒板２を言う。そのため、通信制御部６０は、遠隔開始処理部６１、遠隔参加処理部６２、遠隔画像送信部６３、遠隔画像受信部６４、遠隔操作送信部６５、遠隔操作受信部６６、および参加拠点管理テーブル６１０を有している。

このうち、遠隔開始処理部６１は、同じ電子黒板２のサーバ部９０に対して、新たに遠隔共有処理を開始する要求を行い、当該サーバ部９０から要求の結果を受信する。この遠隔開始処理部６１は、画像処理部３０の遠隔ライセンス管理テーブル３１０を参照し、そこにライセンス情報（プロダクトＩＤ、ライセンスＩＤ、および有効期限）が管理されている場合には、上記した遠隔共有処理を開始する要求を行うことができる。また、遠隔開始処理部６１は、遠隔ライセンス管理テーブル３１０にライセンス情報が管理されていない場合には、上記した遠隔共有処理を開始する要求を行うことができない。

遠隔参加処理部６２は、通信ネットワーク９を介して、既に遠隔共有処理を開始している主催装置としての電子黒板２のサーバ部９０における後述する通信制御部７０の遠隔接続要求受信部７１に対して、遠隔共有処理への参加要求を行う。この場合も、遠隔参加処理部６２は、遠隔ライセンス管理テーブル３１０を参照する。また、遠隔参加処理部６２は、既に開始されている遠隔共有処理に参加する場合には、同じ電子黒板２のファイル処理部４０の接続先管理テーブル４４０を参照して、参加先の電子黒板２（主催装置）のＩＰアドレスを取得する。なお、遠隔参加処理部６２によって接続先管理テーブル４４０が参照することに替えて、ユーザによるタッチパネル等の入力装置の操作により、参加先の電子黒板２（主催装置）のＩＰアドレスが入力されることにより当該ＩＰアドレスを取得するものであってもよい。

遠隔画像送信部６３は、クライアント部２０の映像取得部２１から、その画像処理部３０の画像取得部３１を介して送られて来た出力画像（Ｃ）（図１６参照）を、サーバ部９０（その後述する通信制御部７０）に送信する。

遠隔画像受信部６４は、サーバ部９０（その後述する通信制御部７０）から、他の電子黒板２に接続された映像出力機器からの画像データを受信し、その画像データを表示重畳部３６に出力することで、遠隔共有処理を可能にする。

遠隔操作送信部６５は、遠隔共有処理に必要な各種操作データをサーバ部９０に送信する。この各種操作データとしては、例えば、ストロークの追加、ストロークの削除、ストロークの編集（拡大、縮小、移動）等に関するデータが挙げられる。加えて、この各種操作データとしては、ページデータの記憶、ページデータの作成、ページデータの複製、ページデータの削除、表示されているページの切り替え等に関するデータが挙げられる。

遠隔操作受信部６６は、サーバ部９０から、他の電子黒板２で入力された上述した各種操作データを受信し、画像処理部３０に出力することで、遠隔共有処理を行う。

参加拠点管理テーブル６１０は、同じ電子黒板２が主催装置である場合、現在、遠隔共有処理に参加している参加装置としての電子黒板２を管理するテーブルである。この参加拠点管理テーブル６１０では、図１４に示すように、参加中の電子黒板２が設置されている拠点の名称および当該電子黒板２のＩＰアドレスが関連付けて管理（記憶）されている。

（閲覧送信制御部５００の機能構成）
次に、図３を用いて、閲覧送信制御部５００の機能構成について説明する。閲覧送信制御部５００は、画像処理システム１において、画像処理装置としての２台の電子黒板２ａ、２ｂと通信ネットワーク９を介して通信可能に接続された第２の表示装置としての３台のＰＣ８ａ、８ｂ、８ｃにおいても同じ画像（画像データ）を共有することを可能とする。その閲覧送信制御部５００は、ＨＴＴＰ画面共有部５０１と、画面変化検知部５０２と、を有する。

そのＨＴＴＰ画面共有部５０１は、各ＰＣ８ａ、８ｂ、８ｃ（そのブラウザ）からの画面請求のリクエスト（送信用画像データの送信要求）を受信することが可能とされている。また、ＨＴＴＰ画面共有部５０１は、画面変化検知部５０２から、電子黒板２のディスプレイ３に表示されている画像（画像データ）に基づく送信用画像データを取得することができる。さらに、ＨＴＴＰ画面共有部５０１は、画面変化検知部５０２から取得した送信用画像データを、通信ネットワーク９を介して各ＰＣ８ａ、８ｂ、８ｃ（そのブラウザ）へと送信することができる。そして、ＨＴＴＰ画面共有部５０１は、その送信用画像データの各ＰＣ８ａ、８ｂ、８ｃ（そのブラウザ）への送信の実行の有無を、画面変化検知部５０２における画面（画像データ）が変化したか否かの判断結果に基づいて決定する。このため、ＨＴＴＰ画面共有部５０１は、ＰＣ８ａ、８ｂ、８ｃ（第２の表示装置）からの、電子黒板２のディスプレイ３（第１の表示装置）に表示されている画像の画像データの送信要求を、受信する受信部として機能する。また、ＨＴＴＰ画面共有部５０１は、ディスプレイ３（第１の表示装置）に表示されている画像に基づく送信用画像データを、画像データの送信要求を送信してきたＰＣ８ａ、８ｂ、８ｃ（第２の表示装置）に送信する送信部として機能する。

画面変化検知部５０２は、画像処理部３０の表示重畳部３６で重畳されて電子黒板２のディスプレイ３に表示されている画像（その画像データ）を取得し、その画像（画像データ）に基づいて送信用画像データを生成することができる。その送信用画像データは、ＨＴＴＰ画面共有部５０１からＰＣ８（第２の表示装置）へと送信するための、電子黒板２のディスプレイ３に表示されている画像に基づくデータである。この送信用画像データは、実施例１では、ＪＰＥＧ方式のものとされている。このため、画面変化検知部５０２は、ＨＴＴＰ画面共有部５０１（送信部）がＰＣ８（第２の表示装置）に送信するための送信用画像データを生成する送信データ生成部として機能する。

また、画面変化検知部５０２は、ＨＴＴＰ画面共有部５０１からの要求に基づいて、生成した送信用画像データを当該ＨＴＴＰ画面共有部５０１へと送信することができる。さらに、画面変化検知部５０２は、電子黒板２のディスプレイ３に表示されている画像（画像データ）に変化があったか否かを判断することが可能とされている。そして、画面変化検知部５０２は、電子黒板２のディスプレイ３に表示されている画像（画像データ）を変化させる操作が為されたか否かを判断することにより、当該画像（画像データ）に変化があったか否かを判断するものとされている。このため、画面変化検知部５０２は、当該操作が為された場合には、ディスプレイ３の画像（画像データ）に変化があったものと判断し、当該操作が為されていない場合には、ディスプレイ３の画像（画像データ）に変化がないものと判断する。

この画面変化検知部５０２は、実施例１では、画像（画像データ）を変化させる操作として、ページ切り替えを行うページ切替操作が為されたか否かを判断することが可能とされている。そして、画面変化検知部５０２は、当該操作が為された場合、ディスプレイ３に表示されている画像（画像データ）に変化があったものと判断する。具体的には、以下の動作が行われる。ページ切り替えを行う操作（ページ切替操作）が為されると、クライアント部２０のイベント振分部２５により、ページ切り替えのジェスチャ操作が行われたことが判断される。すると、ジェスチャ処理部２７が為されたページ切替操作を実行し、それに基づいて画像処理部３０のページ処理部３７がページを切り替えるべくページ処理を行う。このとき、ページ処理部３７は、ページ処理を行うことに伴って、画面変化検知部５０２内のページ切替操作に対応する操作実行フラグとしてのページ切り替えのフラグを立てる。

このため、電子黒板２のディスプレイ３に表示されている画像（画像データ）が、ページの切り替えにより変化した場合には、画面変化検知部５０２内のページ切り替えのフラグが立っていることとなる。これにより、画面変化検知部５０２は、ページ切り替えのフラグが立っている場合には、ページ切替操作が為されたので、電子黒板２のディスプレイ３の画像（画像データ）が変化したものと判断する。また、画面変化検知部５０２は、当該フラグが立っていない場合には、ページ切替操作が為されていないので、電子黒板２のディスプレイ３の画像（画像データ）が変化していないものと判断する。このため、画面変化検知部５０２は、第１の表示装置としてのディスプレイ３に表示される画像（画像データ）が変化したか否かを判断する判断部として機能する。また、画面変化検知部５０２は、ページ処理部３７と協働して、ページ切替操作に対応する操作実行フラグとしてのページ切り替えのフラグを立てる操作検知部として機能する。

〔サーバ部の機能構成〕
続いて、図５を用いて、サーバ部９０の機能構成について説明する。サーバ部９０は、各電子黒板２に設けられており、いずれの電子黒板２であっても、サーバ部としての役割を果たすことを可能とする。そのため、サーバ部９０は、通信制御部７０、およびデータ管理部８０を有している。その通信制御部７０は、同じ電子黒板２内のクライアント部２０の通信制御部６０との通信、および通信ネットワーク９を介する他の電子黒板２内のクライアント部２０の通信制御部６０との通信を制御する。データ管理部８０は、操作データや画像データ等を管理する。

（通信制御部７０の機能構成）
先ず、図５を用いて、サーバ部９０の通信制御部７０の機能構成について説明する。通信制御部７０は、遠隔接続要求受信部７１、遠隔接続結果送信部７２、遠隔画像受信部７３、遠隔画像送信部７４、遠隔操作受信部７５、および遠隔操作送信部７６を有している。

このうち、遠隔接続要求受信部７１は、同じ電子黒板２内のクライアント部２０の通信制御部６０の遠隔開始処理部６１からの遠隔共有処理の開始要求を受信する。また、遠隔接続要求受信部７１は、他の電子黒板２内のクライアント部２０の通信制御部６０の遠隔参加処理部６２からの遠隔共有処理に対する参加要求を受信する。

遠隔接続結果送信部７２は、同じ電子黒板２内のクライアント部２０の通信制御部６０の遠隔開始処理部６１に、遠隔共有処理の開始要求に対する結果を送信する。また、遠隔接続結果送信部７２は、他の電子黒板２内のクライアント部２０の通信制御部６０の遠隔参加処理部６２に、遠隔共有処理の参加要求に対する結果を送信する。

遠隔画像受信部７３は、クライアント部２０の通信制御部６０の遠隔画像送信部６３からの画像データ（出力画像（Ｃ）（図１６参照）のデータ）を受信する。そして、遠隔画像受信部７３は、サーバ部９０のデータ管理部８０の後述する遠隔画像処理部８２に、この受信した画像データを送信する。

遠隔画像送信部７４は、サーバ部９０のデータ管理部８０の後述する遠隔画像処理部８２から画像データを受信する。そして、遠隔画像送信部７４は、クライアント部２０の通信制御部６０の遠隔画像受信部６４に対して、この受信した画像データを送信する。

遠隔操作受信部７５は、クライアント部２０の通信制御部６０の遠隔操作送信部６５からの操作データ（ストローク画像（Ｂ）（図１６参照）等のデータ）を受信する。そして、遠隔操作受信部７５は、サーバ部９０のデータ管理部８０の後述する遠隔操作処理部８３に、この受信した操作データを送信する。

遠隔操作送信部７６は、サーバ部９０のデータ管理部８０の後述する遠隔操作処理部８３から操作データを受信する。そして、遠隔操作送信部７６は、クライアント部２０の通信制御部６０の遠隔操作受信部６６に対して、この受信した操作データを送信する。

（データ管理部の機能構成）
次に、図５を用いて、サーバ部９０のデータ管理部８０の機能構成について説明する。データ管理部８０は、遠隔接続処理部８１、遠隔画像処理部８２、遠隔操作処理部８３、操作合成処理部８４およびページ処理部８５を有している。さらに、サーバ部９０のデータ管理部８０は、パスコード管理部８１０、参加拠点管理テーブル８２０、画像データ記憶部８３０、操作データ記憶部８４０およびページデータ記憶部８５０を有している。

このうち、遠隔接続処理部８１は、遠隔共有処理の開始、および遠隔共有処理の終了の制御を行う。また、遠隔接続処理部８１は、通信制御部７０の遠隔接続要求受信部７１が、通信制御部６０の遠隔開始処理部６１から遠隔共有処理の開始要求とともに受信したライセンス情報に基づいて、ライセンスの有無やライセンスの期間内であるかを確認する。さらに、遠隔接続処理部８１は、通信制御部７０の遠隔接続要求受信部７１が、通信制御部６０の遠隔参加処理部６２から遠隔共有処理の参加要求と共に受信したライセンス情報に基づいて、ライセンスの有無やライセンスの期間内であるかを確認する。加えて、遠隔接続処理部８１は、クライアント部（参加装置）となるための他の電子黒板２からの参加要求の数（参加要求している電子黒板２の台数）が、予め定められた参加可能数を超えていないかを確認する。

その遠隔接続処理部８１は、他の電子黒板２から遠隔共有処理に対する参加要求があった際に送られて来たパスコードが、パスコード管理部８１０で管理されているパスコードと同じであるか否かを判断する（パスコードによる認証）。そして、遠隔接続処理部８１は、双方のパスコードが同じである場合には、参加要求した他の電子黒板２の遠隔共有処理への参加を許可する。なお、このパスコードは、新たに遠隔共有処理を開始する際に、主催装置としての電子黒板２のサーバ部９０の遠隔接続処理部８１によって発行される。そのパスコードは、主催装置としての電子黒板２のユーザから、遠隔共有処理に参加しようとする参加装置としての電子黒板２のユーザへと、電話や電子メール等により伝えられる。これにより、遠隔共有処理に参加しようとする参加装置（電子黒板２）のユーザが、当該電子黒板２にパスコードを入力して参加要求することで、当該電子黒板２の遠隔共有処理への参加が許可されることになる。なお、セキュリティーよりもユーザの使い勝手を優先する場合、遠隔接続処理部８１は、ライセンス状況の確認だけを行うこととし、パスコードの確認を省略するものとしてもよい。

そして、遠隔接続処理部８１は、同じ電子黒板２が主催装置の場合、参加装置としての電子黒板２の遠隔参加処理部６２から通信ネットワーク９を介して送られて来た参加要求に含まれる参加拠点情報を、サーバ部９０の参加拠点管理テーブル８２０に記憶する。そして、遠隔接続処理部８１は、参加拠点管理テーブル８２０に記憶されている遠隔拠点情報を読み出し、遠隔接続結果送信部７２に送信する。遠隔接続結果送信部７２は、主催装置としての同じ電子黒板２のクライアント部２０における遠隔開始処理部６１に遠隔拠点情報を送信する。その遠隔開始処理部６１は、参加拠点管理テーブルに６１０に、遠隔拠点情報を記憶する。これにより、主催装置としての電子黒板２では、サーバ部９０のデータ管理部８０の参加拠点管理テーブル８２０と、クライアント部２０の通信制御部６０の参加拠点管理テーブル６１０と、に同じ内容の参加拠点情報が記憶されることとなる。このため、主催装置としての電子黒板２では、クライアント部２０およびサーバ部９０の両方で、同じ内容の参加拠点管理テーブルを管理することになる。

遠隔画像処理部８２は、遠隔共有処理中の各電子黒板２のクライアント部２０（主催装置である自己の（同じ）電子黒板２のクライアント部２０を含む）に接続された映像出力機器（ノートＰＣ６等）からの画像データ（出力画像（Ｃ））を受信する。その遠隔画像処理部８２は、その受信した画像データ（出力画像（Ｃ））を画像データ記憶部８３０に記憶する。そして、遠隔画像処理部８２は、主催装置である自己の（同じ）電子黒板２のサーバ部９０に届いた時間順（時間で見た順番）を判定し、当該時間順を遠隔共有処理すべき画像データの表示順（表示する順番）とする。また、遠隔画像処理部８２は、通信制御部７０（遠隔画像送信部７４）を介して、上記判定した順番（表示順）で画像データを送信する。遠隔画像処理部８２は、この送信を、参加拠点管理テーブル８２０を参照し、遠隔共有処理に参加中の全ての電子黒板２のクライアント部２０（主催装置である自己の（同じ）電子黒板２のクライアント部２０を含む）に対して行う。

遠隔操作処理部８３は、遠隔共有処理中の各電子黒板２のクライアント部（主催装置である自己の（同じ）電子黒板２のクライアント部を含む）で描画されたストローク画像等の各種操作データ（ストローク画像（Ｂ）等）を受信する。そして、遠隔操作処理部８３は、主催装置である自己の（同じ）電子黒板２のサーバ部９０に届いた時間順（時間で見た順番）を判定し、当該時間順を遠隔共有処理すべき画像（画像データ）の表示順（表示する順番）とする。なお、各種操作データは、上述した各種操作データと同じである。また、遠隔操作処理部８３は、通信制御部７０（遠隔操作送信部７６）を介して、上記判定した順番（表示順）で各種操作データを送信する。遠隔操作処理部８３は、この送信を、参加拠点管理テーブル８２０を参照し、遠隔共有処理中の全ての電子黒板２のクライアント部２０（主催装置である自己の（同じ）電子黒板２のクライアント部２０を含む）に対して行う。

操作合成処理部８４は、遠隔操作処理部８３から出力された各電子黒板２の操作データを合成し、この合成結果としての操作データを、操作データ記憶部８４０に記憶させるとともに遠隔操作処理部８３に戻す（出力する）。この操作データは、遠隔操作処理部８３から通信制御部７０（遠隔操作送信部７６）を介して、主催装置である電子黒板２のクライアント部２０、および参加装置である電子黒板２のクライアント部２０のそれぞれに送信される。これにより、各電子黒板２で同じ操作データに係る画像（画像データ）が表示される。そのために、操作データは、図１５に示すように、ＳＥＱ(Ｓｅｑｕｅｎｃｅ)、操作名、操作データの送信元情報、操作データの送信先情報、操作種類、操作対象、および操作データの内容を示すデータが関連付けられて示されている。

そのＳＥＱは、この操作データの順序を示す情報である。操作名は、操作データの名称（操作名）を示す情報である。操作データの送信元情報は、送信元である電子黒板２のＩＰアドレスと、クライアント部２０またはサーバ部９０のＰｏｒｔ Ｎｏ．（ポートナンバー）と、を示す情報である。操作データの送信先情報は、送信先である電子黒板２のＩＰアドレスと、クライアント部２０またはサーバ部９０のＰｏｒｔ Ｎｏ．（ポートナンバー）と、を示す情報である。操作種類は、操作データにおける操作の種類（ページ切り替えであるかストローク描画であるか画像の移動等であるか）を示す情報である。操作対象は、操作データにおける操作の対象（ページデータであるかストロークデータであるか）を示す情報である。

例えば、ＳＥＱ１では、主催装置である電子黒板２（ＩＰアドレス：１９２．０．０．１）のクライアント部２０（Ｐｏｒｔ Ｎｏ．：５０００１）でストロークが描画されたことが示されている。加えて、ＳＥＱ１では、そのストロークが描画されることで、同じ主催装置である電子黒板２（ＩＰアドレス：１９２．０．０．１）のサーバ部９０（Ｐｏｒｔ Ｎｏ．：５００００）に操作データが送られたことが示されている。この場合の操作種類は「ＳＴＲＯＫＥ」、操作対象はページデータＩＤ「ｐ００５」、および操作データの内容を示すデータはストロークを示すデータである。また、ＳＥＱ２では、主催装置である電子黒板２（ＩＰアドレス：１９２．０．０．１）のサーバ部９０（Ｐｏｒｔ Ｎｏ．：５００００）から、操作データが送られたことが示されている。加えて、ＳＥＱ２では、その操作データが、参加装置である他の電子黒板２（ＩＰアドレス：１９２．０．０．２）のクライアント部２０（Ｐｏｒｔ Ｎｏ．：５０００１）に、送られたことが示されている。

なお、操作合成処理部８４は、上述したように、この操作合成処理部８４に操作データが入力された順に合成を行う。このため、通信ネットワーク９が混雑していなければ、遠隔共有処理中の全ての電子黒板２のディスプレイ３には、各電子黒板２のユーザによりストローク描画操作が為された順に、ストローク画像（Ｂ）（図１６参照）が表示される。

ページ処理部８５は、クライアント部２０の画像処理部３０におけるページ処理部３７と同様の機能を有し、サーバ部９０でも、図６から図９に示されているページデータを、ページデータ記憶部８５０に記憶させる。なお、ページデータ記憶部８５０は、画像処理部３０におけるページデータ記憶部３００と同じ内容であるため、その説明を省略する。

＜実施例１の基本的な処理または動作＞
続いて、図１７および図１８を用いて、実施例１の基本的な処理または動作について説明する。なお、図１７および図１８は、各電子黒板２の処理を示したシーケンス図である。その図１７および図１８に示す例では、電子黒板２ａが遠隔共有処理を主催する主催装置（サーバ部およびクライアント部）としての役割を果たすものとする。また、図１７および図１８に示す例では、画像処理システム１としてさらに電子黒板２ｃを用いたものとして、電子黒板２ｂ、２ｃが遠隔共有処理に参加する参加装置（クライアント部）としての役割を果たすものとする。そして、この例では、電子黒板２ａ、２ｂ、２ｃには、明確な図示は略すが、それぞれディスプレイ３ａ、３ｂ、３ｃが接続され、さらに、それぞれノートＰＣ６ａ、６ｂ、６ｃが接続されている。また、電子黒板２ａ、２ｂ、２ｃでは、明確な図示は略すが、それぞれ電子ペン４ａ、４ｂ、４ｃが使用される。以下では、この図１７および図１８に示す例の場合について説明する。

（参加の処理）
先ずは、図１７を用いて、電子黒板２ｂ、２ｃが遠隔共有処理に参加するための処理について説明する。

主催装置である電子黒板２ａでは、ユーザが電源スイッチをオンにすることで、クライアント部２０が起動する。そして、電子黒板２ａでは、ユーザがタッチパネル等の入力装置でサーバ部９０を起動させる操作が為される。すると、電子黒板２ａでは、クライアント部２０の遠隔開始処理部６１から、同じ電子黒板２ａのサーバ部９０の遠隔接続要求受信部７１に、サーバ部９０の処理を開始させる指示を出力する。これにより、電子黒板２ａでは、クライアント部２０だけでなく、サーバ部９０も各種処理を開始することが可能となる（ステップＳ２１）。

次に、電子黒板２ａでは、クライアント部２０のＵＩ画像生成部３３が電子黒板２ａとの接続を確立するための接続情報を生成する。そして、電子黒板２ａでは、クライアント部２０の映像重畳部２８が、ＵＩ画像生成部３３から表示重畳部３６を介して得た接続情報を、ディスプレイ３ａに表示させる（ステップＳ２２）。この接続情報には、主催装置（電子黒板２ａ）のＩＰアドレス、および今回の遠隔共有処理のために生成されたパスコードが含まれている。この場合、パスコード管理部８１０に記憶されているパスコードは、遠隔接続処理部８１によって読み出され、遠隔接続結果送信部７２、遠隔開始処理部６１の順に送信される（図５参照）。さらに、パスコードは、遠隔開始処理部６１を含む通信制御部６０から、画像処理部３０に送信され、最終的にＵＩ画像生成部３３に入力される（図３参照）。これにより、接続情報には、パスコードが含まれる。そして、接続情報は、電子黒板２ａのユーザによって、電話や電子メール等により、電子黒板２ｂ、２ｃの各ユーザに伝えられる。なお、接続先管理テーブル４４０（図４参照）を設けている場合には、接続情報に主催装置（電子黒板２ａ）のＩＰアドレスが含まれていなくても、参加装置（電子黒板２ｂ、２ｃ）は参加要求を行うことができる。

次に、電子黒板２ｂ、２ｃでは、各ユーザによるタッチパネル等の入力装置によって接続情報の入力を受け付けると、各クライアント部２０の遠隔参加処理部６２が、参加要求を行う（ステップＳ２３、Ｓ２４）。この参加要求では、接続情報のＩＰアドレスに基づき、通信ネットワーク９を介して、電子黒板２ａのサーバ部９０の遠隔接続要求受信部７１に対してパスコードを送信する。これにより、通信制御部７０の遠隔接続要求受信部７１は、各電子黒板２ｂ、２ｃから、参加要求（パスコードを含む）を受信し、このパスコードを遠隔接続処理部８１に出力する。

すると、電子黒板２ａでは、サーバ部９０の遠隔接続処理部８１が、電子黒板２ｂ、２ｃの各クライアント部２０から受信したパスコードに対し、パスコード管理部８１０で管理されているパスコードを用いて認証する（ステップＳ２５）。この図１７に示す例では、両電子黒板２ｂ、２ｃともに、パスコードが一致したものとしている。

そして、電子黒板２ａでは、サーバ部９０の通信制御部７０の遠隔接続結果送信部７２が、各電子黒板２ｂ、２ｃのクライアント部２０に認証結果を通知する（ＳステップＳ２６、Ｓ２７）。

すると、電子黒板２ｂ、２ｃでは、ステップＳ２５の認証により、参加要求した当該電子黒板２ｂ、２ｃが正当な電子黒板であると判断されていた場合には、主催装置である電子黒板２ａとの間に遠隔共有処理の通信が確立される。そして、各電子黒板２ｂ、２ｃでは、クライアント部２０の遠隔参加処理部６２が、それぞれ他の電子黒板との間の遠隔共有処理の開始を可能にする（ステップＳ２８、Ｓ２９）。

これにより、主催装置である電子黒板２ａが主催する遠隔共有処理に、電子黒板２ｂ、２ｃが参加することができる。

（出力画像の表示）
続いて、同じく図１７を用いて、遠隔共有処理における画像データの処理について説明する。図１７に示す例では、参加装置である電子黒板２ｂに接続されたユーザのノートＰＣ６ｂが提供する映像を用いるものとする。

このため、電子黒板２ｂでは、ディスプレイ３ｂに出力画像（Ｃ）を表示させる（ステップＳ３０）。具体的には、電子黒板２ｂでは、クライアント部２０の画像取得部３１が、同じクライアント部２０の映像取得部２１を介して、ノートＰＣ６ｂで表示されている出力画像（Ｃ）（図１６参照）のデータを、当該ノートＰＣ６ｂから受信する。そして、電子黒板２ｂでは、その受信した出力画像（Ｃ）（図１６参照）のデータを、表示重畳部３６および映像重畳部２８を介してディスプレイ３ｂに送信することで、ディスプレイ３ｂは出力画像（Ｃ）を表示する。

次に、電子黒板２ｂでは、画像取得部３１を含む画像処理部３０が、遠隔画像送信部６３に出力画像（Ｃ）のデータを送信する。すると、電子黒板２ｂでは、遠隔画像送信部６３を含む通信制御部６０が通信ネットワーク９を介して、主催装置である電子黒板２ａの通信制御部７０に出力画像（Ｃ）のデータを送信する（ステップＳ３１）。これにより、電子黒板２ａの遠隔画像受信部７３は、出力画像（Ｃ）のデータを受信し、当該データを遠隔画像処理部８２に出力することで、その遠隔画像処理部８２が画像データ記憶部８３０に出力画像（Ｃ）のデータを記憶させる。

すると、電子黒板２ａでは、ディスプレイ３ａに出力画像（Ｃ）を表示させる（ステップＳ３２）。具体的には、電子黒板２ａでは、遠隔画像処理部８２が、遠隔画像受信部７３から受信した出力画像（Ｃ）のデータを、遠隔画像送信部７４に出力する。すると、電子黒板２ａでは、遠隔画像送信部７４が、主催装置である同じ電子黒板２ａのクライアント部２０の遠隔画像受信部６４に、出力画像（Ｃ）のデータを出力する。そして、電子黒板２ａでは、遠隔画像受信部６４が、表示重畳部３６に出力画像（Ｃ）のデータを出力する。すると、電子黒板２ａでは、表示重畳部３６が、映像重畳部２８に出力画像（Ｃ）のデータを出力する。そして、電子黒板２ａでは、映像重畳部２８がディスプレイ３ａに出力画像（Ｃ）のデータを出力する。これにより、電子黒板２ａでは、ディスプレイ３ａに出力画像（Ｃ）を表示させる。

そして、主催装置としての電子黒板２ａでは、サーバ部９０の遠隔画像送信部７４を含む通信制御部７０が、通信ネットワーク９を介して、出力画像（Ｃ）のデータを送信する（ステップＳ３３）。その送信先は、出力画像（Ｃ）のデータの送信元である（画像データを提供した）電子黒板２ｂ以外の参加装置である電子黒板２ｃの通信制御部６０とする。これにより、参加装置である電子黒板２ｃの遠隔画像受信部６４は、出力画像（Ｃ）のデータを受信する。

すると、電子黒板２ｃでは、ディスプレイ３ｃに出力画像（Ｃ）を表示させる（ステップＳ３４）。具体的には、電子黒板２ｃでは、遠隔画像受信部６４が、上記したステップＳ３３により受信した出力画像（Ｃ）のデータを、同じ電子黒板２ｃの表示重畳部３６に出力する。すると、電子黒板２ｃでは、表示重畳部３６が、映像重畳部２８に出力画像（Ｃ）のデータを出力する。そして、電子黒板２ｃでは、映像重畳部２８はディスプレイ３ｃに出力画像（Ｃ）のデータを出力する。これにより、電子黒板２ｃでは、ディスプレイ３ｃに出力画像（Ｃ）を表示させる。

なお、出力画像（Ｃ）のデータだけでなく、ＵＩ画像（Ａ）、及びストローク画像（Ｂ）の各データが表示合成部２８に入力されている場合には、表示重畳部３６により、重畳画像（Ａ、Ｂ、Ｃ）が生成される。そして、映像重畳部２８は、ディスプレイ３ｃに重畳画像（Ａ、Ｂ、Ｃ）のデータを出力する。また、テレビ会議端末７から映像重畳部２８に、テレビ会議用の映像（Ｅ）のデータが送られて来ている場合には、映像重畳部２８は、重畳画像（Ａ、Ｂ、Ｃ）に、ピクチャ・イン・ピクチャによりテレビ会議用の映像（Ｅ）のデータを重畳する。そして、電子黒板２ｃでは、その重畳したデータをディスプレイ３ｃに出力する。

これにより、主催装置である電子黒板２ａと、参加装置である電子黒板２ｂ、２ｃと、の各ディスプレイ３では、電子黒板２ｂに接続されたユーザのノートＰＣ６ｂが提供する映像を共有することができる。

（重畳画像の表示）
続いて、図１８を用いて、遠隔共有処理における重畳画像が表示される処理について説明する。図１８に示す例では、参加装置である電子黒板２ｂのユーザが、電子ペン４ｂを用いて電子黒板２ｂのディスプレイ３ｂにストローク画像（Ｂ）（図１６参照）を描画したものとする（ステップＳ４１）。

すると、電子黒板２ｂでは、クライアント部２０の表示重畳部３６が、ＵＩ画像（Ａ）および出力画像（Ｃ）に対して、ストローク画像（Ｂ）を重畳する（図１６参照）。そして、電子黒板２ｂでは、クライアント部２０の映像重畳部２８が、ディスプレイ３ｂ上に、重畳された重畳画像（Ａ、Ｂ、Ｃ）を表示させる（ステップＳ４２）。具体的には、電子黒板２ｂでは、ストローク処理部３２が座標検知部２１及び接触検知部２４からイベント振分部２５を介して、操作データとしてのストローク画像（Ｂ）のデータを受信し、表示重畳部３６に送信する。これにより、電子黒板２ｂでは、表示重畳部３６が、ＵＩ画像（Ａ）、及び出力画像（Ｃ）に対して、ストローク画像（Ｂ）を重畳することができ、映像重畳部２８が電子黒板２ｂのディスプレイ３ｂ上に重畳画像（Ａ、Ｂ、Ｃ）を表示させることができる。

そして、電子黒板２ｂでは、クライアント部２０において、ストローク処理部３２を含む画像処理部３０が、同じクライアント部２０の遠隔操作送信部６５にストローク画像（Ｂ）のデータを送信する。そして、電子黒板２ｂでは、遠隔操作送信部６５が、通信ネットワーク２を介して、主催装置である電子黒板２ａのサーバ部９０の通信制御部７０にストローク画像（Ｂ）のデータを送信する（ステップＳ４３）。なお、この例では、操作データとして、ストローク画像（Ｂ）（図１６参照）のデータのみを送信したものとして説明する。これにより、電子黒板２ａでは、遠隔操作受信部７５が、ストローク画像（Ｂ）のデータを受信し、遠隔操作処理部８３に出力することで、遠隔操作処理部８３が操作合成処理部８４にストローク画像（Ｂ）のデータを出力する。このようにして、電子黒板２ｂで描画されたストローク画像（Ｂ）のデータは、描画される度に、主催装置である電子黒板２ａの遠隔操作処理部８３に順次送信される。このストローク画像（Ｂ）のデータは、ストロークデータＩＤ（図７参照）毎に示されるデータである。よって、例えば、上述したように、ユーザが電子ペン４によりアルファベット「Ｔ」を描く場合は二筆書きとなるため、２つのストロークデータＩＤのそれぞれで示されるストローク画像（Ｂ）のデータが順次送信される。

すると、電子黒板２ａでは、ディスプレイ３ａに、電子黒板２ｂから送られて来たストローク画像（Ｂ）のデータが含まれた重畳画像（Ａ、Ｂ、Ｃ）を表示する（ステップＳ４４）。具体的には、電子黒板２ａでは、サーバ部９０において、操作合成処理部８４が、遠隔操作処理部８３を介して順次送られて来た複数のストローク画像（Ｂ）のデータを合成して、操作データ記憶部８４０に記憶するとともに遠隔操作処理部８３に戻す。これにより、電子黒板２ａでは、隔操作処理部８３が、操作合成処理部８４から受信した、合成後のストローク画像（Ｂ）のデータを、遠隔操作送信部７６に出力する。すると、電子黒板２ａでは、遠隔操作送信部７６が、同じ主催装置である電子黒板２ａのクライアント部２０における遠隔操作受信部６６に、合成後のストローク画像（Ｂ）のデータを出力する。そして、電子黒板２ａでは、遠隔操作受信部６６が、画像処理部３０における表示重畳部３６に、合成後のストローク画像（Ｂ）のデータを出力する。すると、電子黒板２ａでは、表示重畳部３６が、ＵＩ画像（Ａ）、及び出力画像（Ｃ）に対して、合成後のストローク画像（Ｂ）を重畳する。よって、電子黒板２ａでは、映像重畳部２８が、表示重畳部３６によって重畳された重畳画像（Ａ、Ｂ、Ｃ）をディスプレイ３ａ上に表示させる。

また、電子黒板２ａでは、サーバ部９０の遠隔操作送信部７６を含む通信制御部７０は、通信ネットワーク９を介して、合成後のストローク画像（Ｂ）のデータを送信する（ステップＳ４５）。その送信先は、ストローク画像（Ｂ）のデータの送信元である電子黒板２ｂ以外の電子黒板２ｃの通信制御部６０とする。これにより、参加装置である電子黒板２ｃの遠隔操作受信部６６は、合成後のストローク画像（Ｂ）のデータを受信する。

すると、電子黒板２ｃでは、ディスプレイ３ｃに重畳画像（Ａ、Ｂ、Ｃ）を表示させる（ステップＳ４６）。具体的には、電子黒板２ｃでは、遠隔操作受信部６６が、上記したステップＳ４５で受信した合成後のストローク画像（Ｂ）のデータを、画像処理部３０に出力する。すると、電子黒板２ｃでは、画像処理部３０の表示重畳部３６が、ＵＩ画像（Ａ）および出力画像（Ｃ）の各データと、合成後のストローク画像（Ｂ）のデータと、を重畳し、映像重畳部２８に重畳画像（Ａ、Ｂ、Ｃ）のデータを出力する。そして、電子黒板２ｃでは、映像重畳部２８が、ディスプレイ３ｃに重畳画像（Ａ、Ｂ、Ｃ）のデータを出力する。これにより、電子黒板２ｃでは、ディスプレイ３ｃに重畳画像（Ａ、Ｂ、Ｃ）を表示させる。

なお、上記処理では、ディスプレイ３上に出力画像（Ｃ）が表示されているが、この出力画像（Ｃ）に代えて、背景画像（Ｄ）を表示してもよい。また、出力画像（Ｃ）と背景画像（Ｄ）との排他的な関係をやめて、出力画像（Ｃ）と背景画像（Ｄ）との両方を同時にディスプレイ３上に表示させてもよい。

これにより、主催装置である電子黒板２ａと、参加装置である電子黒板２ｂ、２ｃと、の各ディスプレイ３では、電子黒板２ｂのディスプレイ３ｂに描画されたストローク画像（Ｂ）を共有することができる。

（参加の終了）
続いて、同じく図１８を用いて、参加装置が遠隔共有処理への参加を終了する処理について説明する。図１８に示す例では、電子黒板２ｃが参加を終了する際の処理が示されている。すなわち、電子黒板２ｃにおいて、遠隔共有処理への参加を終了する旨の操作が為されたものとする。

その電子黒板２ｃでは、ユーザによるタッチパネル等の入力装置の操作によって参加の終了要求を受け付ける。すると、電子黒板２ｃでは、クライアント部２０の遠隔参加処理部６２が、主催装置としての電子黒板２ａのサーバ部９０の通信制御部７０に対して、参加の終了要求を行う（ステップＳ４７）。これにより、電子黒板２ａでは、通信制御部７０の遠隔接続要求受信部７１が電子黒板２ｃから参加の終了要求を受信し、同じサーバ部９０の遠隔接続処理部８１に電子黒板２ｃのＩＰアドレスとともに参加の終了要求を出力する。すると、電子黒板２ａでは、遠隔接続処理部８１が、参加拠点管理テーブル８２０から、参加の終了要求を行った電子黒板２ｃのＩＰアドレス及び電子黒板２ｃが設置されている拠点の名称を削除する。その削除は、遠隔接続要求受信部７１から送られて来たＩＰアドレスに基づいて行われる。そして、電子黒板２ａでは、遠隔接続結果送信部７２に、電子黒板２ｃのＩＰアドレスおよび削除した旨の通知を出力する。

すると、電子黒板２ａでは、サーバ部９０の遠隔接続結果送信部７２を含む通信制御部７０が、通信ネットワーク９を介して、電子黒板２ｃのクライアント部２０の通信制御部６０に、参加の終了を指示する（ステップＳ４８）。

すると、電子黒板２ｃでは、クライアント部２０の通信制御部６０の遠隔参加処理部６２が、遠隔共有処理の通信を切断することで、参加が終了する（ステップＳ４９）。

これにより、主催装置である電子黒板２ａは、参加装置である電子黒板２ｃの遠隔共有処理への参加を終了させることができる。

なお、図１７および図１８に示す例では、クライアント部（参加装置（電子黒板２ｂ））が画像フレーム（映像）を提供していた。しかしながら、他のクライアント部（参加装置（電子黒板２ｃ））やサーバ部（主催装置（電子黒板２ａ））が画像フレーム（映像）を提供するものであってもよく、この例に限定されるものではない。また、図１７および図１８に示す例では、画像フレーム（映像）を提供するクライアント部（参加装置（電子黒板２ｂ））が描画情報を送信しているが、他のクライアント部やサーバ部が描画情報を送信するものであってもよく、この例に限定されるものではない。さらに、図１７および図１８に示す例では、画像フレームを提供しないクライアント部（参加装置（電子黒板２ｃ））が参加の終了要求を行っているが、他のクライアント部が参加の終了要求を行うものであってもよく、この例に限定されるものではない。同様に、図１７および図１８に示す例では、画像フレームを提供しないクライアント部（参加装置（電子黒板２ｃ））が参加の終了要求を行っているが、サーバ部が遠隔共有処理を終了させるものであってもよく、この例に限定されるものではない。

＜実施例１の特徴的な処理または動作＞
続いて、図１９を用いて、実施例１の特徴的な処理または動作について説明する。なお、図１９は、画像処理システム１において、第２の表示装置としてのＰＣ８と主催装置（サーバ部）としての電子黒板２ａとの処理を示したシーケンス図である。その図１９に示す例では、いずれのＰＣ８ａ、８ｂ、８ｃであっても同様の動作が行われることから、単一のＰＣ８として記載している。以下では、この図１９に示す例の場合について説明する。

第２の表示装置としてのＰＣ８（そのブラウザ）では、画面請求のリクエスト（送信用画像データの送信要求）を、電子黒板２ａの閲覧送信制御部５００のＨＴＴＰ画面共有部５０１に送信する（ステップＳ５１）。

すると、電子黒板２ａでは、閲覧送信制御部５００において、ＨＴＴＰ画面共有部５０１が、ＰＣ８から画面請求のリクエストを受信すると、画面変化検知部５０２が当該電子黒板２ａのディスプレイ３ａの画面（その画像（画像データ））の変化の有無を判断する（ステップＳ５２）。その画面変化検知部５０２では、図２０のフローチャートに示すように、ステップＳ６１において、ページ切替操作が為されたか否かを判断し、Ｙｅｓの場合はステップＳ６２へ進み、Ｎｏの場合はステップＳ６３へ進む。この画面変化検知部５０２では、上述したように、ページ切り替えのフラグが立っているか否かを判断することで、ページ切替操作が為されたか否かを判断する。そして、画面変化検知部５０２では、ページ切り替えのフラグが立っている場合、ディスプレイ３ａの画面（その画像（画像データ））が変化したものと判断する（ステップＳ６２）。また、画面変化検知部５０２では、ページ切り替えのフラグが立っていない場合、ディスプレイ３ａの画面（その画像（画像データ））が変化していないものと判断する（ステップＳ６３）。

すると、電子黒板２ａでは、閲覧送信制御部５００において、画面変化検知部５０２がディスプレイ３ａの画像（画像データ）が変化したものと判断すると、ＨＴＴＰ画面共有部５０１が送信用画像データをＰＣ８（そのブラウザ）に送信する（ステップＳ５３）。その送信用画像データは、上述したように、画像処理部３０の表示重畳部３６で重畳されて電子黒板２のディスプレイ３に表示されている画像（その画像データ）に基づいて、画面変化検知部５０２で生成したものである。また、電子黒板２ａでは、画面変化検知部５０２がディスプレイ３ａの画像（画像データ）が変化していないものと判断すると、ＨＴＴＰ画面共有部５０１は送信用画像データをＰＣ８に送信しない。

このステップＳ５１→ステップＳ５２→ステップＳ５３の一連の動作は、所定の時間毎に繰り返し行うものとされており、実施例１ではその所定の時間を２秒に設定している。すなわち、第２の表示装置としてのＰＣ８（そのブラウザ）は、２秒に１回、電子黒板２ａの閲覧送信制御部５００のＨＴＴＰ画面共有部５０１へと、画面請求のリクエストを送信する。このＰＣ８（第２の表示装置）による画面請求のリクエストの送信は、実施例１では、当該ＰＣ８のブラウザがＡＪＡＸを利用して行うものとされている。なお、この一連の動作は、送信用画像データを送信しない場合は、ステップＳ５１→ステップＳ５２となる。このように、電子黒板２ａでは、画面変化検知部５０２にページ切り替えのフラグが立っているか否かに応じて、送信用画像データの送信が適宜行われる。

次に、主催装置（サーバ部）としての電子黒板２ａにおいて、その画面変化検知部５０２にページ切り替えのフラグを立てる際の処理について、図２１を用いて説明する。その図２１は、電子黒板２ａにおいて、クライアント部２０のイベント振分部２５と、クライアント部２０の画像処理部３０のページ処理部３７と、閲覧送信制御部５００の画面変化検知部５０２と、の当該フラグを立てる際の処理を示したシーケンス図である。この図２１に示す例では、例えば、ジェスチャ操作により、電子黒板２ａのディスプレイ３ａ（第１の表示装置）に表示される画像（画像データ）のページ切り替えを行う操作（ページ切替操作）が為された場面を示している。そのページ切り替えを行う操作（ページ切替操作）は、そのディスプレイ３ａ、電子黒板２ａに接続されたノートＰＣ６ａ、電子黒板２ｂ（そのディスプレイ３ｂ）、そこに接続されたノートＰＣ６ｂ等、いずれに対して行われたものであってもよい。

先ず、電子黒板２ａでは、クライアント部２０のイベント振分部２５により、ページ切替操作（ページ切り替えのジェスチャ操作）が行われたことが判断される。そして、電子黒板２ａでは、クライアント部２０のジェスチャ処理部２７が、為されたページ切り替えの操作を実行する（ステップＳ７１）。

すると、電子黒板２ａでは、クライアント部２０の画像処理部３０のページ処理部３７が、ページを切り替えるべくページ処理を行う。そして、ページ処理部３７は、ページ処理を行うことに伴って、画面変化検知部５０２内のページ切り替えのフラグを立てる（ステップＳ７２）。

そして、電子黒板２ａでは、閲覧送信制御部５００において、ＨＴＴＰ画面共有部５０１が送信用画像データを送信し終えると（図１９のステップＳ５３参照）、画面変化検知部５０２がページ切り替えのフラグをクリアする（フラグを倒す）（ステップＳ７３）。

これにより、画像処理システム１では、主催装置（サーバ部）としての電子黒板２ａのディスプレイ３ａ（第１の表示装置）に表示される画像（画像データ）のページ切り替えを行う操作が為されると、画面変化検知部５０２にページ切り替えのフラグを立てる。そして、画像処理システム１では、ＰＣ８（第２の表示装置）が画面請求のリクエストをＨＴＴＰ画面共有部５０１に送信した際に画面変化検知部５０２に当該フラグが立っていると、ＰＣ８に送信用画像データを送信する。これにより、画像処理システム１では、主催装置（サーバ部）としての電子黒板２ａのディスプレイ３ａに表示された画像（画像データ）を、第２の表示装置（各ＰＣ８ａ、８ｂ、８ｃ）に表示（共用）させることができる。よって、画像処理システム１では、当該第２の表示装置による閲覧を可能とすることができる。

なお、この実施例１では、閲覧送信制御部５００の画面変化検知部５０２が単に電子黒板２に設けられていたが、ＨＴＴＰサーバ内部のモジュールとして設けられる、すなわちサーバ部９０に内蔵されるものであってもよい。この場合、画面変化検知部５０２内のページ切り替えのフラグを立てるための、当該画面変化検知部５０２とクライアント部２０の画像処理部３０のページ処理部３７との間での通信は、Ｓｏｃｋｅｔを利用することで容易なものとすることができる。

＜実施例１の主な効果＞
この本発明に係る一実施例としての実施例１の画像処理装置としての電子黒板２では、画面変化検知部５０２（判断部）が、ディスプレイ３ａ（第１の表示装置）に表示されている画像（画像データ）を変化させる操作が為されたか否かを判断する。そして、画面変化検知部５０２では、画像（画像データ）を変化させる操作が為された場合、ディスプレイ３の画像（画像データ）に変化があったものと判断し、当該操作が為されていない場合には、ディスプレイ３の画像（画像データ）に変化がないものと判断する。このため、電子黒板２では、先にディスプレイ３に表示されていた画像（画像データ）と、現在ディスプレイ３に表示されている画像（画像データ）と、を比較することなく、ディスプレイ３の画像（画像データ）が変化したか否かを判断することができる。これにより、電子黒板２では、画像（画像データ）の比較を行うことに比べて、ＣＰＵ１０１の利用率を大幅に下げつつディスプレイ３の画像（画像データ）が変化したか否かを判断することができる。

また、電子黒板２では、ＨＴＴＰ画面共有部５０１（受信部）が、画面変化検知部５０２によるディスプレイ３の画像（画像データ）が変化したか否かの判断に基づいて、送信用画像データの送信を行うか否かの場合分けを行う。すなわち、ＨＴＴＰ画面共有部５０１は、画面変化検知部５０２がディスプレイ３の画像（画像データ）が変化していないと判断すると、送信用画像データを送信しない。また、ＨＴＴＰ画面共有部５０１は、画面変化検知部５０２がディスプレイ３の画像（画像データ）が変化したと判断すると、送信用画像データを送信する。このため、電子黒板２では、ディスプレイ３の画像（画像データ）が変化したときのみ、送信用画像データを送信するものとすることができるので、ＣＰＵ１０１の利用率を下げつつＰＣ８（第２の表示装置）による画像の閲覧を可能とすることができる。

さらに、電子黒板２では、ＰＣ８（第２の表示装置）からの画面請求のリクエスト（画像データの送信要求）を受信した場合であっても、画面変化検知部５０２の判断に基づき、ＨＴＴＰ画面共有部５０１が送信用画像データの送信の有無の場合分けを行う。すなわち、電子黒板２では、画面請求のリクエストを受けた場合でも、ディスプレイ３ａの画像（画像データ）に変化がない場合には送信用画像データを送信せず、ディスプレイ３ａの画像（画像データ）に変化がある場合には送信用画像データを送信する。このため、電子黒板２では、送信用画像データのデータ量を低減しつつＰＣ８による画像（画像データ）の閲覧を可能とすることができ、送信用画像データの送信に要するネットワークの帯域のスループットを低減することができる。

電子黒板２では、ディスプレイ３ａ（第１の表示装置）に表示されている画像（画像データ）のページ切り替えの操作（ページ切替操作）が為されたか否かを判断することにより、当該画像を変化させる操作が為されたか否かを判断する。このため、電子黒板２では、ディスプレイ３ａ（第１の表示装置）の画像（画像データ）の変化の有無を判断する際のＣＰＵ１０１の利用率を極めて小さなものとすることができる。

電子黒板２では、画面変化検知部５０２が、ページ切り替えのフラグが立てられていると、ページ切替操作が為されたものと判断して、ディスプレイ３の画像（画像データ）に変化があったものと判断する。また、電子黒板２では、画面変化検知部５０２が、ページ切り替えのフラグが立てられていないと、ページ切替操作が為されていないものと判断して、ディスプレイ３の画像（画像データ）に変化がないものと判断する。このため、電子黒板２では、ディスプレイ３ａの画像（画像データ）の変化の有無を判断する際のＣＰＵ１０１の利用率を極めて小さなものとすることができる。

電子黒板２では、クライアント部２０の画像処理部３０のページ処理部３７がページを切り替えるべくページ処理を行うと、当該ページ処理部３７がそれに伴って画面変化検知部５０２内のページ切り替えのフラグを立てる。このため、電子黒板２では、ディスプレイ３の画像（画像データ）がページの切り替えにより変化すると確実に当該フラグを立てることができる。このことから、電子黒板２では、ディスプレイ３の画像（画像データ）がページの切り替えにより変化した際には、ＨＴＴＰ画面共有部５０１がＰＣ８に送信用画像データを確実に送信することができる。これにより、電子黒板２では、ディスプレイ３ａに表示された画像（画像データ）を、ＰＣ８に適切に表示（共用）させることができる。

電子黒板２では、ページ処理部３７がページ処理を行うときに併せて画面変化検知部５０２内のページ切り替えのフラグを立てるものとして、画面変化検知部５０２がページ切り替えのフラグが立っているか否かを判断するものとすればよい。このため、電子黒板２では、簡易な構成としつつＣＰＵ１０１の利用率を下げることができ、ＰＣ８（第２の表示装置）による画像（画像データ）の閲覧を可能とすることができる。

本発明に係る画像処理システムの一実施例としての実施例１の画像処理システム１では、上記した画像処理装置（電子黒板２）によりＰＣ８（第２の表示装置）による画像（画像データ）の閲覧を可能とするものであることから、上述した各効果を得ることができる。

したがって、本発明に係る実施例１の画像処理装置としての電子黒板２では、ＣＰＵ１０１（制御部）の利用率を抑制しつつ第２の表示装置としてのＰＣ８による第１の表示装置としてのディスプレイ３に表示された画像データの閲覧を可能とすることができる。

次に、本発明に係る画像処理装置および画像処理システムの一実施例としての実施例２の画像処理装置（電子黒板２Ａ）およびそれを用いた画像処理システム１Ａについて、図２２および図２３を用いて説明する。この実施例２の画像処理装置（電子黒板２Ａ）および画像処理システム１Ａは、画面変化検知部５０２Ａが、ページ切替操作の有無に加えて、ストローク描画操作の有無に基づいて、ディスプレイ３の画像（画像データ）を変化させる操作の有無を判断するものである。実施例２の画像処理装置（電子黒板２Ａ）および画像処理システム１Ａは、基本的な構成は上記した実施例１の画像処理装置（電子黒板２）および画像処理システム１と同様であることから、等しい構成の個所には同じ符号を付し、その詳細な説明は省略する。

図２２は、実施例２の画面変化検知部５０２Ａにおいて実行されるディスプレイ３の画像（画像データ）の変化の有無の判断処理を示すフローチャートである。また、図２３は、電子黒板２Ａａにおいて、クライアント部２０のイベント振分部２５と、クライアント部２０の画像処理部３０のストローク処理部３２と、閲覧送信制御部５００の画面変化検知部５０２Ａと、の処理を示したシーケンス図である。その図２３に示す処理は、ストローク編集のフラグを立てる際の処理である。

実施例２の電子黒板２Ａでは、画面変化検知部５０２Ａにおいて、実施例１の電子黒板２と同様に、ページ切替操作が為されたか否かを判断し、当該操作が為された場合、ディスプレイ３の画像（画像データ）を変化させる操作が為されたものと判断する。また、実施例２の画面変化検知部５０２Ａは、ページ切替操作が為されていない場合、実施例１の電子黒板２とは異なり、ストローク描画操作が為されたか否か（ストローク描画操作を受け付けたか否か）を判断する。そして、画面変化検知部５０２Ａは、ストローク描画操作が為されている（ストローク描画操作を受け付ける）と、ディスプレイ３の画像（画像データ）を変化させる操作が為されたものと判断する。また、画面変化検知部５０２Ａは、ストローク描画操作が為されていない（ストローク描画操作を受け付けていない）と、当該画像（画像データ）を変化させる操作が為されていないものと判断する。

このため、画面変化検知部５０２Ａは、実施例２では、ストローク描画操作が為されたか否かを判断することが可能とされており、当該操作が為された場合、電子黒板２Ａのディスプレイ３に表示されている画像（画像データ）に変化があったものと判断する。具体的には、以下の動作が行われる。ストローク描画操作が為されると、クライアント部２０のイベント振分部２５により、ストローク描画操作が行われたことが判断される。そして、画像処理部３０のストローク処理部３２が、為されたストローク描画操作に基づいて、画像（画像データ）を描画したり、描画された画像（画像データ）を削除したり、描画された画像（画像データ）を編集したりするストローク編集処理を行う。このとき、ストローク処理部３２は、ストローク編集処理を行うことに伴って、画面変化検知部５０２Ａ内のストローク描画操作に対応する操作実行フラグとしてのストローク編集のフラグを立てる。

このため、電子黒板２Ａのディスプレイ３に表示されている画像（画像データ）が、ストローク編集により変化した場合には、画面変化検知部５０２Ａ内のストローク編集のフラグが立っていることとなる。これにより、画面変化検知部５０２Ａは、ストローク編集のフラグが立っている場合には、ストローク描画操作が為されたので、電子黒板２Ａのディスプレイ３の画像（画像データ）が変化したものと判断する。また、画面変化検知部５０２Ａは、当該フラグが立っていない場合には、ストローク描画操作が為されていないので、電子黒板２Ａのディスプレイ３の画像（画像データ）が変化していないものと判断する。このため、画面変化検知部５０２Ａは、第１の表示装置としてのディスプレイ３に表示される画像（画像データ）が変化したか否かを判断する判断部として機能する。また、画面変化検知部５０２Ａは、ストローク処理部３２と協働して、ストローク描画操作に対応する操作実行フラグとしてのストローク編集のフラグを立てる操作検知部として機能する。

＜実施例２の特徴的な処理または動作＞
実施例２の電子黒板２Ａでは、ステップＳ５２での画面変化検知部５０２Ａによるディスプレイ３ａ（第１の表示装置）の画像（画像データ）の変化の有無の判断における処理内容が異なることを除くと、実施例１の電子黒板２と同様の図１９に示す処理を行う。このため、以下では、画面変化検知部５０２Ａによるディスプレイ３ａ（第１の表示装置）の画像（画像データ）の変化の有無の判断における処理を、図２２を用いて説明する。なお、実施例２では、実施例１と同様に、電子黒板２Ａａを主催装置（サーバ部およびクライアント部）とし、電子黒板２Ａｂ、２Ａｃを参加装置（クライアント部）としている。

電子黒板２Ａａでは、閲覧送信制御部５００において、ＨＴＴＰ画面共有部５０１がＰＣ８から画面請求のリクエストを受信すると（図１９のステップＳ５１参照）、画面変化検知部５０２Ａが当該電子黒板２Ａａのディスプレイ３ａの画像（画像データ）の変化の有無を判断する。その画面変化検知部５０２Ａでは、図２２のフローチャートに示すように、ステップＳ８１において、ページ切替操作が為されたか否かを判断し、Ｙｅｓの場合はステップＳ８２へ進み、Ｎｏの場合はステップＳ８３へ進む。この画面変化検知部５０２Ａでは、実施例１と同様に、ページ切り替えのフラグが立っているか否かを判断することで、ページ切替操作が為されたか否かを判断する。

そして、画面変化検知部５０２Ａでは、ページ切り替えのフラグが立っている場合、ディスプレイ３ａの画面（その画像（画像データ））が変化したものと判断する（ステップＳ８２）。また、画面変化検知部５０２Ａでは、ページ切り替えのフラグが立っていない場合、ストローク描画操作が為されたか否かを判断し、Ｙｅｓの場合はステップＳ８２へ進み、Ｎｏの場合はステップＳ８４へ進む（ステップＳ８３）。この画面変化検知部５０２Ａでは、上述したように、ストローク編集のフラグが立っているか否かを判断することで、ストローク描画操作が為されたか否かを判断する。

そして、画面変化検知部５０２Ａでは、ステップＳ８３においてストローク編集のフラグが立っている場合、ディスプレイ３ａの画面（その画像（画像データ））が変化したものと判断する（ステップＳ８２）。また、画面変化検知部５０２Ａでは、ステップＳ８３においてストローク編集のフラグが立っていない場合、ディスプレイ３ａの画像（画像データ）が変化していないものと判断する（ステップＳ８４）。

このように、電子黒板２Ａａでは、画面変化検知部５０２Ａが、ディスプレイ３ａ（第１の表示装置）の画像（画像データ）が変化したか否かを判断する（図１９のステップＳ５２参照）。その後、電子黒板２Ａａでは、閲覧送信制御部５００において、画面変化検知部５０２Ａがディスプレイ３ａの画像（画像データ）が変化したものと判断すると、ＨＴＴＰ画面共有部５０１が送信用画像データをＰＣ８に送信する（図１９のステップＳ５３参照）。また、電子黒板２Ａａでは、画面変化検知部５０２Ａがディスプレイ３ａ（第１の表示装置）の画像（画像データ）が変化していないものと判断すると、ＨＴＴＰ画面共有部５０１は送信用画像データをＰＣ８に送信しない。

この一連の動作は、実施例１と同様に、２秒毎に繰り返されるものとされており、画面変化検知部５０２Ａにページ切り替えのフラグあるいはストローク編集のフラグが立っているか否か、に応じて、送信用画像データの送信が適宜行われる。そのページ切り替えのフラグが立てられる際の処理は、実施例１の電子黒板２ａと同様に、図２１の処理により行われる。

次に、主催装置（サーバ部）としての実施例２の電子黒板２Ａａにおいて、その画面変化検知部５０２Ａにストローク編集のフラグを立てる際の処理について、図２３を用いて説明する。この図２３に示す例では、例えば、電子ペン４や手Ｈにより描画するストローク描画操作により、電子黒板２Ａａのディスプレイ３ａ（第１の表示装置）に表示される画像（画像データ）に描画（ストローク画像が形成）された場面を示している。そのストローク描画操作は、そのディスプレイ３ａ、電子黒板２Ａａに接続されたノートＰＣ６ａ、電子黒板２Ａｂ（そのディスプレイ３ｂ）、そこに接続されたノートＰＣ６ｂ等、いずれに対して行われたものであってもよい。

先ず、電子黒板２Ａａでは、クライアント部２０のイベント振分部２５により、ストローク描画操作が行われたことが判断される（ステップＳ９１）。

すると、電子黒板２Ａａでは、クライアント部２０の画像処理部３０のストローク処理部３２が、為されたストローク描画操作に基づいて、描画、削除、編集するストローク編集処理を行う。そして、ストローク処理部３２は、ストローク編集処理を行うことに伴って、画面変化検知部５０２Ａ内のストローク編集のフラグを立てる（ステップＳ９２）。

そして、電子黒板２Ａａでは、閲覧送信制御部５００のＨＴＴＰ画面共有部５０１が送信用画像データを送信し終えると（図１９のステップＳ５３参照）、画面変化検知部５０２Ａがフラグをクリアする（フラグを倒す）（ステップＳ９３）。そのフラグは、ページ切り替えのフラグと、ストローク編集のフラグと、の双方を含むものである。なお、ステップＳ９３では、ページ切り替えのフラグおよびストローク編集のフラグの、いずれか一方のみが立っている場合も、双方が立っている場合もあるが、双方のフラグをクリアした（フラグを倒した）状態とする。

これにより、実施例２の画像処理システム１Ａでは、主催装置（サーバ部）としての電子黒板２Ａａのディスプレイ３ａ（第１の表示装置）に表示される画像（画像データ）に対するストローク描画操作が為されると、画面変化検知部５０２Ａにストローク編集のフラグを立てる。また、画像処理システム１Ａでは、実施例１の電子黒板２ａと同様に、電子黒板２Ａａのディスプレイ３ａに表示される画像（画像データ）のページ切り替えを行う操作（ページ切替操作）が為されると、画面変化検知部５０２Ａにページ切り替えのフラグを立てる。そして、画像処理システム１Ａでは、ＰＣ８（第２の表示装置）が画面請求のリクエストをＨＴＴＰ画面共有部５０１に送信した際に画面変化検知部５０２Ａにいずれか一方の当該フラグが立っていると、ＰＣ８に送信用画像データを送信する。これにより、画像処理システム１Ａでは、主催装置（サーバ部）としての電子黒板２Ａａのディスプレイ３ａに表示された画像（画像データ）を、第２の表示装置（各ＰＣ８）に表示（共用）させることができ、当該第２の表示装置による閲覧を可能とすることができる。

なお、上記した実施例２では、閲覧送信制御部５００の画面変化検知部５０２Ａが単に電子黒板２Ａに設けられていたが、ＨＴＴＰサーバ内部のモジュールとして設けられる、すなわちサーバ部９０に内蔵されるものであってもよい。この場合、画面変化検知部５０２Ａ内のページ切り替えやストローク編集のフラグを立てるための、当該画面変化検知部５０２Ａとストローク処理部３２またはページ処理部３７との間での通信は、Ｓｏｃｋｅｔを利用することで容易なものとすることができる。

＜実施例２の主な効果＞
本発明に係る画像処理システムの一実施例としての実施例２の画像処理装置としての電子黒板２Ａでは、基本的には実施例１の電子黒板２と等しい構成であることから、同様の効果を得ることができる。

それに加えて、実施例２の電子黒板２Ａでは、画面変化検知部５０２Ａが、ディスプレイ３ａ（第１の表示装置）に表示されている画像（画像データ）に対するストローク描画操作が為されたか否かを判断することにより、当該画像を変化させる操作が為されたか否かを判断する。このため、電子黒板２Ａでは、ディスプレイ３ａ（第１の表示装置）の画像（画像データ）の変化の有無を判断する際のＣＰＵ１０１の利用率を極めて小さなものとすることができる。

また、電子黒板２Ａでは、ストローク編集のフラグが立てられているか否かを判断することにより、ストローク描画操作が為されたか否かを判断し、その判断により画像（画像データ）を変化させる操作が為されたか否かを判断する。このため、電子黒板２Ａでは、ディスプレイ３ａの画像（画像データ）の変化の有無を判断する際のＣＰＵ１０１の利用率を極めて小さなものとすることができる。

さらに、電子黒板２Ａでは、クライアント部２０の画像処理部３０のストローク処理部３２がストローク描画操作に基づいてストローク編集処理を行うと、当該ストローク処理部３２がそれに伴って画面変化検知部５０２Ａ内のストローク編集のフラグを立てる。このため、電子黒板２Ａでは、ディスプレイ３の画像（画像データ）がストローク編集により変化すると確実に当該フラグを立てることができる。このことから、電子黒板２Ａでは、ディスプレイ３の画像（画像データ）がストローク編集により変化した際には、ＨＴＴＰ画面共有部５０１がＰＣ８に送信用画像データを確実に送信することができる。これにより、電子黒板２Ａでは、ディスプレイ３ａに表示された画像（画像データ）を、ＰＣ８に適切に表示（共用）させることができる。

電子黒板２Ａでは、ストローク処理部３２がストローク編集処理を行うときに併せて画面変化検知部５０２Ａ内のストローク編集のフラグを立てるものとして、画面変化検知部５０２Ａがストローク編集のフラグが立っているか否かを判断するものとすればよい。このため、電子黒板２Ａでは、簡易な構成としつつＣＰＵ１０１の利用率を下げることができ、ＰＣ８（第２の表示装置）による画像（画像データ）の閲覧を可能とすることができる。

電子黒板２Ａでは、画面変化検知部５０２Ａが、ページ切替操作およびストローク描画操作のいずれか一方が為されると、ディスプレイ３ａ（第１の表示装置）の画像（画像データ）に変化があったものと判断する。そして、電子黒板２Ａでは、画面変化検知部５０２Ａが、ページ切替操作およびストローク描画操作の双方とも為されていないと、ディスプレイ３ａ（第１の表示装置）の画像（画像データ）に変化がないものと判断する。すなわち、電子黒板２Ａでは、ディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）が変化する場面として、極めて多くの割合を占めるものと考えられるページ切替操作およびストローク描画操作の有無の判断により、表示された画像（画像データ）の変化の有無を判断する。このため、電子黒板２Ａでは、効率良くＣＰＵ１０１を利用しつつ、ディスプレイ３ａ（第１の表示装置）の画像（画像データ）の変化の有無の判断をより正確なものとすることができる。

本発明に係る画像処理システムの一実施例としての実施例２の画像処理システム１Ａでは、上記した画像処理装置としての電子黒板２ＡによりＰＣ８（第２の表示装置）による画像（画像データ）の閲覧を可能とするものであることから、上述した各効果を得ることができる。

したがって、本発明に係る実施例２の画像処理装置としての電子黒板２Ａでは、ＣＰＵ１０１（制御部）の利用率を抑制しつつ第２の表示装置としてのＰＣ８による第１の表示装置としてのディスプレイ３に表示された画像データの閲覧を可能とすることができる。

次に、本発明に係る画像処理装置および画像処理システムの一実施例としての実施例３の画像処理装置（電子黒板２Ｂ）およびそれを用いた画像処理システム１Ｂについて、図２４から図２６を用いて説明する。この実施例３の画像処理装置（電子黒板２Ｂ）および画像処理システム１Ｂは、画面変化検知部５０２Ｂが、ページ切替操作およびストローク描画操作の有無に加えて、画像（画像データ）の比較結果に基づいて、ディスプレイ３の画像（画像データ）の変化の有無を判断するものである。実施例３の画像処理装置（電子黒板２Ｂ）および画像処理システム１Ｂは、基本的な構成は上記した実施例２の画像処理装置（電子黒板２Ａ）および画像処理システム１Ａと同様であることから、等しい構成の個所には同じ符号を付し、その詳細な説明は省略する。

図２４は、実施例３の画面変化検知部５０２Ｂにおいて実行されるディスプレイ３の画像（画像データ）の変化の有無の判断処理を示すフローチャートである。また、図２５は、参加装置としてのＰＣ８と、主催装置としての電子黒板２Ｂａにおける閲覧送信制御部５００のＨＴＴＰ画面共有部５０１Ｂおよび画面変化検知部５０２Ｂと、の送信用画像データを一時的に記憶する際の処理を示したシーケンス図である。図２６は、実施例３の画面変化検知部５０２Ｂにおいて実行される送信用画像データの送信要求を受信する前後でディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）が異なるか否かを判断する判断処理を示すフローチャートである。

実施例３の電子黒板２Ｂでは、画面変化検知部５０２Ｂにおいて、実施例２の電子黒板２Ａと同様に、ページ切替操作が為されたか否かを判断し、当該操作が為された場合、ディスプレイ３の画像（画像データ）を変化させる操作が為されたものと判断する。また、画面変化検知部５０２Ｂは、ページ切替操作が為されていない場合、実施例２の電子黒板２Ａと同様に、ストローク描画操作が為されたか否かを判断する。さらに、画面変化検知部５０２Ｂは、ストローク描画操作が為されていると、実施例２の電子黒板２Ａと同様に、ディスプレイ３の画像（画像データ）を変化させる操作が為されたものと判断する。ついで、画面変化検知部５０２Ｂは、ストローク描画操作が為されていないと、実施例２の電子黒板２Ａとは異なり、画面請求のリクエストの前後における当該画面変化検知部５０２Ｂで生成した２つの送信用画像データを比較する。そして、画面変化検知部５０２Ｂは、双方の送信用画像データが異なるものと判断すると、ディスプレイ３の画像（画像データ）が変化したものと判断する。ついで、画面変化検知部５０２Ｂは、双方の送信用画像データが等しいものと判断すると、ディスプレイ３の画像（画像データ）が変化していないものと判断する。

このように、画面変化検知部５０２Ｂは、実施例３では、画面請求のリクエストの前後における当該画面変化検知部５０２Ｂで生成した送信用画像データを比較することが可能とされている。そして、画面変化検知部５０２Ｂは、その比較結果に基づいて電子黒板２Ｂのディスプレイ３の画像（画像データ）の変化の有無を判断する。具体的には、以下の動作が行われる。

画面変化検知部５０２Ｂは、閲覧送信制御部５００のＨＴＴＰ画面共有部５０１Ｂが、送信用画像データを送信すると、その送信した送信用画像データを一時的に記憶する。この送信した送信用画像データの一時的な記憶は、閲覧送信制御部５００に一時的な記憶のためのメモリ部を設けるものであってもよく、クライアント部２０やサーバ部９０のいずれかの記憶部の一部を用いるものであってもよい。

また、画面変化検知部５０２Ｂは、一時的に記憶した送信用画像データと、生成した送信用画像データと、の比較を行うことが可能とされている。この両送信用画像データの比較では、実施例３では、双方の送信用画像データの各画素におけるＲＧＢ値が一致するか否かの判断を全ての画素に対して行い、それらが異なる画素数が変化閾値を超えたか否かを判断する。その変化閾値は、送信用画像データの全体の画素数における所定の割合（当該割合となる個数）で示すものとして、その所定の割合を適宜設定可能なものとしている。変化閾値は、実施例３では送信用画像データの全体の画素数の５％（５％となる個数）に設定している。

また、２つの送信用画像データの各画素におけるＲＧＢ値が一致するか否かの判断は、実施例３では、ＸＯＲゲートを用いて、双方の等しい座標位置となる両画素におけるＲＧＢ値の排他的論理和を求めることで行う。これにより、画面変化検知部５０２Ｂは、一時的に記憶した送信用画像データと生成した送信用画像データとで異なる画素数が全体の５％を超えた場合には、両送信用画像データに変化があるものと判断し、ディスプレイ３の画像（画像データ）が変化したものと判断する。また、画面変化検知部５０２Ｂは、異なる画素数が全体の５％未満である場合には、両送信用画像データに変化がないものと判断し、ディスプレイ３の画像（画像データ）が変化していないものと判断する。このため、画面変化検知部５０２Ｂは、第１の表示装置としてのディスプレイ３に表示される画像（画像データ）が変化したか否かを判断する判断部として機能する。

なお、この両送信用画像データの比較は、双方のサイズを縮小した比較用画像データを生成して、それらを上記した方法と同様に比較することにより行うものとしてもよい。この場合、２つの送信用画像データにおける細かい差を検出することは困難となるが、比較の動作を簡易なものとすることができ、ＣＰＵ１０１の利用率を下げることができる。この比較用画像データの縮小は、例えば、１／４サイズに縮小する場合、互いに隣り合う４つの画素におけるＲＧＢ値の平均値を求めることにより実行することができる。

＜実施例３の特徴的な処理または動作＞
実施例３の電子黒板２Ｂでは、ステップＳ５２での画面変化検知部５０２Ｂによるディスプレイ３ａの画像（画像データ）の変化の有無の判断における処理内容が異なることを除くと、実施例２の電子黒板２Ａ（すなわち実施例１の電子黒板２）と同様の図１９に示す処理を行う。このため、以下では、画面変化検知部５０２Ｂによるディスプレイ３ａ（第１の表示装置）の画像（画像データ）の変化の有無の判断における処理を、図２４を用いて説明する。なお、実施例３では、実施例２と同様に、電子黒板２Ｂａを主催装置（サーバ部およびクライアント部）とし、電子黒板２Ｂｂ、２Ｂｃを参加装置（クライアント部）としている。

電子黒板２Ｂａでは、ＨＴＴＰ画面共有部５０１ＢがＰＣ８（そのブラウザ）から画面請求のリクエストを受信すると（図１９のステップＳ５１参照）、画面変化検知部５０２Ｂが当該電子黒板２Ｂａのディスプレイ３ａの画像（画像データ）の変化の有無を判断する。その画面変化検知部５０２Ｂでは、図２４のフローチャートに示すように、ステップＳ１０１において、ページ切替操作が為されたか否かを判断し、Ｙｅｓの場合はステップＳ１０２へ進み、Ｎｏの場合はステップＳ１０３へ進む。この画面変化検知部５０２Ｂでは、実施例１および実施例２と同様に、ページ切り替えのフラグが立っているか否かを判断することで、ページ切替操作が為されたか否かを判断する。

そして、画面変化検知部５０２Ｂでは、ステップＳ１０１においてページ切り替えのフラグが立っている場合、ディスプレイ３ａの画面（その画像（画像データ））が変化したものと判断する（ステップＳ１０２）。また、画面変化検知部５０２Ｂでは、ステップＳ１０１においてページ切り替えのフラグが立っていない場合、ストローク描画操作が為されたか否かを判断し、Ｙｅｓの場合はステップＳ１０２へ進み、Ｎｏの場合はステップＳ１０４へ進む（ステップＳ１０３）。この画面変化検知部５０２Ｂでは、ストローク編集のフラグが立っているか否かを判断することで、ストローク描画操作が為されたか否かを判断する。

そして、画面変化検知部５０２Ｂでは、ステップＳ１０３においてストローク編集のフラグが立っている場合、ディスプレイ３ａの画面（その画像（画像データ））が変化したものと判断する（ステップＳ１０２）。また、画面変化検知部５０２Ｂでは、ステップＳ１０３においてストローク編集のフラグが立っていない場合、送信用画像データの送信要求を受信する前後でディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）が異なるか否かを判断する（ステップＳ１０４）。その画面変化検知部５０２Ｂでは、一時的に記憶した送信用画像データと生成した送信用画像データとで異なる画素数が変化閾値（実施例３では全体の５％）を超えているか否かを判断することで、両画像（画像データ）が異なるか否かを判断する。このステップＳ１０４では、Ｙｅｓ（変化閾値（全体の５％）を超えている）場合はステップＳ１０２へ進み、Ｎｏ（変化閾値（全体の５％）未満である）の場合はステップＳ１０５へ進む。

そして、画面変化検知部５０２Ｂでは、ステップＳ１０４において異なる画素数が変化閾値（全体の５％）を超えている場合、ディスプレイ３ａの画面（その画像（画像データ））が変化したものと判断する（ステップＳ１０２）。また、画面変化検知部５０２Ｂでは、ステップＳ１０４において異なる画素数が変化閾値（全体の５％）を超えていない場合、ディスプレイ３ａの画面（その画像（画像データ））が変化していないものと判断する（ステップＳ１０５）。

このように、電子黒板２Ｂａでは、画面変化検知部５０２Ｂが、ディスプレイ３ａ（第１の表示装置）の画像（画像データ）が変化したか否かを判断する（図１９のステップＳ５２参照）。その後、電子黒板２Ｂａでは、閲覧送信制御部５００において、画面変化検知部５０２Ｂがディスプレイ３ａの画像（画像データ）が変化したものと判断すると、ＨＴＴＰ画面共有部５０１Ｂが送信用画像データをＰＣ８（そのブラウザ）に送信する（図１９のステップＳ５３参照）。また、電子黒板２Ｂａでは、画面変化検知部５０２Ｂがディスプレイ３ａの画像（画像データ）が変化していないものと判断すると、ＨＴＴＰ画面共有部５０１Ｂは送信用画像データをＰＣ８に送信しない。

この一連の動作は、実施例１および実施例２と同様に、２秒毎に繰り返されるものとされている。その一連の動作では、画面変化検知部５０２Ｂにページ切り替えあるいはストローク編集のフラグが立っているか否か、または送信用画像データが変化した否かに応じて、送信用画像データの送信が適宜行われる。そのページ切り替えのフラグが立てられる際の処理は、実施例１の電子黒板２ａと同様に、図２１の処理により行われる。また、ストローク編集のフラグが立てられる際の処理は、実施例２の電子黒板２Ｂａと同様に、図２３の処理により行われる。そして、電子黒板２Ｂａでは、送信用画像データが変化した否かの判断を可能とするために、画面変化検知部５０２Ｂが一時的に送信用画像データを記憶する。

次に、主催装置（サーバ部）としての実施例３の電子黒板２Ｂａにおいて、その画面変化検知部５０２Ｂが一時的に送信用画像データを記憶する際の処理について、図２５を用いて説明する。この図２５に示す例では、閲覧送信制御部５００の画面変化検知部５０２Ｂが、ディスプレイ３の画像（画像データ）に変化があると判断（図２４のフローチャートのステップＳ１０２）した後における場面を示している。

このため、電子黒板２Ｂａでは、画面変化検知部５０２Ｂが、ディスプレイ３の画面（その画像（画像データ））に変化があると判断する（ステップＳ１１１）。また、このステップＳ１１１では、画面変化検知部５０２Ｂが、今回の遠隔共有処理が開始されてから初めてＰＣ８へと送信用画像データを送信する場面であると判断した場合（後述する図２６のフローチャートのステップＳ１２７参照）も含むものとする。

次に、電子黒板２Ｂａでは、閲覧送信制御部５００において、ＨＴＴＰ画面共有部５０１Ｂが、画面変化検知部５０２Ｂが生成した送信用画像データを取得する（ステップＳ１１２）。

次に、電子黒板２Ｂａでは、閲覧送信制御部５００のＨＴＴＰ画面共有部５０１Ｂが、取得した送信用画像データをＰＣ８（そのブラウザ）に送信する（ステップＳ１１３）。この動作は、図１９のステップＳ５３の動作に相当する。このため、ＰＣ８では、送信された送信用画像データに基づく画像を表示させる。

そして、電子黒板２Ｂａでは、閲覧送信制御部５００のＨＴＴＰ画面共有部５０１Ｂが、送信用画像データをＰＣ８に送信した旨の信号を、同じく閲覧送信制御部５００の画面変化検知部５０２Ｂに送信する（ステップＳ１１４）。

すると、電子黒板２Ｂａでは、画面変化検知部５０２Ｂが、ＨＴＴＰ画面共有部５０１Ｂが送信した送信用画像データを一時的に記憶する（ステップＳ１１５）。この送信用画像データは、送信した旨の信号を受け取る際に当該ＨＴＴＰ画面共有部５０１Ｂから同時に受け取るものとしてもよい。

これにより、実施例３の電子黒板２Ｂａでは、ＨＴＴＰ画面共有部５０１ＢからＰＣ８へと送信用画像データを送信すると、その送信した送信用画像データを一時的に記憶することができる。このため、電子黒板２Ｂａでは、閲覧送信制御部５００の画面変化検知部５０２Ｂにおいて、新たに生成した送信用画像データが、先に送付した送信用画像データから変化したか否かを判断することが可能となる。

次に、実施例３の電子黒板２Ｂａにおいて、その画面変化検知部５０２Ｂが、送信用画像データの送信要求を受信する前後でディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）が異なるか否かを判断する際の処理について、図２６を用いて説明する。この図２６に示す例では、閲覧送信制御部５００の画面変化検知部５０２Ｂが、送信要求の前後でディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）が異なるか否かを判断する場面（図２４のフローチャートのステップＳ１０４）を示している。

画面変化検知部５０２Ｂでは、画像処理部３０の表示重畳部３６（図３参照）で重畳された画像（その画像データ）を取得し、その画像（画像データ）に基づいて送信用画像データを生成して、ステップＳ１２２へ進む（ステップＳ１２１）。

次に、画面変化検知部５０２Ｂでは、閲覧送信制御部５００のＨＴＴＰ画面共有部５０１Ｂが、先に送信用画像データをＰＣ８に送信したか否かを判断し、Ｙｅｓの場合はステップＳ１２３へ進み、Ｎｏの場合はステップＳ１２７へ進む（ステップＳ１２２）。この先に送信用画像データをＰＣ８に送信したか否かを判断は、例えば、ＨＴＴＰ画面共有部５０１Ｂが送信した際に送信フラグを立てて当該送信フラグが立っているか否かを判断することにより行うことができる。また、この判断は、当該画面変化検知部５０２Ｂが送信用画像データを一時的に記憶しているか否かを判断することにより行うものであってもよい。

そして、画面変化検知部５０２Ｂでは、先に送信用画像データをＰＣ８に送信したと判断した場合、ステップＳ１２１で生成した送信用画像データと、一時的に記憶した送信用画像データと、を比較して、ステップＳ１２４へ進む（ステップＳ１２３）。このステップＳ１２３では、上述したように、双方の送信用画像データにおける等しい座標位置となる両画素におけるＲＧＢ値が一致するか否かを判断することを全ての画素に対して行うことにより、両送信用画像データを比較する。

次に、画面変化検知部５０２Ｂでは、ステップＳ１２３での比較の結果に基づいて、異なる画素数が変化閾値（送信用画像データの全体の画素数の所定の割合（実施例３では５％））を超えたか否かを判断する（ステップＳ１２４）。そして、ステップＳ１２４では、Ｙｅｓの場合はステップＳ１２５へ進み、Ｎｏの場合はステップＳ１２６へ進む。

画面変化検知部５０２Ｂでは、ステップＳ１２４での比較により変化閾値（５％）を超えていると判断した場合、両送信用画像データに変化があるものと判断する（ステップＳ１２５）。これにより、画面変化検知部５０２Ｂでは、新たに生成した送信用画像データが先に送付した送信用画像データから変化したものと判断し、送信用画像データの送信要求の前後でディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）が異なるものと判断する。

また、画面変化検知部５０２Ｂでは、ステップＳ１２４での比較により変化閾値（５％）を超えていないと判断した場合、両送信用画像データに変化がないものと判断する（ステップＳ１２６）。これにより、画面変化検知部５０２Ｂでは、新たに生成した送信用画像データが先に送付した送信用画像データから変化していないものと判断し、送信用画像データの送信要求の前後でディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）が異ならないものと判断する。

さらに、画面変化検知部５０２Ｂでは、ステップＳ１２２で先に送信用画像データをＰＣ８に送信していないと判断した場合、今回の遠隔共有処理が開始されてから初めてＰＣ８へと送信用画像データを送信する場面であると判断する（ステップＳ１２７）。

このように、実施例３の画像処理システム１Ｂでは、生成した送信用画像データが、先に送信したものであって一時的に記憶した送信用画像データから変化しているか否かを画面変化検知部５０２Ｂで判断する。その生成した送信用画像データは、画像処理部３０の表示重畳部３６（図３参照）で重畳された画像（その画像データ）を取得し、その画像（画像データ）に基づいて生成している。このため、画像処理システム１Ｂでは、画面変化検知部５０２Ｂが、主催装置（サーバ部）としての電子黒板２Ｂａのディスプレイ３ａ（第１の表示装置）に表示されている画像（画像データ）が変化したか否かを判断することができる。

また、画像処理システム１Ｂでは、主催装置（サーバ部）としての電子黒板２Ｂａのディスプレイ３ａ（第１の表示装置）に表示される画像（画像データ）に対するストローク描画操作が為されると、画面変化検知部５０２Ｂにストローク編集のフラグを立てる。さらに、画像処理システム１Ｂでは、電子黒板２Ｂａのディスプレイ３ａに表示される画像（画像データ）のページ切り替えを行う操作（ページ切替操作）が為されると、画面変化検知部５０２Ｂにページ切り替えのフラグを立てる。そして、画像処理システム１Ｂでは、ＰＣ８（第２の表示装置）が画面請求のリクエストをＨＴＴＰ画面共有部５０１Ｂに送信した際に、画面変化検知部５０２Ｂにいずれか一方の当該フラグが立っていると、ＰＣ８に送信用画像データを送信する。加えて、画像処理システム１Ｂでは、双方の当該フラグが立っていない場合、送信要求の前後でディスプレイ３ａ（第１の表示装置）の画像（画像データ）が異なる場合には、ＰＣ８に送信用画像データを送信する。これにより、画像処理システム１Ｂでは、主催装置（サーバ部）としての電子黒板２Ｂａのディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）を、第２の表示装置（各ＰＣ８）に表示（共用）させることができ、当該第２の表示装置による閲覧を可能とすることができる。

なお、この実施例３では、閲覧送信制御部５００の画面変化検知部５０２Ｂが単に電子黒板２Ｂに設けられていたが、ＨＴＴＰサーバ内部のモジュールとして設けられる、すなわちサーバ部９０に内蔵されるものであってもよい。この場合、画面変化検知部５０２Ｂ内のページ切り替えやストローク編集のフラグを立てるための、当該画面変化検知部５０２Ｂとストローク処理部３２またはページ処理部３７との間での通信は、Ｓｏｃｋｅｔを利用することで容易なものとすることができる。

＜実施例３の主な効果＞
本発明に係る画像処理システムの一実施例としての実施例３の画像処理装置としての電子黒板２Ｂでは、基本的には実施例２の電子黒板２Ａと等しい構成であることから、同様の効果を得ることができる。

それに加えて、実施例３の電子黒板２Ｂでは、画面変化検知部５０２Ｂが、ページ切替操作およびストローク描画操作が為されていないと、送信用画像データの送信要求の前後でディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）が異なるか否かを判断する。そして、電子黒板２Ｂでは、送信要求の前後で画像（画像データ）が異なると判断した場合、ディスプレイ３ａ（第１の表示装置）の画像（画像データ）に変化があったものと判断する。加えて、電子黒板２Ｂでは、送信要求の前後で画像（画像データ）が異ならないと判断した場合、ディスプレイ３ａ（第１の表示装置）の画像（画像データ）に変化がないものと判断する。このように、電子黒板２Ｂでは、ページ切替操作およびストローク描画操作が為されていない場合のみ、送信用画像データの送信要求の前後でディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）が異なるか否かを判断する。このため、電子黒板２Ｂでは、ディスプレイ３ａ（第１の表示装置）の画像（画像データ）の変化の有無を判断する際のＣＰＵ１０１の利用率を極めて小さなものとすることができるとともに、ディスプレイ３ａ（第１の表示装置）の画像（画像データ）の変化を確実に把握することができる。

また、電子黒板２Ｂでは、ディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）が変化する場面として、極めて多くの割合を占めるものと考えられるページ切替操作およびストローク描画操作の有無を先に判断する。そして、電子黒板２Ｂでは、ページ切替操作およびストローク描画操作が為されていないと、送信用画像データの送信要求の前後でディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）が異なるか否かを判断する。このため、電子黒板２Ｂでは、ディスプレイ３ａ（第１の表示装置）の画像（画像データ）の変化の有無を判断する際により効率良くＣＰＵ１０１を利用することができるとともに、ディスプレイ３ａ（第１の表示装置）の画像（画像データ）の変化を確実に把握することができる。

さらに、電子黒板２Ｂでは、ページ切替操作およびストローク描画操作の有無を判断する際に、ページ切り替えのフラグまたはストローク編集のフラグのいずれか一方が立てられているか否かを判断する。また、電子黒板２Ｂでは、画面変化検知部５０２Ｂが、ページ切り替えのフラグおよびストローク編集のフラグの双方が立てられていないと、送信用画像データの送信要求の前後でディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）が異なるか否かを判断する。このように、電子黒板２Ｂでは、ページ切替操作およびストローク描画操作の有無の判断の際のＣＰＵ１０１の利用率をより小さなものとすることができるとともに、ディスプレイ３ａ（第１の表示装置）の画像（画像データ）の変化を確実に把握することができる。

電子黒板２Ｂでは、生成した送信用画像データが一時的に記憶した送信用画像データから変化したか否かを判断することにより、送信用画像データの送信要求の前後でディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）が異なるか否かを判断する。このため、電子黒板２Ｂでは、ＰＣ８（第２の表示装置）へと送信用画像データを送信するための動作を利用して、送信要求の前後で画像（画像データ）が異なるか否かを判断することができる。加えて、電子黒板２Ｂでは、先にＰＣ８に送信した送信用画像データと、ＰＣ８にこれから送信する送信用画像データと、を比較に用いていることから、効率よく比較することができ、ＰＣ８に表示させる画像（画像データ）を適切に更新することができる。このことから、電子黒板２Ｂでは、送信要求の前後でディスプレイ３ａ（第１の表示装置）の画像（画像データ）が異なるか否かの判断のための構成を簡易なものとしつつ、より適切にかつ効率よくＰＣ８（第２の表示装置）による画像（画像データ）の閲覧を可能とすることができる。

電子黒板２Ｂでは、生成した送信用画像データと一時的に記憶した送信用画像データとを比較することにより、ディスプレイ３ａ（第１の表示装置）の画像（画像データ）に変化があったか否かを判断する。その電子黒板２Ｂでは、その送信用画像データを、画像処理部３０の表示重畳部３６（図３参照）で重畳された画像（その画像データ）を取得し、その画像（画像データ）に基づいて生成する。このため、電子黒板２Ｂでは、主催装置（サーバ部）としての電子黒板２Ｂａのディスプレイ３ａ（第１の表示装置）に表示されている画像（画像データ）が変化した場合には、その変化を確実に把握することができる。このことから、電子黒板２Ｂでは、ディスプレイ３の画像（画像データ）が変化した際には、ＨＴＴＰ画面共有部５０１ＢがＰＣ８に送信用画像データを確実に送信することができる。これにより、電子黒板２Ｂでは、ディスプレイ３ａに表示された画像（画像データ）を、ＰＣ８に適切に表示（共用）させることができる。

電子黒板２Ｂでは、先にＨＴＴＰ画面共有部５０１ＢがＰＣ８（第２の表示装置）へと送信する送信用画像データと、当該ＨＴＴＰ画面共有部５０１ＢからＰＣ８へと送信させるべく生成した送信用画像データと、を比較するものとしている。このため、電子黒板２Ｂでは、ＨＴＴＰ画面共有部５０１ＢがＰＣ８へと送信用画像データを送信した際、その送信した送信用画像データを記憶する構成として、両送信用画像データを比較するものとすればよい。このため、電子黒板２Ｂでは、簡易な構成としつつＣＰＵ１０１の利用率をより下げることができ、ＰＣ８（第２の表示装置）による画像（画像データ）の閲覧を可能とすることができる。

本発明に係る画像処理システムの一実施例としての実施例３の画像処理システム１Ｂでは、上記した実施例３の電子黒板２Ｂ（画像処理装置）によりＰＣ８（第２の表示装置）による画像（画像データ）の閲覧を可能とするものであることから、上述した各効果を得ることができる。

したがって、本発明に係る実施例３の画像処理装置としての電子黒板２Ｂでは、ＣＰＵ１０１（制御部）の利用率を抑制しつつ第２の表示装置としてのＰＣ８による第１の表示装置としてのディスプレイ３に表示された画像データの閲覧を可能とすることができる。

なお、実施例の３の電子黒板２Ｂでは、一時的に記憶した送信用画像データと生成した送信用画像データとを比較していた。しかしながら、送信用画像データの送信要求の前後でディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）を比較するものであればよく、上記した実施例３に限定されるものではない。

次に、本発明に係る画像処理装置および画像処理システムの一実施例としての実施例４の画像処理装置（電子黒板２Ｃ）およびそれを用いた画像処理システム１Ｃについて、図２７から図２９を用いて説明する。この実施例４の画像処理装置（電子黒板２Ｃ）および画像処理システム１Ｃは、画面変化検知部５０２Ｃが、送信用画像データを複数のグリッドに分割し、その各グリッドを用いて両送信用画像データを比較するとともに当該送信用画像データを送信するものである。実施例４の画像処理装置（電子黒板２Ｃ）および画像処理システム１Ｃは、基本的な構成は上記した実施例３の画像処理装置（電子黒板２Ｂ）および画像処理システム１Ｂと同様であることから、等しい構成の個所には同じ符号を付し、その詳細な説明は省略する。

図２７は、実施例４の画面変化検知部５０２Ｃにおいて、送信用画像データを複数のグリッドに分割した様子を示す説明図である。また、図２８は、参加装置としてのＰＣ８と、主催装置としての電子黒板２Ｃａにおける閲覧送信制御部５００のＨＴＴＰ画面共有部５０１Ｃおよび画面変化検知部５０２Ｃと、の送信用画像データを一時的に記憶する際の処理を示したシーケンス図である。図２９は、実施例４の画面変化検知部５０２Ｃにおいて実行される送信用画像データの送信要求を受信する前後でディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）が異なるか否かを判断する判断処理を示すフローチャートである。

実施例４の電子黒板２Ｃでは、画面変化検知部５０２Ｃにおいて、実施例３の電子黒板２Ｂと同様に、ページ切替操作が為されたか否かを判断し、当該操作が為された場合、ディスプレイ３の画像（画像データ）を変化させる操作が為されたものと判断する。また、画面変化検知部５０２Ｃは、ページ切替操作が為されていない場合、実施例３の電子黒板２Ｂと同様に、ストローク描画操作が為されたか否かを判断する。さらに、実施例４の画面変化検知部５０２Ｃは、ストローク描画操作が為されていると、実施例３の電子黒板２Ｂと同様に、ディスプレイ３の画像（画像データ）を変化させる操作が為されたものと判断する。そして、画面変化検知部５０２Ｃは、ストローク描画操作が為されていないと、実施例３の電子黒板２Ｂと同様に、画面請求のリクエストの前後における当該画面変化検知部５０２Ｃで生成した２つの送信用画像データを比較する。画面変化検知部５０２Ｃは、双方の送信用画像データが異なるものと判断すると、ディスプレイ３の画像（画像データ）が変化したものと判断し、双方の送信用画像データが等しいものと判断すると、ディスプレイ３の画像（画像データ）が変化していないものと判断する。そして、この画面変化検知部５０２Ｃでは、双方の送信用画像データが異なるか否かの判断方法が、実施例３の電子黒板２Ｂとは異なるものとされている。

この画面変化検知部５０２Ｃは、送信用画像データを複数のグリッドに分割することが可能とされており、実施例３では、図２７に示すように、送信用画像データを１６×９のグリッドに分割することが可能とされている。画面変化検知部５０２Ｃは、画面請求のリクエストの前後における当該画面変化検知部５０２Ｃで生成した２つの送信用画像データを比較する際、この分割したグリッド毎に比較する。加えて、閲覧送信制御部５００のＨＴＴＰ画面共有部５０１Ｃは、送信用画像データをグリッド単位で取得することができるとともに、ＰＣ８に送信用画像データをグリッド単位で送信することができる。このように、画面変化検知部５０２Ｃは、実施例４では、画面請求のリクエストの前後における送信用画像データをグリッド単位で比較することが可能とされており、その比較結果に基づいてディスプレイ３（第１の表示装置）の画像（画像データ）の変化の有無を判断する。具体的には、以下の動作が行われる。

画面変化検知部５０２Ｃは、閲覧送信制御部５００のＨＴＴＰ画面共有部５０１Ｃが、送信用画像データを送信すると、その送信した送信用画像データを一時的に記憶する。この送信した送信用画像データの一時的な記憶は、閲覧送信制御部５００に一時的な記憶のためのメモリ部を設けるものであってもよく、クライアント部２０やサーバ部９０の記憶部の一部を用いるものであってもよい。また、送信した送信用画像データの一時的な記憶は、幾つかのグリッドのみが送信された場合、次のように行う。画面変化検知部５０２Ｃは、幾つかのグリッドのみが送信された場合、その送信されたグリッド（そのデータ）を、先に記憶した送信用画像データにおける対応するグリッドの位置に配置する。そして、画面変化検知部５０２Ｃでは、その配置した変化した各グリッド（そのデータ）を先に記憶した送信用画像データに合成して、新たな送信用画像データを再構成し、その再構成した送信用画像データを記憶する。

また、画面変化検知部５０２Ｃは、一時的に記憶した送信用画像データと、生成した送信用画像データと、をグリッド単位での比較を行うことが可能とされている。この両送信用画像データのグリッド単位での比較では、双方の画像データにおける等しい座標位置となるグリッド同士を比較することを、全てのグリッドに対して行う。そして、各グリッド同士の比較では、各グリッドにおける等しい座標位置となる各画素のＲＧＢ値が一致するか否かの判断を、全ての画素に対して行う。そして、ＲＧＢ値が異なる画素数が、グリッド内における変化閾値（グリッドの全体の画素数の所定の割合）を超えている場合は、当該両グリッドに変化があるものと判断し、超えていない場合は、当該両グリッドに変化がないものと判断する。

その変化閾値は、実施例３では送信用画像データの全体に対して設定されていたが、実施例４ではグリッド（グリッドにおけるデータの全体）に対して設定されていることを除くと、実施例３と同様である。すなわち、実施例４での変化閾値は、各グリッドの全体の画素数における所定の割合（当該割合となる個数）で示すものとして、その所定の割合を適宜設定可能なものとしている。変化閾値は、実施例４では各グリッドの全体の画素数の５％（５％となる個数）に設定している。その２つの送信用画像データのグリッド同士における各画素におけるＲＧＢ値が一致するか否かの判断は、実施例３と同様に、ＸＯＲゲートを用いて、双方の等しい座標位置となる両画素におけるＲＧＢ値の排他的論理和を求めることで行う。

これにより、画面変化検知部５０２Ｃは、一時的に記憶した送信用画像データと、生成した送信用画像データと、の間で変化したグリッドが存在するか否かを判断する。そして、画面変化検知部５０２Ｃは、変化したグリッドが存在する場合には、両送信用画像データに変化があるものと判断し、ディスプレイ３（第１の表示装置）の画像（画像データ）が異なるものと判断する。また、画面変化検知部５０２Ｃは、変化したグリッドが存在しない場合には、両送信用画像データに変化がないものと判断し、ディスプレイ３（第１の表示装置）の画像（画像データ）が異ならないものと判断する。このため、画面変化検知部５０２Ｃは、第１の表示装置としてのディスプレイ３に表示される画像（画像データ）が変化したか否かを判断する判断部として機能する。

なお、この両送信用画像データの比較は、双方のサイズを縮小した比較用画像データを生成して、それらを複数のグリッドに分割して上記した方法と同様に比較することにより行うものとしてもよい。この場合、２つの送信用画像データの各グリッドにおける細かい差を検出することは困難となるが、比較の動作を簡易なものとすることができ、ＣＰＵ１０１の利用率を下げることができる。この比較用画像データの縮小は、例えば、１／４サイズに縮小する場合、互いに隣り合う４つの画素におけるＲＧＢ値の平均値を求めることにより実行することができる。

＜実施例４の特徴的な処理または動作＞
実施例４の電子黒板２Ｃでは、ステップＳ１０４での画面変化検知部５０２Ｃによる画面請求のリクエストの前後での両送信用画像データの変化の有無の判断における処理内容が異なることを除くと、実施例３の電子黒板２Ｂと同様の図２４に示す処理を行う。このため、以下では、主催装置（サーバ部）としての実施例４の電子黒板２Ｃａにおいて、その画面変化検知部５０２Ｃが一時的に送信用画像データを記憶する際の処理について、図２８を用いて説明する。この図２８に示す例では、閲覧送信制御部５００の画面変化検知部５０２Ｃが、ディスプレイ３ａの画像（画像データ）に変化があると判断（図２４のフローチャートのステップＳ１０２）した後における場面を示している。

このため、電子黒板２Ｃａでは、画面変化検知部５０２Ｃが、ディスプレイ３の画面（その画像（画像データ））に変化があると判断する（ステップＳ１３１）。また、このステップＳ１３１では、画面変化検知部５０２Ｃが、今回の遠隔共有処理が開始されてから初めてＰＣ８へと送信用画像データを送信する場面であると判断した場合（後述する図２９のフローチャートのステップＳ１４８参照）も含むものとする。

次に、電子黒板２Ｃａでは、閲覧送信制御部５００において、ＨＴＴＰ画面共有部５０１Ｃが、画面変化検知部５０２Ｃが生成した送信用画像データを取得する（ステップＳ１３２）。このとき、ＨＴＴＰ画面共有部５０１Ｃは、今回の遠隔共有処理が開始されてから初めてＰＣ８へと送信用画像データを送信する場面である場合、送信用画像データ全体すなわち全てのグリッド（そのデータ）を取得する。また、ＨＴＴＰ画面共有部５０１Ｃは、ページ切替操作が為された場合（図２４のフローチャートのステップＳ１０１→ステップＳ１０２参照）、送信用画像データ全体すなわち全てのグリッド（そのデータ）を取得する。さらに、ＨＴＴＰ画面共有部５０１Ｃは、ストローク描画操作が為された場合（図２４のフローチャートのステップＳ１０１→ステップＳ１０３→ステップＳ１０２参照）、送信用画像データ全体すなわち全てのグリッド（そのデータ）を取得する。加えて、ＨＴＴＰ画面共有部５０１Ｃは、両送信用画像データが異なる場合（図２４のフローチャートのステップＳ１０１→ステップＳ１０３→ステップＳ１０４→ステップＳ１０２参照）、送信用画像データのうちの変化した各グリッド（そのデータ）を取得する。

次に、電子黒板２Ｃａでは、閲覧送信制御部５００のＨＴＴＰ画面共有部５０１Ｃが、取得した送信用画像データをＰＣ８（そのブラウザ）に送信する（ステップＳ１３３）。この動作は、図１９のステップＳ５３の動作に相当する。このとき、ＨＴＴＰ画面共有部５０１Ｃは、送信用画像データ全体（全てのグリッド（そのデータ））を取得した場合、その送信用画像データ全体（全てのグリッド（そのデータ））をＰＣ８に送信する。また、ＨＴＴＰ画面共有部５０１Ｃは、送信用画像データのうちの変化した各グリッド（そのデータ）を取得した場合、その変化した各グリッド（そのデータ）をＰＣ８に送信する。

すると、ＰＣ８（そのブラウザ）では、送信された送信用画像データを適宜再構成して、当該送信用画像データに基づく画像を表示させる（ステップＳ１３４）。このとき、ＰＣ８（そのブラウザ）では、送信用画像データ全体（全てのグリッド（そのデータ））が送信された場合、その送信用画像データに基づく画像を表示させる。また、ＰＣ８（そのブラウザ）では、送信用画像データのうちの変化した各グリッド（そのデータ）が送信された場合、その送信されたグリッド（そのデータ）を、先に表示させた送信用画像データにおける対応するグリッドの位置に配置する。そして、ＰＣ８（そのブラウザ）では、その配置した変化した各グリッド（そのデータ）を先に表示させた送信用画像データに合成して、新たな送信用画像データを再構成し、その再構成した送信用画像データに基づく画像を表示させる。

そして、電子黒板２Ｃａでは、閲覧送信制御部５００のＨＴＴＰ画面共有部５０１Ｃが、送信用画像データをＰＣ８に送信した旨の信号を、同じく閲覧送信制御部５００の画面変化検知部５０２Ｃに送信する（ステップＳ１３５）。

すると、電子黒板２Ｃａでは、画面変化検知部５０２Ｃが、ＨＴＴＰ画面共有部５０１Ｃが送信した送信用画像データを適宜再構成して一時的に記憶する（ステップＳ１３６）。この送信用画像データは、送信した旨の信号を受け取る際に当該ＨＴＴＰ画面共有部５０１Ｃから同時に受け取るものとしてもよい。このとき、画面変化検知部５０２Ｃでは、ＨＴＴＰ画面共有部５０１Ｃに送信用画像データ全体（全てのグリッド（そのデータ））を取得させた場合、その送信用画像データを記憶する。また、画面変化検知部５０２Ｃでは、ＨＴＴＰ画面共有部５０１Ｃに送信用画像データのうちの変化した各グリッド（そのデータ）を取得させた場合、その変化したグリッド（そのデータ）を先に表示させた送信用画像データに合成して再構成する。そして、画面変化検知部５０２Ｃでは、その再構成した送信用画像データを記憶する。

これにより、実施例４の電子黒板２Ｃａでは、ＨＴＴＰ画面共有部５０１ＣからＰＣ８へと送信用画像データを送信すると、当該送信用画像データを一時的に記憶することができる。そして、電子黒板２Ｃａでは、送信用画像データのうちの変化した各グリッド（そのデータ）を送信すると、その変化した各グリッド（そのデータ）に基づいて再構成された送信用画像データを一時的に記憶することができる。このため、電子黒板２Ｃａでは、閲覧送信制御部５００の画面変化検知部５０２Ｃにおいて、新たに生成した送信用画像データが、先に送付した送信用画像データから変化したか否かを判断することが可能となる。

次に、実施例４の電子黒板２Ｃａにおいて、その画面変化検知部５０２Ｃが、送信用画像データの送信要求を受信する前後でディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）が異なるか否かを判断する際の処理について、図２９を用いて説明する。この図２９に示す例では、閲覧送信制御部５００の画面変化検知部５０２Ｃが、送信要求の前後でディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）が異なるか否かを判断する場面（図２４のフローチャートのステップＳ１０４）を示している。

画面変化検知部５０２Ｃでは、画像処理部３０の表示重畳部３６（図３参照）で重畳された画像（その画像データ）を取得し、その画像（画像データ）に基づいて送信用画像データを生成して、ステップＳ１４２へ進む（ステップＳ１４１）。

次に、画面変化検知部５０２Ｃでは、ステップＳ１４１で生成した送信用画像データを複数のグリッド（実施例４では１６×９のグリッド（図２７参照））に分割して、ステップＳ１４３へ進む（ステップＳ１４２）。

次に、画面変化検知部５０２Ｃでは、閲覧送信制御部５００のＨＴＴＰ画面共有部５０１Ｃが、先に送信用画像データをＰＣ８に送信したか否かを判断し、Ｙｅｓの場合はステップＳ１４４へ進み、Ｎｏの場合はステップＳ１４８へ進む（ステップＳ１４３）。このステップＳ１４３は、図２６のフローチャートのステップＳ１２２と同様である。

そして、画面変化検知部５０２Ｃでは、先に送信用画像データをＰＣ８に送信したと判断した場合、ステップＳ１４１で生成した送信用画像データと、一時的に記憶した送信用画像データと、を比較して、ステップＳ１４５へ進む（ステップＳ１４４）。このステップＳ１４４では、上述したように、双方の送信用画像データの等しい座標位置となるグリッドにおいて、等しい座標位置となる両画素におけるＲＧＢ値が一致するか否かを判断することを全ての画素に対して行う。そして、ステップＳ１４４では、上述したように、この比較動作を、双方の送信用画像データにおける全てのグリッドに対して行うことにより、両送信用画像データを比較する。

次に、画面変化検知部５０２Ｃでは、ステップＳ１４４での比較の結果、変化したグリッドが存在するか否かを判断し、Ｙｅｓの場合はステップＳ１４６へ進み、Ｎｏの場合はステップＳ１４７へ進む（ステップＳ１４５）。このステップＳ１４５では、各グリッドにおいて、異なる画素数が変化閾値（実施例４ではグリッド全体の画素数の５％）を超えたか否かを判断する。そして、画面変化検知部５０２Ｃでは、変化閾値（５％）を超えた場合、当該グリッドが変化したものと判断し、変化閾値（５％）を超えていない場合、当該グリッドが変化していないものと判断する。これにより、画面変化検知部５０２Ｃでは、グリッド毎に変化したか否かを判断することができる。そして、画面変化検知部５０２Ｃでは、両送信用画像データにおいて、変化したグリッドが１つでも存在する場合にはＹｅｓとしてステップＳ１４６へ進み、いずれもグリッドも変化してない場合にはＮｏとしてステップＳ１４７へ進む。

画面変化検知部５０２Ｃでは、ステップＳ１４５での比較の結果、変化したグリッドが１つでも存在する場合には、両送信用画像データに変化があるものと判断する（ステップＳ１４６）。これにより、画面変化検知部５０２Ｃでは、新たに生成した送信用画像データが先に送付した送信用画像データから変化したものと判断し、送信用画像データの送信要求の前後でディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）が異なるものと判断する。

また、画面変化検知部５０２Ｃでは、ステップＳ１４５での比較の結果、いずれもグリッドも変化してない場合には、両送信用画像データに変化がないものと判断する（ステップＳ１４７）。これにより、画面変化検知部５０２Ｃでは、新たに生成した送信用画像データが先に送付した送信用画像データから変化していないものと判断し、送信用画像データの送信要求の前後でディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）が異ならないものと判断する。

さらに、画面変化検知部５０２Ｃでは、ステップＳ１４３で先に送信用画像データをＰＣ８に送信していないと判断した場合、今回の遠隔共有処理が開始されてから初めてＰＣ８へと送信用画像データを送信する場面であると判断する（ステップＳ１４８）。

このように、実施例４の画像処理システム１Ｃでは、生成した送信用画像データが、先に送信したものであって一時的に記憶した送信用画像データから変化しているか否かを、画面変化検知部５０２Ｃがグリッド毎の比較に基づいて判断する。その生成した送信用画像データは、画像処理部３０の表示重畳部３６（図３参照）で重畳された画像（その画像データ）を取得し、その画像（画像データ）に基づいて生成している。このため、画像処理システム１Ｃでは、画面変化検知部５０２Ｃが、主催装置（サーバ部）としての電子黒板２Ｃａのディスプレイ３ａ（第１の表示装置）に表示されている画像（画像データ）が変化したか否かをグリッド毎の比較により判断することができる。

また、画像処理システム１Ｃでは、主催装置（サーバ部）としての電子黒板２Ｃａのディスプレイ３ａ（第１の表示装置）に表示される画像（画像データ）に対するストローク描画操作が為されると、画面変化検知部５０２Ｃにストローク編集のフラグを立てる。さらに、画像処理システム１Ｃでは、電子黒板２Ｃａのディスプレイ３ａに表示される画像（画像データ）のページ切り替えを行う操作（ページ切替操作）が為されると、画面変化検知部５０２Ｃにページ切り替えのフラグを立てる。そして、画像処理システム１Ｃでは、ＰＣ８（第２の表示装置）が画面請求のリクエストをＨＴＴＰ画面共有部５０１Ｃに送信した際に画面変化検知部５０２Ｃにいずれか一方の当該フラグが立っていると、ＰＣ８に送信用画像データを送信する。加えて、画像処理システム１Ｃでは、双方の当該フラグが立っていない場合であって、ディスプレイ３ａ（第１の表示装置）の画像（画像データ）が変化している場合には、送信用画像データのうちの変化した各グリッド（そのデータ）をＰＣ８に送信する。これにより、画像処理システム１Ｃでは、主催装置（サーバ部）としての電子黒板２Ｃａのディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）を、第２の表示装置（各ＰＣ８）に表示（共用）させることができ、当該第２の表示装置による閲覧を可能とすることができる。

なお、この実施例４では、閲覧送信制御部５００の画面変化検知部５０２Ｃが単に電子黒板２Ｃに設けられていたが、ＨＴＴＰサーバ内部のモジュールとして設けられる、すなわちサーバ部９０に内蔵されるものであってもよい。この場合、画面変化検知部５０２Ｃ内のページ切り替えやストローク編集のフラグを立てるための、当該画面変化検知部５０２Ｃとストローク処理部３２またはページ処理部３７との間での通信は、Ｓｏｃｋｅｔを利用することで容易なものとすることができる。

＜実施例４の主な効果＞
本発明に係る画像処理システムの一実施例としての実施例４の画像処理装置としての電子黒板２Ｃでは、基本的には実施例３の電子黒板２Ｂと等しい構成であることから、同様の効果を得ることができる。

それに加えて、実施例４の電子黒板２Ｃでは、生成した送信用画像データと一時的に記憶した送信用画像データとを、グリッド毎に各画素におけるＲＧＢ値を比較することにより、グリッド毎に変化したか否かを判断する。そして、電子黒板２Ｃａでは、変化したグリッドが存在すると両送信用画像データが変化したものと判断し、ディスプレイ３ａの画像（画像データ）が変化したものと判断する。このため、電子黒板２Ｃでは、両送信用画像データにおいて、変化の有無をグリッド単位で把握することができる。これにより、電子黒板２Ｃでは、両送信用画像データの変化によりディスプレイ３ａの画像（画像データ）が変化した場合、送信用画像データのうちの変化した各グリッド（そのデータ）のみをＨＴＴＰ画面共有部５０１ＣからＰＣ８へと送信させることができる。これにより、電子黒板２Ｃでは、ディスプレイ３ａに表示された画像（画像データ）をＰＣ８に適切に表示（共用）させつつ、そのために送信するデータ量を減らすことができる。よって、電子黒板２Ｃでは、送信用画像データの送信に要するネットワークの帯域のスループットを低減することができる。

本発明に係る画像処理システムの一実施例としての実施例４の画像処理システム１Ｃでは、上記した実施例４の電子黒板２Ｃ（画像処理装置）によりＰＣ８（第２の表示装置）による画像（画像データ）の閲覧を可能とするものであることから、上述した各効果を得ることができる。

したがって、本発明に係る実施例４の画像処理装置としての電子黒板２Ｃでは、ＣＰＵ１０１（制御部）の利用率を抑制しつつ第２の表示装置としてのＰＣ８による第１の表示装置としてのディスプレイ３に表示された画像データの閲覧を可能とすることができる。

なお、実施例４の電子黒板２Ｃでは、一時的に記憶した送信用画像データと生成した送信用画像データとをグリッド単位で比較していた。しかしながら、送信用画像データの送信要求の前後でディスプレイ３ａ（第１の表示装置）に表示された画像（画像データ）をグリッド単位で比較するものであればよく、上記した実施例４に限定されるものではない。

なお、上記した各実施例では、本発明に係る画像処理装置の一例としての電子黒板２、２Ａ、２Ｂ、２Ｃについて説明したが、画像データが表示される第１の表示装置および第２の表示装置がネットワークを介して接続され、画像データを処理する画像処理装置であって、前記画像処理装置は、前記第２の表示装置からの画像データの送信要求を受信する受信部と、前記第１の表示装置に表示される画像データがユーザによる操作に基づいて変化したか否かを判断する判断部と、画像データを前記第２の表示装置に送信する送信部と、を備え、前記送信部は、前記判断部が前記第１の表示装置に表示される画像データが、ユーザによる操作に基づいて変化していると判断した場合、画像データを前記第２の表示装置に送信する画像処理装置であればよく、上記した各実施例に限定されるものではない。

また、上記した各実施例では、第１の表示装置（ディスプレイ３）に表示される画像（画像データ）を変化させるユーザによる操作として、画像（画像データ）のページを切り替えるページ切替操作、および第１の表示装置に表示された画像（画像データ）に描画するストローク描画操作の例を示していた。しかしながら、第１の表示装置（ディスプレイ３）に表示される画像（画像データ）を変化させる操作であれば、他の操作であってもよく、上記した各実施例に限定されるものではない。なお、この他の操作とする場合であっても、当該他の操作が為された際に判断部（画面変化検知部５０２等）に操作実行フラグを立てるようにすると、ストローク編集のフラグやページ切り替えのフラグを立てた場合と同様の効果を得ることができる。

さらに、上記した実施例２では、判断部（画面変化検知部５０２Ａ）において、ページ切替操作が為されていない場合に、ストローク描画操作が為されたか否かを判断するものとされていた。しかしながら、ページ切替操作の実行の有無の判断を行うことなく、ストローク描画操作の実行の有無の判断を行うものであってもよく、実施例２の構成に限定されるものではない。同様に、ストローク描画操作の実行が為されていない場合にページ切替操作の実行の有無の判断を行うものであってもよく、実施例２の構成に限定されるものではない。

上記した各実施例では、操作実行フラグ（ストローク編集のフラグやページ切り替えのフラグ）が立っているか否かを判断することにより、第１の表示装置（ディスプレイ３）に表示される画像（画像データ）を変化させる操作が為されたか否かを、判断していた。しかしながら、第１の表示装置（ディスプレイ３）に表示される画像（画像データ）を変化させるユーザによる操作が為されたことを他の方法により判断するものであってもよく、上記した各実施例に限定されるものではない。

上記した実施例３および実施例４では、判断部（画面変化検知部５０２Ｂ、５０２Ｃ）が、ページ切替操作およびストローク描画操作が為されていない場合に、送信要求の前後で第１の表示装置（ディスプレイ３ａ）の画像（画像データ）が異なるか否かを判断していた。しかしながら、ページ切替操作またはストローク描画操作のいずれか一方の実行の有無を判断するものとして、送信要求の前後で第１の表示装置の画像（画像データ）が異なるか否かを判断するものであってもよく、実施例３および実施例４の構成に限定されるものではない。この場合、ページ切替操作またはストローク描画操作のいずれであっても、当該操作が為されていない場合に、送信要求の前後で第１の表示装置の画像（画像データ）が異なるか否かを判断するものとすればよい。同様に、第１の表示装置（ディスプレイ３）に表示される画像（画像データ）を変化させる他の操作が為されていない場合に、送信要求の前後で第１の表示装置の画像（画像データ）が異なるか否かを判断するものであってもよく、実施例３および実施例４の構成に限定されるものではない。

以上、本発明の画像処理装置および画像処理システムを各実施例に基づき説明してきたが、具体的な構成については各実施例に限られるものではなく、本発明の要旨を逸脱しない限り、設計の変更や追加等は許容される。

１、１Ａ、１Ｂ、１Ｃ 画像処理システム
２、２Ａ、２Ｂ、２Ｃ （画像処理装置の一例としての）電子黒板
３、３ａ、３ｂ、３ｃ （第１の表示装置の一例としての）ディスプレイ
８、８ａ、８ｂ、８ｃ （第２の表示装置の一例としての）ＰＣ
９ （ネットワークの一例としての）通信ネットワーク
３２ （一例としての操作検知部を構成する）ストローク処理部
３７ （一例としての操作検知部を構成する）ページ処理部
５０１、５０１Ｂ、５０１Ｃ （受信部および送信部の一例としての）ＨＴＴＰ画面共有部
５０２、５０２Ａ、５０２Ｂ、５０２Ｃ （判断部の一例としての）画面変化検知部

特開２００５−０９２２５８号公報

Claims (9)

1. 画像データが表示される第１の表示装置および第２の表示装置がネットワークを介して接続され、画像データを処理する画像処理装置であって、
   前記第２の表示装置からの画像データの送信要求を受信する受信部と、
   前記第１の表示装置に表示される画像データがユーザの操作に基づいて変化したか否かを判断する判断部と、
   前記判断部が前記第１の表示装置に表示される画像データがユーザの操作に基づいて変化していると判断した場合、画像データを前記第２の表示装置に送信する送信部と、を備え、
   前記判断部は、前記第１の表示装置に表示される画像データが変化しないと判断した場合、前記送信要求を受信する前に前記第１の表示装置に表示された画像データを縮小した第１比較用画像データと、前記送信要求を受信した後に前記第１の表示装置に表示されている画像データを縮小した第２比較用画像データと、を生成し、前記第１比較用画像データにおける各画素と前記第２比較用画像データにおける各画素とを比較して、変化している画素数の割合が予め設定した変化閾値を超えていると、前記第１の表示装置に表示される画像データが変化したものと判断することを特徴とする画像処理装置。
2. 前記判断部は、前記第１の表示装置に表示された画像データのページを切り替えるページ切替操作が為された場合、変化したと判断することを特徴とする請求項１に記載の画像処理装置。
3. 前記判断部は、前記第１の表示装置に表示された画像データに対して、ストローク描画操作を受け付けた場合、変化したと判断することを特徴とする請求項１または請求項２に記載の画像処理装置。
4. 請求項１から請求項３のいずれか１項に記載の画像処理装置であって、
   前記第１の表示装置に表示される画像データが変化したことを検知した場合、操作実行フラグを立てる操作検知部をさらに備えることを特徴とする画像処理装置。
5. 前記判断部は、前記第１比較用画像データおよび前記第２比較用画像データを複数のグリッドに分割し、前記第１比較用画像データにおける各画素と前記第２比較用画像データにおける各画素との比較を前記グリッド毎に行い、前記グリッド毎に変化している画素数の割合が前記変化閾値を超えていると当該グリッドが変化したものと判断し、前記第１比較用画像データと前記第２比較用画像データとにおいて変化した前記グリッドが存在すると前記第１の表示装置に表示される画像データが変化したものと判断することを特徴とする請求項１から請求項４のいずれか１項に記載の画像処理装置。
6. 前記送信部は、前記送信要求を受信すると、前記判断部により前記第１の表示装置に表示される画像データが変化したと判断された場合に、前記第１の表示装置に表示される画像データにおいて前記判断部により変化したと判断された前記グリッドに対応するグリッドのデータのみを前記第２の表示装置に送信することを特徴とする請求項５に記載の画像処理装置。
7. 請求項１から請求項６のいずれか１項に記載の画像処理装置であって、
   さらに、前記第１の表示装置に表示される画像データに基づいて、前記送信部が前記第２の表示装置に送信するための送信用画像データを生成する送信データ生成部を備え、
   前記判断部は、前記送信要求を受信する前に前記送信部が前記第２の表示装置に送信した前記送信用画像データを縮小した第３比較用画像データと、前記送信要求を受信した後に前記送信データ生成部が生成した前記送信用画像データを縮小した第４比較用画像データと、を生成し、前記第３比較用画像データにおける各画素と前記第４比較用画像データにおける各画素とを比較することで、前記第１の表示装置に表示される画像データが変化したか否かを判断することを特徴とする画像処理装置。
8. 前記判断部は、前記送信部が前記第２の表示装置に前記送信用画像データを送信すると、その送信した前記送信用画像データを一時的に記憶することを特徴とする請求項７に記載の画像処理装置。
9. 請求項１から請求項８のいずれか１項に記載の画像処理装置と、前記第１の表示装置と、前記第２の表示装置と、が前記ネットワークを介して接続されていることを特徴とする画像処理システム。