JP5058042B2

JP5058042B2 - 画像通信システムおよび画像通信方法

Info

Publication number: JP5058042B2
Application number: JP2008076889A
Authority: JP
Inventors: 大介秋葉
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 2008-03-24
Filing date: 2008-03-24
Publication date: 2012-10-24
Anticipated expiration: 2028-03-24
Also published as: JP2009232290A

Description

本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムおよび画像通信方法に関する。

データ通信の通信帯域の増加に伴い、電話通信と同時に画像通信を行う、いわゆるテレビ電話通信が容易に実現可能となっている。

テレビ電話通信を実現するテレビ電話通信装置（以下では単に「通信装置」と略称する。）は、通話者の画像を撮像するための撮像手段、音声データおよび画像データを送受信するための通信手段、画像を表示する表示手段、音声の入出力を行う送受話器などを備えている。

撮像手段によって撮像された画像は、画像データとして相手側通信装置に送信されるとともに、通話者の確認用に表示手段の一部に表示される。

このような通信システムは、たとえば遠隔地を結んでのテレビ会議やプレゼンテーションなどに利用される。

会議やプレゼンテーション中には、相手側から送られてくる画像に表示されている物を指定して説明を求めたり、質問する場合が想定されるが、そのときは、口頭でその対象物を指定する必要がある。対象物が明確なものであれば、口頭での説明であっても十分に伝わるかもしれないが、対象物が不明確なものもあり、口頭で正確に対象物を指定することが困難なときがある。対象物を指定するだけで長時間を要することになったり、相手側で対象物とは別の物を対象物として誤って認識してしまうと、意思の疎通ができずに会議やプレゼンテーションがスムーズに進まなくなってしまう。

特許文献１記載の画像入出力システムでは、プレゼンテーション側で自機器の表示タブレットの位置情報入力部を用いて原稿画像上の特定の箇所を示す位置情報を入力すると、その位置情報が送信部を介して相手装置に送られ、相手装置ではその送られてきた位置情報に基づき、表示タブレットの原稿画像表示部に表示された原稿画像の対応する位置にカーソルを表示させる。

特許文献２記載の情報入力装置は、ポインタの位置を認識するカメラ装置とディスプレイ装置とが、それぞれ異なる偏光を通過させる偏光フィルタを有し、カメラパラメータなどを相手側に伝送することで、情報を表示した画面に、通信相手の映像を一致するように表示する。

特開平８−９０７５号公報特開２００５−１１７２８５号公報

特許文献１記載の発明では、原稿画像の特定位置を指定することができるが、プレゼンテーション側が自らの原稿の位置を指定できることに留まっており、プレゼンテーションを受ける側からは何ら指定することができない。特許文献２記載の発明では、指定位置を相手側に伝えるために伝送すべきデータ量が多く、さらにカメラ装置とディスプレイ装置とで異なる偏光フィルタの貼り付けを行う必要があるなどハードウェア構成を追加する必要がある。

本発明の目的は、簡単な構成で、相手側に対象物を明確に把握させることができる画像通信システムおよび画像通信方法を提供することである。

本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムにおいて、
前記第１画像通信装置は、
第２画像通信装置から送られる映像を受信し、第２画像通信装置へ映像を送信する第１通信手段と、
第１主映像を撮像する第１撮像手段と、
第２画像通信装置から送られる第２主映像を表示する第１表示手段と、
第２画像通信装置から送られる第２主映像の任意の範囲を指定する第１映像位置指定手段と、
前記第１映像位置指定手段にて指定された範囲に表示されている映像を第１副映像として抽出する第１映像抽出手段と、を備え、
前記第１通信手段は、前記第１撮像手段が撮像した第１主映像を第２画像通信装置に送信し、前記第１映像抽出手段が第１副映像を抽出すると、抽出された第１副映像を前記第２画像通信装置に送信し、
前記第１表示手段は、第２画像通信装置から送られる第２副映像を前記第１通信手段が受信すると、受信した第２副映像を表示し、
前記第２画像通信装置は、
第１画像通信装置から送られる映像を受信し、第１画像通信装置へ映像を送信する第２通信手段と、
第２主映像を撮像する第２撮像手段と、
第１画像通信装置から送られる第１主映像を表示する第２表示手段と、
第１画像通信装置から送られる第１主映像の任意の範囲を指定する第２映像位置指定手段と、
前記第２映像位置指定手段にて指定された範囲に表示されている映像を第２副映像として抽出する第２映像抽出手段と、
前記第２通信手段は、前記第２撮像手段が撮像した第２主映像を第１画像通信装置に送信し、前記第２映像抽出手段が第２副映像を抽出すると、抽出された第２副映像を前記第１画像通信装置に送信し、
前記第２表示手段は、第１画像通信装置から送られる第１副映像を前記第１通信手段が受信すると、受信した第１副映像を表示することを特徴とする画像通信システムである。

また本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムにおいて、
前記第１画像通信装置は、
第２画像通信装置から送られる映像を受信し、第２画像通信装置へ映像を送信する第１通信手段と、
第１主映像を撮像する第１撮像手段と、
第２画像通信装置から送られる第２主映像を表示する第１表示手段と、
第２画像通信装置から送られる第２主映像の任意の範囲を指定する第１映像位置指定手段と、
前記第１映像位置指定手段にて指定された範囲を示す範囲情報を第１範囲情報として抽出する第１範囲抽出手段と、を備え、
前記第１通信手段は、前記第１撮像手段が撮像した第１主映像を第２画像通信装置に送信し、前記第１範囲抽出手段が第１範囲情報を抽出すると、抽出された第１範囲情報を前記第２画像通信装置に送信し、
前記第１表示手段は、第２画像通信装置から送られる第２範囲情報を受信すると、受信した第２範囲情報に基づいて、第２画像通信装置に送信した第１主映像から、第２副映像を抽出して表示し、
前記第２画像通信装置は、
第１画像通信装置から送られる映像を受信し、第１画像通信装置へ映像を送信する第２通信手段と、
第２主映像を撮像する第２撮像手段と、
第１画像通信装置から送られる第１主映像を表示する第２表示手段と、
第１画像通信装置から送られる第１主映像の任意の範囲を指定する第２映像位置指定手段と、
前記第２映像位置指定手段にて指定された範囲を示す範囲情報を第２範囲情報として抽出する第２範囲抽出手段と、を備え、
前記第２通信手段は、前記第２撮像手段が撮像した第２主映像を第１画像通信装置に送信し、前記第２範囲抽出手段が第２範囲情報を抽出すると、抽出された第２範囲情報を前記第１画像通信装置に送信し、
前記第２表示手段は、第１画像通信装置から送られる第１範囲情報を受信すると、受信した第１範囲情報に基づいて、第１画像通信装置に送信した第２主映像から、第１副映像を抽出して表示することを特徴とする画像通信システムである。

また本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムにおいて、
前記第１画像通信装置は、
第２画像通信装置から送られる映像を受信し、第２画像通信装置へ映像を送信する第１通信手段と、
第１主映像を撮像する第１撮像手段と、
第２画像通信装置から送られる第２主映像を表示する第１表示手段と、
第２画像通信装置から送られる第２主映像の任意の範囲を指定する第１映像位置指定手段と、
前記第１映像位置指定手段にて指定された範囲に表示されている映像を第１副映像として抽出する第１映像抽出手段と、
第１映像抽出手段が第１副映像を抽出すると、前記第１撮像手段で撮像した第１主映像と前記第１映像抽出手段が抽出した第１副映像と合成して第１合成画像を生成する第１合成手段と、を備え、
前記第１通信手段は、前記第１合成手段が第１合成画像を生成すると、前記第１撮像手段が撮像した第１主映像の代わりに第１合成画像を前記第２画像通信装置に送信し、
前記第１表示手段は、第２画像通信装置から送られる第２合成映像を前記第１通信手段が受信すると、受信した第２合成映像を表示し、
前記第２画像通信装置は、
第１画像通信装置から送られる映像を受信し、第１画像通信装置へ映像を送信する第２通信手段と、
第２主映像を撮像する第２撮像手段と、
第１画像通信装置から送られる第１主映像を表示する第２表示手段と、
第１画像通信装置から送られる第１主映像の任意の範囲を指定する第２映像位置指定手段と、
前記第２映像位置指定手段にて指定された範囲に表示されている映像を第２副映像として抽出する第２映像抽出手段と、
第２映像抽出手段が第２副映像を抽出すると、前記第２撮像手段で撮像した第２主映像と前記第２映像抽出手段が抽出した第２副映像と合成して第２合成画像を生成する第２合成手段と、を備え、
前記第２通信手段は、前記第２合成手段が第２合成画像を生成すると、前記第２撮像手段が撮像した第２主映像の代わりに第２合成画像を前記第１画像通信装置に送信し、
前記第２表示手段は、第１画像通信装置から送られる第１合成映像を前記第２通信手段が受信すると、受信した第１合成映像を表示することを特徴とする画像通信システムである。

また本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信方法において、
前記第１画像通信装置では、
第１主映像を撮像する第１撮像工程と、
第１主映像を第２画像通信装置に送信する第１主送信工程と、
第２画像通信装置から送られる第２主映像を受信して表示する第１主表示工程と、
第２画像通信装置から送られる第２主映像の任意の範囲を指定する第１映像位置指定工程と、
前記第１映像位置指定工程にて指定された範囲に表示されている映像を第１副映像として抽出する第１映像抽出工程と、
前記第１映像抽出工程で第１副映像が抽出されると、抽出された第１副映像を前記第２画像通信装置に送信する第１副送信工程と、
第２画像通信装置から送られる第２副映像を受信すると、受信した第２副映像を表示する第１副表示工程とを実行し、
前記第２画像通信装置では、
第２主映像を撮像する第２撮像工程と、
第２主映像を第１画像通信装置に送信する第２主送信工程と、
第１画像通信装置から送られる第１主映像を受信して表示する第２主表示工程と、
第１画像通信装置から送られる第１主映像の任意の範囲を指定する第２映像位置指定工程と、
前記第２映像位置指定工程にて指定された範囲に表示されている映像を第２副映像として抽出する第２映像抽出工程と、
前記第２映像抽出工程で第２副映像が抽出されると、抽出された第２副映像を前記第１画像通信装置に送信する第２副送信工程と、
第１画像通信装置から送られる第１副映像を受信すると、受信した第１副映像を表示する第２副表示工程とを実行することを特徴とする画像通信方法である。

また本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信方法において、
前記第１画像通信装置では、
第１主映像を撮像する第１撮像工程と、
第１主映像を第２画像通信装置に送信する第１主送信工程と、
第２画像通信装置から送られる第２主映像を受信して表示する第１主表示工程と、
第２画像通信装置から送られる第２主映像の任意の範囲を指定する第１映像位置指定工程と、
前記第１映像位置指定工程にて指定された範囲を示す範囲情報を第１範囲情報として抽出する第１範囲抽出工程と、
前記第１範囲抽出工程で第１範囲情報が抽出されると、抽出された第１範囲情報を前記第２画像通信装置に送信する第１範囲送信工程と、
第２画像通信装置から送られる第２範囲情報を受信すると、受信した第２範囲情報に基づいて、第２画像通信装置に送信した第１主映像から、第２副映像を抽出して表示する第１副表示工程とを実行し、
前記第２画像通信装置では、
第２主映像を撮像する第２撮像工程と、
第２主映像を第１画像通信装置に送信する第２主送信工程と、
第１画像通信装置から送られる第１主映像を受信して表示する第２主表示工程と、
第１画像通信装置から送られる第１主映像の任意の範囲を指定する第２映像位置指定工程と、
前記第２映像位置指定工程にて指定された範囲を示す範囲情報を第２範囲情報として抽出する第２範囲抽出工程と、
前記第２範囲抽出工程で第２範囲情報が抽出されると、抽出された第２範囲情報を前記第１画像通信装置に送信する第２範囲送信工程と、
第１画像通信装置から送られる第１範囲情報を受信すると、受信した第１範囲情報に基づいて、第１画像通信装置に送信した第２主映像から、第１副映像を抽出して表示する第２副表示工程とを実行することを特徴とする画像通信方法である。

また本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信方法において、
前記第１画像通信装置では、
第１主映像を撮像する第１撮像工程と、
第１主映像を第２画像通信装置に送信する第１主送信工程と、
第２画像通信装置から送られる第２主映像を受信して表示する第１主表示工程と、
第２画像通信装置から送られる第２主映像の任意の範囲を指定する第１映像位置指定工程と、
前記第１映像位置指定工程にて指定された範囲に表示されている映像を第１副映像として抽出する第１映像抽出工程と、
第１映像抽出工程で第１副映像が抽出されると、前記第１主映像と抽出された第１副映像と合成して第１合成画像を生成する第１合成工程と、
前記第１合成工程で第１合成画像が生成されると、第１主映像の代わりに第１合成画像を前記第２画像通信装置に送信する第１合成送信工程と、
第２画像通信装置から送られる第２合成映像を受信すると、受信した第２合成映像を表示する第１合成表示工程とを実行し、
前記第２画像通信装置では、
第２主映像を撮像する第２撮像工程と、
第２主映像を第１画像通信装置に送信する第２主送信工程と、
第１画像通信装置から送られる第１主映像を受信して表示する第２主表示工程と、
第１画像通信装置から送られる第１主映像の任意の範囲を指定する第２映像位置指定工程と、
前記第２映像位置指定工程にて指定された範囲に表示されている映像を第２副映像として抽出する第２映像抽出工程と、
第２映像抽出工程で第２副映像が抽出されると、前記第２主映像と抽出された第２副映像と合成して第２合成画像を生成する第２合成工程と、
前記第２合成工程で第２合成画像が生成されると、第２主映像の代わりに第２合成画像を前記第１画像通信装置に送信する第２合成送信工程と、
第１画像通信装置から送られる第１合成映像を受信すると、受信した第１合成映像を表示する第２合成表示工程とを実行することを特徴とする画像通信方法である。

本発明によれば、第１画像通信装置と第２画像通信装置とは、同一の構成を有している。以下では第１画像通信装置から第２画像通信装置へ第１副映像を表示する場合について説明する。第２画像通信装置から第１画像通信装置へ第２副映像を表示する場合についても同様である。
前記第１画像通信装置では、第１映像位置指定手段が、第２画像通信装置から送られてきた第２主映像の任意の範囲を指定すると、第１映像抽出手段が、前記第１映像位置指定手段にて指定された範囲に表示されている映像を第１副映像として抽出する。第１通信手段は、前記第１映像抽出手段にて抽出した第１副映像を前記第２画像通信装置に送信する。

前記第２画像通信装置では、第２通信手段が、前記第１画像通信装置から送られてくる第１副映像を受信すると、第２表示手段が、前記第２通信手段にて受信した第１副映像を表示する。

第１画像通信装置の操作者は、相手側に知らせたい対象物が表示されている範囲を指定するだけでよく、第１画像通信装置の操作者は、表示された副映像を見るだけでよい。

したがって、簡単な構成で、相手側に対象物を明確に把握させることができる。
また本発明によれば、前記第１画像通信装置では、第１映像位置指定手段が、第２画像通信装置から送られてきた第２主映像の任意の範囲を指定すると、第１通信手段が、第１撮像手段で撮像した第１主映像および前記第１映像位置指定手段にて指定した範囲を示す範囲情報を前記第２画像通信装置に送信する。

前記第２画像通信装置は、第２通信手段が、前記第１画像通信装置から送られてくる第１主映像および範囲情報を受信すると、第２抽出手段が、第１画像通信装置に送信した第２主映像から、前記第２通信手段にて受信した範囲情報に基づいて、副映像を抽出し、第２表示手段が、前記第２通信手段にて受信した前記第２抽出手段にて抽出した副映像を表示する。

したがって、簡単な構成で、相手側に対象物を明確に把握させることができる。さらに、画像データそのものではなく範囲情報、たとえば座標などを送信すればよいので、送信するデータ量も少なくて済む。

また本発明によれば、前記第１画像通信装置では、第１映像位置指定手段が、第２画像通信装置から送られてきた第２主映像の任意の範囲を指定すると、第１映像抽出手段が、前記第１映像位置指定手段にて指定された範囲に表示されている映像を第１副映像として抽出する。第１合成手段は、第１撮像手段で撮像した第１主映像と前記第１映像抽出手段にて抽出した第１副映像と合成して第１合成画像を生成し、第１通信手段が、前記第１合成手段にて合成された第１合成画像を前記第２画像通信装置に送信する。

前記第２画像通信装置では、第２通信手段が、前記第１画像通信装置から送られてくる前記第１合成画像を受信すると、第２表示手段が、前記第２通信手段にて受信した前記第１合成画像を表示する。

したがって、簡単な構成で、相手側に対象物を明確に把握させることができる。さらに、第２画像通信装置は、受信した画像を表示するだけでよいので、より簡単な構成、たとえば従来の画像通信装置であっても副映像を表示させることができる。

また本発明によれば、前記第１画像通信装置では、第１映像位置指定工程で、第２画像通信装置から送られてきた第２主映像の任意の範囲を指定すると、第１映像抽出工程では、前記第１映像位置指定工程にて指定された範囲に表示されている映像を第１副映像として抽出する。第１送信工程では、予め撮像された第１主映像および前記第１映像抽出工程にて抽出した第１副映像を前記第２画像通信装置に送信する。

前記第２画像通信装置では、第２受信工程で、前記第１画像通信装置から送られてくる第１副映像を受信すると、第２表示工程で、前記第２受信工程にて受信した第１副映像を表示する。

したがって、簡単な構成で、相手側に対象物を明確に把握させることができる。
また本発明によれば、前記第１画像通信装置では、第１映像位置指定工程で、第２画像通信装置から送られてきた第２主映像の任意の範囲を指定すると、第１送信工程で、予め撮像された第１主映像および前記第１映像位置指定工程にて指定した範囲を示す範囲情報を前記第２画像通信装置に送信する。

前記第２画像通信装置では、第２受信工程で、前記第１画像通信装置から送られてくる第１主映像および範囲情報を受信すると、第２抽出工程で、第１画像通信装置に送信した第２主映像から、前記第２受信工程にて受信した範囲情報に基づいて、第２副映像を抽出し、第２表示工程で、前記第２受信工程にて受信した第１主映像および前記第２抽出工程にて抽出した第２副映像を表示する。

また本発明によれば、前記第１画像通信装置では、第１映像位置指定工程で、第２画像通信装置から送られてきた第２主映像の任意の範囲を指定すると、第１映像抽出工程で、前記第１映像位置指定工程にて指定された範囲に表示されている映像を第１副映像として抽出する。第１合成工程では、予め撮像された第１主映像と前記第１映像抽出工程にて抽出した第１副映像と合成して第１合成画像を生成し、第１送信工程で、前記第１合成工程にて合成された第１合成画像を前記第２画像通信装置に送信する。

前記第２画像通信装置では、第２受信工程で、前記第１画像通信装置から送られてくる前記第１合成画像を受信すると、第２表示工程で、前記第２受信工程にて受信した前記第１合成画像を表示する。

図１は、本発明の実施の一形態である画像通信システム１の概略を示す模式図である。
本発明の画像通信システム１は、２つの画像通信装置、第１画像通信装置１００と第２画像通信装置２００とで構成され、第１画像通信装置１００のカメラ１０１で撮像された映像が画像通信によって第２画像通信装置２００に送信され、第２画像通信装置の第２ディスプレイ２０２では、受信した画像を表示する。これと並行して第２画像通信装置２００のカメラ２０１で撮像された映像が画像通信によって第１画像通信装置１００に送信され、第１画像通信装置の第１ディスプレイ１０２では、受信した画像を表示する。

さらに、第１画像通信装置１００は、第１タッチパネル１０３を第１ディスプレイ１０２に重ねて設け、第１ディスプレイ１０２に表示されている画像に対して、特定の領域を指定することが可能となっている。具体的には、第２カメラ２０１により撮影された画像の中で、第１画像通信装置１００の操作者が対象物３００を指定したいとする。

第１画像通信装置１００の操作者は、第１ディスプレイ１０２に第２画像通信装置２００から送信されてきた画像が表示されている状態で、タッチペン１０４により、第１タッチパネル１０３を介して対象物３３０が表示されている指定領域１０５を入力すると、入力された指定領域１０５に表示されていた対象物３００の部分の画像についての情報が、第２画像通信装置２００へと送信される。

第２画像通信装置２００では、受信した情報に基づいて、指定領域１０５内に表示されていた画像を、自機の第２ディスプレイ２０２に表示する。このとき、第１画像通信装置１００から送られてくる撮影画像と、対象物３００が表示されている画像とは、第２ディスプレイ２０２に重畳されて表示される。

第２画像通信装置２００の操作者は、第２ディスプレイ２０２に表示された画像を見ることで、第１画像通信装置１００の操作者が指定する対象物３００を明確に、かつ迅速に把握することができる。

指定領域１０５の中の一部をさらに指定するために、第１タッチパネル１０３を介して指定領域内の指定部分をポインタ（カーソル、矢印など）で指定すると、その指定部分の情報が第２画像通信装置２００に送信され、第２画像通信装置２００では、指定領域内の画像に指定部分のポインタを加えて表示する。

また、第１ディスプレイ１０２に表示されている対象物３００が小さい場合や、指定部分を明確にしたい場合などには、指定領域１０５の画像を拡大するように指示を入力すると、拡大指示が第２画像通信装置２００へと送信され、第２画像通信装置２００では、第２ディスプレイ２０２に、指定領域１０５の画像が拡大されて表示される。

なお、第２画像通信装置２００にも、第２タッチパネル２０３が備えられており、第１画像通信装置１００と同様に、指定領域の入力などを行える。すなわち、第１画像通信装置１００と第２画像通信装置２００とは同一の構成を有しており、指定領域を入力する側の装置が、第１画像通信装置１００であっても第２画像通信装置２００であってもよい。

図２は、画像通信システム１の構成を示すブロック図である。
本実施形態では、画像通信システム１は、２つの画像通信装置、第１画像通信装置１００と第２画像通信装置２００とで構成される。

第１画像通信装置（以下では「第１装置」と略称する）１００は、第１撮像部１０、第１画像処理部１１とで構成され、第１画像処理部１１は、さらに第１映像処理部１２、第１通信部１３、第１記憶部１４、第１ポインタ制御部１５、第１座標検出部１６、第１表示部１７、第１タブレット１８を含んで構成される。

また、第１映像処理部１２は、共有映像生成部１２ａ、画像拡大処理部１２ｂ、ＰＩＰ処理部１２ｃ、映像合成部１２ｄを含む。

第２画像通信装置（以下では「第２装置」と略称する）２００は、第２撮像部２０、第２画像処理部２１とで構成され、第２画像処理部２１は、さらに第２映像処理部２２、第２通信部２３、第２記憶部２４、第２ポインタ制御部２５、第２座標検出部２６、第２表示部２７、第２タブレット２８を含んで構成される。

また、第２映像処理部２２は、共有映像生成部２２ａ、画像拡大処理部２２ｂ、ＰＩＰ処理部２２ｃ、映像合成部２２ｄを含む。

上記のように、第１装置１００と第２装置２００とは、同一の構成であるので、以下では、第１装置１００の構成について説明する。また、図１に示したように、指定領域１０５を指定する側が第１装置１００であり、指定された画像を表示する側が第２装置２００であるものとする。

第１撮像部１０は、たとえば、たとえば、ＣＣＤ（電荷結合素子）カメラなどで実現され、被写体からの反射光を受光し、その受光量をアナログ映像信号として出力する第１カメラ１０１である。

第１画像処理部１１は、第１撮像部１０から出力される映像信号をデジタル映像データに変換し、必要な画像処理を施して、第２装置２００へと送信する。また、第１タブレット１８で入力された指定領域内の画像についても必要な画像処理を施して、第２装置２００へと送信する。

共有映像生成部１２ａは、副映像である共有映像に関する情報として共有映像座標情報３０を取得して記憶する。共有映像とは、図１で示したように、指定領域１０５を入力したときに、指定領域１０５内に表示されている画像のことで、第２装置２００で撮像されて送られてくる画像（主映像）の一部を切り出したものに相当する。

画像拡大処理部１２ｂは、共有映像または主映像の拡大処理を行い、入力された拡大サイズ（拡大倍率、拡大後の寸法など）３１を記憶しておく。

ＰＩＰ処理部１２ｃは、ピクチャインピクチャ（ＰＩＰ）処理により、主映像に共有映像を重畳して表示させる。

主映像に重畳させて表示させる共有映像いついては、指定領域を指定する側の装置と指定された共有映像を受信する側の装置では異なっている。

指定領域１０５を指定する側の第１装置１００では、第２装置２００から受信した画像データに基づく主映像と、自装置で指定された指定領域１０５内の共有映像を重畳して第１表示部１７に表示する。

指定された共有映像を受信する側の第２装置２００では、第１装置１００から受信した画像データに基づく主映像と、第１装置１００で指定された指定領域１０５内の共有映像を重畳して第２表示部２７に表示する。

ＰＩＰ処理部１２ｃは、ＰＩＰ処理、すなわち指定領域を入力して共有映像を表示するか、指定された共有映像を表示するかいずれにしても共有映像の表示を行うかどうかを示すＰＩＰＯＮ／ＯＦＦ情報を記憶する。共有映像を第１表示部１７に表示するときはＰＩＰＯＮであり、表示しないときはＰＩＰＯＦＦである。ＰＩＰ位置情報３３およびＰＩＰサイズ情報３４は、ＰＩＰ表示を行うときに、共有映像を第１表示部１７に表示させる位置座標と、そのサイズを示す情報である。これらの情報は、装置の操作者が任意に変更できるように、第１タブレット１８から変更値が入力可能で、入力されると記憶しているそれぞれの情報を更新するように構成される。また、変更されない場合には、予め与えられる初期値に基づいてＰＩＰ処理を行う。

映像合成部１２ｄは、ＰＩＰ処理において、共有映像を主映像に重ね合わせるのではなく、主映像と共有映像とを合成して１つの画像データを作成し、合成後の画像データを第２装置２００へ送信する。

第１通信部１３は、第２装置２００と画像通信、電話通信およびデータ通信可能に構成されており、公衆電話通信網を介する通信、ＬＡＮ（Local Area network）を介する通信などが可能で特に通信インフラには限定されない。

第１通信部１３は、接続先情報３５として接続先の通信装置、本実施形態では第２装置２００の通信に関する情報、たとえば、電話番号、ＩＰアドレス、使用する通信プロトコルなどを参照して第２装置２００との通信を行う。

第１記憶部１４は、第２装置２００から送られてきた主映像を記憶する主映像記憶部１４ａと、第１撮像部１０で撮像し、第２装置２００へと送信する映像および主映像の一部である指定領域内の共有映像を記憶する送信映像記憶部１４ｂを有し、さらにＰＩＰ処理部１２ｃがＰＩＰ処理を行う際に主映像に重畳するための映像であるＰＩＰ映像３６も記憶される。

第１ポインタ制御部１５は、第１タブレット１８により入力されたポインタの位置を制御する。第１座標検出部１６は、第１タブレット１８により入力された座標を検出し、必要に応じて検出した座標情報を第１ポインタ制御部１５および第１映像処理部１２に受け渡す。第１表示部１７は、第２装置２００から送られてきた主映像および指定領域内の共有映像を主に表示する第１ディスプレイ１０２である。

第１タブレット１８は、第１タッチパネル１０３とペン１０４などの入力デバイスで構成され、操作者がペン１０４を用いて、第１タッチパネル１０３が重ねて設けられた第１ディスプレイ１０２の上をなぞることで該当箇所の座標が入力されるので、直感的な操作が可能となる。

以下では、フローチャートを用いて画像通信システム１による画像通信処理について詳細に説明する。

第２装置２００において共有映像を表示させるにあたっては、第１装置１００から共有映像に関する情報を第２装置２００へ送信し、第２装置２００では、その関連情報に基づいて共有映像を第２表示部２７に表示する。

共有映像に関する情報については、指定領域１０５内の画像データを情報として送信する第１形態、指定領域の座標を情報として送信する第２形態、指定領域１０５内の共有映像と、第１撮像部で撮像した主映像とを合成し、合成映像を情報として送信する第３形態とがある。

図３は、第１形態の画像通信処理を示すフローチャートである。図３Ａ（ａ）は、共有映像を指定する側の第１装置１００のフローを示し、図３Ｂ（ｂ）は、指定された共有映像を表示する側の第２装置２００のフローを示す。

第１装置１００では、ステップＡ１で、第１通信部１３が相手側通信装置である第２装置２００から主映像となる画像データを受信し、ステップＡ２で第１表示部１７に主映像を表示させる。

ステップＡ３では、第１タブレット１８を介して指定領域１０５が入力されたかどうかを判断し、入力されればステップＡ４に進み、入力されなければステップＡ１に戻って主映像の受信と表示を繰り返す。

ステップＡ４では、第１座標検出部１６の検出結果に基づいて、入力された領域の座標を抽出し、共有映像生成部１２ａに記憶する。ステップＡ５では、記憶された共有映像座標情報３０に基づいて、第２装置２００から受信した主映像のうち、指定領域１０５に相当する部分の画像を共有映像とし、指定された領域部分の画像データを関連情報として記憶する。

ステップＡ６では、主映像と重ねて表示したときに区別しやすいように共有映像に縁取りを行い、ステップＡ７で、表示サイズを読み込む。

ステップＡ８では、ＰＩＰ処理部１２ｃによって、第１表示部１７に読み込まれた表示サイズおよび表示位置に共有画像をＰＩＰ表示させる。第１装置１００では、操作者が自ら指定した共有映像を第１表示部１７にＰＩＰ表示された画像を見て確認することができる。

ステップＡ９で、所定の入力手順により共有映像のサイズが変更されると、ステップＡ１０で第２装置２００へ送信する共有映像のサイズ情報３４を更新する。また、ステップＡ１１で、所定の入力手順により共有映像内にポインタが追加されると、ステップＡ１２で、第２装置２００へ送信する共有映像にポインタ画像を追加して送信映像記憶部１４ｂに記憶する。

なお、サイズの変更はたとえば、第１タブレット１８を介して現在表示されている共有映像の縁をドラッグ操作することにより変更できる。ポインタの追加も、第１タブレット１８を介して現在表示されている共有映像のいずれかをポインティング操作することにより追加できる。

ステップＡ１３では、共有映像を第２装置２００の第２表示部２７に表示させるために共有映像表示コマンドを第２装置２００へ送信する。共有映像表示コマンドは、第２装置２００において、ＰＩＰ処理部２２ｃを起動させて、送信した共有映像をＰＩＰ表示させるためのコマンドである。

ステップＡ１４では、送信映像記憶部１４ｂに記憶された共有映像となる部分画像データを第２装置２００へ送信する。

図示はしていないが、第１装置１００は、第１撮像部１０で主映像を撮影し、第２装置２００へ送信している。主映像の送信のタイミングは、共有映像の送信ステップで同時に送信してもよいし、異なるステップで送信してもよい。

第２装置２００では、ステップＢ１で、第２撮像部２０が主映像を撮影し、ステップＢ２では、第１装置１００へ主映像となる画像データを送信する。

ステップＢ３で共有映像表示コマンドを受信したかどうかを判断し、受信していればステップＢ４に進み、受信していなければステップＢ１に戻って主映像の撮影と送信とを繰り返す。

ステップＢ４では、共有映像となる部分画像データを受信し、ステップＢ５では、ＰＩＰ処理部２２が起動してステップＢ５で表示位置の読み込みとステップＢ６で表示サイズの読み込みを行う。

ステップＢ７では、ＰＩＰ処理部２２が、第１装置１００から送られてくる主映像に共有映像を重ね合わせて、第２表示部２７にＰＩＰ表示させる。ステップＢ８では、所定の入力手順により共有映像の表示位置が変更されると、ステップＢ９で表示されている共有映像の表示位置を変更する。

ステップＢ１０で所定の入力手順により共有映像のサイズが変更されると、ステップＢ１１で表示されている共有映像のサイズを変更する。

なお、表示位置の変更は、たとえば、第２タブレット２８を介して現在表示されている共有映像の縁以外の部分をドラッグ操作することにより変更できる。サイズの変更は、たとえば、第２タブレット２８を介して現在表示されている共有映像の縁をドラッグ操作することにより変更できる。

ステップＢ１２で、共有映像の表示を終了する指示が入力されると共有映像を消して処理を終了する。終了の指示が入力されなければステップＢ７に戻って表示を継続する。

図４は、第２形態の画像通信処理を示すフローチャートである。図４Ａ（ａ）は、共有映像を指定する側の第１装置１００のフローを示し、図４Ｂ（ｂ）は、指定された共有映像を表示する側の第２装置２００のフローを示す。

第１装置１００では、ステップＣ１で、第１通信部１３が相手側通信装置である第２装置２００から主映像となる画像データを受信し、ステップＣ２で第１表示部１７に主映像を表示させる。

ステップＣ３では、第１タブレット１８を介して指定領域１０５が入力されたかどうかを判断し、入力されればステップＣ４に進み、入力されなければステップＣ１に戻って主映像の受信と表示を繰り返す。

ステップＣ４では、第１座標検出部１６の検出結果に基づいて、入力された領域の座標を抽出し、共有映像生成部１２ａに記憶する。ステップＣ５では、記憶された共有映像座標情報３０に基づいて、第２装置２００から受信した主映像のうち、指定領域１０５に相当する部分の画像を共有映像とし、指定領域の座標情報を第２装置２００に送信する関連情報として記憶する。

ステップＣ６では、主映像と重ねて表示したときに区別しやすいように共有映像に縁取りを行い、ステップＣ７で、表示サイズを読み込む。

ステップＣ８では、ＰＩＰ処理部１２ｃによって、第１表示部１７に読み込まれた表示サイズおよび表示位置に共有画像をＰＩＰ表示させる。第１装置１００では、操作者が自ら指定した共有映像を第１表示部１７にＰＩＰ表示された画像を見て確認することができる。

ステップＣ９で、所定の入力手順により共有映像のサイズが変更されると、ステップＣ１０で第２装置２００へ送信する共有映像のサイズ情報３４を更新する。また、ステップＣ１１で、所定の入力手順により共有映像内にポインタが追加されると、ステップＣ１２で、第２装置２００へ送信する共有映像にポインタ画像を追加して送信映像記憶部１４ｂに記憶する。

ステップＣ１３では、共有映像を第２装置２００の第２表示部２７に表示させるために共有映像表示コマンドを第２装置２００へ送信する。共有映像表示コマンドは、第２装置２００において、ＰＩＰ処理部２２ｃを起動させて、送信した共有映像の座標情報を基に、共有映像をＰＩＰ表示させるためのコマンドである。

ステップＣ１４では、送信映像記憶部１４ｂに記憶された共有映像となる指定領域を示す座標情報を第２装置２００へ送信する。

座標情報に続けてステップＣ１５では、共有映像の表示サイズを示す情報を第２装置２００へ送信し、ステップＣ１６では、共有映像に追加されたポインタ位置を示す情報を第２装置２００へ送信する。

第２装置２００では、ステップＤ１で、第２撮像部２０が主映像を撮影し、ステップＤ２では、第１装置１００へ主映像となる画像データを送信する。

ステップＤ３で共有映像表示コマンドを受信したかどうかを判断し、受信していればステップＤ４に進み、受信していなければステップＤ１に戻って主映像の撮影と送信とを繰り返す。

ステップＤ４では、共有映像をとなる部分を示す座標情報を受信し、続いてステップＤ５では、共有映像の表示サイズ情報を受信し、ステップＤ６では、ポインタ位置を示す情報を受信する。

ステップＤ７では、第１表示部１００へ送信した撮像映像に、座標情報を適用し、該当部分の画像を共有映像として抽出する。ステップＤ８では、受信した表示サイズに基づいて共有映像の表示サイズを変更する。

ステップＤ９では、ポインタ表示追加情報を受信したかどうかを判断し、受信していればステップＤ１０で共有映像にポインタを追加する。

ステップＤ１１では、ＰＩＰ処理部２２ｃが、第１装置１００から送られてくる主映像に抽出された共有映像を重ね合わせて、第２表示部２７にＰＩＰ表示する。ステップＤ１２では、所定の入力手順により共有映像の表示位置が変更されると、ステップＤ１３で表示されている共有映像の表示位置を変更する。

ステップＤ１４で所定の入力手順により共有映像のサイズが変更されると、ステップＤ１５で表示されている共有映像のサイズを変更する。

ステップＤ１６で、共有映像の表示を終了する指示が入力されると共有映像を消して処理を終了する。終了の指示が入力されなければステップＤ１１に戻って表示を継続する。

図５は、第３形態の画像通信処理を示すフローチャートである。図５Ａ（ａ）は、共有映像を指定する側の第１装置１００のフローを示し、図５Ｂ（ｂ）は、指定された共有映像を表示する側の第２装置２００のフローを示す。

第１装置１００では、ステップＥ１で、第１通信部１３が相手側通信装置である第２装置２００から主映像となる画像データを受信し、ステップＥ２で第１表示部１７に主映像を表示させる。

ステップＥ３では、第１タブレット１８を介して指定領域１０５が入力されたかどうかを判断し、入力されればステップＥ４に進み、入力されなければステップＥ１に戻って主映像の受信と表示を繰り返す。

ステップＥ４では、第１座標検出部１６の検出結果に基づいて、入力された領域の座標を抽出し、共有映像生成部１２ａに記憶する。ステップＥ５では、記憶された共有映像座標情報３０に基づいて、第２装置２００から受信した主映像のうち、指定領域１０５に相当する部分の画像を共有映像とし、指定された領域部分の画像データを記憶する。

ステップＥ６では、主映像と重ねて表示したときに区別しやすいように共有映像に縁取りを行い、ステップＥ７で、表示サイズを読み込む。

ステップＥ８では、ＰＩＰ処理部１２ｃによって、第１表示部１７に読み込まれた表示サイズおよび表示位置に共有画像をＰＩＰ表示させる。第１装置１００では、操作者が自ら指定した共有映像を第１表示部１７にＰＩＰ表示された画像を見て確認することができる。

ステップＥ９で、所定の入力手順により共有映像のサイズが変更されると、ステップＥ１０で第２装置２００へ送信する共有映像のサイズ情報３４を更新する。また、ステップＥ１１で、所定の入力手順により共有映像内にポインタが追加されると、ステップＥ１２で、共有映像にポインタ画像を追加して送信映像記憶部１４ｂに記憶する。

ステップＥ１３では、第１撮像部１０が主映像を撮影し、ステップＥ１４で、主映像となる画像データと共有映像となる部分画像データとを合成する。ステップＥ１５では、合成画像データを関連情報として第２装置２００へ送信する。

第１装置１００による主映像の撮影について、本実施形態では、撮影していることが明確になるように、ステップＥ１３として説明したが、撮影のタイミングはこれに限らず、ステップＥ１４で共有映像と合成するまでに撮影しておけばよい。

第２装置２００では、ステップＦ１で、第２撮像部２０が主映像を撮影し、ステップＦ２では、第１装置１００へ主映像となる画像データを送信する。

ステップＦ３で第１装置１００から主映像と共有映像が合成された合成映像となる合成画像データを受信し、ステップＦ４で合成画像を表示する。

以上のように、第１装置１００側で領域を指定し、相手側の第２装置２００に指定した領域の画像を表示させることで、第２装置２００の操作者は第１装置１
００の操作者が対象としている物を容易にかつ明確に把握することができる。

なお、上記の説明では、第１形態では、１度指定領域を指定すると該当する画像データを相手側に送信しているが、第１装置１００において、共有映像の指定取り止めの指示が入力されるまでは、第２通信装置１００から主映像が送られてくるたびに、共有映像となる画像データを生成して第２装置２００に送り続けることも可能である。また、第２形態では、座標の変更や、共有映像の指定取り止めの指示が入力されるまでは、第２通信装置１００において、共有映像となる画像データを生成して表示し続けることも可能である。

本発明の実施の一形態である画像通信システム１の概略を示す模式図である。画像通信システム１の構成を示すブロック図である。第１形態の画像通信処理を示すフローチャートである。第１形態の画像通信処理を示すフローチャートである。第２形態の画像通信処理を示すフローチャートである。第２形態の画像通信処理を示すフローチャートである。第３形態の画像通信処理を示すフローチャートである。第３形態の画像通信処理を示すフローチャートである。

符号の説明

１画像通信システム
１００第１画像通信装置
１０１，２０１カメラ
１０２第１ディスプレイ
１０３第１タッチパネル
１０４ペン
１０５指定領域
２００第２画像通信装置
２０２第２ディスプレイ
２０３第２タッチパネル
３００対象物

Claims

撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムにおいて、
前記第１画像通信装置は、
第２画像通信装置から送られる映像を受信し、第２画像通信装置へ映像を送信する第１通信手段と、
第１主映像を撮像する第１撮像手段と、
第２画像通信装置から送られる第２主映像を表示する第１表示手段と、
第２画像通信装置から送られる第２主映像の任意の範囲を指定する第１映像位置指定手段と、
前記第１映像位置指定手段にて指定された範囲に表示されている映像を第１副映像として抽出する第１映像抽出手段と、を備え、
前記第１通信手段は、前記第１撮像手段が撮像した第１主映像を第２画像通信装置に送信し、前記第１映像抽出手段が第１副映像を抽出すると、抽出された第１副映像を前記第２画像通信装置に送信し、
前記第１表示手段は、第２画像通信装置から送られる第２副映像を前記第１通信手段が受信すると、受信した第２副映像を表示し、
前記第２画像通信装置は、
第１画像通信装置から送られる映像を受信し、第１画像通信装置へ映像を送信する第２通信手段と、
第２主映像を撮像する第２撮像手段と、
第１画像通信装置から送られる第１主映像を表示する第２表示手段と、
第１画像通信装置から送られる第１主映像の任意の範囲を指定する第２映像位置指定手段と、
前記第２映像位置指定手段にて指定された範囲に表示されている映像を第２副映像として抽出する第２映像抽出手段と、
前記第２通信手段は、前記第２撮像手段が撮像した第２主映像を第１画像通信装置に送信し、前記第２映像抽出手段が第２副映像を抽出すると、抽出された第２副映像を前記第１画像通信装置に送信し、
前記第２表示手段は、第１画像通信装置から送られる第１副映像を前記第１通信手段が受信すると、受信した第１副映像を表示することを特徴とする画像通信システム。
撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムにおいて、
前記第１画像通信装置は、
第２画像通信装置から送られる映像を受信し、第２画像通信装置へ映像を送信する第１通信手段と、
第１主映像を撮像する第１撮像手段と、
第２画像通信装置から送られる第２主映像を表示する第１表示手段と、
第２画像通信装置から送られる第２主映像の任意の範囲を指定する第１映像位置指定手段と、
前記第１映像位置指定手段にて指定された範囲を示す範囲情報を第１範囲情報として抽出する第１範囲抽出手段と、を備え、
前記第１通信手段は、前記第１撮像手段が撮像した第１主映像を第２画像通信装置に送信し、前記第１範囲抽出手段が第１範囲情報を抽出すると、抽出された第１範囲情報を前記第２画像通信装置に送信し、
前記第１表示手段は、第２画像通信装置から送られる第２範囲情報を受信すると、受信した第２範囲情報に基づいて、第２画像通信装置に送信した第１主映像から、第２副映像を抽出して表示し、
前記第２画像通信装置は、
第１画像通信装置から送られる映像を受信し、第１画像通信装置へ映像を送信する第２通信手段と、
第２主映像を撮像する第２撮像手段と、
第１画像通信装置から送られる第１主映像を表示する第２表示手段と、
第１画像通信装置から送られる第１主映像の任意の範囲を指定する第２映像位置指定手段と、
前記第２映像位置指定手段にて指定された範囲を示す範囲情報を第２範囲情報として抽出する第２範囲抽出手段と、を備え、
前記第２通信手段は、前記第２撮像手段が撮像した第２主映像を第１画像通信装置に送信し、前記第２範囲抽出手段が第２範囲情報を抽出すると、抽出された第２範囲情報を前記第１画像通信装置に送信し、
前記第２表示手段は、第１画像通信装置から送られる第１範囲情報を受信すると、受信した第１範囲情報に基づいて、第１画像通信装置に送信した第２主映像から、第１副映像を抽出して表示することを特徴とする画像通信システム。
撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムにおいて、
前記第１画像通信装置は、
第２画像通信装置から送られる映像を受信し、第２画像通信装置へ映像を送信する第１通信手段と、
第１主映像を撮像する第１撮像手段と、
第２画像通信装置から送られる第２主映像を表示する第１表示手段と、
第２画像通信装置から送られる第２主映像の任意の範囲を指定する第１映像位置指定手段と、
前記第１映像位置指定手段にて指定された範囲に表示されている映像を第１副映像として抽出する第１映像抽出手段と、
第１映像抽出手段が第１副映像を抽出すると、前記第１撮像手段で撮像した第１主映像と前記第１映像抽出手段が抽出した第１副映像と合成して第１合成画像を生成する第１合成手段と、を備え、
前記第１通信手段は、前記第１合成手段が第１合成画像を生成すると、前記第１撮像手段が撮像した第１主映像の代わりに第１合成画像を前記第２画像通信装置に送信し、
前記第１表示手段は、第２画像通信装置から送られる第２合成映像を前記第１通信手段が受信すると、受信した第２合成映像を表示し、
前記第２画像通信装置は、
第１画像通信装置から送られる映像を受信し、第１画像通信装置へ映像を送信する第２通信手段と、
第２主映像を撮像する第２撮像手段と、
第１画像通信装置から送られる第１主映像を表示する第２表示手段と、
第１画像通信装置から送られる第１主映像の任意の範囲を指定する第２映像位置指定手段と、
前記第２映像位置指定手段にて指定された範囲に表示されている映像を第２副映像として抽出する第２映像抽出手段と、
第２映像抽出手段が第２副映像を抽出すると、前記第２撮像手段で撮像した第２主映像と前記第２映像抽出手段が抽出した第２副映像と合成して第２合成画像を生成する第２合成手段と、を備え、
前記第２通信手段は、前記第２合成手段が第２合成画像を生成すると、前記第２撮像手段が撮像した第２主映像の代わりに第２合成画像を前記第１画像通信装置に送信し、
前記第２表示手段は、第１画像通信装置から送られる第１合成映像を前記第２通信手段が受信すると、受信した第１合成映像を表示することを特徴とする画像通信システム。
撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信方法において、
前記第１画像通信装置では、
第１主映像を撮像する第１撮像工程と、
第１主映像を第２画像通信装置に送信する第１主送信工程と、
第２画像通信装置から送られる第２主映像を受信して表示する第１主表示工程と、
第２画像通信装置から送られる第２主映像の任意の範囲を指定する第１映像位置指定工程と、
前記第１映像位置指定工程にて指定された範囲に表示されている映像を第１副映像として抽出する第１映像抽出工程と、
前記第１映像抽出工程で第１副映像が抽出されると、抽出された第１副映像を前記第２画像通信装置に送信する第１副送信工程と、
第２画像通信装置から送られる第２副映像を受信すると、受信した第２副映像を表示する第１副表示工程とを実行し、
前記第２画像通信装置では、
第２主映像を撮像する第２撮像工程と、
第２主映像を第１画像通信装置に送信する第２主送信工程と、
第１画像通信装置から送られる第１主映像を受信して表示する第２主表示工程と、
第１画像通信装置から送られる第１主映像の任意の範囲を指定する第２映像位置指定工程と、
前記第２映像位置指定工程にて指定された範囲に表示されている映像を第２副映像として抽出する第２映像抽出工程と、
前記第２映像抽出工程で第２副映像が抽出されると、抽出された第２副映像を前記第１画像通信装置に送信する第２副送信工程と、
第１画像通信装置から送られる第１副映像を受信すると、受信した第１副映像を表示する第２副表示工程とを実行することを特徴とする画像通信方法。
撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信方法において、
前記第１画像通信装置では、
第１主映像を撮像する第１撮像工程と、
第１主映像を第２画像通信装置に送信する第１主送信工程と、
第２画像通信装置から送られる第２主映像を受信して表示する第１主表示工程と、
第２画像通信装置から送られる第２主映像の任意の範囲を指定する第１映像位置指定工程と、
前記第１映像位置指定工程にて指定された範囲を示す範囲情報を第１範囲情報として抽出する第１範囲抽出工程と、
前記第１範囲抽出工程で第１範囲情報が抽出されると、抽出された第１範囲情報を前記第２画像通信装置に送信する第１範囲送信工程と、
第２画像通信装置から送られる第２範囲情報を受信すると、受信した第２範囲情報に基づいて、第２画像通信装置に送信した第１主映像から、第２副映像を抽出して表示する第１副表示工程とを実行し、
前記第２画像通信装置では、
第２主映像を撮像する第２撮像工程と、
第２主映像を第１画像通信装置に送信する第２主送信工程と、
第１画像通信装置から送られる第１主映像を受信して表示する第２主表示工程と、
第１画像通信装置から送られる第１主映像の任意の範囲を指定する第２映像位置指定工程と、
前記第２映像位置指定工程にて指定された範囲を示す範囲情報を第２範囲情報として抽出する第２範囲抽出工程と、
前記第２範囲抽出工程で第２範囲情報が抽出されると、抽出された第２範囲情報を前記第１画像通信装置に送信する第２範囲送信工程と、
第１画像通信装置から送られる第１範囲情報を受信すると、受信した第１範囲情報に基づいて、第１画像通信装置に送信した第２主映像から、第１副映像を抽出して表示する第２副表示工程とを実行することを特徴とする画像通信方法。
撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信方法において、
前記第１画像通信装置では、
第１主映像を撮像する第１撮像工程と、
第１主映像を第２画像通信装置に送信する第１主送信工程と、
第２画像通信装置から送られる第２主映像を受信して表示する第１主表示工程と、
第２画像通信装置から送られる第２主映像の任意の範囲を指定する第１映像位置指定工程と、
前記第１映像位置指定工程にて指定された範囲に表示されている映像を第１副映像として抽出する第１映像抽出工程と、
第１映像抽出工程で第１副映像が抽出されると、前記第１主映像と抽出された第１副映像と合成して第１合成画像を生成する第１合成工程と、
前記第１合成工程で第１合成画像が生成されると、第１主映像の代わりに第１合成画像を前記第２画像通信装置に送信する第１合成送信工程と、
第２画像通信装置から送られる第２合成映像を受信すると、受信した第２合成映像を表示する第１合成表示工程とを実行し、
前記第２画像通信装置では、
第２主映像を撮像する第２撮像工程と、
第２主映像を第１画像通信装置に送信する第２主送信工程と、
第１画像通信装置から送られる第１主映像を受信して表示する第２主表示工程と、
第１画像通信装置から送られる第１主映像の任意の範囲を指定する第２映像位置指定工程と、
前記第２映像位置指定工程にて指定された範囲に表示されている映像を第２副映像として抽出する第２映像抽出工程と、
第２映像抽出工程で第２副映像が抽出されると、前記第２主映像と抽出された第２副映像と合成して第２合成画像を生成する第２合成工程と、
前記第２合成工程で第２合成画像が生成されると、第２主映像の代わりに第２合成画像を前記第１画像通信装置に送信する第２合成送信工程と、
第１画像通信装置から送られる第１合成映像を受信すると、受信した第１合成映像を表示する第２合成表示工程とを実行することを特徴とする画像通信方法。