JPH07162532A - 多地点間通信会議コミュニケーション支援装置 - Google Patents

Abstract

(57)【要約】 【目的】 端末装置の規模を増大させず、端末装置の設
置位置の自由度を低下させることなく、かつ通信網の接
続形態による伝送データ量の増加を伴わずに、会議参加
者各自のコミュニケーション上の動作情報を会議参加者
に報知することが可能な多地点間通信会議コミュニケー
ション支援装置を提供する。 【構成】 複数の端末装置間で映像および音声を送受信
し、複数の参加者が会議を行う多地点間通信会議コミュ
ニケーション支援装置であって、前記端末装置は、会議
参加者各自の動作情報を入力する動作情報入力手段と、
該動作情報を各地点の端末装置に送信する動作情報送信
手段と、該動作情報送信手段からの動作情報を受信する
動作情報受信手段と、該動作情報受信手段によって受信
された動作情報を報知する報知手段とを備える。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、多地点間通信会議シス
テムにおける会議のコミュニケーション支援装置に関す
るものである。

【０００２】

【従来の技術】従来の多地点間通信会議システムにおけ
る会議のコミュニケーション支援装置を図８に示す。図
８において、Ａ〜Ｄは会議参加者、８１〜８４はそれぞ
れ会議参加者Ａ〜Ｄの通信会議を実行するための通信会
議端末装置（以下、端末装置という）、８１１、８２
１、８３１、８４１は会議参加者Ａ〜Ｄの映像を撮影す
る映像入力装置、８１２、８２２、８３２、８４２は会
議参加者Ａ〜Ｄの映像を表示する映像表示装置、８１
３、８２３、８３３、８４３は会議参加者Ａ〜Ｄの音声
を取得する音声入力装置、８１４、８２４、８３４、８
４４は会議参加者Ａ〜Ｄからの音声を出力する音声出力
装置である。

【０００３】また実際には、各地点における端末装置８
１〜８４は、映像音声符号化・復号化装置や通信網イン
タフェース等から構成されているが、本願における多地
点間通信会議コミュニケーション支援装置の説明上、特
に必要としていないので省略する。

【０００４】また、図８においては、会議参加者は４人
としたが、これは何人であってもよい。さらに、図８に
おいては、各地点を結ぶ通信網８０は、メッシュ（網
目）型としているが、これはスター（星）型あるいはリ
ング（環状）型等どのような接続形態でもよい。

【０００５】図８において、例えば、端末装置８１の映
像入力装置８１１から入力された会議参加者Ａの映像が
他の端末装置８２〜８４に送信されて表示される。

【０００６】同様に、会議参加者Ｂ〜Ｄの映像も各自の
端末装置８２〜８４の映像入力装置８２１〜８４１から
入力され、端末装置８１〜８４のうち自地点以外の端末
装置８１〜８４に送信されて他の映像表示装置８２２〜
８４２に表示される。

【０００７】また、図８において、例えば、端末装置８
１の映像表示装置８１２にはパーソナルコンピュータや
ワークステーションで用いられているマルチウィンドウ
の手法を用いて１つの表示画面に３人の会議参加者の映
像を表示する例を示しているが、表示画面を縦横複数の
領域に分割して各々の領域に別々の会議参加者の映像を
表示する画面分割表示手法や、端末装置８１〜８４の使
用者がスイッチ等を用いて選択した１人の会議参加者の
映像だけを表示する選択表示手法等を用いる場合もあ
る。

【０００８】図８において、例えば、端末装置８１の音
声入力装置８１３から入力された会議参加者Ａの音声が
他の端末装置８２〜８４に送信されて出力される。同様
に会議参加者Ｂ〜Ｄの音声も各自の端末装置８２〜８４
の音声入力装置８２３〜８４３から入力され、端末装置
８１〜８４のうち自地点以外の端末装置８１〜８４に送
信されて他の音声出力装置８１４〜８４４に出力され
る。

【０００９】このようにして会議参加者は、他の参加者
（および自分）の顔・声を見聞きしながら会議を行うこ
とができる。

【００１０】しかしながら、この従来の多地点間通信会
議システムにおける会議のコミュニケーション支援装置
を用いて会議を行う場合には、以下の問題点があった。

【００１１】（１）通常の対面会議であれば、発言中の
会議参加者は、その発言が終了に近づいた場合、次に発
言してもらいたい参加者に視線を向けることによって発
言の引き継ぎを促すことができる。しかし図８の状況に
おいては、会議参加者Ａが話しをしており、その発言が
終了に近づき、会議参加者Ａが会議参加者Ｂに発言を引
き継いでもらいたい場合に、会議参加者Ａが映像表示装
置８１２上の会議参加者Ｂの映像に視線を向けても会議
参加者Ｂには自分に視線が向けられていることが分から
ないという問題があった。

【００１２】（２）また、通常の対面会議であれば、発
言中の会議参加者は、自分の発言に他の参加者が注意を
払っているか否かを、他の参加者の顔の向き、視線の向
き、表情などから読みとることができる。しかし図８の
状況においては、会議参加者Ａが話しをしており、会議
参加者Ａが会議参加者Ｂの反応を知りたいとしても、映
像表示装置８１２上の会議参加者Ｂの映像からは、会議
参加者Ｂの顔の向きや視線の向きを知ることはできな
い。また表情を読み取ることは可能ではあるが、会議参
加者Ｂの視線方向が分からず、会議参加者Ｂが会議参加
者Ａ（の映像）に注目しているかどうかを知ることはで
きないために、会議参加者Ａには、その時の会議参加者
Ｂの表情が、自分（会議参加者Ａ）の話しに対する反応
かどうか分からないという問題があった。

【００１３】（３）さらに、通常の対面会議であれば会
議参加者が、他の会議参加者の注意を引きたいと思った
場合（発言中の会議参加者の注意を引き、発言に割り込
もうとする場合など）、その特定の相手に向けたゼスチ
ャーや目配せなどによって相手の注意を引くことができ
る。しかし図８の状況においては、例えば、会議参加者
Ｂが、発言者である会議参加者Ａの注意を引こうとして
何らかの仕草を行ったとしても、会議参加者Ｂの映像か
ら会議参加者Ｂが誰（の映像）に注目しているかが判別
できないため、会議参加者Ａには、その時の会議参加者
Ｂの仕草が、自分（会議参加者Ａ）に向けられたもので
あるかどうかを知ることはできないという問題があっ
た。

【００１４】従来、このような問題を解決する技術とし
て、各端末装置ごとに複数の映像入力装置と複数の映像
表示装置とを用いて会議参加者の顔・視線の向きが他の
会議参加者に判別可能とする方法がある。

【００１５】以下、図９を用いてこの方法について説明
する（参考文献１：Sellen A． Speech patterns in v
ideo-mediated conversations. Proceeding of CHI'9
2．pp.49-59）。

【００１６】図９は各端末装置ごとに複数の映像入力装
置と複数の映像表示装置とを備えた多地点間通信会議コ
ミュニケーション支援装置の一例を示す図である。

【００１７】図９において、Ａ〜Ｄは会議参加者であ
り、９１〜９４はそれぞれ会議参加者Ａ〜Ｄの端末装置
であり、９１１１〜９１１３は会議参加者Ａの端末装置
９１の映像入力装置、９１２１〜９１２３は会議参加者
Ａの端末装置９１の映像表示装置である。

【００１８】図９において、映像入力装置９１１１は、
会議参加者Ａの左斜め前から見た映像をとらえて、それ
を会議参加者Ｂの端末装置９２に送信する。映像入力装
置９１１２は、会議参加者Ａの正面から見た映像をとら
えて、それを会議参加者Ｃの端末装置９３に送信する。
映像入力装置９１１３は、会議参加者Ａの右斜め前から
見た映像をとらえて、それを会議参加者Ｄの端末装置９
４に送信する。

【００１９】同様にして、会議参加者Ａの端末装置９１
には、会議参加者Ｂの右斜め前から見た映像、Ｃの正面
から見た映像、およびＤの左斜め前から見た映像が送信
され、それぞれ映像表示装置９１２１〜９１２３に表示
される。

【００２０】この構成は会議参加者Ａから見た場合、他
の会議参加者Ｂ〜Ｄとの間にそれぞれ１組ずつの２地点
間通信会議システムを用いて、対面会議を行った場合に
会議参加者Ｂ〜Ｄが座る位置に、各々の会議参加者Ｂ〜
Ｄと通信を行う端末装置９２〜９４を設置したごとく、
前記映像表示装置９１２１〜９１２３を端末装置９１に
配置したものである。

【００２１】ここで、音声入出力装置等は前記のコミュ
ニケーション上の問題点（１）〜（３）の解消には特に
関係がないので図示していない。

【００２２】また、図８と同様に、映像音声符号化・復
号化装置や通信網インタフェース等も多地点間通信会議
コミュニケーション支援装置としての説明上、特に必要
としていないので図示していない。

【００２３】図９において、例えば、映像入力装置９１
１１と映像表示装置９２２３とを接続している矢印９０
は通信回線であり、同様に、他の各装置を接続している
矢印も通信回線である。

【００２４】ここでは、通信網の接続形態をメッシュ
（網目）型としているが、これは論理的な接続であっ
て、物理的な接続はスター（星）型あるいはリング（環
状）型等どのような接続形態でもよい。

【００２５】図９に示す構成において、いま、会議参加
者Ａが話しをしており、その発言が終了に近づき、会議
参加者Ａが会議参加者Ｂに発言を引き継いでもらいたい
場合に、会議参加者Ａが映像表示装置９１２１上の会議
参加者Ｂの映像に顔（または視線）を向けると、映像入
力装置９１１１は会議参加者Ａの正面から見た顔（また
は視線）をとらえ、会議参加者Ｂの端末装置９２に送信
する。

【００２６】従って、会議参加者Ｂには、会議参加者Ａ
から発言の引き継ぎを促されていることがわかる。これ
により、前記問題点（１）が解決される。

【００２７】また、図９において、会議参加者Ａが話し
をしており、会議参加者Ａが会議参加者Ｂの反応を知り
たい場合、映像表示装置９１２１上の会議参加者Ｂの映
像を見ることにより、その顔の向きから会議参加者Ｂが
会議参加者Ａ（の映像）に注目しているかどうかを知る
ことができる。これにより、前記問題点（２）が解決さ
れる。

【００２８】同様に、例えば、会議参加者Ｂが会議参加
者Ａの注意を引こうとして何らかの仕草を行った場合、
会議参加者Ａには、その仕草が自分（会議参加者Ａ）に
向けられたものであるかどうかを、自分の端末装置９２
に表示された会議参加者Ｂの映像の顔の向きから知るこ
とができる。これにより、前記問題点（３）が解決され
る。

【００２９】このように、各端末装置ごとに複数の映像
入力装置と複数の映像表示装置とを備えた図９に示す多
地点間通信会議コミュニケーション支援装置を用いるこ
とによって、図８に示す多地点間通信会議コミュニケー
ション支援装置で問題となっていた前記（１）〜（３）
に示されるコミュニケーション上の問題を解決すること
ができる。

【００３０】

【発明が解決しようとする課題】しかしながら、図９に
示す前記多地点間通信会議コミュニケーション支援装置
においては、複数の映像入力装置と複数の映像表示装置
とを備えるために端末装置の規模が大きくなるという問
題点があった。

【００３１】また、図９に示す前記多地点間通信会議コ
ミュニケーション支援装置においては、各接続対地に別
々の映像を伝送するため、通信網をスター（星）型やリ
ング（環状）型とした場合に、伝送するデータ量が対地
数に比例して増大するという問題点があった。

【００３２】また、このように各接続対地に別々の映像
を伝送するためには、各端末装置が接続対地の数だけの
映像符号化装置を持たなければならないという問題点が
あった（全ての接続対地に同じ映像を伝送する場合に
は、映像符号化装置は各端末装置が１つずつ備えていれ
ばよい）。

【００３３】また、前記端末装置の規模が大きくなるの
で、接続地点数をあまり多くできないという問題点があ
った。

【００３４】さらに、図９に示す前記多地点間通信会議
コミュニケーション支援装置においては、通信会議参加
者が複数の映像入力装置の画角に収まらなくてはならな
いため、端末装置を設置する位置および会議参加者の座
る位置が限定され（端末装置の設置位置の自由度が低
い）、また、会議参加者が、会議中に動ける範囲が狭く
なるという問題点があった。この問題点について図１０
を用いて説明する。

【００３５】図１０（Ａ）は１個の映像入力装置を用い
た端末装置における映像入力装置の画角と会議参加者の
位置関係を示す模式図である。

【００３６】図１０（Ａ）において、１０１は映像入力
装置、１０２は映像入力装置１０１の画角内に収まった
領域、１０３は会議参加者である。

【００３７】図１０（Ａ）に示した１個の映像入力装置
１０１を用いた端末装置を使用する会議参加者１０３
は、領域１０２内であればどこにいても映像入力装置１
０１によって自分の映像を他の通信会議参加者に送信す
ることが可能である。

【００３８】図１０（Ｂ）は３個の映像入力装置を用い
た端末装置における映像入力装置の画角と会議参加者と
の位置関係を示す模式図である。

【００３９】図１０（Ｂ）において、１０４〜１０６は
映像入力装置、１０７〜１０９は各々映像入力装置１０
４〜１０６の画角内に収まった領域、１１０は会議参加
者である。

【００４０】図１０（Ｂ）に示した３個の映像入力装置
１０４〜１０６を用いた端末装置を使用する会議参加者
１１０は、領域１０７〜１０９の３つの領域が重なった
重複領域１１１内に存在しなければ、自分の映像を他の
全ての通信会議参加者に送信することができない。

【００４１】すなわち、図１０（Ｂ）の重複領域１１１
は、図１０（Ａ）の領域１０２と比較して狭くなってし
まうという問題があった。

【００４２】本発明は、前記問題点を解決するためにな
されたものであり、本発明の目的は、端末装置の規模を
増大させず、端末装置の設置位置の自由度を低下させる
ことなく、かつ通信網の接続形態による伝送データ量の
増加を伴わずに、会議参加者各自のコミュニケーション
上の動作情報を会議参加者に報知することが可能な多地
点間通信会議システムにおける会議のコミュニケーショ
ン支援装置を提供することにある。

【００４３】本発明の前記ならびにその他の目的と新規
な特徴は、本明細書の記述および添付図面によって明ら
かにする。

【００４４】

【課題を解決するための手段】前記目的を達成するため
に本発明は、複数の端末装置間で映像および音声を送受
信し、複数の参加者が会議を行う多地点間通信会議シス
テムにおける会議のコミュニケーション支援装置であっ
て、前記端末装置は、会議参加者各自の動作情報を入力
する動作情報入力手段と、該動作情報を各地点の端末装
置に送信する動作情報送信手段と、該動作情報送信手段
からの動作情報を受信する動作情報受信手段と、該動作
情報受信手段によって受信された動作情報を報知する報
知手段とを備えたものである。

【００４５】

【作用】前記手段によれば、各端末装置が、会議参加者
各自の動作情報を入力し、該動作情報を各地点の端末装
置に送信し、該送信されてきた動作情報を各地点の端末
装置で受信し、該受信された動作情報を報知するので、
端末装置の規模を増大させず、端末装置の設置位置の自
由度を低下させることなく、かつ通信網の接続形態によ
る伝送データ量の増加を伴わずに、会議参加者各自のコ
ミュニケーション上の動作情報を会議参加者に報知する
ことができる。

【００４６】

【実施例】以下、図面を用いて本発明の実施例について
詳細に説明する。

【００４７】〔実施例１〕図１は本発明を適用した多地
点間通信会議コミュニケーション支援装置の実施例１の
構成を示す全体構成図である。

【００４８】図１において、Ａ、Ｂ、Ｃ、Ｄは会議参加
者、１１〜１４は端末装置、１５、１６は通信回線、１
１１は映像入力装置、１１２は映像表示装置、１１３は
音声入力装置、１１４は音声出力装置、１１５はデータ
入力装置、１１６はデータ送信装置、１１７はデータ通
知装置、１１２１〜１１２３は画像ウィンドウ、１１５
１はポインタ、１１５２はマウス、１１５３はポインタ
移動処理部、１１５４はポインタ表示部、１１５５はポ
インタ位置判定部、１１６１は注目対象記憶部、１１６
２はデータ送信部、１１７１はデータ受信部、１１７２
はマルチウィンドウ枠表示部である。

【００４９】図１において、本実施例１の多地点間通信
会議システムにおける会議のコミュニケーション支援装
置は、図１に示すように、会議参加者Ａ〜Ｄの注目対象
を入力するための動作情報入力手段として、映像表示装
置１１２上に表示するポインタ１１５１とマウス１１５
２（ポインティングデバイス）と、データ入力装置１１
５のポインタ位置判定部１１５５とを用い、送信された
データをもとに会議参加者間の注目関係を報知する報知
手段（通知手段）として会議参加者の映像の表示枠の変
化を用いたものである。

【００５０】端末装置１１は、会議参加者Ａの映像を撮
影する映像入力装置１１１と、他の会議参加者Ｂ〜Ｄの
映像を表示する映像表示装置１１２と、会議参加者Ａの
音声を入力する音声入力装置１１３と、他の会議参加者
Ｂ〜Ｄの音声を出力する音声出力装置１１４と、会議参
加者Ａの注目対象を特定するためのデータ入力装置１１
５と、会議参加者Ａがデータ入力装置１１５を用いて入
力したデータを他の会議参加者の端末装置１２〜１４に
送信するためのデータ送信装置１１６と、他の端末装置
１２〜１４から送信されたデータを受信し、他の会議参
加者Ｂ〜Ｄのデータを会議参加者Ａに映像表示装置１１
２を介して通知するデータ通知装置１１７とから構成さ
れている。

【００５１】映像表示装置１１２に表示されている画像
ウィンドウ１１２１〜１１２３は、会議参加者Ｂ〜Ｄそ
れぞれの映像を表示したものであり、マルチウィンドウ
手法を用いている。

【００５２】また、データ入力装置１１５は、映像表示
装置１１２上に表示されるポインタ１１５１を操作する
ためのマウス１１５２と、マウス１１５２の動きからポ
インタ１１５１を映像表示装置１１２上のどこに表示す
るかを決定するポインタ移動処理部１１５３と、ポイン
タ移動処理部１１５３によって決定された場所にポイン
タ１１５１を表示するポインタ表示部１１５４と、ポイ
ンタ移動処理部１１５３によって決定された場所が画像
ウィンドウ１１２１〜１１２３上であるか否か、またそ
うであった場合、どの画像ウィンドウ（１１２１〜１１
２３のいずれか）上にポインタ１１５１があるかを判定
するポインタ位置判定部１１５５とから構成される。

【００５３】また、データ送信装置１１６は、データ入
力装置１１５から入力された会議参加者Ａの注目対象を
記憶しておき、新たな入力があった際に、どの会議参加
地点にどのようなデータを送信すべきかを決定する注目
対象記憶部１１６１と、注目対象記憶部１１６１からの
指示により他の端末装置１２〜１４にデータを送信する
データ送信部１１６２とから構成される。

【００５４】さらに、データ通知装置１１７は、他の端
末装置１２〜１４からのデータを受信するデータ受信部
１１７１と、受信したデータに基づいて画像ウィンドウ
１１２１〜１１２３の枠を表示するマルチウィンドウ枠
表示部１１７２とから構成される。

【００５５】他の会議参加者Ｂ〜Ｄの端末装置１２〜１
４も、同様の構成となっている。

【００５６】また、矢印１５は、会議参加者Ａが、会議
参加者Ｂ〜Ｄのうちの誰に注目しているかというデータ
を端末装置１２〜１４に伝達する通信回線であり、矢印
１６は、会議参加者Ｂ〜Ｄのうち誰が、会議参加者Ａに
注目しているかというデータを端末装置１１に伝達する
通信回線である。

【００５７】図１においては、端末装置１１と他の端末
装置１２〜１４の間の通信回線１５および１６のみを図
示したが、他の端末装置１２〜１４相互の間にも同様の
通信回線が存在する。

【００５８】また、本実施例１では、各地点を結ぶ通信
網はメッシュ（網）型としているが、これはスター
（星）型およびリング（環状）型等どのような接続形態
でもよい。

【００５９】さらに、図１においては、会議参加者は４
人としたが、これは何人であってもよい。

【００６０】また実際には、各地点の端末装置の構成の
中には、当然、映像音声符号化・復号化装置や通信網イ
ンタフェース等を必要とするが、通信会議システムとし
ての説明上、特に必要としていないので省略している。

【００６１】これらは、以降に示す実施例の全てにおい
て同様である。

【００６２】また、図１においては省略したが、映像及
び音声信号を伝達する通信回線は図７に示すものと同様
に存在し、この装置構成においても従来型の多地点間通
信会議システムにおけるものと同様に、映像および音声
信号が送信される。

【００６３】通信回線１５、１６や、ここでは省略した
映像および音声信号用の通信回線は論理的なものであ
り、物理的な実態として、データを多重化するなどして
同一の通信回線を用いてもよい。

【００６４】以下、図１に示す本実施例１の動作につい
て説明する。

【００６５】図１において、いま、会議参加者Ａが、会
議参加者Ｂに注目する場合、会議参加者Ａは次の操作を
行うことによって、自分（会議参加者Ａ）が、会議参加
者Ｂに注目したことを明示的に入力する。

【００６６】まず、会議参加者Ａは、マウス１１５２を
用いてデータ入力装置１１５に指示を与え、ポインタ１
１５１を会議参加者Ｂの映像が表示されている画像ウィ
ンドウ１１２１上に移動する。

【００６７】すると、マウス１１５２は、会議参加者Ａ
の操作による移動量をポインタ移動処理部１１５３に通
知する。

【００６８】この通知を受けたポインタ移動処理部１１
５３は、現在のポインタ１１５１の映像表示装置１１２
上における表示座標とマウス１１５２から通知された移
動量からポインタ１１５１の新しい表示座標を決定し、
ポインタ表示部１１５４およびポインタ位置判定部１１
５５に通知する。

【００６９】ポインタ表示部１１５４は、ポインタ移動
処理部１１５３での決定に従い、映像表示装置１１２上
にポインタ１１５１を表示する。

【００７０】ポインタ位置判定部１１５５は、ポインタ
移動処理部１１５３によって決定された座標が画像ウィ
ンドウ１１２１〜１１２３上であるか否か、またそうで
あった場合どの画像ウィンドウ（１１２１〜１１２３の
いずれか）上であるかを判定し、その結果をデータ送信
装置１１６に通知する。ここではデータとして「Ｂ」が
通知される。

【００７１】データ送信装置１１６は、データ入力装置
１１５からの通知を受けて次に示す処理を行う。

【００７２】まず、注目対象記憶部１１６１は、データ
入力装置１１５から通知された会議参加者Ａの注目対象
を記憶しており、新たにデータ入力装置１１５から通知
があった際に、当該データと記憶しているデータとを比
較して、同じであれば処理を終了する。

【００７３】もし、その２つのデータに相違がある場
合、古いデータが「Ｂ〜Ｄ」であれば、データ送信部１
１６２に、古いデータの端末装置１２〜１４に対して、
会議参加者Ａが注目をやめたことを伝えるよう指示す
る。

【００７４】また、新しいデータが「Ｂ〜Ｄ」であれ
ば、データ送信部１１６２に新しいデータの端末装置１
２〜１４に対して、会議参加者Ａが注目していることを
伝えるよう指示する。

【００７５】ここで、データすなわち注目対象が「Ｂ〜
Ｄ」でない場合とは、ポインタ１１５１が、映像表示装
置１１２上の画像ウィンドウ１１２１〜１１２３上以外
の領域にある場合である。

【００７６】データ送信部１１６２は、注目対象記憶部
１１６１からの指示に従って、他の端末装置１２〜１４
にデータを送信する。

【００７７】データ通知装置１１７は、他の端末装置１
２〜１４から送信されたデータを受信し、それを次に示
す手順に従って、会議参加者Ａにわかるように通知す
る。

【００７８】まず、データ受信部１１７１が他の端末装
置１２〜１４から送信されたデータを受信し、マルチウ
ィンドウ枠表示部１１７２に通知する。マルチウィンド
ウ枠表示部１１７２は、受信したデータが注目している
ことを知らせるものである場合、そのデータの発信元の
会議参加者Ｂ〜Ｄの映像を表示している画像ウィンドウ
（１１２１〜１１２３のいずれか）の枠を特別な形式
（または特別な色）で表示する。

【００７９】また、データが注目をやめたことを示すも
のである場合には、そのデータの発信元の映像表示装置
１１２に表示されている会議参加者Ｂ〜Ｄの画像ウィン
ドウ（１１２１〜１１２３のいずれか）の枠を標準の形
式に戻して表示する。

【００８０】このようにして表示された画像ウィンドウ
１１２１〜１１２３の枠の形式は、新たなデータがデー
タ受信部１１７１から通知されるまで保持される。

【００８１】図１に示す実施例１において、会議参加者
Ａの端末装置１１で会議参加者Ｃの映像を表示している
画像ウィンドウ１１２２の枠が画像ウィンドウ１１２１
および１１２３の枠より太く表示されているのは、会議
参加者Ｃが会議参加者Ａに注目しており、会議参加者Ｂ
およびＤは、会議参加者Ａに注目していないことを表し
ている。

【００８２】また、図１において、会議参加者Ａの端末
装置１１で、ポインタ１１５１は会議参加者Ｂの映像を
表示している画像ウィンドウ１１２１上に位置してお
り、これは会議参加者Ａが会議参加者Ｂに注目している
ことを表している。

【００８３】このようにして、会議参加者Ａ〜Ｄは、マ
ウス１１５２を操作して自分の注目対象を特定すること
で、自分が注目していることを他の会議参加者に伝える
ことが可能となる。

【００８４】〔実施例２〕図２は本発明を適用した多地
点間通信会議コミュニケーション支援装置の実施例２を
説明するための説明図である。本実施例２においては、
会議参加者の注目対象を特定するためのデータ入力手段
として画像ウィンドウの大きさの変化を用いたものであ
る。

【００８５】なお、本実施例２において、通知を受けた
側の動作は、前記実施例１と同様であるので、その説明
は省略し、異なる場合のみ説明する。

【００８６】図２において、Ａ〜Ｄは会議参加者であり
（会議参加者Ｂ〜Ｄは、画面内に表示されている）、２
１は会議参加者Ａの通信会議端末装置（以下、端末装置
という）であり、２１２は会議参加者Ａの端末装置２１
の映像表示装置、２１５１はワークステーション等にお
いて様々なＧＵＩ（グラフィカルユーザインタフェー
ス）操作を行うためのポインタであり、２１５２はポイ
ンタ２１５１を映像表示装置２１２上で移動するための
マウスである。

【００８７】また、２１２１〜２１２３はマルチウィン
ドウ手法によって表示された画像ウィンドウであり、そ
れぞれ会議参加者Ｂ〜Ｄの映像を表示している。２１５
３は画像ウィンドウ２１２１〜２１２３の拡大縮小を検
出する拡大縮小検出装置である。

【００８８】図２においては、４地点間の通信会議シス
テムの内の１地点のみを示したが、図１に示したように
他の３地点にも同様の構成の端末装置が存在するものと
する。これは、これ以後に示す実施例においても同様で
ある。

【００８９】ここでは映像入力装置および音声入出力装
置は、説明上特に必要としないので省略してある。

【００９０】図２において、いま、会議参加者Ａが、会
議参加者Ｂに注目したとすると、会議参加者Ａは通常の
マルチウィンドウ方式に見られるように、マウス２１５
２を用いる等して会議参加者Ｂの映像が表示された画像
ウィンドウ２１２１を拡大する。

【００９１】すると、拡大縮小検出装置２１５３は、マ
ウス２１５２の操作を検出し、会議参加者Ｂの端末装置
（図示していない）に通知する。

【００９２】通知を受けた側の動作は前記実施例１と同
様である。

【００９３】図２において、会議参加者Ａの端末装置２
１で、会議参加者Ｂの映像を表示している画像ウィンド
ウ２１２１が画像ウィンドウ２１２２および２１２３よ
り大きく表示されているのは、会議参加者Ａが会議参加
者Ｂに注目していることを示している。

【００９４】また、この状況で会議参加者Ａが、注目対
象を会議参加者Ｂから会議参加者Ｃに変える場合、会議
参加者Ａはマウス２１５２を用いる等して会議参加者Ｃ
の映像が表示された画像ウィンドウ２１２２を拡大す
る。

【００９５】拡大縮小検出装置２１５３は、この拡大操
作を検出し、会議参加者Ｃの端末装置（図示していな
い）に会議参加者Ａが注目を始めたことを表すデータを
送信する。

【００９６】また、会議参加者Ｂの映像が表示された画
像ウィンドウ２１２１を拡大される前の大きさに戻し、
会議参加者Ｂの端末装置（図示していない）に会議参加
者Ａが注目をやめたことを表すデータを送信する。

【００９７】〔実施例３〕図３は本発明を適用した多地
点間通信会議コミュニケーション支援装置の実施例３を
説明するための説明図である。本実施例３においては、
会議参加者の注目対象を特定するためのデータ入力手段
として会議参加者の音声信号の音量の変化を用いたもの
である。

【００９８】なお、本実施例３において、通知を受けた
側の動作は、前記実施例１と同様であるので、その説明
は省略し、異なる場合のみ説明する。

【００９９】図３において、会議参加者Ａ〜Ｄの４人が
通信会議に参加している。３１は会議参加者Ａの端末装
置の音声出力系の模式図であり、３１１〜３１３は各々
会議参加者Ｂ〜Ｄの音声信号を会議参加者Ａの端末装置
に伝達する通信回線であり、３１５〜３１７は各々会議
参加者Ｂ〜Ｄの音声信号をスピーカに出力する際の音量
を調節するためのボリュームであり、３１８はボリュー
ム３１５〜３１７のレベルを検出する音量レベル検出装
置であり、３１９は会議参加者Ｂ〜Ｄの音声信号を１つ
のスピーカに出力するための音声信号加算器であり、３
１４は会議参加者Ａの端末装置の音声出力装置である。

【０１００】図３において、いま、会議参加者Ａが、会
議参加者Ｂに注目したとすると、会議参加者Ａはボリュ
ーム３１５を調整して、会議参加者Ｂからの音声の音量
を拡大する。

【０１０１】すると、音量レベル検出装置３１８が、そ
の音量拡大操作を検出し、ボリューム３１５〜３１７の
うちで最大音量に設定されたものが、会議参加者Ｂから
の音声信号用のボリューム３１５になった時点で会議参
加者Ｂの端末装置（図示していない）に通知する。

【０１０２】通知を受けた側の動作は前記実施例１と同
様である。

【０１０３】〔実施例４〕図４は本発明を適用した多地
点間通信会議コミュニケーション支援装置の実施例４を
説明するための説明図である。本実施例４においては、
会議参加者の注目対象を特定するためのデータ入力手段
として視線検出装置４１９を用いたものである。

【０１０４】なお、本実施例４において、通知を受けた
側の動作は、前記実施例１と同様であるので、その説明
は省略し、異なる場合のみ説明する。

【０１０５】図４において、Ａ〜Ｄは会議参加者であ
り、４１は会議参加者Ａの端末装置であり、４１２は会
議参加者Ａの端末装置４１の映像表示装置、４１９は視
線検出装置である。

【０１０６】また、４１２１〜４１２３はマルチウィン
ドウ手法によって表示された画像ウィンドウであり、そ
れぞれ会議参加者Ｂ〜Ｄの映像を表示している。

【０１０７】図４において、映像入力装置および音声の
入出力装置は、説明上特に必要ないので省略している。

【０１０８】図４において、いま、会議参加者Ａが、表
示装置４１２上の会議参加者Ｂの映像が表示されている
画像ウィンドウ４１２１に注目したとすると、視線検出
装置４１９が、会議参加者Ａの視線の向きを検出し、会
議参加者Ｂの端末装置（図示していない）に通知する。

【０１０９】前記視線検出装置４１９には、一般に用い
られている角膜と強膜の反射特性の違いを利用したもの
や、眼球電位を利用したものを用いてもよいし、さらに
簡便には、会議参加者Ａ〜Ｄに赤外線や超音波に対する
特徴的な反射特性を有する眼鏡やヘアピースなどを装着
させ、視線検出装置４１９から放射した赤外線や超音波
の装着具からの反射波を検出することにより、会議参加
者Ａ〜Ｄの顔の向きを検出する装置を用いてもよい。

【０１１０】通知を受けた側の動作は前記実施例１と同
様である。

【０１１１】〔実施例５〕図５は本発明を適用した多地
点間通信会議コミュニケーション支援装置の実施例５を
説明するための説明図である。本実施例５においては、
会議参加者の注目対象を特定するためのデータ入力手段
としてポインタ５１５１とマウス５１５２およびポイン
タ位置判定部１１５５（図示していない）と会議参加者
のシンボル表示５１５４１〜５１５４４とを用いたもの
である。

【０１１２】なお、本実施例５において、通知を受けた
側の動作は、前記実施例１と同様であるので、その説明
は省略し、異なる場合のみ説明する。

【０１１３】図５において、Ａ〜Ｄは会議参加者であ
り、５１は会議参加者Ａの端末装置であり、５１２は会
議参加者Ａの端末装置５１の映像表示装置である。５１
５１は会議参加者Ａの注目対象を特定するためのポイン
タであり、５１５２はポインタ５１５１を映像表示装置
５１２上で移動するためのマウスである。５１５３はポ
インタ５１５１の映像表示装置５１２上における位置を
検出するポインタ位置検出装置である。

【０１１４】また、５１２１〜５１２３はマルチウィン
ドウ手法によって表示された画像ウィンドウであり、そ
れぞれ会議参加者Ｂ〜Ｄの映像を表示している。５１５
４は会議参加者を一覧可能とする会議状況表示ウィンド
ウであり、５１５４１〜５１５４４は各々会議参加者Ａ
〜Ｄを表す会議参加者のシンボル表示である。

【０１１５】図５において、映像入力装置および音声の
入出力装置は、説明上特に必要ないので省略している。

【０１１６】図５において、いま、会議参加者Ａが、会
議参加者Ｂに注目したとすると、会議参加者Ａは、マウ
ス５１５２を用いてポインタ５１５１を、会議参加者Ｂ
を表す会議参加者のシンボル表示５１５４２上に移動す
る。ポインタ位置検出装置５１５３は、マウス５１５２
の移動操作を検出し、会議参加者Ｂの端末装置（図示し
ていない）に通知する。

【０１１７】通知を受けた側の動作は前記実施例１と同
様である。

【０１１８】〔実施例６〕図６は本発明を適用した多地
点間通信会議コミュニケーション支援装置の実施例６を
説明するための説明図である。本実施例６においては、
送信されたデータをもとに会議参加者間の注目関係を通
知する機能として、データ受信部６１７１と会議状況表
示部６１７２と会議参加者のシンボル表示６１５４１〜
６１５４４とを用いたものである。

【０１１９】図６において、Ａ〜Ｄは会議参加者であ
り、６１は会議参加者Ａの端末装置であり、６１２は会
議参加者Ａの端末装置６１の映像表示装置である。６１
２１〜６１２３はマルチウィンドウ手法によって表示さ
れた画像ウィンドウであり、それぞれ会議参加者Ｂ〜Ｄ
の映像を表示している。６１５４は会議参加者を一覧可
能とする会議状況表示ウィンドウであり、６１５４１〜
６１５４４は各々会議参加者Ａ〜Ｄを表す会議参加者の
シンボル表示である。

【０１２０】また、図６において、６１７は、他の端末
装置（図示していない）からデータを受信し、この受信
したデータを会議参加者Ａに通知するデータ通知装置で
あり、６１７１は、他の端末装置（図示していない）か
らのデータを受信するデータ受信部であり、６１７２
は、受信したデータに基づいて会議参加者を表すシンボ
ル表示６１５４１〜６１５４４を含む会議状況表示ウィ
ンドウ６１５４を表示する会議状況表示部である。

【０１２１】なお、図６において、映像入力装置および
音声の入出力装置は、説明上特に必要ないので省略して
いる。

【０１２２】図６において、データ通知装置６１７は、
他の端末装置（図示していない）から送信されたデータ
を受信し、この受信したデータを次に示す手順に従っ
て、会議参加者Ａに分かるように通知する。

【０１２３】まず、データ受信部６１７１が他の端末装
置（図示していない）から送信されたデータを受信し、
会議状況表示部６１７２に通知する。

【０１２４】すると、会議状況表示部６１７２は、ま
ず、この通知されたデータが、他の会議参加者（Ｂ〜
Ｄ）のうちのいずれかが会議参加者Ａに注目しているこ
とを知らせるデータであった場合、そのデータの発信元
の会議参加者（Ｂ〜Ｄのいずれか）を表すシンボル表示
（６１５４２〜６１５４４のいずれか）を特別な形式
（または特別な色）で表示する。

【０１２５】また、受信したデータが、他の会議参加者
（Ｂ〜Ｄ）が会議参加者Ａに対する注目をやめたことを
知らせるデータであった場合、そのデータの発信元の会
議参加者（Ｂ〜Ｄのいずれか）を表すシンボル表示（６
１５４２〜６１５４４のいずれか）を標準の形式（また
は標準色）で表示する。

【０１２６】このようにして、表示された会議参加者
（Ａ〜Ｄ）のシンボル表示６１５４１〜６１５４４の形
式（または色）は、新たなデータがデータ受信部６１７
１から会議状況表示部６１７２に通知されるまで保持さ
れる。

【０１２７】なお、シンボル表示（６１５４１〜６１５
４４）を前記特別な形式（または特別な色）や前記標準
の形式（または標準色）で表示する方法は、ＷＳ（ワー
クステーション）やＰＣ（パーソナルコンピュータ）な
どで一般的に用いられている画像表示方法を用いること
により実現されるものである。

【０１２８】図６において、いま、会議参加者Ｂが、会
議参加者Ａに注目したとすると、会議参加者Ｂの端末装
置（図示していない）は、実施例１〜５に示したよう
に、何らかのデータ入力手段によって、データを入力
し、入力された当該データを検出して、会議参加者Ａの
端末装置６１に通知する。

【０１２９】会議参加者Ａの端末装置６１は、この通知
を受けて、映像表示装置６１２上にマルチウィンドウ方
式で表示した会議状況表示ウィンドウ６１５４中の会議
参加者Ｂを表す会議参加者のシンボル表示６１５４２を
特別な形式（または特別な色）に変更することによっ
て、会議参加者Ｂが、会議参加者Ａ（自分）に注目して
いることを会議参加者Ａに通知する。

【０１３０】図６において、会議参加者Ａの端末装置６
１上で会議状況表示ウィンドウ６１５４に表示された会
議参加者のシンボル表示６１５４１〜６１５４４のうち
の会議参加者Ｂを表すシンボル表示６１５４２が強調表
示されているのは、会議参加者Ｂが会議参加者Ａに注目
していることを示している。

【０１３１】〔実施例７〕図７は本発明を適用した多地
点間通信会議コミュニケーション支援装置の実施例７を
説明するための説明図である。本実施例７においては、
伝達されたデータをもとに会議参加者間の注目関係を通
知する機能として、会議参加者とその注目関係のシンボ
ル表示７２５４１〜７２５４４を用いたものであり、前
記図６と同様の構成のシステムのうちの会議状況表示ウ
ィンドウ６１５４に相当するものだけを示している。

【０１３２】図７において、７２５４は会議参加者を一
覧可能とする会議状況表示ウィンドウであり、７２５４
１〜７２５４４は各々会議参加者Ａ〜Ｄを表す会議参加
者のシンボル表示である。７２５４５〜７２５４７は会
議参加者の注目対象を特定するための関係シンボルであ
る図７において、いま、会議参加者Ａが、会議参加者Ｂ
に注目したとすると、会議参加者Ａは、前記実施例１〜
５に示したように何らかのデータ入力手段によって、デ
ータを入力し、入力された当該データを検出して、会議
参加者Ｂおよび他の会議参加者Ｃ、Ｄの端末装置（図示
していない）に通知する。

【０１３３】会議参加者Ｂ〜Ｄの端末装置（図示してい
ない）は、この通知を受取り、映像表示装置（図示して
いない）上にマルチウィンドウ方式で表示した会議状況
表示ウィンドウ７２５４中の会議参加者Ａを表す会議参
加者シンボル表示７２５４１と、会議参加者Ｂを表す会
議参加者シンボル表示７２５４２との間に、会議参加者
Ａが会議参加者Ｂに注目していることを表す関係シンボ
ル７２５４５を表示することで、会議参加者Ａが会議参
加者Ｂに注目していることを各会議参加者Ｂ〜Ｄに通知
する。

【０１３４】図７において、会議状況表示ウィンドウ７
２５４に表示された会議参加者Ｂ〜Ｄのシンボル表示７
１５４１〜７１５４４と、関係シンボル７１５４５〜７
１５４７は各々、会議参加者Ａが会議参加者Ｂに注目し
ていること、会議参加者Ｂが会議参加者Ｃに注目してい
ること、会議参加者Ｃと会議参加者Ｄとは相互に注目し
あっていることを表している。

【０１３５】以上、本発明に係る多地点間通信会議シス
テムにおける会議のコミュニケーション支援装置の７つ
の実施例を示したが、前記実施例１〜実施例５に示した
「会議参加者の注目対象を特定するためのデータ入力手
段」と、前記実施例１および前記実施例６、７に示した
「会議参加者間の注目関係を通知する機能」とをどのよ
うに組み合わせて用いてもよい。

【０１３６】また、「会議参加者の注目対象を特定する
ためのデータ入力手段」や「会議参加者間の注目関係を
通知する機能」は各々単独で用いてもよいし、複数を組
み合わせて用いてもよい。

【０１３７】例えば、「会議参加者の注目対象を特定す
るためのデータ入力手段」として、前記実施例１の画像
ウィンドウに対するポインティングを用いる方法と、前
記実施例２の画像ウィンドウの大きさを用いる方法とを
組み合わせるとすると次のような方法が実現可能であ
る。

【０１３８】会議参加者Ａは、会議参加者Ｂの映像が表
示されている画像ウィンドウを拡大することで、会議参
加者Ｂに注目していることを入力するが、一時的にそれ
以外の参加者Ｃに注目した場合には、ポインタを会議参
加者Ｃの映像が表示されている画像ウィンドウ上に移動
させることで会議参加者Ｃへの注目を入力する。

【０１３９】そして、会議参加者Ｃから会議参加者Ｂに
注意を戻した時にポインタを画像ウィンドウ以外の場所
に移動させる。

【０１４０】以上、本発明の実施例を「会議参加者の注
目対象を特定するためのデータ入力手段」および「会議
参加者間の注目関係を通知する機能」に主眼をおいて、
具体的に説明したが、本発明の要件は多地点間通信会議
システムの参加者が「会議参加者の注目対象を特定する
ためのデータ入力手段」によって入力したデータを、他
の会議参加者の端末装置に伝達し、それを「会議参加者
間の注目関係を通知する機能」によって会議参加者に通
知することにより多地点間通信会議システムにおける会
議参加者間のコミュニケーションを支援することにある
ので、「会議参加者の注目対象を特定するためのデータ
入力手段」や「会議参加者間の注目関係を通知する機
能」は実施例に示した以外の方法で実現しても差し支え
ない。

【０１４１】以上、本発明者によってなされた発明を、
前記実施例に基づき具体的に説明したが、本発明は、前
記実施例に限定されるものではなく、その要旨を逸脱し
ない範囲において種々変更可能であることは勿論であ
る。

【０１４２】

【発明の効果】以上、説明したように、本発明によれ
ば、各端末装置が、会議参加者各自の動作情報を入力
し、該動作情報を各地点の端末装置に送信し、送信され
てきた動作情報を各地点の端末装置で受信し、受信され
た動作情報を報知するので、端末装置の規模を増大させ
ず、端末装置の設置位置の自由度を低下させることな
く、かつ通信網の接続形態による伝送データ量の増加を
伴わずに、会議参加者各自のコミュニケーション上の動
作情報を会議参加者に報知することができる。

【０１４３】これにより、多地点間通信会議システムで
あっても、会議参加者各自の注目対象を他の会議参加者
に伝達・通知することができる。

【０１４４】これにより、通常の対面会議に、より一層
近い会議環境を提供することが可能となり、人に優しい
ヒューマンインタフェースの実現が期待できる。

【図面の簡単な説明】

【図１】 本発明を適用した多地点間通信会議コミュニ
ケーション支援装置の実施例１の構成を示す全体構成図
である。

【図２】 本発明を適用した多地点間通信会議コミュニ
ケーション支援装置の実施例２を説明するための説明図
である。

【図３】 本発明を適用した多地点間通信会議コミュニ
ケーション支援装置の実施例３を説明するための説明図
である。

【図４】 本発明を適用した多地点間通信会議コミュニ
ケーション支援装置の実施例４を説明するための説明図
である。

【図５】 本発明を適用した多地点間通信会議コミュニ
ケーション支援装置の実施例５を説明するための説明図
である。

【図６】 本発明を適用した多地点間通信会議コミュニ
ケーション支援装置の実施例６を説明するための説明図
である。

【図７】 本発明を適用した多地点間通信会議コミュニ
ケーション支援装置の実施例７を説明するための説明図
である。

【図８】 従来の多地点間通信会議システムを説明する
ための説明図である。

【図９】 図８の多地点間通信会議システムの問題点を
解決するシステムを説明するための説明図である。

【図１０】 映像入力装置の画角と会議参加者の位置関
係を示す模式図である。

【符号の説明】

Ａ、Ｂ、Ｃ、Ｄ…会議参加者、１１、１２、１３、１４
…実施例１における端末装置、１５、１６…通信回線、
１１１…実施例１における映像入力装置、１１２…実施
例１における映像表示装置、１１３…実施例１における
音声入力装置、１１４…実施例１における音声出力装
置、１１５…実施例１におけるデータ入力装置、１１６
…実施例１におけるデータ送信装置、１１７…実施例１
におけるデータ通知装置、１１５１…実施例１における
ポインタ、１１５２…実施例１におけるマウス（ポイン
ティングデバイス）、１１５３…ポインタ移動処理部、
１１５４…ポインタ表示部、１１５５…ポインタ位置判
定部、１１６１…注目対象記憶部、１１６２…データ送
信部、１１７１…データ受信部、１１７２…マルチウィ
ンドウ枠表示部。

Claims (1)

【特許請求の範囲】
1. 【請求項１】 複数の端末装置間で映像および音声を送
   受信し、複数の参加者が会議を行う多地点間通信会議シ
   ステムにおける会議のコミュニケーション支援装置であ
   って、 前記端末装置は、会議参加者各自の動作情報を入力する
   動作情報入力手段と、該動作情報を各地点の端末装置に
   送信する動作情報送信手段と、該動作情報送信手段から
   の動作情報を受信する動作情報受信手段と、該動作情報
   受信手段によって受信された動作情報を報知する報知手
   段とを備えることを特徴とする多地点間通信会議コミュ
   ニケーション支援装置。