JP2005328484A - テレビ会議システム、情報処理装置及び情報処理方法並びにプログラム - Google Patents

テレビ会議システム、情報処理装置及び情報処理方法並びにプログラム Download PDF

Info

Publication number
JP2005328484A
JP2005328484A JP2004146930A JP2004146930A JP2005328484A JP 2005328484 A JP2005328484 A JP 2005328484A JP 2004146930 A JP2004146930 A JP 2004146930A JP 2004146930 A JP2004146930 A JP 2004146930A JP 2005328484 A JP2005328484 A JP 2005328484A
Authority
JP
Japan
Prior art keywords
video
user
document
image
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2004146930A
Other languages
English (en)
Inventor
Jun Ito
潤 伊藤
Mutsuhiro Omori
睦弘 大森
Shigehiro Shimada
繁広 嶌田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2004146930A priority Critical patent/JP2005328484A/ja
Publication of JP2005328484A publication Critical patent/JP2005328484A/ja
Pending legal-status Critical Current

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

【課題】
本発明は、コミュニケーション性が高く、臨場感あふれるテレビ会議システムを提案する。
【解決手段】
それぞれ異なる地点に設置される１又は複数の端末装置と、所定のネットワークを介して端末装置と接続される情報処理装置とからなるテレビ会議システムにおいて、端末装置からネットワークを介して送信される映像データに基づくユーザの映像及び必要なドキュメントの画像を合成した合成映像を生成する映像合成手段と、ドキュメント操作手段を用いたドキュメント操作及び又は上記音声データに基づき検出されるユーザの発言の有無に基づいて、合成映像におけるドキュメントの画像及び又は対応するユーザの映像を拡大又は縮小させるように合成映像手段を制御する制御手段と、映像合成手段により生成された合成映像の映像データでなる合成映像データを、ネットワークを介して端末装置に送信する送信手段とを設けるようにした。
【選択図】 図６

Description

本発明は、テレビ会議システム、情報処理装置及び情報処理方法並びにプログラムに関し、例えば遠隔地にいる複数の相手ユーザとテレビ会議を行う場合に適用して好適なものである。
従来、複数の地点に設置されたテレビ会議端末をＩＳＤＮ（Integrated Services Digital Network）等の公衆回線や専用線を介して接続し、映像データ及び音声データ等の情報を相互に送受信することによって、遠隔地にいる複数の相手ユーザとの会議を行い得るようになされたテレビ会議システムがある。
このようなテレビ会議システムにおいては、テレビ会議先の複数の相手ユーザの映像がディスプレイに表示されるが、その相手ユーザの発言の様子やそのときの表情を認識することができれば、よりコミュニケーション性の高い会議を行うことができるものと考えられる。
しかしながらこのようなテレビ会議システムにおいて、複数のユーザが一堂に会してテレビ会議を行う場合には、誰が発言しているか認識し難いという問題がある。そこでかかる問題を解決するために、音声の方向等に基づいて発言者を検出し、ディスプレイに表示される発言したユーザの映像の頭上にカーソルを付加することによって、当該発言したユーザを識別する方法が提案されている（例えば特許文献１参照）。
特開２００３−１８９２７３公報
ところで、近年テレビ会議システムにおいては、複数の地点に設置されたパーソナルコンピュータを、例えばウインドウズＸＰ（Windows（登録商標） XP）のリモートデスクトップ機能やVNC（Virtual Network Computing）等のリモートアクセスシステム等を用いて、インターネット回線等のネットワークを介して接続することによって、パーソナルコンピュータを用いたマルチウインドウ・マルチディスプレイ環境におけるテレビ会議を行い得るようになされている。
このとき、テレビ会議先の相手ユーザとフリーディスカッションを行う場合には、相手ユーザの映像を発言の様子やそのときの表情等を容易に認識し得るように拡大させて表示させる一方、テレビ会議先の相手ユーザがドキュメントの内容の説明を行う場合には、ドキュメントの該当部分を拡大させて表示させるようにすれば、コミュニケーション性が高く、臨場感あふれるテレビ会議が行えると考えられる。
しかしながらこのような場合には、ユーザに相手ユーザの映像及びドキュメントの映像の拡大や縮小等の操作をさせる等の煩雑な操作が必要となるため、そちらに意識が集中して本来の会議に意識を集中させることができなくなり、また操作の煩雑さから、状況に応じて相手ユーザの映像及びドキュメントの映像の拡大や縮小等の操作自体を行わなくなることによって、臨場感に乏しく、コミュニケーション性が欠如するという問題がある。
本発明は以上の点を考慮してなされたもので、コミュニケーション性が高く、臨場感あふれるテレビ会議システム、情報処理装置及び情報処理方法並びにプログラムを提案するものである。
かかる課題を解決するために本発明においては、それぞれ異なる地点に設置される１又は複数の端末装置と、所定のネットワークを介して端末装置と接続される情報処理装置とからなるテレビ会議システムにおいて、端末装置は、ユーザを撮影する撮影手段と、ユーザの音声を集音する集音手段と、ドキュメントについての所定のドキュメント操作を行うためのドキュメント操作手段と、撮影手段から出力される映像データ及び集音手段から出力される音声データをネットワークを介して情報処理装置に送信する送信手段と、情報処理装置からネットワークを介して送信される合成映像データに基づく映像を表示する表示手段とを設け、情報処理装置は、端末装置からネットワークを介して送信される映像データに基づくユーザの映像及び必要なドキュメントの画像を合成した合成映像を生成する映像合成手段と、ドキュメント操作手段を用いたドキュメント操作及び又は上記音声データに基づき検出されるユーザの発言の有無に基づいて、合成映像におけるドキュメントの画像及び又は対応するユーザの映像を拡大又は縮小させるように合成映像手段を制御する制御手段と、映像合成手段により生成された合成映像の映像データでなる合成映像データを、ネットワークを介して端末装置に送信する送信手段とを設けるようにした。
これにより、ユーザに余分な操作をさせることなく、ドキュメント操作時にはドキュメント画像及びその操作を行ったユーザのユーザ映像をメインに捉えさせる一方、ユーザの発言時には当該発言を行ったユーザのユーザ映像をメインに捉えさせることができる。
またかかる課題を解決するために本発明においては、それぞれ異なる地点に設置される１又は複数の端末装置と、所定のネットワークを介して端末装置と接続される情報処理装置において、端末装置からネットワークを介して送信される撮影されたユーザの映像データに基づくユーザの映像及び必要なドキュメントの画像を合成した合成映像を生成する映像合成手段と、端末装置からネットワークを介して送信されるドキュメントについての所定のドキュメント操作及び又は集音されたユーザの音声の音声データに基づき検出されるユーザの発言の有無に基づいて、合成映像におけるドキュメントの画像及び又は対応するユーザの映像を拡大又は縮小させるように合成映像合成手段を制御する制御手段と、映像合成手段により生成された合成映像の映像データでなる合成映像データを、ネットワークを介して端末装置に送信する送信手段とを設けるようにした。
これにより、ユーザに余分な操作をさせることなく、ドキュメント操作時にはドキュメント画像及びその操作を行ったユーザのユーザ映像をメインに捉えさせる一方、ユーザの発言時には当該発言を行ったユーザのユーザ映像をメインに捉えさせることができる。
さらにかかる課題を解決するために本発明においては、それぞれ異なる地点に設置される１又は複数の端末装置と、所定のネットワークを介して上記端末装置と接続される情報処理装置における情報処理方法において、端末装置からネットワークを介して送信される撮影されたユーザの映像データに基づくユーザの映像及び必要なドキュメントの画像を合成した合成映像を生成する第１のステップと、端末装置からネットワークを介して送信されるドキュメントについての所定のドキュメント操作及び又は集音されたユーザの音声の音声データに基づき検出されるユーザの発言の有無に基づいて、合成映像におけるドキュメントの画像及び又は対応するユーザの映像を拡大又は縮小させる第２のステップと、合成映像の映像データでなる合成映像データを、ネットワークを介して端末装置に送信する第３のステップとを設けるようにした。
これにより、ユーザに余分な操作をさせることなく、ドキュメント操作時にはドキュメント画像その操作を行ったユーザのユーザ映像をメインに捉えさせる一方、ユーザの発言時にはその当該発言を行ったユーザのユーザ映像をメインに捉えさせることができる。
さらにかかる課題を解決するために本発明においては、プログラムにおいてそれぞれ異なる地点に設置される１又は複数の端末装置と、所定のネットワークを介して端末装置と接続される情報処理装置に対して、端末装置からネットワークを介して送信される撮影されたユーザの映像データに基づくユーザの映像及び必要なドキュメントの画像を合成した合成映像を生成する第１のステップと、端末装置からネットワークを介して送信されるドキュメントについての所定のドキュメント操作及び又は集音されたユーザの音声の音声データに基づき検出されるユーザの発言の有無に基づいて、合成映像におけるドキュメントの画像及び又は対応するユーザの映像を拡大又は縮小させる第２のステップと、合成映像の映像データでなる合成映像データを、ネットワークを介して端末装置に送信する第３のステップとを実行させるようにした。
これにより、ユーザに余分な操作をさせることなく、ドキュメント操作時にはドキュメント画像その操作を行ったユーザのユーザ映像をメインに捉えさせる一方、ユーザの発言時にはその当該発言を行ったユーザのユーザ映像をメインに捉えさせることができる。
以上のように本発明によれば、それぞれ異なる地点に設置される１又は複数の端末装置と、所定のネットワークを介して端末装置と接続される情報処理装置とからなるテレビ会議システムにおいて、端末装置は、ユーザを撮影する撮影手段と、ユーザの音声を集音する集音手段と、ドキュメントについての所定のドキュメント操作を行うためのドキュメント操作手段と、撮影手段から出力される映像データ及び集音手段から出力される音声データをネットワークを介して情報処理装置に送信する送信手段と、情報処理装置からネットワークを介して送信される合成映像データに基づく映像を表示する表示手段とを設け、情報処理装置は、端末装置からネットワークを介して送信される映像データに基づくユーザの映像及び必要なドキュメントの画像を合成した合成映像を生成する映像合成手段と、ドキュメント操作手段を用いたドキュメント操作及び又は上記音声データに基づき検出されるユーザの発言の有無に基づいて、合成映像におけるドキュメントの画像及び又は対応するユーザの映像を拡大又は縮小させるように合成映像手段を制御する制御手段と、映像合成手段により生成された合成映像の映像データでなる合成映像データを、ネットワークを介して端末装置に送信する送信手段とを設けるようにしたことにより、ユーザに余分な操作をさせることなく、ドキュメント操作時にはドキュメント画像及びその操作を行ったユーザのユーザ映像をメインに捉えさせる一方、ユーザの発言時には当該発言を行ったユーザのユーザ映像をメインに捉えさせることができ、かくしてコミュニケーション性が高く、臨場感あふれるテレビ会議システムを実現できる。
また以上のように本発明によれば、それぞれ異なる地点に設置される１又は複数の端末装置と、所定のネットワークを介して端末装置と接続される情報処理装置において、端末装置からネットワークを介して送信される撮影されたユーザの映像データに基づくユーザの映像及び必要なドキュメントの画像を合成した合成映像を生成する映像合成手段と、端末装置からネットワークを介して送信されるドキュメントについての所定のドキュメント操作及び又は集音されたユーザの音声の音声データに基づき検出されるユーザの発言の有無に基づいて、合成映像におけるドキュメントの画像及び又は対応するユーザの映像を拡大又は縮小させるように合成映像合成手段を制御する制御手段と、映像合成手段により生成された合成映像の映像データでなる合成映像データを、ネットワークを介して端末装置に送信する送信手段とを設けるようにしたことにより、ユーザ余分な操作をさせることなく、ドキュメント操作時にはドキュメント画像及びその操作を行ったユーザのユーザ映像をメインに捉えさせる一方、ユーザの発言時には当該発言を行ったユーザのユーザ映像をメインに捉えさせることができ、かくしてコミュニケーション性が高く、臨場感あふれる情報処理装置を実現できる。
さらに以上のように本発明によれば、それぞれ異なる地点に設置される１又は複数の端末装置と、所定のネットワークを介して上記端末装置と接続される情報処理装置における情報処理方法において、端末装置からネットワークを介して送信される撮影されたユーザの映像データに基づくユーザの映像及び必要なドキュメントの画像を合成した合成映像を生成する第１のステップと、端末装置からネットワークを介して送信されるドキュメントについての所定のドキュメント操作及び又は集音されたユーザの音声の音声データに基づき検出されるユーザの発言の有無に基づいて、合成映像におけるドキュメントの画像及び又は対応するユーザの映像を拡大又は縮小させる第２のステップと、合成映像の映像データでなる合成映像データを、ネットワークを介して端末装置に送信する第３のステップとを設けるようにしたことにより、ユーザに余分な操作をさせることなく、ドキュメント操作時にはドキュメント画像及びその操作を行ったユーザのユーザ映像をメインに捉えさせる一方、ユーザの発言時には当該発言を行ったユーザのユーザ映像をメインに捉えさせることができ、かくしてコミュニケーション性が高く、臨場感あふれる情報処理方法を実現できる。
さらに以上のように本発明によれば、プログラムにおいてそれぞれ異なる地点に設置される１又は複数の端末装置と、所定のネットワークを介して端末装置と接続される情報処理装置に対して、端末装置からネットワークを介して送信される撮影されたユーザの映像データに基づくユーザの映像及び必要なドキュメントの画像を合成した合成映像を生成する第１のステップと、端末装置からネットワークを介して送信されるドキュメントについての所定のドキュメント操作及び又は集音されたユーザの音声の音声データに基づき検出されるユーザの発言の有無に基づいて、合成映像におけるドキュメントの画像及び又は対応するユーザの映像を拡大又は縮小させる第２のステップと、合成映像の映像データでなる合成映像データを、ネットワークを介して端末装置に送信する第３のステップとを実行させるようにしたことにより、ユーザに余分な操作をさせることなく、ドキュメント操作時にはドキュメント画像及びその操作を行ったユーザのユーザ映像をメインに捉えさせる一方、ユーザの発言時には当該発言を行ったユーザのユーザ映像をメインに捉えさせることができ、かくしてコミュニケーション性が高く、臨場感あふれるプログラムを実現できる。
以下図面について、本発明の一実施の形態を詳述する。
（１）本実施の形態によるテレビ会議システムの構成
図１において、１は全体として本実施の形態によるテレビ会議システムを示し、それぞれ異なる地点に設置された複数のテレビ会議端末２（２Ａ、２Ｂ）と、テレビ会議サーバ３とが例えばインターネット回線等のネットワークＮＴを介して相互に接続されることにより構成される。
この場合、各テレビ会議端末２には、図２に示すように、それぞれ例えばＣＣＤ（Charge Coupled Device）からなるカメラ部４と、マイクロホン５と、マウス等からなるポインティングデバイス６とが設けられている。
そしてカメラ部４は、そのテレビ会議端末２を使用するユーザ７（７Ａ、７Ｂ）を撮像し、かくして得られた映像信号Ｓ１を映像処理部８に送出する。また映像処理部８は、供給される映像信号Ｓ１に対して例えばアナログ／ディジタル変換処理等の所定の信号処理を施し、得られた映像データＤ１を映像圧縮部９に送出する。さらに映像圧縮部９は、供給される映像データＤ１に対して、例えば国際電気通信連合ＩＴＵ（International Telecommunication Union）によって標準化されたH.323等の所定規格に従った所定の圧縮方式で圧縮処理を施し、得られた圧縮映像データＤ２をパケタイズ部１０に送出する。
またマイクロホン５は、ユーザ７の発言時の音声を集音し、得られた音声信号Ｓ２を入力音声処理部１１に送出する。また入力音声処理部１１は、供給される音声信号Ｓ２に対して例えばアナログ／ディジタル変換処理等の所定の信号処理を施し、得られた音声データＤ３を音声圧縮部１２に送出する。さらに音声圧縮部１２は、供給される音声データＤ３に対して上述と同様のH.323等の所定の規格に準拠した圧縮方式の圧縮処理を施し、得られた圧縮音声データＤ４をパケタイズ部１０に送出する。
さらにポインティングデバイス６は、ユーザ操作の内容を表す操作情報信号Ｓ３を状況判断部１３に送出する一方、状況判断部１３は、この操作情報信号Ｓ３に基づき判断される、現在のカーソルの位置等の状況判断情報を状況判断データＤ５としてパケタイズ部１０に送出する。
パケタイズ部１０は、映像圧縮部９から供給される圧縮映像データＤ２、音声圧縮部１２から供給される圧縮音声データＤ４及び状況判断部１３から供給される操作データＤ５を所定フォーマットでパケット化し、得られたパケットデータＤ６をネットワーク制御部１４に送出する。
そしてネットワーク制御部１４は、供給されるパケットデータＤ６に対して中間周波数変調等の所定の変調処理を施し、かくして得られた送信信号Ｓ４をネットワークＮＴを介してテレビ会議サーバ３に送信する。
テレビ会議サーバ３においては、図３に示すような構成を有し、各テレビ会議端末２からそれぞれ送信される送信信号Ｓ４をネットワーク制御部１６において受信する。そしてネットワーク制御部１６は、これら各テレビ会議端末２からの送信信号Ｓ４に対して検波処理等の所定の復調処理をそれぞれ施し、得られたパケットデータＤ７をデパケタイズ部１６に送出する。
デパケタイズ部１６は、供給されるパケットデータＤ７からパケットに含まれる圧縮映像データＤ８、圧縮音声データＤ９及び操作データＤ１０を抽出し、圧縮映像データＤ８を映像伸張部１７に送出すると共に、圧縮音声データＤ９を音声伸張部１８に送出し、状況判断データＤ１０を状況判断制御部１９に送出する。
そして映像伸張部１７は、供給される圧縮映像データＤ８に対して対応する復号化方式による伸張処理を施し、得られたベースバンドの映像データＤ１１を映像合成部２０に送出する。
このときテレビ会議サーバ３には、テレビ会議端末２と同様に、ＣＣＤカメラ等でなるカメラ部２１と、マイクロホン２２と、マウス等からなるポインティングデバイス２３とが設けられている。
そしてカメラ部２１は、このテレビ会議サーバ３を使用するユーザ７（７Ｃ）を撮像することにより得られた映像信号Ｓ５を映像処理部２５に送出する。また映像処理部２５は、供給される映像信号Ｓ５に対して例えばアナログ／ディジタル変換処理等の所定の信号処理を施し、得られた映像データＤ１２を映像合成部２０に送出する。
またポインティングデバイス２３は、ユーザ操作の内容を表す操作情報信号Ｓ６を状況判断制御部１９に送出する。そして状況判断制御部１９は、この操作情報信号Ｓ６と、各テレビ会議端末２から送信される状況判断データＤ１０とに基づいて、各テレビ会議端末２及びテレビ会議サーバ３にそれぞれ対応させて、そのテレビ会議端末２又はテレビ会議サーバ３の各ポインティングデバイス６及び２３の操作に応動して移動する各カーソルの画像データ（以下、これをカーソル画像データと呼ぶ）Ｄ１３を生成し、これを映像合成部２０に送出する。
さらにテレビ会議サーバ３には、予めテレビ会議端末２から送信され又は当該テレビ会議サーバ３のユーザ７Ｃにより入力されたドキュメントの画像データが格納されたドキュメント格納部２６が設けられている。そして状況判断制御部１９は、当該テレビ会議サーバ３のポインティングデバイス２３から供給される操作情報信号Ｓ６及び各テレビ会議端末２から送信される状況判断データＤ１０に基づいて、ドキュメント格納部２６に格納されたドキュメントの表示命令が与えられたときには、ドキュメント格納部２６を制御してそのドキュメントのデータを読み出させる。そしてこのドキュメントのドキュメントデータＤ１４が映像合成部２０に与えられる。
映像合成部２０は、状況判断制御部１９の制御のもとに、これら映像伸張部１７から供給される各テレビ会議端末２からの映像データＤ１１に基づく各ユーザ映像２７（２７Ａ、２７Ｂ）と、映像処理部２６から供給される映像データＤ１２に基づくユーザ映像２７（２７Ｃ）と、状況判断制御部１９から供給されるカーソル画像データＤ１３に基づくカーソル画像２９（２９Ａ〜２９Ｃ）と、ドキュメント格納部２６から供給されるドキュメントデータＤ１４に基づくドキュメント画像３１とを合成した例えば図４に示すような合成映像３２を生成し、その映像データでなる合成映像データＤ１５を表示処理部３３及び映像圧縮部３４に送出する。
そして表示処理部３３は、この合成映像データＤ１５に対してディジタル／アナログ変換処理等の所定の信号処理を施し、得られた映像信号Ｓ７を例えばＣＲＴ（Cathode-Ray Tube）等でなるディスプレイ３５に送出する。これによりこの映像信号Ｓ７に基づく上述のような合成画像３２がディスプレイ３５に表示される。
また映像圧縮部３４は、映像合成部２０から供給される合成映像データＤ１５に対して所定の圧縮処理を施し、得られた圧縮合成映像データＤ１６をパケタイズ部３６に送出する。
一方、音声伸張部１８は、デパケタイズ部１６から供給される圧縮音声データＤ９に対して対応する復号化方式での復号化処理を施し、得られたベースバンドの音声データＤ１７を音声合成部３７に送出する。
このとき音声合成部３６には、このテレビ会議サーバ３のマイクロホン２２から出力された音声信号Ｓ８を、音声処理部３８においてアナログ／ディジタル変換等の所定の信号処理を施すことにより得られたベースバンドの音声データＤ１８が与えられる。
かくして音声合成部３７は、これら音声伸張部１８から供給される各テレビ会議端末２（２Ａ及び２Ｂ）からの音声データＤ１７に基づく各音声と、音声処理部３８から供給される音声データＤ１８に基づく音声とを合成した合成音声を生成し、その音声データでなる合成音声データＤ１９を出力音声処理部３９及び音声圧縮部４０に送出する。
そして出力音声処理部３９は、この合成音声データＤ１９に対してディジタル／アナログ変換処理等の所定の信号処理を施し、得られた音声信号Ｓ９をスピーカ４１に出力する。これによりこの音声信号Ｓ９に基づく上述のような合成音声がスピーカ４１から出力される。
また音声圧縮部４０は、音声合成部３７から供給される合成音声データＤ１９に対して所定の圧縮処理を施し、得られた圧縮合成音声データＤ２０をパケタイズ部３６に送出する。
パケタイズ部３６は、映像圧縮部３４から供給される圧縮合成映像データＤ１６及び音声圧縮部４０から供給される圧縮合成音声データＤ２０を所定フォーマットでパケット化し、得られたパケットデータＤ２１をネットワーク制御部１５に送出する。
そしてネットワーク制御部１５は、供給されるパケットデータＤ２１に対して中間周波数変調等の所定の変調処理を施し、かくして得られた送信信号Ｓ１０をネットワークＮＴを介して各テレビ会議端末２にそれぞれ送信する。
各テレビ会議端末２においては、テレビ会議サーバ３から送信される送信信号Ｓ１０をネットワーク制御部１４において受信する。そしてネットワーク制御部１４は、このテレビ会議サーバ３からの送信信号Ｓ１０に対して検波処理等の所定の復調処理をそれぞれ施し、得られたパケットデータＤ２２をデパケタイズ部４２に送出する。
デパケタイズ部４２は、供給されるパケットデータＤ２２からパケットに含まれる圧縮合成映像データＤ２３及び圧縮合成音声データＤ２４を抽出し、圧縮合成映像データＤ２３を映像伸張部４３に送出すると共に、圧縮合成音声データＤ２４を音声伸張部４４に送出する。
そして映像伸張部４３は、供給される圧縮合成映像データＤ２３に対して対応する復号化方式での伸張処理を施し、得られたベースバンドの合成映像データＤ２５を表示処理部４５に送出する。また表示処理部４５は、この合成映像データＤ２５に対してディジタル／アナログ変換処理等の所定の信号処理を施し、得られた映像信号Ｓ１１をＣＲＴ等でなるディスプレイ４６送出する。これによりこの映像信号Ｓ１１に基づく上述の合成画像３２（図４）がディスプレイ４６に表示される。
さらに音声伸張部４４は、供給される圧縮合成音声データＤ２４に対して対応する復号化方式での伸張処理を施し、得られたベースバンドの合成映像データＤ２６を出力音声処理部４７に送出する。また出力音声処理部４７は、この合成音声データＤ２６に対してディジタル／アナログ変換処理等の所定の信号処理を施し、得られた音声信号Ｓ１２をスピーカ４８に送出する。これによりこの音声信号Ｓ１２に基づく上述の合成音声がスピーカ４８から出力される。
このようにしてこのテレビ会議システム１においては、各テレビ会議端末２のカメラ部４及びテレビ会議サーバ３のカメラ部２１によってそれぞれ撮像された各ユーザ７の各ユーザ映像２７、カーソル画像２９及びドキュメント画像３１を合成してなる合成映像３２を各テレビ会議端末２の各ディスプレイ４６及びテレビ会議サーバ３のディスプレイ３５にそれぞれ表示させると共に、各テレビ会議端末２の各マイクロホン５及びテレビ会議サーバ３のマイクロホン２２によってそれぞれ集音された各ユーザ７の音声を合成してなる合成音声を各テレビ会議端末２の各スピーカ４８及びテレビ会議サーバ３のスピーカ４１からそれぞれ出力させることができるようになされている。
（２）テレビ会議システム１に搭載された各種機能
次に、このテレビ会議システム１に搭載された各種機能について説明する。
（２−１）ドキュメント操作時等の表示制御機能
このテレビ会議システム１には、各テレビ会議端末２又はテレビ会議サーバ３の各ポインティングデバイス６又は２３の操作に応じて、そのとき各ディスプレイ３５及び４６に表示されている合成映像３２内のドキュメント画像３１の表示位置及び又はその大きさや、各ユーザ７の各ユーザ映像２７の表示位置及び又はその大きさを変化させるドキュメント操作時等の表示制御機能が搭載されている。
実際上、テレビ会議サーバ３の状況判断制御部１９は、かかるドキュメント操作時等の表示制御機能を実現するための手段として、図５に示すように、そのとき表示されているドキュメント及び現在そのドキュメントを操作しているユーザ７を管理するための付加情報テーブル４９を有している。
そして状況判断制御部１９は、テレビ会議サーバ３のポインティングデバイス２３から供給される操作入力信号Ｓ６と、各テレビ会議端末２からそれぞれ送信される状況判断データＤ１０とに基づいて、いずれかのテレビ会議端末２又はテレビ会議サーバ３のポインティングデバイス６又は２３が操作されて、ドキュメント格納部２６に格納されたドキュメントデータＤ１４に基づくドキュメント画像３１を表示し、若しくは現在表示しているドキュメント画像３１を他のドキュメント画像３１に変更し、又は現在表示しているドキュメント画像３１の次ページを表示等すべき旨の命令が入力されたことを認識すると、そのドキュメントデータＤ１４のファイル名を付加情報テーブル４９の表示ドキュメント管理欄４９Ａに格納すると共に、その操作を行ったユーザ７が使用しているテレビ会議端末２又はテレビ会議サーバ３のＩＤ（以下、これを端末・サーバＩＤと呼ぶ）を付加情報テーブル４９のドキュメント操作ユーザ管理欄４９Ｂに格納する。
また状況判断制御部１９は、この付加情報テーブル４９に基づいてドキュメント格納部２６を制御することにより、当該ドキュメント格納部２６に格納されている指定されたドキュメントデータＤ１４を読み出させて、これを映像合成部２０に送出させる。
さらに状況判断制御部１９は、これと併せて付加情報テーブル４９に基づいて映像合成部２０を制御することにより、図６に示すように、ドキュメント格納部２６から供給されるドキュメントデータＤ１４に基づくドキュメント画像３１を画面の中央部に拡大表示させると共に、その操作が行われたテレビ会議端末２又はテレビ会議サーバ３から送信される映像データＤ１１又はＤ１２に基づくユーザ７のユーザ映像２７を画面左下に拡大表示し、かつ他のテレビ会議端末２又はテレビ会議サーバ３から送信される映像データＤ１１又はＤ１２に基づくユーザ７のユーザ映像２７が画面右側に拡大していない、うなずき等が認識できる程度の所定の大きさで表示されてなる合成映像３２の合成映像データＤ１５を生成させる。
そして映像合成部２０は、このように生成した合成映像データＤ１５を表示処理部３３及び映像圧縮部３４にそれぞれ送出する。これによりこの図６のような合成映像３２がテレビ会議サーバ３のディスプレイ３５及び各テレビ会議端末２のディスプレイ４６にそれぞれ表示されることとなる。
一方、状況判断制御部１９は、このように合成映像３２内にドキュメント画像３１を表示させたときは、当該テレビ会議サーバ３のポインティングデバイス２３から供給される操作入力信号Ｓ６と、各テレビ会議端末２から送信される状況判断データＤ１０とに基づいて、テレビ会議サーバ３のポインティングデバイス２３及び各テレビ会議端末２のポインティングデバイス６とそれぞれ対応付けられた各カーソル画像２９の位置を監視する。
そして状況判断制御部１９は、それまでカーソル操作が行われていたテレビ会議端末２又はテレビ会議サーバ３と異なるテレビ会議端末２又はテレビ会議サーバ３と対応付けられた各カーソル画像２９がドキュメント上で１〜２秒以上移動するようなカーソル操作が行われたときには、付加情報管理テーブル４９のドキュメント操作ユーザ欄４９Ｂに格納されている端末・サーバＩＤを、その新たなテレビ会議端末２又はテレビ会議サーバ３の端末・サーバＩＤに書き換える。
また状況判断制御部１９は、この後この付加情報テーブル４９に基づいて映像合成部２０を制御することにより、図７に示すように、それまでカーソル操作が行われていたテレビ会議端末２からの映像データＤ１１又は当該テレビ会議サーバ３の映像処理部２５からの映像データＤ１２に基づくユーザ映像２７と、新たにカーソル操作が行われたテレビ会議端末２からの映像データＤ１１又は当該テレビ会議サーバ３の映像処理部２５からの映像データＤ１２に基づくユーザ映像２７とを入れ換えた合成映像３２の合成映像データＤ１５を生成し、これを表示処理部３３及び映像圧縮部３４にそれぞれ送出する。これによりこの図６のようなもとの合成映像３２に対して、図７に示すような合成映像３２がテレビ会議サーバ３のディスプレイ３５及び各テレビ会議端末２のディスプレイ４６にそれぞれ表示される。
他方、状況判断制御部１９は、このように映像合成部２０を制御して合成映像３２内にドキュメント画像３１を表示させたときには、テレビ会議サーバ３のポインティングデバイス２３から供給される操作入力信号Ｓ６と、各テレビ会議端末２から送信される状況判断データＤ１０とに基づいて、ユーザ７がそのドキュメント画像３１上でカーソル操作を行っている時間を監視する。
そして状況判断制御部１９は、かかるカーソル操作を同一のユーザ７が継続して行っているときには、所定時間（例えば１〜２分程度）ごとに映像合成部２０を制御することにより、当該所定時間ごとにドキュメント画像３１を段階的に順次拡大させた図８のような合成映像３２の合成映像データＤ１５を生成し、これを表示処理部３３及び映像圧縮部３４にそれぞれ送出する。これによりユーザ７のカーソル操作に応じて一定時間ごとにドキュメント画像３１が順次段階的に拡大するような合成映像３２がテレビ会議サーバ３のディスプレイ３５及び各テレビ会議端末２のディスプレイ４６にそれぞれ表示される。
これに対して状況判断制御部１９は、かかるカーソル操作をいずれのユーザ７も行っていないときには、所定時間（例えば１〜２分程度）ごとに映像合成部２０を制御することにより、当該所定時間ごとにドキュメント画像３１を段階的に順次縮小させた合成映像３２の合成映像データＤ１５を生成し、これを表示処理部３３及び映像圧縮部３４にそれぞれ送出する。これによりテレビ会議端末２又はテレビ会議サーバ３のいずれにおいてもユーザ７のカーソル操作がないときには、一定時間ごとにドキュメント画像３１が順次段階的に縮小し、最終的には図９に示すように、合成映像３２の左端にドキュメント画像３０が縮小されて配置された合成映像３２がテレビ会議サーバ３のディスプレイ３５及び各テレビ会議端末２のディスプレイ４６にそれぞれ表示される。
このようにして、このテレビ会議システム１では、ユーザ７のドキュメント操作に応じてドキュメント画像３０及びユーザ７のユーザ映像２７を拡大又は縮小するように表示し得るようになされ、これによりユーザ７に余分な操作をさせることなく、ドキュメント操作時等にはドキュメント画像３１及びその操作を行ったユーザ７のユーザ映像２７をメインに捉えさせ得るようになされている。
（２−２）音声検出等に基づく表示及び音量制御機能
一方、このテレビ会議システム１には、ユーザ７の発言の有無に応じて、そのときテレビ会議サーバ３のディスプレイ３５及び各テレビ会議端末２のディスプレイ４６に表示されている合成映像３２内の各ユーザ７のユーザ映像２７の表示位置及びその大きさや、各テレビ会議端末２及びテレビ会議サーバ３のスピーカ４１及び４８から出力される各ユーザ７の発言音量を変化させる表示及び音量制御機能が搭載されている。
実際上、このテレビ会議システム１の場合、テレビ会議端末２においては、入力音声処理部１１から出力される音声信号Ｓ２が状況判断部１３に与えられる。
そして状況判断部１３は、供給される音声信号Ｓ２に基づいて、その信号レベルからユーザ７が発言したか否かを常時監視し、ユーザ７が発言したことを検出したときには、これを上述の状況判断データＤ５としてパケタイズ部１０に送出する。かくしてこの状況判断データＤ５は、この後上述のようにネットワークＮＴを介してテレビ会議サーバ３に送信され、その後状況判断制御部１９に与えられる。
このとき状況判断制御部１９は、入力音声処理部３８から出力された音声信号Ｓ８を入力し、この音声信号Ｓ８に基づいて当該テレビ会議サーバ３のユーザ２４が発言したか否かを常時監視するようになされている。
そして状況判断制御部１９は、この監視結果と、各テレビ会議端末２から送信される状況判断データＤ１０とに基づいて、いずれかのユーザ７が発言しているかを判断し、そのとき例えば１〜２秒以上継続して発言しているユーザ７を検出したときには、図５に示すように、対応するテレビ会議端末２又はテレビ会議サーバ３の端末・サーバＩＤを付加情報管理テーブル４９の発言ユーザ格納欄４９Ｃに格納する。
また状況判断制御部１９は、この後この付加情報管理テーブル４９に基づいて映像合成部２０を制御することにより、各テレビ会議端末２及びテレビ会議サーバ３からの映像データＤ１１及びＤ１２に基づくユーザ映像２７を拡大又は縮小表示させる一方、これと併せて音声合成部３７を制御することにより、各テレビ会議端末２及びテレビ会議サーバ３からの音声データＤ１７及びＤ１８に基づくユーザ７の発言音声の音量を上げ又は下げさせる。
例えば、状況判断制御部１９は、そのとき図６に示すように、ドキュメント画像３１が画面中央部に拡大表示され、あるユーザ７のユーザ映像２７がその左側に拡大表示された合成映像３２が映像合成部２０において生成されている場合において、他のユーザ７が発言した場合には、図７に示すように、それまで拡大表示されていたユーザ７と、その発言したユーザ７との表示位置及び大きさを入れ換えた図７に示すような合成映像３２の合成映像データＤ１５を映像合成部２０に生成させる。かくしてこの合成映像データＤ１５に基づくかかる合成画像３２が各テレビ会議端末２及びテレビ会議サーバ３のディスプレイ３５及び４６に表示される。
また状況判断制御部１９は、この後テレビ会議サーバ３の入力音声処理部３８からの音声信号Ｓ２と、各テレビ会議端末２からの状況判断データＤ１０とを常時監視し、その後もそのユーザ７が継続して発言していると判断したときには、所定時間（例えば１〜２分程度）ごとに映像合成部２０及び音声合成部３７を制御する。
かくしてこのとき映像合成部２０は、状況判断制御部１９の制御のもとに、そのとき拡大表示しているユーザ７のユーザ映像２７を当該所定時間ごとにさらに段階的に順次拡大させ、かつこれと同期して他のユーザ７のユーザ映像２７を当該所定時間ごとに段階的に順次縮小させた図１０に示すような合成映像３２の合成映像データＤ１５を生成し、これを表示処理部３３及び映像圧縮部３４にそれぞれ送出する。これによりこの合成映像データＤ１５に基づく合成映像３２が各テレビ会議端末２及びテレビ会議サーバ３の各ディスプレイ３５及び４６にそれぞれ表示される。
またこのとき音声合成部３７は、状況判断制御部１９の制御のもとに、そのとき拡大表示されているユーザ７の音声の音量を当該所定時間ごとに段階的に順次上げ、かつこれと同期して他のユーザ７の音声の音量を当該所定時間ごとに段階的に順次下げた合成音声の合成音声データＤ１９を生成し、これを出力音声処理部３９及び音声圧縮部４０にそれぞれ送出する。これによりこの合成音声データＤ１９に基づく合成音声が各テレビ会議端末２及びテレビ会議サーバ３の各スピーカ４１及び４８からそれぞれ出力される。
さらに例えば状況判断制御部１９は、図９に示すように、合成映像３２において、ドキュメント画像３１が画面左端に縮小表示されていると共に、その右側に各ユーザ７のユーザ映像２７が均等な大きさで表示されている場合において、あるユーザ７が継続して発言し続けた場合には、所定時間（例えば１〜２分程度）ごとに映像合成部２０及び音声合成部３７を制御する。
かくしてこのとき映像合成部２０は、状況判断制御部１９の制御のもとに、そのユーザ７のユーザ映像２７を当該所定時間ごとに段階的に順次拡大させ、かつこれと同期して他のユーザ７のユーザ映像２７を当該所定時間ごとに段階的に順次縮小させた合成映像３２の合成映像データＤ１５を生成し、これを表示処理部３３及び映像圧縮部３４にそれぞれ送出する。これによりこの合成映像データＤ１５に基づく図１１に示すような合成画像３２が各テレビ会議端末２及びテレビ会議サーバ３のディスプレイ３５及び４６に表示される。
またこのとき音声合成部３７は、状況判断制御部１９の制御のもとに、そのユーザ７の音声の音量を当該所定時間ごとに段階的に順次上げ、かつこれと同期して他のユーザ７の音声の音量を当該所定時間ごとに段階的に順次下げた合成音声の合成音声データＤ１９を生成し、これを出力音声処理部３９及び音声圧縮部４０にそれぞれ送出する。これによりこの合成音声データＤ１９に基づく合成音声が各テレビ会議端末２及びテレビ会議サーバ３の各スピーカ４１及び４８からそれぞれ出力される。
これに対して状況判断制御部１９は、テレビ会議サーバ３の入力音声処理部１１から与えられる音声信号Ｓ８と、各テレビ会議端末２から送信される状況判断情報Ｄ１０とに基づいて、いずれのユーザ７も発言していないことを検出したときには、所定時間（例えば１〜２分程度）ごとに映像合成部２０及び音声合成部３７を制御する。
かくしてこのとき映像合成部２０は、状況判断制御部１９の制御のもとに、例えば図１０や図１１の状態から図９又は図１２のように各ユーザ７のユーザ映像２７が均等な所定の大きさとなるまで、そのとき拡大表示されていたユーザ７のユーザ映像２７を当該所定時間ごとに段階的に順次縮小し、かつこれと同期してその他のユーザ７のユーザ映像２７を当該所定時間ごとに段階的に順次拡大するような合成映像３２の合成映像データＤ１５を生成し、これを表示処理部３３及び映像圧縮部３４にそれぞれ送出する。これによりこの合成映像データＤ１５に基づいて、上述のように各ユーザ映像２７の大きさが均等な大きさとなるまで、段階的に縮小又は拡大してゆく合成映像３２が各テレビ会議端末２及びテレビ会議サーバ３の各ディスプレイ３５及び４６にそれぞれ表示される。
またこのとき音声合成部３７は、状況判断制御部１９の制御のもとに、各ユーザ７の音声の音量が均等な所定の大きさとなるまで、そのとき音量が上げられていたユーザ７の音声の音量を当該所定時間ごとに段階的に順次下げ、かつこれと同期して他のユーザ７の音声の音量を当該所定時間ごとに段階的に順次上げるような合成音声の合成音声データＤ１９を順次生成し、これを出力音声処理部３９及び音声圧縮部４０にそれぞれ送出する。かくしてこの合成音声データＤ１９に基づいて、上述のように各ユーザ７の音声の音量が、段階的に均等な大きさとなるまで、下がり又は上がってゆく合成音声が各テレビ会議端末２又はテレビ会議サーバ３の各スピーカ４１及び４８からそれぞれ出力されることとなる。
このようにして、このテレビ会議システム１では、ユーザ７の発言の有無に応じてユーザ７のユーザ映像２７を拡大又は縮小するように表示し得るようになされ、これによりユーザに余分な操作をさせることなく、ユーザ７のユーザ映像２７をメインに捉えさせ得るようになされている。
（２−３）発言支援機能
他方、このテレビ会議システム１には、ユーザ操作に応じて図１３に示すような支援マーク画像５０や図１４に示すようなテキスト画像５１を合成映像３２上に表示するようにして、そのユーザ７及び２４の発言を支援する発言支援機能が搭載されている。
実際上、このテレビ会議システム１の場合、各テレビ会議端末２には、「発言」又は「分かった」等の発言内容にそれぞれ対応付けられた複数の専用スイッチからなる専用スイッチ群５３が設けられている。
そしてユーザ７がこれら専用スイッチ群５３のなかの所望する発言内容と対応付けられた専用スイッチを押圧操作すると、これに応じた押圧操作信号Ｓ１３が状況判断部１３及び発言画像生成部５４に出力される。
また各テレビ会議端末２には、キーボード５５が設けられており、ユーザ７が所定操作を行って「その原因は○○だよ」等の文字列を入力すると、キーボード操作があったことを表すキーボード操作信号Ｓ１４が状況判断部１３に出力され、このとき入力されたテキストのテキストデータＤ２７が発言画像生成部５４に出力される。
状況判断部１３は、専用スイッチ群５３から押圧操作信号Ｓ１３が与えられ又はキーボード５５からキーボード操作信号Ｓ１４が与えられると、これに応じた状況判断データＤ５をパケタイズ部１０に送出する。かくしてこの状況判断データＤ５が、この後上述のようにネットワークＮＴを介してテレビ会議サーバ３に送信され、その後このテレビ会議サーバ３の状況判断制御部１９に与えられる。
また発言画像生成部５４は、専用スイッチ群５３から押圧操作信号Ｓ１３が与えられ又はキーボード５５からテキストデータＤ２７が与えられると、その押圧操作信号Ｓ１３に応じた例えば図１３に示すような支援マーク画像５０又はテキストデータＤ２７に基づく例えば図１４に示すようなテキスト画像５１を生成し、その支援マーク画像５０又はテキスト画像５１（以下、これらをまとめて発言画像と呼ぶ）の画像データ（以下、これを発言画像データと呼ぶ）Ｄ２８を映像圧縮部９に送出する。
かくしてこの発言画像データＤ２８は、この後映像データＤ１の場合と同様に、映像圧縮部９及びパケタイズ部１０において所定の圧縮処理及びパケット化処理が施されてネットワークＮＴを介してテレビ会議サーバ３に送信され、その後デパケタイズ部１６及び映像伸張部１７を順次介して映像合成部２０に与えられる。
このときテレビ会議サーバ３には、テレビ会議端末２と同様の複数の専用スイッチからなる専用スイッチ群５６が設けられており、ユーザ７がこれら専用スイッチ群５６のなかの所望する発言内容と対応付けられた専用スイッチを押圧操作すると、これに応じた押圧操作信号Ｓ１５が状況判断制御部１９及び発言画像生成部５７に与えられる。
またテレビ会議サーバ３には、キーボード５８も設けられており、ユーザ７が所定操作を行って「その原因は○○だよ」等の文字列を入力すると、キーボード操作があったことを意味するキーボード操作信号Ｓ１６が状況判断部に出力され、このとき入力されたテキストのテキストデータＤ２９が発言画像生成部５７に出力される。
そして発言画像生成部５７は、専用スイッチ群５６から押圧操作信号Ｓ１５が与えられ又はキーボード５８からテキストデータＤ２９が与えられると、その押圧操作信号Ｓ１５に応じた例えば図１３のような支援マーク画像５０又はテキストデータＤ２９に基づく例えば図１４のようなテキスト画像５１を生成し、その支援マーク画像５０又はテキスト画像５１でなる発言画像の画像データ（発言画像データ）Ｄ３０を映像合成部２０に送出する。
このとき状況判断制御部１９は、当該テレビ会議サーバ３の専用スイッチ群５６又はキーボード５８から供給される押圧操作信号Ｓ１５又はキーボード操作信号Ｓ１６と、各テレビ会議端末２から送信される状況判断データＤ１０とを常時監視しており、これら押圧操作信号Ｓ１５、キーボード操作信号Ｓ１６又は状況判断データＤ１０に基づいて、いずれかのテレビ会議端末２又はテレビ会議サーバ３において専用スイッチ群５３又は５６内のいずれかの専用スイッチが押圧操作され、又はキーボード５５又は５８を介して合成映像３２上に表示すべき文字列が入力されたことを認識すると、これに応じた制御信号Ｄ３１を映像合成部２０に送出する。
かくしてこのとき映像合成部２０は、この制御信号Ｄ３１に基づいて、ドキュメント格納部２６からのドキュメントデータＤ１４に基づくドキュメント画像３１と、当該テレビ会議サーバ３の映像処理部２５から供給される映像データＤ１２に基づく映像２８と、各テレビ会議端末２から送信される映像データＤ１１に基づくユーザ７のユーザ映像２７とを合成してなる合成映像３２上に、さらに対応するテレビ会議端末２から送信され又は当該テレビ会議サーバ３の発言画像生成部５４又は５７から供給される発言画像データＤ２８又はＤ３０に基づく発言画像（支援マーク画像５０又はテキスト画像５１）を対応する位置に重畳して合成してなる合成画像３２の合成画像データＤ１５を生成し、これを表示処理部３３及び映像圧縮部３４にそれぞれ送出する。これによりこの合成映像データＤ１５に基づいて、図１３又は図１４のような発言画像（支援マーク画像５０又はテキスト画像５１）がその操作を行ったユーザ７の近傍に表示されてなる合成画像３２が各テレビ会議端末２及びテレビ会議サーバ３の各ディスプレイ３５及び４６にそれぞれ表示される。
このようにして、このテレビ会議システム１では、そのとき発言しているユーザの当該発言を妨げることなく、事前にかつさりげなく自己の発言意思や所望する発言内容を他のユーザに伝えることができるようになされている。
（２−４）テレビ会議中の照明機能
さらにこのテレビ会議システム１では、図１５に示すように、テレビ会議中に参加しているユーザ７の周囲の床面等を照明することにより、当該テレビ会議中であることを周囲の人に認識させる照明機能が各テレビ会議端末２及びテレビ会議サーバ３に搭載されている。
実際上、このテレビ会議システム１の場合、図２及び図３からも明らかなように、テレビ会議サーバ３及び各テレビ会議端末２には、それぞれユーザ７の周囲の床面等を照明するための光源５９及び６０が設けられている。
そしてテレビ会議サーバ３の状況判断制御部１９は、ユーザ操作に応じて例えばＳＩＰ（Session Initiation Protocol）制御によって対応する各テレビ会議端末２と通信可能な状態に接続すると、光源５９に対して駆動電圧の供給を開始することによって図１５（Ａ）のように当該光源５９を点灯させる一方、その後ユーザ操作に応じてすべてのテレビ会議端末２との接続を切断すると、かかる光源５９への駆動電圧の供給を停止することによって図１５（Ｂ）のように当該光源５９を消灯させるようになされている。
また各テレビ会議端末２の状況判断部１３も同様に、ユーザ操作に応じてテレビ会議サーバ３と通信可能な状態に接続すると、光源６０に対して駆動電圧の供給を開始することによって図１５（Ａ）のように当該光源６０を点灯させる一方、その後ユーザ操作に応じてテレビ会議サーバ３との接続を切断すると、かかる光源６０への駆動電圧の供給を停止することによって図１５（Ｂ）のように当該光源６０を消灯させるようになされている。
このようにして、このテレビ会議システム１では、自己の作業をしているのか、又はテレビ会議中であるのかを明確に区別して、テレビ会議中であることを容易に周囲に認識させることによって、テレビ会議中に周囲の人から話しかけられるのを未然かつ有効に防止し、かくしてテレビ会議を中断させることなく円滑に進行し得るようになされている。
（３）状況判断制御部１９の具体的処理内容
（３−１）ドキュメント操作時等の表示制御処理手順
ここで、上述のようなテレビ会議サーバ３の状況判断制御部１９によるドキュメント操作時等の表示制御は、予め状況判断制御部１９に与えられた制御プログラムに基づき、図１６に示すドキュメント操作時等の表示制御処理手順ＲＴ１に従って行われる。
すなわち状況判断制御部１９は、対応する各テレビ会議端末２と通信可能な状態に接続すると、ドキュメント操作時等の表示制御処理手順ＲＴ１をステップＳＰ０において開始し、続くステップＳＰ１において、ドキュメント操作されたか否かを判断する。そして状況判断制御部１９は、このステップＳＰ１においてユーザ７にドキュメント操作されるのを待ちながら、ドキュメント操作された場合のみステップＳＰ２に進み、ドキュメント画像３１が表示されているか否かを判断する。
そして状況判断制御部１９は、このステップＳＰ２において否定結果を得るとステップＳＰ３に進んで、ドキュメント画像３１を拡大表示させ、ドキュメント画像３１の横にドキュメント操作を行ったユーザ７のユーザ映像２７を拡大表示させ、これに対して肯定結果を得るとステップＳＰ４に進んで、ドキュメント画像３１を変更して表示させ、ドキュメント画像３１の横にドキュメント操作を行ったユーザ７のユーザ映像２７を入れ換えて表示させる。
また状況判断制御部１９は、この後ステップＳＰ５に進んで、所定の時間内にカーソル操作されたか否かを判断する。そして状況判断制御部１９は、このステップＳＰ５において肯定結果を得るとステップＳＰ７に進み、これに対して肯定結果を得るとステップＳＰ８に進んで、ドキュメント画像３１を段階的に縮小表示させる。
さらに状況判断制御部１９は、この後ステップＳＰ７に進んで、同一のユーザ７が所定の時間カーソル操作し続けたか否かを判断する。そして状況判断制御部１９は、このステップＳＰ７において肯定結果を得るとステップＳＰ８に進んで、ドキュメント画像３１を段階的に拡大表示させ、これに対して否定結果を得るとステップＳＰ９に進んで、ドキュメント画像３１の横にカーソル操作を行ったユーザ７のユーザ映像２７を表示させる。
さらに状況判断制御部１９は、この後ステップＳＰ１０に進んで、ユーザ７がテレビ会議を終了すべき操作（以下、これを終了操作と呼ぶ）を行なったか否かを判断し、否定結果を得るとステップＳＰ１に戻り、この後ステップＳＰ１〜ステップＳＰ１０について同様の処理を繰り返す。そして状況判断制御部１９は、やがてユーザ７が終了操作を行うことによりステップＳＰ１０において肯定結果を得ると、ステップＳＰ１１に進んでこのドキュメント操作時等の表示制御処理手順ＲＴ１を終了する。
（３−２）音声検出時等の表示及び音量制御処理手順
一方、状況判断制御部１９は、対応する各テレビ会議端末２と通信可能な状態に接続すると、上述のドキュメント操作検出時等の表示制御処理手順ＲＴ１と並行して、図１７に示す音声検出時等の表示及び音量制御処理手順ＲＴ２をステップＳＰ１２において開始し、続くステップＳＰ１３において、所定の時間内にユーザ７から音声が検出されたか否かを判断する。そして状況判断制御部１９は、このステップＳＰ１３において肯定結果を得るとステップＳＰ１５に進み、これに対して否定結果を得るとステップＳＰ１４に進んで、ユーザ７のユーザ映像２７を均等になるように表示させる。
また状況判断制御部１９は、この後ステップＳＰ１５において、同一のユーザ７から所定の時間以上音声を検出し続けたか否かを判断する。そして状況判断制御部１９は、このステップＳＰ１５において否定結果を得るとステップＳＰ１７に進み、これに対して肯定結果を得るとステップＳＰ１６に進んで、音声を検出したユーザ７のユーザ映像２７を拡大表示させ、及び音量を大きくさせる一方、それ以外のユーザ７のユーザ映像２７を縮小表示させ、及び音量を小さくさせる。
さらに状況判断制御部１９は、この後ステップＳＰ１７において、ドキュメント画像３１が表示されているか否かを判断する。そして状況判断制御部１９は、このステップＳＰ１７において否定結果を得るとステップＳＰ１９に進み、これに対して肯定結果を得るとステップＳＰ１８に進んで、ドキュメント画像３１の横に音声を検出したユーザ７のユーザ映像２７を表示させる。
さらに状況判断制御部１９は、この後ステップＳＰ１９に進んで、ユーザ７が終了操作を行なったか否かを判断し、否定結果を得るとステップＳＰ１３に戻り、この後ステップＳＰ１３〜ステップＳＰ１９について同様の処理を繰り返す。そして状況判断制御部１９は、やがてユーザ７が終了操作を行うことによりステップＳＰ１９において肯定結果を得ると、ステップＳＰ２０に進んでこの音声検出時等の表示及び音量制御処理手順ＲＴ２を終了する。
このようにして状況判断制御部１９は、映像合成部２０及び音声合成部３７を制御して、ユーザ７のユーザ映像２７及びドキュメント画像３１の表示位置や大きさ並びに音量を変化させ得るようになされている。
（４）本実施の形態による動作及び効果
以上の構成において、このテレビ会議システム１は、ユーザ７のドキュメント操作に応じてドキュメント画像３１及びユーザ７のユーザ映像２７を拡大又は縮小するように表示する。
従って、ユーザ７に余分な操作をさせることなく、ドキュメント操作時等にはドキュメント画像３１をメインに捉えさせる一方、その操作を行ったユーザ７のユーザ映像２７をメインに捉えさせることができる。
また、合成映像３２内にドキュメント画像３１を表示させたときには、ユーザ７がそのドキュメント画像３１上でカーソル操作を行っている時間を監視し、かかるカーソル操作を同一のユーザ７が継続して行っているときには、所定時間（例えば１〜２分程度）ごとにドキュメント画像３１を段階的に順次拡大するように表示するようになされているため、ユーザ７に余分な操作をさせることなく、ユーザ７がそのドキュメント画像３１上でカーソル操作を行っているときには、ドキュメント画像３１をメインに捉えさせることができる。
さらに、このテレビ会議システム１は、ユーザ７の発言の有無に応じてユーザ７のユーザ映像２７を拡大又は縮小するように表示するようになされているため、ユーザ７に余分な操作をさせることなく、発言を行ったユーザ７のユーザ映像２７をメインに捉えさせることができる。
さらに、このテレビ会議システム１は、いずれかのテレビ会議端末２又はテレビ会議サーバ３において専用スイッチ群５３又は５６内のいずれかの専用スイッチが押圧操作、又はキーボード５５又は５８を介して合成映像３２上に表示すべき文字列の入力に応じて発言画像（支援マーク画像５０又はテキスト画像５１）をその操作を行ったユーザ７の近傍に表示するようになされているため、そのとき発言しているユーザの当該発言を妨げることなく、事前にかつさりげなく自己の発言意思や所望する発言内容を他のユーザに伝えることができる。
さらに、このテレビ会議システム１は、ユーザ操作に応じて通信可能な状態に接続すると、光源５９及び６０に対して駆動電圧の供給を開始することによって当該光源５９を点灯させる一方、その後ユーザ操作に応じて接続を切断すると、かかる光源５９及びへの駆動電圧の供給を停止することによって当該光源５９及び６０を消灯させるようになされているため、テレビ会議中であることを容易に周囲に認識させることによって、テレビ会議中に周囲の人から話しかけられるのを未然かつ有効に防止でき、これによりテレビ会議を中断させることなく円滑に進行させることができる。
以上の構成によれば、ユーザ７のドキュメント操作に応じてドキュメント画像３１及びユーザ７のユーザ映像２７を拡大又は縮小するように表示することにより、ユーザ７に余分な操作をさせることなく、ドキュメント操作時等にはドキュメント画像３１をメインに捉えさせる一方、その操作を行ったユーザ７のユーザ映像２７をメインに捉えさせることができ、かくしてコミュニケーション性が高く、臨場感あふれるテレビ会議システムを実現することができる。
また、合成映像３２内にドキュメント画像３１を表示させたときには、ユーザ７がそのドキュメント画像３１上でカーソル操作を行っている時間を監視し、かかるカーソル操作を同一のユーザ７が継続して行っているときには、所定時間（例えば１〜２分程度）ごとにドキュメント画像３１を段階的に順次拡大するように表示するようになされているため、ユーザ７に余分な操作をさせることなく、ユーザ７がそのドキュメント画像３１上でカーソル操作を行っているときには、ドキュメント画像３１をメインに捉えさせることができ、かくしてコミュニケーション性が高く、臨場感あふれるテレビ会議システムを実現することができる。
さらに、ユーザ７の発言の有無に応じてユーザ７のユーザ映像２７を拡大又は縮小するように表示するようになされているため、ユーザ７に余分な操作をさせることなく、発言を行ったユーザ７のユーザ映像２７をメインに捉えさせることができ、かくしてコミュニケーション性が高く、臨場感あふれるテレビ会議システムを実現することができる。
さらに、いずれかのテレビ会議端末２又はテレビ会議サーバ３において専用スイッチ群５３又は５６内のいずれかの専用スイッチが押圧操作、又はキーボード５５又は５８を介して合成映像３２上に表示すべき文字列の入力に応じて発言画像（支援マーク画像５０又はテキスト画像５１）をその操作を行ったユーザ７の近傍に表示するようになされているため、そのとき発言しているユーザの当該発言を妨げることなく、事前にかつさりげなく自己の発言意思や所望する発言内容を他のユーザに伝えることができ、かくしてコミュニケーション性が高く、臨場感あふれるテレビ会議システムを実現することができる。
さらに、ユーザ操作に応じて通信可能な状態に接続すると、光源５９及び６０に対して駆動電圧の供給を開始することによって当該光源５９を点灯させる一方、その後ユーザ操作に応じて接続を切断すると、かかる光源５９及びへの駆動電圧の供給を停止することによって当該光源５９及び６０を消灯させるようになされているため、テレビ会議中であることを容易に周囲に認識させることによって、テレビ会議中に周囲の人から話しかけられるのを未然かつ有効に防止でき、これによりテレビ会議を中断させることなく円滑に進行させることができ、かくしてコミュニケーション性が高く、臨場感あふれるテレビ会議システムを実現することができる。
（５）他の実施の形態
なお上述の実施の形態においては、テレビ会議サーバ３と、２台のテレビ会議端末２（２Ａ、２Ｂ）とからなるテレビ会議システム１について述べたが、本発明はこれに限らず、１又は２以上の複数の端末装置と、情報処理装置とからなるこの他種々のリアルタイムに映像及び音声を送受信するシステムに適用することができる。
また上述の実施の形態においては、ドキュメント画像３１が表示されているときに、ユーザ７の発言の有無に応じてユーザ７のユーザ映像２７を拡大又は縮小するように表示する場合について述べたが、本発明はこれに限らず、ドキュメント画像３１が表示されていないときにも、上述と同様にユーザ７の発言の有無に応じてユーザ７のユーザ映像２７を拡大又は縮小するように表示することができる。
さらに上述の実施の形態においては、上述のようにテレビ会議端末２及びテレビ会議サーバ３を構成し、処理を行った場合について述べたが、本発明はこれに限らず、例えば、テレビ会議サーバは送信される各種データに対して合成処理及び状況判断制御処理のみを行い、そのデータを送信するようにしても良く、また送信される各種データに対して各テレビ会議端末それぞれにおいて合成処理及び状況判断制御処理を行い、そのデータを送信するようにしても良く、この他種々の構成を広く適用することができる。
さらに上述の実施の形態においては、発言画像生成部は、テレビ会議端末２及びテレビ会議サーバ３それぞれに設けられている場合について述べたが、本発明はこれに限らず、例えばテレビ会議サーバのみに設けられている場合であっても良く、この他種々の構成を広く適用することができる。
また上述の実施の形態においては、各カーソル画像２９がドキュメント上で１〜２秒以上移動するようなカーソル操作又はユーザの発言が１〜２秒以上検出が行われたときに、ユーザ７のユーザ映像２７を拡大又は縮小するように表示する場合について述べたが、本発明はこれに限らず、この他種々の影響を考慮して当該時間よりも長く又は短くするようにしても良い。
さらに上述の実施の形態においては、同時にユーザ７のカーソル操作及び又はユーザ７の発言が行われたときには、その操作時間及び又は検出時間に基づいてドキュメント画像３１及びユーザ７のユーザ映像２７を対応する大きさに拡大又は縮小するように表示した場合について述べたが、本発明はこれに限らず、例えば音量の大きさ、カーソルの動きの大きさ及び又は単位時間内のドキュメント操作や音声検出の数量に基づいてドキュメント画像３１及びユーザ映像２７を対応する大きさに拡大又は縮小するように表示するようにしても良く、この他種々の判断基準を用いることができる。
さらに上述の実施の形態においては、いずれかのテレビ会議端末２又はテレビ会議サーバ３において専用スイッチ群５３又は５６内のいずれかの専用スイッチが押圧操作、又はキーボード５５又は５８を介して合成映像３２上に表示すべき文字列の入力に応じて発言画像（支援マーク画像５０又はテキスト画像５１）をその操作を行ったユーザ７（７Ａ又は７Ｂ）又は２４の近傍に表示した場合について述べたが、本発明はこれに限らず、例えば発言画像（支援マーク画像５０又はテキスト画像５１）をその操作を行ったユーザ７の近傍に表示すると共に、その操作を行ったユーザ７の映像２７を中央に大きく表示して優先的に発言をさせるようにしても良い。
さらに上述の実施の形態においては、発言しているユーザ７の音声の音量を当該所定時間ごとに段階的に順次上げ、かつこれと同期して他のユーザ７の音声の音量を当該所定時間ごとに段階的に順次下げた場合について述べたが、本発明はこれに限らず、他のユーザ７の音声の音量を当該所定時間ごとに段階的に順次下げるだけにしても良く、要は発言しているユーザについての音量を、他の上記ユーザについての音量に対して相対的に大きくさせるようにすれば良い。
本発明は、テレビ会議システム以外の種々の機器においてリアルタイムに映像及び音声を送受信して表示させる場合等にも利用可能である。
本実施の形態によるテレビ会議システムの構成を示す略線図である。 本実施の形態によるテレビ会議端末の内部構成を示すブロック図である。 本実施の形態によるテレビ会議サーバの内部構成を示すブロック図である。 ディスプレイにおける表示の説明に供する概念図である。 付加情報管理テーブルの説明に供する概念図である。 ディスプレイにおける表示の説明に供する概念図である。 ディスプレイにおける表示の説明に供する概念図である。 ディスプレイにおける表示の説明に供する概念図である。 ディスプレイにおける表示の説明に供する概念図である。 ディスプレイにおける表示の説明に供する概念図である。 ディスプレイにおける表示の説明に供する概念図である。 ディスプレイにおける表示の説明に供する概念図である。 ディスプレイにおける表示の説明に供する概念図である。 ディスプレイにおける表示の説明に供する概念図である。 テレビ会議時と自己の作業との区別の説明に供する概念図である。 ドキュメント操作時等の表示制御処理手順を示すフローチャートである。 音声検出時等の表示及び音量制御処理手順を示すフローチャートである。
符号の説明
１……テレビ会議システム、２……テレビ会議端末、３……テレビ会議サーバ、４、２１……カメラ部、５、２２……マイクロホン、６、２３……ポインティングデバイス、７……ユーザ、１３……状況判断部、１９……状況判断制御部、２０……映像合成部、２７……ユーザ映像、２９……カーソル画像、３１……ドキュメント画像、３２……合成映像、３５、４６……ディスプレイ、３７……音声合成部、４９……付加情報管理テーブル、ＮＴ……ネットワーク、ＲＴ１……ドキュメント操作時等の表示制御処理手順、ＲＴ２……音声検出時等の表示及び音量制御処理手順。

Claims (15)

  1. それぞれ異なる地点に設置される１又は複数の端末装置と、所定のネットワークを介して上記端末装置と接続される情報処理装置とからなるテレビ会議システムにおいて、
    上記端末装置は、
    ユーザを撮影する撮影手段と、
    上記ユーザの音声を集音する集音手段と、
    ドキュメントについての所定のドキュメント操作を行うためのドキュメント操作手段と、
    上記撮影手段から出力される映像データ及び上記集音手段から出力される音声データを上記ネットワークを介して上記情報処理装置に送信する送信手段と、
    上記情報処理装置から上記ネットワークを介して送信される合成映像データに基づく映像を表示する表示手段と
    を具え、
    上記情報処理装置は、
    上記端末装置から上記ネットワークを介して送信される上記映像データに基づく上記ユーザの映像及び必要な上記ドキュメントの画像を合成した合成映像を生成する映像合成手段と、
    上記ドキュメント操作手段を用いた上記ドキュメント操作及び又は上記音声データに基づき検出される上記ユーザの発言の有無に基づいて、上記合成映像における上記ドキュメントの画像及び又は対応する上記ユーザの映像を拡大又は縮小させるように上記合成映像手段を制御する制御手段と、
    上記映像合成手段により生成された上記合成映像の映像データでなる上記合成映像データを、上記ネットワークを介して上記端末装置に送信する送信手段と
    を具えることを特徴とするテレビ会議システム。
  2. 上記情報処理装置は、
    各上記端末装置から上記ネットワークを介して送信される上記音声データに基づく音声を合成してなる合成音声を生成する音声合成手段を具え、
    上記制御手段は、
    上記ユーザの発言時間に応じて、上記合成音声における対応するユーザについての音量を、他の上記ユーザについての音量に対して相対的に大きくさせるように、上記音声合成手段を制御し、
    上記送信手段は、
    上記音声合成手段により生成された上記合成音声の音声データでなる合成音声データを、上記ネットワークを介して上記端末装置に送信し、
    上記端末装置は、
    上記情報処理装置から送信される上記合成音声データに基づく上記合成音声を出力する音声出力手段を具える
    ことを特徴とする請求項１に記載のテレビ会議システム。
  3. 上記端末装置は、
    発光する光源と、
    当該光源の点滅を制御する点滅制御手段とを具え、
    上記点滅制御手段は、
    上記情報処理装置と通信可能な状態に接続すると、上記光源を点灯させる一方、当該情報処理装置との接続を切断すると上記光源を消灯させる
    ことを特徴とする請求項１に記載のテレビ会議システム。
  4. それぞれ異なる地点に設置される１又は複数の端末装置と、所定のネットワークを介して上記端末装置と接続される情報処理装置において、
    上記端末装置から上記ネットワークを介して送信される撮影されたユーザの映像データに基づく上記ユーザの映像及び必要なドキュメントの画像を合成した合成映像を生成する映像合成手段と、
    上記端末装置から上記ネットワークを介して送信される上記ドキュメントについての所定のドキュメント操作及び又は集音された上記ユーザの音声の音声データに基づき検出される上記ユーザの発言の有無に基づいて、上記合成映像における上記ドキュメントの画像及び又は対応する上記ユーザの映像を拡大又は縮小させるように上記合成映像合成手段を制御する制御手段と、
    上記映像合成手段により生成された上記合成映像の映像データでなる合成映像データを、上記ネットワークを介して上記端末装置に送信する送信手段と
    を具えることを特徴とする情報処理装置。
  5. 上記ドキュメント操作は、
    上記ドキュメントを表示し若しくは変更し又は当該ドキュメントのページを変更する操作であり、
    上記制御手段は、
    上記ドキュメント操作が行われたときに、上記合成映像における上記ドキュメントの画像及び又は上記ドキュメント操作を行った上記ユーザの映像を拡大させるように、上記映像合成手段を制御する
    ことを特徴とする請求項４に記載の情報処理装置。
  6. 上記制御手段は、
    上記ドキュメント操作が所定時間行われないときには、上記ドキュメントの画像及び対応する上記ユーザの映像を所定時間ごとに段階的に縮小させるように、上記映像合成手段を制御する
    ことを特徴とする請求項５に記載の情報処理装置。
  7. 上記ドキュメント操作は、
    上記合成映像上に表示されるカーソルを上記ドキュメントの画像上において移動させる操作であり、
    上記制御手段は、
    当該ドキュメント操作の操作時間に応じて、上記合成映像における上記ドキュメントの画像を段階的に拡大させるように、上記映像合成手段を制御する
    ことを特徴とする請求項４に記載の情報処理装置。
  8. 上記制御手段は、
    上記ドキュメント操作が所定時間行われないときには、上記ドキュメントの画像及び対応する上記ユーザの映像を所定時間ごとに段階的に縮小させるように、上記映像合成手段を制御する
    ことを特徴とする請求項７に記載の情報処理装置。
  9. 上記制御手段は、
    上記ドキュメント操作手段を用いた上記ドキュメント操作及び又は上記音声データに基づき検出される上記ユーザの発言が所定時間以上継続して行われないときには、上記ドキュメント操作及び又は上記ユーザの発言をしてないものとして、上記映像合成手段を制御する
    ことを特徴とする請求項４に記載の情報処理装置。
  10. 上記制御手段は、
    上記ユーザの発言時間に応じて、上記合成映像における対応する上記ユーザの映像を段階的に拡大させるように、上記映像合成手段を制御する
    ことを特徴とする請求項４に記載の情報処理装置。
  11. 各上記端末装置から上記ネットワークを介して送信される上記音声データに基づく音声を合成してなる合成音声を生成する音声合成手段を具え、
    上記制御手段は、
    上記ユーザの発言時間に応じて、上記合成音声における対応するユーザについての音量を、他の上記ユーザについての音量に対して相対的に大きくさせるように、上記音声合成手段を制御し、
    上記送信手段は、
    上記音声合成手段により生成された上記合成音声の音声データでなる合成音声データを、上記ネットワークを介して上記端末装置に送信する
    ことを特徴とする請求項４に記載の情報処理装置。
  12. 上記制御手段は、
    所定のユーザ操作に応じて、当該ユーザの発言を支援する所定画像を上記合成映像上に表示するように、上記映像合成手段を制御する
    ことを特徴とする請求項４に記載の情報処理装置。
  13. 上記制御手段は、
    上記ユーザ操作に応じて、当該ユーザが入力した文字列を表すテキスト画像を上記合成映像上に表示するように、上記映像合成手段を制御する
    ことを特徴とする請求項４に記載の情報処理装置。
  14. それぞれ異なる地点に設置される１又は複数の端末装置と、所定のネットワークを介して上記端末装置と接続される情報処理装置における情報処理方法において、
    上記端末装置から上記ネットワークを介して送信される撮影されたユーザの映像データに基づくユーザの映像及び必要なドキュメントの画像を合成した合成映像を生成する第１のステップと、
    上記端末装置から上記ネットワークを介して送信される上記ドキュメントについての所定のドキュメント操作及び又は集音された上記ユーザの音声の音声データに基づき検出される上記ユーザの発言の有無に基づいて、上記合成映像における上記ドキュメントの画像及び又は対応する上記ユーザの映像を拡大又は縮小させる第２のステップと、
    上記合成映像の映像データでなる合成映像データを、上記ネットワークを介して上記端末装置に送信する第３のステップと
    を具えることを特徴とする情報処理方法。
  15. それぞれ異なる地点に設置される１又は複数の端末装置と、所定のネットワークを介して上記端末装置と接続される情報処理装置に対して、
    上記端末装置から上記ネットワークを介して送信される撮影されたユーザの映像データに基づくユーザの映像及び必要なドキュメントの画像を合成した合成映像を生成する第１のステップと、
    上記端末装置から上記ネットワークを介して送信される上記ドキュメントについての所定のドキュメント操作及び又は集音された上記ユーザの音声の音声データに基づき検出される上記ユーザの発言の有無に基づいて、上記合成映像における上記ドキュメントの画像及び又は対応する上記ユーザの映像を拡大又は縮小させる第２のステップと、
    上記合成映像の映像データでなる合成映像データを、上記ネットワークを介して上記端末装置に送信する第３のステップと
    を実行させるためのプログラム。
JP2004146930A 2004-05-17 2004-05-17 テレビ会議システム、情報処理装置及び情報処理方法並びにプログラム Pending JP2005328484A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004146930A JP2005328484A (ja) 2004-05-17 2004-05-17 テレビ会議システム、情報処理装置及び情報処理方法並びにプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004146930A JP2005328484A (ja) 2004-05-17 2004-05-17 テレビ会議システム、情報処理装置及び情報処理方法並びにプログラム

Publications (1)

Publication Number Publication Date
JP2005328484A true JP2005328484A (ja) 2005-11-24

Family

ID=35474445

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004146930A Pending JP2005328484A (ja) 2004-05-17 2004-05-17 テレビ会議システム、情報処理装置及び情報処理方法並びにプログラム

Country Status (1)

Country Link
JP (1) JP2005328484A (ja)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007086354A (ja) * 2005-09-21 2007-04-05 Toshiba Corp 合成映像制御装置、合成映像制御方法およびプログラム
JP2007150920A (ja) * 2005-11-29 2007-06-14 Kyocera Corp 通信端末およびその表示方法
JP2007251355A (ja) * 2006-03-14 2007-09-27 Fujifilm Corp 対話システム用中継装置、対話システム、対話方法
JP2010004573A (ja) 2009-10-05 2010-01-07 Kyocera Corp 通信端末およびその表示方法
JP2010213129A (ja) * 2009-03-12 2010-09-24 Brother Ind Ltd テレビ会議装置、テレビ会議システム、テレビ会議制御方法、及びテレビ会議装置のプログラム
JP2010271431A (ja) * 2009-05-20 2010-12-02 Casio Computer Co Ltd 表示システム及び表示装置
JP2012004756A (ja) * 2010-06-15 2012-01-05 Brother Ind Ltd 端末装置、会議システムおよび処理プログラム
JP2012049878A (ja) * 2010-08-27 2012-03-08 Brother Ind Ltd 通信装置、通信制御方法、および通信制御プログラム
JP2012118751A (ja) * 2010-11-30 2012-06-21 Ricoh Co Ltd 外部入力装置、表示データ作成方法、プログラム
US8487956B2 (en) 2005-11-29 2013-07-16 Kyocera Corporation Communication terminal, system and display method to adaptively update a displayed image
US8510799B2 (en) 2007-03-16 2013-08-13 Sony Corporation Communication system, communication system management apparatus, terminal connection control method, and program
JP2014199652A (ja) * 2013-03-15 2014-10-23 株式会社リコー 配信制御システム、配信システム、配信制御方法、及びプログラム
JP2014199651A (ja) * 2013-03-15 2014-10-23 株式会社リコー 配信制御システム、配信システム、配信制御方法、及びプログラム
JP2014199649A (ja) * 2013-03-15 2014-10-23 株式会社リコー 配信制御システム、配信システム、配信制御方法、及びプログラム
JP2017523632A (ja) * 2014-05-21 2017-08-17 華為技術有限公司Ｈｕａｗｅｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｃｏ．，Ｌｔｄ． 映像でのプレゼンテーションのための方法、装置、およびシステム
JP2018517196A (ja) * 2015-05-22 2018-06-28 グーグル エルエルシー コンピュータ・プレゼンテーション内におけるビジュアル・コンテンツの優先表示
US10044977B2 (en) 2016-01-06 2018-08-07 Samsung Electronics Co., Ltd. Display apparatus and control methods thereof
JP2018533264A (ja) * 2015-09-02 2018-11-08 ハドル・ルーム・テクノロジー・エッセ・エッレ・エッレ ビデオ通信のための装置
US12047706B2 (en) 2016-01-06 2024-07-23 Samsung Electronics Co., Ltd. Display apparatus and control methods thereof

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06141310A (ja) * 1992-10-23 1994-05-20 Arumetsukusu:Kk テレビ会議電話システム
JPH06282405A (ja) * 1993-03-29 1994-10-07 Nippon Telegr & Teleph Corp <Ntt> 参加者映像表示ウィンドウ制御方式
JPH07336660A (ja) * 1994-06-14 1995-12-22 Matsushita Electric Ind Co Ltd テレビ会議システム
JP2000259535A (ja) * 1999-03-08 2000-09-22 Fuji Xerox Co Ltd ウィンドウ表示制御装置
JP2003323387A (ja) * 2002-05-02 2003-11-14 Megafusion Corp 情報交換システムおよび情報交換プログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06141310A (ja) * 1992-10-23 1994-05-20 Arumetsukusu:Kk テレビ会議電話システム
JPH06282405A (ja) * 1993-03-29 1994-10-07 Nippon Telegr & Teleph Corp <Ntt> 参加者映像表示ウィンドウ制御方式
JPH07336660A (ja) * 1994-06-14 1995-12-22 Matsushita Electric Ind Co Ltd テレビ会議システム
JP2000259535A (ja) * 1999-03-08 2000-09-22 Fuji Xerox Co Ltd ウィンドウ表示制御装置
JP2003323387A (ja) * 2002-05-02 2003-11-14 Megafusion Corp 情報交換システムおよび情報交換プログラム

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4695474B2 (ja) * 2005-09-21 2011-06-08 株式会社東芝 合成映像制御装置、合成映像制御方法およびプログラム
JP2007086354A (ja) * 2005-09-21 2007-04-05 Toshiba Corp 合成映像制御装置、合成映像制御方法およびプログラム
US7974494B2 (en) 2005-09-21 2011-07-05 Kabushiki Kaisha Toshiba Image control from composed composite image using HID signal conversion to source image coordinates
JP2007150920A (ja) * 2005-11-29 2007-06-14 Kyocera Corp 通信端末およびその表示方法
US8487956B2 (en) 2005-11-29 2013-07-16 Kyocera Corporation Communication terminal, system and display method to adaptively update a displayed image
JP2007251355A (ja) * 2006-03-14 2007-09-27 Fujifilm Corp 対話システム用中継装置、対話システム、対話方法
US8510799B2 (en) 2007-03-16 2013-08-13 Sony Corporation Communication system, communication system management apparatus, terminal connection control method, and program
JP2010213129A (ja) * 2009-03-12 2010-09-24 Brother Ind Ltd テレビ会議装置、テレビ会議システム、テレビ会議制御方法、及びテレビ会議装置のプログラム
JP2010271431A (ja) * 2009-05-20 2010-12-02 Casio Computer Co Ltd 表示システム及び表示装置
JP2010004573A (ja) 2009-10-05 2010-01-07 Kyocera Corp 通信端末およびその表示方法
JP2012004756A (ja) * 2010-06-15 2012-01-05 Brother Ind Ltd 端末装置、会議システムおよび処理プログラム
JP2012049878A (ja) * 2010-08-27 2012-03-08 Brother Ind Ltd 通信装置、通信制御方法、および通信制御プログラム
JP2012118751A (ja) * 2010-11-30 2012-06-21 Ricoh Co Ltd 外部入力装置、表示データ作成方法、プログラム
JP2014199652A (ja) * 2013-03-15 2014-10-23 株式会社リコー 配信制御システム、配信システム、配信制御方法、及びプログラム
JP2014199651A (ja) * 2013-03-15 2014-10-23 株式会社リコー 配信制御システム、配信システム、配信制御方法、及びプログラム
JP2014199649A (ja) * 2013-03-15 2014-10-23 株式会社リコー 配信制御システム、配信システム、配信制御方法、及びプログラム
JP2017523632A (ja) * 2014-05-21 2017-08-17 華為技術有限公司Ｈｕａｗｅｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｃｏ．，Ｌｔｄ． 映像でのプレゼンテーションのための方法、装置、およびシステム
JP2018517196A (ja) * 2015-05-22 2018-06-28 グーグル エルエルシー コンピュータ・プレゼンテーション内におけるビジュアル・コンテンツの優先表示
JP2018533264A (ja) * 2015-09-02 2018-11-08 ハドル・ルーム・テクノロジー・エッセ・エッレ・エッレ ビデオ通信のための装置
US11115626B2 (en) 2015-09-02 2021-09-07 Huddle Toom Technology S.R.L. Apparatus for video communication
US10044977B2 (en) 2016-01-06 2018-08-07 Samsung Electronics Co., Ltd. Display apparatus and control methods thereof
US10511804B2 (en) 2016-01-06 2019-12-17 Samsung Electronics Co., Ltd. Display apparatus and control methods thereof
US10887546B2 (en) 2016-01-06 2021-01-05 Samsung Electronics Co., Ltd. Display apparatus and control methods thereof
US11323658B2 (en) 2016-01-06 2022-05-03 Samsung Electronics Co., Ltd. Display apparatus and control methods thereof
KR20230006421A (ko) * 2016-01-06 2023-01-10 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
KR102595795B1 (ko) 2016-01-06 2023-10-30 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US12047706B2 (en) 2016-01-06 2024-07-23 Samsung Electronics Co., Ltd. Display apparatus and control methods thereof

Similar Documents

Publication Publication Date Title
JP2005328484A (ja) テレビ会議システム、情報処理装置及び情報処理方法並びにプログラム
JP6460228B2 (ja) 情報処理装置、情報処理方法および情報処理プログラム
CN100456235C (zh) 一种在即时通信中屏幕截图的方法和***
KR101141478B1 (ko) 쌍방향 커뮤니케이션 시스템에서의 그래피컬 유저인터페이스 장치 및 접속 방법
US8487956B2 (en) Communication terminal, system and display method to adaptively update a displayed image
US20080062252A1 (en) Apparatus and method for video mixing and computer readable medium
US7508413B2 (en) Video conference data transmission device and data transmission method adapted for small display of mobile terminals
JP6179834B1 (ja) テレビ会議装置
JP4241053B2 (ja) コミュニケーションシステムおよびその端末装置
US20120016960A1 (en) Managing shared content in virtual collaboration systems
JP2002007294A (ja) 画像配信システム及び方法並びに記憶媒体
JPH09247637A (ja) 映像音声通信システム、映像通信システム、送信端末及び受信端末
JP2007110712A (ja) 電気通信システム
JP2000184346A (ja) 情報端末装置及び情報通信システム並びに表示状態制御方法
JP4345353B2 (ja) コミュニケーション端末装置
JP2009065696A (ja) 映像合成装置、方法およびプログラム
JP4973908B2 (ja) 通信端末およびその表示方法
US20070120949A1 (en) Video, sound, and voice over IP integration system
JP2006014119A (ja) 撮影画像送受信システム
JP4649640B2 (ja) 画像処理方法、画像処理装置、及びコンテンツ作成システム
JP2001268078A (ja) 通信制御装置、その方法およびその提供媒体と通信装置
JP2017103641A (ja) 情報処理装置、会議システム、情報処理方法およびプログラム
JP2019176386A (ja) 通信端末及び会議システム
JPH1023383A (ja) テレビ会議システム
JPH099220A (ja) 通信装置および通信システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070418

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100304

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100311

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100430

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20100527