JP3175200B2 - 画像通信装置及びその制御方法 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、テレビ電話やテレビ会
議システムに使用される画像通信装置及びその制御方法
に関する。

【０００２】

【従来の技術】近年、ＩＳＤＮのような高速ディジタル
回線が普及し、画像データを高速に伝送できるようにな
り、テレビ電話やテレビ会議が実用的になってきた。図
２は、テレビ電話やテレビ会議システムの端末としての
画像通信装置の概略構成図を示す。図２に示すように、
画像通信装置は、画像入力手段としてのカメラ１０、音
声入力手段としてのマイク１２、画像表示手段としての
モニタ装置１４、音声出力手段としてのスピーカ１６、
及びこれらを制御するシステム制御回路１８からなり、
通信回線網２０を介して他の画像通信装置に回線接続す
る。

【０００３】１対１で通信する画像通信装置では、モニ
タ装置１４には相手の画像（受信画像）のみを表示する
ようにしてもよいが、図３に示すように、自身の画像の
送信状態を確認できるように、受信画像と共に自身の画
像表示できるようにしたものがある。図３において、モ
ニタ装置１４には２つの表示領域１４Ａ，１４Ｂ（物理
的に２つの表示手段を設ける場合と、物理的には１つの
表示手段の表示画面内に論理的に２つの子画面を設ける
場合とがある）があり、一方の表示領域１４Ａにはカメ
ラ１０による自身（甲）の画像（送信画像）を表示し、
他方の表示領域１４Ｂには通信相手（乙）の画像（受信
画像）を表示する。

【０００４】また、多数の相手と同時に通信できる同報
通信サービスも実用化されており、そのための画像通信
装置では、モニタ装置１４に自分用と複数の通信相手用
にそれぞれ表示領域を設ける場合がある。図４は４つの
表示領域１４Ｃ，１４Ｄ，１４Ｅ，１４Ｆを持つモニタ
装置１４の画面例であり、表示領域１４Ｃ，１４Ｄ，１
４Ｅ，１４Ｆのうちの特定の１つに自分の画像を表示
し、残りの３つにはそれぞれ通信相手の画像を表示す
る。なお、一旦、通信回線が確立された相手は、常に同
じ表示領域に表示される。

【０００５】

【発明が解決しようとする課題】通常の会話では、互い
に向き合い、視線を合わせることにより自然な会話が可
能になるが、互いの視線がずれている場合には、かなり
の違和感を感じ、スムーズに会話を進めることが困難に
なる。ところが、図３に示すようなモニタ装置１４を具
備する画像通信装置では、相手（乙）の画像の表示領域
１４Ｂの位置がカメラ１０とは無関係に決定されてお
り、相手の受信画像を見る視線が、通信相手（乙）にと
って異なる方向を見ているように感じられるという欠点
があった。

【０００６】このような問題点は、同報通信サービスを
利用して、多数者間で通信する場合にも同様である。

【０００７】本発明は、このような不都合を解消する画
像通信装置及びその制御方法を提示することを目的とす
る。

【０００８】

【課題を解決するための手段】本発明に係る画像通信装
置は、複数の相手と同時に通信する画像通信装置であっ
て、画像入力手段と、通信相手を表示する画像表示手段
と、当該画像入力手段による入力画像を送信し、受信し
た画像を当該画像表示手段に表示させる通信手段と、音
声を発している通信相手を検出する話者検出手段と、当
該話者検出手段の検出結果に応じて、当該画像表示手段
において、話者の画像を当該画像入力手段に近接した位
置に表示させる表示制御手段とからなることを特徴とす
る。

【０００９】本発明に係る画像通信装置の制御方法は、
画像入力手段と、通信相手を表示する画像表示手段と、
当該画像入力手段による入力画像を送信し、受信した画
像を当該画像表示手段に表示させる通信手段とを有し
て、複数の相手と同時に通信する画像通信装置の制御方
法であって、音声を発している通信相手を検出する話者
検出工程と、当該話者検出工程の検出結果に応じて、当
該画像表示手段において、話者の画像を当該画像入力手
段に近接した位置に表示させる表示制御工程とからなる
ことを特徴とする。

【００１０】

【作用】上記手段により、多数者間での同時通信でも、
通信相手を見る方向に近い方向に画像入力手段が位置す
ることになり、互いにほぼ視線を合わせることができ
る。これにより、違和感が軽減され、自然な会話を行な
えるようになる。

【００１１】

【実施例】以下、図面を参照して本発明の実施例を説明
する。

【００１２】図１は、本発明の一実施例の構成ブロック
図である。図１において、３０は画像入力用のカメラ、
３２は音声入力用のマイク、３４は自分及び相手の画像
を表示するモニタ装置、３６は相手からの音声出力用の
スピーカ、３８は通信回線網との接続端子である。

【００１３】４０は、カメラ３０の出力信号を所定形式
の画像信号に変換するデコーダ、４２はデコーダ４０の
アナログ出力をディジタル化するＡ／Ｄ変換器、４４は
モニタ装置３４の表示画面に相当する画像データを記憶
できる画像メモリ、４６は画像メモリ４４を制御するメ
モリ制御回路、４８はメモリ制御回路４６により画像メ
モリ４４から読み出された画像データをアナログ信号に
変換するＤ／Ａ変換器、５０はＤ／Ａ変換器４８の出力
を例えばＮＴＳＣ方式のテレビジョン信号に変換し、モ
ニタ装置３４に印加するエンコーダである。

【００１４】５２は接続端子３８に接続する通信回線網
とのインタフェースをとる回線インターフェース、５４
はカメラ３０による入力画像及びマイク３２による入力
音声を圧縮すると共に、受信した圧縮画像データ及び圧
縮音声データを伸長する符号化復号化回路（コーデッ
ク）である。５６はマイク３２の出力を増幅して符号化
復号化回路５４に印加するアンプ、５８は符号化復号化
回路５４から出力される受信音声信号を増幅してスピー
カ３６に印加するアンプである。６０は全体を制御する
ＣＰＵである。

【００１５】図５はカメラ３０及びモニタ装置３４の正
面図であり、カメラ３０とモニタ装置３４の位置関係を
示す。３４Ａはカメラ３０による自分（甲）の画像の表
示領域であり、３４Ｂは、通信する相手（乙）の画像の
表示領域である。図５（Ａ）は表示領域３４Ａ，３４Ｂ
及びカメラ３０を水平横方向に並べた配置を示し、同
（Ｂ）は、垂直縦方向に並べた配置を示す。図５に示す
ように、本実施例では、相手（乙）の画像の表示領域３
４Ｂをカメラ３０に近接して配置する。これにより、表
示領域３４Ｂを見る視線がカメラ３０の方向に近接し、
相手（即ち、乙）側では、甲が自分の方を見ているよう
に見える。

【００１６】図１の動作を説明する。カメラ３０は甲を
撮影し、その出力はデコーダ４０及びＡ／Ｄ変換器４２
を介してメモリ制御回路４６に印加される。メモリ制御
回路４６は、Ａ／Ｄ変換器４２から出力される画像デー
タを画像メモリ４４の表示領域３４Ａに相当するメモリ
空間に書き込み、同時に、乙に送信するために符号化復
号化回路５４に印加する。符号化復号化回路５４には、
マイク３２による甲の音声信号がアンプ５６を介して入
力されており、符号化復号化回路５４は、メモリ制御回
路４６からの甲の画像データと、アンプ５６からの甲の
音声信号を圧縮し、回線インターフェース５２に出力す
る。回線インターフェース５２は通信回線網との整合を
とって接続端子３８に出力する。

【００１７】通信回線網から接続端子３８に入力した信
号は回線インターフェース５２を介して符号化復号化回
路５４に印加される。符号化復号化回路５４は、回線イ
ンターフェース５２から供給される信号を伸長し、受信
画像データをメモリ制御回路４６に出力し、受信音声信
号をアンプ５８を介してスピーカ３６に出力する。メモ
リ制御回路４６は、符号化復号化回路５４から供給され
る受信画像データを画像メモリ４４の表示領域３４Ｂに
相当するメモリ空間に書き込む。

【００１８】メモリ制御回路４６は、画像メモリ４４に
記憶される画像データをビデオ・レートで繰り返し読み
出し、Ｄ／Ａ変換器４８に印加する。Ｄ／Ａ変換器４８
はメモリ制御回路４６からの画像データをアナログ信号
に変換し、エンコーダ５０はＤ／Ａ変換器４８の出力を
モニタ装置３４に適合する所定フォーマットに変換して
モニタ装置３４に印加する。モニタ装置３４では、表示
領域３４Ａにカメラ３０による自分（甲）の画像が表示
され、表示領域３４Ｂに受信した相手（乙）の画像が表
示される。

【００１９】本実施例では、相手（乙）の画像を表示す
る表示領域３４Ｂに近接してカメラ３０が配置されるの
で、表示領域３４Ｂに表示される乙を見る甲の視線が、
ほぼカメラ３０の方に向くことになり、視線のずれが少
なくなり、会話の際の違和感が緩和される。

【００２０】本実施例では、モニタ装置３４が物理的に
１つの画像表示装置であるように説明したが、表示領域
３４Ａ，３４Ｂ毎に別々の画像表示装置を割り当てても
よい。その場合、画像メモリ４４、メモリ制御回路４
６、Ｄ／Ａ変換器４８及びエンコーダ５０も２系統設け
ることになる。この場合には、図５（Ａ）において、カ
メラ３０を表示領域３４Ｂの上又は下に配置してもよ
く、図５（Ｂ）において、カメラ３０を表示領域３４Ｂ
の右又は左に配置してもよい。

【００２１】図６は、本発明の別の実施例の構成ブロッ
ク図を示す。図６の実施例では、同報通信サービスを利
用して、最大５者間で通信することができる。

【００２２】図６において、１３０は画像入力用のカメ
ラ、１３２は音声入力用のマイク、１３４は自分及び相
手の画像を表示するモニタ装置、１３６は相手からの音
声出力用のスピーカ、１３８は通信回線網との接続端子
である。

【００２３】１４０は、カメラ１３０の出力信号を所定
形式の画像信号に変換するデコーダ、１４２はデコーダ
１４０のアナログ出力をディジタル化するＡ／Ｄ変換
器、１４４はモニタ装置１３４の表示画面に相当する画
像データを記憶できる画像メモリ、１４６は画像メモリ
１４４を制御するメモリ制御回路、１４８はメモリ制御
回路１４６により画像メモリ１４４から読み出された画
像データをアナログ信号に変換するＤ／Ａ変換器、１５
０はＤ／Ａ変換器１４８の出力を例えばＮＴＳＣ方式の
テレビジョン信号に変換し、モニタ装置１３４に印加す
るエンコーダである。

【００２４】１５１は同報通信を制御する同報通信制御
回路、１５２は接続端子１３８に接続する通信回線網と
のインタフェースをとる回線インターフェース、１５４
はカメラ１３０による入力画像及びマイク１３２による
入力音声を圧縮すると共に、受信した圧縮画像データ及
び圧縮音声データを伸長する符号化復号化回路（コーデ
ック）である。１５６はマイク１３２の出力を増幅して
符号化復号化回路１５４に印加するアンプ、１５８は符
号化復号化回路１５４から出力される受信音声信号を増
幅してスピーカ１３６に印加するアンプである。

【００２５】１５９は符号化復号化回路１５４の音声出
力から、現在音声を受信している通話相手を検出する話
者検出回路、１６０は全体を制御するＣＰＵである。Ｃ
ＰＵ１６０はまた、話者検出回路１５９の検出結果に応
じてメモリ制御回路１４６を制御し、話者の表示領域を
カメラ１３０に近接した位置に変更させる。

【００２６】図７は、カメラ１３０及びモニタ装置１３
４の正面図であり、カメラ１３０とモニタ装置１３４の
位置関係を示す。１３４Ａは話者検出回路１５９により
検出された話者を表示する表示領域であり、カメラ１３
０に近接して配置される。その他の表示領域１３４Ｂ，
１３４Ｃ，１３４Ｄ，１３４Ｅの１つは、カメラ１３０
による自分（甲）の画像の表示領域であり、残りは、通
信相手の画像の表示領域である。図７（Ａ）はカメラ１
３０の横にモニタ装置１３４を配置した例であり、同
（Ｂ）は、カメラ１３０の下にモニタ装置１３４を配置
した例を示す。複数の相手の内の話者をカメラ１３０に
近接する表示領域１３４Ａに表示することにより、話者
を見る方向がカメラ３０の方向に近接し、相手側と対面
する感覚で会話又は討議できる。

【００２７】図６の動作を説明する。カメラ１３０は自
分を撮影し、その出力はデコーダ１４０及びＡ／Ｄ変換
器１４２を介してメモリ制御回路１４６に印加される。
メモリ制御回路１４６はＡ／Ｄ変換器１４２から出力さ
れる画像データを画像メモリ１４４の表示領域１３４
Ｂ，１３４Ｃ，１３４Ｄ，１３４Ｅの１つ（例えば表示
領域１３４Ｂ）に相当するメモリ空間に書き込み、同時
に、通信相手に送信するために符号化復号化回路１５４
に印加する。符号化復号化回路１５４には、マイク１３
２による自分の音声信号がアンプ１５６を介して入力さ
れており、符号化復号化回路１５４は、メモリ制御回路
１４６からの自分の画像データと、アンプ１５６からの
自分の音声信号を圧縮し、回線インターフェース１５２
に出力する。回線インターフェース１５２は通信回線網
との整合をとり、その出力は、同報通信制御回路１５１
及び接続端子１３８を介して通信回線網に出力される。

【００２８】通信回線網から接続端子１３８に入力した
信号は同報通信制御回路１５１及び回線インターフェー
ス１５２を介して符号化復号化回路１５４に印加され
る。符号化復号化回路１５４は、回線インターフェース
１５２から供給される信号を伸長し、受信画像データを
メモリ制御回路１４６に出力し、受信音声信号をアンプ
１５８を介してスピーカ１３６に出力する。

【００２９】メモリ制御回路１４６は当初、符号化復号
化回路１５４から供給される受信画像データを、通信相
手毎に、画像メモリ１４４の表示領域１３４Ａ，１３４
Ｃ，１３４Ｄ，１３４Ｅに相当するメモリ空間に書き込
む。例えば、通信回線の確立順序に応じて、１番目に確
立した相手を表示領域１３４Ａに相当するメモリ空間に
書き込み、次に確立した相手を表示領域１３４Ｃに相当
するメモリ空間に書き込み、以後順次、表示領域１３４
Ｄ，１３４Ｅに相当するメモリ空間に書き込む。

【００３０】会話の開始により通信相手の音声が入力す
ると、話者検出回路１５９は、符号化復号化回路１５４
の音声出力から通信相手の中の話者を検出し、ＣＰＵ１
６０に伝達する。ＣＰＵ１６０は話者検出回路１５９の
出力から、話者の画像がカメラ１３０に近い表示領域１
３４Ａに表示されるようにメモリ制御回路１４６に指令
する。メモリ制御回路１４６は、ＣＰＵ１６０からの指
令に応じて符号化復号化回路１５４からの受信画像の書
き込み領域を切り換え、画像メモリ１４４上で、話者の
画像データを表示領域１３４Ａに相当するメモリ空間に
書き込み、直前まで表示領域１３４Ａに書き込まれてい
た通信相手の画像データを、話者の画像が表示されてい
た表示領域（１３４Ｃ〜Ｅの何れか）に相当するメモリ
空間に書き込ようにする。

【００３１】通信相手の表示位置が会話の都度変化する
のは混乱を招くことがある。そのような場合には、例え
ば表示領域１３４Ｂ，１３４Ｃ，１３４Ｄ，１３４Ｅに
は同報通信の参加者を常時表示し、表示領域１３４Ａに
は、４名の参加者の内で現在話をしている者を表示する
ようにすればよい。この場合には、メモリ制御回路１４
６は、話者検出回路１５１により検出された話者の画像
データを、表示領域１３４Ｂ，１３４Ｃ，１３４Ｄ，１
３４Ｅの内の割り当てられた表示領域に相当するメモリ
空間以外に、表示領域１３４Ａに相当するメモリ空間に
も書き込めばよい。

【００３２】メモリ制御回路１４６は画像メモリ１４４
に記憶される画像データをビデオ・レートで繰り返し読
み出し、Ｄ／Ａ変換器１４８に印加する。Ｄ／Ａ変換器
１４８はメモリ制御回路１４６からの画像データをアナ
ログ信号に変換し、エンコーダ１５０はＤ／Ａ変換器１
４８の出力をモニタ装置１３４に適合する所定フォーマ
ットに変換してモニタ装置１３４に印加する。モニタ装
置１３４では、表示領域１３４Ａに複数の通信相手の内
で、現在話している者の画像が表示され、表示領域１３
４Ｂに自分の画像、表示領域１３４Ｃ，１３４Ｄ，１３
４Ｅには残りの通信相手の画像が表示される。

【００３３】図６及び図７に図示した実施例では、現在
話している通信相手の画像がカメラ１３０が近接して表
示されるので、話し相手を見る視線がほぼカメラ１３０
の方に向くことになり、視線のずれが少なくなり、会話
の際の違和感が緩和される。

【００３４】図６及び図７に図示した実施例でも、図１
の実施例と同様に、モニタ装置１３４が物理的に１つの
画像表示装置であるように説明したが、表示領域１３４
Ａ，１３４Ｂ，１３４Ｃ，１３４Ｄ，１３４Ｅ毎に別々
の画像表示装置を割り当ててもよい。その場合、画像メ
モリ１４４、メモリ制御回路１４６、Ｄ／Ａ変換器１４
８及びエンコーダ１５０も５系統設けることになる。こ
の場合には、図７（Ａ）において、カメラ１３０を表示
領域１３４Ａの上又は下に配置してもよく、図７（Ｂ）
において、カメラ１３０を表示領域１３４Ａの右又は左
に配置してもよい。

【００３５】

【発明の効果】以上の説明から容易に理解できるよう
に、本発明によれば、多数者間での同時通信でも、通信
相手と視線を合わせることができ、自然な会話を行なえ
るようになる。

【図面の簡単な説明】

【図１】 本発明の一実施例の構成ブロック図である。

【図２】 画像通信装置の基本構成ブロック図である。

【図３】 ２者間通信の従来の表示方式の説明図であ
る。

【図４】 同報通信サービスによる多数者間の従来の表
示方式の説明図である。

【図５】 図１のカメラ３０とモニタ装置３４の配置を
示す正面図である。

【図６】 本発明の別の実施例の構成ブロック図であ
る。

【図７】 図６のカメラ１３０とモニタ装置１３４の配
置を示す正面図である。

【符号の説明】

１０：カメラ１０ １２：マイク１２ １４：モニタ装
置 １４Ａ，１４Ｂ，１４Ｃ，１４Ｄ，１４Ｅ，１４
Ｆ：表示領域 １６：スピーカ １８：システム制御回
路 ２０：通信回線網 ３０：カメラ ３２：マイク
３４：モニタ装置３４Ａ，３４Ｂ：表示領域 ３６：ス
ピーカ ３８：接続端子 ４０：デコーダ４２：Ａ／Ｄ
変換器 ４４：画像メモリ ４６：メモリ制御回路 ４
８：Ｄ／Ａ変換器 ５０：エンコーダ ５２：回線イン
ターフェース ５４：符号化復号化回路 ５６，５８：
アンプ ６０：ＣＰＵ １３０：カメラ １３２：マイ
ク１３４：モニタ装置 １３４Ａ，１３４Ｂ，１３４
Ｃ，１３４Ｄ，１３４Ｅ：表示領域 １３６：スピーカ
１３８：接続端子 １４０：デコーダ １４２：Ａ／
Ｄ変換器 １４４：画像メモリ １４６：メモリ制御回
路 １４８：Ｄ／Ａ変換器１５０：エンコーダ １５
１：同報通信制御回路 １５２：回線インターフェース
１５４：符号化復号化回路 １５６，１５８：アンプ
１５９：話者検出回路 １６０：ＣＰＵ

Claims (2)

(57)【特許請求の範囲】
1. 【請求項１】 複数の相手と同時に通信する画像通信装
   置であって、画像入力手段と、通信相手を表示する画像
   表示手段と、当該画像入力手段による入力画像を送信
   し、受信した画像を当該画像表示手段に表示させる通信
   手段と、音声を発している通信相手を検出する話者検出
   手段と、当該話者検出手段の検出結果に応じて、当該画
   像表示手段において、話者の画像を当該画像入力手段に
   近接した位置に表示させる表示制御手段とからなること
   を特徴とする画像通信装置。
2. 【請求項２】 画像入力手段と、通信相手を表示する画
   像表示手段と、当該画像入力手段による入力画像を送信
   し、受信した画像を当該画像表示手段に表示させる通信
   手段とを有して、複数の相手と同時に通信する画像通信
   装置の制御方法であって、 音声を発している通信相手を検出する話者検出工程と、 当該話者検出工程の検出結果に応じて、当該画像表示手
   段において、話者の画像を当該画像入力手段に近接した
   位置に表示させる表示制御工程とからなることを特徴と
   する画像通信装置の制御方法。