JP2005341347A - 多地点接続装置および方法 - Google Patents
多地点接続装置および方法 Download PDFInfo
- Publication number
- JP2005341347A JP2005341347A JP2004158872A JP2004158872A JP2005341347A JP 2005341347 A JP2005341347 A JP 2005341347A JP 2004158872 A JP2004158872 A JP 2004158872A JP 2004158872 A JP2004158872 A JP 2004158872A JP 2005341347 A JP2005341347 A JP 2005341347A
- Authority
- JP
- Japan
- Prior art keywords
- video
- code amount
- communication
- multipoint connection
- terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Telephonic Communication Services (AREA)
Abstract
【課題】多地点映像コミュニケーションサービスにおいて、ネットワークリソースが限られた状況の中で通信者間のコミュニティ全体の品質を向上する。
【解決手段】発言者判別部14で、各通信者端末からの音声に基づき発言者を判別して、映像符号量決定部15で、判別結果に基づき各通信者端末30からの映像に対する符号量を決定し、映像符号化部16で、その符号量に基づき各通信者端末からの映像を符号化して各通信者端末30へ配信する。
【選択図】 図1
【解決手段】発言者判別部14で、各通信者端末からの音声に基づき発言者を判別して、映像符号量決定部15で、判別結果に基づき各通信者端末30からの映像に対する符号量を決定し、映像符号化部16で、その符号量に基づき各通信者端末からの映像を符号化して各通信者端末30へ配信する。
【選択図】 図1
Description
本発明は、映像通信技術に関し、特に多地点に配置された端末間で映像や音声をネットワークを介してやり取りする多地点映像コミュニケーション技術に関する。
近年、インターネットに代表される通信ネットワークにおけるアクセス回線のブロードバンド化に応じて、比較的容量の大きいストリーミング系の映像・音声メディアの配信サービスが提供されつつある。特に、インターネットでは、そのアクセス回線を用いて複数の端末間で映像・音声メディアをやり取りする、いわゆるテレビ会議などの多地点映像コミュニケーションサービスが注目されている。
この種の多地点映像コミュニケーションサービスでは、通信者が会話する場合、傍聴者の映像に対してはあまり注目せず発言者の映像に注目して会話を進めることが多く、通信者間の立場によって映像の重要度が異なる。
従来、このような多地点映像コミュニケーションの特性に着目し、各通信者端末からの映像・音声を中継処理する多地点接続装置で、発言者の映像を他の傍聴者の映像より拡大して配信するようにしたものが提案されている(例えば、特許文献1など参照)
従来、このような多地点映像コミュニケーションの特性に着目し、各通信者端末からの映像・音声を中継処理する多地点接続装置で、発言者の映像を他の傍聴者の映像より拡大して配信するようにしたものが提案されている(例えば、特許文献1など参照)
これによれば、図5に示すように、通信者Aが発言している期間については、通信者Aの映像が他の通信者に比較して大きく画面表示され、通信者Bが発言している期間については、通信者Bの映像が他の通信者に比較して大きく画面表示される。
これにより、ネットワークリソースが限られた状況の中で、より鮮明な映像を得て臨場感あるコミュニケーションシステムが実現される。
これにより、ネットワークリソースが限られた状況の中で、より鮮明な映像を得て臨場感あるコミュニケーションシステムが実現される。
なお、出願人は、本明細書に記載した先行技術文献情報で特定される先行技術文献以外には、本発明に関連する先行技術文献を出願時までに発見するには至らなかった。
特開平5−103324号公報
しかしながら、このような従来技術では、発言者の映像を拡大表示することにより、他の傍聴者の映像を縮小表示するため、傍聴者の反応などを読み取ることができなくなる。また、発言者が頻繁に変化すると、拡大される映像も頻繁に切り替わってしまうため、不快に感じられる場合もある。したがって、従来技術によれば、多地点映像コミュニケーションサービスにおいて、通信者間のコミュニティ全体の品質が低下するという問題がある。
本発明はこのような課題を解決するためのものであり、多地点映像コミュニケーションサービスにおいて、ネットワークリソースが限られた状況の中で通信者間のコミュニティ全体の品質を向上できる多地点接続装置および方法を提供することを目的としている。
このような目的を達成するために、本発明にかかる多地点接続装置は、多地点に配置されている複数の通信者端末と通信ネットワークを介して接続し、これら通信者端末からの映像・音声を中継処理することにより各通信者端末に対して多地点映像コミュニケーションサービスを提供する多地点接続装置であって、各通信者端末からの音声に基づき発言者を判別する発言者判別部と、判別の結果に基づき各通信者端末からの映像に対する符号量を決定する映像符号量決定部と、符号量に基づき各通信者端末からの映像を符号化する映像符号化部と、符号化された映像を各通信者端末へ配信する制御部とを備えるものである。
符号量制御の具体例としては、映像符号化部で、各通信者端末からの映像を符号化して量子化処理する際、当該通信者端末に対する符号量に応じた量子化ステップ幅を用いるようにしてもよい。
あるいは、映像符号化部で、各通信者端末からの映像を予測符号化処理する際、当該通信者端末に対する符号量に応じたピクチャグループ構成を用いるようにしてもよい。
あるいは、映像符号化部で、各通信者端末からの映像を予測符号化処理する際、当該通信者端末に対する符号量に応じたピクチャグループ構成を用いるようにしてもよい。
また、本発明にかかる多地点接続方法は、多地点に配置されている複数の通信者端末と通信ネットワークを介して接続する多地点接続装置で、これら通信者端末からの映像・音声を中継処理することにより各通信者端末に対して多地点映像コミュニケーションサービスを提供する多地点接続方法であって、各通信者端末からの音声に基づき発言者を判別する発言者判別ステップと、判別の結果に基づき各通信者端末からの映像に対する符号量を決定する映像符号量決定ステップと、符号量に基づき各通信者端末からの映像を符号化する映像符号化ステップと、符号化された映像を各通信者端末へ配信する制御ステップとを備えるものである。
符号量制御の具体例としては、映像符号化ステップで、各通信者端末からの映像を符号化して量子化処理する際、当該通信者端末に対する符号量に応じた量子化ステップ幅を用いるようにしてもよい。
あるいは、映像符号化ステップで、各通信者端末からの映像を予測符号化処理する際、当該通信者端末に対する符号量に応じたピクチャグループ構成を用いるようにしてもよい。
あるいは、映像符号化ステップで、各通信者端末からの映像を予測符号化処理する際、当該通信者端末に対する符号量に応じたピクチャグループ構成を用いるようにしてもよい。
本発明によれば、発言者か否かに応じて当該通信者の映像符号量が調整されて配信されるため、発言者の映像符号量を傍聴者の映像符号量をより多くすることができ、各通信者端末に、発言者を示す映像として精細度の高い映像が配信されるとともに、傍聴者を示す映像として精細度の低い映像が配信されることになる。
したがって、発言者の切り替わりにおいて映像の精細度のみが切り替えられるため、画像の大きさや表示位置を変える必要がなく、従来のように画像の大きさが調整されて傍聴者の映像が小さくなる場合と比較して、傍聴者の表情も確認できるとともに、発言切り替わりに応じて画像サイズが変化せず切替時の画面表示がスムーズとなる。これにより、ネットワークリソースが限られた状況の中で、通信者が主観的に感じるコミュニティ全体の品質を向上させることが可能となる。
したがって、発言者の切り替わりにおいて映像の精細度のみが切り替えられるため、画像の大きさや表示位置を変える必要がなく、従来のように画像の大きさが調整されて傍聴者の映像が小さくなる場合と比較して、傍聴者の表情も確認できるとともに、発言切り替わりに応じて画像サイズが変化せず切替時の画面表示がスムーズとなる。これにより、ネットワークリソースが限られた状況の中で、通信者が主観的に感じるコミュニティ全体の品質を向上させることが可能となる。
次に、本発明の実施の形態について図面を参照して説明する。
[第1の実施の形態]
まず、図1を参照して、本発明の第1の実施の形態にかかる多地点接続装置について説明する。図1は、本発明の第1の実施の形態にかかる多地点接続装置の構成を示すブロック図である。
[第1の実施の形態]
まず、図1を参照して、本発明の第1の実施の形態にかかる多地点接続装置について説明する。図1は、本発明の第1の実施の形態にかかる多地点接続装置の構成を示すブロック図である。
多地点接続装置(MCU:Multipoint Communication Unit)10は、全体としてサーバなどの情報処理装置からなり、インターネットに代表される通信ネットワーク20を介して、多地点に配置されている複数の通信者端末30(30A〜30C)と接続し、これら通信者端末からの映像・音声を中継処理することにより多地点映像コミュニケーションサービスを提供する装置である。
通信者端末30は、パソコンなどの情報処理端末装置からなり、所定のアプリケーションプログラムを実行することにより、多地点接続装置10で提供される多地点映像コミュニケーションサービスを利用する装置である。
通信者端末30は、パソコンなどの情報処理端末装置からなり、所定のアプリケーションプログラムを実行することにより、多地点接続装置10で提供される多地点映像コミュニケーションサービスを利用する装置である。
本実施の形態では、この多地点接続装置10において、各通信者端末30から受信した各映像・音声を符号化して各通信者端末30へ配信する際、各映像・音声の送信元通信者端末30の通信者が発言者か否かに応じて、当該映像・音声の符号化の際の符号量を決定し、それぞれの符号量に応じて当該映像・音声を符号化して配信するようにしたものである。
[多地点接続装置の構成]
次に、図1を参照して、本実施の形態にかかる多地点接続装置10の構成について説明する。以下では、3つの通信者端末30A〜30Cが、多地点接続装置10で提供される多地点映像コミュニケーションサービスを利用する場合を例として説明する。
次に、図1を参照して、本実施の形態にかかる多地点接続装置10の構成について説明する。以下では、3つの通信者端末30A〜30Cが、多地点接続装置10で提供される多地点映像コミュニケーションサービスを利用する場合を例として説明する。
この多地点接続装置10には、通信インターフェース部(以下、通信I/F部という)11、制御部12、復号部13、発言者判別部14、映像符号量決定部15、映像符号化部16、および音声符号化部17が設けられている。
通信I/F部11は、通信ネットワーク20を介して各通信者端末30A〜30Cと各種データを送受信することにより、通信者端末30A〜30Cからの映像・音声を受信し、これらを合成した映像・音声を通信者端末30A〜30Cへ配信する回路部である。
制御部12は、CPUなどのマイクロプロセッサとその周辺回路を有し、記憶部(図示せず)から所定のプログラムを読み込んで実行することにより、上記ハードウェアとプログラムとを協働させて、所定の通信プロトコルに応じた各種通信処理を行う機能部である。
制御部12は、CPUなどのマイクロプロセッサとその周辺回路を有し、記憶部(図示せず)から所定のプログラムを読み込んで実行することにより、上記ハードウェアとプログラムとを協働させて、所定の通信プロトコルに応じた各種通信処理を行う機能部である。
復号部13は、通信I/F部11および制御部12を介して受信した各通信者端末30A〜30Cからの映像・音声を復号する回路部である。
発言者判別部14は、復号部13で得られた各通信者端末30からの音声のレベルに応じて発言者を判別する回路部である。
映像符号量決定部15は、発言者判別部14での判別結果に応じて、各通信者端末からの映像に対する符号量を決定する回路部である。
発言者判別部14は、復号部13で得られた各通信者端末30からの音声のレベルに応じて発言者を判別する回路部である。
映像符号量決定部15は、発言者判別部14での判別結果に応じて、各通信者端末からの映像に対する符号量を決定する回路部である。
映像符号化部16は、映像符号量決定部15で決定された符号量に基づき、復号部13で得られた各通信者端末30A〜30Cからの映像を符号化し、これらを合成して各通信者端末30A〜30Cへ配信する映像を生成する回路部である。
音声符号化部17は、復号部13で得られた各通信者端末30A〜30Cからの音声を符号化する回路部である。
音声符号化部17は、復号部13で得られた各通信者端末30A〜30Cからの音声を符号化する回路部である。
[映像符号量決定部]
映像符号量決定部15について詳細に説明する。映像の符号量とは、映像(画像)を構成する1画素(1ピクセル)あたりに用いるビット数(bits/pel:pel=pixel element)であり、映像(画像)の精細度を左右する。この符号量が大きい場合は、1画素を表現するために用いるデータ量が多くなり映像が精細になる。逆に、符号量が小さい場合は、1画素を表現するために用いるデータ量が少なくなり映像が粗くなる。
映像符号量決定部15について詳細に説明する。映像の符号量とは、映像(画像)を構成する1画素(1ピクセル)あたりに用いるビット数(bits/pel:pel=pixel element)であり、映像(画像)の精細度を左右する。この符号量が大きい場合は、1画素を表現するために用いるデータ量が多くなり映像が精細になる。逆に、符号量が小さい場合は、1画素を表現するために用いるデータ量が少なくなり映像が粗くなる。
デジタル映像の符号化方式として広く用いているMPEG(Moving Picture Expert Group)などの符号化方式では、入力された映像データをDCT(離散余弦変換:Discrete Cosine Transform)処理などの周波数変換処理を行った後に量子化し、これを2次元ハフマン符号に割り当てることにより元の映像データを圧縮処理しており、ITU−T H.26Xシリーズ、モーションJPEG(Motion-JPEG:Joint Photographic Experts Group)、あるいはJPEG2000などの符号化方式でも同様である。
量子化処理では、DCT処理で得られた各DCT係数を、デフォルトで設定されている量子化テーブルの対応する量子化係数でそれぞれ除算することにより量子化している。したがって、高周波数成分に対応する量子化係数を大きくしておくことにより、除算結果のうち高周波成分のDCT係数に対する除算結果が小さくなって、その値を表現するのに必要な情報量も少なくなり、結果として圧縮されたことになる。
量子化処理では、DCT処理で得られた各DCT係数を、デフォルトで設定されている量子化テーブルの対応する量子化係数でそれぞれ除算することにより量子化している。したがって、高周波数成分に対応する量子化係数を大きくしておくことにより、除算結果のうち高周波成分のDCT係数に対する除算結果が小さくなって、その値を表現するのに必要な情報量も少なくなり、結果として圧縮されたことになる。
上記量子化処理では、量子化テーブルの量子化係数を調整することにより、圧縮の度合いを制御する符号量制御方式が利用されている。例えば、デフォルトの量子化係数を少し大きくすれば、上記除算結果が小さくなるDCT係数が多くなり圧縮率が増加し、結果として符号量が小さくなる。逆にデフォルトの量子化係数を少し小さくすれば、上記除算結果が小さくなるDCT係数が少なくなり圧縮率が低下し、結果として符号量が大きくなる。
本実施の形態では、このような量子化係数の調整幅すなわち量子化ステップ幅を、映像符号量決定部15で決定された符号量に応じて制御することにより、発言者および傍聴者に対する映像符号量を空間的に制御している。
なお、MPEG以外の符号化方式でも、上記と同様に量子化処理において符号量を制御するパラメータが用意されており、これらパラメータを用いて符号量を制御すればよい。例えば、JPEG2000では、DCT処理に代えてウェーブレット変換処理が用いられているが、この場合も上記と同様の量子化ステップ幅を用いて符号量を制御できる。
なお、MPEG以外の符号化方式でも、上記と同様に量子化処理において符号量を制御するパラメータが用意されており、これらパラメータを用いて符号量を制御すればよい。例えば、JPEG2000では、DCT処理に代えてウェーブレット変換処理が用いられているが、この場合も上記と同様の量子化ステップ幅を用いて符号量を制御できる。
[第1の実施の形態の動作]
次に、図2を参照して、本実施の形態にかかる多地点接続装置10の動作について説明する。図2は、本実施の形態にかかる多地点接続装置10の中継処理を示すフローチャートである。
次に、図2を参照して、本実施の形態にかかる多地点接続装置10の動作について説明する。図2は、本実施の形態にかかる多地点接続装置10の中継処理を示すフローチャートである。
多地点接続装置10は、まず、制御部12により、通信ネットワーク20および通信I/F部11を介して、通信者端末30A〜30Cからの映像・音声を受信し(ステップ100)、復号部13へ出力する。
復号部13は、通信者毎に音声・映像を復号し(ステップ102)、それぞれ発言者判別部14と映像符号化部16に出力する。発言者判別部14は、音量の大きい通信者を発言者として判別し(ステップ103)、判別結果を映像符号量決定部15に出力するとともに、音声情報を音声符号化部17に出力する。
復号部13は、通信者毎に音声・映像を復号し(ステップ102)、それぞれ発言者判別部14と映像符号化部16に出力する。発言者判別部14は、音量の大きい通信者を発言者として判別し(ステップ103)、判別結果を映像符号量決定部15に出力するとともに、音声情報を音声符号化部17に出力する。
映像符号量決定部15は、発言者判別部14からの判別結果に基づき、各通信者のうち発言者の映像符号化に用いる量子化ステップ幅を、傍聴者の量子化ステップ幅より小さく設定する(ステップ104)。
映像符号化部16は、映像符号量決定部15によって設定された量子化ステップ幅に基づいて、各通信者からの映像に対する符号化を行い(ステップ105)、制御部12に映像情報を出力する。これにより、発話者に対する映像符号量が、傍聴者に対する映像符号量より多くなる。
映像符号化部16は、映像符号量決定部15によって設定された量子化ステップ幅に基づいて、各通信者からの映像に対する符号化を行い(ステップ105)、制御部12に映像情報を出力する。これにより、発話者に対する映像符号量が、傍聴者に対する映像符号量より多くなる。
音声符号化部17は、発言者判別部14からの音声情報を符号化して(ステップ106)、制御部12に出力する。
制御部12は、映像符号化部16から符号化された映像を受け取るとともに、音声符号化部17から符号化された音声を受け取り、これら映像・音声を、通信I/F部11および通信ネットワーク20を介して、各通信者端末30A〜30Cへ配信する(ステップ107)。
制御部12は、映像符号化部16から符号化された映像を受け取るとともに、音声符号化部17から符号化された音声を受け取り、これら映像・音声を、通信I/F部11および通信ネットワーク20を介して、各通信者端末30A〜30Cへ配信する(ステップ107)。
多地点接続装置10では、逐次、各通信者端末30A〜30Cから送信される映像・音声について、上記のような符号化処理により映像符号量を調整した後、各通信者端末30A〜30Cへ配信する。
したがって、多地点接続装置10での映像符号量の制御および各通信者端末30A〜30Cでの映像表示は、図3および図4のように制御される。図3は、本実施の形態にかかる多地点接続装置での映像符号量の制御を示すタイミングチャートである。図4は、各通信者端末での映像表示例である。
したがって、多地点接続装置10での映像符号量の制御および各通信者端末30A〜30Cでの映像表示は、図3および図4のように制御される。図3は、本実施の形態にかかる多地点接続装置での映像符号量の制御を示すタイミングチャートである。図4は、各通信者端末での映像表示例である。
通信者Aが発言している期間TAでは、通信者Aの符号量だけが「大」に制御されて通信者Aの映像が高精細で配信され、傍聴者である通信者B,Cの符号量は「小」に制御されて通信者B,Cの映像が低精細で配信される。
その後、時刻Tに発言者が通信者Aから通信者Bに切り替わった場合、それ以降の通信者Bが発言している期間TBでは、通信者Bの符号量だけが「大」に制御されて通信者Bの映像が高精細で配信され、傍聴者である通信者A,Cの符号量は「小」に制御されて通信者A,Cの映像が低精細で配信される。
その後、時刻Tに発言者が通信者Aから通信者Bに切り替わった場合、それ以降の通信者Bが発言している期間TBでは、通信者Bの符号量だけが「大」に制御されて通信者Bの映像が高精細で配信され、傍聴者である通信者A,Cの符号量は「小」に制御されて通信者A,Cの映像が低精細で配信される。
このように、本実施の形態では、発言者か否かに応じて当該通信者の映像符号量を調整して配信するようにしたので、発言者の映像符号量を傍聴者の映像符号量より多くすることができ、各通信者端末に、発言者を示す映像として精細度の高い映像が配信されるとともに、傍聴者を示す映像として精細度の低い映像が配信されることになる。
したがって、本実施の形態によれば、発言者が切り替わりにおいて映像の精細度のみが切り替えられて画像の大きさや表示位置については変化しないため、従来のように画像の大きさが調整されて傍聴者の映像が小さくなる場合と比較して、傍聴者の表情も確認できるとともに、発言切り替わりに応じて画像サイズが変化せず切替時の画面表示がスムーズとなる。
これにより、ネットワークリソースが限られた状況の中で、通信者が主観的に感じるコミュニティ全体の品質を向上させることが可能となる。
これにより、ネットワークリソースが限られた状況の中で、通信者が主観的に感じるコミュニティ全体の品質を向上させることが可能となる。
また、映像符号量の制御方法として、映像符号化に用いる量子化ステップ幅を調整するようにしたので、標準の符号化方式に用意されている処理を利用でき、新たな構成を追加することなく映像符号量を制御できる。
[第2の実施の形態]
次に、本発明の第2の実施の形態にかかる多地点接続装置について説明する。なお、本実施の形態にかかる多地点接続装置の構成は、前述した第1の実施の形態(図1参照)と同様であり、ここでの詳細な説明は省略する。また、本実施の形態にかかる多地点接続装置の動作は、前述した第1の実施の形態(図2参照)と同様であり、ここでの詳細な説明は省略する。
次に、本発明の第2の実施の形態にかかる多地点接続装置について説明する。なお、本実施の形態にかかる多地点接続装置の構成は、前述した第1の実施の形態(図1参照)と同様であり、ここでの詳細な説明は省略する。また、本実施の形態にかかる多地点接続装置の動作は、前述した第1の実施の形態(図2参照)と同様であり、ここでの詳細な説明は省略する。
前述した第1の実施の形態では、映像符号量決定部15において、発言者か否かに応じて符号量を決定する際、映像符号化部16での量子化処理に用いる量子化ステップ幅を変更することにより、各通信者の映像符号量を空間的に制御する場合を例として説明した。
本実施の形態では、映像符号化部16での予測符号化処理に用いるピクチャグループ構成を変更することにより、各通信者の映像符号量を時間的に制御する場合について説明する。
本実施の形態では、映像符号化部16での予測符号化処理に用いるピクチャグループ構成を変更することにより、各通信者の映像符号量を時間的に制御する場合について説明する。
前述したMPEG符号化方式では、予測符号化処理を採用しており、基準となるIピクチャ間を、PピクチャさらにはBピクチャにより補間するピクチャグループ構成を用いている。Iピクチャは、映像再生の基点となる画像でありフレーム内予測符号化により静止画モードにより符号化されている。Pピクチャは、時間的に前のIピクチャまたはPピクチャから動き補償フレーム間予測により符号化される。Bピクチャは、IピクチャとPピクチャとの間、またはPピクチャ間に複数配置され、時間的に前、後、または前後のピクチャを利用して動き補償フレーム間予測により符号化される。
このような予測符号化処理では、上記ピクチャの数(フレームレート)や配置順序などのピクチャグループ構成を変更することにより、結果として映像符号量を制御できる。
したがって、前述した図2のステップ104において、映像符号量決定部15により、発言者か否かに応じて異なるピクチャグループ構成を設定すればよい。
したがって、前述した図2のステップ104において、映像符号量決定部15により、発言者か否かに応じて異なるピクチャグループ構成を設定すればよい。
例えば、発言者の映像については、単位時間あたりのピクチャ数を増やしてフレームレートを高くしたピクチャグループ構成や、Bピクチャに代えてPピクチャを用いるなどの配置順序を変更したピクチャグループ構成を用いるよう、映像符号化部16へ設定すれば、結果として発言者の映像符号量を増やすことができる。
逆に、傍聴者の映像については、単位時間あたりのピクチャ数を減らしてフレームレートを低くしたピクチャグループ構成や、Pピクチャに代えてBピクチャを用いるなどの配置順序を変更したピクチャグループ構成を用いるよう、映像符号化部16へ設定すれば、結果として傍聴者の映像符号量を減らすことができる。
逆に、傍聴者の映像については、単位時間あたりのピクチャ数を減らしてフレームレートを低くしたピクチャグループ構成や、Pピクチャに代えてBピクチャを用いるなどの配置順序を変更したピクチャグループ構成を用いるよう、映像符号化部16へ設定すれば、結果として傍聴者の映像符号量を減らすことができる。
このように、映像符号量の制御方法として、映像符号化に用いるピクチャグループ構成を変更するようにしたので、標準の符号化方式に用意されている処理を利用でき、新たな構成を追加することなく映像符号量を制御できる。
なお、モーションJPEGなどの符号化方式では、上記Iピクチャに相当するピクチャしか用いていないものもあるが、このような符号化方式でも、上記と同様にして当該ピクチャについて単位時間あたりのピクチャ数(フレームレート)を増減することにより映像符号量を制御できる。
なお、モーションJPEGなどの符号化方式では、上記Iピクチャに相当するピクチャしか用いていないものもあるが、このような符号化方式でも、上記と同様にして当該ピクチャについて単位時間あたりのピクチャ数(フレームレート)を増減することにより映像符号量を制御できる。
なお、以上の各実施の形態では、多地点接続装置10により、3つの通信者端末30A〜30Cに対して多地点映像コミュニケーションサービスを提供する場合を例として説明したが、通信者端末30の数については、これに限定されるものではない。少なくとも通信者端末30が2つ以上であれば、いずれの場合にも前述と同様にして各実施の形態を適用でき、それぞれ同様の作用効果が得られる。
また、各実施の形態は、それぞれ単独で実施してもよく組み合わせて実施してもよい。
また、各通信者端末の映像については、多地点接続装置10の映像符号化部16あるいは制御部12で合成した後、各通信者端末30へ配信してもよく、あるいはそれぞれの映像を個別に配信して、各通信者端末30で合成して画面表示してもよい。
また、各通信者端末の映像については、多地点接続装置10の映像符号化部16あるいは制御部12で合成した後、各通信者端末30へ配信してもよく、あるいはそれぞれの映像を個別に配信して、各通信者端末30で合成して画面表示してもよい。
10…多地点接続装置、11…通信I/F部、12…制御部、13…復号部、14…発言者判別部、15…映像符号量決定部、16…映像符号化部、17…音声符号化部、20…通信ネットワーク、30,30A〜30C…通信者端末。
Claims (6)
- 多地点に配置されている複数の通信者端末と通信ネットワークを介して接続し、これら通信者端末からの映像・音声を中継処理することにより前記各通信者端末に対して多地点映像コミュニケーションサービスを提供する多地点接続装置であって、
前記各通信者端末からの音声に基づき発言者を判別する発言者判別部と、
前記判別の結果に基づき前記各通信者端末からの映像に対する符号量を決定する映像符号量決定部と、
前記符号量に基づき前記各通信者端末からの映像を符号化する映像符号化部と、
前記符号化された映像を前記各通信者端末へ配信する制御部と
を備えることを特徴とする多地点接続装置。 - 請求項1に記載の多地点接続装置において、
前記映像符号化部は、前記各通信者端末からの映像を符号化して量子化処理する際、当該通信者端末に対する符号量に応じた量子化ステップ幅を用いることを特徴とする多地点接続装置。 - 請求項1に記載の多地点接続装置において、
前記映像符号化部は、前記各通信者端末からの映像を予測符号化処理する際、当該通信者端末に対する符号量に応じたピクチャグループ構成を用いることを特徴とする多地点接続装置。 - 多地点に配置されている複数の通信者端末と通信ネットワークを介して接続する多地点接続装置で、これら通信者端末からの映像・音声を中継処理することにより前記各通信者端末に対して多地点映像コミュニケーションサービスを提供する多地点接続方法であって、
前記各通信者端末からの音声に基づき発言者を判別する発言者判別ステップと、
前記判別の結果に基づき前記各通信者端末からの映像に対する符号量を決定する映像符号量決定ステップと、
前記符号量に基づき前記各通信者端末からの映像を符号化する映像符号化ステップと、
前記符号化された映像を前記各通信者端末へ配信する制御ステップと
を備えることを特徴とする多地点接続方法。 - 請求項4に記載の多地点接続方法において、
前記映像符号化ステップは、前記各通信者端末からの映像を符号化して量子化処理する際、当該通信者端末に対する符号量に応じた量子化ステップ幅を用いることを特徴とする多地点接続方法。 - 請求項4に記載の多地点接続方法において、
前記映像符号化ステップは、前記各通信者端末からの映像を予測符号化処理する際、当該通信者端末に対する符号量に応じたピクチャグループ構成を用いることを特徴とする多地点接続方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004158872A JP2005341347A (ja) | 2004-05-28 | 2004-05-28 | 多地点接続装置および方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004158872A JP2005341347A (ja) | 2004-05-28 | 2004-05-28 | 多地点接続装置および方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2005341347A true JP2005341347A (ja) | 2005-12-08 |
Family
ID=35494379
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004158872A Pending JP2005341347A (ja) | 2004-05-28 | 2004-05-28 | 多地点接続装置および方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2005341347A (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010024102A1 (ja) * | 2008-08-28 | 2010-03-04 | 住友電気工業株式会社 | 動画像データの配信方法 |
JP2011077912A (ja) * | 2009-09-30 | 2011-04-14 | Brother Industries Ltd | 通信制御装置、通信制御方法、及び通信制御プログラム |
JP2014045243A (ja) * | 2012-08-24 | 2014-03-13 | Sumitomo Electric Ind Ltd | 映像データ配信装置およびそれを含む双方向対話システム |
JP2016189532A (ja) * | 2015-03-30 | 2016-11-04 | 日本電気株式会社 | テレビ会議システム、テレビ会議制御装置、及びテレビ会議制御方法 |
JP6179834B1 (ja) * | 2016-09-27 | 2017-08-16 | パナソニックIpマネジメント株式会社 | テレビ会議装置 |
-
2004
- 2004-05-28 JP JP2004158872A patent/JP2005341347A/ja active Pending
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010024102A1 (ja) * | 2008-08-28 | 2010-03-04 | 住友電気工業株式会社 | 動画像データの配信方法 |
CN102138336A (zh) * | 2008-08-28 | 2011-07-27 | 住友电气工业株式会社 | 动态图像数据的分配方法 |
US20110239264A1 (en) * | 2008-08-28 | 2011-09-29 | Yoshimitsu Goto | Moving-picture image data-distribution method |
US8839330B2 (en) * | 2008-08-28 | 2014-09-16 | Sumitomo Electric Industries, Ltd. | Moving-picture image data-distribution method |
JP5664241B2 (ja) * | 2008-08-28 | 2015-02-04 | 住友電気工業株式会社 | 動画像データの配信方法 |
KR101539812B1 (ko) * | 2008-08-28 | 2015-07-27 | 스미토모덴키고교가부시키가이샤 | 동화상 데이터의 배신 방법 |
JP2011077912A (ja) * | 2009-09-30 | 2011-04-14 | Brother Industries Ltd | 通信制御装置、通信制御方法、及び通信制御プログラム |
JP2014045243A (ja) * | 2012-08-24 | 2014-03-13 | Sumitomo Electric Ind Ltd | 映像データ配信装置およびそれを含む双方向対話システム |
JP2016189532A (ja) * | 2015-03-30 | 2016-11-04 | 日本電気株式会社 | テレビ会議システム、テレビ会議制御装置、及びテレビ会議制御方法 |
JP6179834B1 (ja) * | 2016-09-27 | 2017-08-16 | パナソニックIpマネジメント株式会社 | テレビ会議装置 |
JP2018056719A (ja) * | 2016-09-27 | 2018-04-05 | パナソニックIpマネジメント株式会社 | テレビ会議装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4160278B2 (ja) | 媒体ストリームのスケーラブル符号化方法、スケーラブルエンコーダおよびマルチメディア端末 | |
RU2322770C2 (ru) | Способ и устройство для указания параметров квантователя в системе видеокодирования | |
US8374236B2 (en) | Method and apparatus for improving the average image refresh rate in a compressed video bitstream | |
JP3530293B2 (ja) | マルチメディア通信システム用ビデオ伝送レート整合 | |
US9338453B2 (en) | Method and device for encoding/decoding video signals using base layer | |
US20070009039A1 (en) | Video encoding and decoding methods and apparatuses | |
US20060093036A1 (en) | Method for encoding and decoding video signals | |
US20030023982A1 (en) | Scalable video encoding/storage/distribution/decoding for symmetrical multiple video processors | |
US20060062299A1 (en) | Method and device for encoding/decoding video signals using temporal and spatial correlations between macroblocks | |
US20080212682A1 (en) | Reduced resolution video transcoding with greatly reduced complexity | |
US6188730B1 (en) | Highly programmable chrominance filter for 4:2:2 to 4:2:0 conversion during MPEG2 video encoding | |
US20010019354A1 (en) | Method and an apparatus for video mixing of bit streams | |
US6704357B1 (en) | Method and apparatus for reconstruction of low frame rate video conferencing data | |
JP3651706B2 (ja) | 動画像符号化装置 | |
US20080008241A1 (en) | Method and apparatus for encoding/decoding a first frame sequence layer based on a second frame sequence layer | |
US7809061B1 (en) | Method and system for hierarchical data reuse to improve efficiency in the encoding of unique multiple video streams | |
US20060078053A1 (en) | Method for encoding and decoding video signals | |
JP4592562B2 (ja) | 画像復号装置 | |
JP4373088B2 (ja) | マルチメディア通信端末 | |
KR100828342B1 (ko) | 화질 열화를 줄인 데이터 레이트 감소 장치 | |
JP2005341347A (ja) | 多地点接続装置および方法 | |
US20070242747A1 (en) | Method and apparatus for encoding/decoding a first frame sequence layer based on a second frame sequence layer | |
US20070223573A1 (en) | Method and apparatus for encoding/decoding a first frame sequence layer based on a second frame sequence layer | |
US20070280354A1 (en) | Method and apparatus for encoding/decoding a first frame sequence layer based on a second frame sequence layer | |
KR20090125556A (ko) | 영상 코덱 방법, 영상 코덱 장치 및 그 영상 서비스 시스템 |