JP2010093479A - Conference system and conference terminal device - Google Patents
Conference system and conference terminal device Download PDFInfo
- Publication number
- JP2010093479A JP2010093479A JP2008260538A JP2008260538A JP2010093479A JP 2010093479 A JP2010093479 A JP 2010093479A JP 2008260538 A JP2008260538 A JP 2008260538A JP 2008260538 A JP2008260538 A JP 2008260538A JP 2010093479 A JP2010093479 A JP 2010093479A
- Authority
- JP
- Japan
- Prior art keywords
- conference
- terminal
- communication terminal
- speaker
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Telephonic Communication Services (AREA)
Abstract
Description
本発明は、複数の発言者が発言する会議を1以上の傍聴者が傍聴することが可能な会議システムおよび会議端末装置に関する。 The present invention relates to a conference system and a conference terminal device in which one or more listeners can observe a conference where a plurality of speakers speak.
多地点に配置されている端末がネットワークに通信可能に接続され、それぞれの端末から送信される複数の発言者からの会議音声をサーバにて合成して、多地点の端末へ配信する会議システムが使用されるようになってきた。 A conference system in which terminals arranged at multipoints are communicably connected to a network, and conference audio from a plurality of speakers transmitted from each terminal is synthesized by a server and distributed to the multipoint terminals. Has come to be used.
例えば、特許文献1に記載の多地点会議システムでは、発言者グループに属する端末からの音声データをミキシングした音声データを生成する電話会議サーバと、前記電話会議サーバによりミキシングされた音声データを発言者グループと聴取者グループに属する端末に配信する音声配信サーバとを有したものである。
しかし、特許文献1に記載の多地点会議システムでは、電話会議サーバにより合成された発言者グループの端末からの会議音声を、音声配信サーバが発言者グループに属する端末全部だけでなく、聴取者グループに属する端末全部までも会議音声を配信しているので、高速に音声処理したり、ネットワークに対して高速に配信したりするハードウェアが必要である。
However, in the multipoint conference system described in
そこで本発明は、傍聴者が操作する通信端末への配信に要する負荷を軽減することで、簡易なハードウェアで構成することが可能な会議システムおよび会議端末装置を提供することを目的とする。 Accordingly, an object of the present invention is to provide a conference system and a conference terminal device that can be configured with simple hardware by reducing the load required for distribution to a communication terminal operated by a listener.
本発明は、複数の発言者のうち一の発言者が操作する第1の通信端末と、他の発言者が操作する少なくとも1台の第2の通信端末と、前記第1の通信端末からの会議音声を受信して同報配信する配信サーバと、傍聴者が操作して、前記配信サーバから同報配信される会議音声を受信して会議を傍聴する1以上の第3の通信端末とが通信可能にネットワークに接続され、前記第1の通信端末は、前記第2の通信端末から送信された会議音声と、自らの会議音声とを合成する合成手段と、前記合成手段で合成された会議音声を配信サーバおよび前記第2の通信端末に前記ネットワークを介して送信する送信手段とを備え、前記配信サーバは、同報配信する送信先の第3の通信端末を記憶する記憶手段と、前記第1の通信端末から送信される会議音声を、前記記憶手段に記憶された送信先の第3の通信端末に対して前記ネットワークを介して送信する配信手段とを備えたことを特徴とする。 The present invention relates to a first communication terminal operated by one of a plurality of speakers, at least one second communication terminal operated by another speaker, and from the first communication terminal. A distribution server that receives conference audio and broadcasts it, and one or more third communication terminals that are operated by an observer and receive conference audio broadcast from the distribution server and listen to the conference The first communication terminal is communicably connected to the network, and the first communication terminal synthesizes the conference voice transmitted from the second communication terminal and its own conference voice, and the conference synthesized by the synthesis means Transmitting means for transmitting voice to the distribution server and the second communication terminal via the network, the distribution server storing a third communication terminal as a transmission destination for broadcast distribution; Conference sound transmitted from the first communication terminal And it is characterized in that a distribution means for transmitting via the network to the third communication terminal stored destination in the storage means.
本発明は、第1の通信端末が会議音声の合成と共に、第2の通信端末への送信までを行うことで、配信サーバに対して、傍聴者が操作する第3の通信端末への配信に要する負荷を軽減することで、簡易なハードウェアで構成することが可能である。 In the present invention, the first communication terminal performs the conference voice synthesis and the transmission to the second communication terminal, thereby delivering the distribution server to the third communication terminal operated by the listener. By reducing the required load, it is possible to configure with simple hardware.
本願の第1の発明は、複数の発言者のうち一の発言者が操作する第1の通信端末と、他の発言者が操作する少なくとも1台の第2の通信端末と、第1の通信端末からの会議音声を受信して同報配信する配信サーバと、傍聴者が操作して、配信サーバから同報配信される会議音声を受信して会議を傍聴する1以上の第3の通信端末とが通信可能にネットワークに接続され、第1の通信端末は、第2の通信端末から送信された会議音声と、自らの会議音声とを合成する合成手段と、合成手段で合成された会議音声を配信サーバおよび第2の通信端末にネットワークを介して送信する送信手段とを備え、配信サーバは、同報配信する送信先の第3の通信端末を記憶する記憶手段と、第1の通信端末から送信される会議音声を、記憶手段に記憶された送信先の第3の通信端末に対してネットワークを介して送信する配信手段とを備えたことを特徴としたものである。 The first invention of the present application is directed to a first communication terminal operated by one of a plurality of speakers, at least one second communication terminal operated by another speaker, and a first communication. A distribution server that receives conference audio from a terminal and broadcasts it, and one or more third communication terminals that are operated by a listener and receive the conference audio broadcast from the distribution server and listen to the conference Are communicably connected to the network, and the first communication terminal synthesizes the conference voice transmitted from the second communication terminal and its own conference voice, and the conference voice synthesized by the synthesizing means. Transmitting means for transmitting to the distribution server and the second communication terminal via the network, the distribution server storing a third communication terminal as a transmission destination for broadcast distribution, and the first communication terminal The meeting audio sent from Is obtained is characterized in that a distribution means for transmitting over the network to signal the destination of the third communication terminal.
第1の発明によれば、複数の発言者のうちの一の発言者が操作する第1の通信端末の合成手段が第2の通信端末から送信された会議音声と、自らの会議音声とを合成し、送信手段が合成された会議音声を配信サーバおよび第2の通信端末に送信するので、配信サーバは、記憶手段に記憶された送信先の第3の通信端末へ第1の通信端末から送信される会議音声を、配信手段より送信しているので、配信サーバは負荷を配信に要する負荷が軽い。従って、第1の通信端末が、第2の通信端末から送信された会議音声と、自らの会議音声とを合成し、合成された会議音声を第2の通信端末に送信する機能を備えていれば、送信先に配信サーバを加えるだけでよく、配信サーバは、第1の通信端末や、1台以上の第2の通信端末への配信は不要であり、傍聴者が操作する第3の通信端末へ配信するだけよいので、高い性能は必要ない。よって、本発明は、傍聴者が操作する第3の通信端末への配信に要する負荷を軽減することで、簡易なハードウェアで構成することが可能である。 According to the first aspect of the present invention, the synthesizing means of the first communication terminal operated by one of the plurality of speakers operates the conference voice transmitted from the second communication terminal and the own conference voice. Since the synthesized voice is transmitted to the distribution server and the second communication terminal by the transmission means, the distribution server sends the third communication terminal stored in the storage means to the third communication terminal from the first communication terminal. Since the conference voice to be transmitted is transmitted from the distribution means, the distribution server is light in load required for distribution. Therefore, the first communication terminal has a function of synthesizing the conference voice transmitted from the second communication terminal and its own conference voice and transmitting the synthesized conference voice to the second communication terminal. For example, it is only necessary to add a distribution server to the transmission destination, and the distribution server does not require distribution to the first communication terminal or one or more second communication terminals, and the third communication operated by the listener. Since it only needs to be delivered to the terminal, high performance is not necessary. Therefore, the present invention can be configured with simple hardware by reducing the load required for distribution to the third communication terminal operated by the listener.
本願の第2の発明は、第1の発明において、第1の通信端末における合成手段は、会議音声に加えて映像を合成し、配信サーバにおける配信手段は、合成手段で合成された会議音声および映像を会議音声/映像として配信することを特徴としたものである。第2の発明により、合成手段が会議音声に加えて映像を合成するので、第1の通信端末は音声のみならず映像も送信することができる。 According to a second invention of the present application, in the first invention, the synthesizing unit in the first communication terminal synthesizes the video in addition to the conference audio, and the distribution unit in the distribution server includes the conference audio synthesized by the synthesizing unit and The video is distributed as conference audio / video. According to the second invention, since the synthesizing unit synthesizes the video in addition to the conference voice, the first communication terminal can transmit not only the voice but also the video.
本願の第3の発明は、第2の発明において、第3の通信端末は、ストリーミング再生手段を有し、配信サーバから配信される会議音声/映像をストリーミング再生手段により再生することを特徴としたものである。第3の発明により、第3の通信端末を操作する傍聴者は音声のみならず会議における映像も傍聴することができる。 A third invention of the present application is characterized in that, in the second invention, the third communication terminal has a streaming reproduction means, and the meeting audio / video distributed from the distribution server is reproduced by the streaming reproduction means. Is. According to the third invention, the listener who operates the third communication terminal can observe not only the voice but also the video in the conference.
本願の第4の発明は、第1から第3のいずれかの発明において、配信サーバは、記憶手段に記憶された第3の通信端末に対して会議の開始を通知する通知手段を有することを特徴としたものである。第3の発明により、第3の通信端末を操作する傍聴者は通知手段による通知で会議の開始を知ることができる。 According to a fourth invention of the present application, in any one of the first to third inventions, the distribution server has a notification means for notifying the start of the conference to the third communication terminal stored in the storage means. It is a feature. According to the third invention, the listener who operates the third communication terminal can know the start of the conference by the notification by the notification means.
本願の第5の発明は、第1から第4のいずれかの発明において、第1の通信端末は、会議に新たに加わろうとする第4の通信端末からの会議参加要求を受信すると、第2の通信端末に会議参加要求するよう指示し、第2の通信端末は、第4の通信端末からの会議参加要求を受信すると通話を許可し、第4の通信端末からの会議音声と自らの音声とを合成して第1の通信端末へ送信することを特徴としたものである。第5の発明により、第1の通信端末は、第4の通信端末が新たに会議に加わっても、第2の通信端末から送信されるからの会議音声と自らの音声とを合成すればよいので、会議音声の合成数が増加しない。 According to a fifth invention of the present application, in any one of the first to fourth inventions, when the first communication terminal receives a conference participation request from a fourth communication terminal to newly join the conference, The second communication terminal accepts the conference participation request from the fourth communication terminal, and the second communication terminal permits the call, and receives the conference voice from the fourth communication terminal and its own voice. Are combined and transmitted to the first communication terminal. According to the fifth invention, even if the fourth communication terminal newly joins the conference, the first communication terminal may synthesize the conference voice transmitted from the second communication terminal and its own voice. Therefore, the number of conference voices does not increase.
本願の第6の発明は、第5の発明において、第1の通信端末は、第2の通信端末が会議から外れたときに、当該第2の通信端末が会議通話許可した第4の通信端末が存在する場合には、この第4の通信端末を第2の通信端末として会議を行うことを特徴としたものである。第6の発明により、第1の通信端末は第4の通信端末からの会議音声と他の会議音声とを合成して第2の通信端末の代わりに第4の通信端末へ送信するので、第2の通信端末が会議を外れても、支障なく会議を継続することができる。 According to a sixth aspect of the present invention, in the fifth aspect, the first communication terminal is a fourth communication terminal that the second communication terminal permits a conference call when the second communication terminal is removed from the conference. Is present, the fourth communication terminal is used as a second communication terminal for a conference. According to the sixth invention, the first communication terminal synthesizes the conference voice from the fourth communication terminal and the other conference voice and transmits them to the fourth communication terminal instead of the second communication terminal. Even if two communication terminals leave the conference, the conference can be continued without any problem.
本願の第7の発明は、第5の発明において、第4の端末は、第2の通信端末に障害を検知したときに、第1の通信端末に障害発生を通知し、第1の通信端末は、この第4の通信端末を第2の通信端末として会議を行うことを特徴としたものである。第7の発明により、第1の通信端末は第4の通信端末からの会議音声と他の会議音声とを合成して第2の通信端末の代わりに第4の通信端末へ送信するので、第2の通信端末が障害で会議を継続できなくなって会議を外れても、支障なく会議を継続することができる。
According to a seventh aspect of the present invention, in the fifth aspect, when the fourth terminal detects a failure in the second communication terminal, the fourth communication terminal notifies the first communication terminal of the occurrence of the failure, and the first communication terminal Is characterized in that the fourth communication terminal is used as a second communication terminal for a conference. According to the seventh invention, the first communication terminal synthesizes the conference voice from the fourth communication terminal and another conference voice and transmits the synthesized voice to the fourth communication terminal instead of the second communication terminal. Even if the
本願の第8の発明は、第5から第7のいずれかの発明において、第1の通信端末、第2の通信端末および第4の通信端末は、イントラネットで接続され、第1の通信端末、配信サーバおよび第3の通信端末は、インターネットで接続されていることを特徴としたものである。第8の発明により、第1の通信端末、第2の通信端末および第4の通信端末は同じ企業内や施設内に配置することができ、配信サーバおよび第3の通信端末が、遠隔地にあってもインターネットを介して通信することができる。 According to an eighth invention of the present application, in any one of the fifth to seventh inventions, the first communication terminal, the second communication terminal, and the fourth communication terminal are connected via an intranet, and the first communication terminal, The distribution server and the third communication terminal are connected by the Internet. According to the eighth invention, the first communication terminal, the second communication terminal, and the fourth communication terminal can be arranged in the same company or facility, and the distribution server and the third communication terminal are located in a remote place. Even if it exists, it can communicate via the Internet.
本願の第9の発明は、第1の通信端末、第2の通信端末、第4の通信端末および配信サーバは、イントラネットで接続され、配信サーバと第3の通信端末は、インターネットで接続されていることを特徴としたものである。第9の発明により、第1の通信端末、第2の通信端末、第4の通信端末および配信サーバは同じ企業内や施設内に配置することができ、第3の通信端末は遠隔地にあってもインターネットを介して通信することができる。 In the ninth invention of the present application, the first communication terminal, the second communication terminal, the fourth communication terminal, and the distribution server are connected via an intranet, and the distribution server and the third communication terminal are connected via the Internet. It is characterized by being. According to the ninth invention, the first communication terminal, the second communication terminal, the fourth communication terminal and the distribution server can be arranged in the same company or facility, and the third communication terminal is located in a remote place. Can communicate via the Internet.
本願の第10の発明は、複数の発言者のうち一の発言者が操作する会議端末装置において、他の発言者が操作する少なくとも1台の発言者端末から送信された会議音声と、自らの会議音声とを合成する合成手段と、合成手段で合成された会議音声を、発言者端末へ送信すると共に、会議を傍聴する1以上の傍聴者端末へ同報配信する配信サーバへネットワークを介して送信する送信手段とを備えていることを特徴としたものである。第10の発明により、第1の発明と同様に、本発明の会議端末装置が、発言者端末から送信された会議音声と、自らの会議音声とを合成し、合成された会議音声を発言者端末に送信する機能を備えていれば、送信先に配信サーバを加えるだけでよく、配信サーバは、本発明の会議端末装置や、1台以上の発言者端末への配信は不要であり、傍聴者が操作する傍聴者端末へ配信するだけよいので、高い性能は必要ない。よって、傍聴者が操作する傍聴者端末への配信に要する負荷を軽減することで、簡易なハードウェアで構成することが可能である。 According to a tenth aspect of the present application, in a conference terminal device operated by one of a plurality of speakers, a conference voice transmitted from at least one speaker terminal operated by another speaker, A synthesizing unit that synthesizes the conference audio, and the conference audio synthesized by the synthesizing unit is transmitted to the speaker terminal and broadcasted to one or more listener terminals that listen to the conference via the network. And a transmission means for transmitting. According to the tenth invention, as in the first invention, the conference terminal device of the present invention synthesizes the conference voice transmitted from the speaker terminal and its own conference voice, and the synthesized conference voice is given to the speaker. If it has a function to transmit to a terminal, it is only necessary to add a distribution server to the transmission destination. The distribution server does not require distribution to the conference terminal device of the present invention or one or more speaker terminals. High performance is not necessary because it only needs to be distributed to the listener terminal operated by the user. Therefore, it is possible to configure with simple hardware by reducing the load required for distribution to the observer terminal operated by the observer.
(実施の形態)
本発明の実施の形態に係る会議システムを図面に基づいて説明する。図1は、本発明の実施の形態に係る会議システム全体の構成を示す図である。
(Embodiment)
A conference system according to an embodiment of the present invention will be described with reference to the drawings. FIG. 1 is a diagram showing a configuration of the entire conference system according to the embodiment of the present invention.
図1に示すように会議システム1は、会議の出席者の音声や映像を混合(ミキシング)して会議音声/映像として配信するものである。会議システム1は、主催者となる出席者が操作する主催者端末M(第1の通信端末)と、会議で発言をする出席者が操作する発言者端末A(A1,A2:第2の通信端末,A3:第4の通信端末)と、配信サーバSVと、会議を傍聴する傍聴者が操作する傍聴者端末B(B1〜Bn:第3の通信端末)とが、IP(Internet Protocol)ネットワークNWを介して通信可能に接続されている。
As shown in FIG. 1, the
本実施の形態では、会議端末装置として機能する主催者端末Mと、発言者端末A1〜A4は、企業内のイントラネットN1に接続され、配信サーバSVおよび傍聴者端末Bは、これらとインターネットN2を介して接続されている。以下、主催者端末M、発言者端末Aおよび傍聴者端末Bを、単に「端末」と称することがある。 In the present embodiment, the organizer terminal M functioning as a conference terminal device and the speaker terminals A1 to A4 are connected to an intranet N1 in the company, and the distribution server SV and the listener terminal B use the Internet N2 with them. Connected through. Hereinafter, the organizer terminal M, the speaker terminal A, and the listener terminal B may be simply referred to as “terminals”.
なお、図1においては、各端末や配信サーバSVとIPネットワークNWとを接続するためのハブや、ルータなどは図示していない。また、配信サーバSVがマルチキャストでIPパケットを送信する経路に配置されるマルチキャスト対応ルータも省略している。
(主催者端末Mの構成)
次に、主催者端末Mについて図2に基づいて説明する。図2は、図1に示す会議システムの会議端末装置として機能する主催者端末の構成を示すブロック図である。
In FIG. 1, a hub, a router, and the like for connecting each terminal, distribution server SV, and IP network NW are not shown. Also, a multicast-compatible router that is arranged on a route through which the distribution server SV transmits IP packets by multicast is omitted.
(Configuration of organizer terminal M)
Next, the organizer terminal M will be described with reference to FIG. FIG. 2 is a block diagram illustrating a configuration of the organizer terminal that functions as a conference terminal device of the conference system illustrated in FIG. 1.
主催者端末Mは、自らの会議音声および会議映像と、主催者端末Mに接続されたそれぞれの発言者端末Aから送られてくる会議音声および会議映像を加えた音声および映像(以下、会議音声/映像とする)を合成して、それぞれの発言者端末Aへ返送する。また主催者端末Mは前記合成された会議音声/映像を、傍聴者端末Bを操作する傍聴者に会議を傍聴させるために配信サーバSVへ送信する。主催者端末Mは、入出力部2と、AD/DA部3と、演算処理部4と、符号化部5と、復号化部6と、チャネルデータ処理部7と、パケット制御部8と、呼制御部9と、通信部10と、情報格納部11と、通信制御部12とを備えている。
The organizer terminal M has its own conference audio and video, and audio and video (hereinafter referred to as conference audio) including the conference audio and conference video sent from each speaker terminal A connected to the organizer terminal M. / Video), and returns to each speaker terminal A. In addition, the organizer terminal M transmits the synthesized conference audio / video to the distribution server SV in order to allow the observer operating the observer terminal B to observe the conference. The organizer terminal M includes an input /
入出力部2は、出席者の音声(周囲の音も含む)や映像を取得して音声信号および映像信号としてAD/DA部3へ出力したり、AD/DA部3からの音声信号および映像信号を再生したりする。入出力部2は、音声についてマイクおよびスピーカとすることができ、映像についてカメラおよびディスプレイとすることができる。
The input /
AD/DA部3は、入出力部2からのアナログ信号と、演算処理部4からのデジタル信号を相互に変換して、アナログ信号は入出力部2へ出力され、デジタル信号は非圧縮の線形データの音声・映像として演算処理部4へ出力される。
The AD / DA unit 3 mutually converts the analog signal from the input /
演算処理部4は、復号化部6から出力された他の端末からの音声・映像と、入出力部2からの音声・映像とをそれぞれ合成して符号化部5へ出力する合成手段として機能する。また、演算処理部4は、他の端末からの音声・映像を受信していないときは、入出力部2からの音声・映像を合成データとして符号化部5へ出力する。演算処理部4が音声を合成するときは、それぞれの音声に対して音声レベルを調整して合成される。映像を合成するときは、通信制御部12からの制御により合成する数に応じて表示サイズ全体を分割して全体に収まるように合成される。例えば、主催者端末Mと発言者端末A1との映像を合成する場合には、表示サイズの1/2ずつの大きさとしたものを左右に配置して一つの映像とする。
The
符号化部5は、入力された非圧縮の線形データに対して符号化することで、全体のデータ容量を圧縮した会議音声/映像を生成して、チャネルデータ処理部7へ出力する。符号化の方式は、音声データであれば、例えば、G.711とすることができる。また、映像データであれば、H.261,H.263,H.264とすることができるが、他の端末と通信可能なコーデックであれば採用することが可能である。
The
復号化部6は、チャネルデータ処理部7から出力された複数の出席者からの会議音声/映像を復号化して音声・映像として演算処理部4へ出力する。
The
チャネルデータ処理部7は、演算処理部4により合成され、符号化部5により符号化された会議音声/映像(圧縮データ)を、通信制御部12から指定された送信先の通話チャネルごとに対応させてパケット制御部8へ出力する。また、チャネルデータ処理部7は、パケット制御部8からの会議音声/映像を、送信元の通話チャネルごとに対応させて復号化部6へ出力する。
The channel data processing unit 7 supports the conference audio / video (compressed data) synthesized by the
パケット制御部8は、チャネルデータ処理部7からの符号化された会議音声/映像をフレーム単位に分割し、フレームとした音声データにヘッダ(コーデックタイプおよび通し番号(シーケンス番号)を含む)を付加してRTP(Real−time Transport Protocol)パケットを生成して通信部10を介してIPネットワークNWへ送信する。また、パケット制御部8は、通信部10を介して受信したRTPパケットから会議音声/映像を抽出してチャネルデータ処理部7へ出力する。
The
また、パケット制御部8は、呼制御部9からの呼制御メッセージをIPパケットとして送信したり、通信部10からIPパケットから呼制御メッセージを抽出して呼制御部9へ出力したりする。
Further, the
呼制御部9は、SIP(Session Initiation Protocol)に基づいて通信相手への発呼、通信相手からの着呼、または通信相手との通話などの動作を制御する。
The
通信部10は、IPネットワークNWとのIPパケットの送受信を行うIEEE802.3等のLAN (Local Area Network)物理層インタフェースである。
The
情報格納部11は、会議音声/映像の送信先である配信サーバSVのIPアドレスや、会議に参加している発言者端末AのIPアドレスなどの管理情報や、その他の様々な情報が記憶されるメモリである。
The
通信制御部12は、主催者端末M全体の統括制御をする他、発言者端末Aからの会議への参加要求に対する許可制御や、演算処理部4に対して合成の制御を行う。また、通信制御部12は、会議に参加している発言者端末Aを管理し、合成された会議音声/映像を参加している発言者端末Aへ向けて送信するよう呼制御部9を介してパケット制御部8へ指示する。本実施の形態の主催者端末Mは、通信制御部12と呼制御部9とパケット制御部8と通信部10とで送信部が構成されている。
The
操作部13は、電話番号を入力する数字キーや、各種の機能キーと、表示画面とを備えている。この操作部13を操作して設定や会議音声/映像の開始などを指示する。通信制御部12は、押下された操作部13の機能キーに対応して各種の機能を実現している。
(発言者端末Aの構成の説明)
次に、発言者端末Aの構成を図3に基づいて説明する。図3は、図1に示す会議システムの出席者端末の構成を示すブロック図である。
The
(Description of the configuration of the speaker terminal A)
Next, the configuration of the speaker terminal A will be described with reference to FIG. FIG. 3 is a block diagram showing the configuration of the attendee terminal of the conference system shown in FIG.
なお、図3に示す発言者端末Aの入出力部2、AD/DA部3、演算処理部4、符号化部5、復号化部6、チャネルデータ処理部7、パケット制御部8、呼制御部9、通信部10および操作部13は、図2に示す主催者端末Mの各構成と同じ機能であるため、同符号を付して説明を省略する。
The input /
発言者端末Aは、他の発言者端末が接続されていない場合は自らの音声および映像を主催者端末Mへ送信する。また発言者端末Aは、他の発言者端末が接続している場合は、自らの音声および映像に、連結された他の発言者端末からの音声および映像を合成して主催者端末Mへ送信する。この発言者端末Aの情報格納部11xには、自らの会議音声および映像または合成した会議音声/映像を送信する主催者端末MのIPアドレスが格納されている。
The speaker terminal A transmits its own audio and video to the organizer terminal M when no other speaker terminal is connected. In addition, when another speaker terminal is connected, the speaker terminal A synthesizes the voice and video from the other speaker terminals connected to its own voice and video and transmits them to the organizer terminal M. To do. The
通信制御部12xは、発言者端末A全体を統括制御する他、主催者端末Mへの会議の参加要求の制御や、他の発言者端末Aからの会議参加要求に対しての許可制御などを行っている。
(配信サーバSVの構成)
次に、配信サーバSVを、図4に基づいて説明する。図4は、図1に示す会議システムの配信サーバの構成を示すブロック図である。
The
(Configuration of distribution server SV)
Next, the distribution server SV will be described with reference to FIG. FIG. 4 is a block diagram showing the configuration of the distribution server of the conference system shown in FIG.
なお、図4に示す配信サーバSVのパケット制御部8、呼制御部9および通信部10は図2に示す主催者端末Mの各構成と同じ機能であるため、同符号を付して説明を省略する。
Note that the
配信サーバSVにはマルチキャスト処理部14と、チャネルコーデック部15と、記憶装置16とが設けられている。
The distribution server SV is provided with a
マルチキャスト処理部14は、複数の傍聴者端末Bをマルチキャストアドレスで指定し、マルチキャストアドレスに対して会議音声/映像をマルチキャスト送信する。
The
配信経路中のマルチキャスト対応ルータは、宛先に応じて会議音声/映像をコピーし、マルチキャストグループへ同報配信をする。このマルチキャスト送信は、IGMP(internet group management protocol)を使用してマルチキャストグループへ参加した傍聴者端末Bへ送信される。 The multicast compatible router in the distribution route copies the conference audio / video according to the destination and broadcasts it to the multicast group. This multicast transmission is transmitted to the listener terminal B that has joined the multicast group using IGMP (Internet group management protocol).
チャネルコーデック部15は、パケット損失補償(Packet Loss Concealment)処理を行う。すなわち、チャネルコーデック部15は、主催者端末Mや発言者端末Aの符号化部5および復号化部6と同様な符号化および復号化の機能を備え、パケット制御部8からの会議音声/映像を復号化し、音声データおよび映像データが正常であるか否かをチェックする。データに異常が生じている場合、影響を低減できるようなデータに補間する。復号化され補間された音声・映像データは、記憶装置16へ一旦格納される。チャネルコーデック部15は、記憶装置16へ一旦格納した音声・映像データを符号化し、マルチキャスト処理部14へ渡す。記憶装置16としては、リアルタイムで会議音声/映像を転送可能なように高速アクセス可能かつ大容量のハードディスク装置が使用される。
The
また、配信サーバSVには、情報格納部11yと通信制御部12yとが設けられている。情報格納部11yには、配信サーバSVが配信する会議音声/映像の配信先である傍聴者端末B(B1〜Bn)のIPアドレスや、この傍聴者端末Bを操作する傍聴者の所属、氏名、電話番号、電子メールアドレスが含まれる情報が登録リストとして格納される記憶手段として機能する。
The distribution server SV is provided with an
通信制御部12yは、配信サーバSV全体の統括制御をする他、主催者端末Mからのマルチキャスト要求に応じて傍聴者端末Bへ会議音声/映像を配信するようにマルチキャスト処理部14へ指示する機能を備えている。また、通信制御部12yは、傍聴者端末Bへ会議音声/映像を配信するときには事前に会議の開催を通知して傍聴者へ傍聴開始を促す通知手段として機能する。
(傍聴者端末Bの構成)
次に、傍聴者端末Bを、図5に基づいて説明する。図5は、図1に示す会議システムの傍聴者端末の構成を示すブロック図である。
The
(Configuration of the listener terminal B)
Next, the listener terminal B will be described with reference to FIG. FIG. 5 is a block diagram showing a configuration of a listener terminal of the conference system shown in FIG.
図5に示す傍聴者端末Bのチャネルデータ処理部7、復号化部6、呼制御部9、通信部10は、図2に示す主催者端末Mの各構成と同じ機能であるため、同符号を付して説明を省略する。また、傍聴者端末Bのチャネルデータ処理部7xとパケット制御部8xとは、図2に示す主催者端末Mのチャネルデータ処理部7およびパケット制御部8の一方向のみの機能を備えたものであるため説明を省略する。
The channel data processing unit 7, the
傍聴者端末Bに設けられている出力部2xは、DA部3xからの会議の出席者の合成された音声・映像を再生するスピーカおよびディスプレイである。DA部3xは、ストリーミング処理部17からのデジタル信号である非圧縮の線形データをアナログ信号に変換する。
The
ストリーミング処理部17は、復号化部6から非圧縮の線形データをバファリングしながら、DA部3xに対してストリーミングデータとして出力するストリーミング再生手段として機能するものである。
The
情報格納部11zには、様々な設定情報が格納されている。通信制御部12zは、傍聴者端末B全体の資源管理などの統括的な制御をする他、配信サーバSVに対して会議音声/映像の配信を要求する。
(会議システムの動作および使用状態)
以上のように構成された本発明の実施の形態に係る会議システムの動作および使用状態を図6から図18に基づいて説明する。
(傍聴者端末Bの登録)
まず傍聴者が、開催される会議を傍聴したい場合に行う配信要求の登録を、図6に基づいて説明する。図6は、傍聴者端末の登録を説明するためのシーケンス図である。なお、図6において、傍聴者は傍聴者端末Bの操作部13を操作して配信サーバSVへ配信要求の登録を行っているが、他のパーソナルコンピュータから登録操作してもよい。
Various setting information is stored in the
(Conference system operation and usage status)
The operation and use state of the conference system according to the embodiment of the present invention configured as described above will be described with reference to FIGS.
(Registration of the listener terminal B)
First, the distribution request registration performed when the listener wants to observe the conference to be held will be described with reference to FIG. FIG. 6 is a sequence diagram for explaining registration of a listener terminal. In FIG. 6, the observer operates the
図6に示すように、傍聴者端末Bを操作する傍聴者は、傍聴者端末B上で動作する認証プログラムを起動して認証画面を表示させたり、配信サーバSVにウェブアクセスし、傍聴者端末Bで動作させたブラウザに配信サーバSVから送信された認証画面を表示させたりして、それぞれの傍聴者に割り当てられた識別情報(例えば、ユーザIDとパスワードなど)を入力する。傍聴者端末Bは、入力された識別情報を配信サーバSVへ送信する(ステップS10)。 As shown in FIG. 6, the observer operating the observer terminal B activates an authentication program that operates on the observer terminal B to display an authentication screen, or accesses the distribution server SV via the web, The authentication screen transmitted from the distribution server SV is displayed on the browser operated in B, and identification information (for example, user ID and password) assigned to each listener is input. The observer terminal B transmits the input identification information to the distribution server SV (step S10).
配信サーバSVは、傍聴者端末Bから送信された識別情報が、情報格納部11yに格納された登録リストに含まれているか否かを判定する。この登録リストには、配信サーバSVへのアクセスおよび会議の傍聴が許可されている傍聴者に関する情報が登録されており、傍聴者の氏名、所属、電話番号、ユーザID、パスワード、傍聴者端末BのIPアドレス、配信の有効/無効フラグなどが含まれている。傍聴者端末Bに入力されたユーザIDおよびパスワード(識別情報)が、登録リストに含まれていれば、アクセス許可の通知を傍聴者端末Bへ送信する(ステップS11)。なお、新規の傍聴者が認証を得たい場合には、新規の傍聴者は配信サーバSVに対して管理者権限を有する管理者に依頼しておく。管理者は傍聴者の認証のための識別情報を管理者権限のID・パスワードを用いて配信サーバにログインして、予め傍聴者から取得しておいた傍聴者に関する情報を登録する。これで、傍聴者は傍聴者端末Bを操作して傍聴可能な状態となる。
The distribution server SV determines whether or not the identification information transmitted from the observer terminal B is included in the registration list stored in the
次に、配信サーバSVからのアクセス許可を受信した傍聴者端末Bは、開催された会議の傍聴を希望することを示す配信要求を送信する(ステップS12)。 Next, the listener terminal B that has received the access permission from the distribution server SV transmits a distribution request indicating that he / she wishes to listen to the held conference (step S12).
配信サーバSVは、配信要求が送信された傍聴者端末BのIPアドレスに関連付けられている配信の有効/無効フラグを有効とする傍聴者端末Bの登録を行う(ステップS13)。 The distribution server SV registers the listener terminal B that validates the distribution valid / invalid flag associated with the IP address of the listener terminal B to which the distribution request is transmitted (step S13).
傍聴者端末Bの登録が完了すると、配信サーバSVは登録が完了したことを示す完了通知を傍聴者端末Bへ送信する(ステップS14)。 When the registration of the observer terminal B is completed, the distribution server SV transmits a completion notification indicating that the registration is completed to the observer terminal B (step S14).
完了通知を受信した傍聴者端末Bは、配信サーバSVがマルチキャストで会議音声/映像を配信する際の配信条件を示すマルチキャスト配信条件設定要求を送信する。このマルチキャスト配信条件設定要求は、例えば、会議音声の音質や、スロー再生など設定を配信条件として送信する(ステップS15)。 The listener terminal B that has received the completion notification transmits a multicast distribution condition setting request indicating a distribution condition when the distribution server SV distributes conference audio / video by multicast. This multicast distribution condition setting request transmits, for example, settings such as sound quality of conference audio and slow playback as distribution conditions (step S15).
配信サーバSVは、このマルチキャスト条件設定要求を受信すると、会議音声/映像をマルチキャスト送信する際の条件として情報格納部11yに登録する(ステップS16)。
When receiving the multicast condition setting request, the distribution server SV registers it in the
そして、配信サーバSVは、傍聴者端末Bの登録が完了したことを示す完了の通知を傍聴者端末Bへ送信する(ステップS17)。
(全体の流れ)
次に、主催者端末Mを操作する主催者と、発言者端末A1を操作する出席者とが会議を行っている会議音声/映像を、傍聴者端末B(B1〜Bn)を操作する傍聴者が傍聴する一連の流れについて、図7および図8に基づいて説明する。図7は、会議システムによる会議の全体の流れを説明するためのシーケンス図、図8は、2者会議を行っている会議システムを示す図である。
Then, the distribution server SV transmits a notification of completion indicating that the registration of the observer terminal B is completed to the observer terminal B (step S17).
(Overall flow)
Next, the conference voice / video in which the organizer who operates the organizer terminal M and the attendee who operates the speaker terminal A1 have a meeting, and the listener who operates the listener terminal B (B1 to Bn). A series of flows to listen to will be described with reference to FIGS. FIG. 7 is a sequence diagram for explaining the overall flow of the conference by the conference system, and FIG. 8 is a diagram showing the conference system performing a two-party conference.
なお、図7においては、発言者端末A1と主催者端末Mとの間で、会議参加要求および会議通話許可のセッション確立を行う際に、本実施の形態では発言者端末A1と主催者端末Mとが直接通信しているが、発言者端末A1はSIPサーバ(図示せず)を介して主催者端末Mとセッションを確立させるようにしてもよい。 In FIG. 7, when a session participation request and a conference call permission session are established between the speaker terminal A1 and the organizer terminal M, the speaker terminal A1 and the organizer terminal M are used in the present embodiment. However, the speaker terminal A1 may establish a session with the organizer terminal M via a SIP server (not shown).
会議で発言する出席者は、発言者端末A1を操作して主催者端末Mへ会議参加要求を行う(ステップS20)。この会議参加要求は、次のような動作で、発言者端末A1から主催者端末Mへ送信される。 The attendee who speaks at the conference operates the speaker terminal A1 and makes a conference participation request to the organizer terminal M (step S20). The conference participation request is transmitted from the speaker terminal A1 to the organizer terminal M by the following operation.
まず、発言者端末A1では、通信制御部12xが、操作部13の会議参加要求の機能キーの押下を検知すると、情報格納部11xに格納された主催者端末Mのアドレスを読み込み、呼制御部9へ会議参加要求の送信を指示する。呼制御部9は、主催者端末Mとのセッションを確立するために、パケット制御部8にINVITEメッセージの送信を指示する。パケット制御部8は、INVITEメッセージをIPパケットとして通信部10を介して主催者端末Mへ送信する。INVITEメッセージには、発言者端末A1と主催者端末Mとの間でRTPパケットを交換するセッション確立のために必要なセッション情報であるSDP情報が含まれている。
First, in the speaker terminal A1, when the
主催者端末Mでは、通信部10を介してINVITEメッセージのIPパケットをIPネットワークNWから受信すると、パケット制御部8により呼制御部9へINVITEメッセージが通知される。呼制御部9は、SDP情報によりRTPパケットの送信先のアドレスが発言者端末A1であることが通信制御部12へ通知される。また、呼制御部9は、このINVITEメッセージに対して、INVITEメッセージが届いたことを示す100Tryingメッセージをパケット制御部8へ出力する。パケット制御部8は、この100TryingメッセージをIPパケットとして通信部10を介して発言者端末A1へ送信する。また、呼制御部9は、主催者端末Mで呼び出し音を鳴らすと共に、相手を呼び出し中であることを示す180Ringingメッセージをパケット制御部8へ出力することで、発言者端末A1へ送信する。
When the host terminal M receives an IP packet of the INVITE message from the IP network NW via the
主催者端末Mを操作する主催者が、会議参加要求を送信した相手を見て問題がない場合には、操作部13のオフフックボタンを操作する。この操作により会議通話許可が発言者端末A1へ送信される(ステップS21)。この会議通話許可は、次のような動作で、主催者端末Mから発言者端末A1へ送信される。
If there is no problem when the organizer operating the organizer terminal M sees the other party who has transmitted the conference participation request, the off-hook button of the
主催者端末Mでは、通信制御部12がオフフックボタンの操作を検知すると、呼制御部9に対して会議通話許可を通知する。呼制御部9は、会議通話許可の通知により200OKメッセージを、IPパケットとしてパケット制御部8へ出力することで、発言者端末A1へ送信する。
In the organizer terminal M, when the
発言者端末A1では、200OKメッセージを受信したことを、呼制御部9から通信制御部12xへ通知される。呼制御部9は、200OKメッセージに対して応答を示すACKメッセージをパケット制御部8により送信する。
In the speaker terminal A1, the
主催者端末Mでは、このACKメッセージを受信したことで、発言者端末A1との間でセッションが確立したことを認識する。セッションが確立したことで、通信制御部12は、発言者端末A1用の通信チャネルを確保したり、演算処理部4に対して自端末と発言者端末A1との会議音声/映像を合成するための通話路を確保したりする。
The organizer terminal M recognizes that a session has been established with the speaker terminal A1 by receiving this ACK message. When the session is established, the
主催者端末Mと発言者端末A1との間で、セッションが確立すれば、会議通話が開始される(ステップS22)。会議通話はRTPパケットにより行われる。 If a session is established between the organizer terminal M and the speaker terminal A1, a conference call is started (step S22). The conference call is performed using an RTP packet.
発言者端末A1を操作する出席者が発言した音声とその様子の映像は、発言者端末A1の入出力部2から取得され、AD/DA部3により音声・映像として演算処理部4へ出力される。この場合、合成される他の音声・映像はないので、そのまま符号化部5へ出力される。符号化部5により符号化され圧縮された会議音声/映像は、チャネルデータ処理部7により主催者端末Mへの会議音声/映像としてパケット制御部8へ出力される。パケット制御部8は、この会議音声/映像を主催者端末MへのRTPパケットとして通信部10を介してIPネットワークNWへ送信する。
The voice spoken by the attendee operating the speaker terminal A1 and the video of the situation are acquired from the input /
主催者端末Mでは、発言者端末A1からのRTPパケットが通信部10を介して受信されると、パケット制御部8にて会議音声/映像が抽出されてチャネルデータ処理部7へ出力される。チャネルデータ処理部7では、発言者端末A1からの会議音声/映像として管理されて、復号化部6へ出力される。また、復号化部6は、発言者端末A1からの会議音声/映像を復号化し、非圧縮の線形データである音声データと映像データに戻す。
In the organizer terminal M, when the RTP packet from the speaker terminal A1 is received via the
演算処理部4は、通信制御部12からの制御により、主催者端末Mを操作する主催者と、発言者端末A1を操作する出席者との2つの音声と映像を合成するように制御される。つまり、主催者が発言した音声とその様子の映像とを入出力部2により取得し、AD/DA部3により音声・映像としたものと、復号化部6から出力された発言者端末A1からの音声・映像とが合成される。そして、合成された音声・映像は、一方は発言者端末A1へ向けて符号化部5により符号化され、チャネルデータ処理部7およびパケット制御部8により会議音声/映像を含むRTPパケットが生成されて通信部10から送信される。他方では、AD/DA部3により合成された音声・映像が音声信号と映像信号に変換され、入出力部2のスピーカおよびディスプレイにより主催者および出席者の発言と映像を合成したものが再生される。
The
ここで、主催者が会議の内容を、他の関係者にも把握させておく必要があると感じると、操作部13を操作して他の関係者に対して傍聴許可を与える(ステップS23)。
Here, when the organizer feels that the content of the conference needs to be understood by other parties, the
この傍聴許可は、傍聴許可を与える操作部13の機能キーの押下を検知した通信制御部12は、配信サーバSVに向けてマルチキャストによる会議音声/映像の配信要求を、呼制御部9へ指示することによりパケット制御部8からマルチキャスト要求を示すIPパケットが送信される(ステップS24)。
The
配信サーバSVでは、主催者端末Mからのマルチキャスト要求のIPパケットを、パケット制御部8および呼制御部9を介して受信した通信制御部12yが、情報格納部11yに格納された登録リストのうち、配信の有効/無効フラグが有効となっているものを読み込む(ステップS25)。そして、配信サーバSVは、読み込んだ登録リストのうち、傍聴者の氏名、所属、電話番号を登録端末の情報として、主催者端末Mへ向けて送信する(ステップS26)。
In the distribution server SV, the
主催者端末Mでは、登録端末の情報を受信すると、通信制御部12は操作部13のディスプレイに表示する。主催者は、操作部13のディスプレイに表示された登録端末の情報から傍聴者の一覧をチェックする(ステップS27)。チェックした結果、問題がなければ、承認することを示す操作部13の機能キーを押下する。この機能キーの押下を検知した通信制御部12は、承認を示す通知を配信サーバSVへ送信する(ステップS28)。
When the organizer terminal M receives the information of the registered terminal, the
配信サーバSVでは、承認を示す通知がパケット制御部8および呼制御部9を介して受信され、通信制御部12yに通知されると、登録リストに登録されている傍聴者端末Bに向けて会議開始を示す通知を送信する(ステップS29)。
In the distribution server SV, when a notification indicating approval is received via the
傍聴者端末Bでは、パケット制御部8および呼制御部9を介して会議開始を示す通知が受信され、通信制御部12zに通知されると、操作部13のディスプレイに会議開始を示すメッセージを、例えばポップアップウィンドウにより表示する。傍聴者は、操作部13のディスプレイに表示された会議開始を示すメッセージを見て、会議が開催されることを認識することができる。傍聴者は、会議が開催されることを事前に促されるので、会議が開催されることを忘れていても、会議の最初から傍聴をすることができる。
In the observer terminal B, when the notification indicating the start of the conference is received via the
傍聴者は、会議を傍聴する場合には操作部13を操作する。この操作を検知した通信制御部12zは、会議の傍聴の要求を示す通知をIPパケットとして配信サーバSVへ向けて送信する(ステップS30)。また通信制御部12zは、この会議の傍聴の要求を示す通知を配信サーバSVへ送信すると共に、この傍聴者端末Bが属するローカルグループのマルチキャスト対応ルータに対してマルチキャストグループに参加を要求することを示すホストメンバーシップレポート(IGMP Joinメッセージ)を送信する。このホストメンバーシップレポートを送信することで、傍聴者端末Bはマルチキャストグループに参加することができる。その後、主催者端末Mは配信サーバSVに向けて会議音声/映像のユニキャスト送信を開始する(ステップS31a)。
The observer operates the
配信サーバSVでは、主催者端末Mからユニキャストで送信される会議音声/映像を受信すると、パケット制御部8を介してチャネルコーデック部15へ入力される。チャネルコーデック部15は、会議音声/映像を復号化して非圧縮の線形データとした後、記憶装置16に格納する。並行してチャネルコーデック部15はパケット損失補償処理を行う。また、パケット損失補償処理を行わない場合、チャネルコーデック部15は、会議音声/映像を復号化せずに、そのままのデータをマルチキャスト処理部14へ出力する。
When the distribution server SV receives the conference audio / video transmitted from the organizer terminal M by unicast, it is input to the
マルチキャスト処理部14は、配送経路において配信サーバSVの直下に位置するマルチキャストに対応したルータ(図示せず)へ向けて会議音声/映像を送信するようパケット制御部8へ指示する。ルータは、この会議音声/映像の送信により傍聴者端末B(B1〜Bn)に向けてマルチキャスト送信を行う(ステップS31b)。
The
傍聴者端末Bでは、通信部10を介して受信した会議音声/映像を、パケット制御部8によりIPパケットから抽出する。そしてチャネルデータ処理部7を経由して復号化部6により伸張して非圧縮の線形データへ変換して音声・映像を生成する。生成された音声・映像は、ストリーミング処理部17にて所定容量分ほどバッファリングされる。そして所定容量となるとDA部3xにて音声信号および映像信号に変換され、出力部2xのスピーカから音声が、ディスプレイから映像が再生される。図8に示すように主催者端末Mにより取得された主催者の音声および映像である会議音声/映像(a)と発言者端末A1により取得された発言者の音声および映像である会議音声/映像(b)とが、主催者端末Mにより会議音声/映像(a+b)として合成され、配信サーバSVにより配信されることで、傍聴者は会議の様子を傍聴することができる(ステップS32)。
In the listener terminal B, the conference audio / video received via the
主催者および出席者による会議が終了すると、主催者端末Mか、または発言者端末A1のいずれかの端末で、会議終了を示す操作部13の機能キーを押下することで、会議相手へ会議終了を示す通知が送信される(ステップS33)。
When the meeting by the organizer and the attendee is finished, the function is terminated at the meeting partner by pressing the function key of the
会議が終了したことにより主催者端末Mの通信制御部12は、マルチキャスト終了の要求を示す通知を配信サーバSVへ送信する(ステップS34)。
When the conference is ended, the
配信サーバSVでは、マルチキャスト終了の要求を示す通知を受信することで、了承したことを示すメッセージを主催者端末Mへ送信する(ステップS35)と共に、マルチキャスト送信を中止する(ステップS36)。 The distribution server SV receives a notification indicating a request to end multicasting, thereby transmitting a message indicating that the request has been accepted to the organizer terminal M (step S35) and canceling multicast transmission (step S36).
このように主催者端末Mは、発言者端末Aから送信された会議音声/映像と、自らの音声・映像とを合成し、合成された会議音声/映像を、全ての発言者端末Aに加えて配信サーバに送信するだけでよく、配信サーバSVは、主催者端末Mや、1台以上の発言者端末Aへの配信は不要であり、傍聴者が操作する傍聴者端末Bへ配信するだけよいので、高い性能は必要ない。よって、傍聴者が操作する通信端末への配信に要する負荷を軽減することで、簡易なハードウェアで構成することが可能である。
(会議への参加)
次に、主催者端末Mと発言者端末A1,A2とが3者会議を行っているときに、更に発言者端末A3が参加して4者会議を行う手順を、図9から図13に基づいて説明する。図9は、3者会議を行っている会議システムを示す図、図10は、3者会議から4者会議への移行を説明するためのシーケンス図、図11は、発言者端末A3が会議参加要求を主催者端末Mへ送信して会議に加わるときの会議システムを示す図、図12は、主催者端末Mからの指示により発言者端末A3が会議参加要求を再通知するときの会議システムを示す図、図13は、4者会議を行っている会議システムを示す図である。
Thus, the organizer terminal M combines the conference audio / video transmitted from the speaker terminal A and its own audio / video, and adds the synthesized conference audio / video to all the speaker terminals A. The distribution server SV does not need to be distributed to the organizer terminal M or one or more speaker terminals A, and only distributes to the listener terminal B operated by the listener. Because it is good, high performance is not necessary. Therefore, it is possible to configure with simple hardware by reducing the load required for distribution to the communication terminal operated by the listener.
(Participation in the meeting)
Next, when the organizer terminal M and the speaker terminals A1 and A2 are holding a three-party conference, the procedure for the speaker terminal A3 to further participate and hold the four-party conference is based on FIGS. 9 to 13. I will explain. FIG. 9 is a diagram showing a conference system performing a three-party conference, FIG. 10 is a sequence diagram for explaining the transition from a three-party conference to a four-party conference, and FIG. 11 is a conference terminal A3 participating in the conference FIG. 12 is a diagram showing a conference system when a request is transmitted to the organizer terminal M to join the conference. FIG. 12 shows the conference system when the speaker terminal A3 re-notifies the conference participation request according to an instruction from the organizer terminal M. FIG. 13 is a diagram illustrating a conference system in which a four-party conference is performed.
なお、本実施の形態では、主催者端末Mは最大2台の発言者端末Aからの音声・映像を合成することができるものとする。 In the present embodiment, it is assumed that the organizer terminal M can synthesize audio / video from up to two speaker terminals A.
図9および図10に示すように、まず、主催者端末Mを操作する主催者と、発言者端末A1および発言者端末A2を操作するそれぞれの発言者が会議を行っている。この場合、主催者端末Mは、自ら取得した会議音声/映像(a)発言者端末A1からの会議音声/映像(b)と、発言者端末A2からの会議音声/映像(c)と、主催者端末Mにより合成された会議音声/映像(a+b+c)は、配信サーバSVにより傍聴者端末B1〜Bnへマルチキャストで配信されている。また、主催者端末Mにて合成された会議音声/映像(a+b+c)は、主催者端末Mにて再生される他、発言者端末A1および発言者端末A2へも配信され再生される(ステップS40)。 As shown in FIGS. 9 and 10, first, the organizer who operates the organizer terminal M and each speaker who operates the speaker terminal A1 and the speaker terminal A2 have a meeting. In this case, the organizer terminal M sponsors the conference audio / video (a), the conference audio / video (b) from the speaker terminal A1, the conference audio / video (c) from the speaker terminal A2, The conference audio / video (a + b + c) synthesized by the listener terminal M is distributed by multicast to the listener terminals B1 to Bn by the distribution server SV. In addition, the conference audio / video (a + b + c) synthesized at the organizer terminal M is played back by the organizer terminal M, and is also distributed and played back to the speaker terminal A1 and the speaker terminal A2 (step S40). ).
そこへ発言者端末A3を操作する発言者が会議へ参加を希望したとする。発言者は発言者端末A3の操作部13を操作して会議参加要求の入力を行う。この操作により図11に示すように発言者端末A3は会議参加要求を主催者端末Mへ送信する(ステップS41)。
It is assumed that a speaker who operates the speaker terminal A3 desires to participate in the conference. The speaker operates the
主催者端末Mでは、通信制御部12が、現在、発言者端末A1と発言者端末A2との会議中であることにより接続台数が最大となっているので、これ以上の発言者端末Aとの会議音声/映像の合成は不可であると判定する。この判定により通信制御部12は、情報格納部11から会議をしている発言者端末Aを読み出し、そのうちの1台の発言者端末Aを選択して、選択された発言者端末Aに会議参加要求を送信するように指示を発言者端末A3へ返信する。
In the organizer terminal M, since the
本実施の形態では、図12に示すように、発言者端末A1が選択されたことにより、発言者端末A1に会議参加要求を送信する指示の返信を発言者端末A3へ通知している(ステップS42)。主催者端末Mは、発言者端末A3からの会議参加要求を受信することで、通信制御部12が情報格納部11に発言者端末A1の配下に発言者端末A3が接続していることを示す情報を格納する。
In this embodiment, as shown in FIG. 12, when the speaker terminal A1 is selected, the speaker terminal A3 is notified of a reply to an instruction to transmit a conference participation request to the speaker terminal A1 (step S1). S42). When the organizer terminal M receives the conference participation request from the speaker terminal A3, the
発言者端末A3では、主催者端末Mからの返信により、会議参加要求を発言者端末A1へ送信する(ステップS43)。 The speaker terminal A3 transmits a conference participation request to the speaker terminal A1 by a reply from the organizer terminal M (step S43).
発言者端末A1では、現在、他の発言者端末Aの接続はないので、会議通話許可の通知を発言者端末A3へ送信する(ステップS44)。これは、通信制御部12xが現在接続している他の発言者端末Aの台数と接続が許容できる台数とを比較して判定している。
At the speaker terminal A1, since there is currently no connection to the other speaker terminal A, a conference call permission notification is transmitted to the speaker terminal A3 (step S44). This is determined by comparing the number of other speaker terminals A to which the
発言者端末A3では、発言者端末A1からの会議通話許可の通知により自ら取得した音声および映像を会議音声/映像(d)として、図13に示すように発言者端末A1へ送信する。4者会議では、発言者端末A3と同様に自ら取得した音声および映像を会議音声/映像(c)として主催者端末Mへ送信する発言者端末A2と、発言者端末A3と合成された会議音声/映像(b+d)とを合成とした会議音声/映像(a+b+c+d)が配信サーバSVを介して傍聴者端末Bへ配信される。また、主催者端末Mにて合成された会議音声/映像(a+b+c+d)は、主催者端末Mにて再生される他、発言者端末A1および発言者端末A2へも配信され、発言者端末A3へも発言者端末A2を経由して配信される(ステップS45)。 The speaker terminal A3 transmits the audio and video acquired by the conference call permission notification from the speaker terminal A1 as conference audio / video (d) to the speaker terminal A1 as shown in FIG. In the four-party conference, as with the speaker terminal A3, the speaker terminal A2 that transmits the audio and video acquired by itself as the conference audio / video (c) to the organizer terminal M, and the conference voice synthesized with the speaker terminal A3 / Conference audio / video (a + b + c + d) synthesized with / video (b + d) is distributed to the listener terminal B via the distribution server SV. In addition, the conference voice / video (a + b + c + d) synthesized at the organizer terminal M is played back at the organizer terminal M, and is also distributed to the speaker terminal A1 and the speaker terminal A2, and to the speaker terminal A3. Is also delivered via the speaker terminal A2 (step S45).
発言者端末A3から会議音声/映像のIPパケットが発言者端末A1の会議音声/映像と合成されて主催者端末Mへ送信されることで、物理的にはそれぞれの発言者端末AがネットワークNWに個々に接続され通信しているが、あたかも発言者端末A3は主催者端末Mに発言者端末A1を介在させて縦続接続されているように通信している。 The conference audio / video IP packet is synthesized with the conference audio / video of the speaker terminal A1 and transmitted to the organizer terminal M from the speaker terminal A3, so that each speaker terminal A physically has the network NW. The speaker terminal A3 communicates as if it were connected in cascade with the organizer terminal M through the speaker terminal A1.
この3者会議から4者会議への移行は、4者会議から更に他の発言者端末Aの参加が加わる5者会議でも同様に行うことができる。この場合、発言者端末Aの許容台数に応じて、新たな発言者端末Aを発言者端末A1に縦続接続させたり、発言者端末A3へ縦続接続させたりすることができる。 The transition from the three-party conference to the four-party conference can be similarly performed in the five-party conference in which the participation of another speaker terminal A is further added from the four-party conference. In this case, according to the allowable number of speaker terminals A, a new speaker terminal A can be cascaded to the speaker terminal A1 or cascaded to the speaker terminal A3.
このように発言者端末Aを縦続接続することで、主催者端末Mは発言者端末A3が新たに会議に加わっても、発言者端末A1から送信されるからの会議音声/映像と自らの音声・映像とを合成すればよいので、会議音声の合成数が増加しない。従って、主催者端末Mの負荷を増加させることなく参加可能な発言者端末Aを増やすことができる。
(会議からの退出)
次に、4者会議中に発言者端末A1が会議から退出することで3者会議となる手順について、更に図14に基づいて説明する。図14は、発言者端末A1が会議から退出して、4者会議から3者会議へ移行するときの状態を説明するためのシーケンス図である。
By connecting the speaker terminals A in this way, the organizer terminal M allows the conference audio / video and its own audio to be transmitted from the speaker terminal A1 even if the speaker terminal A3 newly joins the conference.・ Since video is synthesized, the number of synthesized conference audio does not increase. Accordingly, it is possible to increase the number of speaker terminals A that can participate without increasing the load on the organizer terminal M.
(Exit from meeting)
Next, a procedure for forming a three-party conference by the speaker terminal A1 leaving the conference during the four-party conference will be described with reference to FIG. FIG. 14 is a sequence diagram for explaining a state when the speaker terminal A1 leaves the conference and shifts from the four-party conference to the three-party conference.
図13に基づいて説明したように主催者端末Mに対して発言者端末A1に発言者端末A3が縦続接続していることで、主催者端末Mと、発言者端末A1〜A3とで4者会議を行っている(図14に示すステップS50)。そこへ発言者端末A1を操作する発言者が会議からの退出を希望したとする。発言者は発言者端末A1の操作部13を操作して会議終了通知の入力を行う。この操作により発言者端末A1は会議終了通知を、主催者端末Mと、発言者端末A1へ直接会議音声/映像を送信している発言者端末A3へ送信する(ステップS51)。
As described based on FIG. 13, the speaker terminal A3 is connected in cascade to the speaker terminal A1 with respect to the organizer terminal M, so that the organizer terminal M and the speaker terminals A1 to A3 have four parties. A meeting is held (step S50 shown in FIG. 14). It is assumed that a speaker operating the speaker terminal A1 desires to leave the conference. The speaker operates the
主催者端末Mでは、発言者端末A1からの会議終了通知により発言者端末A1が会議から外れたことを認識することで、通信制御部12は発言者端末A1との会議のために確保していた資源を開放して会議を終了する(ステップS52)。そして、発言者端末A1へ会議音声/映像を送信していた発言者端末A3へ会議通話許可を通知する(ステップS53)。
In the organizer terminal M, the
発言者端末A3では、発言者端末A1からの会議終了通知と、主催者端末Mからの会議通話許可の通知により、今まで発言者端末A1へ送信していた会議音声/映像を主催者端末Mへ直接送信することで、4者会議から図9に示す3者会議への移行が完了する(ステップS54)。 In the speaker terminal A3, the conference audio / video that has been transmitted to the speaker terminal A1 so far by the conference end notification from the speaker terminal A1 and the conference call permission notification from the organizer terminal M is transmitted to the speaker terminal M1. By directly transmitting to, the transition from the four-party conference to the three-party conference shown in FIG. 9 is completed (step S54).
4者会議では、発言者端末A3の会議音声/映像を発言者端末A1が自ら取得した音声・映像と共に主催者端末Mへ送信し、主催者端末Mが合成した会議音声/映像を発言者端末A3へ発言者端末A1を経由して送信したが、発言者端末A1が会議から外れた3者会議では、発言者端末A3が直接主催者端末Mへ送信し、主催者端末Mが発言者端末A1に代わって発言者端末A3へ送信している。これにより、主催者端末Mと発言者端末A3との間に介在していた発言者端末A1が会議から外れても、支障なく会議を継続することができる。
(発言者端末Aの障害の発生)
次に、4者会議中に発言者端末A1に障害が発生して発言者端末A3からの会議音声/映像の中継ができなくなった場合に発言者端末A1が外れて3者会議となる手順について、図15から図18に基づいて説明する。図15は、発言者端末A1の障害により4者会議から3者会議への移行するときの状態を説明するためのシーケンス図、図16は、発言者端末A1に障害が発生したときの会議システムを示す図、図17は、下位の発言者端末A3から上位の主催者端末Mへ障害発生を通知するときの会議システムを示す図、図18は、3者会議へ復旧したときの会議システムを示す図である。
In the four-party conference, the conference audio / video of the speaker terminal A3 is transmitted to the organizer terminal M together with the audio / video acquired by the speaker terminal A1, and the conference audio / video synthesized by the organizer terminal M is transmitted to the speaker terminal. The message is transmitted to A3 via the speaker terminal A1, but in a three-party conference in which the speaker terminal A1 is removed from the conference, the speaker terminal A3 transmits directly to the organizer terminal M, and the organizer terminal M It is transmitted to the speaker terminal A3 in place of A1. Thereby, even if the speaker terminal A1 interposed between the organizer terminal M and the speaker terminal A3 is removed from the conference, the conference can be continued without any trouble.
(Failure of speaker terminal A)
Next, when a failure occurs in the speaker terminal A1 during the four-party conference and the conference voice / video cannot be relayed from the speaker terminal A3, the speaker terminal A1 is disconnected and becomes a three-party conference. This will be described with reference to FIGS. FIG. 15 is a sequence diagram for explaining a state when a transition from a four-party conference to a three-party conference occurs due to a failure of the speaker terminal A1, and FIG. 16 is a conference system when a failure occurs in the speaker terminal A1. FIG. 17 is a diagram showing a conference system when notifying the occurrence of a failure from the lower speaker terminal A3 to the upper organizer terminal M, and FIG. 18 shows the conference system when the three-party conference is restored. FIG.
図13に基づいて説明したように主催者端末Mに対して発言者端末A1に発言者端末A3が縦続接続していることで、主催者端末Mと、発言者端末A1〜A3とで4者会議を行っている(図15に示すステップS60)。 As described based on FIG. 13, the speaker terminal A3 is connected in cascade to the speaker terminal A1 with respect to the organizer terminal M, so that the organizer terminal M and the speaker terminals A1 to A3 have four parties. A meeting is held (step S60 shown in FIG. 15).
図16に示すように、発言者端末A1に障害が発生して会議音声/映像の合成、もしくはIPパケットの受信または送信ができなくなったとする。従って、発言者端末A2には、発言者端末A2により取得された会議音声/映像(c)と、主催者端末Mにより取得された会議音声/映像(a)とが合成された会議音声/映像(a+b)が、主催者端末Mから送信されているが、発言者端末A3では会議音声/映像を受信することができない(ステップS61)。 As shown in FIG. 16, it is assumed that a failure occurs in the speaker terminal A1, and it becomes impossible to synthesize conference audio / video or receive or transmit IP packets. Therefore, the conference audio / video (c) obtained by synthesizing the conference audio / video (c) acquired by the speaker terminal A2 and the conference audio / video (a) acquired by the organizer terminal M is included in the speaker terminal A2. (A + b) is transmitted from the organizer terminal M, but the speaker terminal A3 cannot receive the conference audio / video (step S61).
発言者端末A3では、通信制御部12xが、所定時間経過しても発言者端末A1からの会議音声/映像のIPパケットが送信されてこないことを検知した場合や、発言者端末A1からのパケットに付加されたFCS(Frame Check Sequence)などのチェックコードのエラーが多発していたり、パケットの抜けが多発していたりしていることを検知した場合に、発言者端末A1の障害と判断する。発言者端末A3の通信制御部12xは、図17に示すように、発言者端末A1の障害を検知すると、主催者端末Mへ発言者端末A1の障害検知の通知を送信する(ステップS62)。
In the speaker terminal A3, when the
主催者端末Mでは、発言者端末A3からの障害検知の通知を受信すると、送信元である発言者端末A3へ会議通話許可の通知を送信する(ステップS63)。この通知には、発言者端末A3が送信する会議音声/映像の送信先のアドレスも送信される。本実施の形態では、発言者端末A1の上位の端末は主催者端末Mであるので、会議音声/映像の送信先のアドレスとして主催者端末MのIPアドレスを通知する。 Upon receiving the failure detection notification from the speaker terminal A3, the sponsor terminal M transmits a conference call permission notification to the speaker terminal A3 that is the transmission source (step S63). In this notification, the address of the conference audio / video transmission destination transmitted by the speaker terminal A3 is also transmitted. In the present embodiment, since the upper terminal of the speaker terminal A1 is the organizer terminal M, the IP address of the organizer terminal M is notified as the conference audio / video transmission destination address.
発言者端末A3では、主催者端末Mからの会議通話許可の通知により、今まで発言者端末A1へ送信していた会議音声/映像を主催者端末Mへ直接送信することで、図18に示すように、主催者端末Mは、合成した会議音声/映像を発言者端末A1ではなく、発言者端末A3へ直接送信することで、4者会議から3者会議へ移行して、障害からの復旧が完了する(ステップS64)。 The speaker terminal A3 directly transmits the conference audio / video that has been transmitted to the speaker terminal A1 up to now to the organizer terminal M in response to the conference call permission notification from the organizer terminal M, as shown in FIG. Thus, the organizer terminal M shifts from the four-party conference to the three-party conference by directly transmitting the synthesized conference audio / video to the speaker terminal A3 instead of the speaker terminal A1, and recovers from the failure. Is completed (step S64).
このように、4者会議では、発言者端末A3の会議音声/映像を発言者端末A1が自ら取得した音声・映像と共に主催者端末Mへ送信し、主催者端末Mが合成した会議音声/映像を発言者端末A3へ発言者端末A1を経由して送信していたが、発言者端末A1に障害が発生して会議音声/映像の受け渡しができなくなると、発言者端末A3が直接主催者端末Mへ送信し、主催者端末Mが発言者端末A1に代わって発言者端末A3へ送信するので、支障なく会議を継続することができる。 Thus, in the four-party conference, the conference audio / video of the speaker terminal A3 is transmitted to the organizer terminal M together with the audio / video acquired by the speaker terminal A1, and the conference audio / video synthesized by the organizer terminal M is transmitted. Is sent to the speaker terminal A3 via the speaker terminal A1, but if the speaker terminal A1 fails and cannot deliver the conference audio / video, the speaker terminal A3 directly Since the organizer terminal M transmits to the speaker terminal A3 instead of the speaker terminal A1, the conference can be continued without any trouble.
本実施の形態では、発言者端末A3のみが縦続接続された発言者端末A1に障害が発生した場合を説明しているが、発言者端末Aに他の発言者端末Aが数段縦続されていても、同様の手順で復旧させることができる。具体的には、主催者端末Mから、障害が発生した発言者端末Aの一段上位の発言者端末Aのアドレスを送信先アドレスとして、障害が発生した発言者端末Aの一段下位の発言者端末Aに通知する。そうすることで、障害が発生した発言者端末Aの一段下位の発言者端末Aは、送信先アドレスへ会議音声/映像を送信するようにする。そして、一段上位の発言者端末Aは会議音声/映像を送信している発言者端末Aに向けて合成された会議音声/映像を送信する。このような手順とすることで、縦続接続された発言者端末Aの途中で障害が発生しても問題なく会議を継続することができる。 In the present embodiment, a case where a failure occurs in the speaker terminal A1 in which only the speaker terminal A3 is cascade-connected is described, but other speaker terminals A are cascaded in the speaker terminal A in several stages. However, it can be recovered in the same procedure. Specifically, from the organizer terminal M, the address of the speaker terminal A that is one level higher than the speaker terminal A in which the failure has occurred is used as the destination address, and the speaker terminal that is one level lower than the speaker terminal A in which the failure has occurred Notify A. By doing so, the speaker terminal A, one level lower than the speaker terminal A in which the failure has occurred, transmits the conference audio / video to the transmission destination address. Then, the speaker terminal A, which is one level higher, transmits the synthesized conference audio / video toward the speaker terminal A that is transmitting the conference audio / video. By adopting such a procedure, even if a failure occurs in the middle of the speaker terminals A connected in cascade, the conference can be continued without any problem.
また、本実施の形態では、図1に示すように会議システム1は、主催者端末Mと、発言者端末A1〜A3とは、イントラネットN1で接続され、主催者端末Mと、配信サーバSVと傍聴者端末Bとは、インターネットN2で接続されていることで、主催者端末Mと、発言者端末A1〜A4とを同じ企業内や施設内に配置することができ、配信サーバSVおよび傍聴者端末Bが遠隔地にあってもインターネットN2を介して会議音声/映像を配信することができる。
In the present embodiment, as shown in FIG. 1, in the
例えば、図19に示す会議システム1xでは、主催者端末Mと、発言者端末A1〜A4の他にも配信サーバSVがイントラネットN1内に配置され、配信サーバSVと傍聴者端末BとインターネットN2を介して接続するように配置されている。このように配置されていることで、配信サーバSVは施設内のものが利用でき、傍聴者端末Bが遠隔地にあってもインターネットN2を介して会議音声/映像を配信することができる。
For example, in the
なお、本実施の形態では、会議端末装置として機能する主催者端末Mは会議を主催する主催者が操作しているが、会議で発言する複数の発言者のうち一の発言者が操作できればよく、主催者以外の発言者が代わりに操作してもよい。 In the present embodiment, the organizer terminal M that functions as a conference terminal device is operated by the organizer that hosts the conference. However, it is only necessary that one speaker can be operated among a plurality of speakers who speak in the conference. A speaker other than the organizer may operate instead.
本発明は、傍聴者が操作する通信端末への配信に要する負荷を軽減することで、簡易なハードウェアで構成することが可能なので、複数の発言者が発言する会議を1以上の傍聴者が傍聴することが可能な会議システムおよび会議端末装置に好適である。 Since the present invention can be configured with simple hardware by reducing the load required for distribution to a communication terminal operated by a listener, one or more listeners can hold a conference where a plurality of speakers speak. It is suitable for a conference system and a conference terminal device that can be heard.
A,A1〜A3 発言者端末
B,B1〜Bn 傍聴者端末
M 主催者端末
N1 イントラネット
N2 インターネット
NW ネットワーク
SV 配信サーバ
1,1x 会議システム
2 入出力部
2x 出力部
3 AD/DA部
3x DA部
4 演算処理部
5 符号化部
6 復号化部
7,7x チャネルデータ処理部
8,8x パケット制御部
9 呼制御部
10 通信部
11,11x,11y,11z 情報格納部
12,12x,12y,12z 通信制御部
13 操作部
14 マルチキャスト処理部
15 チャネルコーデック部
16 記憶装置
17 ストリーミング処理部
A, A1 to A3 Speaker terminal B, B1 to Bn Listener terminal M Organizer terminal N1 Intranet N2 Internet NW network
Claims (10)
前記第1の通信端末は、前記第2の通信端末から送信された会議音声と、自らの会議音声とを合成する合成手段と、前記合成手段で合成された会議音声を配信サーバおよび前記第2の通信端末に前記ネットワークを介して送信する送信手段とを備え、
前記配信サーバは、同報配信する送信先の第3の通信端末を記憶する記憶手段と、前記第1の通信端末から送信される会議音声を、前記記憶手段に記憶された送信先の第3の通信端末に対して前記ネットワークを介して送信する配信手段とを備えたことを特徴とする会議システム。 A first communication terminal operated by one of a plurality of speakers, at least one second communication terminal operated by another speaker, and conference audio from the first communication terminal are received. And a distribution server that broadcasts and a network that can be communicated with an at least one third communication terminal that receives a conference voice broadcast from the distribution server and listens to the conference. Connected to
The first communication terminal includes a synthesizing unit that synthesizes the conference voice transmitted from the second communication terminal and its own conference voice, a distribution server for the conference voice synthesized by the synthesizing unit, and the second Transmitting means for transmitting to the communication terminal via the network,
The distribution server stores a third communication terminal as a transmission destination for broadcast distribution, and a conference voice transmitted from the first communication terminal as a third destination stored in the storage means. And a distribution means for transmitting to the communication terminal via the network.
前記第2の通信端末は、前記第4の通信端末からの会議参加要求を受信すると通話を許可し、前記第4の通信端末からの会議音声と自らの音声とを合成して前記第1の通信端末へ送信することを特徴とする請求項1から4のいずれかの項に記載の会議システム。 When the first communication terminal receives a conference participation request from a fourth communication terminal that is about to newly join the conference, the first communication terminal instructs the second communication terminal to request the conference participation,
When the second communication terminal receives the conference participation request from the fourth communication terminal, the second communication terminal permits a call, and synthesizes the conference voice from the fourth communication terminal and its own voice to combine the first voice. The conference system according to claim 1, wherein the conference system transmits to a communication terminal.
前記第1の通信端末は、この第4の通信端末を第2の通信端末として会議を行うことを特徴とする請求項5記載の会議システム。 When the fourth terminal detects a failure in the second communication terminal, the fourth terminal notifies the first communication terminal of the occurrence of the failure,
6. The conference system according to claim 5, wherein the first communication terminal performs a conference using the fourth communication terminal as a second communication terminal.
他の発言者が操作する少なくとも1台の発言者端末から送信された会議音声と、自らの会議音声とを合成する合成手段と、
前記合成手段で合成された会議音声を、前記発言者端末へ送信すると共に、会議を傍聴する1以上の傍聴者端末へ同報配信する配信サーバへネットワークを介して送信する送信手段とを備えたことを特徴とする会議端末装置。 In a conference terminal device operated by one of a plurality of speakers,
Synthesizing means for synthesizing the conference voice transmitted from at least one speaker terminal operated by another speaker and the conference voice;
Transmitting means for transmitting the conference voice synthesized by the synthesizing means to the speaker terminal and transmitting via a network to a distribution server that broadcasts the conference to one or more listener terminals. A conference terminal device characterized by that.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008260538A JP2010093479A (en) | 2008-10-07 | 2008-10-07 | Conference system and conference terminal device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008260538A JP2010093479A (en) | 2008-10-07 | 2008-10-07 | Conference system and conference terminal device |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2010093479A true JP2010093479A (en) | 2010-04-22 |
Family
ID=42255806
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008260538A Pending JP2010093479A (en) | 2008-10-07 | 2008-10-07 | Conference system and conference terminal device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2010093479A (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013077000A1 (en) | 2011-11-27 | 2013-05-30 | 株式会社シナジードライブ | Voice link system |
US11563856B2 (en) | 2018-07-27 | 2023-01-24 | Sony Corporation | Voice communication terminal, information processing method for voice communication terminal, distribution server, and information processing method for distribution server |
JP7473991B2 (en) | 2020-08-05 | 2024-04-24 | 株式会社Widsley | Telephone call system, telephone call method and program |
-
2008
- 2008-10-07 JP JP2008260538A patent/JP2010093479A/en active Pending
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013077000A1 (en) | 2011-11-27 | 2013-05-30 | 株式会社シナジードライブ | Voice link system |
KR20140097432A (en) | 2011-11-27 | 2014-08-06 | 가부시키가이샤 시너지드라이브 | Voice link system |
US11563856B2 (en) | 2018-07-27 | 2023-01-24 | Sony Corporation | Voice communication terminal, information processing method for voice communication terminal, distribution server, and information processing method for distribution server |
JP7473991B2 (en) | 2020-08-05 | 2024-04-24 | 株式会社Widsley | Telephone call system, telephone call method and program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6288739B1 (en) | Distributed video communications system | |
US8379076B2 (en) | System and method for displaying a multipoint videoconference | |
US8334891B2 (en) | Multipoint conference video switching | |
JP3984929B2 (en) | VoIP system, VoIP server, and multicast packet communication method | |
CN100574416C (en) | The system and method that is used for real time playback of conferencing streams | |
US7742587B2 (en) | Telecommunications and conference calling device, system and method | |
US8243120B2 (en) | Method and device for realizing private session in multipoint conference | |
US7689568B2 (en) | Communication system | |
US8717408B2 (en) | Conducting a private videoconference within a videoconference via an MCU | |
JP2004531952A (en) | Control unit for multipoint multimedia / audio system | |
US8717409B2 (en) | Conducting a direct private videoconference within a videoconference | |
WO2011015136A1 (en) | Method, equipment and system for conference control | |
US9088690B2 (en) | Video conference system | |
JP2008288974A (en) | Video conference system and video conference device | |
US20210218932A1 (en) | Video conference server capable of providing video conference by using plurality of terminals for video conference, and method for removing audio echo therefor | |
KR101918676B1 (en) | Videoconferencing Server for Providing Multi-Screen Videoconferencing by Using Plural Videoconferencing Terminals and Camera Tracking Method therefor | |
JP2010093479A (en) | Conference system and conference terminal device | |
JP5436743B2 (en) | Communication terminal device and communication control device | |
JP2007135108A (en) | Network conference support program and network conference support server | |
JP4406295B2 (en) | Application linkage system and application linkage method | |
US20080261576A1 (en) | Communication system for oil and gas platforms | |
JP2006319779A (en) | Video conference control apparatus, video conference control method, and computer program thereof | |
JP2001224000A (en) | Multi-spots tv conference system | |
WO2014026478A1 (en) | Video conference signal processing method, video conference server and video conference system | |
KR101861561B1 (en) | Videoconferencing Server for Providing Multi-Screen Videoconferencing by Using Plural Videoconferencing Terminals and Method therefor |