JPH1013803A - Multi-point video conference controller - Google Patents
Multi-point video conference controllerInfo
- Publication number
- JPH1013803A JPH1013803A JP8156872A JP15687296A JPH1013803A JP H1013803 A JPH1013803 A JP H1013803A JP 8156872 A JP8156872 A JP 8156872A JP 15687296 A JP15687296 A JP 15687296A JP H1013803 A JPH1013803 A JP H1013803A
- Authority
- JP
- Japan
- Prior art keywords
- video conference
- video
- signal
- control device
- multipoint
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Telephonic Communication Services (AREA)
- Studio Circuits (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】本発明は、テレビ会議システ
ムにおいて映像信号の合成などを行う多地点テレビ会議
制御装置に関するものである。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a multipoint video conference controller for synthesizing video signals in a video conference system.
【０００２】[0002]
【従来の技術】テレビ会議システムでは、テレビ会議の
参加者がいる各地点に設置されたテレビ会議端末から送
られた映像を多地点テレビ会議制御装置が合成し、合成
した映像を各テレビ会議端末に返送する。特開平２−１
２５５８８号公報記載の装置では、利用者により指定さ
れた複数地点の映像を任意の大きさで合成して、表示す
る。特開平５−１０３３２４号公報記載の装置では、全
ての地点の映像を表示し、発言者のいる地点の映像のみ
をより大きく表示する。2. Description of the Related Art In a video conference system, a multipoint video conference controller synthesizes a video transmitted from a video conference terminal installed at each location where a participant of a video conference exists, and combines the synthesized video with each video conference terminal. Return to. JP-A-2-1
In the device described in Japanese Patent No. 25588, images at a plurality of points designated by a user are combined in an arbitrary size and displayed. In the device described in Japanese Patent Application Laid-Open No. 5-103324, images at all points are displayed, and only images at points where the speaker is present are displayed larger.
【０００３】[0003]
【発明が解決しようとする課題】上記従来の技術では、
合成される映像の選択の基準が１つであるため、利用者
の希望や会議の状況に即した表示映像を合成するこがで
きない。例えば、特開平２−１２５５８８号公報記載の
装置では、発言者の地点の映像が利用者により指定され
ていない場合や小さく合成されている場合に、発言者の
特定が難しい。特開平５−１０３３２４号公報記載の装
置では、全ての地点の映像を合成するために各映像が小
さく、利用者が希望する地点の映像を拡大表示させるこ
ともできない。さらに、発言者の地点が頻繁に替わる
と、表示映像も煩雑に変化し、利用者にとって見にくい
映像となる。In the above prior art,
Since there is only one criterion for selecting a video to be synthesized, it is not possible to synthesize a display video according to a user's desire or a meeting situation. For example, in the device described in Japanese Patent Application Laid-Open No. 2-125588, it is difficult to specify the speaker when the video at the point of the speaker is not specified by the user or when the video is synthesized in a small size. In the apparatus described in Japanese Patent Application Laid-Open No. 5-103324, each image is small because images at all points are combined, and an image at a point desired by the user cannot be displayed in an enlarged manner. Furthermore, if the point of the speaker changes frequently, the displayed image also changes in a complicated manner, making the image difficult for the user to see.
【０００４】そこで、本発明は、利用者の希望や会議の
状態により即した表示映像を合成することを目的とす
る。さらに、その表示映像をより見やすくすることを目
的とする。Accordingly, an object of the present invention is to synthesize a display image that is more suitable for a user's request and a state of a conference. It is another object of the present invention to make the displayed video more visible.
【０００５】[0005]
【課題を解決するための手段】上記目的を達成するた
め、本発明の多地点テレビ会議制御装置は、複数のテレ
ビ会議端末に個別の通信回線で接続され、前記各テレビ
会議端末より前記通信回線を介して映像信号と音声信号
を受信し、受信した信号を処理して得た映像信号と音声
信号を前記通信回線を介して前記各テレビ会議端末へ送
信する多地点テレビ会議制御装置であって、所定の基準
に従って、任意の１つの前記テレビ会議端末を指定する
第１の指定手段と、前記所定の基準とは異なる基準に従
って、任意の１つの前記テレビ会議端末を指定する第２
の指定手段と、前記第１および第２の指定手段が指定し
たテレビ会議端末より受信した２つの映像信号が表す各
映像が、表示画面上に予め割り当てられた２つの領域に
表示されるように、前記各テレビ会議端末へ送信する映
像信号を生成する信号生成手段とを備えることを特徴と
する。In order to achieve the above object, a multipoint video conference controller according to the present invention is connected to a plurality of video conference terminals via individual communication lines. A multi-point video conference control device for receiving a video signal and an audio signal via the communication line and transmitting a video signal and an audio signal obtained by processing the received signal to each of the video conference terminals via the communication line. First specifying means for specifying any one of the video conference terminals according to a predetermined criterion, and second specifying means for specifying any one of the video conference terminals according to a criterion different from the predetermined criterion.
And the respective images represented by the two video signals received from the video conference terminal specified by the first and second specifying means are displayed in two areas allocated on the display screen in advance. And a signal generating means for generating a video signal to be transmitted to each of the video conference terminals.
【０００６】この発明の多地点テレビ会議制御装置は、
互いに異なる２つの基準に従って２つの地点の映像を選
択し合成する。このため、例えば、利用者により指定さ
れた地点の映像と、現在発言中の参加者がいる地点の映
像とが同一画面上に表示されるような、利用者の希望や
会議の状況により即した表示映像を合成することができ
る。[0006] The multipoint video conference controller of the present invention comprises:
Images at two points are selected and synthesized according to two different criteria. For this reason, for example, the video of the point designated by the user and the video of the point where the participant who is currently speaking are displayed on the same screen are more suitable for the user's request and the meeting situation. Display images can be combined.
【０００７】また、本発明の多地点テレビ会議制御装置
は、前述の構成において、前記第１の指定手段は、前記
テレビ会議端末より受信した音声信号から現時点の発言
者の音声信号を認識し、認識した音声信号を送る前記テ
レビ会議端末を指定し、前記第２の指定手段は、前記第
１の指定手段が現時点で指定しているテレビ会議端末の
前に指定していたテレビ会議端末を指定し、前記信号生
成手段は、前記第１の指定手段が指定するテレビ会議端
末が変化した場合に、変化前に前記第１の指定手段が指
定していたテレビ会議端末からの映像信号が表す映像
が、変化後にも前記表示画面の同じ領域に表示されるよ
うに、前記映像信号の生成を行うことを特徴とする。Further, in the multipoint video conference control device according to the present invention, in the above-mentioned configuration, the first specifying means recognizes a voice signal of a present speaker from a voice signal received from the video conference terminal, The video conference terminal that sends the recognized audio signal is specified, and the second specifying means specifies the video conference terminal specified before the video conference terminal currently specified by the first specifying means. When the video conference terminal specified by the first specifying unit changes, the signal generating unit changes the video represented by the video signal from the video conference terminal specified by the first specifying unit before the change. However, the video signal is generated such that the video signal is displayed in the same area of the display screen even after the change.
【０００８】この発明の多地点テレビ会議制御装置で
は、現在の発言者の地点と前回の発言者の地点の２地点
の映像を選択・合成し、発言者が変わった場合には、前
回の発言者の地点の映像を続けて同じ領域に合成する。
これにより合成される表示映像は、特定の２地点の２人
が交互に発言をする場合に切り替わりが全くなく、３地
点以上の場合にも変化部分の少ない、利用者にとって見
やすい映像となる。[0008] In the multipoint video conference control device of the present invention, two images of the current speaker's point and the previous speaker's point are selected and synthesized, and when the speaker changes, the previous speaker's image is selected. The image of the person's point is continuously synthesized in the same area.
In this way, the display image synthesized is not changed at all when two people at specific two points speak alternately, and has little change even at three or more points.
【０００９】[0009]
【発明の実施の形態】以下で、本発明の実施形態を、図
面を用いて説明する。Embodiments of the present invention will be described below with reference to the drawings.
【００１０】図１は、本発明の第１の実施形態に係る多
地点テレビ会議制御装置のブロック図である。FIG. 1 is a block diagram of a multipoint video conference control device according to a first embodiment of the present invention.
【００１１】図１で、本実施形態の多地点テレビ会議制
御装置は、個別の伝送路１１〜１ｎで通信を行う回線制
御部２１〜２ｎと、映像信号の符号化・復号化を行う符
号化部１０１〜１０ｎ、復号化部３１〜３ｎと、音声符
号・復号化部１１１と、操作部６１と、切替制御回路部
６２と、ｎ入力１出力のセレクタＡ４１，Ｂ４２と、発
言者の音声信号を認識する話者認識回路部６３と、受信
映像のデータが格納されるフレームメモリＡ５１，Ｂ５
２と、２入力１出力のセレクタＣ８１と、表示映像のデ
ータが格納されるフレームメモリＣ９１と、表示映像の
生成を制御する映像合成制御部７１とを有する。In FIG. 1, a multipoint video conference control apparatus according to the present embodiment includes line control units 21 to 2n for communicating over individual transmission lines 11 to 1n, and an encoding unit for encoding and decoding video signals. Units 101 to 10n, decoding units 31 to 3n, an audio encoding / decoding unit 111, an operation unit 61, a switching control circuit unit 62, selectors A41 and B42 with n inputs and one output, and an audio signal of a speaker. And a frame memory A51, B5 storing received video data.
2, a selector C81 of two inputs and one output, a frame memory C91 storing data of a display video, and a video synthesis control unit 71 for controlling generation of a display video.
【００１２】本多地点テレビ会議制御装置は、伝送路１
１〜１ｎを介して最大ｎ個のテレビ会議端末と接続され
る。回線制御部２１〜２ｎは、接続されたテレビ会議端
末との間でＩＴＵ−Ｔ勧告Ｈ．２２１に従った通信を行
う。すなわち、映像信号と音声信号と制御データが時分
割で多重化された信号を各テレビ会議端末から個別に受
信して、各信号とデータを分離する。分離された各映像
信号は対応する復号化部３１〜３ｎで復号された後、セ
レクタＡ４１とセレクタＢ４２に送られる。切替制御回
路部６２は、管理者（例えば、会議の司会者）の操作部
６１への操作により指定された地点の映像信号、あるい
は、特定のテレビ会議端末から受信した制御データによ
り指定された地点の映像信号がフレームメモリＡ５１へ
送られるようにセレクタＡ４１を制御する。一方、話者
認識回路部６３は、受信信号より分離され、音声符号・
復号化部１１１で復号された各音声信号のレベルを比較
し、最もレベルの大きい音声信号を発言中の会議参加者
の音声信号と認識する。そして、認識した音声信号と同
じ伝送路より受信された映像信号がフレームメモリＢ５
２へ送られるようにセレクタＢ４２を制御する。[0012] The multipoint video conference control device includes a transmission line 1
Connected to a maximum of n video conference terminals via 1 to 1n. The line control units 21 to 2n communicate with the ITU-T Recommendation H.200 between the connected video conference terminals. 221 is performed. That is, a signal in which a video signal, an audio signal, and control data are multiplexed in a time-division manner is individually received from each video conference terminal, and each signal and data are separated. Each of the separated video signals is decoded by the corresponding one of the decoding units 31 to 3n, and then sent to the selector A41 and the selector B42. The switching control circuit unit 62 controls a video signal of a point designated by an operation of the manager (for example, a conference moderator) on the operation unit 61 or a point designated by control data received from a specific video conference terminal. The selector A41 is controlled so that the video signal is transmitted to the frame memory A51. On the other hand, the speaker recognition circuit 63 is separated from the received signal,
The level of each audio signal decoded by the decoding unit 111 is compared, and the audio signal having the highest level is recognized as the audio signal of the conference participant who is speaking. The video signal received from the same transmission path as the recognized audio signal is stored in the frame memory B5.
The selector B42 is controlled so as to be sent to the second selector.
【００１３】フレームメモリＡ５１，Ｂ５２は、それぞ
れセレクタＡ４１，Ｂ４２より送られた映像信号のデー
タを、映像合成制御部７１から送られるアドレス情報に
従って格納する一方、格納したデータを同じく映像合成
制御部７１から送られる読み出しアドレス情報に従って
読み出し、セレクタＣ８１へ送る。映像合成制御部７
は、上記読み出しアドレス情報の生成と同期して、セレ
クタＣ８１の制御と、フレームメモリＣ９１の書き込み
アドレス情報の生成および供給を行う。これにより、フ
レームメモリＣ９１には、フレームメモリＡ５１，Ｂ５
２の各受信映像を合成した表示映像のデータが格納され
る。The frame memories A51 and B52 store the video signal data sent from the selectors A41 and B42, respectively, according to the address information sent from the video synthesis control unit 71, and store the stored data in the same manner as the video synthesis control unit 71. The data is read out according to the read address information sent from the CPU and sent to the selector C81. Video composition control unit 7
Performs control of the selector C81 and generation and supply of write address information of the frame memory C91 in synchronization with generation of the read address information. Thus, the frame memories A51 and B5 are stored in the frame memory C91.
2 is stored as display video data obtained by synthesizing each received video.
【００１４】図２に、受信映像から表示映像が生成され
る様子を示す。図２で、映像２０１，２０３はそれぞれ
時刻ｔ０，ｔ１のフレームメモリＡ５１の受信映像を示
し、映像２０２，２０４はそれぞれ時刻ｔ０，ｔ１のフ
レームメモリＢ５２の受信映像を示す。また、映像２０
５は、時刻ｔ１の受信映像２０３，２０４の合成により
得られた表示映像を示す。セレクタＡ４１，Ｂ４２で切
り替えが生じた直後（時間ｔ０）、フレームメモリＡ５
１，Ｂ５２の受信映像は、映像２０２のように、正常な
１画面分の映像とならない。これによる表示映像の乱れ
を防ぐため、映像合成制御部７は、セレクタＡ４１，Ｂ
４２の切り替え直後の一定期間（同期が取れる時間ｔ１
まで）、フレームメモリＣ９１へのデータの格納を停止
する。FIG. 2 shows how a display image is generated from a received image. In FIG. 2, images 201 and 203 indicate received images of the frame memory A51 at times t0 and t1, respectively, and images 202 and 204 indicate received images of the frame memory B52 at times t0 and t1, respectively. In addition, video 20
Reference numeral 5 denotes a display image obtained by combining the received images 203 and 204 at time t1. Immediately after the switching occurs in the selectors A41 and B42 (time t0), the frame memory A5
The received video of 1, B52 does not become a normal one-screen video like the video 202. In order to prevent the display image from being disturbed by this, the image synthesis control unit 7 selects the selectors A41 and B41.
42 immediately after switching (time t1 at which synchronization can be achieved)
), Storage of data in the frame memory C91 is stopped.
【００１５】また、映像合成制御部７は、フレームメモ
リＡ５１，Ｂ５２の受信映像２０３，２０４の内、画面
の１／２幅の中央部分の映像Ａ２１０，Ｂ２１１のデー
タを走査線毎に順次読み出し、読み出したデータを選択
するようにセレクタ３を制御する。同時に、フレームメ
モリＣ９１に対しアドレス情報を与え、セレクタ３で選
択されたデータを格納させる。これにより、フレームメ
モリＣ９１の各ラインには、初めの１／２ラインに映像
Ａ２１０の画面の中央１ライン分のデータが格納され、
残りの１／２ラインに映像Ｂ２１１の画面の中央１ライ
ン分のデータが格納される。このようにして、受信映像
の中央部分の映像Ａ２１０，Ｂ２１１がそれぞれ画面左
半分と右半分に合成された表示映像２０５のデータがフ
レームメモリＣ９１に格納される。The video synthesizing control section 7 sequentially reads out data of the video images A210 and B211 at the center of a half width of the screen from the received video images 203 and 204 of the frame memories A51 and B52 for each scanning line. The selector 3 is controlled so as to select the read data. At the same time, address information is given to the frame memory C91 to store the data selected by the selector 3. As a result, in each line of the frame memory C91, the data of one line at the center of the screen of the video A210 is stored in the first half line,
The data of one line at the center of the screen of the image B211 is stored in the remaining 1/2 line. In this manner, the data of the display image 205 in which the images A210 and B211 of the central part of the received image are combined in the left half and the right half of the screen, respectively, is stored in the frame memory C91.
【００１６】フレームメモリＣ９１に格納された表示映
像のデータは、順次読み出され、符号化部１０１〜１０
ｎで符号化された後、回線制御部２１〜２ｎへ送られ
る。回線制御部２１〜２ｎでは、符号化された映像信号
と、音声符号・復号化部１１１で符号化された音声信号
とを多重し、伝送路１１〜１ｎを介して各テレビ会議端
末へ送る。この送信信号に応じて各テレビ会議端末で
は、管理者が選択した地点の映像と、発言者のいる地点
の映像とが１つの画面に合成された表示映像が表示され
る。The display video data stored in the frame memory C91 is sequentially read out, and the
After being coded by n, it is sent to the line controllers 21 to 2n. The line controllers 21 to 2n multiplex the encoded video signal and the audio signal encoded by the audio encoder / decoder 111, and send the multiplexed signal to each video conference terminal via the transmission lines 11 to 1n. In response to this transmission signal, each video conference terminal displays a display image in which the video of the location selected by the administrator and the video of the location where the speaker is present are combined on one screen.
【００１７】図３に、表示映像の切り替わりの一例を示
す。図３で、表示映像３０３の画面左半分の領域Ａ３０
１には地点１の映像が表示され、右半分の領域Ｂ３０２
には発言者のいる地点２の映像が表示されている。この
状態で、地点２の参加者に代わり地点３の参加者が発言
を始めると、話者認識回路部６３の制御により地点３の
映像が選択され、これにより、表示映像３０４の領域Ｂ
３０２には、地点２の映像に代わって地点３の映像が表
示される。FIG. 3 shows an example of switching of the displayed image. In FIG. 3, an area A30 in the left half of the screen of the display image 303 is shown.
1 displays an image of the point 1 and a right half area B302.
Shows an image of the point 2 where the speaker is present. In this state, when the participant at the point 3 starts speaking instead of the participant at the point 2, the image of the point 3 is selected under the control of the speaker recognition circuit unit 63, whereby the area B of the display image 304 is selected.
At 302, the image of the point 3 is displayed instead of the image of the point 2.
【００１８】以上のように、本実施形態の多地点テレビ
会議制御装置によれば、管理者によって選択された地点
の映像と、現在の発言者の映像とを同一画面に表示する
映像信号を生成して、各テレビ会議端末に送ることがで
きる。なお、管理者は、会議の状況に即して任意の地点
の映像を選択することができる。As described above, according to the multipoint video conference control device of the present embodiment, a video signal for displaying the video of the location selected by the manager and the video of the current speaker on the same screen is generated. Then, it can be sent to each video conference terminal. In addition, the administrator can select an image at an arbitrary point according to the situation of the conference.
【００１９】図４は、第２の実施形態に係る多地点テレ
ビ会議制御装置のブロック図である。FIG. 4 is a block diagram of a multipoint video conference control device according to the second embodiment.
【００２０】図４で、本実施形態の多地点テレビ会議制
御装置は、図１の装置において、切替制御回路部６２の
代わりに、話者認識回路部６３からの情報に従ってセレ
クタＡ４１，Ｂ４２の両方を制御する切替制御回路部６
４を設けた構成をとる。切替制御回路部６４は、発言者
のいる地点が替わった場合に、それまでの発言者の地点
の映像は選択したまま、もう一方の映像として現在の発
言者の地点の映像を新たに選択する。これにより、現在
の発言者がいる地点の映像と、その前の発言者がいる地
点の映像とが合成された表示映像が生成され、各テレビ
会議端末において表示される。In FIG. 4, the multipoint video conference control device of the present embodiment differs from the device of FIG. 1 in that both the selectors A41 and B42 are used in accordance with information from the speaker recognition circuit 63 instead of the switching control circuit 62. Switching control circuit 6 for controlling the
4 is provided. When the point where the speaker is present changes, the switching control circuit unit 64 selects the image of the current speaker's point as the other image while keeping the image of the previous speaker's point selected. . As a result, a display image is generated in which the video of the current speaker's location and the video of the previous speaker's location are combined and displayed on each video conference terminal.
【００２１】図５に、表示映像の切り替わりの一例を示
す。図５で、表示映像３０５の画面左半分の領域Ａ３０
１に地点１の映像が表示され、右半分の領域Ｂ３０２に
は発言者のいる地点２の映像が表示されている。この状
態で発言者のいる地点が地点３に替わると、それまでの
発言者がいる地点２の映像はそのまま領域Ｂ３０２に表
示され、領域Ａ３０１には、地点１の映像に代わり新た
な発言者がいる地点３の映像が表示される。さらに、発
言者の地点が地点４に替わると、地点３の映像はそのま
ま領域Ａ３０１に表示され、領域Ｂ３０２には、地点２
の映像に代わり地点４の映像が表示される。FIG. 5 shows an example of switching of the displayed image. In FIG. 5, the area A30 in the left half of the screen of the display image 305
1, an image of the point 1 is displayed, and an image of the point 2 where the speaker is present is displayed in the right half area B302. When the point where the speaker is present changes to point 3 in this state, the image of point 2 where the speaker is present is displayed as it is in area B302, and a new speaker replaces the image of point 1 in area A301. The image of the point 3 where the user is located is displayed. Further, when the point of the speaker changes to the point 4, the image of the point 3 is displayed in the area A301 as it is, and the point 2 is displayed in the area B302.
The image of the point 4 is displayed instead of the image of.
【００２２】以上のように本実施形態の多地点テレビ会
議制御装置によれば、現在の発言者の映像と、その前の
発言者の映像を同一画面に表示する映像信号を生成し
て、各テレビ会議端末に送ることができる。また、前回
の発言者の映像を続けて同じ位置に表示するように映像
信号の生成を行うため、利用者にとって見やすい表示映
像を提供できる。As described above, according to the multipoint video conference control device of the present embodiment, a video signal for displaying the current speaker's video and the previous speaker's video on the same screen is generated. Can be sent to a video conference terminal. In addition, since the video signal is generated so that the video of the previous speaker is continuously displayed at the same position, a display video that is easy for the user to see can be provided.
【００２３】図６は、第３実施形態に係る多地点テレビ
会議制御装置のブロック図である。FIG. 6 is a block diagram of a multipoint video conference control device according to the third embodiment.
【００２４】本実施形態の多地点テレビ会議制御装置
は、図１の装置において、セレクタＡ４１、フレームメ
モリＡ５１、セレクタＣ８１、および、フレームメモリ
Ｃ９１を、各回線制御部２１〜２ｎに対応してそれぞれ
ｎ個に増やし、切替制御回路部６２の代わりに、各セレ
クタＡ４１を個別に制御するｎ個の切替制御回路部６５
を設けた構成をとる。In the multipoint video conference control apparatus of the present embodiment, the selector A41, frame memory A51, selector C81, and frame memory C91 in the apparatus of FIG. 1 are respectively associated with each of the line controllers 21 to 2n. n switching control circuit units 65 for individually controlling each selector A41 instead of the switching control circuit unit 62
Is adopted.
【００２５】各テレビ会議端末は、表示を希望する地点
を指定する制御データを多重化して多地点テレビ会議制
御装置へ送信する。本多地点テレビ会議制御装置の各回
線制御部２１〜２ｎは、受信信号から制御データ１３１
を分離し、対応する切替制御回路部６５に送る。各切替
制御回路部６５は、制御データに従って対応するセレク
タＡ４１を制御することで、テレビ会議端末から指定さ
れた地点の映像を対応するフレームメモリＡ５１に送
る。映像合成制御部７２は、各ｎ個のフレームメモリＡ
５１、セレクタＣ８１、および、フレームメモリＣ９１
を図２の方法でそれぞれ制御して、テレビ会議端末より
指定された地点の映像と、話者認識回路部６３により選
択された映像とが合成された表示映像を、テレビ会議端
末毎に生成する。生成された各表示映像は、対応する符
号化部１１〜１ｎと回線制御部２１〜２ｎを介して個別
にテレビ会議端末へ送信される。これにより、各地点の
テレビ会議端末では、自端末で指定した地点の映像と、
発言者がいる地点の映像とが１画面に合成された表示映
像が表示される。Each video conference terminal multiplexes control data designating a point desired to be displayed and transmits the multiplexed control data to the multipoint video conference control device. Each of the line controllers 21 to 2n of the multipoint video conference control device converts the control data 131 from the received signal.
Are separated and sent to the corresponding switching control circuit 65. Each switching control circuit section 65 sends the video at the point designated by the video conference terminal to the corresponding frame memory A51 by controlling the corresponding selector A41 according to the control data. The video composition control unit 72 includes n frame memories A
51, selector C81, and frame memory C91
Are respectively controlled by the method of FIG. 2 to generate, for each video conference terminal, a display video in which the video at the point designated by the video conference terminal and the video selected by the speaker recognition circuit unit 63 are synthesized. . Each of the generated display images is individually transmitted to the video conference terminal via the corresponding encoding unit 11 to 1n and the line control unit 21 to 2n. As a result, the video conference terminal at each location can display the video of the location designated by the terminal itself,
A display image is displayed in which the image of the point where the speaker is present is synthesized on one screen.
【００２６】以上の本実施形態の多地点テレビ会議制御
装置によれば、各テレビ会議端末に対し、その利用者が
見たい地点の映像と、現在の発言者がいる地点の映像と
を同時に表示する映像信号を生成して送ることができ
る。これにより、利用者は、自らの希望と会議の状況と
に即した表示映像を得ることができる。According to the multipoint video conference control apparatus of the present embodiment, the video of the point desired by the user and the video of the point where the current speaker is present are simultaneously displayed on each video conference terminal. Video signal to be generated and transmitted. As a result, the user can obtain a display image according to his / her wish and the situation of the meeting.
【００２７】図７は、第４の実施形態に係る多地点テレ
ビ会議制御装置のブロック図である。FIG. 7 is a block diagram of a multipoint video conference control device according to the fourth embodiment.
【００２８】本実施形態の多地点テレビ会議制御装置
は、図１の装置において、セレクタＢ４２、フレームメ
モリＢ５２、セレクタＣ８１、および、フレームメモリ
Ｃ９１を、各回線制御部２１〜２ｎに対応してそれぞれ
ｎ個に増やし、話者認識回路部６３の代わりに、図６の
ｎ個の切替制御回路部６５を設けた構成をとる。The multipoint video conference control apparatus of this embodiment differs from the apparatus shown in FIG. 1 in that a selector B42, a frame memory B52, a selector C81, and a frame memory C91 are respectively associated with the line controllers 21 to 2n. The number is increased to n, and instead of the speaker recognition circuit 63, n switching control circuits 65 in FIG. 6 are provided.
【００２９】フレームメモリＡ５１には、管理者より指
定された地点の映像が格納され、各フレームメモリＢ５
２には、各テレビ会議端末より指定された地点の映像が
格納される。そして、映像合成制御部７２は、管理者よ
り指定された地点の映像と、テレビ会議端末より指定さ
れた受信映像とが合成された表示映像を、テレビ会議端
末毎（回線制御部２１〜２ｎ毎）に生成する。生成され
た各表示映像は、対応する符号化部１１〜１ｎと回線制
御部２１〜２ｎを介して個別にテレビ会議端末へ送信さ
れる。これにより、各地点のテレビ会議端末では、管理
者が選択した地点の映像と、自端末で指定した地点の映
像とが１画面に合成された表示映像が表示される。The frame memory A51 stores an image of a point designated by the administrator, and stores the image data in each frame memory B5.
2 stores an image of a point designated by each video conference terminal. The video synthesizing control unit 72 then displays the display video in which the video at the location specified by the administrator and the received video specified by the video conference terminal are synthesized for each video conference terminal (for each line control unit 21 to 2n). ). Each of the generated display images is individually transmitted to the video conference terminal via the corresponding encoding unit 11 to 1n and the line control unit 21 to 2n. As a result, the video conference terminal at each location displays a display video in which the video of the location selected by the administrator and the video of the location designated by the terminal are combined on one screen.
【００３０】以上の本実施形態の多地点テレビ会議制御
装置によれば、各テレビ会議端末に対し、その利用者が
指定する地点の映像と、管理者が指定した地点の映像と
を同時に表示する映像信号を生成して送ることができ
る。According to the multipoint video conference control apparatus of the present embodiment, the video of the location specified by the user and the video of the location specified by the administrator are simultaneously displayed on each video conference terminal. Video signals can be generated and sent.
【００３１】図８は、第５の実施形態に係る多地点テレ
ビ会議制御装置のブロック図である。FIG. 8 is a block diagram of a multipoint video conference control device according to the fifth embodiment.
【００３２】本実施形態の多地点テレビ会議制御装置
は、図４の装置において、復号化部３１〜３ｎで復号さ
れた各映像信号を個別に格納するｎ個のフレームメモリ
Ｄ５３を追加し、セレクタＣ８１の代わりに、（ｎ＋
２）入力１出力のセレクタＣ８２を設けた構成をとる。
セレクタＣ８２は、フレームメモリＡ５１，Ｂ５２，Ｄ
５３から読み出されたデータを選択してフレームメモリ
Ｃ９１へ送る。映像合成制御部７３は、フレームメモリ
Ａ５１，Ｂ５２，Ｄ５３と、セレクタＣ８２と、フレー
ムメモリＣ９１を制御することで、現在および前回の発
言者のいる２地点の映像を画面上半分に合成し、全ての
地点の縮小映像を画面下半分に合成した表示映像を生成
する。The multipoint video conference control apparatus of this embodiment is different from the apparatus shown in FIG. 4 in that n frame memories D53 for individually storing the video signals decoded by the decoding units 31 to 3n are added, and a selector is provided. Instead of C81, (n +
2) A configuration in which a selector C82 of one input and one output is provided.
The selector C82 includes frame memories A51, B52, D
The data read from 53 is selected and sent to the frame memory C91. By controlling the frame memories A51, B52, and D53, the selector C82, and the frame memory C91, the video compositing control unit 73 composites the current and previous video at the two locations where the speakers are present in the upper half of the screen, and A display image is generated by combining the reduced image at the point of the image with the lower half of the screen.
【００３３】図９に、１８（＝ｎ）個のテレビ会議端末
が接続された場合の表示映像の構成例を示す。図９で、
表示映像４０１には、画面上半分に現在および前回の発
言者のいる２地点の映像４０２，４０３が合成され、下
半分に１８地点の全ての映像が縮小されて合成されてい
る。映像合成制御部７３は、表示映像４０１の画面上半
分で図２と同様の制御を行い、下半分では、水平方向に
６分割、垂直方向に３分割された各小領域４０４に各フ
レームメモリＤ５３の受信映像が合成されるように制御
を行う。映像合成制御部７３は、各小領域４０４に受信
映像を縮小して合成するために、各フレームメモリＤ５
３に格納されたデータを間引いて読み出す。なお、各フ
レームメモリＤ５３への格納時にデータを間引くように
してもよい。FIG. 9 shows a configuration example of a display video when 18 (= n) video conference terminals are connected. In FIG.
In the display image 401, images 402 and 403 of two points where the current and previous speakers are present are combined in the upper half of the screen, and all images of the 18 points are reduced and combined in the lower half. The video synthesis control unit 73 performs the same control as in FIG. 2 in the upper half of the screen of the display video 401, and in the lower half, stores each frame area D53 in each of the small areas 404 divided horizontally into six parts and vertically into three parts. Is controlled so that the received images are synthesized. The video compositing control unit 73 controls each frame memory D5 to reduce and composite the received video in each small area 404.
3 is read out by thinning out the data stored therein. Note that data may be thinned out when the data is stored in each frame memory D53.
【００３４】以上の本実施形態の多地点テレビ会議制御
装置によれば、現在の発言者の映像と、その前の発言者
の映像の他に、全ての地点の映像を同一画面に表示する
映像信号を生成して、各テレビ会議端末に送ることがで
きる。According to the multipoint video conference controller of the present embodiment described above, in addition to the image of the current speaker and the image of the previous speaker, the image of displaying all the points on the same screen. A signal can be generated and sent to each video conference terminal.
【００３５】ところで、図１、図６、図７の各装置に上
記ｎ個のフレームメモリＤ５３を追加し、セレクタＣ８
１の代わりに上記セレクタＣ８２を設けて多地点テレビ
会議制御装置を構成することも可能である。例えば、図
１の装置を用いて構成した場合、１画面の上半分の領域
に、管理者が選択した地点の映像と、話者のいる地点の
映像とが合成された表示画像を得ることができる。By the way, the above-mentioned n frame memories D53 are added to the respective devices shown in FIGS.
Instead of 1, the selector C82 may be provided to configure a multipoint video conference control device. For example, in the case of using the apparatus shown in FIG. 1, it is possible to obtain a display image in which an image of a point selected by an administrator and an image of a point where a speaker is present are synthesized in an upper half area of one screen. it can.
【００３６】このほかにも、以上の各実施形態の装置の
各部を組み合わせることで、より多様な表示映像を合成
・切り替えを行うことができる。例えば、図３、図５、
図９で説明した各表示映像の切り替えを、各テレビ会議
端末毎に、個別に実施することもできる。In addition, by combining the components of the apparatus of each of the above-described embodiments, it is possible to combine and switch more various display images. For example, FIGS. 3, 5,
The switching of each display image described in FIG. 9 can be individually performed for each video conference terminal.
【００３７】[0037]
【発明の効果】本発明によれば、利用者の希望や会議の
状況により即した表示映像を合成することができる。さ
らに、その表示映像をより見やすくすることができる。According to the present invention, it is possible to compose a display image more suited to the user's wishes and the situation of a conference. Further, the displayed image can be more easily viewed.
【図１】 本発明の第１実施形態に係る多地点テレビ会
議制御装置のブロック図。FIG. 1 is a block diagram of a multipoint video conference control device according to a first embodiment of the present invention.
【図２】 図２の装置における表示映像の合成方法を示
す図。FIG. 2 is a view showing a method of synthesizing a display image in the apparatus shown in FIG. 2;
【図３】 図２の装置における表示映像の切り替えの様
子を示す図。FIG. 3 is a view showing a state of switching of a display image in the apparatus of FIG. 2;
【図４】 本発明の第２実施形態に係る多地点テレビ会
議制御装置のブロック図。FIG. 4 is a block diagram of a multipoint video conference control device according to a second embodiment of the present invention.
【図５】 図４の装置における表示映像の切り替えの様
子を示す図。FIG. 5 is a view showing a state of switching of a display image in the apparatus of FIG. 4;
【図６】 本発明の第３実施形態に係る多地点テレビ会
議制御装置のブロック図。FIG. 6 is a block diagram of a multipoint video conference control device according to a third embodiment of the present invention.
【図７】 本発明の第４実施形態に係る多地点テレビ会
議制御装置のブロック図。FIG. 7 is a block diagram of a multipoint video conference control device according to a fourth embodiment of the present invention.
【図８】 本発明の第５実施形態に係る多地点テレビ会
議制御装置のブロック図。FIG. 8 is a block diagram of a multipoint video conference control device according to a fifth embodiment of the present invention.
【図９】 図８の装置における表示映像の構成を示す
図。FIG. 9 is a view showing a configuration of a display image in the apparatus of FIG. 8;
１１〜１ｎ…伝送路、２１〜２ｎ…回線制御部、３１〜
３ｎ…映像信号復号化部、４１…セレクタＡ、４２…セ
レクタＢ、５１…フレームメモリＡ、５２…フレームメ
モリＢ、５３…フレームメモリＤ、６１…操作部、６
２，６４，６５…切替制御回路部、６３…話者認識回路
部、７１，７２，７３…映像合成制御部、８１，８２…
セレクタＣ、９１…フレームメモリＣ、１０１〜１０ｎ
…映像信号符号化部、１１１…音声信号符号・復号化
部、２０１，２０３…セレクタＡの出力映像、２０２，
２０４…セレクタＢの出力映像、３０３〜３０７，４０
１…合成した表示映像、４０４…一地点分の表示領域。11-1n: transmission line, 21-2n: line controller, 31-
3n: video signal decoding unit, 41: selector A, 42: selector B, 51: frame memory A, 52: frame memory B, 53: frame memory D, 61: operation unit, 6
2, 64, 65 ... switching control circuit section, 63 ... speaker recognition circuit section, 71, 72, 73 ... video synthesis control section, 81, 82 ...
Selector C, 91 ... Frame memory C, 101-10n
... video signal encoding unit, 111 ... audio signal encoding / decoding unit, 201, 203 ... output video of selector A, 202,
204: output video of selector B, 303 to 307, 40
1 ... display image combined, 404 ... display area for one point.
───────────────────────────────────────────────────── フロントページの続き (72)発明者 石田 清 神奈川県横浜市戸塚区戸塚町216番地 株 式会社日立製作所情報通信事業部内 ──────────────────────────────────────────────────続 き Continuing on the front page (72) Inventor Kiyoshi Ishida 216 Totsuka-cho, Totsuka-ku, Yokohama-shi, Kanagawa Prefecture
Claims (7)
接続され、前記各テレビ会議端末より前記通信回線を介
して映像信号と音声信号を受信し、受信した信号を処理
して得た映像信号と音声信号を前記通信回線を介して前
記各テレビ会議端末へ送信する多地点テレビ会議制御装
置であって、 所定の基準に従って、任意の１つの前記テレビ会議端末
を指定する第１の指定手段と、 前記所定の基準とは異なる基準に従って、任意の１つの
前記テレビ会議端末を指定する第２の指定手段と、 前記第１および第２の指定手段が指定したテレビ会議端
末より受信した２つの映像信号が表す各映像が、表示画
面上に予め割り当てられた２つの領域に表示されるよう
に、前記各テレビ会議端末へ送信する映像信号を生成す
る信号生成手段とを備えることを特徴とする多地点テレ
ビ会議制御装置。An image obtained by processing a received signal by receiving a video signal and an audio signal from each of the video conference terminals via the communication line and connecting to the plurality of video conference terminals via individual communication lines. A multipoint video conference control device for transmitting a signal and a voice signal to each of the video conference terminals via the communication line, wherein a first specifying means for specifying any one of the video conference terminals according to a predetermined standard And a second designation unit that designates any one of the video conference terminals according to a criterion different from the predetermined criterion; and a second designation unit that receives from the video conference terminals designated by the first and second designation units. Signal generating means for generating a video signal to be transmitted to each of the video conference terminals so that each video represented by the video signal is displayed in two areas allocated in advance on a display screen. Multipoint video conference control device according to claim.
であって、 任意の１つの前記テレビ会議端末を指定する制御信号を
前記通信回線を介して前記各テレビ会議端末より受信す
る手段を備え、 前記第１の指定手段は、操作を受け付け、受け付けた操
作に応じて、もしくは、所定の前記テレビ端末より受信
した制御信号に従い、前記テレビ会議端末を指定し、 前記第２の指定手段は、前記テレビ会議端末より受信し
た音声信号から現時点の発言者の音声信号を認識し、認
識した音声信号を送る前記テレビ会議端末を指定するこ
とを特徴とする多地点テレビ会議制御装置。2. The multipoint video conference control device according to claim 1, further comprising: means for receiving a control signal designating any one of the video conference terminals from each of the video conference terminals via the communication line. The first designating means receives an operation, and designates the video conference terminal in accordance with the accepted operation or in accordance with a control signal received from a predetermined television terminal. A multi-point video conference control device, which recognizes a voice signal of a present speaker from a voice signal received from the video conference terminal, and specifies the video conference terminal to which the recognized voice signal is to be transmitted.
であって、 任意の１つの前記テレビ会議端末を指定する制御信号を
前記通信回線を介して前記各テレビ会議端末より受信す
る手段を備え、 前記第１の指定手段は、前記各テレビ会議端末毎に、当
該テレビ会議端末より受信した制御信号が指定するテレ
ビ会議端末を指定し、 前記信号生成手段は、前記各テレビ会議端末毎に、前記
映像信号の生成を行い、 生成された前記各テレビ会議端末毎の映像信号は、対応
するテレビ会議端末へ送信されることを特徴とする多地
点テレビ会議制御装置。3. The multipoint video conference control device according to claim 1, further comprising: means for receiving a control signal designating any one of the video conference terminals from each of the video conference terminals via the communication line. Wherein the first specifying means specifies, for each of the video conference terminals, a video conference terminal specified by a control signal received from the video conference terminal; and the signal generation means includes, for each of the video conference terminals, And generating the video signal, and transmitting the generated video signal of each video conference terminal to a corresponding video conference terminal.
会議制御装置であって、 前記信号生成手段は、前記２つの映像信号が表す各映像
の中央部の映像が前記表示画面の２つの領域に表示され
るように、前記映像信号の生成を行うことを特徴とする
多地点テレビ会議制御装置。4. The multipoint video conference control device according to claim 1, 2 or 3, wherein the signal generating means is configured to display an image at the center of each image represented by the two image signals on the display screen. The multi-point video conference control device, wherein the video signal is generated so as to be displayed in two areas.
であって、 前記第１の指定手段は、前記テレビ会議端末より受信し
た音声信号から現時点の発言者の音声信号を認識し、認
識した音声信号を送る前記テレビ会議端末を指定し、 前記第２の指定手段は、前記第１の指定手段が現時点で
指定しているテレビ会議端末の前に指定していたテレビ
会議端末を指定し、 前記信号生成手段は、前記第１の指定手段が指定するテ
レビ会議端末が変化した場合に、変化前に前記第１の指
定手段が指定していたテレビ会議端末からの映像信号が
表す映像が、変化後にも前記表示画面の同じ領域に表示
されるように、前記映像信号の生成を行うことを特徴と
する多地点テレビ会議制御装置。5. The multipoint video conference control device according to claim 1, wherein the first designating means recognizes a voice signal of a present speaker from a voice signal received from the video conference terminal and recognizes the voice signal. Specifying the video conference terminal that sends the converted audio signal, the second specifying means specifying the video conference terminal specified before the video conference terminal currently specified by the first specifying means. The signal generation unit, when the video conference terminal specified by the first specifying unit changes, the video represented by the video signal from the video conference terminal specified by the first specifying unit before the change is displayed. The multi-point video conference control device, wherein the video signal is generated so that the video signal is displayed in the same area of the display screen even after the change.
点テレビ会議制御装置であって、 前記信号生成手段は、前記表示画面の２つの領域以外の
領域に、前記通信回線より受信した全ての映像信号が表
す各映像が縮小表示されるように、前記映像信号の生成
を行うことを特徴とする多地点テレビ会議制御装置。6. The multipoint video conference control device according to claim 1, 2, 3, 4, or 5, wherein the signal generation means transmits the communication line to an area other than two areas of the display screen. A multipoint video conference control device, wherein the video signal is generated so that each video represented by all received video signals is reduced and displayed.
であって、 前記第２の指定手段は、所定の前記テレビ端末より受信
した制御信号が指定する前記テレビ会議端末を指定する
ことを特徴とする多地点テレビ会議制御装置。7. The multipoint video conference control device according to claim 3, wherein the second specifying means specifies the video conference terminal specified by a control signal received from a predetermined TV terminal. Characteristic multipoint video conference controller.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP8156872A JPH1013803A (en) | 1996-06-18 | 1996-06-18 | Multi-point video conference controller |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP8156872A JPH1013803A (en) | 1996-06-18 | 1996-06-18 | Multi-point video conference controller |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH1013803A true JPH1013803A (en) | 1998-01-16 |
Family
ID=15637243
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP8156872A Pending JPH1013803A (en) | 1996-06-18 | 1996-06-18 | Multi-point video conference controller |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH1013803A (en) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008061220A (en) * | 2006-06-16 | 2008-03-13 | Ericsson Ab | Conference layout control and control protocol |
| JP2012205274A (en) * | 2011-03-28 | 2012-10-22 | Nec Corp | Multipoint connection device, multipoint video conference system, display control method and display control program |
| US8451315B2 (en) | 2010-11-30 | 2013-05-28 | Hewlett-Packard Development Company, L.P. | System and method for distributed meeting capture |
| JP2018007198A (en) * | 2016-07-08 | 2018-01-11 | Kddi株式会社 | Decoding device, program and server |
-
1996
- 1996-06-18 JP JP8156872A patent/JPH1013803A/en active Pending
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008061220A (en) * | 2006-06-16 | 2008-03-13 | Ericsson Ab | Conference layout control and control protocol |
| US8451315B2 (en) | 2010-11-30 | 2013-05-28 | Hewlett-Packard Development Company, L.P. | System and method for distributed meeting capture |
| JP2012205274A (en) * | 2011-03-28 | 2012-10-22 | Nec Corp | Multipoint connection device, multipoint video conference system, display control method and display control program |
| JP2018007198A (en) * | 2016-07-08 | 2018-01-11 | Kddi株式会社 | Decoding device, program and server |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JPH10150647A (en) | Videoconference system | |
| JPH0795242A (en) | Communication terminal and communication method | |
| JPH09149396A (en) | Multi-spot television conference system | |
| US5325194A (en) | Multipoint video conferencing system | |
| JP2000253374A (en) | Video conference control system and video conference system | |
| US6198500B1 (en) | Multi-point conference system and conference terminal device | |
| JP3097736B2 (en) | Multi-screen transmission type multi-point video conference system | |
| US6211902B1 (en) | Video conference control apparatus, video conference control method, and video conference control system | |
| JP2003023612A (en) | Image communication terminal | |
| JPH1013803A (en) | Multi-point video conference controller | |
| JP2000115737A (en) | Multi-point video conference system | |
| JPH0983987A (en) | Inter-multi-point communication controller | |
| JP3189869B2 (en) | Multipoint video conference system | |
| JP2698100B2 (en) | Multipoint video conference controller | |
| JPH08321884A (en) | Multi-spot video conference system | |
| JP3133570B2 (en) | Multipoint conference system and multiple access equipment | |
| JP2823571B2 (en) | Distributed multipoint teleconferencing equipment | |
| JPH08181961A (en) | Video conference terminal equipment | |
| JPH08205115A (en) | Screen compositing and encoding device | |
| JPH06209470A (en) | Video transmission processing unit | |
| JPS62108692A (en) | Inter-multiple points television conference system | |
| JPH10126757A (en) | Video conference system | |
| JPH06152765A (en) | Video conference system | |
| JP3123685B2 (en) | Group video communication system | |
| JPH07288790A (en) | Multi-spot videoconference system and its terminal |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040106 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20040713 |