JP2016134781A - Information processing device, voice output method, program and communication system - Google Patents

Information processing device, voice output method, program and communication system Download PDF

Info

Publication number
JP2016134781A
JP2016134781A JP2015008513A JP2015008513A JP2016134781A JP 2016134781 A JP2016134781 A JP 2016134781A JP 2015008513 A JP2015008513 A JP 2015008513A JP 2015008513 A JP2015008513 A JP 2015008513A JP 2016134781 A JP2016134781 A JP 2016134781A
Authority
JP
Japan
Prior art keywords
terminal
communication
transmission
limited communication
terminals
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2015008513A
Other languages
Japanese (ja)
Inventor
芳和 後藤
Yoshikazu Goto
芳和 後藤
浅井 貴浩
Takahiro Asai
貴浩 浅井
井上 浩一
Koichi Inoue
浩一 井上
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2015008513A priority Critical patent/JP2016134781A/en
Publication of JP2016134781A publication Critical patent/JP2016134781A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an information processing device, a program and a system, capable of flexibly changing a terminal device of limitation communication.SOLUTION: A transmission device system 50, which controls the transmission destination of image data transmitted from a terminal, includes: a state management unit 53 which causes a relay device 30 to transmit image data from one transmission terminal 10 to a mobile terminal 20 which is another terminal among a plurality of terminals; a transmission and reception unit 51 which receives from the transmission terminal 10 a communication start request in which one or more mobile terminals 20 among the plurality of terminals is designated; and a limitation communication control unit 58 which causes the relay device 30 to relay voice data either from the transmission terminal 10 to the mobile terminal 20 or from the mobile terminal 20 to the transmission terminal 10 only.SELECTED DRAWING: Figure 5

Description

本発明は、情報処理装置、音声出力方法、プログラム及びコミュニケーションシステムに関する。   The present invention relates to an information processing apparatus, an audio output method, a program, and a communication system.

インターネット等の通信ネットワークを介して、複数の端末装置間でテレビ会議を行う伝送システムの一例としてテレビ会議システムが知られている。このようなテレビ会議システムでは、一方の端末装置から画像データ及び音声データを送信する。他方の端末装置はこの画像データ及び音声データを受信し、ディスプレイ等に画像を表示したり、スピーカーから音声を出力したりすることで、これらの端末装置間でテレビ会議を行うことができる。   A video conference system is known as an example of a transmission system that performs a video conference between a plurality of terminal devices via a communication network such as the Internet. In such a video conference system, image data and audio data are transmitted from one terminal device. The other terminal device receives the image data and the sound data, displays an image on a display or the like, or outputs sound from a speaker, so that a video conference can be held between these terminal devices.

このような多拠点によるテレビ会議において、一方の参加者が他方のある参加者とだけ会話を行いたい場合がある。すなわち、Aさん、Bさん、Cさんの三人の参加者がいる状況で(拠点が3箇所ある状況)、AさんがBさんには聞こえないようにCさんとだけ会話したい場合である。以下、このような通信を限定通信と称することとする。   In such a multi-site video conference, there is a case where one participant wants to talk only with another participant. That is, in a situation where there are three participants, Mr. A, Mr. B, and Mr. C (a situation where there are three bases), he wants to talk only with Mr. C so that Mr. A cannot be heard by Mr. B. Hereinafter, such communication is referred to as limited communication.

限定通信の一態様として、特定の端末間で非公開の連絡ができる分散会議システムが考案されている(例えば、特許文献1参照。)。特許文献1には、予め定められた特定の端末からの通信を非公開にするという記載がある。また、限定通信の一態様として、全員参加する全体会議モードで会議開催中に参加者がグループ会議に参加することができる多地点制御装置が考案されている(例えば、特許文献2参照。)。特許文献2では、特定の話題が議論される複数のグループ会議が設けられ、希望者はそれぞれのグループ会議に参加し、各グループ会議では他のグループ会議に属する端末に排他的な通信セッションが確立される。   As one aspect of limited communication, a distributed conference system has been devised that enables non-disclosure contact between specific terminals (see, for example, Patent Document 1). Patent Document 1 describes that communication from a specific terminal set in advance is not disclosed. In addition, as an aspect of limited communication, a multipoint control device has been devised in which participants can participate in a group conference while the conference is being held in the general conference mode in which everyone participates (see, for example, Patent Document 2). In Patent Document 2, a plurality of group meetings are provided in which specific topics are discussed, and applicants participate in each group meeting. In each group meeting, an exclusive communication session is established with terminals belonging to other group meetings. Is done.

しかしながら、従来の限定通信では、ユーザが限定通信する相手を柔軟に選択できないという問題がある。例えば、特許文献1では限定通信に参加する端末が予め定められているため、参加者がいったん会議に参加した後は限定通信に参加したり離脱したりすることができない。また、特許文献2では、設定されたグループ会議に参加者が参加の有無を選択するので、ある参加者にとって限定通信したい相手が同じグループ会議に参加しているとは限らないし、限定通信したくない相手が同じグループに参加しているおそれがある。   However, in the conventional limited communication, there is a problem that the user cannot flexibly select a partner with which limited communication is performed. For example, in Patent Document 1, since a terminal that participates in limited communication is determined in advance, once a participant has joined the conference, the participant cannot participate in or leave the limited communication. Further, in Patent Document 2, since the participant selects whether or not to participate in the set group meeting, the other party who wants to perform limited communication for a certain participant does not always participate in the same group meeting and wants to perform limited communication. There is a possibility that the other party is in the same group.

本発明は、上記課題に鑑み、限定通信する端末装置を柔軟に変更可能な情報処理装置を提供することを目的とする。   In view of the above problems, an object of the present invention is to provide an information processing apparatus capable of flexibly changing a terminal apparatus for limited communication.

上記課題に鑑み、本発明は、端末が送信する画像データの送信先を制御する情報処理装置であって、中継手段に対し、一方の端末から複数の他方の端末に画像データを中継させる第1の中継制御手段と、複数の端末のうち1つ以上の第2の端末が指定された通信開始要求を第1の端末から受信する受信手段と、中継手段に対し、前記第1の端末から前記第2の端末へ又は前記第2の端末から前記第1の端末へのみ音声データを中継させる第2の中継制御手段と、を有する。   In view of the above problems, the present invention is an information processing apparatus that controls a transmission destination of image data transmitted by a terminal, wherein the relay unit relays image data from one terminal to a plurality of other terminals. Relay control means, a receiving means for receiving a communication start request in which one or more second terminals among a plurality of terminals are designated from the first terminal, and the relay means from the first terminal to the communication terminal. Second relay control means for relaying voice data only to the second terminal or from the second terminal to the first terminal.

限定通信する端末装置を柔軟に変更可能な情報処理装置を提供することができる。   It is possible to provide an information processing apparatus capable of flexibly changing a terminal apparatus for limited communication.

伝送システムの一例の概略図である。It is the schematic of an example of a transmission system. 伝送端末のハードウェア構成について説明する。A hardware configuration of the transmission terminal will be described. 携帯端末のハードウェア構成図の一例である。It is an example of the hardware block diagram of a portable terminal. 伝送管理システム、中継装置、及び、プログラム提供システムのハードウェア構成図の一例である。It is an example of the hardware block diagram of a transmission management system, a relay apparatus, and a program provision system. 伝送システムを構成する各端末、装置及びシステムの機能ブロック図の一例である。It is an example of the functional block diagram of each terminal, apparatus, and system which comprise a transmission system. 複数の伝送端末の間で通信を開始する準備段階の処理を示したシーケンス図の一例である。It is an example of the sequence diagram which showed the process of the preparation stage which starts communication between several transmission terminals. 複数の端末の間でセッションを確立する処理の一例のシーケンス図である。It is a sequence diagram of an example of the process which establishes a session between several terminals. 伝送システムにおける画像データ、音声データ、及び、各種管理情報の送受信の状態を示した概念図である。It is the conceptual diagram which showed the state of transmission / reception of the image data in a transmission system, audio | voice data, and various management information. テレビ会議の開催中にディスプレイ又は表示装置に表示される会議画面の一例を示す図である。It is a figure which shows an example of the conference screen displayed on a display or a display device during holding of a video conference. 伝送端末のディスプレイ又は携帯端末の表示装置に表示される限定通信の宛先選択画面(ユーザインタフェース1)の一例を示す図である。It is a figure which shows an example of the destination selection screen (user interface 1) of the limited communication displayed on the display of a transmission terminal, or the display apparatus of a portable terminal. 限定通信中画面の一例を示す図である。It is a figure which shows an example of the screen during limited communication. IPアドレスが近い順に表示領域に画像データが表示された限定通信の宛先選択画面の一例を示す図である。FIG. 10 is a diagram illustrating an example of a limited communication destination selection screen in which image data is displayed in a display area in order of IP address. 限定通信を開始する伝送端末の処理手順を示すフローチャート図の一例である。It is an example of the flowchart figure which shows the process sequence of the transmission terminal which starts limited communication. 伝送端末のディスプレイ又は携帯端末の表示装置に表示される限定通信の宛先選択画面(ユーザインタフェース2)の一例を示す図である。It is a figure which shows an example of the destination selection screen (user interface 2) of the limited communication displayed on the display of a transmission terminal, or the display apparatus of a portable terminal. ユーザインタフェース2の別の一例を示す図である。It is a figure which shows another example of the user interface. IPアドレスが近い順に表示領域に画像データが表示された限定通信の宛先選択画面の一例を示す図である。FIG. 10 is a diagram illustrating an example of a limited communication destination selection screen in which image data is displayed in a display area in order of IP address. 限定通信を開始する伝送端末の処理手順を示すフローチャート図の一例である。It is an example of the flowchart figure which shows the process sequence of the transmission terminal which starts limited communication. 伝送端末のディスプレイ又は携帯端末の表示装置に表示される限定通信の宛先選択画面(ユーザインタフェース3)の一例を示す図である。It is a figure which shows an example of the destination selection screen (user interface 3) of the limited communication displayed on the display of a transmission terminal, or the display apparatus of a portable terminal. 限定通信を開始する伝送端末の処理手順を示すフローチャート図の一例である。It is an example of the flowchart figure which shows the process sequence of the transmission terminal which starts limited communication. 伝送端末10abが伝送端末10aaとの限定通信を開始する手順を示すシーケンス図の一例である。It is an example of the sequence diagram which shows the procedure in which the transmission terminal 10ab starts limited communication with the transmission terminal 10aa. 伝送端末のディスプレイに表示される限定通信要求通知画面の一例を示す図である。It is a figure which shows an example of the limited communication request notification screen displayed on the display of a transmission terminal. 複数の限定通信の宛先端末を含む限定通信開始要求が送信された場合に伝送管理システムが行う処理の手順を示すフローチャート図の一例である。It is an example of the flowchart figure which shows the procedure of the process which a transmission management system performs when the limited communication start request | requirement containing the several destination terminal of limited communication is transmitted. 図20のステップS6の処理の詳細を説明するフローチャート図の一例である(ユーザインタフェース1,2)。It is an example of the flowchart figure explaining the detail of the process of FIG.20 S6 (user interface 1, 2). スピーカー音量の調整を説明する図の一例である。It is an example of the figure explaining adjustment of a speaker volume. 図20のステップS6の処理の詳細を説明するフローチャート図の一例である(ユーザインタフェース3)。It is an example of the flowchart figure explaining the detail of the process of FIG.20 S6 (user interface 3). ユーザインタフェース3の場合に伝送管理システムが限定通信に関する制御を行う手順を示すフローチャート図の一例である。It is an example of the flowchart figure which shows the procedure in which the transmission management system performs control regarding limited communication in the case of the user interface 3.

以下、本発明を実施するための形態について、図面を参照しながら詳細に説明する。   Hereinafter, embodiments for carrying out the present invention will be described in detail with reference to the drawings.

<用語について>
本実施形態で使用する用語について説明する。
拠点…端末装置(後述する伝送端末や携帯端末)が配置又は携帯されておりユーザが会議を行っている場所を意味している。拠点と端末装置は同様の意味として使用される場合がある。1つの拠点に複数の端末装置が配置されてもよい。
限定通信…N個の拠点間において少なくとも画像データが通信されている状況において、N個より少ない拠点間でのみ音声データが送受信される通信。
<Terminology>
Terms used in this embodiment will be described.
Base: means a place where a terminal device (a transmission terminal or a portable terminal, which will be described later) is arranged or carried and the user is having a meeting. The base and the terminal device may be used as the same meaning. A plurality of terminal devices may be arranged at one base.
Limited communication: Communication in which audio data is transmitted and received only between fewer than N sites in a situation where at least image data is communicated between N sites.

<全体構成>
図1は、本実施形態に係る伝送システム1の一例の概略図である。伝送システム1は、伝送管理システム50を介して複数の伝送端末間で情報や感情等を相互に伝達するためのコミュニケーションシステムである。伝送システム1には、テレビ会議システム、テレビ電話システム、音声会議システム、音声電話システム、PC(Personal Computer)画面共有システム、テキストチャットシステム等が例として挙げられる。また、伝送システム1には、伝送管理システム50を介して一方の伝送端末から他方の伝送端末に一方向でコンテンツデータを伝送するデータ提供システムが含まれる。
<Overall configuration>
FIG. 1 is a schematic diagram of an example of a transmission system 1 according to the present embodiment. The transmission system 1 is a communication system for mutually transmitting information, emotions, and the like between a plurality of transmission terminals via the transmission management system 50. Examples of the transmission system 1 include a video conference system, a video phone system, a voice conference system, a voice phone system, a PC (Personal Computer) screen sharing system, and a text chat system. The transmission system 1 includes a data providing system that transmits content data in one direction from one transmission terminal to the other transmission terminal via the transmission management system 50.

本実施形態では、コミュニケーションシステムの一例としてのテレビ会議を行うことができるシステムを想定して説明する。   In the present embodiment, a description will be given assuming a system capable of performing a video conference as an example of a communication system.

図1に示されている伝送システム1は、複数の伝送端末(10aa,10ab,・・・)、複数の携帯端末(20aa,20ab,・・・)、各伝送端末(10aa,10ab,・・・)用のディスプレイ(120aa,120ab,・・・)、複数の中継装置(30a,30b,・・・)、伝送管理システム50、及び、プログラム提供システム90によって構築されている。   1 includes a plurality of transmission terminals (10aa, 10ab,...), A plurality of portable terminals (20aa, 20ab,...), And each transmission terminal (10aa, 10ab,...). .) Display (120aa, 120ab,...), A plurality of relay devices (30a, 30b,...), A transmission management system 50, and a program providing system 90.

複数の伝送端末10は、コンテンツデータの一例としての画像データ及び音声データの送受信を行う。すなわち、複数の伝送端末10は、テレビ会議サービスを利用することができるテレビ会議端末である。本実施形態では、伝送端末10はテレビ会議に専用の端末であるとする。   The plurality of transmission terminals 10 transmit and receive image data and audio data as an example of content data. That is, the plurality of transmission terminals 10 are video conference terminals that can use the video conference service. In the present embodiment, it is assumed that the transmission terminal 10 is a terminal dedicated to a video conference.

他方、複数の携帯端末20は、コンテンツデータの一例としての画像データ及び音声データの送受信を行う。携帯端末20はテキストデータを送受信可能であってもよい。すなわち、複数の携帯端末20は、テレビ会議だけでなく、テキストチャットを利用できてもよい。本実施形態では、携帯端末20は、特に断らない限り、タブレット型端末、携帯電話、スマートフォン、PDA(Personal Digital Assistant)、ウェアラブルPC、ゲーム機器、汎用PC端末、カーナビゲーション端末、プロジェクタなどの投影装置、電子黒板などの汎用の携帯端末であるとする。なお、携帯端末20は、例えば携帯電話通信網やWiFi(Wireless Fidelity)などを介して通信ネットワーク2に無線で接続されている。   On the other hand, the plurality of portable terminals 20 transmit and receive image data and audio data as examples of content data. The mobile terminal 20 may be able to send and receive text data. That is, the plurality of mobile terminals 20 may be able to use not only a video conference but also text chat. In this embodiment, unless otherwise specified, the mobile terminal 20 is a projection device such as a tablet-type terminal, a mobile phone, a smartphone, a PDA (Personal Digital Assistant), a wearable PC, a game device, a general-purpose PC terminal, a car navigation terminal, and a projector. Suppose that it is a general-purpose portable terminal such as an electronic blackboard. Note that the mobile terminal 20 is wirelessly connected to the communication network 2 via, for example, a mobile phone communication network or WiFi (Wireless Fidelity).

後述するハードウェア構成から明らかなように伝送端末10及び携帯端末20は情報処理装置と称される。   As is clear from the hardware configuration described later, the transmission terminal 10 and the portable terminal 20 are referred to as an information processing apparatus.

伝送端末10及び携帯端末20は、コミュニケーションシステムの呼制御を管理する伝送管理システム50により管理される。   The transmission terminal 10 and the portable terminal 20 are managed by a transmission management system 50 that manages call control of the communication system.

なお、以下では、複数の伝送端末(10aa,10ab,・・・)のうちの任意の伝送端末は「伝送端末10」と表され、複数の携帯端末(20aa,20ab,・・・)のうちの任意の携帯端末は「携帯端末20」と表されている。   In the following, an arbitrary transmission terminal among a plurality of transmission terminals (10aa, 10ab,...) Is represented as “transmission terminal 10”, and among a plurality of portable terminals (20aa, 20ab,...). The arbitrary mobile terminal is indicated as “mobile terminal 20”.

また、複数のディスプレイ(120aa,120ab,・・・)のうち任意のディスプレイは「ディスプレイ120」と表され、複数の中継装置(30a,30b,・・・)のうち任意の中継装置は「中継装置30」と表されている。さらに、一方の伝送端末10又は携帯端末20から他方の伝送端末10又は携帯端末20へテレビ会議の開始を要求する端末は「要求元端末」と表され、要求先である宛先としての端末は「宛先端末」と表されている。   Further, an arbitrary display among the plurality of displays (120aa, 120ab,...) Is represented as “display 120”, and an arbitrary relay device among the plurality of relay apparatuses (30a, 30b,. Device 30 ". Furthermore, a terminal that requests the start of a video conference from one transmission terminal 10 or portable terminal 20 to the other transmission terminal 10 or portable terminal 20 is represented as a “request source terminal”, and a terminal as a request destination is “ "Destination terminal".

また、伝送システム1において、要求元端末と宛先端末との間では、伝送管理システム50を介して、各種の管理情報を送受信するための管理情報用セッションが確立される。また、要求元端末と宛先端末との間では、中継装置30を介して、コンテンツデータを送受信するためのセッションが確立される。なお、コンテンツデータのセッションでは、必ず中継装置30を介する必要はなく、伝送管理システム50を介してセッションが確立されてもよいし、要求元端末と宛先端末とが直接セッションを確立してもよい。   In the transmission system 1, a management information session for transmitting and receiving various types of management information is established between the request source terminal and the destination terminal via the transmission management system 50. In addition, a session for transmitting and receiving content data is established between the request source terminal and the destination terminal via the relay device 30. In the content data session, it is not always necessary to pass through the relay device 30, and the session may be established via the transmission management system 50, or the request source terminal and the destination terminal may establish the session directly. .

中継装置30は、上記のように、複数の伝送端末10と携帯端末20との間で、コンテンツデータの中継を行う。なお、伝送端末10から携帯端末20との間でセッションが確立される場合もある。   As described above, the relay device 30 relays content data between the plurality of transmission terminals 10 and the mobile terminals 20. A session may be established between the transmission terminal 10 and the portable terminal 20.

伝送管理システム50は、伝送端末10及び携帯端末20のログイン認証、通話状況の管理、宛先リストの管理、及び、中継装置30に対しコンテンツデータの送信先を通知したり通話状況を管理させる等を行う。   The transmission management system 50 performs login authentication of the transmission terminal 10 and the mobile terminal 20, management of the call status, management of the destination list, and notifies the relay device 30 of the transmission destination of the content data and management of the call status. Do.

複数のルータ(70a,70b,70c,70d,70ab,70cd)は、コンテンツデータの最適な経路選択を行う。なお、以下では、ルータ(70a,70b,70c,70d,70ab,70cd)のうち任意のルータは「ルータ70」と表されている。   A plurality of routers (70a, 70b, 70c, 70d, 70ab, 70cd) perform an optimum route selection of content data. In the following, an arbitrary router among the routers (70a, 70b, 70c, 70d, 70ab, 70cd) is represented as “router 70”.

プログラム提供システム90は、後述のHD(Hard Disk)204に、伝送端末10や携帯端末20に各種機能を実現させるための端末用プログラムを記憶しており、伝送端末10や携帯端末20に端末用プログラムを送信することができる。また、プログラム提供システム90は、HD204に、中継装置30に各種機能を実現させるための中継装置用プログラムをも記憶しており、中継装置30に中継装置用プログラムを送信することができる。また、プログラム提供システム90はHD204に、伝送管理システム50に各種機能を実現させるための伝送管理用プログラムをも記憶しており、伝送管理システム50に伝送管理用プログラムを送信することができる。   The program providing system 90 stores a terminal program for causing the transmission terminal 10 and the portable terminal 20 to realize various functions in an HD (Hard Disk) 204 described later. You can send the program. The program providing system 90 also stores a relay device program for causing the relay device 30 to realize various functions in the HD 204, and can transmit the relay device program to the relay device 30. The program providing system 90 also stores a transmission management program for causing the transmission management system 50 to realize various functions in the HD 204, and can transmit the transmission management program to the transmission management system 50.

ところで、伝送端末(10aa,10ab,10ac,・・・)、中継装置30a、及びルータ70aは、LAN2aによって通信可能に接続されている。伝送端末(10ba,10bb,10bc,・・・)、携帯端末(20aa、20ab、…)、中継装置30b、及びルータ70bは、LAN2bによって通信可能に接続されている。また、LAN2a及びLAN2bは、ルータ70abが含まれた専用線2abによって通信可能に接続されており、所定の地域A内で構築されている。例えば、地域Aは日本であり、LAN2aは東京の事業所内で構築されており、LAN2bは大阪の事業所内で構築されている。また、携帯端末(20aa,20ab,・・・)は、地域Aで利用されている。   Incidentally, the transmission terminals (10aa, 10ab, 10ac,...), The relay device 30a, and the router 70a are communicably connected via the LAN 2a. The transmission terminals (10ba, 10bb, 10bc,...), The portable terminals (20aa, 20ab,...), The relay device 30b, and the router 70b are communicably connected via the LAN 2b. The LAN 2a and the LAN 2b are communicably connected by a dedicated line 2ab including a router 70ab, and are constructed in a predetermined area A. For example, the region A is Japan, the LAN 2a is constructed in a Tokyo office, and the LAN 2b is constructed in an Osaka office. Moreover, the portable terminals (20aa, 20ab,...) Are used in the area A.

一方、伝送端末(10ca,10cb,10cc,・・・)、中継装置30c、及びルータ70cは、LAN2cによって通信可能に接続されている。伝送端末(10da,10db,10dc,・・・)、携帯端末(20ba、20bb、…)、中継装置30d、及びルータ70dは、LAN2dによって通信可能に接続されている。また、LAN2c及びLAN2dは、ルータ70cdが含まれた専用線2cdによって通信可能に接続されており、所定の地域B内で構築されている。例えば、地域Bはアメリカ合衆国であり、LAN2cはニューヨークの事業所内で構築されており、LAN2dはワシントンD.C.の事業所内で構築されている。また、携帯端末(20ba,20bb,・・・)は、地域Bで利用されている。   On the other hand, the transmission terminals (10ca, 10cb, 10cc,...), The relay device 30c, and the router 70c are communicably connected via a LAN 2c. The transmission terminal (10da, 10db, 10dc,...), The portable terminal (20ba, 20bb,...), The relay device 30d, and the router 70d are connected to be communicable via the LAN 2d. The LAN 2c and the LAN 2d are communicably connected via a dedicated line 2cd including the router 70cd, and are constructed in a predetermined area B. For example, region B is the United States of America, LAN 2c is built in a New York office, and LAN 2d is Washington D.C. C. Is built in the office. Moreover, the portable terminals (20ba, 20bb,...) Are used in the region B.

地域A及び地域Bは、それぞれルータ(70ab,70cd)からインターネット2iを介して通信可能に接続されている。   Area A and area B are connected to each other via routers (70ab, 70cd) via the Internet 2i.

なお、伝送端末10は必ずしも専用線を介する必要はなく、インターネット2iに直接接続されていてもよい。   Note that the transmission terminal 10 does not necessarily have to be via a dedicated line, and may be directly connected to the Internet 2i.

また、伝送管理システム50及びプログラム提供システム90は、インターネット2iを介して、伝送端末10、携帯端末20及び中継装置30と通信可能に接続されている。伝送管理システム50又はプログラム提供システム90は、地域A又は地域Bに設置されていてもよいし、これら以外の地域に設置されていてもよい。   The transmission management system 50 and the program providing system 90 are connected to the transmission terminal 10, the portable terminal 20, and the relay device 30 via the Internet 2i so as to be communicable. The transmission management system 50 or the program providing system 90 may be installed in the region A or the region B, or may be installed in a region other than these.

なお、本実施形態では、LAN2a、LAN2b、専用線2ab、インターネット2i、専用線2cd、LAN2c、及びLAN2dによって、通信ネットワーク2が構築されている。この通信ネットワーク2には、有線だけでなく、WiFiや、Bluetooth(登録商標)等の無線による通信が行われる箇所があってもよい。   In the present embodiment, the communication network 2 is constructed by the LAN 2a, LAN 2b, dedicated line 2ab, Internet 2i, dedicated line 2cd, LAN 2c, and LAN 2d. The communication network 2 may have a place where wireless communication such as WiFi and Bluetooth (registered trademark) is performed in addition to wired communication.

また、図1において、各伝送端末10、各携帯端末20、各中継装置30、伝送管理システム50、各ルータ70、及び、プログラム提供システム90の下に示されている4組の数字は、一般的なIPv4におけるIPアドレスを簡易的に示している。例えば、伝送端末10aaのIPアドレスは「1.2.1.3」である。また、IPv4ではなく、IPv6を用いてもよいが、説明を簡略化するため、IPv4を用いて説明する。   In FIG. 1, the four sets of numbers shown under each transmission terminal 10, each portable terminal 20, each relay device 30, the transmission management system 50, each router 70, and the program providing system 90 are general A simple IP address in IPv4 is shown. For example, the IP address of the transmission terminal 10aa is “1.2.1.3”. In addition, IPv6 may be used instead of IPv4, but IPv4 will be used for the sake of simplicity.

なお、各伝送端末10、各携帯端末20は、複数の事業所間での通信や、同じ事業者内の異なる部屋間での通信だけでなく、同じ部屋内での通信や、屋外と屋内又は屋外と屋外での通信で使われてもよい。各伝送端末10、各携帯端末20が屋外で使われる場合には、携帯電話通信網等の無線による通信が行われる。   In addition, each transmission terminal 10 and each portable terminal 20 are not only communication between a plurality of offices, communication between different rooms in the same company, communication in the same room, outdoor and indoor or It may be used for outdoor and outdoor communications. When each transmission terminal 10 and each portable terminal 20 are used outdoors, wireless communication such as a cellular phone communication network is performed.

<ハードウェア構成>
<<伝送端末>>
次に、図2を用いて、伝送端末10のハードウェア構成について説明する。図2は、本実施形態に係る伝送端末のハードウェア構成図の一例である。図2に示されているように、本実施形態の伝送端末10は、伝送端末10全体の動作を制御するCPU(Central Processing Unit)101、IPL(Initial Program Loader)等のCPU101の駆動に用いられるプログラムを記憶したROM(Read Only Memory)102、CPU101のワークエリアとして使用されるRAM(Random Access Memory)103、端末用プログラム、画像データ、及び音声データ等の各種データを記憶するフラッシュメモリ104、CPU101の制御にしたがってフラッシュメモリ104に対する各種データの読み出し又は書き込みを制御するSSD(Solid State Drive)105、フラッシュメモリ等の記録メディア106に対するデータの読み出し又は書き込み(記憶)を制御するメディアドライブ107、伝送端末10の宛先を選択する場合などに操作される操作ボタン108、伝送端末10の電源のON/OFFを切り換えるための電源スイッチ109、通信ネットワーク2を利用してデータ伝送をするためのネットワークI/F(Interface)111を備えている。
<Hardware configuration>
<< Transmission terminal >>
Next, the hardware configuration of the transmission terminal 10 will be described with reference to FIG. FIG. 2 is an example of a hardware configuration diagram of the transmission terminal according to the present embodiment. As shown in FIG. 2, the transmission terminal 10 of this embodiment is used to drive a CPU 101 such as a CPU (Central Processing Unit) 101 that controls the operation of the entire transmission terminal 10 and an IPL (Initial Program Loader). A ROM (Read Only Memory) 102 storing a program, a RAM (Random Access Memory) 103 used as a work area of the CPU 101, a flash memory 104 storing various data such as a terminal program, image data, and audio data, the CPU 101 SSD (Solid State Drive) 105 that controls the reading or writing of various data to the flash memory 104 according to the control of the media, the media drive 107 that controls the reading or writing (storage) of data to the recording medium 106 such as a flash memory, and a transmission terminal Select 10 destinations An operation button 108 operated in some cases, a power switch 109 for switching on / off the power of the transmission terminal 10, and a network I / F (Interface) 111 for data transmission using the communication network 2 are provided. ing.

また、伝送端末10は、CPU101の制御に従って被写体を撮像して画像データを得る内蔵型のカメラ112、このカメラ112の駆動を制御する撮像素子I/F113、音声を入力する内蔵型のマイク114、音声を出力する内蔵型のスピーカー115、CPU101の制御に従ってマイク114及びスピーカー115との間で音声信号の入出力を処理する音声入出力I/F116、CPU101の制御に従って外付けのディスプレイ120に画像データを伝送するディスプレイI/F117、各種の外部機器を接続するための外部機器接続I/F118、及び上記各構成要素を図2に示されているように電気的に接続するためのアドレスバスやデータバス等のバスライン110を備えている。   The transmission terminal 10 also includes a built-in camera 112 that captures an image of a subject under the control of the CPU 101 to obtain image data, an image sensor I / F 113 that controls driving of the camera 112, a built-in microphone 114 that inputs sound, The built-in speaker 115 that outputs sound, the sound input / output I / F 116 that processes input / output of sound signals between the microphone 114 and the speaker 115 according to the control of the CPU 101, and the image data on the external display 120 according to the control of the CPU 101 Display I / F 117, external device connection I / F 118 for connecting various external devices, and address buses and data for electrically connecting the above components as shown in FIG. A bus line 110 such as a bus is provided.

ディスプレイ120は、被写体の画像や操作用アイコン等を表示する液晶や有機ELによって構成された表示部である。また、ディスプレイ120は、ケーブル120cによってディスプレイI/F117に接続される。このケーブル120cは、アナログRGB(VGA)信号用のケーブルであってもよいし、コンポーネントビデオ用のケーブルであってもよいし、HDMI(登録商標)(High-Definition Multimedia Interface)やDVI(Digital Video Interactive)信号用のケーブルであってもよい。   The display 120 is a display unit configured by a liquid crystal or an organic EL that displays an image of a subject, an operation icon, and the like. The display 120 is connected to the display I / F 117 by a cable 120c. The cable 120c may be an analog RGB (VGA) signal cable, a component video cable, HDMI (registered trademark) (High-Definition Multimedia Interface) or DVI (Digital Video). Interactive) signal cable may be used.

カメラ112は、レンズや、光を電荷に変換して被写体の画像(映像)を電子化する固体撮像素子を含み、固体撮像素子として、CMOS(Complementary Metal Oxide Semiconductor)や、CCD(Charge Coupled Device)等が用いられる。   The camera 112 includes a lens and a solid-state image sensor that converts an image (video) of a subject by converting light into electric charges. As the solid-state image sensor, a CMOS (Complementary Metal Oxide Semiconductor) or a CCD (Charge Coupled Device) is used. Etc. are used.

外部機器接続I/F118には、USB(Universal Serial Bus)ケーブル等によって、外付けカメラ、外付けマイク、及び外付けスピーカー等の外部機器がそれぞれ接続可能である。外付けカメラが接続された場合には、CPU101の制御に従って、内蔵型のカメラ112に優先して外付けカメラが駆動する。同じく、外付けマイクが接続された場合や、外付けスピーカーが接続された場合には、CPU101の制御に従って、それぞれが内蔵型のマイク114や内蔵型のスピーカー115に優先して、外付けマイクや外付けスピーカーが駆動する。なお、伝送端末10は、内蔵型のカメラ112を必ずしも備えていなくてもよく、外部機器接続I/F118を介して外付けカメラのみが接続されていてもよい。同様に、伝送端末10は、内蔵型のマイク114や内蔵型のスピーカー115を必ずしも備えていなくてもよく、外部機器接続I/F118を介して外付けマイクや外付けスピーカーのみが接続されていてもよい。また、伝送端末10のディスプレイ120は、ケーブル120cによってディスプレイI/F117に接続されているが、これに限られず、ディスプレイ120は、伝送端末10に内蔵されていてもよい。   External devices such as an external camera, an external microphone, and an external speaker can be connected to the external device connection I / F 118 by a USB (Universal Serial Bus) cable or the like. When an external camera is connected, the external camera is driven in preference to the built-in camera 112 according to the control of the CPU 101. Similarly, when an external microphone is connected or when an external speaker is connected, each of the external microphone and the internal speaker 115 is given priority over the internal microphone 114 and the internal speaker 115 according to the control of the CPU 101. External speaker is driven. The transmission terminal 10 does not necessarily include the built-in camera 112, and only an external camera may be connected via the external device connection I / F 118. Similarly, the transmission terminal 10 may not necessarily include the built-in microphone 114 or the built-in speaker 115, and only an external microphone or an external speaker is connected via the external device connection I / F 118. Also good. Further, the display 120 of the transmission terminal 10 is connected to the display I / F 117 by the cable 120c. However, the display 120 is not limited to this, and the display 120 may be built in the transmission terminal 10.

また、伝送端末10は、外部機器接続I/F118以外にもSDカードやSIM(Subscriber Identity Module)カードなどの外部記録媒体を読み込み可能な外部記録媒体I/Fを備えていてもよい。   In addition to the external device connection I / F 118, the transmission terminal 10 may include an external recording medium I / F that can read an external recording medium such as an SD card or a SIM (Subscriber Identity Module) card.

なお、記録メディア106は、伝送端末10に対して着脱自在な構成となっている。また、CPU101の制御にしたがってデータの読み出し又は書き込みを行う不揮発性メモリであれば、フラッシュメモリ104に限らず、EEPROM(Electrically Erasable and Programmable ROM)等を用いてもよい。   Note that the recording medium 106 is detachable from the transmission terminal 10. Further, as long as it is a non-volatile memory that reads or writes data according to the control of the CPU 101, not only the flash memory 104 but also an EEPROM (Electrically Erasable and Programmable ROM) or the like may be used.

さらに、上記端末用プログラムは、インストール可能な形式又は実行可能な形式のファイルで、上記記録メディア106等の、コンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。また、上記端末用プログラムは、フラッシュメモリ104ではなくROM102に記憶させるようにしてもよい。   Further, the terminal program may be recorded in a computer-readable recording medium such as the recording medium 106 and distributed as a file in an installable or executable format. The terminal program may be stored in the ROM 102 instead of the flash memory 104.

<<携帯端末>>
図3は、本実施形態に係る携帯端末のハードウェア構成図の一例である。図3に示されているように、本実施形態の携帯端末20は、携帯端末20全体の動作を制御するCPU201、携帯端末20に各種操作信号を入力するための入力装置202、携帯端末20による処理結果を表示するための表示装置203、外付けマイク、外付けカメラや外部記録媒体(記録メディア)などの各種外部装置とのインタフェースである外部I/F204、CPU201のワークエリアとして使用されるRAM205、携帯端末20のOSの設定やネットワーク設定などのプログラムやデータが格納されるROM206、携帯電話通信網などを利用してデータ伝送をするためのネットワークI/F207、端末用プログラム等の各種データを記憶するフラッシュメモリ208、CPU201の制御にしたがってフラッシュメモリ208に対する各種データの読み出し又は書き込みを制御するSSD209を備えている。
<< Mobile device >>
FIG. 3 is an example of a hardware configuration diagram of the mobile terminal according to the present embodiment. As shown in FIG. 3, the mobile terminal 20 of the present embodiment includes a CPU 201 that controls the operation of the entire mobile terminal 20, an input device 202 for inputting various operation signals to the mobile terminal 20, and the mobile terminal 20. A display device 203 for displaying processing results, an external microphone, an external I / F 204 that is an interface with various external devices such as an external camera and an external recording medium (recording medium), and a RAM 205 that is used as a work area for the CPU 201 Various data such as ROM 206 for storing programs and data such as OS settings and network settings of mobile terminal 20, network I / F 207 for transmitting data using a mobile phone communication network, terminal programs, etc. Flash memory 208 to store, flash memory according to the control of CPU 201 And a SSD209 that controls reading or writing of various data with respect to 08.

また、携帯端末20は、CPU201の制御に従って被写体を撮像して画像データを得る内蔵型のカメラ210、このカメラ210の駆動を制御する撮像素子I/F211、音声を入力する内蔵型のマイク212、音声を出力する内蔵型のスピーカー213、CPU201の制御に従ってマイク212及びスピーカー213との間で音声信号の入出力を処理する音声入出力I/F214、及び上記各構成要素を図3に示されているように電気的に接続するためのアドレスバスやデータバス等のバスライン215を備えている。なお、携帯端末20がテキストチャットサービスのみを利用する端末である場合、カメラ210やマイク212、スピーカー213などは備えていなくてもよい。   In addition, the mobile terminal 20 includes a built-in camera 210 that captures an image of a subject under the control of the CPU 201 to obtain image data, an image sensor I / F 211 that controls driving of the camera 210, a built-in microphone 212 that inputs sound, FIG. 3 shows a built-in speaker 213 that outputs audio, an audio input / output I / F 214 that processes input / output of audio signals between the microphone 212 and the speaker 213 according to the control of the CPU 201, and the above-described components. In this way, a bus line 215 such as an address bus or a data bus is provided for electrical connection. If the mobile terminal 20 is a terminal that uses only the text chat service, the camera 210, the microphone 212, the speaker 213, and the like may not be provided.

また、CPU201の制御にしたがってデータの読み出し又は書き込みを行う不揮発性メモリであれば、フラッシュメモリ208に限らず、EEPROM等を用いてもよい。   Further, as long as it is a non-volatile memory that reads or writes data according to the control of the CPU 201, not only the flash memory 208 but also an EEPROM or the like may be used.

上記端末用プログラムは、インストール可能な形式又は実行可能な形式のファイルで、上記記録メディア等の、コンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。また、上記端末用プログラムは、フラッシュメモリ208ではなくROM206に記憶させるようにしてもよい。   The terminal program may be a file in an installable or executable format, and may be recorded and distributed on a computer-readable recording medium such as the recording medium. The terminal program may be stored not in the flash memory 208 but in the ROM 206.

<<伝送管理システム、中継装置、プログラム提供システム≫
次に、図4を用いて、伝送管理システム50、中継装置30、及び、プログラム提供システム90のハードウェア構成について説明する。図4は、本実施形態に係る伝送管理システム50、中継装置30、及び、プログラム提供システム90のハードウェア構成図の一例である。
<< Transmission management system, relay device, program provision system >>
Next, the hardware configuration of the transmission management system 50, the relay device 30, and the program providing system 90 will be described with reference to FIG. FIG. 4 is an example of a hardware configuration diagram of the transmission management system 50, the relay device 30, and the program providing system 90 according to the present embodiment.

伝送管理システム50は、伝送管理システム50全体の動作を制御するCPU301、IPL等のCPU301の駆動に用いられるプログラムを記憶したROM302、CPU301のワークエリアとして使用されるRAM303、伝送管理用プログラム等の各種データを記憶するHD304、CPU301の制御にしたがってHD304に対する各種データの読み出し又は書き込みを制御するHDD(Hard Disk Drive)305、フラッシュメモリ等の記録メディア306に対するデータの読み出し又は書き込み(記憶)を制御するメディアドライブ307、カーソル、メニュー、ウィンドウ、文字、又は画像などの各種情報を表示するディスプレイ308、通信ネットワーク2を利用してデータ伝送をするためのネットワークI/F309、文字、数値、各種指示などの入力のための複数のキーを備えたキーボード311、各種指示の選択や実行、処理対象の選択、カーソルの移動などを行うマウス312、着脱可能な記録媒体の一例としてのCD−ROM(Compact Disc Read Only Memory)313に対する各種データの読み出し又は書き込みを制御するCD−ROMドライブ314、及び、上記各構成要素を図4に示されているように電気的に接続するためのアドレスバスやデータバス等のバスライン310を備えている。   The transmission management system 50 includes a CPU 301 that controls the overall operation of the transmission management system 50, a ROM 302 that stores a program used to drive the CPU 301 such as an IPL, a RAM 303 that is used as a work area for the CPU 301, and a transmission management program. HD 304 for storing data, HDD (Hard Disk Drive) 305 for controlling the reading or writing of various data to the HD 304 according to the control of the CPU 301, and a medium for controlling the reading or writing (storage) of data to the recording medium 306 such as a flash memory Drive 307, display 308 for displaying various information such as cursor, menu, window, character, or image, network I / F 309 for transmitting data using communication network 2, character A keyboard 311 having a plurality of keys for inputting numerical values and various instructions, a mouse 312 for selecting and executing various instructions, selecting a processing target, moving a cursor, etc., a CD as an example of a removable recording medium A CD-ROM drive 314 for controlling reading or writing of various data to / from a ROM (Compact Disc Read Only Memory) 313, and an address for electrically connecting the above components as shown in FIG. A bus line 310 such as a bus or a data bus is provided.

なお、上記伝送管理用プログラムは、インストール可能な形式又は実行可能な形式のファイルで、上記記録メディア306やCD−ROM313等のコンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。また、上記伝送管理用プログラムは、HD304ではなくROM302に記憶されるようにしてもよい。   The transmission management program is a file in an installable or executable format, and may be recorded and distributed on a computer-readable recording medium such as the recording medium 306 or CD-ROM 313. . The transmission management program may be stored in the ROM 302 instead of the HD 304.

また、中継装置30及びプログラム提供システム90は、上記の伝送管理システム50と同様のハードウェア構成を有しているため、その説明を省略する。ただし、中継装置30のHD304には、中継装置30を制御するための中継装置用プログラムが記録されており、プログラム提供システム90のHD304には、プログラム提供システム90を制御するためのプログラム提供用プログラムが記憶されている。この場合も、中継装置用プログラム、プログラム提供用プログラムは、インストール可能な形式又は実行可能な形式のファイルで、上記記録メディア306やCD−ROM313等のコンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。また、上記中継装置用プログラム、プログラム提供用プログラムは、HD304ではなくROM302に記憶されるようにしてもよい。   Further, since the relay device 30 and the program providing system 90 have the same hardware configuration as that of the transmission management system 50, the description thereof is omitted. However, the relay device program for controlling the relay device 30 is recorded in the HD 304 of the relay device 30, and the program provision program for controlling the program providing system 90 is stored in the HD 304 of the program providing system 90. Is remembered. Also in this case, the relay device program and the program providing program are files in an installable or executable format, and are recorded on a computer-readable recording medium such as the recording medium 306 or CD-ROM 313 for distribution. You may make it make it. The relay device program and the program providing program may be stored in the ROM 302 instead of the HD 304.

なお、上記着脱可能な記録媒体の他の例として、CD−R(Compact Disc Recordable)、DVD(Digital Versatile Disk)、ブルーレイディスク等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。   As another example of the detachable recording medium, the recording medium is provided by being recorded on a computer-readable recording medium such as a CD-R (Compact Disc Recordable), a DVD (Digital Versatile Disk), or a Blu-ray Disc. May be.

<機能構成>
次に、図5を用いて、本実施形態の機能構成について説明する。図5は、本実施形態に係る伝送システム1を構成する各端末、装置及びシステムの機能ブロック図の一例である。
<Functional configuration>
Next, the functional configuration of the present embodiment will be described with reference to FIG. FIG. 5 is an example of a functional block diagram of each terminal, apparatus, and system constituting the transmission system 1 according to the present embodiment.

図5では、伝送端末10、携帯端末20及び伝送管理システム50が、通信ネットワーク2を介してデータ通信することができるように接続されている。なお、図1に示されているプログラム提供システム90は、本実施形態では直接関係ないため、図5では省略されている。また、携帯端末20は伝送端末10とほぼ同様の機能を備えるため携帯端末20の機能については伝送端末10と共に適宜説明する。   In FIG. 5, the transmission terminal 10, the portable terminal 20, and the transmission management system 50 are connected so that data communication can be performed via the communication network 2. The program providing system 90 shown in FIG. 1 is omitted in FIG. 5 because it is not directly related to this embodiment. Further, since the mobile terminal 20 has substantially the same function as the transmission terminal 10, the function of the mobile terminal 20 will be described together with the transmission terminal 10 as appropriate.

<<端末の各機能構成>>
伝送端末10及び携帯端末20は、送受信部11、操作入力受付部12、ログイン要求部13、撮像部14、音声入力部15a、音声出力部15b、表示制御部16、宛先リスト作成部17、及び記憶・読出処理部18を有している。以降では、断らない限り、図5の伝送端末10の機能について主に説明する。
<< Functional configuration of terminal >>
The transmission terminal 10 and the portable terminal 20 include a transmission / reception unit 11, an operation input reception unit 12, a login request unit 13, an imaging unit 14, a voice input unit 15a, a voice output unit 15b, a display control unit 16, a destination list creation unit 17, and A storage / reading processing unit 18 is provided. Hereinafter, unless otherwise specified, the function of the transmission terminal 10 of FIG. 5 will be mainly described.

伝送端末10が有する各部は、図2に示されている各構成要素のいずれかが、フラッシュメモリ104からRAM103上に展開された端末用プログラムに従ったCPU101からの命令によって動作することで実現される機能、又は機能される手段である。   Each part of the transmission terminal 10 is realized by any one of the constituent elements shown in FIG. 2 operating according to a command from the CPU 101 according to a terminal program developed from the flash memory 104 onto the RAM 103. Function or means to be functioned.

また、伝送端末10は、図2に示されているRAM103によって構築される揮発性記憶部2000、及び図2に示されているフラッシュメモリ104によって構築される不揮発性記憶部1000を有している。   Further, the transmission terminal 10 includes a volatile storage unit 2000 constructed by the RAM 103 shown in FIG. 2 and a nonvolatile storage unit 1000 constructed by the flash memory 104 shown in FIG. .

(表示領域管理テーブル)
揮発性記憶部2000には表1に示されているような表示領域管理テーブルによって構成されている表示領域管理DB2001が構築されている。ディスプレイ120又は表示装置203にはセッションが確立されている他の拠点の伝送端末10又は携帯端末20から送信された画像データが表示される。すなわち、後述する表示制御部16はディスプレイ120又は表示装置203の画面を拠点数に応じて複数の表示領域に区分する。表示領域管理テーブルには画像データを送信した伝送端末10又は携帯端末20の「通信ID」と「表示領域」とが対応付けて管理される。
(Display area management table)
In the volatile storage unit 2000, a display area management DB 2001 configured by a display area management table as shown in Table 1 is constructed. The display 120 or the display device 203 displays image data transmitted from the transmission terminal 10 or the portable terminal 20 at another base where a session is established. That is, the display control unit 16 described later divides the screen of the display 120 or the display device 203 into a plurality of display areas according to the number of bases. In the display area management table, the “communication ID” and “display area” of the transmission terminal 10 or portable terminal 20 that transmitted the image data are managed in association with each other.

Figure 2016134781
次に、図2及び図5を用いて、伝送端末10の各機能構成について詳細に説明する。図5に示されている伝送端末10の送受信部11は、図2に示されているCPU101からの命令、及び図2に示されているネットワークI/F111によって実現され、通信ネットワーク2を介してほかの端末、装置又はシステムと各種データ(または情報)の送受信を行う。この送受信部11は、所望の宛先端末と通話を開始する前から、伝送管理システム50より、宛先候補としての各伝送端末の状態を示す各状態情報の受信を開始する。なお、この状態情報は、伝送端末10又は/及び各携帯端末20の「稼働状態」が"オンライン"か"オフライン"かの状態だけでなく、"オンライン"であってもさらに通話中であるか、離席中であるか等の詳細な状態を示す。以下では、一例として、状態情報が「稼働状態」を示す場合について説明する。
Figure 2016134781
Next, each functional configuration of the transmission terminal 10 will be described in detail with reference to FIGS. 2 and 5. The transmission / reception unit 11 of the transmission terminal 10 shown in FIG. 5 is realized by the command from the CPU 101 shown in FIG. 2 and the network I / F 111 shown in FIG. Various data (or information) is transmitted / received to / from other terminals, devices or systems. The transmission / reception unit 11 starts receiving state information indicating the state of each transmission terminal as a destination candidate from the transmission management system 50 before starting a call with a desired destination terminal. Note that this status information indicates whether the transmission terminal 10 and / or each mobile terminal 20 is “online” or “offline” as well as “online”, and whether a call is still in progress. The detailed state such as whether the user is away is shown. Hereinafter, as an example, a case where the state information indicates “operating state” will be described.

なお、上記において、携帯端末20の送受信部11は、所望の宛先端末と通話を開始する前から、伝送管理システム50より、宛先候補としての各端末の状態を示す各状態情報の受信を開始する。   Note that, in the above, the transmission / reception unit 11 of the mobile terminal 20 starts receiving each status information indicating the status of each terminal as a destination candidate from the transmission management system 50 before starting a call with a desired destination terminal. .

操作入力受付部12は、図2に示されているCPU101からの命令、並びに図2に示されている操作ボタン108及び電源スイッチ109によって実現され、ユーザによる各種入力を受け付ける。例えば、ユーザが、図2に示されている電源スイッチ109をONにすると、図2に示されている操作入力受付部12が電源ONを受け付けて、電源をONにする。なお、携帯端末20の場合、操作入力受付部12は、CPU201からの命令及び入力装置202によって実現される。   The operation input receiving unit 12 is realized by a command from the CPU 101 shown in FIG. 2 and the operation buttons 108 and the power switch 109 shown in FIG. 2 and receives various inputs by the user. For example, when the user turns on the power switch 109 shown in FIG. 2, the operation input accepting unit 12 shown in FIG. 2 accepts the power on and turns on the power. In the case of the mobile terminal 20, the operation input receiving unit 12 is realized by a command from the CPU 201 and the input device 202.

操作入力受付部12は通信相手選択受付部121を有している。通信相手選択受付部121はユーザが選択した「表示領域」(表示されている画像データ)に基づいて表示領域管理テーブルを参照し、自拠点のユーザが選択した限定通信の「宛先端末の通信ID」を決定する。   The operation input receiving unit 12 has a communication partner selection receiving unit 121. The communication partner selection receiving unit 121 refers to the display area management table based on the “display area” (displayed image data) selected by the user, and the “communication ID of the destination terminal” of the limited communication selected by the user at the local site. Is determined.

ログイン要求部13は、図2に示されているCPU101からの命令によって実現され、上記電源ONの受け付けを契機として、送受信部11から通信ネットワーク2を介して伝送管理システム50に、ログインを要求する旨を示すログイン要求情報、端末種別を示す情報、及び要求元端末の現時点のIPアドレスを自動的に送信する。   The login request unit 13 is realized by a command from the CPU 101 illustrated in FIG. 2, and requests login from the transmission / reception unit 11 to the transmission management system 50 via the communication network 2 when the power-on is accepted. The login request information indicating the fact, the information indicating the terminal type, and the current IP address of the request source terminal are automatically transmitted.

また、ユーザが電源スイッチ109をONの状態からOFFにすると、送受信部11が伝送管理システム50へ電源をOFFする旨の状態情報を送信した後に、操作入力受付部12が電源を完全にOFFにする。これにより、伝送管理システム50側では、伝送端末10が電源ONから電源OFFになったことを把握することができる。なお、上記において、携帯端末20の場合、ログイン要求部13はCPU201からの命令によって実現され、携帯端末20のユーザが行ったログイン操作の受け付けを契機として、送受信部11から通信ネットワーク2を介して伝送管理システム50に、ログインを要求する旨を示すログイン要求情報、要求元端末の端末種別を示す情報、及び要求元端末の現時点のIPアドレスを送信する。   When the user turns off the power switch 109 from the ON state, the operation input receiving unit 12 completely turns off the power after the transmission / reception unit 11 transmits the state information indicating that the power is turned off to the transmission management system 50. To do. Thereby, on the transmission management system 50 side, it is possible to grasp that the transmission terminal 10 is switched from the power ON to the power OFF. In the above, in the case of the mobile terminal 20, the login request unit 13 is realized by an instruction from the CPU 201, and triggered by acceptance of a login operation performed by the user of the mobile terminal 20, the transmission / reception unit 11 via the communication network 2. Log-in request information indicating that login is requested, information indicating the terminal type of the request source terminal, and the current IP address of the request source terminal are transmitted to the transmission management system 50.

撮像部14は、図2に示されているCPU101からの命令、並びに図2に示されているカメラ112及び撮像素子I/F113によって実現され、被写体を撮像して、この撮像して得た画像データを出力する。なお、携帯端末20の場合、撮像部14は図3に示されているCPU201からの命令、並びに図3に示されているカメラ210及び撮像素子I/F211によって実現される。   The imaging unit 14 is realized by a command from the CPU 101 illustrated in FIG. 2 and the camera 112 and the imaging element I / F 113 illustrated in FIG. 2. Output data. In the case of the portable terminal 20, the imaging unit 14 is realized by a command from the CPU 201 illustrated in FIG. 3, and the camera 210 and the imaging element I / F 211 illustrated in FIG.

音声入力部15aは、図2に示されているCPU101からの命令、及び図2に示されている音声入出力I/F116によって実現され、マイク114によってユーザの音声が音声信号に変換された後、この音声信号に係る音声データを入力する。   The voice input unit 15a is realized by a command from the CPU 101 shown in FIG. 2 and the voice input / output I / F 116 shown in FIG. 2, and after the user's voice is converted into a voice signal by the microphone 114. The audio data related to the audio signal is input.

音声出力部15bは、図2に示されているCPU101からの命令、及び図2に示されている音声入出力I/F116によって実現され、音声データに係る音声信号をスピーカー115に出力し、スピーカー115から音声を出力させる。携帯端末20の場合、音声入力部15a及び音声出力部15bは図3に示されているCPU201からの命令、並びに図3に示されている音声入出力I/F214によって実現される。   The audio output unit 15b is realized by a command from the CPU 101 shown in FIG. 2 and the audio input / output I / F 116 shown in FIG. 2, and outputs an audio signal related to the audio data to the speaker 115. The voice is output from 115. In the case of the portable terminal 20, the voice input unit 15a and the voice output unit 15b are realized by a command from the CPU 201 shown in FIG. 3 and a voice input / output I / F 214 shown in FIG.

表示制御部16は、図2に示されているCPU101からの命令、及び図2に示されているディスプレイI/F117によって実現され、外付けのディスプレイ120に対して画像データを送信するための制御を行う。なお、携帯端末20の場合、表示制御部16は図3に示されているCPU201からの命令、及びに図3に示されている表示装置203によって実現され、表示装置203に画像データ等を送信するための制御を行う。表示制御部16は、ディスプレイ120又は表示装置203に1つ以上の画像データを表示するため画面をいくつかの「表示領域」に分割し、各表示領域に画像データを割り当てる。例えば、音量が最も大きい音声データを送信する他拠点の伝送端末10又は携帯端末20を特定し、該伝送端末10又は携帯端末20が送信する画像データがディスプレイ120又は表示装置203に優先的に表示されるように「表示領域」に画像データを割り当てる。表示制御部16は「表示領域」と他の拠点から画像データを送信した伝送端末10又は携帯端末20の通信IDの対応を表示領域管理テーブルに登録する。   The display control unit 16 is realized by a command from the CPU 101 shown in FIG. 2 and a display I / F 117 shown in FIG. 2, and controls for transmitting image data to the external display 120. I do. In the case of the portable terminal 20, the display control unit 16 is realized by the instruction from the CPU 201 shown in FIG. 3 and the display device 203 shown in FIG. 3, and transmits image data and the like to the display device 203. To control. The display control unit 16 divides the screen into several “display areas” in order to display one or more image data on the display 120 or the display device 203, and assigns the image data to each display area. For example, the transmission terminal 10 or the portable terminal 20 of another base that transmits the sound data having the highest volume is specified, and the image data transmitted by the transmission terminal 10 or the portable terminal 20 is preferentially displayed on the display 120 or the display device 203. As described above, image data is assigned to the “display area”. The display control unit 16 registers the correspondence between the “display area” and the communication ID of the transmission terminal 10 or the mobile terminal 20 that has transmitted the image data from another base in the display area management table.

宛先リスト作成部17は、図2に示されているCPU101からの命令によって実現され、管理システム50から受信した宛先リスト情報及び宛先候補の伝送端末10及び携帯端末20の状態情報に基づいて、宛先リスト画面の作成及び更新を行う。なお、携帯端末20の場合、宛先リスト作成部17は図3に示されているCPU201からの命令によって実現される。   The destination list creation unit 17 is realized by a command from the CPU 101 illustrated in FIG. 2, and based on the destination list information received from the management system 50 and the status information of the destination transmission terminal 10 and the mobile terminal 20. Create and update the list screen. In the case of the portable terminal 20, the destination list creation unit 17 is realized by a command from the CPU 201 shown in FIG.

記憶・読出処理部18は、図2に示されているCPU101からの命令、及び図2に示すSSD105によって実行され、不揮発性記憶部1000に各種データを記憶したり、揮発性記憶部2000に記憶された各種データを読み出したりする処理を行う。この不揮発性記憶部1000には、通信先としての伝送端末10の端末又はユーザを識別するための通信ID(Identification)、及びパスワード等が記憶される。なお、通信ID及びパスワードは不揮発性記憶部1000に記憶されていなくてもよく、例えば伝送管理システム50に対してログイン要求を行う際に都度、ユーザが入力するようにしてもよい。   The storage / reading processing unit 18 is executed by the instruction from the CPU 101 shown in FIG. 2 and the SSD 105 shown in FIG. 2, and stores various data in the nonvolatile storage unit 1000 or stored in the volatile storage unit 2000. A process for reading out various data is performed. The nonvolatile storage unit 1000 stores a communication ID (Identification) for identifying the terminal or user of the transmission terminal 10 as a communication destination, a password, and the like. Note that the communication ID and password may not be stored in the nonvolatile storage unit 1000, and may be input by the user each time a login request is made to the transmission management system 50, for example.

また、記憶・読出処理部18は、揮発性記憶部2000に各種データを記憶したり、揮発性記憶部2000に記憶された各種データを読み出したりする処理も行う。この揮発性記憶部2000には、宛先端末との通話を行う際に受信される画像データや音声データが、受信される度に上書き記憶される。このうち、上書きされる前の画像データによってディスプレイ120に画像が表示される、上書きされる前の音声データによってスピーカー115から音声が出力される。なお、上記において、携帯端末20の場合、記憶・読出処理部18は図3に示されているCPU201からの命令、及び図3に示されているSSD209によって実現される。   The storage / reading processing unit 18 also performs processing for storing various types of data in the volatile storage unit 2000 and reading out various types of data stored in the volatile storage unit 2000. The volatile storage unit 2000 overwrites and stores image data and audio data received when a call is made with the destination terminal. Among these, the image is displayed on the display 120 by the image data before being overwritten, and the sound is output from the speaker 115 by the sound data before being overwritten. In the above, in the case of the portable terminal 20, the storage / reading processing unit 18 is realized by the command from the CPU 201 shown in FIG. 3 and the SSD 209 shown in FIG.

なお、本実施形態の「通信ID」及び後述の「中継装置ID」は、それぞれ伝送端末若しくはこの伝送端末を利用するユーザ及び中継装置30を一意に識別するために使われる言語、文字、記号、又は各種のしるし等の識別情報を示す。また、「通信ID」及び「中継装置ID」は、上記言語、文字、記号、及び各種のしるしのうち、少なくとも2つが組み合わされた識別情報であってもよい。   Note that a “communication ID” and a “relay device ID” to be described later are a language, a character, a symbol used to uniquely identify a transmission terminal or a user who uses the transmission terminal and the relay device 30, respectively. Or, identification information such as various signs is shown. Further, the “communication ID” and the “relay device ID” may be identification information in which at least two of the language, characters, symbols, and various indicia are combined.

<<伝送管理システムの機能構成>>
伝送管理システム50は、送受信部51、認証部52、状態管理部53、端末抽出部54、端末状態取得部55、セッション管理部56、判定部57、限定通信制御部58、及び、記憶・読出処理部59を有している。これら各部は、図5に示されている各構成要素のいずれかが、HD304からRAM303上に展開された管理システム用プログラムに従ったCPU301からの命令によって動作することで実現される機能又は機能される手段である。また、伝送管理システム50は、伝送管理システム50の電源をOFFにしても各種データ(または情報)の記憶が維持される不揮発性記憶部5000を有しており、この不揮発性記憶部5000は図4に示されているHD304により構築されている。
<< Functional configuration of transmission management system >>
The transmission management system 50 includes a transmission / reception unit 51, an authentication unit 52, a state management unit 53, a terminal extraction unit 54, a terminal state acquisition unit 55, a session management unit 56, a determination unit 57, a limited communication control unit 58, and a storage / readout A processing unit 59 is included. Each of these units is a function or function realized by any one of the constituent elements shown in FIG. 5 operating according to a command from the CPU 301 according to the management system program expanded from the HD 304 onto the RAM 303. Means. Further, the transmission management system 50 includes a nonvolatile storage unit 5000 that maintains the storage of various data (or information) even when the power of the transmission management system 50 is turned off. It is constructed by HD304 shown in FIG.

(セッション管理テーブル)
不揮発性記憶部5000には、表2に示されているようなセッション管理テーブルによって構成されているセッション管理DB5002が構築されている。このセッション管理テーブルでは、中継装置30を選択するためのセッションの実行に用いられる「セッションID」毎に、データの中継に使用される中継装置30の「中継装置ID」、「要求元端末の通信ID」及び「宛先端末の通信ID」が関連付けられて管理される。
(Session management table)
In the non-volatile storage unit 5000, a session management DB 5002 configured by a session management table as shown in Table 2 is constructed. In this session management table, for each “session ID” used to execute a session for selecting the relay device 30, the “relay device ID” of the relay device 30 used for data relay and the communication of the request source terminal “ID” and “communication ID of destination terminal” are managed in association with each other.

Figure 2016134781
(宛先リスト管理テーブル)
不揮発性記憶部5000には、表3に示されているような宛先情報を管理する宛先リスト管理テーブルによって構成されている宛先リスト管理DB5003が構築されている。宛先リスト管理テーブルでは、テレビ会議における接続の開始(発呼)を要求する「要求元端末の通信ID」に対して、「宛先リスト」が登録されている。「宛先リスト」には、宛先端末の候補の全てとなる宛先端末の通信IDが宛先情報として管理される。
Figure 2016134781
(Destination list management table)
In the nonvolatile storage unit 5000, a destination list management DB 5003 configured by a destination list management table for managing destination information as shown in Table 3 is constructed. In the destination list management table, a “destination list” is registered for the “communication ID of the request source terminal” that requests the start (call) of the connection in the video conference. In the “destination list”, communication IDs of destination terminals that are all candidate destination terminals are managed as destination information.

Figure 2016134781
(端末管理テーブル)
不揮発性記憶部5000には、表4に示されているような端末管理テーブルによって構成されている端末管理DB5001が構築されている。この端末管理テーブルでは、伝送端末10又は携帯端末20の「通信ID」毎に、各通信IDを宛先とした場合の「名称」、各端末の「稼働状態」、「通信状態」、ログイン要求情報が伝送管理システム50で受信された「受信時間」、及び端末の「IPアドレス」が関連付けられて管理される。
Figure 2016134781
(Terminal management table)
In the nonvolatile storage unit 5000, a terminal management DB 5001 configured by a terminal management table as shown in Table 4 is constructed. In this terminal management table, for each “communication ID” of the transmission terminal 10 or the portable terminal 20, “name” when each communication ID is a destination, “operation status”, “communication status” of each terminal, login request information Is managed in association with the “reception time” received by the transmission management system 50 and the “IP address” of the terminal.

「稼働状態」は以下の2つの状態を取る。
・"オフライン":電源が入っていない、通信ネットワーク2に接続していないなど(ログインしていない)伝送管理システム50と接続されていない状態
・"オンライン":伝送管理システム50にログインした状態など通信ネットワーク2に接続している状態
「通信状態」は以下の3つの状態を取り得る。
・"会議中":他の伝送端末との間でテレビ会議を行っている状態(テレビ会議のセッションが確立している状態)
・"限定通信中":特定の端末との間で限定通信を行っている状態
・"会議なし":テレビ会議を行っていない状態
表4の例では、伝送端末10aa(通信IDは"01aa")と伝送端末10ab(通信IDは"01ab")とが限定通信を行っているので、それぞれの「通信状態」が"限定通信中"になっている。伝送端末10ac(通信IDは"01ac")は伝送端末10aa、10abと多拠点によるテレビ会議を行っているので、「通信状態」が"会議中"になっている。また、伝送端末10ba(通信IDは"01ba")は通信ネットワーク2に接続しているので「稼働状態」は"オンライン"だが、テレビ会議を開始していないため「通信状態」は"会議なし"となっている。伝送端末10bb(通信IDは"01bb")は通信ネットワーク2に接続していないので「稼働状態」は"オフライン"であり、「通信状態」も"会議なし"となっている。
The “operating state” takes the following two states.
"Offline": Power is not turned on, not connected to the communication network 2, etc. (not logged in) Not connected to the transmission management system 50 "Online": Login to the transmission management system 50, etc. State connected to the communication network 2 The “communication state” can take the following three states.
・ "Meeting": A state where a video conference is being held with another transmission terminal (a state where a video conference session is established)
“Limited communication”: State of limited communication with a specific terminal • “No conference”: State of no video conference In the example of Table 4, the transmission terminal 10aa (communication ID is “01aa”) ) And the transmission terminal 10ab (communication ID is “01ab”), the respective “communication status” is “limited communication”. Since the transmission terminal 10ac (communication ID is “01ac”) has a multi-site video conference with the transmission terminals 10aa and 10ab, the “communication state” is “conference”. Further, since the transmission terminal 10ba (communication ID is “01ba”) is connected to the communication network 2, the “operating state” is “online”, but since the video conference is not started, the “communication state” is “no meeting”. It has become. Since the transmission terminal 10bb (communication ID is “01bb”) is not connected to the communication network 2, the “operating state” is “offline”, and the “communication state” is also “no meeting”.

Figure 2016134781
(限定通信管理テーブル)
揮発性記憶部5500には、表5に示されているような限定通信管理テーブルによって構成されている限定通信管理DB5004が構築されている。限定通信テーブルは通信中情報の一例である。この限定通信管理テーブルでは、「限定通信ID」に対応付けて限定通信に参加している「参加端末の通信ID」が関連付けて管理される。「限定通信ID」は限定通信を行っている複数の伝送端末10又は携帯端末20を関連づける識別情報である。限定通信の「セッションID」と同じものでもよい。伝送管理システム50は中継装置30に対し、「限定通信ID」に登録された通信IDの伝送端末10又は携帯端末20間でのみ音声データを中継させる。
Figure 2016134781
(Limited communication management table)
In the volatile storage unit 5500, a limited communication management DB 5004 configured by a limited communication management table as shown in Table 5 is constructed. The limited communication table is an example of information during communication. In this limited communication management table, “communication IDs of participating terminals” participating in limited communication in association with “limited communication ID” are managed in association with each other. “Limited communication ID” is identification information for associating a plurality of transmission terminals 10 or portable terminals 20 performing limited communication. It may be the same as the “session ID” of limited communication. The transmission management system 50 causes the relay device 30 to relay voice data only between the transmission terminal 10 or the portable terminal 20 having the communication ID registered in the “limited communication ID”.

なお、伝送端末10aaと伝送端末10abとが限定通信を行っている状態で、同じテレビ会議に参加している他の伝送端末(例えば伝送端末10ac)が伝送端末10abを宛先にして限定通信開始要求を伝送管理システム50に送信する場合がある。伝送管理システム50は、伝送端末10abがすでに限定通信を行っているため、伝送端末10acには限定通信を許可しない(後述する「限定通信開始拒否」)を返すことになる。   In addition, in a state where the transmission terminal 10aa and the transmission terminal 10ab are performing limited communication, another transmission terminal (for example, the transmission terminal 10ac) participating in the same video conference requests the limited communication start with the transmission terminal 10ab as a destination. May be transmitted to the transmission management system 50. Since the transmission terminal 10ab has already performed limited communication, the transmission management system 50 returns a message indicating that limited communication is not permitted to the transmission terminal 10ac ("restricted communication start rejection" described later).

Figure 2016134781
次に、伝送管理システム50の各機能構成について詳細に説明する。送受信部51は、図4に示されているCPU301からの命令、及び図4に示されているネットワークI/F309によって実行され、通信ネットワーク2を介して他の端末、装置又はシステムと各種データ(または情報)の送受信を行う。
Figure 2016134781
Next, each functional configuration of the transmission management system 50 will be described in detail. The transmission / reception unit 51 is executed by the command from the CPU 301 shown in FIG. 4 and the network I / F 309 shown in FIG. Or information).

認証部52は、図4に示されているCPU301からの命令、及び図4に示されているネットワークI/F309によって実行され、送受信部51を介して受信されたログイン要求情報に含まれている通信ID及びパスワードの組み合わせが予め登録されているものと一致するか否かに応じて伝送端末10又は携帯端末20を認証する。   The authentication unit 52 is executed by the instruction from the CPU 301 shown in FIG. 4 and the log-in request information received by the network I / F 309 shown in FIG. The transmission terminal 10 or the portable terminal 20 is authenticated according to whether or not the combination of the communication ID and the password matches that registered in advance.

状態管理部53は、図4に示されているCPU301からの命令によって実現され、ログイン要求してきた要求元端末の「稼働状態」を管理すべく、端末管理テーブルの要求元端末の「稼働状態」を通信IDなどと関連して記憶させる。また、状態管理部53は、後述する「限定通信開始許可」を送受信部51が受信して限定通信が始まると、限定通信の要求元端末と宛先端末の端末管理テーブルにおける「通信状態」を"限定通信中"に遷移させる。また、後述する「限定通信終了応答」を送受信部51が受信して限定通信が終了すると、限定通信していた要求元端末と宛先端末の「通信状態」を"限定通信中"から"会議中"に遷移させる。   The state management unit 53 is realized by an instruction from the CPU 301 shown in FIG. 4, and manages the “operation state” of the request source terminal that has requested the login in order to manage the “operation state” of the request source terminal. Is stored in association with the communication ID or the like. Further, when the transmission / reception unit 51 receives a “limited communication start permission” described later and the limited communication starts, the state management unit 53 sets “communication state” in the terminal management table of the request source terminal and destination terminal of the limited communication to Transition to “Limited communication”. When the transmission / reception unit 51 receives a “limited communication end response” to be described later and ends the limited communication, the “communication state” of the request source terminal and the destination terminal that have performed the limited communication is changed from “limited communication” to “during meeting”. "Transition to".

また、送受信部51が限定通信の宛先端末から後述する「限定通信開始許可」を受信すると、限定通信制御部58は限定通信管理テーブルに限定通信に参加する伝送端末10又は携帯端末20の通信IDを記録する。また、「限定通信終了応答」を送受信部51が受信して限定通信が終了すると、限定通信制御部58は限定通信管理テーブルから限定通信に参加していた伝送端末10又は携帯端末20の通信IDを削除する。   Further, when the transmission / reception unit 51 receives a “restricted communication start permission” described later from the destination terminal of the limited communication, the limited communication control unit 58 enters the communication ID of the transmission terminal 10 or the portable terminal 20 participating in the limited communication in the limited communication management table. Record. In addition, when the transmission / reception unit 51 receives the “limited communication end response” and the limited communication ends, the limited communication control unit 58 determines the communication ID of the transmission terminal 10 or the portable terminal 20 that has participated in the limited communication from the limited communication management table. Is deleted.

端末抽出部54は、図4に示されているCPU301からの命令によって実現され、ログイン要求した「要求元端末の通信ID」をキーとして、宛先リスト管理DB5003を検索し、要求元端末と接続することができる宛先端末の候補の通信IDを読み出す。また、端末抽出部54は、次述する限定通信開始要求を送受信部51が受信した場合、端末管理テーブルを参照して限定通信開始要求に含まれる通信IDに対応づけられた「IPアドレス」を取得する。   The terminal extraction unit 54 is realized by a command from the CPU 301 shown in FIG. 4, searches the destination list management DB 5003 using the “communication ID of the request source terminal” requested for login as a key, and connects to the request source terminal. A communication ID of a candidate destination terminal that can be read is read out. Further, when the transmission / reception unit 51 receives the limited communication start request described below, the terminal extraction unit 54 refers to the terminal management table and determines the “IP address” associated with the communication ID included in the limited communication start request. get.

端末状態取得部55は、図4に示されているCPU301からの命令によって実現され、端末抽出部54によって抽出された宛先端末の候補としての伝送端末10の「稼働状態」を取得する。また、端末状態取得部55は、次述する限定通信開始要求を送受信部51が受信した場合、端末管理テーブルを参照して限定通信の宛先端末の「通信状態」を取得する。   The terminal state acquisition unit 55 is realized by a command from the CPU 301 illustrated in FIG. 4, and acquires the “operation state” of the transmission terminal 10 as a destination terminal candidate extracted by the terminal extraction unit 54. Further, when the transmission / reception unit 51 receives the limited communication start request described below, the terminal state acquisition unit 55 refers to the terminal management table and acquires the “communication state” of the destination terminal of the limited communication.

セッション管理部56は、図4に示されているCPU301からの命令によって実現され、不揮発性記憶部5000のセッション管理DB5002に、コンテンツデータを中継する中継装置30の「中継装置ID」と、「セッションID」、「要求元端末の通信ID」、及び「宛先端末の通信ID」を関連付けて記憶して管理する。   The session management unit 56 is realized by a command from the CPU 301 illustrated in FIG. 4, and stores the “relay device ID” of the relay device 30 that relays content data and the “session” in the session management DB 5002 of the nonvolatile storage unit 5000. “ID”, “communication ID of request source terminal”, and “communication ID of destination terminal” are stored in association with each other and managed.

判定部57は、限定通信の要求元端末(伝送端末10又は携帯端末20)から「限定通信開始要求」を伝送管理システム50が受信した場合に、端末状態取得部55が取得した限定通信の宛先端末の「通信状態」を参照して、限定通信が可能かどうかを判定する。宛先端末がすでに"限定通信中"の場合、限定通信は不可であると判定される。宛先端末が"限定通信中"でない場合、限定通信は可能であると判定される。なお、限定通信開始要求はすでにテレビ会議のセッションが確立している伝送端末10又は携帯端末20のみを宛先端末とする。送受信部51は、判定部57による判定結果を限定通信開始拒否又は限定通信開始許可として限定通信の要求元端末に送信する。   When the transmission management system 50 receives a “limited communication start request” from the request source terminal (the transmission terminal 10 or the portable terminal 20) for limited communication, the determination unit 57 receives the limited communication destination acquired by the terminal state acquisition unit 55. It is determined whether or not limited communication is possible with reference to the “communication state” of the terminal. If the destination terminal is already in “limited communication”, it is determined that limited communication is not possible. If the destination terminal is not “in limited communication”, it is determined that limited communication is possible. In the limited communication start request, only the transmission terminal 10 or the portable terminal 20 in which a video conference session has already been established is set as the destination terminal. The transmission / reception unit 51 transmits the determination result by the determination unit 57 to the request source terminal of the limited communication as a limited communication start rejection or a limited communication start permission.

限定通信制御部58は、図4に示されているCPU301からの命令によって実現され、限定通信開始要求などに基づき、中継装置30に対し限定通信による音声データの中継の開始・終了を要求する。   The limited communication control unit 58 is realized by a command from the CPU 301 shown in FIG. 4 and requests the relay device 30 to start / end relay of voice data by limited communication based on a limited communication start request or the like.

記憶・読出処理部59は、図4に示されているCPU301からの命令、及び図4に示されているHDD305によって実行され、不揮発性記憶部5000に各種データを記憶したり、不揮発性記憶部5000に記憶された各種データを読み出したりする処理を行う。   The storage / reading processing unit 59 is executed by the instruction from the CPU 301 shown in FIG. 4 and the HDD 305 shown in FIG. 4, and stores various data in the nonvolatile storage unit 5000 or the nonvolatile storage unit A process of reading various data stored in 5000 is performed.

<<中継装置の機能構成>>
中継装置30は、送受信部31、通常セッション転送部32、限定セッション転送部33、及び、記憶・読出処理部39を有している。これら各部は、図5に示されている各構成要素のいずれかが、HD304からRAM303上に展開された中継装置用プログラムに従ったCPU301からの命令によって動作することで実現される機能又は機能される手段である。また、中継装置30は、中継装置30の電源をOFFにすることで各種データ(または情報)の記憶が消去される揮発性記憶部3000を有しており、この揮発性記憶部3000は図4に示されているHD304により構築されている。
<< Functional configuration of relay device >>
The relay device 30 includes a transmission / reception unit 31, a normal session transfer unit 32, a limited session transfer unit 33, and a storage / read processing unit 39. Each of these units is a function or function realized by any one of the constituent elements shown in FIG. 5 operating according to a command from the CPU 301 in accordance with the relay device program expanded from the HD 304 onto the RAM 303. Means. Further, the relay device 30 has a volatile storage unit 3000 in which the storage of various data (or information) is erased by turning off the power of the relay device 30. The volatile storage unit 3000 is shown in FIG. It is constructed by HD304 shown in FIG.

(転送先管理テーブル)
揮発性記憶部3000には、表6に示されているような転送先管理テーブルによって構成されている転送先管理DB3001が構築されている。この転送先管理テーブルでは、画像・音声データ用セッションsedの「セッションID」又は限定通信専用の音声データのセッションsecの「セッションID」に対応付けて各セッションに参加している伝送端末10の「通信ID」と「IPアドレス」が登録されている。
(Forwarding destination management table)
In the volatile storage unit 3000, a transfer destination management DB 3001 configured by a transfer destination management table as shown in Table 6 is constructed. In this transfer destination management table, the “session ID” of the image / audio data session sed or the “session ID” of the session sec of audio data dedicated for limited communication is associated with the “session ID” of the transmission terminal 10 participating in each session. "Communication ID" and "IP address" are registered.

中継装置30は転送先管理テーブルを参照してテレビ会議の画像データと音声データを転送する伝送端末10及び携帯端末20を判断し、限定通信の音声データを転送する伝送端末10及び携帯端末20を判断する。転送先管理テーブルは伝送管理システム50から送信された情報を中継装置30が登録することで構築される。   The relay device 30 refers to the transfer destination management table to determine the transmission terminal 10 and the portable terminal 20 that transfer the video data and audio data of the video conference, and determines the transmission terminal 10 and the portable terminal 20 that transfers the limited communication audio data. to decide. The transfer destination management table is constructed when the relay device 30 registers information transmitted from the transmission management system 50.

Figure 2016134781
次に、中継装置30の各機能構成について詳細に説明する。送受信部31は、図4に示されているCPU301からの命令、及び図4に示されているネットワークI/F309によって実行され、通信ネットワーク2を介して他の端末、装置又はシステムと各種データ(または情報)の送受信を行う。
Figure 2016134781
Next, each functional configuration of the relay device 30 will be described in detail. The transmission / reception unit 31 is executed by the instruction from the CPU 301 shown in FIG. 4 and the network I / F 309 shown in FIG. Or information).

通常セッション転送部32は図4に示されているCPU301からの命令によって実現され、転送先管理テーブルの画像・音声データ用セッションsedの「セッションID」に対応づけられている通信IDに基づき、伝送端末10及び携帯端末20から送信された画像データ又は音声データを他の伝送端末10及び携帯端末20に転送する。   The normal session transfer unit 32 is realized by a command from the CPU 301 shown in FIG. 4 and transmits based on the communication ID associated with the “session ID” of the image / audio data session sed in the transfer destination management table. The image data or audio data transmitted from the terminal 10 and the portable terminal 20 is transferred to the other transmission terminal 10 and the portable terminal 20.

限定セッション転送部33は図4に示されているCPU301からの命令によって実現され、転送先管理テーブルの限定通信専用のセッションsecの「セッションID」に対応づけられている通信IDに基づき、伝送端末10及び携帯端末20から送信された音声データを他の伝送端末10及び携帯端末20に転送する。   The limited session transfer unit 33 is realized by a command from the CPU 301 shown in FIG. 4 and is based on a communication ID associated with the “session ID” of the session sec dedicated to limited communication in the transfer destination management table. 10 and the audio data transmitted from the portable terminal 20 are transferred to the other transmission terminal 10 and the portable terminal 20.

記憶・読出処理部39は、図4に示されているCPU301からの命令、及び図4に示されているHDD305によって実行され、揮発性記憶部3000に各種データを記憶したり、揮発性記憶部3000に記憶された各種データを読み出したりする処理を行う。   The storage / reading processing unit 39 is executed by the instruction from the CPU 301 shown in FIG. 4 and the HDD 305 shown in FIG. 4, and stores various data in the volatile storage unit 3000 or the volatile storage unit A process of reading various data stored in 3000 is performed.

<通信の開始からセッションの確立まで>
図6は、複数の伝送端末10の間で通信を開始する準備段階の処理を示したシーケンス図の一例である。図6では伝送端末10aaが伝送端末10ac、10abと通信を開始する準備の処理を説明する。
<From communication start to session establishment>
FIG. 6 is an example of a sequence diagram illustrating processing in a preparation stage for starting communication between a plurality of transmission terminals 10. FIG. 6 illustrates a preparation process in which the transmission terminal 10aa starts communication with the transmission terminals 10ac and 10ab.

まず、ユーザが、図2に示されている電源スイッチ109をONにすると、図5に示されている操作入力受付部12が電源ONを受け付けて、電源をONにする(ステップS21)。そして、ログイン要求部13は、上記電源ONの受信を契機とし、送受信部11から通信ネットワーク2を介して伝送管理システム50に、ログイン要求を示すログイン要求情報を自動的に送信する(ステップS22)。ログイン要求は電源ON時だけでなくユーザ操作によって任意のタイミングで送信されることができる。このログイン要求情報には、要求元である伝送端末10aaを識別するための通信ID、およびパスワードが含まれている。なお、伝送端末10aaから伝送管理システム50へログイン要求情報が送信される際は、受信側である伝送管理システム50は、伝送端末10aaの「IPアドレス」を把握することができる。なお、携帯端末20が要求元端末の場合、操作入力受付部12がユーザのログイン操作を受け付けて、通信ID及びパスワードを伝送管理システム50に送信する。   First, when the user turns on the power switch 109 shown in FIG. 2, the operation input receiving unit 12 shown in FIG. 5 receives the power ON and turns on the power (step S21). The login request unit 13 automatically transmits login request information indicating a login request from the transmission / reception unit 11 to the transmission management system 50 via the communication network 2 in response to the reception of the power ON (step S22). . The login request can be transmitted at an arbitrary timing not only when the power is turned on but also by a user operation. The login request information includes a communication ID for identifying the transmission terminal 10aa that is a request source, and a password. When the login request information is transmitted from the transmission terminal 10aa to the transmission management system 50, the transmission management system 50 on the receiving side can grasp the “IP address” of the transmission terminal 10aa. When the mobile terminal 20 is a request source terminal, the operation input reception unit 12 receives a user login operation and transmits a communication ID and a password to the transmission management system 50.

次に、伝送管理システム50の認証部52は、送受信部51を介して受信したログイン要求情報に含まれている通信IDおよびパスワードと同一の通信IDおよびパスワードが管理されているかを判断することによって端末認証を行う(ステップS23)。本実施形態では、認証が成立したものとして説明する。   Next, the authentication unit 52 of the transmission management system 50 determines whether the same communication ID and password as those included in the login request information received via the transmission / reception unit 51 are managed. Terminal authentication is performed (step S23). In the present embodiment, description will be made assuming that authentication has been established.

認証部52によって、伝送端末10の認証が成立した場合、状態管理部53は端末管理テーブルに、伝送端末10aaの通信ID、「稼働状態」、「通信状態」、上記ログイン要求情報が受信された「受信時間」、および伝送端末10aaの「IPアドレス」を関連付けて記憶する(ステップS24)。なお、この時の「稼働状態」は"オンライン"、「通信状態」は"会議なし"である。   When the authentication of the transmission terminal 10 is established by the authentication unit 52, the state management unit 53 receives the communication ID of the transmission terminal 10aa, the “operation state”, the “communication state”, and the login request information in the terminal management table. The “reception time” and the “IP address” of the transmission terminal 10aa are stored in association with each other (step S24). At this time, the “operating state” is “online”, and the “communication state” is “no meeting”.

伝送管理システム50の送受信部51は、認証部52によって得られた認証結果が示された認証結果情報を、通信ネットワーク2を介してログイン要求してきた伝送端末10aaに送信する(ステップS25)。   The transmission / reception unit 51 of the transmission management system 50 transmits the authentication result information indicating the authentication result obtained by the authentication unit 52 to the transmission terminal 10aa that has made a login request via the communication network 2 (step S25).

伝送管理システム50の端末抽出部54は、ログイン要求した伝送端末10aaの通信IDである"01aa"を検索キーとして、宛先リスト管理テーブルを検索し、伝送端末10aaと通信することができる伝送端末の候補の通信IDを読み出すことによって抽出する(ステップS26)。ここでは、伝送端末10aaの通信IDである"01aa"に対応する宛先端末(10ab,10ac、10ba、10bb)のそれぞれの通信IDである"01ab"、"01ac"、"01ba"、"01bb"が抽出されることになる。   The terminal extraction unit 54 of the transmission management system 50 searches for a destination list management table using “01aa”, which is the communication ID of the transmission terminal 10aa that requested the login, as a search key, and is a transmission terminal that can communicate with the transmission terminal 10aa. Extraction is performed by reading the candidate communication ID (step S26). Here, “01ab”, “01ac”, “01ba”, “01bb” are the communication IDs of the destination terminals (10ab, 10ac, 10ba, 10bb) corresponding to the communication ID “01aa” of the transmission terminal 10aa. Will be extracted.

次に、端末状態取得部55は、端末抽出部54によって抽出された伝送端末10ab、10ac、10ba、10bb」の通信ID("01ab"、"01ac"、"01ba"、"01bb")を検索キーとして端末管理テーブルを検索し、通信ID毎に「稼働状態」を読み出す(S27)。ここでは説明のため、伝送端末10ab、10acが"オンライン"、伝送端末10ba、10bbが"オフライン"であるとする。   Next, the terminal state acquisition unit 55 searches for the communication IDs (“01ab”, “01ac”, “01ba”, “01bb”) of the transmission terminals 10ab, 10ac, 10ba, 10bb extracted by the terminal extraction unit 54. The terminal management table is searched as a key, and “operation status” is read for each communication ID (S27). Here, for the sake of explanation, it is assumed that the transmission terminals 10ab and 10ac are “online” and the transmission terminals 10ba and 10bb are “offline”.

次に、送受信部51は、端末抽出部54が抽出した通信ID("01ab"、"01ac"、"01ba"、"01bb")と「稼働状態」とが含まれた宛先状態情報を、通信ネットワーク2を介して伝送端末10aaに送信する(ステップS28)。これにより、伝送端末10aaは、伝送端末10aaと通信することができる伝送端末(10ab,10ac、10ba、10bb)の現時点のそれぞれの「稼働状態」を把握することができる。   Next, the transmission / reception unit 51 communicates the destination state information including the communication ID (“01ab”, “01ac”, “01ba”, “01bb”) extracted by the terminal extraction unit 54 and “operation state”. The data is transmitted to the transmission terminal 10aa via the network 2 (step S28). Thereby, the transmission terminal 10aa can grasp the current “operating state” of the transmission terminals (10ab, 10ac, 10ba, 10bb) that can communicate with the transmission terminal 10aa.

更に、伝送管理システム50の端末抽出部54は、ログイン要求してきた伝送端末10aaの通信IDである"01aa"を検索キーとして、宛先リスト管理テーブルを検索し、通信IDである"01aa"を宛先端末の候補として登録している伝送端末10の通信IDを抽出する(ステップS29)。上記の宛先リスト管理テーブルでは、抽出される他の伝送端末10の通信IDは"01ab""01ac""01ba""01bb"である。   Further, the terminal extraction unit 54 of the transmission management system 50 searches the destination list management table using “01aa”, which is the communication ID of the transmission terminal 10aa that requested the login, as a search key, and sets “01aa”, which is the communication ID, as the destination. The communication ID of the transmission terminal 10 registered as a terminal candidate is extracted (step S29). In the above destination list management table, the extracted communication IDs of the other transmission terminals 10 are “01ab”, “01ac”, “01ba”, and “01bb”.

次に、伝送管理システム50の端末状態取得部55は、ログイン要求して来た伝送端末10aaの通信IDである"01aa"を検索キーとして、端末管理テーブルを検索し伝送端末10aaの「稼働状態」を取得する(ステップS30)。   Next, the terminal status acquisition unit 55 of the transmission management system 50 searches the terminal management table using “01aa”, which is the communication ID of the transmission terminal 10aa that requested the login, as a search key, and searches the “operation status” of the transmission terminal 10aa. "Is acquired (step S30).

そして、送受信部51は、上記ステップS29で抽出された通信ID("01ab"、"01ac""01ba""01bb")に係る伝送端末10のうち、端末管理テーブルで「稼働状態」が"オンライン"となっている伝送端末10に、上記ステップS30で取得された伝送端末10aaの通信IDである"01aa"と「稼働状態」として"オンライン"が含まれる宛先状態情報を送信する(ステップS31、S32)。したがって、伝送端末10ab、10acに宛先状態情報が送信される。なお、送受信部51が伝送端末10ab、10acに宛先状態情報を送信する際に、通信ID("01ab"、"01ac")に基づいて、端末管理テーブルで管理されている端末の「IPアドレス」を参照する。   The transmission / reception unit 51 then sets “Online” as “Online” in the terminal management table among the transmission terminals 10 related to the communication ID (“01ab”, “01ac”, “01ba”, “01bb”) extracted in step S29. “01aa”, which is the communication ID of the transmission terminal 10aa acquired in step S30, and destination status information including “online” as the “operation status” are transmitted to the transmission terminal 10 that is “(step S31, S32). Therefore, the destination state information is transmitted to the transmission terminals 10ab and 10ac. When the transmission / reception unit 51 transmits the destination state information to the transmission terminals 10ab and 10ac, the “IP address” of the terminal managed in the terminal management table based on the communication ID (“01ab”, “01ac”). Refer to

伝送端末10aaの宛先リスト作成部17は、宛先リストの情報と宛先端末の候補の「稼働状態」とを受け取ると、宛先リスト画面を作成し、表示装置203に表示させる(ステップS33)。この場合の宛先リスト画面には、伝送端末10ab、10acの名称と「稼働状態」として"オンライン"が表示される。   When receiving the destination list information and the “operating state” of the destination terminal candidate, the destination list creation unit 17 of the transmission terminal 10aa creates a destination list screen and displays it on the display device 203 (step S33). In this case, on the destination list screen, the names of the transmission terminals 10ab and 10ac and “online” are displayed as “operation status”.

一方、他の伝送端末10ab、10acでも、図6と同様の処理を行うことで、各伝送端末10ab、10acが宛先候補の伝送端末10の「稼働状態」を把握できる。   On the other hand, the other transmission terminals 10ab and 10ac can grasp the “operating state” of the destination candidate transmission terminal 10 by performing the same processing as in FIG.

図7は、本実施形態に係る複数の端末の間でセッションを確立する処理の一例のシーケンス図である。   FIG. 7 is a sequence diagram illustrating an example of processing for establishing a session among a plurality of terminals according to the present embodiment.

ユーザが伝送端末10aaの操作ボタン108から宛先リスト画面に表示された通信IDとして例えば"01ac"の宛先端末を選択すると、操作入力受付部12は、接続を開始する要求を受け付ける(ステップS41)。   When the user selects, for example, a destination terminal of “01ac” as the communication ID displayed on the destination list screen from the operation button 108 of the transmission terminal 10aa, the operation input reception unit 12 receives a request to start connection (step S41).

伝送端末10aaの送受信部11は、伝送端末10aaの通信IDである"01aa"と、「宛先端末の通信ID」である"01ac"とが含まれ、接続を開始したい旨を示す開始要求情報を伝送管理システム50に送信する(ステップS42)。これにより、伝送管理システム50は要求元端末(伝送端末10aa)の「IPアドレス」を把握する。   The transmission / reception unit 11 of the transmission terminal 10aa includes “01aa” which is the communication ID of the transmission terminal 10aa and “01ac” which is the “communication ID of the destination terminal”, and includes start request information indicating that the connection is to be started. It transmits to the transmission management system 50 (step S42). Thereby, the transmission management system 50 grasps the “IP address” of the request source terminal (transmission terminal 10aa).

次に、伝送管理システム50のセッション管理部56は「セッションID」を生成する(ステップS43)。「セッションID」としては重複しないIDが生成される。   Next, the session management unit 56 of the transmission management system 50 generates a “session ID” (step S43). A unique ID is generated as the “session ID”.

そして、この生成した「セッションID」と、要求元端末(伝送端末10aa)の通信IDである"01aa"と、宛先端末(伝送端末10ac)の通信IDである"01ac"とをセッション管理DB5002に関連付けて記憶して管理する(ステップS44)。   The generated “session ID”, “01aa” which is the communication ID of the request source terminal (transmission terminal 10aa), and “01ac” which is the communication ID of the destination terminal (transmission terminal 10ac) are stored in the session management DB 5002. It is stored and managed in association (step S44).

さらに、伝送管理システム50のセッション管理部56は、要求元端末と宛先端末とが通信するのに適切な中継装置30を決定する(ステップS45)。中継装置30を決定するための方法は、例えば通信帯域が最も広いネットワーク上にある中継装置30を選択する等の方法が考えられる。   Further, the session management unit 56 of the transmission management system 50 determines a relay device 30 suitable for communication between the request source terminal and the destination terminal (step S45). As a method for determining the relay device 30, for example, a method of selecting the relay device 30 on the network having the widest communication band can be considered.

なお、中継装置30を選択せずに、要求元端末及び宛先端末間で直接セッションを確立してもよいし、伝送管理システム50を介したセッションを確立してもよい。   Note that a session may be established directly between the request source terminal and the destination terminal without selecting the relay device 30, or a session via the transmission management system 50 may be established.

そして、伝送管理システム50の送受信部51は、ステップS43で生成した「セッションID」と、ステップS45で決定した中継装置30の「IPアドレス」とを要求元端末(伝送端末10aa)及び宛先端末(伝送端末10ac)に送信する(ステップS46,47)。   Then, the transmission / reception unit 51 of the transmission management system 50 uses the “session ID” generated in step S43 and the “IP address” of the relay device 30 determined in step S45 to the request source terminal (transmission terminal 10aa) and the destination terminal ( It transmits to the transmission terminal 10ac) (steps S46, 47).

伝送端末10acの表示制御部16は要求元端末(伝送端末10aa)の通信IDをディスプレイ120(携帯端末20の場合は表示装置203)に表示するなどして、操作入力受付部12がユーザによるテレビ会議の許可を受け付ける。そして、伝送端末10acの送受信部11は開始許可を伝送管理システム50に送信する(ステップS47−1)。   The display control unit 16 of the transmission terminal 10ac displays the communication ID of the request source terminal (transmission terminal 10aa) on the display 120 (the display device 203 in the case of the portable terminal 20). Accept meeting permission. And the transmission / reception part 11 of the transmission terminal 10ac transmits start permission to the transmission management system 50 (step S47-1).

次に、伝送管理システム50の状態管理部53は、要求元端末(伝送端末10aa)の「IPアドレス」と通信ID及び宛先端末(伝送端末10ac)の「IPアドレス」と通信IDを中継装置30に送信する(ステップS48)。   Next, the state management unit 53 of the transmission management system 50 relays the “IP address” and communication ID of the request source terminal (transmission terminal 10aa) and the “IP address” and communication ID of the destination terminal (transmission terminal 10ac) to the relay device 30. (Step S48).

中継装置30の送受信部31は伝送管理システム50から通信IDを受信すると「セッションID」に対応づけて転送先管理テーブルに登録する。これにより、要求元端末(伝送端末10aa)と宛先端末(伝送端末10ac)との間でセッションが確立される(ステップS49)。セッションが確立することで、伝送端末10aaは中継装置30を介して画像データと音声データを伝送端末10acに送信し、伝送端末10acは中継装置30を介して画像データと音声データを伝送端末10aaに送信する。   When the transmission / reception unit 31 of the relay device 30 receives the communication ID from the transmission management system 50, the transmission / reception unit 31 registers it in the transfer destination management table in association with the “session ID”. Thereby, a session is established between the request source terminal (transmission terminal 10aa) and the destination terminal (transmission terminal 10ac) (step S49). When the session is established, the transmission terminal 10aa transmits image data and audio data to the transmission terminal 10ac via the relay device 30, and the transmission terminal 10ac transmits image data and audio data to the transmission terminal 10aa via the relay device 30. Send.

次に、伝送端末10aaのユーザが招待通知を伝送管理システム50に送信する(ステップS50)。招待通知とは、すでにセッションが確立されているテレビ会議に別の伝送端末10を参加させるための通知である。招待通知には招待通知を送信した伝送端末10aaの通信IDである"01aa"、招待される伝送端末10abの通信IDである"01ab"が含まれる。また、伝送管理システム50は招待通知を送信した伝送端末10aaの「IPアドレス」を取得する。   Next, the user of the transmission terminal 10aa transmits an invitation notice to the transmission management system 50 (step S50). The invitation notification is a notification for allowing another transmission terminal 10 to participate in a video conference in which a session has already been established. The invitation notification includes “01aa” that is the communication ID of the transmission terminal 10aa that has transmitted the invitation notification, and “01ab” that is the communication ID of the invited transmission terminal 10ab. Also, the transmission management system 50 acquires the “IP address” of the transmission terminal 10aa that sent the invitation notification.

伝送管理システム50の送受信部51が招待通知を受信すると、伝送管理システム50の端末状態取得部55は端末管理テーブルから招待される伝送端末10abの「IPアドレス」を取得する。これにより、伝送管理システム50の送受信部51は伝送端末10abに招待通知を送信する(ステップS51)。   When the transmission / reception unit 51 of the transmission management system 50 receives the invitation notification, the terminal state acquisition unit 55 of the transmission management system 50 acquires the “IP address” of the invited transmission terminal 10ab from the terminal management table. Thereby, the transmission / reception unit 51 of the transmission management system 50 transmits an invitation notice to the transmission terminal 10ab (step S51).

伝送端末10abの表示制御部16は要求元端末(伝送端末10aa)の通信IDをディスプレイ120(携帯端末20の場合は表示装置203)に表示するなどして、操作入力受付部12がユーザによるテレビ会議への招待に対する応答を受け付ける。ここではユーザは招待を受諾したものとする。そして、伝送端末10abの送受信部11は招待受諾を伝送管理システム50に送信する(ステップS52)。   The display control unit 16 of the transmission terminal 10ab displays the communication ID of the request source terminal (transmission terminal 10aa) on the display 120 (the display device 203 in the case of the portable terminal 20). Accept responses to meeting invitations. Here, it is assumed that the user has accepted the invitation. And the transmission / reception part 11 of the transmission terminal 10ab transmits invitation acceptance to the transmission management system 50 (step S52).

伝送管理システム50の送受信部51は招待通知を送信した伝送端末10aaに招待受諾を送信する(ステップS53)。この後、伝送管理システム50の送受信部51は招待された伝送端末10abに関し、ステップS47、S48の処理を行うことで、伝送端末10aaと10acのセッションに伝送端末10abが参加することができる。すなわち、中継装置30は転送先管理テーブルに伝送端末10abの通信IDを登録し、通常セッション転送部32は伝送端末10aa、10ac、10abの間で画像データと音声データを転送する。   The transmission / reception unit 51 of the transmission management system 50 transmits an invitation acceptance to the transmission terminal 10aa that has transmitted the invitation notification (step S53). Thereafter, the transmission / reception unit 51 of the transmission management system 50 performs steps S47 and S48 on the invited transmission terminal 10ab, so that the transmission terminal 10ab can participate in the sessions of the transmission terminals 10aa and 10ac. That is, the relay device 30 registers the communication ID of the transmission terminal 10ab in the transfer destination management table, and the normal session transfer unit 32 transfers image data and audio data between the transmission terminals 10aa, 10ac, and 10ab.

以降は、要求元端末(伝送端末10aa)、宛先端末(伝送端末10ac)、及び、招待された伝送端末10abとの間で、中継装置30を介して画像データと音声データが送受信される。   Thereafter, image data and audio data are transmitted / received via the relay device 30 between the request source terminal (transmission terminal 10aa), the destination terminal (transmission terminal 10ac), and the invited transmission terminal 10ab.

図8は、伝送システム1における画像データ、音声データ、及び各種管理情報の送受信の状態を示した概念図である。伝送システム1において、伝送端末10aa、10ab、10acの間では、伝送管理システム50を介して、各種の管理情報を送受信するための管理情報用セッションseiが確立される。また、伝送端末10aa、10ab、10acの間では、中継装置30を介して、画像データ及び音声データを送受信するためのセッションが確立される。図8では画像データ及び音声データのセッションをまとめて、画像・音声データ用セッションsedとして示している。   FIG. 8 is a conceptual diagram showing a state of transmission / reception of image data, audio data, and various management information in the transmission system 1. In the transmission system 1, a management information session sei for transmitting and receiving various types of management information is established between the transmission terminals 10aa, 10ab, and 10ac via the transmission management system 50. In addition, a session for transmitting and receiving image data and audio data is established between the transmission terminals 10aa, 10ab, and 10ac via the relay device 30. In FIG. 8, the image data and audio data sessions are collectively shown as an image / audio data session sed.

なお、図7の動作手順において、伝送管理システム50は画像データのみのセッションを確立し音声データのセッションを確立しなくてもよい。これにより、セッションの確立直後、伝送端末10又は携帯端末20は画像データのみを送信したり表示したりでき、ユーザが会議の準備をする前に音声データが出力されることを防止できる。音声データのセッションはユーザ操作により、伝送管理システム50が中継装置30に指示して中継装置30が音声データの中継を開始することで確立してもよいし、後述する実施例で説明される限定通信により実現されてもよい。あるいは、画像データ及び音声データのセッションが確立されても、セッションの確立直後、伝送端末10又は携帯端末20がマイク114,212による音声データの収集をオフしてもよい。   In the operation procedure of FIG. 7, the transmission management system 50 does not need to establish a session for only image data and establish a session for audio data. Thereby, immediately after the session is established, the transmission terminal 10 or the portable terminal 20 can transmit or display only the image data, and can prevent the audio data from being output before the user prepares for the conference. The voice data session may be established by the user operation by the transmission management system 50 instructing the relay device 30 and the relay device 30 starts relaying the voice data, or the limitation described in the embodiments described later. It may be realized by communication. Alternatively, even if a session of image data and audio data is established, the transmission terminal 10 or the portable terminal 20 may turn off the collection of audio data by the microphones 114 and 212 immediately after the session is established.

そして、限定通信が開始されると、限定通信専用の音声データのセッションsecが新規に確立される。図8では、伝送端末10aa、10abの間にセッションsecが確立されている。このように、限定通信専用のセッションsecが存在するため、伝送端末10aa、abは、テレビ会議の音声データと限定通信の音声データを個別に扱うことができ、片方の音声データの音量を大きくしたり両方の音声データを出力させたりすることができるようになる。   When the limited communication is started, a session sec of voice data dedicated to the limited communication is newly established. In FIG. 8, a session sec is established between the transmission terminals 10aa and 10ab. As described above, since the session sec dedicated to the limited communication exists, the transmission terminals 10aa and ab can individually handle the audio data of the video conference and the audio data of the limited communication, and increase the volume of one audio data. Both voice data can be output.

なお、中継装置30が限定通信専用のセッションsecに基づいて音声データを中継するのでなく、伝送管理システム50がセッションsecに基づいて音声データを中継してもよい。   Note that the transmission management system 50 may relay the voice data based on the session sec instead of the relay device 30 relaying the voice data based on the session sec dedicated to the limited communication.

<<会議画面>>
図9はテレビ会議の開催中にディスプレイ120又は表示装置203に表示される会議画面900の一例を示す。すなわち、図9はテレビ会議のセッションが確立され、限定通信の開始前に表示される画面である。図9(a)は拠点数が4個の場合の会議画面900の一例を示し、図9(b)は拠点数が9個の場合の会議画面900の一例を示す。したがって、図9(a)では画面が4個に分割されており"A1"〜"A4"の「表示領域」が表示され、図9(b)では9個に分割されており"A1"〜"A9"の「表示領域」が表示されている。
<< Conference Screen >>
FIG. 9 shows an example of a conference screen 900 displayed on the display 120 or the display device 203 during the video conference. That is, FIG. 9 is a screen displayed before the start of the limited communication after the video conference session is established. FIG. 9A shows an example of the conference screen 900 when the number of bases is four, and FIG. 9B shows an example of the conference screen 900 when the number of bases is nine. Therefore, in FIG. 9A, the screen is divided into four, and the “display area” of “A1” to “A4” is displayed, and in FIG. A “display area” of “A9” is displayed.

「表示領域」の数は会議に参加している拠点数に応じて表示制御部16が自動的に決定する。一度に表示可能な最大の「表示領域」の数は予め定められているが、ユーザが最大の「表示領域」の数を設定してもよい。また、表示制御部16は、図9(a)の"A1"の「表示領域」に示すように、音量が最も大きい音声データを送信した拠点の画像データを最も大きく表示することができる。また、表示制御部16は図9(b)のように全ての「表示領域」を同じ大きさに表示することもできる。   The number of “display areas” is automatically determined by the display control unit 16 according to the number of bases participating in the conference. The maximum number of “display areas” that can be displayed at a time is predetermined, but the user may set the maximum number of “display areas”. Further, as shown in “Display area” of “A1” in FIG. 9A, the display control unit 16 can display the image data of the base where the sound data having the highest volume is transmitted in the largest size. The display control unit 16 can also display all “display areas” in the same size as shown in FIG.

表示領域に表示される拠点には原則として自拠点の画像データが含まれる。例えば、図9(a)の"A4"の「表示領域」及び図9(b)の"A9"の「表示領域」には自拠点の画像データが表示される。一方、ユーザの設定により又は自動的に、自拠点の画像データが表示されなくてもよい。   In principle, the base displayed in the display area includes image data of the base. For example, the image data of the local site is displayed in the “display area” of “A4” in FIG. 9A and the “display area” of “A9” in FIG. 9B. On the other hand, the image data of the local site may not be displayed according to the user setting or automatically.

本実施例では、限定通信の宛先端末をユーザが選択する際のユーザインタフェースについて説明する。   In this embodiment, a user interface when a user selects a destination terminal for limited communication will be described.

<ユーザインタフェース1>
図10は、伝送端末10のディスプレイ120又は携帯端末20の表示装置203に表示される限定通信の宛先選択画面910の一例を示す図である。以下では、伝送端末10のディスプレイ120に限定通信の宛先選択画面910が表示されたものとして説明するが、携帯端末20の場合も画面サイズなどの制約を除いてユーザインタフェースは同様である。
<User interface 1>
FIG. 10 is a diagram illustrating an example of a limited communication destination selection screen 910 displayed on the display 120 of the transmission terminal 10 or the display device 203 of the mobile terminal 20. In the following description, it is assumed that the limited communication destination selection screen 910 is displayed on the display 120 of the transmission terminal 10, but the user interface is the same for the portable terminal 20 except for restrictions such as the screen size.

伝送端末10は、タッチパネルのような指やペン先の接触位置の位置情報を検出する機能又はマウスポインターのようなユーザの指示位置の位置情報を検出するポインティングデバイスを具備している。図10ではマウスポインター911を図示したが、ユーザはタッチパネルを指などで操作できる。限定通信を行いたいユーザは、ディスプレイ120に表示された各拠点から送信される画像データの"A1"〜"A9"の「表示領域」をマウスポインター911であればクリックする。また、タッチパネルを利用できる場合は指で触ることにより選択を行う。通信相手選択受付部121はユーザが選択した「表示領域」の選択を受け付ける。   The transmission terminal 10 has a function of detecting the position information of the touch position of a finger or a pen tip, such as a touch panel, or a pointing device that detects position information of a user's designated position, such as a mouse pointer. Although the mouse pointer 911 is illustrated in FIG. 10, the user can operate the touch panel with a finger or the like. The user who wants to perform limited communication clicks the “display area” of “A1” to “A9” of the image data transmitted from each site displayed on the display 120 if the mouse pointer 911 is used. If a touch panel can be used, selection is performed by touching with a finger. The communication partner selection receiving unit 121 receives the selection of the “display area” selected by the user.

図10では9箇所の拠点の画像データが1度に表示されている。9箇所としたのは一例に過ぎず、8以下でも10以上でもよい。表示制御部16は拠点数に応じてディスプレイ120を適切なサイズの「表示領域」に分割する。図10では拠点数が9より多い場合、残りの拠点が送信する画像データは限定通信の宛先選択画面910がスクロールされることで表示される。ユーザはスクロールバー914をマウスポインター911や指で選択することで10以上の拠点から送信される画像データを表示できる。   In FIG. 10, the image data of nine bases are displayed at a time. Nine locations are merely examples, and may be 8 or less or 10 or more. The display control unit 16 divides the display 120 into “display areas” of appropriate sizes according to the number of locations. In FIG. 10, when the number of bases is greater than 9, the image data transmitted by the remaining bases is displayed by scrolling the limited communication destination selection screen 910. The user can display image data transmitted from 10 or more bases by selecting the scroll bar 914 with the mouse pointer 911 or the finger.

なお、この限定通信の宛先選択画面910には自拠点の画像データが含まれていても含まれていなくてもよい。例えば、拠点数が閾値以上の場合、表示制御部16は自拠点を含めないと判断する。自拠点が表示されない場合、ユーザ操作により表示制御部16は自拠点の画像データを表示する。   Note that this limited communication destination selection screen 910 may or may not include image data of the local site. For example, when the number of bases is equal to or greater than the threshold, the display control unit 16 determines that the local base is not included. When the own site is not displayed, the display control unit 16 displays the image data of the own site by a user operation.

表示制御部16は、ユーザが選択した「表示領域」が選択された状態であることを視覚的に示すため、背景色を変えるなどの視覚効果をつけて表示する。図10では"A2"、"A6"、"A8"の3つの「表示領域」に視覚効果が付与され、"A1"、"A3"〜"A5"、"A7","A9"の「表示領域」とは表示態様が変わっている。なお、一度に選択可能な最大の拠点数(「表示領域」の数)は画像データと音声データのセッションが確立している拠点数である。あるいは、伝送システム1、伝送管理システム50、伝送端末10(携帯端末20)又は中継装置30の資源・能力により決定されてもよい。限定通信の性格上、画像データと音声データのセッションが確立している拠点数より少ない数の拠点が選択される場合が多い。   The display control unit 16 displays the image with a visual effect such as changing the background color in order to visually indicate that the “display area” selected by the user is in a selected state. In FIG. 10, a visual effect is given to three “display areas” of “A2”, “A6”, and “A8”, and “displays” of “A1”, “A3” to “A5”, “A7”, and “A9” are displayed. The display mode has changed from the “region”. Note that the maximum number of bases that can be selected at one time (the number of “display areas”) is the number of bases where a session of image data and audio data is established. Alternatively, it may be determined by the resource / capability of the transmission system 1, the transmission management system 50, the transmission terminal 10 (mobile terminal 20), or the relay device 30. Due to the nature of limited communication, there are many cases where a smaller number of sites are selected than the number of sites where image data and audio data sessions are established.

ユーザが、誤った「表示領域」を選択してしまった場合、再度、間違った「表示領域」を選択することで選択が解除され、視覚効果も消去される。   When the user selects an incorrect “display area”, the selection is canceled by selecting the wrong “display area” again, and the visual effect is also erased.

ユーザは限定通信の宛先を選択し終わると、限定通信開始ボタン912を指で触る、又はマウスポインター911でクリックする。通信相手選択受付部121は限定通信開始ボタン912の選択を受け付け、送受信部11が後述する限定通信開始要求を伝送管理システム50に送信する。限定通信開始要求については実施例2にて説明する。   When the user finishes selecting the limited communication destination, the user touches the limited communication start button 912 with a finger or clicks with the mouse pointer 911. The communication partner selection receiving unit 121 receives the selection of the limited communication start button 912, and the transmission / reception unit 11 transmits a limited communication start request (to be described later) to the transmission management system 50. The limited communication start request will be described in the second embodiment.

また、ユーザが限定通信を終了したい場合、ユーザは限定通信終了ボタン913を指で触る、又は、マウスポインター911でクリックする。通信相手選択受付部121は限定通信終了ボタン913の選択を受け付け、送受信部11が後述する限定通信終了要求を伝送管理システム50に送信する。なお、説明のため、限定通信終了要求を送信できるのは限定通信開始要求を送信した伝送端末10又は携帯端末20のみであるとする。しかしながら、"限定通信中"の全ての伝送端末10又は携帯端末20が限定通信終了要求を送信してもよい。   When the user wants to end the limited communication, the user touches the limited communication end button 913 with a finger or clicks with the mouse pointer 911. The communication partner selection receiving unit 121 receives the selection of the limited communication end button 913, and the transmission / reception unit 11 transmits a limited communication end request to be described later to the transmission management system 50. For the sake of explanation, it is assumed that the limited communication end request can be transmitted only to the transmission terminal 10 or the portable terminal 20 that has transmitted the limited communication start request. However, all transmission terminals 10 or portable terminals 20 in “limited communication” may transmit a limited communication end request.

限定通信を開始した後、ディスプレイ120が表示する画面は限定通信の宛先選択画面910のままでもよいし、図11に示すように限定通信中画面920に切り替えてもよい。図11は、限定通信中画面920の一例を示す図である。限定通信中画面920には、限定通信の宛先端末が送信する画像データのみ、又は、限定通信の宛先端末が送信する画像データと自拠点の画像データが表示される。したがって、ユーザは限定通信している会話の相手だけを見ながらテレビ会議することができる。   After the limited communication is started, the screen displayed on the display 120 may be the limited communication destination selection screen 910 or may be switched to the limited communication in-progress screen 920 as shown in FIG. FIG. 11 is a diagram illustrating an example of the limited communication in-progress screen 920. On the limited communication screen 920, only the image data transmitted by the limited communication destination terminal, or the image data transmitted by the limited communication destination terminal and the image data of the local site are displayed. Therefore, the user can hold a video conference while watching only the other party of the conversation having limited communication.

ユーザが限定通信したまま図10の限定通信の宛先選択画面910を表示したい場合、限定通信の宛先選択画面へボタン921を指で触る、又はマウスポインター911でクリックする。通信相手選択受付部121はこの操作を受け付けて表示制御部16に通知するため、表示制御部16は図10の限定通信の宛先選択画面910を表示する。   When the user wants to display the limited communication destination selection screen 910 in FIG. 10 while performing limited communication, the user touches the button 921 with the finger or clicks the mouse pointer 911 on the limited communication destination selection screen. Since the communication partner selection receiving unit 121 receives this operation and notifies the display control unit 16 of the operation, the display control unit 16 displays the limited communication destination selection screen 910 shown in FIG.

また、ユーザが図11の限定通信中画面920から限定通信終了ボタン913を指で触る又はマウスポインター911でクリックした場合、送受信部11が後述する限定通信終了要求を伝送管理システム50に送信する。   When the user touches the limited communication end button 913 with a finger or clicks with the mouse pointer 911 on the limited communication in-progress screen 920 in FIG. 11, the transmission / reception unit 11 transmits a limited communication end request to be described later to the transmission management system 50.

このように本実施例では、画像データが表示された「表示領域」をユーザが指やマウスポインター911で選択するだけで限定通信の宛先端末を選択することができる。したがって、限定通信の相手の顔などを確認してから限定通信できるので、限定通信する相手のユーザを誤ることを抑制して簡単な操作で限定通信を開始することができる。   As described above, in this embodiment, the user can select the destination terminal for limited communication only by the user selecting the “display area” in which the image data is displayed with the finger or the mouse pointer 911. Therefore, since limited communication can be performed after confirming the face of the partner of limited communication, etc., it is possible to start the limited communication with a simple operation while suppressing mistaken users of the partner of limited communication.

なお、図10を限定通信の宛先選択画面910であるとして説明したが、限定通信の宛先選択画面910はテレビ会議中に表示される会議画面900と同じものであってもよい。つまり、ユーザは会議画面900を限定通信の宛先選択画面910に切り替えることなくテレビ会議中に限定通信を開始することができる。   10 has been described as the limited communication destination selection screen 910, the limited communication destination selection screen 910 may be the same as the conference screen 900 displayed during the video conference. That is, the user can start limited communication during a video conference without switching the conference screen 900 to the destination selection screen 910 for limited communication.

一方、図10のような限定通信の宛先選択画面910が用意されていれば、表示制御部16が例えば自端末の「IPアドレス」と近い順に宛先端末をソートして各宛先端末が送信する画像データをソート順に「表示領域」に表示してもよい。   On the other hand, if the limited communication destination selection screen 910 as shown in FIG. 10 is prepared, the display control unit 16 sorts the destination terminals in the order close to the “IP address” of the own terminal, for example, and the destination terminal transmits the image. The data may be displayed in the “display area” in the sort order.

図12は、「IPアドレス」が近い順に「表示領域」に画像データが表示された限定通信の宛先選択画面910の一例を示す。限定通信が比較的懇意な間柄で行われる場合、ユーザは地理的に近い拠点の伝送端末10を選択する。これに対し、会議画面では、音声データの音量やテレビ会議に参加した伝送端末10の順番などで画像データが表示される「表示領域」が決まってしまうので、ユーザは散在する「表示領域」を選択する必要が生じ得る。したがって、図12のように画像データを表示することで、ユーザは近い場所の「表示領域」をいくつか選択すればよくなり、ユーザが限定通信の宛先端末を選択する際の操作性が向上する。図12では、最上段の"A1"〜"A3"の「表示領域」が選択されている。また、ユーザが選択する画像データがディスプレイ120の近い場所に表示されるのでユーザが限定通信の宛先選択画面をスクロールさせる手間を低減できる。   FIG. 12 shows an example of a limited communication destination selection screen 910 in which image data is displayed in the “display area” in the order of closest “IP address”. When the limited communication is performed with a relatively friendly relationship, the user selects the transmission terminal 10 at a geographically close base. On the other hand, on the conference screen, the “display area” in which the image data is displayed is determined by the volume of the audio data, the order of the transmission terminals 10 participating in the video conference, etc. It may be necessary to choose. Accordingly, by displaying the image data as shown in FIG. 12, the user only has to select several “display areas” in the vicinity, and the operability when the user selects a destination terminal for limited communication is improved. . In FIG. 12, the “display area” of “A1” to “A3” at the top is selected. Further, since the image data selected by the user is displayed near the display 120, it is possible to reduce the trouble of the user scrolling the destination selection screen for limited communication.

また、宛先リスト管理テーブルに登録されている「宛先リスト」の伝送端末10から送信される画像データを宛先選択画面910の連続した「表示領域」に表示してもよい。宛先リスト管理テーブルではなく、例えば最後に限定通信のためにユーザが選択した伝送端末10の通信IDを登録しておいてもよい。表示制御部16は最後にユーザが選択した伝送端末10から送信される画像データを宛先選択画面910の連続した「表示領域」に表示する。   In addition, the image data transmitted from the transmission terminal 10 of the “destination list” registered in the destination list management table may be displayed in a continuous “display area” of the destination selection screen 910. Instead of the destination list management table, for example, the communication ID of the transmission terminal 10 last selected by the user for limited communication may be registered. The display control unit 16 displays the image data transmitted from the transmission terminal 10 last selected by the user in a continuous “display area” of the destination selection screen 910.

限定通信の宛先端末を追加する操作について説明する。「通信状態」が"限定通信中"であり、図10又は図12のように限定通信の宛先端末以外の拠点から送信された画像データが表示されている場合、ユーザは限定通信を開始する場合と同様に追加する宛先端末を選択できる。なお、限定通信の開始後は、表示制御部16が追加のための専用のボタンを会議画面900又は限定通信の宛先選択画面910に表示してもよい。   An operation for adding a destination terminal for limited communication will be described. When “communication status” is “limited communication in progress” and image data transmitted from a base other than the limited communication destination terminal is displayed as shown in FIG. 10 or FIG. 12, the user starts limited communication The destination terminal to be added can be selected similarly to. Note that after the limited communication is started, the display control unit 16 may display a dedicated button for addition on the conference screen 900 or the limited communication destination selection screen 910.

「通信状態」が"限定通信中"であり、図11のように限定通信中画面920が表示される場合、ユーザは限定通信の宛先選択画面へボタン921を指で触る又はマウスポインター911でクリックすることで限定通信の宛先選択画面910を表示させる。これにより、限定通信を開始する場合と同様に限定通信の宛先端末を追加することができる。   When the “communication status” is “limited communication” and the limited communication in-progress screen 920 is displayed as shown in FIG. 11, the user touches the button 921 with a finger or clicks with the mouse pointer 911 on the limited communication destination selection screen. By doing so, the destination selection screen 910 for limited communication is displayed. Thereby, the destination terminal of limited communication can be added similarly to the case where limited communication is started.

<<動作手順>>
図13は限定通信を開始する伝送端末10の処理手順を示すフローチャート図の一例である。図13は図10,12のユーザインタフェース1の場合の処理手順である。図13の処理手順は例えばテレビ会議が開始されるとスタートする。
<< Operation procedure >>
FIG. 13 is an example of a flowchart illustrating a processing procedure of the transmission terminal 10 that starts limited communication. FIG. 13 shows a processing procedure in the case of the user interface 1 shown in FIGS. The processing procedure of FIG. 13 starts when a video conference is started, for example.

操作入力受付部12の通信相手選択受付部121は「表示領域」が選択されたか否かを判定する(S10)。   The communication partner selection receiving unit 121 of the operation input receiving unit 12 determines whether “display area” is selected (S10).

ステップS10の判定がNoの場合、処理はステップS30に進む。   If the determination in step S10 is No, the process proceeds to step S30.

ステップS10の判定がYesの場合、表示制御部16は選択された「表示領域」の背景色を変えるなどの視覚効果を施す(S20)。   When the determination in step S10 is Yes, the display control unit 16 performs a visual effect such as changing the background color of the selected “display area” (S20).

次に、操作入力受付部12は限定通信開始ボタン912が押下されたか否かを判定する(S30)。ステップS30の判定がNoの場合、処理はステップS10に戻り次の「表示領域」が選択される。   Next, the operation input receiving unit 12 determines whether or not the limited communication start button 912 is pressed (S30). If the determination in step S30 is No, the process returns to step S10 and the next “display area” is selected.

ステップS30の判定がYesの場合、伝送端末10の送受信部11は限定通信開始要求を伝送管理システム50に送信する(S40)。すなわち、操作入力受付部12は表示領域管理テーブルを参照して、選択された「表示領域」に画像データが表示されている伝送端末10又は携帯端末20の通信IDを特定する。これにより限定通信開始要求を送信できる。   When the determination in step S30 is Yes, the transmission / reception unit 11 of the transmission terminal 10 transmits a limited communication start request to the transmission management system 50 (S40). That is, the operation input receiving unit 12 refers to the display area management table and identifies the communication ID of the transmission terminal 10 or the mobile terminal 20 in which image data is displayed in the selected “display area”. Thereby, the limited communication start request can be transmitted.

<ユーザインタフェース2>
続いて、図14を用いてユーザが限定通信の宛先端末を選択するための別のユーザインタフェースを説明する。なお、図14においてユーザインタフェース1にて説明した事項については説明を省略又は相違点についてのみ説明する場合がある。
<User interface 2>
Next, another user interface for the user to select a limited communication destination terminal will be described with reference to FIG. In addition, about the matter demonstrated in the user interface 1 in FIG. 14, description may be abbreviate | omitted or only a different point may be demonstrated.

図14は、伝送端末10のディスプレイ120又は携帯端末20の表示装置203に表示される限定通信の宛先選択画面(ユーザインタフェース2)910の一例を示す図である。以下では、伝送端末10のディスプレイ120に限定通信の宛先選択画面910が表示されたものとして説明する。   FIG. 14 is a diagram illustrating an example of a limited communication destination selection screen (user interface 2) 910 displayed on the display 120 of the transmission terminal 10 or the display device 203 of the mobile terminal 20. In the following description, it is assumed that the destination selection screen 910 for limited communication is displayed on the display 120 of the transmission terminal 10.

限定通信を行いたいユーザはマウスポインター911又は指を移動させて、ディスプレイ120に表示された各拠点から送信される画像データの「表示領域」を囲む。図14ではマウスポインター911又は指の移動の軌跡915を点線で示している。なお、通信相手選択受付部121は、マウスポインター又は指の始点と終点の座標が一致すると、ユーザが限定通信の宛先選択画面910の一部を囲む操作を行ったと判断する。図14では"A2"、"A6"、"A8"の「表示領域」の全体が囲まれている。   A user who wants to perform limited communication moves the mouse pointer 911 or the finger to surround the “display area” of the image data transmitted from each site displayed on the display 120. In FIG. 14, a mouse pointer 911 or a finger movement locus 915 is indicated by a dotted line. Note that the communication partner selection receiving unit 121 determines that the user has performed an operation surrounding a part of the limited communication destination selection screen 910 when the coordinates of the start point and the end point of the mouse pointer or finger match. In FIG. 14, the entire “display area” of “A2”, “A6”, and “A8” is surrounded.

表示制御部16は、ユーザがマウスポインター911又は指で囲んだ「表示領域」が選択された状態であることを視覚的に示すため、背景色を変えるなどの視覚効果をつけて表示する。図14では3つの「表示領域」に視覚効果が付与されている。   The display control unit 16 displays the image with a visual effect such as changing the background color in order to visually indicate that the “display area” surrounded by the user with the mouse pointer 911 or the finger is selected. In FIG. 14, visual effects are given to three “display areas”.

ユーザが誤った「表示領域」を選択してしまった場合、再度、「表示領域」を囲むようにマウスポインター911又は指を移動させることで、「表示領域」を選択し直すことができる。   When the user selects the wrong “display area”, the “display area” can be selected again by moving the mouse pointer 911 or the finger so as to surround the “display area” again.

限定通信開始ボタン912及び限定通信終了ボタン913の操作方法はユーザインタフェース1の場合と同様である。また、ユーザインタフェース2においても表示制御部16は図11の限定通信中画面920に切り替えることができる。   The operation method of the limited communication start button 912 and the limited communication end button 913 is the same as that of the user interface 1. Also in the user interface 2, the display control unit 16 can switch to the limited communication in-progress screen 920 in FIG.

なお、ユーザが各表示領域の全体をマウスポインター911や指で囲んだ場合だけでなく、「表示領域」の一部だけが囲まれた場合にも通信相手選択受付部121が限定通信の宛先端末の選択を受け付けることができる。   Note that the communication partner selection receiving unit 121 is not limited to the case where the user surrounds the entire display area with the mouse pointer 911 or the finger, but also when only a part of the “display area” is surrounded. Can be accepted.

図15は伝送端末10のディスプレイ120又は携帯端末20の表示装置203に表示される限定通信の宛先選択画面(ユーザインタフェース2)910の別の一例を示す図である。図15では、マウスポインター911又は指の軌跡915は"A2"の「表示領域」の右下コーナー、"A3"の「表示領域」の左下コーナー、"A5"の「表示領域」の右上コーナー、及び、"A6"の「表示領域」の左上コーナーを囲んでいる。このように、各表示領域の一部のみが軌跡915で囲まれていても、通信相手選択受付部121は"A2","A3"、"A5","A6"の「表示領域」の画像データを送信する伝送端末10を限定通信の宛先端末であると判断する。このようなユーザインタフェース2であれば、ユーザは複数の「表示領域」をまとめて選択しやすい。   FIG. 15 is a diagram illustrating another example of the limited communication destination selection screen (user interface 2) 910 displayed on the display 120 of the transmission terminal 10 or the display device 203 of the portable terminal 20. In FIG. 15, the mouse pointer 911 or the finger trajectory 915 is the lower right corner of the “display area” of “A2”, the lower left corner of the “display area” of “A3”, the upper right corner of the “display area” of “A5”, And the upper left corner of the “display area” of “A6” is enclosed. As described above, even if only a part of each display area is surrounded by the locus 915, the communication partner selection receiving unit 121 displays the “display area” images of “A2”, “A3”, “A5”, and “A6”. The transmission terminal 10 that transmits data is determined to be the destination terminal for limited communication. With such a user interface 2, the user can easily select a plurality of “display areas” together.

また、ユーザインタフェース2においても、図12のような限定通信の宛先選択画面910が表示されてもよい。図16は、「IPアドレス」が近い順に「表示領域」に画像データが表示された限定通信の宛先選択画面910の一例を示す。図16では地理的に近い拠点の伝送端末10が送信する画像データが近い場所に表示される。したがって、ユーザは近い場所の「表示領域」の全体又は一部を囲めばよくなり、ユーザが限定通信の宛先端末を選択する際の操作性を向上できる。図16では、最上段の"A1"〜"A3"の「表示領域」が選択されている。   Also in the user interface 2, a limited communication destination selection screen 910 as shown in FIG. 12 may be displayed. FIG. 16 shows an example of a limited communication destination selection screen 910 in which image data is displayed in the “display area” in the order of “IP address”. In FIG. 16, the image data transmitted by the transmission terminal 10 at a geographically close base is displayed at a close place. Therefore, the user only needs to enclose all or a part of the “display area” in a nearby place, and the operability when the user selects a destination terminal for limited communication can be improved. In FIG. 16, the “display area” of “A1” to “A3” at the top is selected.

限定通信の宛先端末を追加する操作については、ユーザインタフェース1と同様である。すなわち、ユーザは限定通信を開始する場合と同様に追加する宛先端末をマウスポインター911や指で囲むことで選択する。また、「通信状態」が"限定通信中"であり、図11のような限定通信中画面が表示される場合、ユーザは限定通信の宛先選択画面へボタン921を指で触る又はマウスポインター911でクリックすることで限定通信の宛先選択画面910を表示させる。これにより、限定通信を開始する場合と同様に限定通信の宛先端末を追加することができる。   The operation for adding a destination terminal for limited communication is the same as that of the user interface 1. That is, the user selects the destination terminal to be added by surrounding it with the mouse pointer 911 or the finger as in the case of starting the limited communication. When the “communication state” is “during limited communication” and the limited communication in-progress screen as shown in FIG. 11 is displayed, the user touches the button 921 with the finger or the mouse pointer 911 to the destination selection screen for limited communication. By clicking, a limited communication destination selection screen 910 is displayed. Thereby, the destination terminal of limited communication can be added similarly to the case where limited communication is started.

このようなユーザインタフェースによれば、「表示領域」をユーザが指やマウスで囲むだけで限定通信の宛先端末を選択することができる。したがって、限定通信の相手の顔などを確認してから限定通信できるので、限定通信する相手のユーザを誤ることを抑制して簡単な操作で限定通信を開始することができる。   According to such a user interface, the user can select a destination terminal for limited communication simply by surrounding the “display area” with a finger or a mouse. Therefore, since limited communication can be performed after confirming the face of the partner of limited communication, etc., it is possible to start the limited communication with a simple operation while suppressing mistaken users of the partner of limited communication.

<<動作手順>>
図17は限定通信を開始する伝送端末10の処理手順を示すフローチャート図の一例である。図17は図14〜16のユーザインタフェース2に基づく処理を示す。図17の処理手順は例えばテレビ会議が開始されるとスタートする。
<< Operation procedure >>
FIG. 17 is an example of a flowchart illustrating a processing procedure of the transmission terminal 10 that starts limited communication. FIG. 17 shows processing based on the user interface 2 of FIGS. The processing procedure in FIG. 17 starts when a video conference is started, for example.

操作入力受付部12は1つ以上の「表示領域」が囲まれたか否かを判定する(S10)。以降の処理は、ユーザインタフェース1の図13の処理と同じなので説明を省略する。   The operation input receiving unit 12 determines whether one or more “display areas” are enclosed (S10). The subsequent processing is the same as the processing in FIG.

<ユーザインタフェース3>
続いて、図18を用いてユーザが限定通信の宛先端末を選択するための別のユーザインタフェースを説明する。なお、図18においてユーザインタフェース1にて説明した事項については説明を省略又は相違点についてのみ説明する場合がある。
<User interface 3>
Next, another user interface for the user to select a limited communication destination terminal will be described with reference to FIG. In addition, about the matter demonstrated in the user interface 1 in FIG. 18, description may be abbreviate | omitted or only a difference may be demonstrated.

図18は、伝送端末10のディスプレイ120又は携帯端末20の表示装置203に表示される限定通信の宛先選択画面(ユーザインタフェース3)910の一例を示す図である。以下では、伝送端末10のディスプレイ120に限定通信の宛先選択画面910が表示されたものとして説明する。   FIG. 18 is a diagram illustrating an example of a limited communication destination selection screen (user interface 3) 910 displayed on the display 120 of the transmission terminal 10 or the display device 203 of the mobile terminal 20. In the following description, it is assumed that the destination selection screen 910 for limited communication is displayed on the display 120 of the transmission terminal 10.

限定通信を行いたいユーザは、ディスプレイ120に表示された各拠点から送信される画像データの「表示領域」を、マウスポインター911でクリックする又は指916で触る。ユーザインタフェース1と異なるのは、ユーザがマウスポインター911でクリックする又は指916で触ることで、限定通信開始ボタン(図18には存在しない)を押下したことになり、ユーザがマウスポインター911のクリックを停止又は指916を離すことで、限定通信終了ボタン(図18には存在しない)を押下したことになる点である。   A user who wants to perform limited communication clicks the “display area” of the image data transmitted from each site displayed on the display 120 with the mouse pointer 911 or touches it with the finger 916. The difference from the user interface 1 is that the user clicks the mouse pointer 911 or touches the finger 916 to press the limited communication start button (not shown in FIG. 18), and the user clicks the mouse pointer 911. Is that the limited communication end button (not present in FIG. 18) is pressed by stopping or releasing the finger 916.

したがって、ユーザは「表示領域」をマウスポインター911でクリックし続けている間又は「表示領域」を指916で触れ続けている間、限定通信することができる。   Therefore, the user can perform limited communication while continuing to click the “display area” with the mouse pointer 911 or while touching the “display area” with the finger 916.

なお、図18では"A2"の「表示領域」のみが選択されているが、ユーザが複数の「表示領域」を同時に指で触れることができれば、複数の宛先端末を限定通信の対象に選択することができる。   In FIG. 18, only the “display area” of “A2” is selected. However, if the user can simultaneously touch a plurality of “display areas” with a finger, a plurality of destination terminals are selected as targets for limited communication. be able to.

表示制御部16は、ユーザがマウスポインター911でクリック又は指916で囲んだ「表示領域」が選択された状態であることを視覚的に示すため、背景色を変えるなどの視覚効果をつけて表示する。   The display control unit 16 displays the image with a visual effect such as changing the background color in order to visually indicate that the “display area” selected by the user with the mouse pointer 911 or surrounded by the finger 916 is selected. To do.

また、ユーザが誤った「表示領域」を選択してしまった場合、再度、「表示領域」を選択し直せばよい。限定通信の宛先端末をユーザが追加する場合は、すでに選択している「表示領域」を指916で触れたまま又はマウスポインター911でクリックしたまま、追加したい「表示領域」を指916又はマウスポインター911でクリックすればよい。   In addition, when the user selects an incorrect “display area”, the “display area” may be selected again. When the user adds a destination terminal for limited communication, the user selects the “display area” to be added with the finger 916 or the mouse pointer while touching the already-selected “display area” with the finger 916 or clicking with the mouse pointer 911. Just click on 911.

このようなユーザインタフェースによれば、「表示領域」をユーザが指で触れるか又はマウスポインター911でクリックするだけで限定通信の宛先端末を選択することができる。したがって、限定通信の相手の顔などを確認してから限定通信できるので、限定通信する相手のユーザを誤ることを抑制して簡単な操作で限定通信を開始することができる。また、限定通信開始ボタン912や限定通信終了ボタン913を押下する必要もない。   According to such a user interface, the user can select a destination terminal for limited communication simply by touching the “display area” with a finger or clicking with the mouse pointer 911. Therefore, since limited communication can be performed after confirming the face of the partner of limited communication, etc., it is possible to start the limited communication with a simple operation while suppressing mistaken users of the partner of limited communication. Further, there is no need to press the limited communication start button 912 or the limited communication end button 913.

<<動作手順>>
図19は限定通信を開始する伝送端末10の処理手順を示すフローチャート図の一例である。図19は図18のユーザインタフェースに基づく処理を示す。図19の処理手順は例えばテレビ会議が開始されるとスタートする。
<< Operation procedure >>
FIG. 19 is an example of a flowchart illustrating a processing procedure of the transmission terminal 10 that starts limited communication. FIG. 19 shows processing based on the user interface of FIG. The processing procedure in FIG. 19 starts when a video conference is started, for example.

操作入力受付部12は「表示領域」が選択されたか否かを判定する(S10)。   The operation input receiving unit 12 determines whether or not “display area” is selected (S10).

ステップS10の判定がYesの場合、表示制御部16は選択された「表示領域」の背景色を変えるなどの視覚効果を施す(S20)。   When the determination in step S10 is Yes, the display control unit 16 performs a visual effect such as changing the background color of the selected “display area” (S20).

伝送端末10の送受信部11は限定通信開始要求を伝送管理システム50に送信する(S30)。すなわち、ユーザが「表示領域」を選択することで限定通信開始要求が送信され、伝送端末10の送受信部11は「表示領域」が選択されている間、継続して限定通信開始要求を伝送管理システム50に送信する。   The transmission / reception unit 11 of the transmission terminal 10 transmits a limited communication start request to the transmission management system 50 (S30). That is, when the user selects “display area”, a limited communication start request is transmitted, and the transmission / reception unit 11 of the transmission terminal 10 continuously manages transmission of the limited communication start request while “display area” is selected. To system 50.

以上説明したように、本実施例の伝送システム1によれば、伝送端末10又は携帯端末20のユーザは簡単な操作で限定通信の宛先端末を選択できる。   As described above, according to the transmission system 1 of the present embodiment, the user of the transmission terminal 10 or the portable terminal 20 can select a destination terminal for limited communication with a simple operation.

本実施例では、実施例1にて説明したユーザインタフェースを介して選択された限定通信の宛先端末と限定通信のセッションを伝送システム1が確立する手順について説明する。以下では、伝送端末10aa、10ab、10acの間でテレビ会議(音声データと画像データ)のセッションが確立しているものとする。   In the present embodiment, a procedure for the transmission system 1 to establish a limited communication session with the limited communication destination terminal selected via the user interface described in the first embodiment will be described. In the following, it is assumed that a video conference session (audio data and image data) is established between the transmission terminals 10aa, 10ab, and 10ac.

<限定通信の開始手順>
図20を用いて、テレビ会議中に伝送端末10が限定通信を開始する手順を説明する。図20は、伝送端末10abが伝送端末10aaとの限定通信を開始する手順を示すシーケンス図の一例である。
<Starting procedure of limited communication>
A procedure for the transmission terminal 10 to start limited communication during a video conference will be described with reference to FIG. FIG. 20 is an example of a sequence diagram illustrating a procedure for the transmission terminal 10ab to start limited communication with the transmission terminal 10aa.

S1:伝送端末10abのユーザがユーザインタフェース1〜3のいずれかから伝送端末10aaを選択することで、伝送端末10abの送受信部11は伝送管理システム50に「限定通信開始要求」を送信する。限定通信開始要求には以下の情報が含まれる。
{メッセージ種別、送信元通信ID、限定通信端末数、限定通信の宛先端末1,限定通信の宛先端末2,限定通信の宛先端末3、…}
・メッセージ種別には、本メッセージが「限定通信開始要求」であることを示す数値(例えば1)が格納される。
・送信元通信IDは、本メッセージの送信元である伝送端末10又は携帯端末20の通信ID(図20では"01ab")である。
・限定通信宛先数:限定通信の宛先の個数が格納され、この値が示す個数だけ、次の「限定通信の宛先端末」フィールドがメッセージに付加される。なお、限定通信宛先数は1以上の数値である。
・限定通信の宛先端末n(nは1以上の整数)は、限定通信の「宛先端末の通信ID」である(図20では"01aa")。
S1: When the user of the transmission terminal 10ab selects the transmission terminal 10aa from any one of the user interfaces 1 to 3, the transmission / reception unit 11 of the transmission terminal 10ab transmits a “limited communication start request” to the transmission management system 50. The limited communication start request includes the following information.
{Message type, source communication ID, number of limited communication terminals, limited communication destination terminal 1, limited communication destination terminal 2, limited communication destination terminal 3, ...}
In the message type, a numerical value (for example, 1) indicating that this message is a “restricted communication start request” is stored.
The transmission source communication ID is the communication ID (“01ab” in FIG. 20) of the transmission terminal 10 or the mobile terminal 20 that is the transmission source of this message.
Number of limited communication destinations: The number of limited communication destinations is stored, and the next “limited communication destination terminal” field is added to the message by the number indicated by this value. The limited communication destination number is a numerical value of 1 or more.
The limited communication destination terminal n (n is an integer equal to or greater than 1) is the “communication ID of the destination terminal” for limited communication (“01aa” in FIG. 20).

S2:伝送管理システム50の送受信部51は限定通信開始要求を受信すると、端末状態取得部55は端末状態テーブルから限定通信の「宛先端末の通信ID」に対応づけられている「通信状態」を取得する。そして、判定部57は限定通信の宛先端末が限定通信することが可能かどうか("限定通信中"かどうか)を判定する。限定通信が可能であった場合、端末状態取得部55が端末管理テーブルから限定通信の宛先端末の「IPアドレス」を取得する。これにより、伝送管理システム50の送受信部51は、限定通信の宛先端末に対して「限定通信開始要求」を送信する。   S2: When the transmission / reception unit 51 of the transmission management system 50 receives the limited communication start request, the terminal state acquisition unit 55 displays the “communication state” associated with the “destination terminal communication ID” of the limited communication from the terminal state table. get. Then, the determination unit 57 determines whether or not the limited communication destination terminal can perform the limited communication (whether “limited communication is in progress”). When the limited communication is possible, the terminal state acquisition unit 55 acquires the “IP address” of the destination terminal of the limited communication from the terminal management table. Thereby, the transmission / reception unit 51 of the transmission management system 50 transmits a “limited communication start request” to the destination terminal of the limited communication.

なお、限定通信の宛先端末が複数の場合には、判定部57は例えば以下のどちらかで判断する。「複数の限定通信の宛先端末が1つでも"限定通信中"の場合、限定通信を拒否する」、又は、「複数の限定通信の宛先端末に"限定通信中"でないものがある場合、"限定通信中"でない宛先端末とだけ限定通信を行う」。後者の場合、伝送端末10abのユーザは限定通信していない一部の宛先端末と限定通信することができる。この後者の処理例については後に図22を用いて説明する。なお、どちらが選択されるかは、伝送端末10abのユーザが限定通信開始要求に含めてもよいし、伝送管理システム50が要求元の伝送端末10abのユーザに問い合わせてもよいし、伝送管理システム50に予め設定されていてもよい。
S3:伝送管理システム50の限定通信制御部58は送受信部51を介して限定通信開始要求を限定通信の宛先端末である伝送端末10aaに送信する。
When there are a plurality of limited communication destination terminals, the determination unit 57 determines, for example, either of the following. "If even one of the limited communication destination terminals is" limited communication ", reject limited communication" or "if there are multiple limited communication destination terminals that are not" limited communication "" Perform limited communication only with destination terminals that are not “limited communication”. In the latter case, the user of the transmission terminal 10ab can perform limited communication with some destination terminals that are not limited communication. This latter processing example will be described later with reference to FIG. Which one is selected may be included in the limited communication start request by the user of the transmission terminal 10ab, or the transmission management system 50 may inquire the user of the transmission terminal 10ab as the request source, or the transmission management system 50 May be set in advance.
S3: The limited communication control unit 58 of the transmission management system 50 transmits the limited communication start request to the transmission terminal 10aa that is the destination terminal of the limited communication via the transmission / reception unit 51.

図21(a)は、伝送端末10aaのディスプレイ120に表示される限定通信要求通知画面930の一例を示す図である。限定通信要求通知画面930には会議画面に重畳して「AB会議端末から限定通信の開始要求を受信しました。限定通信を行いますか?」というメッセージ931、Yesボタン932及びNoボタン933が表示される。限定通信したくない伝送端末10aaのユーザは伝送端末10abに対し通信拒否を送信することができる。   FIG. 21A is a diagram illustrating an example of the limited communication request notification screen 930 displayed on the display 120 of the transmission terminal 10aa. On the limited communication request notification screen 930, a message 931, “Yes button 932” and “No” button 933, “A limited communication start request has been received from the AB conference terminal. Do you want to perform limited communication?”, Is superimposed on the conference screen. Is done. The user of the transmission terminal 10aa that does not want to perform limited communication can send a communication rejection to the transmission terminal 10ab.

伝送端末10aaのユーザはメッセージ931を目視してYesボタン932又はNoボタン933をクリック又は指で触る(押下する)。伝送端末10aaの操作入力受付部12はユーザの操作を受け付ける。ここではYesボタン932が押下されたものとして説明する。   The user of the transmission terminal 10aa looks at the message 931 and clicks or touches (presses) the Yes button 932 or the No button 933 with a finger. The operation input receiving unit 12 of the transmission terminal 10aa receives a user operation. Here, a description will be given assuming that the Yes button 932 is pressed.

図20に戻って説明する。
S4:伝送端末10aaの送受信部11は限定通信開始許可を伝送管理システム50に送信する。限定通信開始許可は「限定通信開始要求」の応答として返されるメッセージである。限定通信開始許可には以下の情報が含まれる。
{メッセージ種別、送信元通信ID}
・メッセージ種別は本メッセージが「限定通信開始許可」であることを示す数値(例えば2)を格納している。
・送信元通信IDは、本メッセージの送信元である伝送端末10又は携帯端末20の通信IDである(図20では"01aa")。
S5:伝送管理システム50の送受信部51が限定通信開始許可を受信すると、状態管理部53が限定通信開始要求を送信した伝送端末10abの通信IDである"01ab"及び限定通信開始許可を送信した伝送端末10aaの通信IDである"01aa"の端末管理テーブルの「通信状態」を"限定通信中"に遷移させる。また、限定通信制御部58は限定通信開始要求を送信した伝送端末10abの通信IDである"01ab"及び限定通信開始許可を送信した伝送端末10aaの通信IDである"01aa"に「限定通信ID」を付与して限定通信管理テーブルに登録する。また、限定通信制御部58は限定通信管理テーブルに登録された通信IDを中継装置30に送信する。
Returning to FIG.
S4: The transmission / reception unit 11 of the transmission terminal 10aa transmits a limited communication start permission to the transmission management system 50. The limited communication start permission is a message returned as a response to the “limited communication start request”. The limited communication start permission includes the following information.
{Message type, source communication ID}
The message type stores a numerical value (for example, 2) indicating that this message is “restricted communication start permission”.
The transmission source communication ID is the communication ID of the transmission terminal 10 or the portable terminal 20 that is the transmission source of this message (“01aa” in FIG. 20).
S5: When the transmission / reception unit 51 of the transmission management system 50 receives the limited communication start permission, the state management unit 53 transmits “01ab” that is the communication ID of the transmission terminal 10ab that has transmitted the limited communication start request and the limited communication start permission. The “communication state” in the terminal management table of “01aa” which is the communication ID of the transmission terminal 10aa is changed to “limited communication in progress”. Further, the limited communication control unit 58 sets “limited communication ID” to “01ab” that is the communication ID of the transmission terminal 10ab that has transmitted the limited communication start request and “01aa” that is the communication ID of the transmission terminal 10aa that has transmitted the limited communication start permission. Is registered in the limited communication management table. Further, the limited communication control unit 58 transmits the communication ID registered in the limited communication management table to the relay device 30.

中継装置30はこの通信IDを限定通信専用の「セッションID」に対応づけて転送先管理テーブルに登録する。これにより、中継装置30の限定セッション転送部33は転送先管理テーブルに登録されている伝送端末10又は携帯端末20間でのみ音声データを中継する。なお、「通信状態」が"限定通信中"の場合も、テレビ会議のセッションの画像データ及び音声データは限定通信している伝送端末10及び携帯端末20に中継される(中継装置30の通常セッション転送部32が音声データ及び音声データを中継する)。伝送管理システム50の限定通信制御部58は送受信部51を介して伝送端末10abに対し「限定通信開始許可」を送信する。以上により、伝送端末10abと限定通信aaとの間で限定通信のセッションが確立される。
S6:次に、伝送端末10abの音声出力部15bは限定通信のために音量を調整する。詳細は図23,24にて説明する。
The relay device 30 registers this communication ID in the transfer destination management table in association with the “session ID” dedicated to limited communication. Thereby, the limited session transfer unit 33 of the relay device 30 relays the audio data only between the transmission terminal 10 or the portable terminal 20 registered in the transfer destination management table. Even when the “communication state” is “limited communication”, the image data and audio data of the video conference session are relayed to the transmission terminal 10 and the portable terminal 20 that are performing limited communication (the normal session of the relay device 30). The transfer unit 32 relays audio data and audio data). The limited communication control unit 58 of the transmission management system 50 transmits “limited communication start permission” to the transmission terminal 10ab via the transmission / reception unit 51. As described above, the limited communication session is established between the transmission terminal 10ab and the limited communication aa.
S6: Next, the audio output unit 15b of the transmission terminal 10ab adjusts the volume for limited communication. Details will be described with reference to FIGS.

S7:伝送端末10acから伝送端末10aa又は伝送端末10abを限定通信の宛先端末とする限定通信開始要求が伝送管理システム50に送信されたものとする。
S8:伝送管理システム50の送受信部51は限定通信開始要求を受信すると、端末状態取得部55が端末管理テーブルから限定通信の宛先端末nの「通信状態」を取得する。伝送端末10aaと10abの「通信状態」はどちらも"限定通信中"なので、判定部57は限定通信できないと判断する。
S9:このため、伝送管理システム50の送受信部51は限定通信開始拒否を伝送端末10acに送信する。限定通信開始拒否は「限定通信開始要求」の応答として返されるメッセージである。限定通信開始拒否には以下の情報が含まれる。
{メッセージ種別、送信元通信ID、拒否理由}
・メッセージ種別は本メッセージが「限定通信開始拒否」であることを示す数値(例えば3)を格納する。
・送信元通信IDは本メッセージの送信元である伝送端末10又は携帯端末20の通信IDである。図20の例では伝送管理システム50が送信元となるので伝送管理システム50を意味するIDが送信されてもよいし、「通信状態」が"限定通信中"の伝送端末10aa又は伝送端末10abの通信IDが格納されてもよい。
・拒否理由は、限定通信開始要求が拒否された理由を格納している。例えば、限定通信の宛先端末とテレビ会議を行っていない場合は1が格納され、限定通信の宛先端末の「通信状態」がすでに"限定通信中"の場合は2が格納される。また、限定通信の宛先端末のユーザが限定通信を拒否した場合は3が格納される。
S7: It is assumed that a limited communication start request is transmitted from the transmission terminal 10ac to the transmission management system 50 with the transmission terminal 10aa or the transmission terminal 10ab as a destination terminal for limited communication.
S8: When the transmission / reception unit 51 of the transmission management system 50 receives the limited communication start request, the terminal status acquisition unit 55 acquires the “communication status” of the limited communication destination terminal n from the terminal management table. Since the “communication states” of the transmission terminals 10aa and 10ab are both “limited communication”, the determination unit 57 determines that the limited communication is not possible.
S9: Therefore, the transmission / reception unit 51 of the transmission management system 50 transmits a limited communication start rejection to the transmission terminal 10ac. The limited communication start rejection is a message returned as a response to the “limited communication start request”. The limited communication start rejection includes the following information.
{Message type, source communication ID, reason for rejection}
The message type stores a numerical value (for example, 3) indicating that this message is “restricted communication start refusal”.
The transmission source communication ID is a communication ID of the transmission terminal 10 or the portable terminal 20 that is the transmission source of this message. In the example of FIG. 20, since the transmission management system 50 is the transmission source, an ID indicating the transmission management system 50 may be transmitted, or the transmission terminal 10aa or the transmission terminal 10ab whose “communication state” is “limited communication” is transmitted. A communication ID may be stored.
-The reason for rejection stores the reason why the limited communication start request is rejected. For example, 1 is stored when the teleconference is not performed with the destination terminal of limited communication, and 2 is stored when the “communication state” of the destination terminal of limited communication is already “limited communication”. If the user of the limited communication destination terminal rejects the limited communication, 3 is stored.

S10:次に、伝送端末10abのユーザが限定通信終了ボタン913をクリック又は指で触る(押下する)と、操作入力受付部12が押下を受け付ける。これにより、伝送端末10abの送受信部11は限定通信終了要求を伝送管理システム50に送信する。なお、限定通信終了ボタン913を押下できるのは、限定通信開始要求を送信したユーザだけであるとするが、全ての伝送端末10のユーザが限定通信終了ボタン913を押下することができてもよい。   S10: Next, when the user of the transmission terminal 10ab clicks or touches (presses) the limited communication end button 913 with a finger, the operation input receiving unit 12 receives the press. Accordingly, the transmission / reception unit 11 of the transmission terminal 10ab transmits a limited communication end request to the transmission management system 50. Note that the limited communication end button 913 can be pressed only by the user who transmitted the limited communication start request, but the users of all transmission terminals 10 may be able to press the limited communication end button 913. .

限定通信終了要求は限定通信の終了を要求するためのメッセージである。限定通信終了要求には以下の情報が含まれる。
{メッセージ種別、送信元通信ID}
・メッセージ種別は本メッセージが「限定通信終了要求」であることを示す数値(例えば4)を格納する。
・送信元通信IDは本メッセージの送信元である伝送端末10又は携帯端末20の通信IDである(図20では"01ab")。
S11:伝送管理システム50の送受信部51が限定通信終了要求を受信すると、限定通信制御部58は送受信部51を介して伝送端末10aaに限定通信終了要求を送信する。
The limited communication end request is a message for requesting the end of the limited communication. The limited communication end request includes the following information.
{Message type, source communication ID}
The message type stores a numerical value (for example, 4) indicating that this message is a “restricted communication end request”.
The transmission source communication ID is the communication ID of the transmission terminal 10 or the portable terminal 20 that is the transmission source of this message (“01ab” in FIG. 20).
S11: When the transmission / reception unit 51 of the transmission management system 50 receives the limited communication end request, the limited communication control unit 58 transmits the limited communication end request to the transmission terminal 10aa via the transmission / reception unit 51.

図21(b)は、伝送端末10aaのディスプレイ120に表示される限定通信終了要求通知画面940の一例を示す図である。限定通信終了要求通知画面940には会議画面に重畳して「AB会議端末から限定通信の終了要求を受信しました。限定通信を終了しますか?」というメッセージ941、Yesボタン932及びNoボタン933が表示される。伝送端末10abが複数の拠点と限定通信している場合は全ての拠点に対し限定通信終了要求が送信される。   FIG. 21B is a diagram illustrating an example of the limited communication end request notification screen 940 displayed on the display 120 of the transmission terminal 10aa. The limited communication end request notification screen 940 is superimposed on the conference screen, and a message 941, “Yes or No button 932” is received from the AB conference terminal. Is displayed. When the transmission terminal 10ab performs limited communication with a plurality of bases, a limited communication end request is transmitted to all the bases.

伝送端末10aaのユーザはメッセージ941を目視してYesボタン932又はNoボタン933をクリックするか又は指で触る(押下する)。伝送端末10aaの操作入力受付部12はユーザの操作を受け付ける。ここではYesボタン932が押下されたものとして説明する。   The user of the transmission terminal 10aa looks at the message 941 and clicks the Yes button 932 or the No button 933 or touches (presses) it with a finger. The operation input receiving unit 12 of the transmission terminal 10aa receives a user operation. Here, a description will be given assuming that the Yes button 932 is pressed.

相手の許可を必要とすることで、限定通信開始要求を送信した伝送端末10abが任意に限定通信を終了することがなくなり、伝送端末10aaのユーザが限定通信で伝達事項を伝えることができなかったという不都合が生じることを防止できる。   By requiring the permission of the other party, the transmission terminal 10ab that has transmitted the limited communication start request will not arbitrarily terminate the limited communication, and the user of the transmission terminal 10aa could not transmit the transmission item by the limited communication. Can be prevented from occurring.

また、限定通信の終了に限定通信している相手のユーザの許可を必要としなくてもよい。この場合、図21(c)に示すように、限定通信終了要求通知画面940には「AB会議端末が限定通信を終了しました。」のようなメッセージ942表示される。伝送端末10aaのユーザはOKボタン943を押下することで限定通信が終了したことを確認する。すなわち、伝送端末10aaのユーザが許可しなくても伝送端末10abのユーザが限定通信を終了できる。したがって、限定通信開始要求を送信したユーザのみが限定通信を終了でき、限定通信の開始・終了の管理が容易になる。なお、伝送端末10aaのユーザはOKボタン943を押下しなくてもよい(又は、OKボタン943が表示されなくてもよい)。すなわち、限定通信の終了のメッセージのみを表示し、自動的に画面が遷移してもよい。   In addition, it is not necessary to require the permission of the partner user who is performing limited communication for the end of limited communication. In this case, as shown in FIG. 21C, a message 942 such as “AB conference terminal has ended limited communication” is displayed on the limited communication end request notification screen 940. The user of the transmission terminal 10aa confirms that the limited communication has been completed by pressing the OK button 943. That is, the user of the transmission terminal 10ab can end the limited communication without the permission of the user of the transmission terminal 10aa. Therefore, only the user who transmitted the limited communication start request can end the limited communication, and the start / end management of the limited communication becomes easy. Note that the user of the transmission terminal 10aa may not press the OK button 943 (or the OK button 943 may not be displayed). That is, only the message of the limited communication end may be displayed, and the screen may automatically change.

図21(c)のような伝送通信の終了手順は、ユーザインタフェース3において有効であり、伝送端末10abのユーザが「表示領域」から指を離すだけで限定通信を終了できる。また、伝送端末10aaのユーザはメッセージ942により限定通信が終了したことを確認できる。   The end procedure of the transmission communication as shown in FIG. 21C is effective in the user interface 3, and the limited communication can be ended only by removing the finger from the “display area” by the user of the transmission terminal 10ab. Further, the user of the transmission terminal 10aa can confirm that the limited communication has been completed by the message 942.

S12:図20に戻って説明する。伝送端末10aaの送受信部11は限定通信終了応答を伝送管理システム50に送信する。限定通信終了応答には以下の情報が含まれる。
{メッセージ種別、送信元通信ID}
・メッセージ種別は本メッセージが「限定通信終了応答」であることを示す数値(例えば5)を格納する。
・送信元通信IDは本メッセージの送信元である伝送端末10又は携帯端末20の通信IDである。
S13:伝送管理システム50の送受信部51が限定通信終了応答を受信すると、限定通信制御部58は送受信部51を介して伝送端末10abに限定通信終了応答を送信する。伝送管理システム50の状態管理部53は端末管理テーブルの「通信状態」として登録されていた"限定通信中"を"会議中"に戻す。また、限定通信制御部58は、限定通信管理テーブルから伝送端末10abの通信IDである"01ab"及び伝送端末10aaの通信IDである"01aa"を削除する。
S12: Returning to FIG. The transmission / reception unit 11 of the transmission terminal 10aa transmits a limited communication end response to the transmission management system 50. The limited communication end response includes the following information.
{Message type, source communication ID}
The message type stores a numerical value (for example, 5) indicating that this message is a “limited communication end response”.
The transmission source communication ID is a communication ID of the transmission terminal 10 or the portable terminal 20 that is the transmission source of this message.
S13: When the transmission / reception unit 51 of the transmission management system 50 receives the limited communication end response, the limited communication control unit 58 transmits the limited communication end response to the transmission terminal 10ab via the transmission / reception unit 51. The status management unit 53 of the transmission management system 50 returns “in limited communication” registered as “communication status” in the terminal management table to “in conference”. Further, the limited communication control unit 58 deletes “01ab” that is the communication ID of the transmission terminal 10ab and “01aa” that is the communication ID of the transmission terminal 10aa from the limited communication management table.

なお、伝送管理システム50の限定通信制御部58は中継装置30に対し、限定通信の終了要求を送信する。これにより、中継装置30は転送先管理テーブルから通信IDを削除し、限定通信している伝送端末間で音声データを中継することを終了する。なお、限定通信管理テーブルに2つ以上の伝送端末10が残っている場合、限定通信制御部58は限定通信を終了した伝送端末10の通信IDを中継装置30に送信する。これにより、中継装置30は伝送管理システム50から通知された通信IDのみを転送先管理テーブルから削除するので、限定セッション転送部33は引き続き転送先管理テーブルに登録されている伝送端末間で音声データを転送できる。また、いったん限定通信を開始した伝送端末10は任意のタイミングで限定通信を終了させることができる。   The limited communication control unit 58 of the transmission management system 50 transmits a limited communication end request to the relay device 30. As a result, the relay device 30 deletes the communication ID from the transfer destination management table, and ends the relay of the voice data between the transmission terminals performing limited communication. When two or more transmission terminals 10 remain in the limited communication management table, the limited communication control unit 58 transmits the communication ID of the transmission terminal 10 that has completed the limited communication to the relay device 30. Thereby, since the relay device 30 deletes only the communication ID notified from the transmission management system 50 from the transfer destination management table, the limited session transfer unit 33 continues to transmit the audio data between the transmission terminals registered in the transfer destination management table. Can be transferred. In addition, once the limited communication is started, the transmission terminal 10 can end the limited communication at an arbitrary timing.

<<<複数の限定通信の宛先端末を含む限定通信開始要求の処理>>>
続いて、図22を用いて宛先端末が複数の場合の伝送管理システム50の処理について説明する。図22は、複数の限定通信の宛先端末を含む限定通信開始要求が送信された場合に伝送管理システム50が行う処理の手順を示すフローチャート図の一例である。図22の処理は例えばテレビ会議が開始するとスタートする。
<<< Processing of limited communication start request including a plurality of limited communication destination terminals >>>
Next, processing of the transmission management system 50 when there are a plurality of destination terminals will be described with reference to FIG. FIG. 22 is an example of a flowchart illustrating a processing procedure performed by the transmission management system 50 when a limited communication start request including a plurality of limited communication destination terminals is transmitted. The process of FIG. 22 starts when a video conference starts, for example.

なお、図22では、限定通信の宛先端末が複数の場合、判定部57は「複数の限定通信の宛先端末に"限定通信中"でないものがある場合、"限定通信中"でない宛先端末とだけ限定通信を行う」と判断する。また、説明のため、すでに始まっている限定通信のセッションをセッション1、限定通信開始要求によりこれから開始する限定通信のセッションをセッション2と称する。   In FIG. 22, when there are a plurality of limited communication destination terminals, the determination unit 57 determines that “if there are a plurality of limited communication destination terminals that are not“ limited communication ”, only destination terminals that are not“ limited communication ””. It is determined that “limited communication is performed”. For the sake of explanation, the session of limited communication that has already started is referred to as session 1, and the session of limited communication that will be started in response to a limited communication start request is referred to as session 2.

まず、伝送管理システム50の送受信部51は限定通信開始要求を受信する(110)。ここでは、限定通信開始要求に複数個の限定通信の宛先端末が指定されているものとする。   First, the transmission / reception unit 51 of the transmission management system 50 receives a limited communication start request (110). Here, it is assumed that a plurality of limited communication destination terminals are specified in the limited communication start request.

判定部57は全ての限定通信の宛先端末について限定通信の可否を判断する(S120)。   The determination unit 57 determines whether or not limited communication is possible for all the limited communication destination terminals (S120).

そして、判定部57は複数の限定通信の宛先端末の一部が"限定通信中"か否かを判定する(S130)。限定通信の宛先端末の全てが"限定通信中"の場合は限定通信を開始できないため図22の処理は終了する。また、複数の限定通信の宛先端末の全てが"限定通信中"でない場合は、伝送管理システム50は全ての伝送端末と限定通信を開始すればよい。   Then, the determination unit 57 determines whether or not some of the limited communication destination terminals are “limited communication in progress” (S130). When all the limited communication destination terminals are in “limited communication”, the limited communication cannot be started, and thus the processing of FIG. 22 ends. When all of the plurality of limited communication destination terminals are not “limited communication”, the transmission management system 50 may start limited communication with all the transmission terminals.

複数の限定通信の宛先端末の一部が"限定通信中"である場合(S130のYes)、伝送管理システム50の限定通信制御部58はセッション1で限定通信していない伝送端末10とだけ限定通信を開始する(S140)。すなわち、限定通信制御部58は限定通信管理テーブルにセッション2で限定通信する通信IDを登録し、中継装置30に通信IDを送信する。中継装置30は転送先管理テーブルに新たにセッション2のための通信IDを登録し中継を開始する。なお、状態管理部53は端末管理テーブルの「通信状態」を"限定通信中"に変更する。   If some of the destination terminals for the limited communication are “limited communication in progress” (Yes in S130), the limited communication control unit 58 of the transmission management system 50 is limited only to the transmission terminals 10 that are not performing limited communication in the session 1. Communication is started (S140). That is, the limited communication control unit 58 registers a communication ID for limited communication in the session 2 in the limited communication management table, and transmits the communication ID to the relay device 30. The relay device 30 newly registers a communication ID for the session 2 in the transfer destination management table and starts relaying. The state management unit 53 changes the “communication state” in the terminal management table to “limited communication in progress”.

そして、伝送管理システム50の限定通信制御部58は送受信部51を介してセッション1により限定通信している伝送端末10に対しセッション2の限定通信の通信要求があることを通知する(S150)。これにより、セッション1に参加している伝送端末10のユーザは、限定通信の通信要求があったことを把握できる。ステップS150では例えば図21(a)のようなメッセージ931が表示されてよいが、さらに好ましくはYesボタン932,Noボタン933に加え、保留ボタンが表示される。セッション1に参加している伝送端末10のユーザがYesボタン932を押下した場合、即座にこのユーザがセッション2に参加する処理が行われる。ユーザがNoボタン933を押下した場合、セッション1の限定通信が終了しても次述するセッション2に参加する処理は行われない。以下では、このユーザが保留ボタンを押下したものとして説明する。   Then, the limited communication control unit 58 of the transmission management system 50 notifies the transmission terminal 10 that performs limited communication by the session 1 through the transmission / reception unit 51 that there is a communication request for limited communication of the session 2 (S150). Thereby, the user of the transmission terminal 10 participating in the session 1 can grasp that there was a communication request for limited communication. In step S150, for example, a message 931 as shown in FIG. 21A may be displayed, but more preferably, a hold button is displayed in addition to the Yes button 932 and the No button 933. When the user of the transmission terminal 10 participating in the session 1 presses the Yes button 932, processing for the user to immediately participate in the session 2 is performed. When the user presses the No button 933, even if the limited communication of session 1 ends, the process of participating in session 2 described below is not performed. In the following description, it is assumed that the user has pressed the hold button.

次に、伝送管理システム50の限定通信制御部58はセッション1に参加している伝送端末10が限定通信を終了したか否かを判定する(S160)。この判定は端末管理テーブル又は限定通信管理テーブルを参照することで判定できる。ステップS160の判定がNoの場合、処理はステップS190に進む。   Next, the limited communication control unit 58 of the transmission management system 50 determines whether or not the transmission terminals 10 participating in the session 1 have ended limited communication (S160). This determination can be made by referring to the terminal management table or the limited communication management table. If the determination in step S160 is No, the process proceeds to step S190.

ステップS160の判定がYesの場合、限定通信制御部58はセッション1の限定通信が終了した伝送端末10をセッション2に加える(S170)。限定通信管理部58は限定通信管理テーブルからセッション1の通信IDを削除し、セッション2に追加する。また、中継装置30は転送先管理テーブルを同様に更新する。したがって、セッション1に参加していた伝送端末10はセッション1が終わり次第、セッション2の限定通信に参加できる。なお、ステップS150の通知により、セッション1の伝送端末10のユーザは別の限定通信が要求されていることを把握しているので、セッション2に加わるつもりがない場合は拒否できる。   When the determination in step S160 is Yes, the limited communication control unit 58 adds the transmission terminal 10 for which the limited communication of the session 1 has been completed to the session 2 (S170). The limited communication management unit 58 deletes the communication ID of session 1 from the limited communication management table and adds it to session 2. Further, the relay device 30 similarly updates the transfer destination management table. Therefore, the transmission terminal 10 participating in the session 1 can participate in the limited communication of the session 2 as soon as the session 1 ends. In addition, since the user of the transmission terminal 10 in the session 1 knows that another limited communication is requested by the notification in the step S150, it can be rejected when the user does not intend to join the session 2.

次に、伝送管理システム50の限定通信制御部58は複数の限定通信の宛先端末の全てがセッション2に加わったか否かを判定する(S180)。ステップS180の判定がNoの場合、処理はステップS190に進み、ステップS180の判定がYesの場合、処理は終了する。   Next, the limited communication control unit 58 of the transmission management system 50 determines whether all of the plurality of limited communication destination terminals have joined the session 2 (S180). If the determination in step S180 is No, the process proceeds to step S190. If the determination in step S180 is Yes, the process ends.

次に、伝送管理システム50の限定通信制御部58は要求元の伝送端末10がセッション2の限定通信を終了したか否かを判定する(S190)。ステップS190の判定がNoの場合、処理はステップS160に進み、ステップS190の判定がYesの場合、処理は終了する。   Next, the limited communication control unit 58 of the transmission management system 50 determines whether or not the requesting transmission terminal 10 has ended the limited communication of the session 2 (S190). If the determination in step S190 is No, the process proceeds to step S160. If the determination in step S190 is Yes, the process ends.

したがって、図22の処理によれば、任意の伝送端末10が複数の伝送端末10を指定して限定通信を開始でき、セッション1で"限定通信中"の伝送端末10は、セッション1の限定通信を終了させればセッション2の限定通信に参加できる。   Therefore, according to the processing of FIG. 22, an arbitrary transmission terminal 10 can specify a plurality of transmission terminals 10 to start limited communication, and a transmission terminal 10 that is “limited communication” in session 1 Can end the session 2 limited communication.

<<音量調整>>
・ユーザインタフェース1、2の場合
次に、図23を用いて図20のステップS6の音量調整について説明する。図23は、図20のステップS6の処理の詳細を説明するフローチャート図の一例である。
<< Volume adjustment >>
User Interfaces 1 and 2 Next, the volume adjustment in step S6 in FIG. 20 will be described with reference to FIG. FIG. 23 is an example of a flowchart for explaining details of the process in step S6 of FIG.

限定通信のセッションが確立することで、伝送端末10abは限定通信を開始する(S10)。具体的には、音声出力部15bは次述の音量制御を行い、表示制御部16は必要であれば図11の限定通信中画面920に切り替える。   When the limited communication session is established, the transmission terminal 10ab starts the limited communication (S10). Specifically, the audio output unit 15b performs volume control described below, and the display control unit 16 switches to the limited communication in-progress screen 920 in FIG. 11 if necessary.

次に、音声出力部15bは音量制御を行う(S20)。具体的には、限定通信によるやりとり(音声データ)に集中するために、音声出力部15bは表7に示す音量設定に基づいてテレビ会議の拠点から送信される音声データの音量を絞る。表7は「通信状態」が"限定通信中"の音量について説明する表の一例である。なお、マイクが消音(ミュート)状態であった場合は、それを解除する。   Next, the audio output unit 15b performs volume control (S20). Specifically, in order to concentrate on the exchange (audio data) by limited communication, the audio output unit 15b reduces the volume of the audio data transmitted from the base of the video conference based on the volume setting shown in Table 7. Table 7 is an example of a table for explaining the sound volume whose “communication state” is “limited communication”. If the microphone is muted, it is canceled.

Figure 2016134781
表7では、「限定通信中でない場合(テレビ会議中)」と「限定通信中」のそれぞれで、「テレビ会議のスピーカー音量」と「限定通信のスピーカー音量」とが登録されている。
Figure 2016134781
In Table 7, “speaker volume for video conference” and “speaker volume for limited communication” are registered for “not in limited communication (during video conference)” and “during limited communication”, respectively.

「限定通信中でない場合(テレビ会議中)」とは、テレビ会議は行っているが限定通信していない場合の音量を示す。「限定通信中」は「通信状態」が"限定通信中"の音量の値を示している。「テレビ会議のスピーカー音量」とは、テレビ会議を行っている(限定通信は行っていない)各拠点の参加者の声の音量を意味する。各拠点の音声が同じ音量で(マイクとの距離により多少の強弱はあるが)聞こえてくる。「限定通信のスピーカー音量」は、限定通信している相手の拠点から送信される音声データの音量である。   “When not in limited communication (during a video conference)” indicates a volume when a video conference is being performed but limited communication is not being performed. “Limited communication” indicates a volume value of “communication status” “limited communication”. “Speaker volume of a video conference” means the volume of the voice of the participant at each site that is conducting a video conference (no limited communication is performed). The sound at each site can be heard at the same volume (although there are some strengths depending on the distance from the microphone). “Speaker volume for limited communication” is the volume of audio data transmitted from the base of the other party that is performing limited communication.

限定通信が始まるまでは、音声出力部15bは「テレビ会議のスピーカー音量」にしたがって音声データの音を増幅する。限定通信は行われていないので、限定通信用に音データを増幅する必要はない。したがって、「限定通信中でない場合(テレビ会議中)」場合の「限定通信のスピーカー音量」はゼロに制御される。   Until the limited communication starts, the audio output unit 15b amplifies the sound of the audio data in accordance with the “video conference speaker volume”. Since limited communication is not performed, it is not necessary to amplify sound data for limited communication. Therefore, the “speaker volume for limited communication” in the case of “not during limited communication (during a video conference)” is controlled to zero.

限定通信が始まると、音声出力部15bは以下のように音を増幅する。
・テレビ会議の音声データは「テレビ会議のスピーカー音量(表7では10)」にて増幅する。
・限定通信の音声データは「限定通信のスピーカー音量(表7では50)」にて増幅する。
このように「通信状態」が"限定通信中"の場合、「テレビ会議のスピーカー音量」<「限定通信のスピーカー音量」なので、限定通信しているユーザは限定通信している他の拠点からの音声を聞き取りやすい。
When the limited communication starts, the audio output unit 15b amplifies the sound as follows.
The audio data of the video conference is amplified by “the speaker volume of the video conference (10 in Table 7)”.
-Audio data for limited communication is amplified by "speaker volume for limited communication (50 in Table 7)".
In this way, when the “communication status” is “limited communication”, “speaker volume of video conference” <“speaker volume of limited communication”, so the user who is limited communication is from other sites that are limited communication Easy to hear voice.

表7の「テレビ会議のスピーカー音量」「限定通信のスピーカー音量」は、グラフィカルユーザインタフェースのスライドバーなどでユーザが調整できる。   “Speaker volume for video conference” and “Speaker volume for limited communication” in Table 7 can be adjusted by the user with a slide bar of a graphical user interface.

図24(a)はスピーカー音量の調整を説明する図の一例である。会議音量のスライドバー918と限定通信の音量のスライドバー917がそれぞれ表示されている。表示制御部16は限定通信が開始されると会議音量のスライドバー918に加え限定通信の音量のスライドバー917を表示する。ユーザはそれぞれを任意のボリュームに調整できる。   FIG. 24A is an example for explaining adjustment of speaker volume. A conference volume slide bar 918 and a limited communication volume slide bar 917 are respectively displayed. When limited communication is started, the display control unit 16 displays a limited communication volume slide bar 917 in addition to the conference volume slide bar 918. The user can adjust each to an arbitrary volume.

図24(b)に示すように、表示制御部16がスライドバー919を1つ表示して、スライドバー919の位置により限定通信の音量と会議音量の比率を制御してもよい。例えば、スライドバー919が中央位置にある場合、限定通信の音量と会議音量が同じ強さになる。そして、スライドバー919が中央よりも左寄りにある場合、中央からのかい離量に応じて限定通信の音量が会議音量よりも大きくなり、スライドバー919が中央よりも右寄りにある場合、中央からのかい離量に応じて会議音量が限定通信の音量よりも大きくなる。このようなスライドバー919であれば、ユーザは限定通信の音量と会議音量を同時に設定できる。なお、スライドバー919は音量設定受け付け手段の一例である。   As shown in FIG. 24B, the display control unit 16 may display one slide bar 919 and control the ratio of the limited communication volume and the conference volume according to the position of the slide bar 919. For example, when the slide bar 919 is at the center position, the volume of the limited communication and the conference volume have the same strength. When the slide bar 919 is further to the left than the center, the volume of the limited communication is larger than the conference volume according to the distance from the center. When the slide bar 919 is further to the right than the center, the distance from the center is increased. Depending on the volume, the conference volume is larger than the volume of limited communication. With such a slide bar 919, the user can set the volume of the limited communication and the conference volume at the same time. The slide bar 919 is an example of a volume setting receiving unit.

また、図2、3ではスピーカー115、213を1つ図示したがテレビ会議用のスピーカーと、限定通信用のスピーカーとが個別に実装されていてもよい。スピーカー115、213が1つのみ実装されている場合、音声出力部15bは表7の音量でミキシング(混合)して、出力する。   2 and 3 show one speaker 115 and 213, a video conference speaker and a limited communication speaker may be individually mounted. When only one speaker 115, 213 is mounted, the audio output unit 15b performs mixing (mixing) with the sound volume shown in Table 7 and outputs the result.

図23に戻って説明する。伝送端末10の操作入力受付部12は限定通信終了ボタン913が押下されたか否かを判定する(S30)。   Returning to FIG. The operation input receiving unit 12 of the transmission terminal 10 determines whether or not the limited communication end button 913 is pressed (S30).

ステップS30の判定がYesの場合、伝送端末10の送受信部11は限定通信終了要求を伝送管理システム50に送信する(S40)。   When the determination in step S30 is Yes, the transmission / reception unit 11 of the transmission terminal 10 transmits a limited communication end request to the transmission management system 50 (S40).

そして、伝送端末10の送受信部11が限定通信終了応答を受信すると、伝送端末10の音声出力部15bは音量制御を行う(S50)。すなわち、表7の「限定通信中でない場合(テレビ会議中)」の音量に戻す。   When the transmission / reception unit 11 of the transmission terminal 10 receives the limited communication end response, the audio output unit 15b of the transmission terminal 10 performs volume control (S50). In other words, the volume is returned to the volume of “when not in limited communication (during a video conference)” in Table 7.

・ユーザインタフェース3の場合
次に、図25を用いてユーザインタフェース3の場合の図20のステップS6の音量調整について説明する。図25は、図20のステップS6の処理の詳細を説明するフローチャート図の一例である。なお、図25において図23にて説明した処理については説明を省略あるいは相違点についてのみ説明する場合がある。
In the case of the user interface 3 Next, the volume adjustment in step S6 in FIG. 20 in the case of the user interface 3 will be described with reference to FIG. FIG. 25 is an example of a flowchart for explaining details of the process in step S6 of FIG. 25, the description of the processing described in FIG. 23 may be omitted, or only the differences may be described.

ステップS10,S20の処理により音声出力部15bが音量制御を行うと、操作入力受付部12は選択が解除されたか否かを判定する(S30)。すなわち、ユーザインタフェース3ではユーザが「表示領域」を押下している間だけ限定通信が行われるので、ユーザが「表示領域」から指を離すか又はクリックすることを止めると選択が解除される。   When the sound output unit 15b performs volume control by the processes of steps S10 and S20, the operation input receiving unit 12 determines whether or not the selection is released (S30). That is, in the user interface 3, limited communication is performed only while the user presses the “display area”, so that the selection is canceled when the user removes the finger from the “display area” or stops clicking.

ステップS30の判定がYesになった場合のステップS40,S50の処理については図19と同様である。   The processing in steps S40 and S50 when the determination in step S30 is Yes is the same as in FIG.

<<<伝送管理システムの制御>>>
図26を用いて、ユーザインタフェース3の場合に伝送管理システム50が行う制御について説明する。図26は、ユーザインタフェース3の場合に伝送管理システム50が限定通信に関する制御を行う手順を示すフローチャート図の一例である。図26の処理は、例えばテレビ会議がスタートするとスタートする。
<<< Control of transmission management system >>>
Control performed by the transmission management system 50 in the case of the user interface 3 will be described with reference to FIG. FIG. 26 is an example of a flowchart illustrating a procedure in which the transmission management system 50 performs control related to limited communication in the case of the user interface 3. The process of FIG. 26 starts when a video conference starts, for example.

図20のステップS1にて説明したように、伝送管理システム50の送受信部51は限定通信開始要求を受信する(S110)。   As described in step S1 of FIG. 20, the transmission / reception unit 51 of the transmission management system 50 receives the limited communication start request (S110).

限定通信開始要求を受信した場合、図20のステップS2にて説明したように判定部57が限定通信の可否を判断する(S120)。ここでは限定通信が可能であると判断されたものとする(S120のYes)。また、限定通信の宛先端末から限定通信開始許可が送信されたものとする。   When the limited communication start request is received, the determination unit 57 determines whether limited communication is possible as described in step S2 of FIG. 20 (S120). Here, it is assumed that limited communication is possible (Yes in S120). Further, it is assumed that the limited communication start permission is transmitted from the limited communication destination terminal.

次に、伝送管理システム50の状態管理部53は端末管理テーブルの「通信状態」を"限定通信中"に更新し、限定通信制御部58は限定通信管理テーブルに限定通信を行う伝送端末10の通信IDを登録する(S130)。   Next, the state management unit 53 of the transmission management system 50 updates the “communication state” of the terminal management table to “limited communication”, and the limited communication control unit 58 of the transmission terminal 10 that performs limited communication in the limited communication management table. A communication ID is registered (S130).

次に、伝送管理システム50の限定通信制御部58は限定通信管理テーブルに登録した通信IDを中継装置30に送信すると共に、中継装置30に対し限定通信による音声データの中継を要求する(S140)。すなわち、要求元端末と宛先端末と通信IDを中継装置30に送信する。これにより、中継装置30は転送先管理テーブルに通信IDとを登録し、限定通信における音声データの中継を開始する。   Next, the limited communication control unit 58 of the transmission management system 50 transmits the communication ID registered in the limited communication management table to the relay device 30 and requests the relay device 30 to relay voice data by limited communication (S140). . That is, the request source terminal, the destination terminal, and the communication ID are transmitted to the relay device 30. As a result, the relay device 30 registers the communication ID in the transfer destination management table and starts relaying the voice data in the limited communication.

次に、伝送管理システム50の限定通信制御部58は、限定通信終了要求が送信された否かを判定する(S150)。ユーザインタフェース3では、ユーザが「表示領域」から指を離すと限定通信終了要求が伝送管理システム50に送信される。したがって、伝送管理システム50の限定通信制御部58は、送受信部51が限定通信終了要求を受信する。   Next, the limited communication control unit 58 of the transmission management system 50 determines whether or not a limited communication end request has been transmitted (S150). In the user interface 3, a limited communication end request is transmitted to the transmission management system 50 when the user removes his / her finger from the “display area”. Therefore, in the limited communication control unit 58 of the transmission management system 50, the transmission / reception unit 51 receives the limited communication end request.

限定通信終了要求が受信されない場合(S150のNo)、中継装置30は音声データの転送を継続する。   When the limited communication end request is not received (No in S150), the relay device 30 continues to transfer the voice data.

限定通信終了要求が受信された場合(S150のYes)、伝送管理システム50の状態管理部53は端末管理テーブルの「通信状態」を"会議中"に更新し、限定通信制御部58は限定通信管理テーブルに登録されている伝送端末10の通信IDを削除する(S160)。   When the limited communication end request is received (Yes in S150), the state management unit 53 of the transmission management system 50 updates the “communication state” in the terminal management table to “in meeting”, and the limited communication control unit 58 performs the limited communication. The communication ID of the transmission terminal 10 registered in the management table is deleted (S160).

また、伝送管理システム50の限定通信制御部58は中継装置30に対し、限定通信が終了した通信IDを送信して限定通信の中継終了を要求する(S170)。中継装置30は転送先管理テーブルから通信IDを削除し、限定通信における音声データの中継を終了する。   In addition, the limited communication control unit 58 of the transmission management system 50 transmits a communication ID for which limited communication has been completed to the relay device 30 to request the end of limited communication relay (S170). The relay device 30 deletes the communication ID from the transfer destination management table, and ends the relay of the voice data in the limited communication.

このように、伝送管理システム50はユーザインタフェース3が採用されている場合には限定通信開始要求が途切れることで限定通信を終了できる。   As described above, the transmission management system 50 can end the limited communication when the user interface 3 is employed, because the limited communication start request is interrupted.

本実施例によれば、ユーザはテレビ会議中に任意のタイミングで任意の相手と限定通信を開始できる。また、"限定通信中"の伝送端末10又は携帯端末20に限定通信開始要求が送信された場合、通信できないことを要求元の伝送端末10又は携帯端末20に通知できる。また、各伝送端末10又は携帯端末20はテレビ会議の音声データの音量と限定通信の音声データの音量を適切に制御できる。   According to the present embodiment, the user can start limited communication with an arbitrary partner at an arbitrary timing during a video conference. Further, when a limited communication start request is transmitted to the transmission terminal 10 or the portable terminal 20 that is “limited communication”, it is possible to notify the requesting transmission terminal 10 or the portable terminal 20 that communication is not possible. Further, each transmission terminal 10 or mobile terminal 20 can appropriately control the volume of audio data for video conference and the volume of audio data for limited communication.

<本実施形態の好適な適用例>
以上、本発明を実施するための最良の形態について実施例を用いて説明したが、本発明はこうした実施例に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
<Preferred application example of this embodiment>
The best mode for carrying out the present invention has been described above with reference to the embodiments. However, the present invention is not limited to these embodiments, and various modifications can be made without departing from the scope of the present invention. And substitutions can be added.

例えば、テレビ会議のセッションが確立することで画像データと音声データが各伝送端末間で送信されると説明したが、テレビ会議のセッションが確立した場合に画像データのみが送信されてもよい。すなわち、テレビ会議のセッションが確立するだけでは音声データは送信されず、ユーザがユーザインタフェース1〜3から限定通信を開始することで音声データの送信が開始される。こうすれば、普段は他拠点の画像のみを継続して表示しておくことで、各拠点のユーザは適度な緊張感と一体感を持って業務を行うことができる。そして、必要であれば、ある拠点のユーザが他の拠点のユーザに対し会話を開始することで、任意のタイミングで限定通信(この場合はテレビ会議と称してもよい)を開始できる。   For example, although it has been described that image data and audio data are transmitted between the transmission terminals by establishing a video conference session, only image data may be transmitted when a video conference session is established. That is, audio data is not transmitted simply by establishing a video conference session, and transmission of audio data is started when the user starts limited communication from the user interfaces 1 to 3. In this way, normally, only the images of other bases are continuously displayed, so that the users of the respective bases can perform business with appropriate tension and sense of unity. If necessary, a user at one site can start a conversation with a user at another site to start limited communication (in this case, it may be referred to as a video conference).

また、限定通信において限定通信に参加している伝送端末10又は携帯端末20の画像データは全ての伝送端末10又は携帯端末20の間で送受信される。しかしながら、画像データにおいても限定通信に参加している伝送端末10又は携帯端末20の間でのみ送受信されてもよい。これにより、限定通信に参加している伝送端末10又は携帯端末20の撮像部14が秘匿事項を撮像しても、限定通信に参加していない伝送端末10又は携帯端末20に画像データが表示されることを防止できる。   Further, the image data of the transmission terminal 10 or the portable terminal 20 participating in the limited communication in the limited communication is transmitted / received between all the transmission terminals 10 or the portable terminals 20. However, image data may be transmitted / received only between the transmission terminal 10 or the portable terminal 20 participating in the limited communication. Thereby, even if the imaging unit 14 of the transmission terminal 10 or the portable terminal 20 participating in the limited communication captures the confidential matter, the image data is displayed on the transmission terminal 10 or the portable terminal 20 that does not participate in the limited communication. Can be prevented.

また、例えば、図1,2では伝送管理システム50は1台しかないが、伝送管理システム50は複数台、存在してもよい。また、伝送管理システム50の機能が複数の装置に分散して搭載されていてもよい。また、中継装置30が複数台、存在してもよいし、中継装置30の機能が複数の装置に分散して搭載されていてもよい。   Also, for example, in FIGS. 1 and 2, there is only one transmission management system 50, but a plurality of transmission management systems 50 may exist. The functions of the transmission management system 50 may be distributed and installed in a plurality of devices. Further, a plurality of relay devices 30 may exist, and the functions of the relay device 30 may be distributed and installed in a plurality of devices.

また、伝送管理システム50が端末管理DB5001、セッション管理DB5002、及び、宛先リスト管理DB5003を有しているのでなく、端末管理DB5001、セッション管理DB5002、及び、宛先リスト管理DB5003は通信ネットワーク2に存在すればよい。転送先管理DB3001についても同様である。   In addition, the transmission management system 50 does not include the terminal management DB 5001, session management DB 5002, and destination list management DB 5003, but the terminal management DB 5001, session management DB 5002, and destination list management DB 5003 exist in the communication network 2. That's fine. The same applies to the transfer destination management DB 3001.

また、図5では中継装置30と伝送管理システム50が個別に存在するが、中継装置30と伝送管理システム50は1つの装置であってもよい。   In FIG. 5, the relay device 30 and the transmission management system 50 exist separately, but the relay device 30 and the transmission management system 50 may be one device.

1 伝送システム
10 伝送端末
11 送受信部
12 操作入力受付部
15a 音声入力部
15b 音声出力部
16 表示制御部
20 携帯端末
50 伝送管理システム
53 状態管理部
54 端末抽出部
55 端末状態取得部
56 セッション管理部
57 判定部
58 限定通信制御部
DESCRIPTION OF SYMBOLS 1 Transmission system 10 Transmission terminal 11 Transmission / reception part 12 Operation input reception part 15a Audio | voice input part 15b Audio | voice output part 16 Display control part 20 Portable terminal 50 Transmission management system 53 State management part 54 Terminal extraction part 55 Terminal state acquisition part 56 Session management part 57 determination unit 58 limited communication control unit

特開平07−202887号公報Japanese Patent Application Laid-Open No. 07-202887 特開平09−219749号公報JP 09-219749 A

Claims (9)

端末が送信する画像データの送信先を制御する情報処理装置であって、
中継手段に対し、一方の端末から複数の他方の端末に画像データを中継させる第1の中継制御手段と、
複数の端末のうち1つ以上の第2の端末が指定された通信開始要求を第1の端末から受信する受信手段と、
中継手段に対し、前記第1の端末から前記第2の端末へ又は前記第2の端末から前記第1の端末へのみ音声データを中継させる第2の中継制御手段と、を有する情報処理装置。
An information processing apparatus for controlling a transmission destination of image data transmitted by a terminal,
First relay control means for relaying image data from one terminal to a plurality of other terminals to the relay means;
Receiving means for receiving, from the first terminal, a communication start request in which one or more second terminals of the plurality of terminals are designated;
An information processing apparatus comprising: a second relay control unit that relays voice data only from the first terminal to the second terminal or from the second terminal to the first terminal.
前記第2の中継制御手段は、通信開始要求を送信した前記第1の端末及び前記通信開始要求で指定された前記第2の端末の識別情報を通信中情報に登録し、
前記受信手段が、中継手段による画像データの中継先となる端末から前記第1の端末又は前記第2の端末が指定された前記通信開始要求を受信した場合、
前記通信中情報にすでに前記第1の端末又は前記第2の端末の識別情報が登録されているか否かを判定する判定手段を有し、
前記通信開始要求に含まれる前記第1の端末又は前記第2の端末の識別情報が前記通信中情報に登録されていると前記判定手段が判定した場合、第2の中継制御手段は前記中継先となる端末に対し通信拒否を通知する請求項1に記載の情報処理装置。
The second relay control means registers the identification information of the first terminal that has transmitted the communication start request and the second terminal specified in the communication start request in the in-communication information,
When the receiving means receives the communication start request designated by the first terminal or the second terminal from a terminal that is a relay destination of image data by the relay means,
Determining means for determining whether the identification information of the first terminal or the second terminal is already registered in the in-communication information;
When the determination unit determines that the identification information of the first terminal or the second terminal included in the communication start request is registered in the in-communication information, the second relay control unit determines the relay destination The information processing apparatus according to claim 1, wherein a communication rejection is notified to a terminal that becomes.
前記受信手段が前記第2の端末が指定された前記通信開始要求を前記第1の端末から受信した際、前記第2の中継制御手段は前記第2の端末に対し前記通信開始要求を送信し、
前記第2の端末から通信拒否の旨の情報を取得した場合、前記通信拒否の旨を前記第1の端末に通知する請求項2に記載の情報処理装置。
When the receiving means receives the communication start request designated by the second terminal from the first terminal, the second relay control means transmits the communication start request to the second terminal. ,
The information processing apparatus according to claim 2, wherein when the information indicating that communication is refused is acquired from the second terminal, the information indicating that the communication is refused is notified to the first terminal.
前記受信手段が前記第1の端末から通信終了要求を受信した場合、前記第2の中継制御手段は前記第2の端末に対し前記通信終了要求を送信し、
前記第2の端末から通信終了を許可する旨の情報を取得しなくても、前記第2の中継制御手段は中継手段に対し、前記第1の端末及び前記第2の端末に対する音声データの送信を終了させる請求項1〜3いずれか1項に記載の情報処理装置。
When the receiving means receives a communication end request from the first terminal, the second relay control means transmits the communication end request to the second terminal;
The second relay control means transmits the voice data to the first terminal and the second terminal to the relay means without acquiring the information indicating that the communication end is permitted from the second terminal. The information processing apparatus according to any one of claims 1 to 3.
前記受信手段が前記第1の端末から前記通信終了要求を受信するまでの間だけ、前記第2の中継制御手段は、前記中継手段に対し、前記第1の端末から前記第2の端末へ又は前記第2の端末から前記第1の端末へのみ音声データを中継させる請求項4に記載の情報処理装置。   Only until the reception means receives the communication end request from the first terminal, the second relay control means, with respect to the relay means, from the first terminal to the second terminal or The information processing apparatus according to claim 4, wherein audio data is relayed only from the second terminal to the first terminal. 前記受信手段が複数の前記第2の端末を指定する前記通信開始要求を受信した場合、前記判定手段は、前記通信中情報に前記複数の前記第2の端末の一部がすでに登録されているか否かを判定し、
前記通信中情報にすでに前記複数の前記第2の端末の一部が登録されている場合、前記第2の中継制御手段は、中継手段に対し、前記第1の端末及び前記通信中情報に登録されていなかった前記第2の端末との間で音声データの中継を開始させ、
前記通信中情報にすでに登録されていた前記第2の端末に通信要求がある旨を通知する請求項2に記載の情報処理装置。
When the reception unit receives the communication start request designating a plurality of second terminals, the determination unit determines whether a part of the plurality of second terminals has already been registered in the in-communication information Determine whether or not
When a part of the plurality of the second terminals is already registered in the in-communication information, the second relay control unit registers the first terminal and the in-communication information with respect to the relay unit. Start relaying voice data with the second terminal that has not been performed,
The information processing apparatus according to claim 2, wherein a notification that there is a communication request is sent to the second terminal that has already been registered in the in-communication information.
前記通信中情報にすでに登録されていた前記複数の前記第2の端末の一部が前記通信中情報から削除された場合、
前記第2の中継制御手段は、中継手段に対し、前記第1の端末、前記通信中情報に登録されていなかった前記第2の端末、及び、前記通信中情報から削除された前記第2の端末との間で音声データの中継を開始させる請求項6に記載の情報処理装置。
When a part of the plurality of second terminals already registered in the in-communication information is deleted from the in-communication information,
The second relay control means, with respect to the relay means, the first terminal, the second terminal not registered in the in-communication information, and the second terminal deleted from the in-communication information The information processing apparatus according to claim 6, wherein relay of voice data is started with a terminal.
端末が送信する画像データの送信先を制御する情報処理装置に、
中継手段に対し、一方の端末から複数の他方の端末へ画像データを送信させる第1の中継制御ステップと、
複数の端末のうち1つ以上の第2の端末が指定された通信開始要求を第1の端末から受信する受信ステップと、
中継手段に対し、前記第1の端末から前記第2の端末へ又は前記第2の端末から前記第1の端末へのみ音声データを中継させる第2の中継制御ステップと、を実行させるプログラム。
In the information processing device that controls the destination of the image data sent by the terminal,
A first relay control step for causing the relay means to transmit image data from one terminal to a plurality of other terminals;
A receiving step of receiving, from the first terminal, a communication start request in which one or more second terminals of the plurality of terminals are designated;
A program for causing a relay means to execute a second relay control step for relaying voice data only from the first terminal to the second terminal or from the second terminal to the first terminal.
複数の端末と、前記端末が送信する画像データの送信先を制御する情報処理装置とを有する伝送システムであって、
中継手段に対し、一方の端末から複数の他方の端末へ画像データを送信させる第1の中継制御手段と、
第2の端末が送信した前記画像データを表示する表示手段と、
前記表示手段が表示した複数の前記画像データのうち1つ以上の選択を受け付けることで前記第2の端末の指定を受け付ける選択受け付け手段と、
前記第2の端末が指定された通信開始要求を第1の端末から受信する受信手段と、
中継手段に対し、前記第1の端末から前記第2の端末へ又は前記第2の端末から前記第1の端末へのみ音声データを中継させる第2の中継制御手段と、を有する伝送システム。
A transmission system having a plurality of terminals and an information processing apparatus that controls a transmission destination of image data transmitted by the terminals,
First relay control means for causing the relay means to transmit image data from one terminal to a plurality of other terminals;
Display means for displaying the image data transmitted by the second terminal;
Selection accepting means for accepting designation of the second terminal by accepting selection of one or more of the plurality of image data displayed by the display means;
Receiving means for receiving, from the first terminal, a communication start request designated by the second terminal;
And a second relay control unit that relays voice data only from the first terminal to the second terminal or from the second terminal to the first terminal.
JP2015008513A 2015-01-20 2015-01-20 Information processing device, voice output method, program and communication system Pending JP2016134781A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015008513A JP2016134781A (en) 2015-01-20 2015-01-20 Information processing device, voice output method, program and communication system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015008513A JP2016134781A (en) 2015-01-20 2015-01-20 Information processing device, voice output method, program and communication system

Publications (1)

Publication Number Publication Date
JP2016134781A true JP2016134781A (en) 2016-07-25

Family

ID=56464650

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015008513A Pending JP2016134781A (en) 2015-01-20 2015-01-20 Information processing device, voice output method, program and communication system

Country Status (1)

Country Link
JP (1) JP2016134781A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018061173A1 (en) * 2016-09-30 2018-04-05 株式会社オプティム Tv conference system, tv conference method, and program
JP6929429B1 (en) * 2020-11-04 2021-09-01 株式会社ブイキューブ Conference management device, conference management method and program
JP7430076B2 (en) 2020-02-21 2024-02-09 株式会社タムラ製作所 Wireless system, main device

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018061173A1 (en) * 2016-09-30 2018-04-05 株式会社オプティム Tv conference system, tv conference method, and program
JP7430076B2 (en) 2020-02-21 2024-02-09 株式会社タムラ製作所 Wireless system, main device
JP6929429B1 (en) * 2020-11-04 2021-09-01 株式会社ブイキューブ Conference management device, conference management method and program
WO2022097350A1 (en) * 2020-11-04 2022-05-12 株式会社ブイキューブ Meeting management device, meeting management method, and program
JP2022074344A (en) * 2020-11-04 2022-05-18 株式会社ブイキューブ Conference management apparatus, conference management method, and program

Similar Documents

Publication Publication Date Title
JP5849484B2 (en) Transmission terminal, display data transmission method, program, information providing apparatus, and transmission system
JP6471451B2 (en) Transmission system, communication control device, communication control method, communication method, program
JP6557976B2 (en) Transmission system, information processing apparatus, transmission method, program
JP6115153B2 (en) Information processing terminal, information processing method, and program
JP7501584B2 (en) COMMUNICATION TERMINAL, COMMUNICATION SYSTEM, COMMUNICATION METHOD, AND PROGRAM
JP2024052920A (en) Information processing device, communication method, program, and system
JP2017142610A (en) Server device, transmission system and program
JP2016134781A (en) Information processing device, voice output method, program and communication system
JP2021122151A (en) Information processing device, program, method, and system
JP2016167658A (en) Information processing apparatus, information processing program, and information processing system and information processing method
JP2017027561A (en) Terminal, communication system, communication method, and program
JP2016092480A (en) Information processing device, call-out method, program and communication system
JP7456162B2 (en) Programs, communication methods, communication terminals and communication systems
JP7272223B2 (en) Program, communication method, communication terminal and communication system
JP7318461B2 (en) Communication system, communication terminal, communication method, communication terminal program and application program
JP2016134780A (en) Information processing device, voice output method, program and communication system
JP6569353B2 (en) Transmission system, information processing apparatus, program, and transmission method
JP2016171373A (en) Service provision device, communication method, communication system, and program
JP7160126B2 (en) Second management system, program, communication method, system
JP7326771B2 (en) Communication terminal, communication system, communication method and program
JP7327119B2 (en) Communication system, communication terminal, communication method and program
JP2018006823A (en) Transmission management device, transmission system, information processing method, and program
JP6582559B2 (en) Status information management apparatus, status information processing method, program, and transmission system
JP6589436B2 (en) Communication system, communication management method, and program
JP6241301B2 (en) Transmission management system, transmission management method and program