JP2008306475A - Voice and image conference device - Google Patents
Voice and image conference device Download PDFInfo
- Publication number
- JP2008306475A JP2008306475A JP2007151890A JP2007151890A JP2008306475A JP 2008306475 A JP2008306475 A JP 2008306475A JP 2007151890 A JP2007151890 A JP 2007151890A JP 2007151890 A JP2007151890 A JP 2007151890A JP 2008306475 A JP2008306475 A JP 2008306475A
- Authority
- JP
- Japan
- Prior art keywords
- data
- audio
- voice
- image data
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Facsimiles In General (AREA)
- Telephonic Communication Services (AREA)
Abstract
Description
本発明は、複数の参加者間の会議に利用され、会議出席者間の情報共有を行う為に用いる音声・画像会議装置に関する。 The present invention relates to an audio / video conference apparatus that is used for a conference between a plurality of participants and is used to share information among conference attendees.
近年のネットワーク環境の発展に伴い、音声・画像会議システムの利用が急速に伸びており、物理的に離れた場所間での会議では、音声会議のみで行うか音声会議と電子黒板を使用するか、ＴＶ会議を使用することが多い。近年では、パーソナルコンピュータ上のメッセンジャーソフトとファイル共通ソフトを用いて行うことも増加している。 With the recent development of the network environment, the use of audio / video conferencing systems has been rapidly increasing. Whether a conference between physically separated locations is performed only by audio conference or audio conference and electronic blackboard are used. Often, video conferencing is used. In recent years, the use of messenger software and file common software on a personal computer is increasing.
従来からの、物理的に離れた場所間の音声会議システムでは、異なる場所にいる出席者の間での描画データ等の情報の共有が困難となる問題があった。 In the conventional audio conference system between physically separated places, there is a problem that it is difficult to share information such as drawing data between attendees in different places.
また、物理的に離れた場所間で会議を行う場合に、複数の箇所の電子黒板を通信で接続し、複数の箇所で電子黒板上の情報を共有化することが提案されている（例えば、特許文献１参照）。しかしながら、この提案では、音声通信については、直接関係しないとしており、音声通信と画像通信の関係については何ら述べられていない。また、この提案では、音声会議システムと電子黒板を共用して音声・画像会議システムを構成するとしても、音声会議システムと電子黒板が各々別な装置であることから、音声用と画像用の複数の回線が必要になる問題や、同一の回線を用いて音声後画像データを送信する場合では、電子黒板の画像データのデータ量によっては、音声通信に影響を及ぼすなどの問題があった。 In addition, when a meeting is held between physically separated locations, it is proposed to connect electronic blackboards at a plurality of locations by communication and share information on the electronic blackboard at a plurality of locations (for example, Patent Document 1). However, in this proposal, voice communication is not directly related, and there is no description about the relationship between voice communication and image communication. In this proposal, even if the audio / video conference system is configured by sharing the audio conference system and the electronic blackboard, since the audio conference system and the electronic blackboard are different devices, a plurality of audio and image blackboards are used. When the post-audio image data is transmitted using the same line, depending on the amount of image data on the electronic blackboard, there are problems such as affecting voice communication.
すなわち、音声会議システムと電子黒板を利用した場合にも、異なる場所にいる出席者の間での画像データなどの情報の共有が困難となる問題があった。
また、ＴＶ会議は非常に高価であり、ＴＶ会議に使用する装置が複数の拠点に設置されていることはまれであり、手軽に利用することはできないという問題があった。
That is, even when an audio conference system and an electronic blackboard are used, there is a problem that it is difficult to share information such as image data among attendees in different places.
Also, TV conferences are very expensive, and devices used for TV conferences are rarely installed at a plurality of bases, and there is a problem that they cannot be used easily.
さらに、多くの音声会議やＴＶ会議では、離れた拠点間の出席者の間での意識の共有が図れないことが多く、各出席者がその時点で画像データを手にすることができず会議終了後の結論が誤解されやすいケースが発生する恐れがあり問題であった。 Furthermore, in many audio conferences and TV conferences, it is often impossible to share consciousness among attendees between remote locations, and each attendee cannot obtain image data at that time, and the conference There was a possibility that the conclusion after the end could be misunderstood.
加えて、複数の出席者で会議を行う場合、電子黒板に記載した内容を時間をおいた後に、使用したい場合などがあり、電子黒板に記載したままとなり、他の人が電子黒板を使用できないなどの問題がある上に、電子黒板に記載したままとなった描画データ、情報機密上の観点から問題であった。
本発明は、上述した問題を解決するために、離れた拠点間で音声・画像データを送信する音声・画像会議システムにおいて、電子黒板の入力情報を離れた拠点間で共有化することにより、効率的な会議を行うことができ、また、会議中の音声データ、電子黒板上の描画データを記憶手段に記憶することで、離れた拠点間の会議出席者の誤解を少なくすることができる音声・画像会議装置を提供することを目的とする。 In order to solve the above-described problem, the audio / image conference system that transmits audio / image data between remote sites can efficiently share the input information on the electronic blackboard between the remote sites. Voice, which can reduce the misunderstanding of meeting attendees between remote locations by storing voice data during the meeting and drawing data on the electronic blackboard in the storage means An object is to provide an image conference apparatus.
上記課題を解決するために、音声・画像会議システムを構成する本発明の音声・画像会議装置は、ネットワークを介して相手方の音声・画像会議装置との間で会議を行う装置であって、画面上に直接入力される画像データを描画するとともに、外部入力される画像データを描画する描画手段と、話者が発する音声を集音し、音声データを符号化するとともに、外部入力される音声データを復号化するとともに出力する音声処理手段と、前記描画画面に描画された画像データと前記符号化された音声データと外部入力された音声データを一組にして、外部記憶装置に保存する手段と、前記描画画面に描画された画像データと前記話者音声を集音し、符号化した音声データの状態を見て、画像データを分割して外部機器へ送信するとともに、前記外部機器から送信されてきた画像データを受信し、前記描画手段へ供給する通信制御手段とを具備する。 In order to solve the above-mentioned problem, the audio / video conference apparatus of the present invention constituting the audio / video conference system is an apparatus for performing a conference with the other party's audio / video conference apparatus via a network, Draws image data that is input directly on the screen, draws the image data that is input externally, and collects the voice uttered by the speaker, encodes the audio data, and inputs externally input audio data Audio processing means for decoding and outputting the image data, means for storing the image data drawn on the drawing screen, the encoded audio data, and the externally input audio data as a set, and an external storage device; Collecting the image data drawn on the drawing screen and the speaker voice, viewing the state of the encoded voice data, dividing the image data and transmitting it to an external device; Receiving image data transmitted from the part device comprises a communication control means for supplying to said drawing means.
また、本発明は、上記音声・画像会議装置において、外部記憶装置に保存された描画データと音声データを一組にし、外部装置から要求があった場合に配信する手段を持つ。 In addition, the present invention has means for combining the drawing data and the audio data stored in the external storage device in the audio / image conference apparatus and distributing them when requested by the external device.
また、本発明は、上記音声・画像会議装置において、話者音声を集音する手段として、複数の集音装置を使用し、話者の方向を判別することで、その他の雑音を除去する手段を持つ。 Further, the present invention provides means for removing other noises by using a plurality of sound collecting devices as means for collecting speaker voice and determining the direction of the speaker in the voice / image conference apparatus. have.
本発明によれば、離れた拠点間で電子黒板の入力情報を共有化すること、また、リアルタイムの音声通信をすることにより、効率的な会議を行うことができる。 ADVANTAGE OF THE INVENTION According to this invention, an efficient meeting can be performed by sharing the input information of an electronic blackboard between remote bases, and performing real-time audio | voice communication.
さらに、本発明によれば、会議中の音声データ、電子黒板上の描画データを記憶することで、後々の離れた拠点間の会議出席者の誤解を少なくすることできる。 Furthermore, according to the present invention, voice data during a meeting and drawing data on an electronic blackboard are stored, so that it is possible to reduce misunderstandings of meeting attendees between remote locations.
以下、本発明の実施形態の例を説明する。図１を用いて、本発明にかかる音声・画像会議装置を用いて構成された音声・画像会議システム構成の概要を説明する。 Hereinafter, examples of embodiments of the present invention will be described. With reference to FIG. 1, the outline of the audio / video conference system configuration configured using the audio / video conference apparatus according to the present invention will be described.
音声・画像会議システムは、一方の拠点に設置された音声・画像会議装置１Ａと、遠隔地にある他方の拠点に設置された音声・画像会議装置１Ｂとをネットワーク３を介して接続して構成される。さらに、ネットワーク３には、音声・画像会議装置１Ａ、１Ｂにアクセスすることができる外部装置５が接続される。
The audio / video conference system is configured by connecting, via a
音声・画像会議装置１Ａ、１Ｂは、それぞれ離れた拠点に設置された音声・画像会議を行う会議室に設置され、ネットワーク３を介して互いに接続されている。外部装置５は、例えば、パーソナルコンピュータを使用し、ネットワーク３に接続される。この外部装置５は、パーソナルコンピュータ以外の通信機能を持つ専用機器であっても良い。本実施例では、２拠点に設けた音声・画像会議装置１Ａ、１Ｂ間での音声・画像会議システムの例を示すが、音声・画像会議装置は３拠点以上の複数拠点に設置されても良い。外部装置５は１拠点を示したが、２拠点以上の複数拠点であっても良い。
The audio /
ネットワーク３は、音声データと画像データを送ることができるネットワークであり、ＬＡＮ、ＷＡＮなどのディジタルネットワーク、ＩＳＤＮ回線網などの公衆網であってよい。
The
図２を用いて、音声・画像会議装置１の機能構成を説明する。音声・画像会議装置１は、描画入出力部１１と、音声処理部１２と、主制御部１３と、通信インタフェース部１４と、記憶装置部１５と、操作部１６と、遠隔制御部１７と、プリンタ１８とを有している。音声処理部１２は、集音部とスピーカからなる音声入出力部１２１と、音声符号部１２２と、音声復号部１２３とを有している。遠隔制御部１７は、リモートコントローラ（遠隔制御器）インタフェース部１７１（以下リモートコントローラＩＦ部ということがある）と、リモートコントローラ（遠隔制御器）１７２とを有している。
The functional configuration of the audio /
上記描画入出力部１１と、主制御部１３と、通信インタフェース１４と、プリンタ１５などは前述の電子黒板と同様の装置であってよい。
The drawing input /
描画入出力部１１は、自拠点内でペンで描画された画像データを描画する第１の機能と主制御により指定された画像データを描画する第２の機能を持つ。描画入出力部１１は、タッチパネルを使用してもよい。
The drawing input /
音声入出力部１２１は、話者音声を集音する機能とともに、集音した音声データを音声符号部１２２へ送信する機能と、音声復号部１２３から受信した音声データを音声入出力部のスピーカから出力する機能を持つ。
The voice input /
また、話者音声を集音する機能は、一つのマイク素子だけでなく、複数のマイクを使用して、話者音声の方向を識別して、話者音声以外のデータ（雑音）を除去する機能を持つことができる。 In addition, the function to collect speaker's voice uses not only one microphone element but also a plurality of microphones to identify the direction of the speaker's voice and remove data (noise) other than the speaker's voice. Can have functions.
音声符号部１２２は、音声入出力部１２１で集音された音声データを圧縮符号化するとともに、主制御部１３へ圧縮符号化された音声データを送信する機能を持つ。
The
音声復号部１２３は、主制御部１３から送信される圧縮符号化された音声データを受信し、音声データを復号するとともに、音声入出力部１２１に音声データを送信する機能を持つ。
The
通信インタフェース部１４は、ネットワーク３のインタフェース機能を持ち、ネットワーク３と送受信する音声データおよび描画データを主制御部１３とやりとりする。
The
記憶装置部１５は、主制御部１３からの指示で描画データおよび音声データを記録するとともに、主制御部１３からの指示により、記憶装置部１５に格納されている描画データおよび音声データを読出し、主制御部１３へ格納する。記憶装置部１５は、ハードディスクを用いた内部記憶装置や外部記憶インタフェースを介して接続されるフラッシュメモリを用いたリムーバルメディアで構成することができる。
The
操作部１６は、描画入出力部１１への入力や動作するための複数のボタンと通信先の設定を行う為の複数のボタンと記憶装置への描画データと音声データの記録・再生を行う為の複数のボタンからなり、描画入出力部のコピーなどの操作だけでなく、描画入出力部１１への描画／消去のモードを切り替える切替ボタンなどを有し、描画入出力部１１への入出力を制御する。
The
遠隔制御部１７のリモートコントローラＩＦ部１７１は、リモートコントローラ（遠隔制御器）１７２から送信されたコマンドおよびデータを受信する部分で、受信したコマンドおよびデータを主制御部１３に通知する機能を持つ。遠隔制御部１７のリモートコントローラ（遠隔制御器）１７２は、通信先の選択および設定用の複数のボタンと音声出力のボリューム設定用の複数のボタンと音声ミュート用のボタンと音声入出力部１２１と音声符号部１２２と音声復号部１２３の設定用の複数のボタンと記憶装置部１５へのデータ保存の為の設定用ボタンと記憶装置部１５からのデータ読出し用の複数のボタンを持ち、音声・画像会議装置の操作を行う。リモートコントローラ（遠隔制御器）１７２は、操作部１６と同じ機能を持っていてもよく、操作部１６を取り外した状態でリモートコントローラ（遠隔制御器）１７２となってもよい。
The remote
主制御部１３は、描画入出力部１１と音声符号部１２２と音声復号部１２３と通信インタフェース部１４と記憶装置部１５と操作部１６とリモートコントローラＩＦ部１７１と接続され、本装置の全体の制御を行う機能を持つ。また、主制御部１３は、描画入出力部１１から送信された描画データや記憶装置部１５から読出し、通信相手へ送信するデータのデータ量が大きい場合は、音声符号部１２２から送信される音声データを優先的に通信インタフェース部１４に送出する機能を持つ。また、主制御部１３は、通信相手から送信されてくる音声データパケットの受信状態を確認することで、ネットワーク３の通信状況を把握する機能を持ち、通信相手側へ描画データなどの音声データ以外のデータ転送レートの変更要求を通知する機能を持つ。
The
図３を用いて、主制御部１３の機能構成を説明する。主制御部１３は、描画制御機能１３１と、画像データ判定・分割機能１３２と、音声データ・画像データ送出制御機能１３３と、音声データ・画像データ分離（判別）機能１３４と、会議データ記憶制御機能１３５と、閾値設定機能１３６と、画像データ退避記憶機能１３７とを有している。
The functional configuration of the
描画制御機能１３１は、描画入出力部１１に入力された画像データまたは外部から入力された画像データを描画入出力部１１の描画画面に表示するとともに画像データ判定・分割機能１３２へ送出する制御、新たな画像データを描画するに当たって描画画面に描画されている画像データを画像データ退避記憶機能１３７へ退避させる制御、要求があったときに画像データ退避記憶機能１３７に退避させた画像データを描画画面に表示する制御などを行う。
The
画像データ判定・分割機能１３２は、描画制御機能１３１から送られてきた画像データの量を監視し予め設定した画像データ量の閾値と比較し、画像データ量が、閾値以下であるときにはそのまま、閾値を超えるときには画像データを分割して音声データ・画像データ送出制御機能１３３へ送出する制御を行う。
The image data determination /
音声データ・画像データ送出制御機能１３３は、音声処理部１２からの音声データと、画像データ判定・分割機能１３２からの画像データをそれぞれパケット化して通信インタフェース部１４へ送出する制御を行う。
The audio data / image data
音声データ・画像データ分離（判別）機能１３４は、通信インタフェース部１４を介して外部から送られてきた音声データおよび画像データを、パケットデータのヘッダ部により、音声データであるか画像データであるかを判別し、画像データを描画制御機能１３１に音声データを音声処理部１２に振り分けて送出する制御を行う。
The audio data / image data separation (discrimination)
会議データ記憶制御機能１３５は、音声データと画像データとを一組にした会議データを記憶装置部１５の内部記憶手段または外部メモリインタフェース部を介した外部記憶手段に記憶させる制御、および、要求に応じてこれらの記憶手段から会議データを読み出す制御を行う。
The conference data
閾値設定機能１３６は、ネットワークの速度やその他の条件を勘案して一つのデータ送信単位で送信できる画像データ量の上限値を閾値として設定する機能である。
The
画像データ退避記憶機能１３７は、描画画面に画像データが現在表示されているときに新たな画像データを表示することとなった場合に、現在表示されている画像データを一時的に退避させ、必要となった場合に退避させた画像データを読み出して描画画面に表示する制御を行う。 The image data saving / storing function 137 temporarily saves the currently displayed image data when necessary when new image data is displayed when the image data is currently displayed on the drawing screen. In this case, control is performed to read out the saved image data and display it on the drawing screen.
図４を用いて、音声・画像会議装置の操作部１６の具体的な機能構成の一例を説明する。操作部１６は、表示器１６１と、ダイヤルキー１６２と、矢印キー１６３と、設定キー１６４と、機能キー１６５と、通信キー１６６と、保存・印刷キー１６７と、読出しキー１６８を有している。
An example of a specific functional configuration of the
表示器１６１は、音声・画像会議装置１の機能および状態を表示する機能を持つ。この表示器１６１は、液晶パネルであっても良い。
The
ダイヤルキー１６２は計１２個のボタンから構成され、装置の設定、通信相手の設定を行う場合に使用され、押下された情報を主制御部１３に通知する機能を持つ。
The
矢印キー１６３は、上下・左右の計４個のボタンから構成され、表示器１６１に表示された機能・状態表示の現在位置（カーソル）を移動させて選択する場合に使用され、押下された情報を主制御部１３に通知する機能を持つ。
The
設定キー１６４は、表示器１６１に表示された機能・状態を選択する場合に使用され、押下された（選択された）情報を主制御部１３に通知する機能を持つ。
The setting
機能キー１６５は、表示器１６１に表示された機能メニューを切替える場合に使用され、押下された情報を主制御部１３に通知する機能を持つ。
The
通信キー１６６は、自拠点からの発信若しくは、他拠点からの着信の際に通信開始を行う場合に使用され、押下された情報を主制御部１３に通知する機能を持つ。
The
保存・印刷キー１６７は、描画入出力部１１に描画された描画データを、保存または印刷する場合に押下され、押下された情報を主制御部１３に通知する機能を持つ。
The save /
読出しキー１６８は、記憶装置部１５に格納された以前の会議データを読み出す場合に使用され、押下された情報を主制御部１３に通知する機能を持つ。
The read
図５を用いて、本発明にかかる音声・画像会議装置１の構成の例を説明する。この音声・画像会議装置１は、枠体１０に、描画入出力部１１と、操作部１６と、通信インタフェース部１４と、リモコンインタフェース部１７１と、音声入出力部１２１のマイクロホンが設けられ、さらにプリンタ１８が枠体１０に取付けられている。描画入出力部１１は、画面上にタッチペンで入力された描画データをそのまま描画する機能と、ネットワーク３を介して受信した描画データを描画する機能を有しており、表面にタッチセンサが設けられたプラズマディスプレイ装置や液晶表示装置などディスプレイ装置から構成される。操作部１６は、図３に示した装置を設ける。また、音声・画像会議装置１には、音声処理部１２、主制御部１３、通信インタフェース部１４、記憶装置部１５、通信制御部１７、リモートコントローラＩＦ部１７１、該部メモリ媒体との間でデータを授受する外部メモリインタフェース部が設けられる。本発明の音声・画像会議装置１においては、音声入出力部１２１の音声入力手段として、複数のマイクロホンをアレイ状に並べた装置を用いており、この音声入力手段は、枠体１０に設置するか、有線または無線で音声処理部１７に接続される外部マイクロホンとして構成される。
An example of the configuration of the audio /
主制御部１３は、音声の入出力を制御する音声入出力制御機能と、ディスプレイへの入力を制御する描画入力制御機能と、ディスプレイ上に入力された描画データまたは他拠点からの描画データをディスプレイ上に表示する制御を行う表示制御機能と、他拠点からの描画データなどの受信を制御する受信制御機能を有している。
The
次に、音声・画像会議装置１を用いた音声・画像会議システムにおける接続動作の例を、図６を用いて説明する。Ａ拠点にいる会議出席者は、音声・画像会議装置１Ａの操作部１６若しくはリモートコントローラ（遠隔制御器）１７２に実装されている通信相手設定用の複数のボタンで通信相手の情報設定（Ｓ１）を行う。ここで入力する情報は、電話番号、ＩＰアドレス、相手先名称のいずれであってもよい。その後、操作部１６若しくはリモートコントローラ（遠隔制御器）１７２に実装されている通信ボタンの押し下げ（Ｓ２）を行う。
Next, an example of a connection operation in the audio / video conference system using the audio /
Ａ拠点の音声・画像会議装置１Ａは、設定された通信相手の情報（Ｂ拠点の情報）により、Ｂ拠点の音声・画像会議装置１Ｂへセッション参加リクエスト（Ｓ３）を送信する。Ｂ拠点の音声・画像会議装置１Ｂは、セッション参加リクエスト（Ｓ３）を受け付けた後、セッション暫定応答（Ｓ４）をＡ拠点音声・画像会議装置１Ａへ送信する。その後にＢ拠点の音声・画像会議装置１Ｂは、操作部１６に実装される表示器１６１もしくは、音声入出力部１２１のスピーカを用いて呼出表示（Ｓ５）を行う。
The voice / image conference apparatus 1A at the site A transmits a session participation request (S3) to the voice / image conference apparatus 1B at the site B based on the set information of the communication partner (information about the site B). After receiving the session participation request (S3), the B-site audio / video conference apparatus 1B transmits a session provisional response (S4) to the A-site audio / image conference apparatus 1A. Thereafter, the voice / image conference apparatus 1B at the site B performs call display (S5) using the
Ｂ拠点の会議出席者は、操作部１６若しくはリモートコントローラ（遠隔制御器）１７２に実装されている通信ボタン１６６の押し下げ（Ｓ６）を行う。Ｂ拠点の音声・画像会議装置１Ｂは、通信ボタン１６６の押し下げ（Ｓ６）後に、セッション応答（Ｓ７）をＡ拠点の音声・画像会議装置１Ａに送信する。なお、Ａ拠点音声・画像会議装置１ＡとＢ拠点音声・画像会議装置１Ｂ間のセッション参加リクエスト（Ｓ３）およびセッション暫定応答（Ｓ４）およびセッション応答（Ｓ７）は、中継するサーバを経由して行われても良い。
The meeting attendee at the B base depresses the
相互にネットワーク３を介して接続されているＡ拠点の音声・画像会議装置１ＡとＢ拠点の音声・画像会議装置１Ｂの間で画像データを送信して相互に表示する場合の具体例を、図７を用いて説明する。音声・画像会議装置１Ａの画像入出力部１１にタッチペンで「あ」を描画入力すると、ディスプレイ上には、「あ」が表示される。他方、音声・画像会議装置１Ｂの画像入出力部１１のディスプレイ上には、「Ａ」が入力され、表示されている。音声・画像会議装置１Ａの描画送信ボタン（例えば通信キー１６６）を押し下げると、描画データ「あ」は、音声・画像会議装置１Ｂに送信される。描画データ「あ」を受信した音声・画像会議装置１Ｂは、現在表示している「Ａ」データを記憶装置部１５に保存し、「Ａ」表示を消去した後、「あ」を表示する。
A specific example of a case where image data is transmitted between the voice / image conference apparatus 1A at the A base and the voice / image conference apparatus 1B at the B base, which are connected to each other via the
次いで、音声・画像会議装置１Ａにおいて「あ」の後に「い」を描画すると、ディスプレイ上には、「あい」が表示される。音声・画像会議装置１Ａの描画送信ボタンを押し下げると、描画データ「あい」は、音声・画像会議装置１Ｂに送信される。描画データ「あい」を受信した音声・画像会議装置１Ｂは、「あい」を表示する。 Next, when “I” is drawn after “A” in the audio / video conference apparatus 1A, “Ai” is displayed on the display. When the drawing transmission button of the voice / image conference apparatus 1A is depressed, the drawing data “ai” is transmitted to the voice / image conference apparatus 1B. The audio / video conference apparatus 1B that has received the drawing data “Ai” displays “Ai”.
音声・画像会議装置１Ｂにおいて、「あい」の後に「う」を描画すると、ディスプレイ上には、「あいう」が表示される。音声・画像会議装置１Ｂの描画送信ボタンを押し下げると、描画データ「あいう」は、音声・画像会議装置１Ａに送信される。描画データ「あいう」を受信した音声・画像会議装置１Ａは、「あいう」を表示する。 In the audio / video conference apparatus 1B, when “U” is drawn after “Ai”, “A” is displayed on the display. When the drawing transmission button of the audio / video conference apparatus 1B is depressed, the drawing data “Awa” is transmitted to the audio / image conference apparatus 1A. The audio / video conference apparatus 1A that has received the drawing data “a” displays “a”.
このようにして、Ａ拠点とＢ拠点の会議出席者は、リアルタイムで共通の描画データを共有することができる。 In this way, the attendees at the A site and the B site can share common drawing data in real time.
次に、相互にネットワーク３を介して接続されているＡ拠点の音声・画像会議装置１ＡとＢ拠点の音声・画像会議装置１Ｂとの間で画像データを送信して表示する場合の第２の具体例を、図８を用いて説明する。音声・画像会議装置１Ａの画像入出力部１１にタッチペンで「あ」を描画入力すると、ディスプレイ上には、「あ」が表示される。他方、音声・画像会議装置１Ｂの画像入出力部１１のディスプレイ上には、「Ａ」が入力され、表示されている。音声・画像会議装置１Ａの描画送信ボタン（例えば通信キー１６６）を押し下げると、描画データ「あ」は、音声・画像会議装置１Ｂに送信される。描画データ「あ」を受信した音声・画像会議装置１Ｂは、現在表示している「Ａ」データを記憶装置部１５に保存し、「Ａ」表示を消去した後、「あ」を表示する。
Next, a second case in which image data is transmitted and displayed between the voice / image conference apparatus 1A at the A base and the voice / image conference apparatus 1B at the B base connected to each other via the
ここで、音声・画像会議装置１Ｂにおいて、画像データ「あ」の表示に変えて画像データ「Ａ」表示する場合には、保存データ読出しボタン（例えば、読出しキー１６８）を押し下げると、記憶装置部１５に保存しているデータ例えば「Ａ」を読み出して、ディスプレイ上には、「Ａ」を表示する。音声・画像会議装置１Ｂの描画送信ボタンを押し下げると、描画データ「Ａ」は、音声・画像会議装置１Ａに送信される。描画データ「Ａ」を受信した音声・画像会議装置１Ａは、「あ」を記憶装置部１５などに保存した後、「あ」を消去して「Ａ」を表示する。
Here, in the audio / image conference apparatus 1B, when the image data “A” is displayed instead of the image data “A”, when the stored data read button (for example, the read key 168) is depressed, the storage device unit is displayed. Data “A”, for example “A”, is read out and “A” is displayed on the display. When the drawing transmission button of the audio / video conference apparatus 1B is depressed, the drawing data “A” is transmitted to the audio / image conference apparatus 1A. The audio / video conference apparatus 1A that has received the drawing data “A” saves “a” in the
このようにして、記憶装置部１５から読み出した描画データを自己のディスプレイに表示するとともに、相手拠点のディスプレイに表示することができる。この場合、読み出した描画データに追記して表示および送信することも可能である。記憶装置部１５に保存した描画データを読み出す場合に、読出しキー１６８の操作を繰り返すなどにより、記憶装置部１５の内蔵メモリまたは外部メモリを指定し、保存された描画データを指定して読み出すことができる。
In this manner, the drawing data read from the
次に、音声・画像会議装置１を用いた描画入出力部１１に入力された画像データを他拠点（Ｂ拠点）に配信する動作の例を、図９を用いて説明する。
Next, an example of an operation for distributing the image data input to the drawing input /
図６の処理によって、Ａ拠点の音声・画像会議装置１ＡとＢ拠点の音声・画像会議装置１Ｂが既に接続状態（Ｓ１０）の時、Ａ拠点にいる会議出席者は、操作部１６若しくはリモートコントローラ（遠隔制御器）１７２を使用して、自拠点画像配信設定（Ｓ１１）を行う。その後、Ａ拠点の音声・画像会議装置１Ａは、Ａ拠点の音声・画像会議装置１Ａの描画入出力部１１に入力されている画像データをＢ拠点へ送信する処理を行い（Ｓ１３）、Ａ拠点の画像データをＢ拠点の音声・画像会議装置１Ｂへ送信する（Ｓ１４）。他方、Ｂ拠点の音声・画像会議装置１Ｂは、例えば、音声による画像データ送信の通知を受けると他拠点画像表示設定を行い（Ｓ１２）、Ａ拠点の画像データを通信インタフェース部１４で受信し、Ａ拠点画像受信処理（Ｓ１５）を行い、Ａ拠点の画像を自己の描画入出力部１１に表示（Ｓ１６）する。引き続き、Ａ拠点の音声・画像会議装置１Ａは、Ａ拠点の音声・画像会議 装置１Ａの描画入出力部１１に入力されている画像データをＢ拠点へ送信する処理（Ｓ１７）を行い、画像データをＢ拠点の音声・画像会議装置１Ｂへ送信する（Ｓ１８）。Ｂ拠点の音声・画像会議装置１Ｂは、Ａ拠点の画像データを通信インタフェース部１４で受信し、Ａ拠点の画像を受信する処理（Ｓ１９）を行い、Ａ拠点の画像を自己の描画入出力部１１に繰り返し表示（Ｓ２０）する。
6, when the voice / image conference apparatus 1A at the A site and the voice / image conference apparatus 1B at the B site are already connected (S10), the conference attendee at the A site can select the
次に、音声・画像会議装置１を用いた音声・画像会議システムにおいて、音声によって通話する状態、すなわち、Ａ拠点の音声入出力部１２１に入力された音声データを他拠点（Ｂ拠点）へ配信する場合と、Ｂ拠点から配信された音声データを受信した後に音声入出力部１２１へ出力する動作例を、図１０を用いて説明する。
Next, in the audio / video conference system using the audio /
Ａ拠点の音声・画像会議装置１ＡとＢ拠点の音声・画像会議装置１Ｂが既に接続状態（Ｓ３０）の時、Ａ拠点の会議出席者の話し声は、音声データとして、音声入出力部１２１に集音され、音声符号部１２２で符号化された後に、主制御部１３へ送出され、Ａ拠点音声送信処理を実行し（Ｓ３１）、音声データをＢ拠点へ送信する（Ｓ３３ａ）。一方、Ｂ拠点では、Ｂ拠点音声送信処理を実行し（Ｓ３２）、音声データをＡ拠点へ送信する（Ｓ３３ｂ）。音声データを通信インタフェース部１４で受信したＢ拠点の音声・画像会議装置１Ｂは、主制御部１３へＡ拠点の音声データを送信し、Ａ拠点音声受信処理を行い（Ｓ３５）、音声復号部１２３へ送信し、符号化された音声データを復号し、音声入出力部１２１で実際の音声レベルで音声出力する（Ｓ３７）。Ａ拠点でも同様に、音声データをＡ拠点の音声・画像会議装置１Ａの通信インタフェース部１４で、Ｂ拠点からの音声データを受信し、主制御部１４へＢ拠点の音声データを送信し、Ｂ拠点音声受信処理を行い（Ｓ３４）、音声復号部１２３へ送信し、符号化された音声データを復号し、音声入出力部１２１で実際の音声レベルで音声出力する（Ｓ３６）。以降、引き続き同様な動作を行い、通話を行う。
When the audio / video conference apparatus 1A at the A site and the audio / video conference apparatus 1B at the B site are already connected (S30), the speech of the conference attendee at the A site is collected in the audio input /
次に、音声・画像会議装置１Ａからの画像データが大量の場合に、音声データを優先して送信し、画像データを分割して送信するようにした動作例を、図１１を用いて説明する。 Next, with reference to FIG. 11, an example of operation in which audio data is preferentially transmitted and image data is divided and transmitted when the amount of image data from the audio / image conference apparatus 1A is large will be described. .
Ａ拠点の音声・画像会議装置１Ａは、自拠点画像配信設定され、Ｂ拠点の音声・画像会議装置１Ｂは、他拠点画像表示設定となっている接続状態（Ｓ５０）で、Ａ拠点の音声・画像会議装置１Ａが自拠点からの画像データを取得した時に、取得した画像データのデータ量がネットワーク３や同じネットワーク３を使用するその他の機器の状態によって予め定められた通信のデータ量の閾値を越えるかどうかを判定する（Ｓ５２）。越えない場合は、そのままＡ拠点の画像を送信する処理を行い（Ｓ５３）、そのままのＡ拠点描画データをＢ拠点へ送信する（Ｓ５４）。Ｂ拠点の音声・画像会議装置１Ｂは、Ａ拠点描画データを受信するとＡ拠点画像受信処理を行い（Ｓ５５）、Ａ拠点の描画データをそのまま描画入出力部１１に表示する（Ｓ５６）。また、Ａ拠点の音声・画像会議装置１Ａは、音声データをＢ拠点へ送信するＡ拠点音声送信処理を行い（Ｓ５７）、音声データをＢ拠点の音声・画像会議装置１Ｂに送信する（Ｓ５８）。
The voice / image conference apparatus 1A at the A site is set to distribute its own site image, and the voice / image conference apparatus 1B at the B site is in the connection state (S50) in which the other site image display setting is set. When the image conferencing apparatus 1A acquires image data from its own base, the data amount of the acquired image data is set to a communication data amount threshold that is predetermined according to the state of the
仮に、ステップ５２において、音声・画像会議装置１Ａからの画像データ量が予め定めた閾値を越えている場合は、音声・画像会議装置１Ａは、Ａ拠点の画像データを閾値以内の大きさに分割する処理を行い（Ｓ５９）、その後、分割した画像データを送信する処理を行い（Ｓ６０）、Ｂ拠点へＡ拠点の分割画像データを送信する（Ｓ６１）。Ａ拠点から分割画像データを受信した音声・画像会議装置１Ｂは、分割されたＡ拠点描画データを受信するとＡ拠点画像受信処理を行い一旦記憶手段に記憶する（Ｓ６２）。また、音声・画像会議装置１Ａは、Ａ拠点の音声データをＢ拠点へ送信する処理を行い（Ｓ６３）、音声データをＢ拠点の音声・画像会議装置１Ｂに送信する（Ｓ６４）。音声データを受信した音声・画像会議装置１Ｂは、主制御部１３へＡ拠点の音声データを送信し、Ａ拠点音声受信処理を行い（Ｓ６５）、音声復号部１２３へ送信し、符号化された音声データを復号し、音声入出力部１２１で実際の音声レベルで音声出力する（Ｓ６６）。その後、音声・画像会議装置１Ａは、ステップＳ５９で分割した画像データの残りの分割送信処理を行い（Ｓ６７）、Ａ拠点分割画像データをＢ拠点に送信する（Ｓ６８）。音声・画像会議装置１Ｂは、主制御部１３へＡ拠点の分割画像データを送信し、Ａ拠点画像受信処理を行い（Ｓ６９）、前回受信し記憶手段に記憶している画像データと今回受信した画像データを合成して、Ａ拠点画像データを作成し、画像入出力部１１へ表示する（Ｓ７０）。本例は、画像データを２分割して送信する例を示しているが、ネットワーク３や同じネットワーク３を使用するその他の機器の状態により３分割以上としても良い。
If, in step 52, the amount of image data from the audio / image conference apparatus 1A exceeds a predetermined threshold, the audio / image conference apparatus 1A divides the image data at the site A into a size within the threshold. (S59), and thereafter, the process of transmitting the divided image data is performed (S60), and the divided image data of the A base is transmitted to the B base (S61). Upon receiving the divided image data from the A site, the audio / video conference apparatus 1B receives the divided A site drawing data, performs the A site image reception process, and temporarily stores it in the storage means (S62). Further, the audio / video conference apparatus 1A performs a process of transmitting the audio data of the A base to the B base (S63), and transmits the audio data to the audio / video conference apparatus 1B of the B base (S64). The audio / video conference apparatus 1B that has received the audio data transmits the A site audio data to the
次に、音声・画像会議装置に他の外部機器から記憶装置に格納されている会議データの要求があった場合の動作例を、図１２を用いて説明する。 Next, an operation example in the case where there is a request for conference data stored in the storage device from another external device to the audio / video conference apparatus will be described with reference to FIG.
外部機器５は、専用装置でもパーソナルコンピュータでもよい。外部機器５が、ｗｅｂブラウザを起動し（Ｓ８１）、Ａ拠点の音声・画像会議装置１ＡのＩＰアドレスを指定し（Ｓ８２）、音声・画像会議装置１Ａへ記憶装置部に格納している情報要求を送信する（Ｓ８３）。音声・画像会議装置１Ａは、外部機器５からの情報要求Ｓ８３を受信すると、記憶装置部１５に格納している情報を含んだ応答を外部装置５へ送信する（Ｓ８４）。この応答に含まれる情報には、Ａ拠点の音声・画像会議装置１Ａの記憶装置部１５が格納している会議データの一覧が含まれている。外部装置５のｗｅｂブラウザで必要な会議データを指定すると（Ｓ８５）、Ａ拠点の音声・画像会議装置１Ａへ指定した会議データ要求を送信する（Ｓ８６）。Ａ拠点の音声・画像会議装置１Ａは、記憶装置部１５に格納している会議データから指定された会議データを読出し、この会議データを含んだ応答を外部機器へ送信する（Ｓ８７）。
The
以上のように、本発明によれば、離れた拠点間で電子黒板の入力情報を共有化すること、また、リアルタイムの音声通信をすることにより、効率的な会議を行うことができる。 As described above, according to the present invention, it is possible to perform an efficient conference by sharing input information on the electronic blackboard between remote bases and performing real-time voice communication.
また、会議中の音声データ、電子黒板上の描画データを記憶装置部１５に記憶することで、外部装置５から会議データを取得することができ、離れた拠点間の会議出席者の後々の誤解を少なくすることできる。
Further, by storing the audio data during the meeting and the drawing data on the electronic blackboard in the
１：音声・画像会議装置
３：ネットワーク
５：外部装置
１１：描画入出力部
１２：音声処理部
１２１：音声入出力部
１２２：音声符号部
１２３：音声復号部
１３：主制御部
１３１：描画制御
１３２：画像データ判定・分割
１３３：音声データ・画像データ送出制御
１３４：音声データ・画像データ分離（判別）
１３５：会議データ記憶制御
１３６：閾値設定
１３７：画像データ退避記憶
１４：通信インタフェース部
１５：記憶装置部
１６：操作部
１６１：表示器
１６２：ダイヤルキー
１６３：矢印キー
１６４：設定キー
１６５：機能キー
１６６：通信キー
１６７：保存・印刷キー
１６８：読出しキー
１７：遠隔制御部
１７１：リモートコントローラＩＦ部
１７２：リモートコントローラ（遠隔制御器）
１８：プリンタ
1: audio / video conference device 3: network 5: external device 11: drawing input / output unit 12: audio processing unit 121: audio input / output unit 122: audio encoding unit 123: audio decoding unit 13: main control unit 131: drawing control 132: Image data determination / division 133: Audio data / image data transmission control 134: Audio data / image data separation (discrimination)
135: Conference data storage control 136: Threshold setting 137: Image data saving storage 14: Communication interface unit 15: Storage unit 16: Operation unit 161: Display 162: Dial key 163: Arrow key 164: Setting key 165: Function key 166: Communication key 167: Save / print key 168: Read key 17: Remote control unit 171: Remote controller IF unit 172: Remote controller (remote controller)
18: Printer
Claims (4)
画像データを書込み可能な描画画面と、
前記描画画面上に直接入力される画像データを描画画面上に描画するとともに、前記ネットワークを介して入力される画像データを描画画面上に描画する描画制御手段と、
話者が発する音声を集音した音声データを符号化して前記ネットワークへ出力し、前記ネットワークから入力される音声データを復号化して音声を出力する音声処理手段と、
前記描画画面に描画された画像データと前記符号化された音声データと前記ネットワークから入力された音声データを一組にして、記憶手段に保存する会議データ記憶制御手段と、
前記音声データと画像データをネットワークへ送信する音声データ・画像データ送出制御手段と、
前記ネットワークから送信されてきた音声データと画像データを受信し、音声データを前記音声処理部へ供給し画像データを前記描画制御手段へ供給する音声データ・画像データ判別手段と
を具備する
ことを特徴とする音声・画像会議装置。 An audio / video conference apparatus that constitutes an audio / video conference system in which a plurality of audio / video conference apparatuses are connected via a network, and audio and images are shared by the plurality of audio / image conference apparatuses,
A drawing screen to which image data can be written;
A drawing control means for drawing image data input directly on the drawing screen on the drawing screen and drawing image data input via the network on the drawing screen;
Voice processing means for encoding voice data obtained by collecting voice produced by a speaker and outputting the voice data to the network; decoding voice data inputted from the network; and outputting voice;
Conference data storage control means for storing the image data drawn on the drawing screen, the encoded audio data, and the audio data input from the network into a storage means;
Audio data / image data transmission control means for transmitting the audio data and image data to a network;
Audio data / image data discriminating means for receiving audio data and image data transmitted from the network, supplying audio data to the audio processing unit, and supplying image data to the drawing control means; Voice / video conferencing equipment.
ことを特徴とする請求項１記載の音声・画像会議装置。 When the conference data storage control unit receives a request from an external device to distribute conference data that is a set of image data and audio data stored in the storage unit, the conference data storage control unit reads and distributes the conference data from the storage unit The voice / image conference apparatus according to claim 1, wherein
ことを特徴とする請求項１記載の音声・画像会議装置。 2. The voice / voice according to claim 1, wherein the means for collecting the speaker voice is a means for removing other noise by using a plurality of sound collectors and determining the direction of the speaker. Image conferencing equipment.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2007151890A JP2008306475A (en) | 2007-06-07 | 2007-06-07 | Voice and image conference device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2007151890A JP2008306475A (en) | 2007-06-07 | 2007-06-07 | Voice and image conference device |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2008306475A true JP2008306475A (en) | 2008-12-18 |
Family
ID=40234798
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2007151890A Pending JP2008306475A (en) | 2007-06-07 | 2007-06-07 | Voice and image conference device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2008306475A (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011019032A (en) * | 2009-07-08 | 2011-01-27 | Nec Corp | Communication playback system, communication playback method, and program |
| WO2013128827A1 (en) | 2012-02-27 | 2013-09-06 | Ｎｅｃインフロンティア株式会社 | Electronic conference system, bandwidth management method and storage medium in which bandwidth management program is stored |
| JP2020042719A (en) * | 2018-09-13 | 2020-03-19 | 京セラドキュメントソリューションズ株式会社 | Print job transmission device, print job transmission program, and printing system |
-
2007
- 2007-06-07 JP JP2007151890A patent/JP2008306475A/en active Pending
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011019032A (en) * | 2009-07-08 | 2011-01-27 | Nec Corp | Communication playback system, communication playback method, and program |
| WO2013128827A1 (en) | 2012-02-27 | 2013-09-06 | Ｎｅｃインフロンティア株式会社 | Electronic conference system, bandwidth management method and storage medium in which bandwidth management program is stored |
| US9049342B2 (en) | 2012-02-27 | 2015-06-02 | Nec Platforms, Ltd. | Electronic conference system, band management system, and storage medium having band management program stored therein |
| JP2020042719A (en) * | 2018-09-13 | 2020-03-19 | 京セラドキュメントソリューションズ株式会社 | Print job transmission device, print job transmission program, and printing system |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4363166B2 (en) | Communication service providing system, server, service providing method, and service providing program | |
| JP4372558B2 (en) | Telecommunications system | |
| US7508413B2 (en) | Video conference data transmission device and data transmission method adapted for small display of mobile terminals | |
| ES2327288T3 (en) | SYSTEM, METHOD AND NODE TO LIMIT THE NUMBER OF AUDIO FLOWS IN A TELECONFERENCE. | |
| JP4994646B2 (en) | Communication terminal, communication system, and communication terminal display method | |
| CN104427293B (en) | A kind of method, apparatus and video terminal for establishing video conference interface | |
| JP6451227B2 (en) | Information processing apparatus, information processing system, program, and recording medium | |
| EP3131257B1 (en) | Program, information processing apparatus, and information processing system for use in an electronic conference system | |
| JP6372156B2 (en) | Connection control system, communication terminal, communication system, program, and connection control method | |
| JP3638146B2 (en) | Video conference system, terminal used therefor, connection control method, and connection control program | |
| US20100066806A1 (en) | Internet video image producing method | |
| JP7135766B2 (en) | Communication system, program, terminal device | |
| JP2011082694A (en) | System and device for communication conference | |
| GB2356106A (en) | Multimedia client-server system | |
| JP2008306475A (en) | Voice and image conference device | |
| JP2008294564A (en) | Presence exchange terminal, presence exchange method and presence exchange program | |
| KR20020050903A (en) | Education, Broad Casting, Multi-User Image Conference and Chatting Service Provision Method Using Internet | |
| JP5234744B2 (en) | Video conference apparatus, video conference method, video conference program, and recording medium | |
| JP6500366B2 (en) | Management device, terminal device, transmission system, transmission method and program | |
| JP6610076B2 (en) | Information processing apparatus, information processing system, program, and recording medium | |
| JP2003339034A (en) | Network conference system, network conference method, and network conference program | |
| JP3107893B2 (en) | Teleconferencing system | |
| US20230100767A1 (en) | Information processing device, information processing method, and non-transitory computer readable medium | |
| JP4768578B2 (en) | Video conference system and control method in video conference system | |
| KR101145220B1 (en) | VIDEO CONFERENCE APPARATUS BASED ON VoIPVoice over Internet Protocol AND CONTROL METHOD THEREOF |