JP2009188974A

JP2009188974A - Ｉｐ通信装置

Info

Publication number: JP2009188974A
Application number: JP2008197597A
Authority: JP
Inventors: Akira Harada; 旭原田; Hideki Iizuka; 英樹飯塚
Original assignee: Panasonic Corp
Current assignee: Panasonic Corp
Priority date: 2008-01-11
Filing date: 2008-07-31
Publication date: 2009-08-20

Abstract

【課題】通信相手としての拠点の数が増えても記録データ量が削減可能なＩＰ通信装置を提供すること。
【解決手段】電話音声動画像記録システムで用いられるＩＰ通信装置は、ＩＰパケットを送受信するＩＰパケット送受信Ｉ／Ｆを備え、前記ＩＰパケットの発信元であるＩＰアドレスを取得するＩＰアドレス取得部と、前記ＩＰパケット中のデータを用いて信号判定を行う信号判定部と、前記信号判定部による判定結果に基づいて、前記データを前記ＩＰアドレスと関連付けて記録する記録部と、前記記録部を制御する記録制御部とを備える。
【選択図】図１

Description

本発明は、電話音声動画像記録システムで用いられるＩＰ通信装置に関する。

近年、ＶｏＩＰが企業の内線電話として急速に普及しつつあり、そのＩＰ電話の特性を活かし、さまざまな会議システムが企業に導入されている。中でも、テレビ会議システムは、今後急速に発展すると予想されている。通常の会議に限らず、テレビ会議やＷｅｂ会議、音声会議等であっても、議事を記録すること及び記録した議事を再生することは一般的に行われる。このため、テレビ会議や音声会議を音声や動画像で保存し、議事録とする提案がされている（特許文献１参照）。

特開２００４−１５３５９号公報

しかし、複数拠点間で会議が行われる場合、その拠点数に応じた音声動画データを記録することになるため、議事録としてのデータ量が大きくなってしまう。また、複数拠点間で行われた会議をまとめて記録した場合、記録したデータを再生した際、各発言がどの拠点からのものか容易に特定できない。なお、当該技術は、会議システムのみでなく、音声や動画像の記録及び再生を行う電話機器やＩＰ機能を搭載した電子機器への応用が可能である。

本発明の目的は、通信相手としての拠点の数が増えても記録データ量が削減可能なＩＰ通信装置を提供することである。

本発明は、電話音声動画像記録システムで用いられるＩＰ通信装置であって、ＩＰパケットを送受信するＩＰパケット送受信Ｉ／Ｆを備え、ＩＰパケットの発信元であるＩＰアドレスを取得するＩＰアドレス取得部と、前記ＩＰパケット中のデータを用いて信号判定を行う信号判定部と、前記信号判定部による判定結果に基づいて、前記データを前記ＩＰアドレスと関連付けて記憶する記録部と、前記記録部への記録を制御する記録制御部と、を備えたＩＰ通信装置を提供する。

また、上記ＩＰ通信装置では、前記信号判定部は、有音無音判定を行う。

また、上記ＩＰ通信装置では、前記信号判定部は、画像動き判定を行う。

また、上記ＩＰ通信装置では、前記信号判定部は、繰り返し判定を行う。

また、上記ＩＰ通信装置では、前記信号判定部は、前記有音無音判定、前記画像動き判定及び前記繰り返し判定のいずれかを合わせ持つ。

また、上記ＩＰ通信装置では、前記信号判定部は、前記ＩＰ通信装置に具備されるマイクから入力される音声データを用いて前記信号判定を行う。

また、上記ＩＰ通信装置は、前記信号判定部は、前記ＩＰ通信装置に具備されるカメラから入力される動画像データを用いて前記信号判定を行う。

また、上記ＩＰ通信装置では、前記有音無音判定を行う前記信号判定部は、前記ＩＰパケット中のデータ、及びマイクから入力された音声データのそれぞれが、有音か無音かを判定し、前記記録制御部は、所定時間以上の無音部に相当する前記ＩＰパケット中のデータ及び前記音声データを前記記録部に記録しないように制御する。この構成によれば、無音と判定されたデータが記録部に記録されないため、記録データ量を削減することができる。

また、上記ＩＰ通信装置では、前記画像動き判定を行う前記信号判定部は、前記ＩＰパケット中のデータ、及びカメラから入力された動画像データのそれぞれについて、画像動きの有無を判定し、前記記録制御部は、所定時間以上の無動作部に相当する前記ＩＰパケット中のデータ及び前記動画像データを前記記録部に記録しないように制御する。この構成によれば、画像動き無しと判定されたデータが記録部に記録されないため、記録データ量を削減することができる。

また、上記ＩＰ通信装置は、前記繰り返し判定を行う前記信号判定部は、前記ＩＰパケット中のデータ、及びマイクから入力された音声データのそれぞれが、繰り返されたかどうかを判定し、前記記録制御部は、前記ＩＰパケット中のデータ及び前記音声データで繰り返し元となる部分のみを記録し、前記繰り返し元以降の繰り返し部分は記録しないように制御する。この構成によれば、繰り返しと判定された音声データが記録部に記録されないため、記録データ量を削減することができる。

また、上記ＩＰ通信装置では、前記繰り返し判定を行う前記信号判定部は、前記ＩＰパケット中のデータ、及びカメラから入力された動画像データのそれぞれが、繰り返されたかどうかを判定し、前記記録制御部は、前記ＩＰパケット中のデータ及び前記動画像データで繰り返し元となる部分のみを記録し、前記繰り返し元以降の繰り返し部分は記録しないように制御する。この構成によれば、繰り返しと判定された動画像データが記録部に記録されないため、記録データ量を削減することができる。

また、上記ＩＰ通信装置では、当該ＩＰ通信装置のユーザが、前記ＩＰパケット中のデータ、並びに、音声データ及び動画像データの記録に関する設定を行うための操作部を備える。

また、上記ＩＰ通信装置は、前記操作部を用いた前記設定によって、指定したＩＰアドレスの前記ＩＰパケット中のデータ、並びに、前記音声データ及び前記動画像データの少なくともいずれか一方を前記記録部に記録するよう設定することができる。

また、上記ＩＰ通信装置では、前記ＩＰパケット中のデータ、及び音声データを文字情報に変換する音声認識部を備え、前記記録制御部は、文字情報を前記記録部に記録することができる。

また、上記ＩＰ通信装置では、前記ＩＰパケット中のデータ、及び動画像データから、人物と背景の境を検出する人物エッジ検出部を備え、前記記録制御部は、人物以外の背景部分のデータをダミーデータで上書きして前記記録部に記録する。この構成によれば、動画像の再生時に表示させたくない背景をダミーデータとして記録することができる。また、ダミーデータは元の背景データと比較してデータ量が小さいため、記録データ量を削減することができる。また、発言者の特定が視覚的に容易となる。

また、上記ＩＰ通信装置は、前記記録制御部は、前記記録部にデータを記録する際の時刻情報を取得するための時刻取得部を有する。この構成によれば、記録する音声データ及び動画像データに時刻情報を付与して記録することができる。

また、上記ＩＰ通信装置は、前記記録部に記録されたデータを再生する再生部と、前記再生部による再生の制御を行う再生制御部を備える。この構成によれば、記録した音声データ及び動画像データを再生することができる。

また、上記ＩＰ通信装置は、前記再生部によって再生された音声データ及び動画像データを出力する出力部を備える。

また、上記ＩＰ通信装置は、前記出力部は、前記再生部によって再生された音声データ及び動画像データをＩＰパケットに変換して、ＩＰパケットデータとして出力することができる。

また、上記ＩＰ通信装置は、前記記録部に記録された文字情報を表示する文字情報表示部を備える。この構成によれば、記録データを再生中の画面に文字情報を表示されるため、発言内容が視覚的に理解しやすい。

また、上記ＩＰ通信装置は、前記記録部に記録された文字情報を他の言語に翻訳する翻訳部を備え、前記文字情報表示部は、前記翻訳部によって翻訳された文字情報を表示する。

本発明に係るＩＰ通信装置によれば、通信相手としての拠点の数が増えても記録データ量を削減することができる。また、復号化したデータとＩＰアドレス抽出部が抽出したＩＰアドレスとを関連付けて記録し、かつ、入力部に入力されたデータと自ＩＰアドレス取得部が取得したＩＰアドレスとを関連付けて記録部に記録するため、記録データの再生時に発言者の拠点の特定が容易になる。

以下、本発明の実施形態について、図面を参照して説明する。

（図１の説明）
図１は、ＩＰ電話音声動画像記録システムで用いられるＩＰ通信装置を示すブロック図である。ＩＰ電話音声動画像記録システムで用いられる図１に示すＩＰ通信装置１０１は、ＩＰパケット送受信Ｉ／Ｆ１０２と、ＩＰアドレス取得部１０３と、信号判定部１０４と、記録部１０５を有する記録制御部１０６とを備える。

ＩＰアドレス取得部１０３は、ＩＰ通信装置１０１に割り当てられたＩＰアドレスを取得する。信号判定部１０４には、ＩＰパケットの中の音声データ及び動画像データがＩＰパケット送受信Ｉ／Ｆ１０２から入力される。記録制御部１０６は、信号判定部１０４による判定結果に基づいて、ＩＰパケット送受信Ｉ／Ｆ１０２から受信した音声データ及び動画像データと相手先のＩＰアドレスとを関連付けて記録部１０５に記録する。

（図２の説明）
図２は、図１の信号判定部１０４を詳細に書いた図である。信号判定部１０４は、有音無音判定部２０１、画像動き判定部２０２及び繰り返し判定部２０３の少なくともいずれか１つを備える。

有音無音判定部２０１は、受信されたデータが音声データであった場合に有音無音判定を行う。このため、一定時間以上の無音部に相当するその拠点の音声データを記録部１０５で記録を行わない。画像動き判定部２０２は、受信されたデータが動画像データであった場合には画像動き有無判定を行う。このため、一定時間以上の無動作部に相当するその拠点の動画像データを記録部１０５に記録を行わない。繰り返し判定部２０３は、受信されたデータの繰り返し判定を行う。このため、一定時間以上の繰り返し発言に相当するその拠点の音声データを記録部１０５に記録を行わない。また、一定時間以上の繰り返し動作に相当するその拠点の動画像データを記録部１０５に記録を行わない。

（第一の実施形態）
図３は、第１の実施形態のＩＰ電話音声動画像記録システムで用いられるＩＰ通信装置を示すブロック図である。第１の実施形態のＩＰ電話音声動画像記録システムで用いられる図３に示すＩＰ通信装置１０１は、ＩＰパケット送受信Ｉ／Ｆ１０２とＩＰアドレス取得部１０３と、有音無音判定部２０１及び画像動き判定部２０２及び繰り返し判定部２０３を有する信号判定部１０４と、音声認識部３０４と、人物エッジ検出部３０５と、操作部３０３と、時刻取得部３０６及び記録部１０５を有する記録制御部１０６とを備える。また、信号判定部１０４には、マイクＩ／Ｆ３０１及びカメラＩ／Ｆ３０２が接続されている。図３において、図１と図２とに共通する構成要素には同じ参照符号が付されており、図１と図２とに共通する構成要素についての説明は省略する。

操作部３０３は、ＩＰ通信端末１０１のユーザが音声データ及び動画像データのいずれか一方又は両方を保存するかの選択を行うためのものである。信号判定部１０４が有する有音無音判定部２０１は、マイクＩ／Ｆ３０１から入力された音声データ及びＩＰパケット送受信Ｉ／Ｆ１０２から受信された音声データを判定する。有音無音判定部２０１で判定された音声で有音とみなされた場合は、さらに繰り返し判定部に入力され、繰り返し発言であるかどうかを判定する。信号判定部１０４は、有音でかつ繰り返し元となる音声データのみを記録し、繰り返し元以降の繰り返し部分は記録しないよう記録制御部１０６に指示する。

また、信号判定部１０４が有する画像動き判定部２０２は、カメラＩ／Ｆ３０２から入力された動画像データ及びＩＰパケット送受信Ｉ／Ｆ１０２から受信された動画像データを判定する。画像動き判定部２０２で判定された動画像で動きありとみなされた場合は、さらに繰り返し判定部に入力され、繰り返し動作であるかどうかを判定する。信号判定部１０４は、動作ありでかつ繰り返し元となる動画像データのみを記録し、繰り返し元以降の繰り返し部分は記録しないよう記録制御部１０６に指示する。

音声認識部３０４は、音声データを認識して文字情報に変換する。当該文字情報は、記録制御部１０６によって記録部１０５に記録される。人物エッジ検出部３０５は、動画像データから人物と背景の境目を検出する。当該動画像データは記録制御部１０６によって人物以外の背景部分のデータがダミーデータに上書きされ、記録部１０５に記録される。記録制御部１０６が有する時刻取得部３０６は、記録部１０５に音声データ及び動画像データが記録される時の時刻情報を取得する。

本実施形態によれば、繰り返し部分の音声データ及び動画像データが記録されず、人物以外の背景部分のデータがダミーデータによって上書きされる。したがって、記録部１０５に記録されるデータ量をさらに削減することができる。また、記録データを再生した際に、発言者の特定が視覚的に容易となる。さらに、ＩＰ電話会議に参加している拠点名（ＩＰアドレス）、発言者名や記録時刻情報、議事再生中の音声データ及び動画像データに沿う文字情報が記録されるため、記録データを再生した際に、視覚的に発言者の発言内容の理解が容易となる。

（第二の実施形態）
図４は、第２の実施形態のＩＰ電話音声動画像記録システムで用いられるＩＰ通信装置を示すブロック図である。第２の実施形態のＩＰ電話音声動画像記録システムで用いられる図４に示すＩＰ通信装置１０１は、図３に示すＩＰ通信装置１０１が備える構成要素からマイクＩ／Ｆ３０１とカメラＩ／Ｆ３０２を取り除いたものである。マイクＩ／Ｆ３０１やカメラＩ／Ｆ３０２を具備しないサーバーのようなＩＰ通信装置での実施では、音声データ及び動画像データは全てＩＰパケット送受信Ｉ／Ｆ１０２からの受信データとなる。図４において、図３に共通する構成要素には同じ参照符号が付されており、図３に共通する構成要素についての説明は省略する。

（第三の実施形態）
図５は、第３の実施形態のＩＰ電話音声動画像記録システムで用いられるＩＰ通信装置を示すブロック図である。第３の実施形態のＩＰ電話音声動画像記録システムで用いられる図５に示すＩＰ通信装置１０１は、図４に示すＩＰ通信装置１０１が備える構成要素に加え、再生部５０１と、再生制御部５０２と、出力部５０３と、文字情報表示部５０４と、翻訳部５０５とをさらに備える。出力部５０３にはモニタＩ／Ｆ５０６及びスピーカＩ／Ｆ５０７が接続されており、文字情報表示部５０４にはモニタＩ／Ｆ５０６が接続されている。

再生部５０１は、記録部１０５に記録されている音声データ及び動画像データを再生する。再生制御部５０２は、電話応答における呼応の発言を取り除いた音声データ、及び背景部分に上書きされたダミーデータを取り除いた動画像データを再生するよう制御する。出力部５０３は、再生制御部５０２によって再生制御された音声データを処理してスピーカＩ／Ｆ５０７から音声を出力し、再生制御部５０２によって再生制御された動画像データを処理してモニタＩ／Ｆ５０６に動画像を表示する。文字情報表示部５０４は、ＩＰ電話会議の議事録の音声データ及び動画像データに応じた文字情報をモニタＩ／Ｆ５０６に表示する。また、文字情報をモニタＩ／Ｆ５０６に表示する際、翻訳部５０５は、設定に応じてその文字情報を他の言語に翻訳し、文字情報表示部５０４は、翻訳された文字情報をモニタＩ／Ｆ５０６に表示する。

上記説明した第１〜第３の実施形態のＩＰ電話音声動画像記録再生システムで用いられるＩＰ通信装置は、ハードウェアでも、ソフトウェアのどちらで実現しても良い。そして、このソフトウェアをソフトウェアダウンロード等により配布しても良い。また、このソフトウェアをＣＤ−ＲＯＭなどの記録媒体に記録して流布しても良い。

本発明は、上記実施形態に限定されることなく種々の変更が可能であり、それらも本発明の範囲内に包含されるものであることは言うまでもない。

本発明に係るＩＰ通信装置は、ＩＰ電話端末を用いた会議システムとして有用であるだけでなく、ＩＰ電話端末やサーバーにおける通話音声及び通話動画像の記録再生システム等としても有用である。

本特許のＩＰ通信装置の特徴示すブロック構成図本特許の信号判定部の特徴を示すブロック図第１の実施形態のＩＰ電話音声動画像記録再生システムで用いられるＩＰ通信装置を示すブロック図第２の実施形態のＩＰ電話音声動画像記録再生システムで用いられるＩＰ通信装置を示すブロック図第３の実施形態のＩＰ電話音声動画像記録再生システムで用いられるＩＰ通信装置を示すブロック図

符号の説明

１０１ＩＰ通信装置
１０２ＩＰパケット送受信Ｉ／Ｆ
１０３ＩＰアドレス取得部
１０４信号判定部
１０５記録部
１０６記録制御部
２０１有音無音判定部
２０２画像動き判定部
２０３繰り返し判定部
３０１マイクＩ／Ｆ
３０２カメラＩ／Ｆ
３０３操作部
３０４音声認識部
３０５人物エッジ検出部
３０６時刻取得部
５０１再生部
５０２再生制御部
５０３出力部
５０４文字情報表示部
５０５翻訳部
５０６モニタＩ／Ｆ
５０７スピーカＩ／Ｆ

Claims

音声動画像記録システムで用いられるＩＰ通信装置であって、
ＩＰパケットを送受信するＩＰパケット送受信Ｉ／Ｆを備え、前記ＩＰパケットの発信元であるＩＰアドレスを取得するＩＰアドレス取得部と、
前記ＩＰパケット中のデータを用いて信号判定を行う信号判定部と、
前記信号判定部による判定結果に基づいて、前記データを前記ＩＰアドレスと関連付けて記憶する記録部と、
前記記録部への記録を制御する記録制御部と、
を備えたことを特徴とするＩＰ通信装置。
請求項１に記載のＩＰ通信装置であって、
前記信号判定部は、有音無音判定を行うことを特徴とするＩＰ通信装置。
請求項１に記載のＩＰ通信装置であって、
前記信号判定部は、画像動き判定を行うことを特徴とするＩＰ通信装置。
請求項１に記載のＩＰ通信装置であって、
前記信号判定部は、繰り返し判定を行うことを特徴とするＩＰ通信装置。
請求項２〜４のいずれか一項に記載のＩＰ通信装置であって、
前記信号判定部は、請求項２〜４のいずれかの前記信号判定を合わせ持つことを特徴とするＩＰ通信装置。
請求項１〜５のいずれか一項に記載のＩＰ通信装置であって、
前記信号判定部は、前記ＩＰ通信装置に具備されるマイクから入力される音声データを用いて前記信号判定を行うことを特徴とするＩＰ通信装置。
請求項１〜５のいずれか一項に記載のＩＰ通信装置であって、
前記信号判定部は、前記ＩＰ通信装置に具備されるカメラから入力される動画像データを用いて前記信号判定を行うことを特徴とするＩＰ通信装置。
請求項２に記載のＩＰ通信装置であって、
前記有音無音判定を行う前記信号判定部は、前記ＩＰパケット中のデータ、及びマイクから入力された音声データのそれぞれが、有音か無音かを判定し、
前記記録制御部は、所定時間以上の無音部に相当する前記ＩＰパケット中のデータ及び前記音声データを前記記録部に記録しないよう制御することを特徴とするＩＰ通信装置。
請求項３に記載のＩＰ通信装置であって、
前記画像動き判定を行う前記信号判定部は、前記ＩＰパケット中のデータ、及びカメラから入力された動画像データのそれぞれについて、画像動きの有無を判定し、
前記記録制御部は、所定時間以上の無動作部に相当する前記ＩＰパケット中のデータ及び前記動画像データを前記記録部に記録しないよう制御することを特徴とするＩＰ通信装置。
請求項４に記載のＩＰ通信装置であって、
前記繰り返し判定を行う前記信号判定部は、前記ＩＰパケット中のデータ、及びマイクから入力された音声データのそれぞれが、繰り返されたかどうかを判定し、
前記記録制御部は、前記ＩＰパケット中のデータ及び前記音声データで繰り返し元となる部分のみを記録し、前記繰り返し元以降の繰り返し部分は記録しないことを特徴とするＩＰ通信装置。
請求項４に記載のＩＰ通信装置であって、
前記繰り返し判定を行う前記信号判定部は、前記ＩＰパケット中のデータ、及びカメラから入力された動画像データのそれぞれが、繰り返されたかどうかを判定し、
前記記録制御部は、前記ＩＰパケット中のデータ及び前記動画像データで繰り返し元となる部分のみを記録し、前記繰り返し元以降の繰り返し部分は記録しないことを特徴とするＩＰ通信装置。
請求項１〜１１のいずれか一項に記載のＩＰ通信装置であって、
当該ＩＰ通信装置のユーザが、前記ＩＰパケット中のデータ、並びに、音声データ及び動画像データの、記録に関する設定及び信号判定に関する設定を行うための操作部を備えたことを特徴とするＩＰ通信装置。
請求項１２に記載のＩＰ通信装置であって、
前記操作部を用いた前記設定によって、指定したＩＰアドレスの前記ＩＰパケット中のデータ、並びに、前記音声データ及び前記動画像データの少なくともいずれか一方を前記記録部に記録するよう設定することを特徴とするＩＰ通信装置。
請求項１〜１３のいずれか一項に記載のＩＰ通信装置であって、
前記ＩＰパケット中のデータ、及び音声データを文字情報に変換する音声認識部を備え、
前記記録制御部は、文字情報を前記記録部に記録することを特徴とするＩＰ通信装置。
請求項１〜１４のいずれか一項に記載のＩＰ通信装置であって、
前記ＩＰパケット中のデータ、及び動画像データから、人物と背景の境を検出する人物エッジ検出部を備え、
前記記録制御部は、人物以外の背景部分のデータをダミーデータで上書きして前記記録部に記録することを特徴とするＩＰ通信装置。
請求項１〜１５のいずれか一項に記載のＩＰ通信装置であって、
前記記録制御部は、前記記録部にデータを記録する際の時刻情報を取得するための時刻取得部を有し、さらに前記取得した時刻情報も合わせて記録することを特徴とするＩＰ通信装置。
請求項１〜１６のいずれか一項に記載のＩＰ通信装置であって、
前記記録部に記録されたデータを再生する再生部と、
前記再生部による再生の制御を行う再生制御部と、
を備えたことを特徴とするＩＰ通信装置。
請求項１７に記載のＩＰ通信装置であって、
前記再生部によって再生された音声データ及び動画像データを出力する出力部を備えたことを特徴とするＩＰ通信装置。
請求項１７に記載のＩＰ通信装置であって、
前記出力部は、前記再生部によって再生された音声データ及び動画像データをＩＰパケットに変換して、ＩＰパケットデータとして出力することを特徴とするＩＰ通信装置。
請求項１７〜１９のいずれか一項に記載のＩＰ通信装置であって、
前記記録部に記録された文字情報を表示する文字情報表示部を備えたことを特徴とするＩＰ通信装置。
請求項２０に記載のＩＰ通信装置であって、
前記記録部に記録された文字情報を他の言語に翻訳する翻訳部を備え、
前記文字情報表示部は、前記翻訳部によって翻訳された文字情報を表示することを特徴とするＩＰ通信装置。