JP4462766B2 - Universal quality measurement system for multimedia and other signals - Google Patents

Universal quality measurement system for multimedia and other signals Download PDF

Info

Publication number
JP4462766B2
JP4462766B2 JP2000620743A JP2000620743A JP4462766B2 JP 4462766 B2 JP4462766 B2 JP 4462766B2 JP 2000620743 A JP2000620743 A JP 2000620743A JP 2000620743 A JP2000620743 A JP 2000620743A JP 4462766 B2 JP4462766 B2 JP 4462766B2
Authority
JP
Japan
Prior art keywords
test signal
quality
signal
eut
network
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2000620743A
Other languages
Japanese (ja)
Other versions
JP2003500972A (en
Inventor
マー・ウェイ
リー・マーティン
ホマユンファー・カンビズ
Original Assignee
アルゴレックス インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by アルゴレックス インコーポレイテッド filed Critical アルゴレックス インコーポレイテッド
Publication of JP2003500972A publication Critical patent/JP2003500972A/en
Application granted granted Critical
Publication of JP4462766B2 publication Critical patent/JP4462766B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/69Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for evaluating synthetic or decoded voice signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/22Arrangements for supervision, monitoring or testing
    • H04M3/2236Quality of speech transmission monitoring
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2207/00Type of exchange or network, i.e. telephonic medium, in which the telephonic communication takes place
    • H04M2207/18Type of exchange or network, i.e. telephonic medium, in which the telephonic communication takes place wireless networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2207/00Type of exchange or network, i.e. telephonic medium, in which the telephonic communication takes place
    • H04M2207/20Type of exchange or network, i.e. telephonic medium, in which the telephonic communication takes place hybrid systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M7/00Arrangements for interconnection between switching centres
    • H04M7/12Arrangements for interconnection between switching centres for working between exchanges having different types of switching equipment, e.g. power-driven and step by step or decimal and non-decimal

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Monitoring And Testing Of Transmission In General (AREA)
  • Mobile Radio Communication Systems (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、信号品質を測定するシステムに関し、より詳細にはネットワークを通じて通信されるマルチメディア信号の品質を測定するシステムに関する。
【0002】
【従来の技術】
声、音声、映像およびマルチメディア情報の通信のための多数の処理および伝送方法が考案されてきた。これらの種類の信号は集合的に「声、音声および映像」(Voice, Audio and Video:VAV)信号と呼ばれる。VAV信号は、受信機へ送信される前に多くの異なる方法で処理することができる。例えば、VAV信号をディジタル化し、圧縮し、キャリア上に変調することができる。次に、受信機は受信した信号を変換して、VAV信号の知覚可能な表現へと戻さなければならない。
【0003】
【発明が解決しようとする課題】
伝統的に、受信されたVAV信号品質は主観的なテストによって評価される。しかし、この種のテストは操作中(in-service)のテスト方法としては実際的ではなく、また、この種のテストは矛盾が無く再現性がある結果をもたらすものではない。VAV通信がセルラー符号分割多重アクセス(CDMA)システムまたは広帯域CDMAシステムの如き非常に複雑な伝達システムに取り入れられる場合には、信号品質の評価はさらに複雑となる。インターネットの如き非決定的環境においてVAV品質の評価を行う際には、それとは異なるが同様に困難な挑戦が存在する。
【0004】
信号対雑音比(S/N)、搬送波対干渉比(C/I)、損失パケット率、およびビット誤り率(BER)等のパラメータを測定することにより信号品質を間接的に評価することが知られている。しかし、これらのパラメータを、受信されたVAV信号品質のユーザによる知覚と関連付けることは困難であり、そのような信号が高度に圧縮されまたは処理されている場合はそれは特に困難である。また、これらのパラメータはある時間にわたってVAV信号品質を正しく正確に反映するために十分に適したものとは言えない。
【0005】
知覚的な会話の品質を推定するアルゴリズムが知られている。例えば、国際電気通信連盟(International Telecommunication Union)の規格P.861は客観的なアルゴリズムであり、それは会話伝送のための平均意見スコア(Mean Opinion Score:MOS)等の質的な数値を自動的に計算するために使用することができる。しかし、これらの種類のテストは、原信号およびテスト信号の両者をテスト機器の種目により静的に分析することを必要とする。よって、実信号を伴うフィールドで品質評価がなされるべきならば、テスト機器はそのハードウェア、ソフトウェアまたはファームウェアにネットワークアーキテクチャおよびプロトコルを取り入れなければならない。しばしば、ネットワークアーキテクチャは利用不能であり、もしくはそれは実行することが困難または高価となる。独占権による制限さえもその実行を不可能とすることがある。
【0006】
上記の点から、使用される伝達技術およびネットワークアクセス技術などのネットワークの動作および構成についての明白な知識を必要とすること無く、受信されたVAV信号品質を評価するための方法および装置が望まれる。また、その方法および装置が品質の実時間または非実時間の自動測定を提供し、それにより例えばインタラクティブなフィールドテストを実行可能とすることも望ましい。加えて、テスト中の機器に容易に接続する多種のVAV信号のための共通なテストプラットフォームが有益であろう。さらに、一方向、他航程(multi-hop)または往復の測定について、信頼性が高く、反復可能であり、容易に理解できる量的品質のサービス測定を提供する方法および装置が望まれる。
【0007】
【課題を解決するための手段】
1つの実施形態においては、本発明は通信機器において、声の信号、音声信号、音声および映像信号、ならびにマルチメディア信号の知覚的品質を測定する方法である。処理されたテスト信号がネットワークを通じて第1の装置から第2の装置へ送られる。次に、処理された信号がテスト中の機器により受信され、その機器は処理されたテスト信号をさらに処理してテスト信号の表現を再生する。次に、再生されたテスト信号が客観的に分析され、再生されたテスト信号を予め記憶されたテスト信号の表現と比較することにより知覚的品質の程度を決定する。
【0008】
別の実施形態においては、本発明は品質測定ユニットであり、それはテスト中の機器に付属して再生されたテスト信号の品質を識別および評価する。テスト信号は、遠隔装置から送られたものと、テスト中の機器から送られたものである。後者の場合、品質測定ユニットは、テスト中の機器およびネットワークと通信するように構成され、それにより品質測定ユニット自体がテスト中の機器により送られたテスト信号の表現を受信する。
【0009】
本発明の方法および装置においては、テスト中の機器が通信を行うネットワークについての明白な知識を伴わずに、受信されたVAV信号の品質が評価されることが理解される。さらに、実時間および非実時間の品質分析が可能であり、多種のVAV信号のための共通のテストプラットフォームを使用する。本発明は、一方向、多航程および往復の測定を含む、異なる多種の量的品質サービス測定に適用可能である。
【0010】
【発明の実施の形態】
1つの実施形態において、図1を参照すると、VAV信号のための品質測定システム10がテスト中の機器16およびネットワーク22との関連において示される。品質測定システム10はローカル品質測定ユニット(Local Quality Measurement Unit:LQMU)12を含む。LQMU12のポート14はテスト中の機器(Equipment Under Test:EUT)16に接続される。1つの例示的実施形態では、EUT16は移動型またはセルラー電話であり、ポート14は例えば「ハンズフリー」または「カーキット」電子端末(図示せず)のセットを使用してEUT16へ電気的に接続される。しかし、本発明は移動型およびセルラー電話への応用に限定されるものではない。
【0011】
EUT16は、それぞれ通信路18および20を通じて、ネットワーク22へ情報を送り、ネットワーク22から情報を受け取る。例えば、セルラー電話の場合、ネットワーク22はワイヤレスネットワーク24を含み、通信路18および20は無線リンクである。また、遠隔基準データ記憶ユニット(Remote Reference Data Storage Unit:RRDSU)26もネットワーク22へ動作可能に接続される。1つの例示的実施形態では、RRDSU26は、例えば留守番電話装置などの基準信号を記録および再生するための装置であり、それはワイヤーラインネットワーク28を通じてワイヤレスネットワーク24へ接続される。ネットワークインターフェースアダプタ(NIA)30が設けられ、RRDSU26から出力された信号をネットワーク28への伝送に適した形態に調整する。同様に、ネットワーク28からRRDSU26へ伝送された信号はNIA30により、RRDSU26が処理するのに適した形態に変換される。
【0012】
1つの実施形態では、ローカル基準データ記憶ユニット(Local Reference Data Storage Unit:LRDSU)32の形態のローカル記憶装置がLQMU12について設けられ、第2のポート34を介してLQMU12に接続される。別の実施形態では、ローカル記憶装置32をLQMU12の内部装置とすることができる。別の実施形態では、電気的または磁気的メモリなどのローカル記憶装置をLQMU12の内部装置とすることができる。LQMU12はEUT16がネットワーク22を通じてRRDSU26から受け取ったテスト信号の品質測定値36を示す。
【0013】
本発明の実施のために要求されるプロトコル、信号法およびネットワーク22の構成についての知識は、EUT16、既存の一装置およびNIA30内に分離される。NIA30は多くの場合において、ネットワーク28の操作者またはエレクトロニクスの配給者により供給される容易に入手可能な装置である。本発明は、ネットワーク22の性質に関する詳細な情報をRRDSU26、LQMU12またはローカル記憶装置32が知っていること、または入手可能であることを必要とすることなく、異なる種類のネットワーク22を収容可能とする。これにより、RRDSU26はNIA30を介してネットワーク22の公共的にまたはユーザがアクセス可能なサービスアクセスポイントに接続することが可能となる。
【0014】
1つの実施形態では、ポート14およびLQMU12はEUT16からの受信されたテスト信号を収集するように構成され、それによりLQMU12はEUT16により受信された信号に応答する。1つの実施形態では、ポート14およびLQMU12は、EUT16を制御して無線リンク18を通じてアップリンク信号を送信するように構成される。また、LQMU12は、受信されたテスト信号を分析してこれらの信号品質の客観的測定を実行するように構成される。1つの実施形態では、LQMU12内に組み込まれたアルゴリズムは1つまたはそれ以上の種類のVAV信号について構成可能かつ選択可能である。
【0015】
RRDSU26は例えば記録装置および再生装置(図1では分けて図示はしていない)を含む記憶ユニットである。記録装置は、VAV信号を記録するのに適したハードディスクまたはその他の装置などの読み書き可能な大容量記憶装置である。1つの実施形態では、再生装置は、例えば基準VAV信号を含む記録されたVAV信号にアクセスし、それらを再生する。RRDSU26は、1つの実施形態では、制御モジュール(図示せず)を含み、その制御モジュールはネットワーク22を通じて受信された信号により制御可能であり、RRDSU26に命令を発して開始、停止、再生、記録、ポーズ、シーク、タイムスタンプなどのタスクを実行する。1つの実施形態では、RRDSU26はこれらの機能を実行するためのディジタル留守番電話を含む。1つの実施形態では、RRDSU26は、声、音声、映像およびマルチメディアのテスト信号から選択されるテスト信号を送信するように構成される。
【0016】
1つの実施形態において、図2を参照すると、品質測定システム10はネットワーク22との関連においてEUT16をテストするために使用され、そのネットワーク22は、一方向ダウンリンクの端から端までのVAV品質、即ち、ネットワーク22の基地局(図示せず)からEUT16が無線リンク20を通じて受信した信号の品質を評価するためのワイヤレス電話ネットワーク24を含む。最初に、ステップ100でLQMU12がオンとされ、EUT16に接続され、それによりLQMU12はEUT16からのテストメッセージの受信に対して応答可能となる。EUT16はステップ102でRRDSUの電話番号をダイヤルすることによりコールを発し、RRDSU26はテスト信号をEUT16へ送信する。別の実施形態では、EUT16が電話ネットワーク以外のネットワークを通じて通信するように構成されている場合、RRDSU26へ電話のコールを発する代わりに適切な発信技術が用いられる。別の実施形態では、そのような発信も手動で、例えばEUT16のキーパッド(図示せず)上の番号をダイヤルすることにより行うことができる。
【0017】
1つの実施形態では、RRDSU26はボイスメールボックスとして構成され、よってステップ102におけるRRDSUへのダイヤルはRRDSU26のボイスメールボックスにダイヤルしてステップ104でボイスメールメッセージとしてテスト信号を引き出すことをも含む。例えばボイスメッセージなどのテスト信号の送信の前に、テスト信号はNIA30により処理され、その結果、テスト信号はネットワーク28を介する送信のために適切な形態となる。次に、LQMU12はステップ106で自身をテスト信号に同期させようと試みる。ステップ106の同期サーチはステップ108で同期が達成されるまで続けられる。1つの実施形態では、決定された時間内にステップ108の同期が達成されないと(ステップ110)、ステップ112でエラー条件の信号が発せられる。1つの実施形態では、ステップ108におけるテスト信号との同期により、LQMU12はEUT16が受信した信号を分析し、テスト信号が受信されたか否かを決定する。EUT16はネットワーク24を通じて受信された信号のさらなる処理を実行して、EUT16が分析したテスト信号の表現を再生する。このさらなる処理は、他の事項のうちで、EUT16をネットワーク22が使用する信号符号化およびネットワークプロトコルと独立とすることを可能とする。
【0018】
ステップ108で同期を獲得した後、再生されたテスト信号はステップ114でLQMU12により受信される。再生されたテスト信号はLRDSU32内で予め記憶された基準信号の表現と比較され、サービス品質(QoS)の測定値がステップ116で決定され、受信信号品質の客観的な測定値を提供する。この測定値またはその表現は、ステップ118で例えば表示スクリーン(図示せず)上に表示される。別の実施形態では、品質の測定値が将来の表示または分析のために記録される。1つの実施形態では、RRDSU26への1回のコール中に、ステップ120で予め決められた回数のテストを実行する。EUT16からRRDSU26へのコールは、決定された回数のテストが完了した時に手動または自動のいずれかで終了させることができる。
【0019】
1つの実施形態では、EUT16がテスト信号を受信している時に、受信したテスト信号の品質を評価するための十分な処理能力をLQMU12が有していない場合には、受信されたテスト信号は、例えばEUT16からRRDSU26へのコールが終了した後などの以後のオフライン品質評価のためにLRDSU32内に記憶される。
【0020】
さらに別の実施形態においては、図3を参照すると、アップリンクテストシステム200はRRDSU26を必要としない。テストシステム200はネットワーク22およびEUT16との関連において図3に示される。本実施形態では、EUT16は無線リンク18を介してワイヤレスネットワーク24へ送信を行うセルラー電話である。LQMU12はワイヤラインネットワーク28を通じた信号をNIA30から受け取る。1つの実施形態では、NIAはコンピュータモデムなどのモデムであり、LQMU12は通信のためにそのモデムと共に構成される。EUT16はNIA30の電話番号をダイヤルしてテストを開始する。次に、LQMU12は、例えばハンズフリーキットを使用して局地から遠隔へのテスト信号をEUT16へ入力し、その信号はネットワーク22およびNIA30を介してLQMU12へ戻される。次に、LQMU12は受信信号に対してサービス品質の評価を実行する。
【0021】
別の実施形態においては、図4を参照すると、2方向テストシステム300が提供され、それはマスター品質測定ユニット(MQMU)302と、スレーブ品質測定ユニット(SQMU)304とを有する。2方向テストシステム300の構成が図示され、ネットワーク310との関係においてEUT306と308のテストが行われる。MQMU302は、例えばVAV能力を提供する端末であるEUT306とEUT308間の通信を、例えばインターネットなどのネットワーク310を介して開始および調整し、MQMU302およびSQMU304の両者により作られるテスト結果についてのタイムスタンプを提供するように構成される。それ以外は、MQMU302およびSQMU304はLQMU12と同様に構成され、MQMU302はEUT306および基準データ記憶ユニット(RDSU)312に接続され、SQMU304はEUT308とRDSU314に接続される。MQMU302とSQMU304の両者は、受信信号の品質測定値を提供するように構成される。MQMU302はEUT308からネットワーク310を通じてEUT306へ送信された信号の品質測定値316を提供し、SQMU304はEUT306からネットワーク310を介してEUT308へ送信された信号の品質測定値318を提供する。1つの実施形態では、品質測定値のタイムスタンプは、品質測定値316および318が後に後処理モジュール320により相関付けおよび後処理できるように決定される。
【0022】
1つの実施形態では、LQMU12、RRDSU26、MQMU302およびSQMU304のいずれも、あらゆるネットワークとの直接的な接続を必要としない。この理由から、これらの装置の各々は、ネットワークの特性および構成を含むネットワークの種類に関係なく動作することが可能であり、それは所有ネットワークおよび非所有ネットワークの両方との関係において使用することが可能である。その結果、本発明は、交換回線、パケット交換、フレームリレー(frame-relay)、インターネットプロトコルおよび非同期転送モード(ATM)ネットワークを含む異なる多種のネットワークのいずれにおいても実施することができる。また、本発明は、無線、有線および衛星ネットワークを含む種々のネットワーク伝達技術に適している。さらにまた、本発明の構成要素は、通信機器の既存の端子またはポートへ、ならびに、ネットワークの公的なまたはユーザが使用可能なサービスアクセスポイントへ接続するように設計することができる。そうして、テスト中のネットワークまたは機器の特殊なセットアップまたは変更を必要としない。種々の実施形態において、LQMU12、MQMU302およびSQMU304のうちのいくつかまたは全てを非侵入的にして動作中の配置を可能とする。
【0023】
1つの実施形態では、LQMU12、MQMU302およびSQMU304の少なくとも1つは、リアルタイム品質評価を達成するためにディジタル信号処理を利用して実行される。ネットワークのアーキテクチャまたはプロトコル情報が利用可能であれば、取得される品質測定値はネットワークパラメータを適応的に調整するために使用される。
【0024】
他の実施形態では、例えば適応的にまたは自動的に品質評価のための適切なアルゴリズムを選択することにより声の品質評価を改善する。例えば、CDMAおよびボイスオーバーIP(Voice Over IP)を通じて送信されたマルチメディア信号は、標準的品質測定アルゴリズムとは異なるアルゴリズム、例えば、国際電気通信連盟の規格P.861の知覚的スピーチ品質測定(PSQM)または測定正規化ブロック(MNB)などの標準的品質測定アルゴリズムとは異なるアルゴリズムによってより良好に評価される。オフラインで声の品質を測定するためのITUが開発した別の測定アルゴリズムは、コンピュータに記憶されたファイルを使用する。1つの実施形態では、LQMU12、MQMU302およびSQMU304の少なくとも1つは異なるシステムアプリケーションのためにプログラム可能である。1つの実施形態では、手動、もしくはLQMU12、MQMU302およびSQMU304の少なくとも1つの制御下のいずれかにおいて、種々のテスト信号が選択される。例えば、ITU等の規格作成体により設計された人工的な声に類似した信号を選択することができる。
【0025】
1つの実施形態では、記憶装置32、310および312は、いくつかの異なる種類の記憶媒体のいずれか、もしくは記憶媒体を有する別の装置と通信するリレー装置を含む。
【0026】
1つの実施形態では、LQMU12、MQMU302、およびSQMU304の少なくとも1つは、グローバル・ポジショニング衛星(GPS)受信機およびディジタル地図(図示せず)の少なくとも1つと機能的に結合してサービス品質の地図を自動的に生成する。例えば、無線電話ネットワークのためのテスト信号が移動するEUT16、306または308へ繰り返し送信され、性能測定が位置の関数として実行および分析される。
【0027】
本発明の精神において多くの他の変更が可能であることが当業者には明白であろう。従って、本発明の範囲は、請求の範囲およびその等価物を参照することにより決定されるべきである。
【0028】
【発明の効果】
本発明によれば、伝達技術およびネットワークアクセス技術などのネットワークの動作および構成についての明白な知識を必要とすること無く、受信されたVAV信号品質を評価するための方法および装置が提供される。
【図面の簡単な説明】
【図1】 本発明に従う一方向品質測定に適したVAV信号のための品質測定システムの実施形態のブロック図である。
【図2】 図1のシステムに適用可能な品質測定方法の実施形態のフローチャートである。
【図3】 本発明に従う往復品質測定に適した品質測定システムの実施形態のブロック図である。
【図4】 本発明に従う2方向品質測定に適した品質測定システムの実施形態のブロック図である。
【符号の説明】
10…品質測定システム
12…ローカル品質測定ユニット
14、34…ポート
16…テスト中の機器
18、20…通信路
22、24、28…ネットワーク
26…遠隔基準データ記憶ユニット
30…ネットワークインターフェースアダプタ
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a system for measuring signal quality, and more particularly to a system for measuring the quality of multimedia signals communicated over a network.
[0002]
[Prior art]
A number of processing and transmission methods have been devised for the communication of voice, voice, video and multimedia information. These types of signals are collectively referred to as “Voice, Audio and Video (VAV)” signals. The VAV signal can be processed in many different ways before being sent to the receiver. For example, a VAV signal can be digitized, compressed, and modulated onto a carrier. The receiver must then convert the received signal back into a perceptible representation of the VAV signal.
[0003]
[Problems to be solved by the invention]
Traditionally, the received VAV signal quality is evaluated by subjective tests. However, this type of test is not practical as an in-service test method, and this type of test does not produce consistent and reproducible results. If VAV communication is incorporated into a very complex transmission system such as a cellular code division multiple access (CDMA) system or a wideband CDMA system, the evaluation of signal quality becomes more complex. There are different but equally challenging challenges when evaluating VAV quality in a non-deterministic environment such as the Internet.
[0004]
It is known to indirectly evaluate signal quality by measuring parameters such as signal-to-noise ratio (S / N), carrier-to-interference ratio (C / I), lost packet rate, and bit error rate (BER). It has been. However, it is difficult to correlate these parameters with the user's perception of received VAV signal quality, especially when such signals are highly compressed or processed. Also, these parameters are not well suited to accurately and accurately reflect VAV signal quality over a period of time.
[0005]
Algorithms that estimate perceptual conversation quality are known. For example, International Telecommunication Union standard P.861 is an objective algorithm that automatically calculates qualitative values such as Mean Opinion Score (MOS) for conversational transmission. Can be used to calculate. However, these types of tests require static analysis of both the original signal and the test signal according to the type of test equipment. Thus, if a quality assessment is to be made in the field with real signals, the test equipment must incorporate the network architecture and protocol into its hardware, software or firmware. Often the network architecture is not available or it becomes difficult or expensive to implement. Even monopoly restrictions can make it impossible to do so.
[0006]
In view of the above, a method and apparatus for assessing received VAV signal quality without requiring explicit knowledge of network operation and configuration, such as transmission techniques and network access techniques used, is desired. . It would also be desirable for the method and apparatus to provide automatic real-time or non-real-time measurement of quality, thereby enabling, for example, interactive field testing. In addition, a common test platform for a variety of VAV signals that easily connects to the equipment under test would be beneficial. Furthermore, a method and apparatus that provides reliable, repeatable, easily understandable quantitative quality service measurements for one-way, multi-hop or round trip measurements is desired.
[0007]
[Means for Solving the Problems]
In one embodiment, the present invention is a method for measuring the perceptual quality of voice signals, audio signals, audio and video signals, and multimedia signals in a communication device. The processed test signal is sent from the first device to the second device over the network. The processed signal is then received by the device under test, which further processes the processed test signal to reproduce the representation of the test signal. The reconstructed test signal is then objectively analyzed to determine the degree of perceptual quality by comparing the reconstructed test signal with a pre-stored representation of the test signal.
[0008]
In another embodiment, the present invention is a quality measurement unit that identifies and evaluates the quality of a test signal reproduced with the equipment under test. The test signal is sent from the remote device and sent from the device under test. In the latter case, the quality measurement unit is configured to communicate with the device under test and the network so that the quality measurement unit itself receives a representation of the test signal sent by the device under test.
[0009]
It will be appreciated that in the method and apparatus of the present invention, the quality of the received VAV signal is evaluated without explicit knowledge of the network with which the device under test communicates. In addition, real-time and non-real-time quality analysis is possible and uses a common test platform for various VAV signals. The present invention is applicable to a variety of different quantitative quality service measurements, including one-way, multi-range and round-trip measurements.
[0010]
DETAILED DESCRIPTION OF THE INVENTION
In one embodiment, referring to FIG. 1, a quality measurement system 10 for a VAV signal is shown in the context of a device 16 under test and a network 22. The quality measurement system 10 includes a local quality measurement unit (LQMU) 12. The port 14 of the LQMU 12 is connected to an equipment under test (EUT) 16. In one exemplary embodiment, the EUT 16 is a mobile or cellular telephone and the port 14 is electrically connected to the EUT 16 using, for example, a set of “hands free” or “car kit” electronic terminals (not shown). Is done. However, the present invention is not limited to mobile and cellular telephone applications.
[0011]
The EUT 16 sends information to the network 22 and receives information from the network 22 through the communication paths 18 and 20, respectively. For example, in the case of a cellular telephone, the network 22 includes a wireless network 24 and the communication paths 18 and 20 are radio links. A remote reference data storage unit (RRDSU) 26 is also operatively connected to the network 22. In one exemplary embodiment, RRDSU 26 is a device for recording and playing back a reference signal, such as an answering machine, which is connected to wireless network 24 through wireline network 28. A network interface adapter (NIA) 30 is provided to adjust the signal output from the RRDSU 26 to a form suitable for transmission to the network 28. Similarly, the signal transmitted from the network 28 to the RRDSU 26 is converted by the NIA 30 into a form suitable for the RRDSU 26 to process.
[0012]
In one embodiment, a local storage device in the form of a local reference data storage unit (LRDSU) 32 is provided for the LQMU 12 and is connected to the LQMU 12 via a second port 34. In another embodiment, the local storage device 32 can be an internal device of the LQMU 12. In another embodiment, a local storage device, such as an electrical or magnetic memory, can be an internal device of the LQMU 12. LQMU 12 indicates a test signal quality measurement 36 that EUT 16 received from RRDSU 26 over network 22.
[0013]
Knowledge of the protocol, signaling and network 22 configuration required for the implementation of the present invention is separated within the EUT 16, an existing device and the NIA 30. The NIA 30 is in many cases a readily available device supplied by an operator of the network 28 or an electronics distributor. The present invention allows different types of networks 22 to be accommodated without requiring the RRDSU 26, LQMU 12 or local storage device 32 to know or be able to know detailed information regarding the nature of the network 22. . As a result, the RRDSU 26 can be connected via the NIA 30 to a service access point accessible to the public of the network 22 or to the user.
[0014]
In one embodiment, port 14 and LQMU 12 are configured to collect received test signals from EUT 16 so that LQMU 12 is responsive to signals received by EUT 16. In one embodiment, port 14 and LQMU 12 are configured to control EUT 16 to transmit uplink signals over wireless link 18. The LQMU 12 is also configured to analyze the received test signals and perform objective measurements of these signal qualities. In one embodiment, the algorithms embedded within LQMU 12 are configurable and selectable for one or more types of VAV signals.
[0015]
The RRDSU 26 is a storage unit including, for example, a recording device and a playback device (not shown separately in FIG. 1). The recording device is a readable and writable mass storage device such as a hard disk or other device suitable for recording VAV signals. In one embodiment, the playback device accesses and plays back recorded VAV signals including, for example, a reference VAV signal. The RRDSU 26, in one embodiment, includes a control module (not shown) that is controllable by signals received over the network 22 and commands the RRDSU 26 to start, stop, play, record, Perform tasks such as pause, seek, and timestamp. In one embodiment, RRDSU 26 includes a digital answering machine for performing these functions. In one embodiment, RRDSU 26 is configured to transmit a test signal selected from voice, audio, video and multimedia test signals.
[0016]
In one embodiment, referring to FIG. 2, the quality measurement system 10 is used to test the EUT 16 in the context of a network 22, which network VAV quality from one end to the other end of the unidirectional downlink, That is, it includes a wireless telephone network 24 for evaluating the quality of signals received by the EUT 16 over the radio link 20 from a base station (not shown) of the network 22. Initially, in step 100, LQMU 12 is turned on and connected to EUT 16, which enables LQMU 12 to respond to receipt of test messages from EUT 16. The EUT 16 places a call by dialing the RRDSU telephone number in step 102, and the RRDSU 26 sends a test signal to the EUT 16. In another embodiment, if the EUT 16 is configured to communicate over a network other than the telephone network, a suitable outgoing technology is used instead of placing a telephone call to the RRDSU 26. In another embodiment, such a call can also be made manually, for example by dialing a number on the keypad (not shown) of the EUT 16.
[0017]
In one embodiment, RRDSU 26 is configured as a voice mailbox, so dialing RRDSU at step 102 also includes dialing the voice mailbox of RRDSU 26 and eliciting a test signal as a voice mail message at step 104. Prior to transmission of a test signal, such as a voice message, the test signal is processed by the NIA 30 so that the test signal is in a suitable form for transmission over the network 28. Next, LQMU 12 attempts to synchronize itself to the test signal at step 106. The synchronization search at step 106 continues until synchronization is achieved at step 108. In one embodiment, if the synchronization of step 108 is not achieved within the determined time (step 110), an error condition is signaled at step 112. In one embodiment, in synchronization with the test signal at step 108, the LQMU 12 analyzes the signal received by the EUT 16 and determines whether a test signal has been received. The EUT 16 performs further processing of signals received over the network 24 to regenerate the representation of the test signal analyzed by the EUT 16. This further processing, among other things, allows the EUT 16 to be independent of the signal coding and network protocol used by the network 22.
[0018]
After obtaining synchronization in step 108, the regenerated test signal is received by the LQMU 12 in step 114. The reconstructed test signal is compared to a pre-stored representation of the reference signal in LRDSU 32 and a quality of service (QoS) measurement is determined at step 116 to provide an objective measurement of received signal quality. This measurement or its representation is displayed at step 118, for example on a display screen (not shown). In another embodiment, quality measurements are recorded for future display or analysis. In one embodiment, a predetermined number of tests are performed in step 120 during a single call to RRDSU 26. The call from EUT 16 to RRDSU 26 can be terminated either manually or automatically when the determined number of tests has been completed.
[0019]
In one embodiment, when the EUT 16 is receiving a test signal, if the LQMU 12 does not have sufficient processing power to evaluate the quality of the received test signal, the received test signal is For example, it is stored in the LRDSU 32 for subsequent offline quality evaluation, such as after a call from the EUT 16 to the RRDSU 26 is terminated.
[0020]
In yet another embodiment, referring to FIG. 3, the uplink test system 200 does not require the RRDSU 26. Test system 200 is shown in FIG. 3 in the context of network 22 and EUT 16. In this embodiment, the EUT 16 is a cellular telephone that transmits to the wireless network 24 via the wireless link 18. The LQMU 12 receives a signal from the NIA 30 through the wireline network 28. In one embodiment, the NIA is a modem, such as a computer modem, and the LQMU 12 is configured with that modem for communication. The EUT 16 starts the test by dialing the NIA 30 telephone number. The LQMU 12 then inputs a local-to-remote test signal to the EUT 16 using, for example, a hands-free kit, and the signal is returned to the LQMU 12 via the network 22 and the NIA 30. Next, the LQMU 12 performs service quality evaluation on the received signal.
[0021]
In another embodiment, referring to FIG. 4, a two-way test system 300 is provided, which includes a master quality measurement unit (MQMU) 302 and a slave quality measurement unit (SQMU) 304. The configuration of the two-way test system 300 is illustrated, and the EUTs 306 and 308 are tested in relation to the network 310. The MQMU 302 initiates and coordinates the communication between the EUT 306 and the EUT 308, for example terminals providing VAV capabilities, via a network 310 such as the Internet, and provides time stamps for test results produced by both the MQMU 302 and the SQMU 304. Configured to do. Otherwise, MQMU 302 and SQMU 304 are configured similarly to LQMU 12, MQMU 302 is connected to EUT 306 and reference data storage unit (RDSU) 312, and SQMU 304 is connected to EUT 308 and RDSU 314. Both MQMU 302 and SQMU 304 are configured to provide quality measurements of received signals. MQMU 302 provides quality measurements 316 of signals transmitted from EUT 308 through network 310 to EUT 306, and SQMU 304 provides quality measurements 318 of signals transmitted from EUT 306 through network 310 to EUT 308. In one embodiment, the quality measurement timestamps are determined so that the quality measurements 316 and 318 can be later correlated and post-processed by the post-processing module 320.
[0022]
In one embodiment, none of LQMU 12, RRDSU 26, MQMU 302 and SQMU 304 require a direct connection to any network. For this reason, each of these devices can operate regardless of the type of network, including network characteristics and configuration, and can be used in relation to both owned and unowned networks It is. As a result, the present invention can be implemented in any of a variety of different networks including switched lines, packet switched, frame-relay, internet protocol and asynchronous transfer mode (ATM) networks. The present invention is also suitable for various network transmission technologies including wireless, wired and satellite networks. Furthermore, the components of the present invention can be designed to connect to existing terminals or ports of communication equipment as well as to service access points available to the public or user of the network. Thus, no special setup or modification of the network or equipment under test is required. In various embodiments, some or all of LQMU 12, MQMU 302 and SQMU 304 are non-intrusive to allow for operational deployment.
[0023]
In one embodiment, at least one of LQMU 12, MQMU 302, and SQMU 304 is performed utilizing digital signal processing to achieve real-time quality assessment. If network architecture or protocol information is available, the obtained quality measurements are used to adaptively adjust network parameters.
[0024]
In other embodiments, voice quality assessment is improved, for example, by adaptively or automatically selecting an appropriate algorithm for quality assessment. For example, a multimedia signal transmitted through CDMA and Voice Over IP (Voice Over IP) is different from the standard quality measurement algorithm, for example, perceptual speech quality measurement (PSQM) of International Telecommunication Union standard P.861. ) Or a standard quality measurement algorithm such as a measurement normalization block (MNB) is better evaluated by an algorithm. Another measurement algorithm developed by the ITU for measuring voice quality offline uses files stored on a computer. In one embodiment, at least one of LQMU 12, MQMU 302, and SQMU 304 is programmable for different system applications. In one embodiment, various test signals are selected either manually or under the control of at least one of LQMU 12, MQMU 302 and SQMU 304. For example, a signal similar to an artificial voice designed by a standard creation body such as ITU can be selected.
[0025]
In one embodiment, the storage devices 32, 310, and 312 include a relay device that communicates with any of several different types of storage media or another device having a storage medium.
[0026]
In one embodiment, at least one of LQMU 12, MQMU 302, and SQMU 304 is functionally coupled with at least one of a global positioning satellite (GPS) receiver and a digital map (not shown) to provide a quality of service map. Generate automatically. For example, test signals for a radiotelephone network are repeatedly transmitted to the moving EUT 16, 306 or 308, and performance measurements are performed and analyzed as a function of location.
[0027]
It will be apparent to those skilled in the art that many other modifications can be made within the spirit of the invention. Accordingly, the scope of the invention should be determined by reference to the claims and their equivalents.
[0028]
【The invention's effect】
In accordance with the present invention, a method and apparatus is provided for evaluating received VAV signal quality without requiring explicit knowledge of network operation and configuration, such as transmission techniques and network access techniques.
[Brief description of the drawings]
FIG. 1 is a block diagram of an embodiment of a quality measurement system for a VAV signal suitable for one-way quality measurement according to the present invention.
FIG. 2 is a flowchart of an embodiment of a quality measurement method applicable to the system of FIG.
FIG. 3 is a block diagram of an embodiment of a quality measurement system suitable for round trip quality measurement according to the present invention.
FIG. 4 is a block diagram of an embodiment of a quality measurement system suitable for two-way quality measurement according to the present invention.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 10 ... Quality measurement system 12 ... Local quality measurement unit 14, 34 ... Port 16 ... Device under test 18, 20 ... Communication path 22, 24, 28 ... Network 26 ... Remote reference data storage unit 30 ... Network interface adapter

Claims (27)

動作可能な環境内において、通信機器内での声の信号、音声信号、音声及び映像の信号、ならびにマルチメディア信号のうち少なくとも1つの知覚的品質(前記信号による実際の表現時の音声、映像に対する品質評価をいう以下同じ)を測定する方法であって、
離れた場所にある遠隔基準データ記憶ユニット(RRDSU)から通信ネットワークを通じて、前記RRDSUにより処理されたテスト信号を送信する工程と、
前記テスト信号は、声の信号、音声信号、音声及び映像の信号及びマルチメディア信号の1つであり、
前記処理されたテスト信号をテスト中の機器の1つ(EUT)を使用して受信する工程と、
前記EUTは、前記RRDSUにネットワークを経由して、操作可能に連結されており、また、前記EUTは、前記テスト信号を受信するためにネットワークに接続されており、
前記EUTは、前記テスト信号の伝送に対して前記RRDSUに、テスト信号の受信に対してネットワークに、1つの信号を発信するようになっており、
前記EUTが、EUT内で、前記テスト信号の表現を再生するために、前記処理されたテスト信号を処理する工程と、
前記EUTを使用して、前記RRDSUへと前記テスト信号の表現を発信する工程と、
さらに、前記RRDSUを使用して前記テスト信号の表現を処理する工程と、
前記RRDSUが、ネットワークを通じて前記テスト中の機器(EUT)へ前記処理されたテスト信号の表現を伝送する工程と、
品質測定ユニットによって、前記再生されたテスト信号を、予め記憶されたテスト信号の表現と比較することによって、再生されたテスト信号の表現の品質を知覚的品質として分析する工程と
からなる方法。
In an operable environment, the perceptual quality of at least one of a voice signal, an audio signal, an audio and video signal, and a multimedia signal in a communication device (for audio and video at the time of actual expression by the signal) A quality evaluation method, the same shall apply hereinafter)
Transmitting a test signal processed by the RRDSU from a remote reference data storage unit (RRDSU) at a remote location through a communication network;
The test signal is one of a voice signal, an audio signal, an audio and video signal, and a multimedia signal,
Receiving the processed test signal using one of the devices under test (EUT);
The EUT is operably coupled to the RRDSU via a network, and the EUT is connected to the network to receive the test signal;
The EUT sends one signal to the RRDSU for transmission of the test signal and to the network for reception of the test signal,
Said EUT processing said processed test signal to reproduce a representation of said test signal within EUT ;
Using said EUT, a step of transmitting a representation of the test signal to the RRDSU,
Further processing the representation of the test signal using the RRDSU;
The RRDSU transmits a representation of the processed test signal to the equipment under test (EUT) over a network;
Analyzing the quality of the representation of the reproduced test signal as perceptual quality by comparing the reproduced test signal with a pre-stored representation of the test signal by a quality measurement unit .
前記RRDSUは操作可能に接続されたネットワークを通じて、処理されたテスト信号を伝送し、
EUTは、操作可能にネットワークに接続され、処理されたテスト信号を受信し、再生されたテスト信号の品質を分析するための品質測定ユニット(QMU)に接続され、
再生されたテスト信号の品質の分析をする工程に先立って、テスト信号が再生されていることを決定するために、前記EUTによって再生される信号を分析する工程をさらに有する
請求項1に記載の方法。
The RRDSU transmits a processed test signal over an operably connected network;
The EUT is operably connected to the network, connected to a quality measurement unit (QMU) for receiving the processed test signal and analyzing the quality of the regenerated test signal,
The method of claim 1, further comprising analyzing the signal reproduced by the EUT to determine that the test signal is being reproduced prior to the step of analyzing the quality of the reproduced test signal. Method.
前記QMUが、前記再生されたテスト信号の品質を表示するための工程を有する請求項1に記載の方法。  The method of claim 1, wherein the QMU comprises a step for displaying a quality of the reproduced test signal. 処理された信号を伝送する工程に先だって、ネットワークを介して、EUTから、RRDSUに接触する工程をさらに有する請求項2に記載の方法。  The method of claim 2, further comprising contacting the RRDSU from the EUT via the network prior to transmitting the processed signal. 前記ネットワークは電話回線のネットワークを含み、前記EUTは電話機を含み、前記ネットワークを通して、EUTからRRDSUに接触する工程は、RRDSUの電話番号をダイヤルする工程を含む請求項4に記載の方法。  5. The method of claim 4, wherein the network comprises a network of telephone lines, the EUT comprises a telephone, and through the network contacting the RUTSU from the EUT comprises dialing a RRDSU telephone number. 前記ネットワークを介して、EUTからRRDSUに接触する工程は、RRDSUのボイスメールボックスのアクセスコードをダイヤルする工程を含む請求項5に記載の方法。  6. The method of claim 5, wherein contacting the RRDSU from the EUT via the network includes dialing an access code for the RRDSU voice mailbox. 再生された信号の品質を分析する工程は、前記処理されたテスト信号がEUTにより受信されている間に実行される請求項2に記載の方法。  The method of claim 2, wherein the step of analyzing the quality of the regenerated signal is performed while the processed test signal is received by an EUT. 再生されたテスト信号を記憶する工程を更に有し、前記再生されたテスト信号の品質を分析する工程が、テスト信号が記憶された後に実行される請求項2に記載の方法。  The method of claim 2, further comprising the step of storing a regenerated test signal, wherein the step of analyzing the quality of the regenerated test signal is performed after the test signal is stored. EUTの、ネットワークからの接続を切ってから、前記再生された信号の品質を分析する工程を行う請求項8に記載の方法。  9. The method of claim 8, wherein the step of analyzing the quality of the regenerated signal is performed after disconnecting the EUT from the network. 再生されたテスト信号の品質の分析はディジタルで行われる請求項2に記載の方法。  The method of claim 2, wherein the quality analysis of the regenerated test signal is performed digitally. さらに、ネットワークの特性にしたがって品質評価の方法を選択する工程を有する請求項2に記載の方法。  The method according to claim 2, further comprising selecting a quality evaluation method according to the characteristics of the network. 前記ネットワークが無線電話ネットワークであり、前記処理されたテスト信号を通信する工程及び前記再生された信号の品質を分析する工程が反復して実行され、
さらに、
処理されたテスト信号の前記反復して行われる通信が、異なった場所で行われるようにEUTを移動させる工程と、
再生されたテスト信号の品質を分析する工程が、前記EUTの異なった位置の関数として行われる請求項2に記載の方法。
The network is a wireless telephone network, and the steps of communicating the processed test signal and analyzing the quality of the regenerated signal are performed iteratively;
further,
Moving the EUT so that the repeated communication of the processed test signal occurs at a different location;
The method of claim 2, wherein the step of analyzing the quality of the reconstructed test signal is performed as a function of different positions of the EUT.
前記RRDSUからテスト中の機器に通信される処理されたテスト信号は、第1のテスト信号の処理された信号を表す表現であり、
さらに、
QMUを使用して、第2のテスト信号の表現をEUTに向かって入力し、
さらに、EUTを使用して前記第2のテスト信号を処理し、
処理された第2のテスト信号を、前記EUTから、第1の装置へとネットワークを介して通信する工程とを有し、
さらに、第1の装置を使用して、第2のテスト信号の表現として再生するために、前記通信され、処理された第2のテスト信号を、処理する工程と、
再生された第2のテスト信号を、予め記憶されている第2のテスト信号の表現と比較することによって、再生された第2の信号の前記知覚的品質を分析する工程とを有する、
請求項2に記載の方法。
The processed test signal communicated from the RRDSU to the device under test is a representation representing the processed signal of the first test signal;
further,
Using QMU, input representation of second test signal towards EUT,
And processing the second test signal using an EUT;
Communicating the processed second test signal from the EUT to the first device over a network;
Further, processing the communicated and processed second test signal for reproduction as a representation of the second test signal using a first device;
Analyzing the perceptual quality of the reproduced second signal by comparing the reproduced second test signal with a pre-stored representation of the second test signal.
The method of claim 2.
再生された第1のテスト信号および再生された第2のテスト信号の品質の分析結果を別々に記憶する工程と、
別々に記憶された各結果を、後の相関付けをするために、タイムスタンプを関連付けして行う工程と、
さらに、その別々に記憶された結果を処理する工程と、を有する
請求項13に記載の方法。
Separately storing the quality analysis results of the reproduced first test signal and the reproduced second test signal;
Performing each separately stored result in association with a timestamp for later correlation;
14. The method of claim 13, further comprising processing the separately stored results.
RRDSUに代えてEUTを使用し、EUTに代えて品質測定ユニット(QMU)を用いる請求項1に記載の方法。  The method according to claim 1, wherein an EUT is used instead of the RRDSU, and a quality measurement unit (QMU) is used instead of the EUT. テストするべき機器(EUT)へ通信ネットワークを介して伝送される信号の品質を測定するための品質測定装置であって、
前記品質測定装置はローカル規準データ記憶ユニット(LRDSU)を有し、
前記LRDSUは、記憶されたテスト信号の表現を持っており、ネットワークを通して前記テスト信号の処理された表現を通信するように前記EUTを制御するように構成され、
前記品質測定装置は、
前記EUTと通信し、
EUTにより受信しそして再生された信号を識別するために分析し、
処理された前記テスト信号がEUTによって受信されている間に、前記識別され、再生されたテスト信号の知覚的品質を分析し、
ネットワークを通して、前記品質測定装置の制御の下に、EUTによって通信された前記テスト信号の表現を受信し、ネットワークを通して前記品質測定装置に通信されたテスト信号の知覚的品質の分析を、再生されたテスト信号を、予め記憶されたテスト信号の表現と比較することにより行う
ようにしている装置。
A quality measuring device for measuring the quality of a signal transmitted over a communication network to an equipment to be tested (EUT),
The quality measuring device has a local reference data storage unit (LRDSU);
The LRDSU has a stored representation of the test signal and is configured to control the EUT to communicate the processed representation of the test signal over a network;
The quality measuring device includes:
Communicate with the EUT,
Analyzing to identify signals received and played back by the EUT,
Analyzing the perceived quality of the identified and regenerated test signal while the processed test signal is received by the EUT;
Receiving the representation of the test signal communicated by the EUT under the control of the quality measuring device through the network and reproducing the perceptual quality analysis of the test signal communicated to the quality measuring device through the network An apparatus adapted to perform a test signal by comparing it with a pre-stored representation of the test signal .
声の信号、音声信号、ビデオ信号またはマルチメディア信号のグループの内から選択される信号の少なくとも1つを、テスト信号の1つの種類として分析するように構成されている請求項16に記載の品質測定装置。  17. Quality according to claim 16, configured to analyze at least one signal selected from the group of voice signals, audio signals, video signals or multimedia signals as one type of test signal. measuring device. 前記識別され、再生された信号の品質を指示する指標を表示するように構成されている請求項17に記載の品質測定装置。  The quality measuring device according to claim 17, wherein the quality measuring device is configured to display an indicator indicating the quality of the identified and reproduced signal. 前記再生されたテスト信号を識別するために、EUTによって再生された信号と同調を取るように構成されている請求項17に記載の品質測定装置。  18. A quality measurement device according to claim 17, wherein the quality measurement device is configured to be tuned with a signal reproduced by an EUT to identify the reproduced test signal. 前記品質測定装置はローカルな記憶装置を有し、
さらに、前記識別され、再生されたテスト信号を前記ローカルな記憶装置に記憶し、記憶された後に、前記識別され、再生されたテスト信号を分析するように構成されている請求項17に記載の品質測定装置。
The quality measuring device has a local storage device;
18. The apparatus of claim 17, further configured to store the identified and reproduced test signal in the local storage device and analyze the identified and reproduced test signal after being stored. Quality measuring device.
前記品質測定装置が前記識別され、再生されたテスト信号を分析するのに先だって、ネットワークからEUTを切り離すように構成されている請求項20に記載の品質測定装置。  21. The quality measurement device of claim 20, wherein the quality measurement device is configured to disconnect an EUT from a network prior to analyzing the identified and regenerated test signal. 前記識別され、再生された信号を、ネットワークの特性に応じて、前記知覚的品質を分析するために、ネットワークの特性にしたがって最良の評価方法を選択するように構成されている請求項17に記載の装置。  18. The method of claim 17, wherein the identified and regenerated signal is configured to select a best evaluation method according to network characteristics to analyze the perceptual quality according to network characteristics. Equipment. EUTとして無線電話により通信するように構成されている請求項16に記載の品質測定装置。  The quality measuring device according to claim 16, wherein the quality measuring device is configured to communicate by radio telephone as an EUT. 前記再生され、識別されたテスト信号の前記知覚的品質の指標を記録し、記録された前記知覚的品質の指標にタイムスタンプを記録するように構成されている請求項16に記載の品質測定装置。  17. A quality measuring device according to claim 16, configured to record the perceptual quality indicator of the reproduced and identified test signal and to record a time stamp on the recorded perceptual quality indicator. . 操作可能な環境における通信装置において、音声信号、オーディオ信号、オーディオビデオ信号及びマルチメディア信号の、少なくとも1つの知覚的品質を測定するシステムであって、
通信ネットワークを通して処理されたテスト信号を通信するように構成された送信装置と、前記テスト信号は、音声信号、オーディオ信号、オーディオビデオ信号及びマルチメディア信号の少なくとも1つであり、
前記処理されたテスト信号を、ネットワークを通して受信し、前記テスト信号の表現に再生するために、処理されたテスト信号を処理するように構成された受信機と、
受信機に操作可能に接続された、再生されたテスト信号を予め記憶されているテスト信号の表現と比較することによって、再生されたテスト信号の知覚的品質を分析するように構成されている品質測定ユニット(QMU)とを備えるシステム。
A system for measuring at least one perceptual quality of an audio signal, an audio signal, an audio video signal and a multimedia signal in a communication device in an operable environment,
A transmitting device configured to communicate a processed test signal through a communication network, wherein the test signal is at least one of an audio signal, an audio signal, an audio video signal, and a multimedia signal;
A receiver configured to process the processed test signal to receive the processed test signal over a network and regenerate the representation of the test signal;
Quality configured to analyze the perceptual quality of the regenerated test signal by comparing the regenerated test signal operably connected to the receiver with a pre-stored representation of the test signal A system comprising a measurement unit (QMU).
送信装置が遠隔データ記憶ユニット(RRDSU)をさらに有し、
前記RRDSUは処理されたテスト信号を、操作可能に接続されているネットワークを通して送信し、QMUが再生されたテスト信号の品質を分析するのに先立って1つのテスト信号が受信されていることを決定するように構成されている請求項25に記載のシステム。
The transmitting device further comprises a remote data storage unit (RRDSU);
The RRDSU transmits the processed test signal through an operably connected network and determines that one test signal has been received prior to the QMU analyzing the quality of the regenerated test signal. 26. The system of claim 25, configured to:
前記QMUが受信されたテスト信号の品質の指標を表示するように構成されたディスプレイ装置を有する請求項26に記載のシステム。  27. The system of claim 26, wherein the QMU comprises a display device configured to display a quality indicator of a received test signal.
JP2000620743A 1999-05-25 1999-05-25 Universal quality measurement system for multimedia and other signals Expired - Fee Related JP4462766B2 (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US1999/011529 WO2000072453A1 (en) 1999-05-25 1999-05-25 Universal quality measurement system for multimedia and other signals

Publications (2)

Publication Number Publication Date
JP2003500972A JP2003500972A (en) 2003-01-07
JP4462766B2 true JP4462766B2 (en) 2010-05-12

Family

ID=22272834

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000620743A Expired - Fee Related JP4462766B2 (en) 1999-05-25 1999-05-25 Universal quality measurement system for multimedia and other signals

Country Status (4)

Country Link
JP (1) JP4462766B2 (en)
KR (1) KR100573398B1 (en)
AU (1) AU4098099A (en)
WO (1) WO2000072453A1 (en)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1244094A1 (en) * 2001-03-20 2002-09-25 Swissqual AG Method and apparatus for determining a quality measure for an audio signal
US7130273B2 (en) 2001-04-05 2006-10-31 Level 3 Communications, Inc. QOS testing of a hardware device or a software client
US6734898B2 (en) * 2001-04-17 2004-05-11 General Instrument Corporation Methods and apparatus for the measurement of video quality
US7280487B2 (en) 2001-05-14 2007-10-09 Level 3 Communications, Llc Embedding sample voice files in voice over IP (VOIP) gateways for voice quality measurements
US7173910B2 (en) 2001-05-14 2007-02-06 Level 3 Communications, Inc. Service level agreements based on objective voice quality testing for voice over IP (VOIP) networks
EP1289184B1 (en) * 2001-08-15 2009-04-15 Psytechnics Limited Communication channel accuracy measurement
US6738353B2 (en) * 2002-03-20 2004-05-18 Sunrise Telecom Incorporated System and method for monitoring a packet network
US7388946B1 (en) 2003-09-02 2008-06-17 Level 3 Communications, Llc System and method for evaluating the quality of service in an IP telephony network using call forwarding
DE102004008207B4 (en) * 2004-02-19 2006-01-05 Opticom Dipl.-Ing. Michael Keyhl Gmbh Method and apparatus for quality assessment of an audio signal and apparatus and method for obtaining a quality evaluation result
CN101755218B (en) * 2007-07-16 2012-08-15 特克特朗尼克公司 Apparatus and methods of defining spectral regions of interest for signal analysis

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB9315353D0 (en) * 1993-07-23 1993-09-08 British Telecomm Testing telecommunications equipment
US5805666A (en) * 1995-02-28 1998-09-08 Sony Corporation Method of and apparatus for diagnosing personal communication system
JPH1028088A (en) * 1996-07-11 1998-01-27 Nec Corp Transmitter-receiver for test for base station of portable telephone
US5875398A (en) * 1996-10-21 1999-02-23 At&T Wireless Method and apparatus for testing cellular services in a first location from a second location remote from the first location
DE19651244C2 (en) * 1996-12-10 1998-11-19 Ericsson Telefon Ab L M Communication system and method for testing a communication device
US5933776A (en) * 1997-07-07 1999-08-03 Hewlett-Packard Company Method and apparatus for field testing cellular telephones

Also Published As

Publication number Publication date
AU4098099A (en) 2000-12-12
KR100573398B1 (en) 2006-04-25
WO2000072453A1 (en) 2000-11-30
KR20010106411A (en) 2001-11-29
JP2003500972A (en) 2003-01-07

Similar Documents

Publication Publication Date Title
US6819924B1 (en) Universal quality measurement system for multimedia and other signals
EP1854317B1 (en) Large scale measurement of subjective quality in mobile communications systems
US7224968B2 (en) Network testing and monitoring systems
US7349692B2 (en) Network testing systems
US7522918B2 (en) Method and System for Evaluating Radio Coverage
CN102075988B (en) System and method for locating end-to-end voice quality fault in mobile communication network
WO2014011377A1 (en) Test system to estimate the uplink or downlink quality of multiple user devices using a mean opinion score (mos)
US20100080143A1 (en) System and Method for Testing Mobile Telephone Data Services
US20070002753A1 (en) System and method for testing a packet data communications device
CN104255017A (en) Impairment simulation for network communication to enable voice quality degradation estimation
JP2015534735A6 (en) Test system to evaluate the uplink or downlink quality of multiple user devices using mean opinion score (MOS)
JP4462766B2 (en) Universal quality measurement system for multimedia and other signals
CN106952657A (en) A kind of speech quality detection method and device
EP2056634A2 (en) System and method for determining end-to-end speech quality of mobile telephone devices
US7050924B2 (en) Test signalling
KR100940426B1 (en) Method and apparatus for speech quality assessment in a cellular communication system
JP3788403B2 (en) Radio base station test system and radio base station test method
JP3945650B2 (en) COMMUNICATION TEST SYSTEM, SERVER, AND COMMUNICATION TEST METHOD
JPH10145278A (en) Radio communication system
JP2001285481A (en) Multi-display test device
CN117081954A (en) Link quality detection system, method, device, equipment and storage medium
CN117560449A (en) Voice quality testing system and method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060425

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080228

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080304

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20080602

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20080609

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080903

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081104

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20090202

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20090209

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090420

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090602

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20090901

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20090908

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091127

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100119

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100216

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130226

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130226

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140226

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees