JP3592289B2 - 画像蓄積方法及び蓄積画像再生方法 - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は、画像蓄積方法及び蓄積画像再生方法に関し、より詳細には、ＴＶ電話等に代表される映像情報の通信を行う端末から送出される、特に、ＩＴＵ（国際電気通信連合）−Ｔ勧告に準拠した画像や音声及び各種データが多重化されたデータを蓄積し、任意の端末から蓄積データの再生を行うことが可能な画像通信システムに関する。
【０００２】
【従来の技術】
近年、従来からある電話やＦＡＸ（ファクシミリ）等の対話型の通信サービスに加えて、音声情報を網のセンターに記憶して、それを随時再生することができる蓄積型のサービスが提供されている。また、ＩＳＤＮ（Ｉｎｔｅｇｒａｔｅｄ Ｓｅｒｖｉｃｅｓ Ｄｉｇｉｔａｌ Ｎｅｔｗｏｒｋ：サービス総合ディジタル網）に代表されるディジタル通信網の整備により、例えば、テレビ電話に代表される画像通信サービスを利用することが可能となってきている。このような背景の中で、画像を使用した蓄積型のサービスに対する要求が高まり、一部実用化されつつある。
【０００３】
従来の蓄積画像再生装置について記載した公知文献としては、例えば、特開昭６２−１８８５７９号公報がある。この公報のものは、動画像情報データベースからの動画像情報の伝送にパケット通信網を用い、該パケット通信網による伝送遅延のバラツキを吸収し、ユーザが受信しやすい映像信号への変換を行うための動画像情報蓄積変換装置を設け、ユーザは希望する時刻にその蓄積動画像情報を取り出すものである。
【０００４】
また、特開平３−１３２１２８号公報のものは、利用者が端末から入力した静止画・動画からなる画像情報と音声情報とをメッセージとしてセンタに蓄積するとともに、利用者からの要求に対応したメッセージを入力した通りに端末上で再現できるようにしたものである。
さらに、特開平４−７９６５５号公報のものは、映像や音声文字情報の入出力機能を備えた情報収集利用者端末から情報収集のための条件を登録する手段と、登録された情報に基づき、映像や音声文字情報の入出力機能を備えた情報収集利用者端末に発呼が行われ、情報が自動的に受信され、収集した情報が収集依頼者の意図に基づき蓄積されるものである。
【０００５】
図１１は、従来の多重化データ送受信部の構成図で、図中、９１は蓄積データ抽出部、９２はパケット生成部、９３はパケット分解部、９４は回線データ生成部、９５は多重化データ送受信部の受信部、９６は多重化データ送受信部の送信部である。
蓄積データ抽出部９１は、システム制御部からの指示に従って受信した回線多重化データから蓄積する多重化データの抽出を行う。パケット生成部９２は、システム制御部からの指示に従って受信した蓄積多重化データからパケットを生成する。パケット分解部９３は、記憶装置から出力されるパケットから再生する多重化データを抽出する。回線データ生成部９４は、システム制御部からの指示に従ってパケット分解部から出力される多重化データから回線多重化データの生成を行う。
【０００６】
図１２（ａ），（ｂ）は、従来のデータ多重フォーマットを示す図で、現在テレビ電話等で用いられているデータの多重化形式を示す図である。国際標準として採用されており、この多重化方式を用いることにより、テレビ電話等の相互接続性が確保される。図１２において、１０１，１０２はそれぞれ音声データ、画像データに割り当てられる領域、１０３はフレーム同期用ビット、１０４は端末間の能力・コマンド通信用ビット、１０５は通信回線へのデータ送出順序である。各データの多重化条件は能力・コマンド通信用ビット１０４を使用して端末−ホスト間でいつでも変更することが可能である。
【０００７】
図１３は、従来の蓄積時のパケットのフォーマットを示す図で、図中、１１１は蓄積を行うときの伝送レートや各データの多重化レート及び各データの符号化方式等の情報が含まれるヘッダ情報、１１２はパケットで構成されるサブマルチフレームの数、１１３は図１２に示すフォーマットで多重化された多重化データである。
【０００８】
蓄積時には、網から送出される回線多重化データは、蓄積データ抽出部９１で受信され、該蓄積データ抽出部９１は蓄積する多重化データの抽出を行い、パケット生成部９２に出力する。該パケット生成部９２では、通信時のデータの多重化レートや符号化方式等をヘッダ情報とし、図１３に示すフォーマットに従ってパケットを生成し、パケットデータとして記憶装置に出力する。
【０００９】
再生時には、記憶装置から出力されるパケットデータは、パケット分解部９３で受信される。該パケット分解部９３は、パケットのヘッダ情報をシステム制御部に通知する。該システム制御部は、回線データ生成部９４に対して図１２に示すＢＡＳ１０４を使用して蓄積時の通信端末の動作モードと再生時の通信端末の動作モードの整合を図るように指示する。回線データ生成部９４で動作モードの整合が完了したら、パケット分解部９３では、パケットの分解を行い、再生する多重化データを回線データ生成部９４に出力する。該回線データ生成部９４では、図１２に示すＦＡＳ１０３とＢＡＳ１０４の書き換えを行って回線多重化データを生成し、通信網に送出する。
【００１０】
【発明が解決しようとする課題】
従来の方式では、国際標準として採用されているデータの多重化形式の状態で蓄積を行っているため、蓄積した画像を通信端末で再生を行う場合、通常、ＦＥＣ（Ｆｏｒｗａｒｄ Ｅｒｒｏｒ Ｃｏｒｒｅｃｔｉｏｎ：誤り訂正）フレーム同期を確立してから画像の表示を行うため、画像がすぐに表示できない。また、初期画像がフレーム内符号化されたものとは限らないため初期画像が汚くなる。さらに、蓄積時の端末のバッファ状態が違うため、バッファのアンダーフローやオーバーフロー等が生じ、うまく画像が再生できない等の諸問題が生じる。
【００１１】
また、蓄積画像は、蓄積時の端末バッファ状態により符号化量の制御がおこなわれているが、従来の方式では、再生時と蓄積時の端末のバッファ状態が必ずしも同一とは限らないため、バッファのオーバーフローやアンダーフロー等の問題が生じる。さらに、従来の画像再生装置では、蓄積時の端末と再生時の端末の対応可能な回線レートが同じ場合にしか蓄積画像の再生が行えないという問題があった。例えば、ＩＳＤＮの基本インタフェースを使用した回線レートＢのみ対応の端末で蓄積した画像を、回線レート２Ｂのみに対応した端末で再生を行う場合などに問題があった。
【００１２】
本発明は、このような実情に鑑みてなされたもので、従来の方式のように音声や画像等の多重化された状態で蓄積を行わず、それぞれのデータを分離し、特に画像に対してはデータ処理を行ってビデオフレーム単位で蓄積を行い、再生時に生じる諸問題を解決するための画像処理が可能となるデータフォーマットで蓄積すること。また、蓄積画像の再生時に生じる「画像がすぐに表示できない」という問題を解決すること。また、情報量の監視を行ってフィルビットの挿入を制御し、再生端末においてバッファのオーバーフローやアンダーフロー等の発生を防止すること。さらに、伝送速度整合を行うことにより、蓄積時と再生時の端末の対応可能な回線レートが違う場合でも再生が行えるようにした画像蓄積方法及び蓄積画像再生方法を提供することを目的としている。
【００１３】
【課題を解決するための手段】
本発明は、上記目的を達成するために、（１）符号化された動画像データ及び符号化された音声データを多重化した多重化データを入力するステップと、該入力した多重化データを、符号化された動画像データと符号化された音声データとに分離するステップと、該分離された動画像データから、ビデオフレームを単位として符号化されたビデオフレームデータを抽出するステップと、該抽出されたビデオフレームデータ及び前記分離された音声データを、パケットのビデオフレームデータ及び音声データとしてパケットを生成するステップと、該生成したパケットを蓄積するステップとにより画像を蓄積すること、或いは、（２）ビデオフレームを単位として符号化されたビデオフレームデータ及び符号化された音声データが所定の蓄積フォーマットに従って蓄積されたパケットから、符号化されたビデオフレームデータ及び符号化された音声データを分離するステップと、該分離されたビデオフレームデータからなる符号化された動画像データと前記分離された音声データとを、再生時の端末で対応可能な多重化フォーマットに従って多重化し、多重化データを生成するステップと、該多重化データを出力するステップとにより蓄積画像を再生することを特徴としたものである。
【００１４】
【発明の実施の形態】
本発明の画像蓄積方法では、画像や音声等の多重化された入力信号をデータ分離手段において各種データに分離し、画像においては、誤り訂正手段でＦＥＣの誤り訂正を行い、さらに、ビデオフレーム抽出手段でビデオフレームの抽出を行う。そして、パケット生成手段で画像や音声等のデータに蓄積時の多重化レートや符号化方式等の蓄積時の情報を付加してパケットを生成し、蓄積手段において蓄積を行う。そのため、画像の再生時には、諸問題を解決するための処理を容易に行うことが可能となる。
【００１５】
また、本発明の蓄積画像再生方法は、パケットに付加された情報をもとにパケットを分解し、画像においては、再生を行う相手端末のＦＥＣの同期をフィルフレームを必要に応じて送信することにより制御が可能となるため、ＦＥＣの同期が確立してから蓄積画像の送出を行うことにより、蓄積画像の再生をスムーズに早く行うことが可能となる。また、蓄積画像の再生時に、画像の符号化器と同様に情報量の制御を行うことにより、蓄積画像の再生を行う端末のバッファのオーバーフローやアンダーフロー等の発生を防止することが可能となる。さらに、蓄積時の端末と再生時の端末の対応可能な回線レートが違う場合においても、伝送速度整合を行うことにより蓄積画像の再生が可能となる。
【００１６】
（実施例）
実施例について、図面を参照して以下に説明する。
図１は、本発明による画像蓄積方法及び蓄積画像再生方法が適用された画像蓄積装置及び蓄積画像再生装置の一実施例を説明するための構成図で、図中、１は通信端末、２は通信ホスト、３はＩＳＤＮ等の通信網、４は画像入力用のカメラ、５は画像出力用のモニタ、６は音声入出力用のハンドセット、７は端末のシステム制御部、８は画像の符号化／復号化部、９は音声の符号化／復号化部、１０は符号化画像データと符号化音声データと制御情報を多重化して回線に送出する多重化データ送受信部、１１はホストのシステム制御部、１２は多重化データから制御情報を分離多重化するホストの多重化データ送受信部、１３は記憶するデータの記録装置である。
【００１７】
通信端末１側のカメラ４から入力された動画像は、画像符号化部８でフレーム間予測符号化される。符号化された符号化画像データは、ハンドセット６から入力され、音声符号化部９で符号化された符号化音声データと制御情報等と共に多重化データ送信部１０で多重化され、通信網３を通じてホスト２に伝送される。通信ホスト２側では、通信端末１から送られてきた多重化データを多重化データ受信部１２で受信する。該多重化データ受信部１２では、受信した画像・音声等が多重化されたデータから蓄積パケットデータを生成し、記憶装置１３に転出する。該記憶装置１３では、適当な形のファイルとして、すなわち、画像データに対してはビデオフレーム単位で蓄積する。
【００１８】
記憶されたデータは、ユーザまたはホストからの指示により記憶装置１３から読み出され、ホストの多重化データ送信部１２に送られる。ホストの送信部１２では、システム制御部１１の指示により、蓄積時にそのまま記憶された制御情報を新たな制御情報に書き換え、通信網３を通じて通信端末１に伝送される。該通信端末１では、ホストから送られてきた制御情報を書き換えた多重化データを多重化データ受信部１０で受信する。該多重化データ受信部１０では制御情報と画像データと音声データ等を分離し、制御情報はシステム制御部７に送られる。
【００１９】
また、多重化データ受信部１０で受信された符号化画像データは画像復号化部８に送られ、システム制御部７からの指示に従って、動画像の復号・再生が行われ、再生画像がモニタ５に表示される。分離された音声データは、音声復号化部９で復号・再生され、ハンドセット６から出力される。なお、記憶再生動作時でも回線による通信は常に双方向で行われており、制御情報は回線接続状態では画像データ等の有無に関わらず通信が可能である。
【００２０】
図２は、図１における多重化データ送受信部の受信部の構成図で、図中、１４は受信部、２１は回線データ分離部、２２はＦＥＣの誤り訂正部、２３はビデオフレーム抽出部、２４はパケット生成部である。
回線データ分離部２１は、網から受信される多重化データの分離を行う。ＦＥＣの誤り訂正部２２は、回線データ分離部で分離された画像データのＦＥＣの誤り訂正を行う。ビデオフレーム抽出部２３は、誤り訂正が行われた画像データからビデオフレームの抽出を行う。パケット生成部２４は、画像や音声等のデータからパケットを生成する。
【００２１】
図３（ａ）〜（ｃ）は、図２の受信部のモジュール間の画像データを表した図で、図３（ａ）は、図２中の信号ａに相当し、ＦＥＣの同期を確立するための同期信号とＦＥＣの誤り訂正を行うためのパリティビットや符号化データ量の調整を行うためのフィルビットおよび情報ビットで構成されている。図３（ｂ）は、図２中の信号ｂに相当し、ＦＥＣの誤り訂正が行われ、フィルビット等の余計なデータが取り除かれたものである。図３（ｃ）は、図２中の信号ｃに相当し、ＰＳＣ（フレーム開始符号）ごとに抽出されたビデオフレームである。
【００２２】
図４は、蓄積を行うときのパケット構成図である。
４１は蓄積時の多重化レート、符号化方式及び符号化能力等の情報が明記されたヘッダ情報、４２は画像のデータ長、４３は音声のデータ長、４４は画像のビデオフレーム数、４５は画像のビデオフレームのデータ長とビデオフレームデータ、４６は音声データである。
【００２３】
次に、本発明による蓄積画像再生装置の動作について説明する。
蓄積時には、回線データ分離部２１で、通信網から受信された多重化データを画像や音声等に分離し、画像データはＦＥＣの誤り訂正部２２、音声データはパケット生成部２４に出力する。ＦＥＣの誤り訂正部２２では、図３（ａ）に示す信号の状態の画像データを受信し、ＦＥＣの誤の訂正等を行って図３（ｂ）に示す信号の状態の画像データをビデオフレーム抽出部２３に出力する。該ビデオフレーム抽出部２３では、受信したデータからＰＳＣを探索し、図３（ｃ）に示す信号の状態のデータをパケット生成部２４に出力する。該パケット生成部２４では受信した画像や音声等のデータを図４のパケットフォーマットに従ってパケットを生成し、ヘッダ情報には、多重化レート、符号化方式及び符号化能力等の再生時に必要となる情報を明記し、記憶装置１３に対して出力する。
【００２４】
図５は、図１における多重化データ送受信部の送信部の構成図で、図中、１５は送信部、５１はパケット分解部、５２はフィルビット挿入部、５３はＦＥＣフレーム生成部、５４は回線データ多重化部である。パケット分解部５１は、受信したパケットを画像や音声等のデータに分解する。フィルビット挿入部５２は、パケット分解部から出力される画像データにフィルビットの挿入を行う。ＦＥＣフレーム生成部５３は、フィルビット挿入部から出力される画像データからＦＥＣフレームの生成を行う。回線データ多重化部５４は、ＦＥＣフレーム生成部から出力される画像データとパケット分解部から出力される音声データ等から回線多重化データを生成する。
【００２５】
図６（ａ）〜（ｃ）は、図５の送信部１５のモジュール間の画像データを表した図で、図６（ａ）は図５中の信号ｄに相当し、ビデオフレームデータである。図６（ｂ）は図５中の信号ｅに相当し、フィルビットが挿入されたものである。図６（ｃ）は図５中の信号ｆに相当し、ＦＥＣの同期信号と伝送誤り訂正するためのパリティビット等が付加されたＦＥＣフレームである。
【００２６】
次に、図５に示す送信部の動作について説明する。
再生時には、パケット分解部５１で、記憶装置１３から出力されたパケットを受信する。パケットを受信したパケット分解部５１は、ヘッダ情報を抽出し、システム制御部１１に通知する。該システム制御部１１は、回線データ多重化部５４に対して、図１２に示すＢＡＳ１０４を使用して蓄積時の通信端末の動作モードと再生時の通信端末の動作モードとの整合をとるように指示する。回線データ多重化部５４で動作モードの整合が完了したら、パケット分解部５１では、パケットの分解を行い、画像データをフィルビット挿入部５２に出力し、音声データ等を回線データ多重化部５４に出力する。
【００２７】
フィルビット挿入部５２では、蓄積画像を再生する前に通信端末においてＦＥＣの同期が確立するようにフィルビットを挿入し、ＦＥＣフレーム生成部５３に出力する。該ＦＥＣフレーム生成部５３では、ＦＥＣフレームを生成して回線データ多重化部５４に出力する。回線データ多重化部５４では、画像や音声等のデータを図１２の多重化フォーマットに従って多重化して、回線多重化データを生成し、通信網に送出する。
【００２８】
このように、本発明は、蓄積型の画像通信システムにおいて、再生時に生じる諸問題を解決するために有効なデータ蓄積フォーマットを構築するとともに、蓄積画像をスムーズに速く再生する。すなわち、回線データ分離部２１は、画像や音声等が多重化された入力信号から各種データの分離を行う。誤り訂正部２２は、前記回線データ分離部２１から出力される画像データのＦＥＣの誤り訂正を行う。ビテオフレーム抽出部２３は、前記誤り訂正部２２から出力されるデータからビデオフレームの抽出を行う。パケット生成部２４は、前記ビデオフレーム抽出部２３から出力されるデータと、前記回線データ分離部２１から出力される音声データとからパケットを生成する。記憶装置１３は前記パケット生成部２４から出力されるパケットを蓄積する。これにより、ビデオフレーム単位でデータを蓄積する。
【００２９】
また、パケット分解部５１は、ヘッダ情報を付加して画像や音声等で構成されたパケットを蓄積した記憶装置１３から出力されるパケットの分解を行う。フィルビット挿入部５２は、前記パケット分解部５１から出力される画像データにフィルビットの挿入を行う。ＦＥＣフレーム生成部５３は、前記フィルビット挿入部５２から出力される画像データからＦＥＣフレームを生成する。回線データ多重化部５４は、前記ＦＥＣフレーム生成部５３から出力される画像データと前記パケット分解部５１から出力される音声等のデータから回線多重化データを生成する。これにより、蓄積画像の再生を行う通信端末のＦＥＣの同期を制御する。
【００３０】
図７は、図１における多重化データ送受信部の送信部の他の構成図で、図中、１６は送信部、７１はパケット分解部、７２はフィルビット挿入部、７３はＦＥＣフレーム生成部、７４は回線データ多重化部、７５は情報量監視部である。
パケット分解部７１は、受信したパケットを画像や音声等のデータに分解する。フィルビット挿入部７２は、受信した画像データにフィルビットを挿入する。ＦＥＣフレーム生成部７３は、受信した画像データからＦＥＣフレームを生成する。回線データ多重化部７４は、回線多重化データを生成する。情報量監視部７５は、情報量の監視を行い、必要に応じてフィルビットの挿入を制御する。
【００３１】
図８（ａ）〜（ｃ）は、図７の受信部のモジュール間の画像データを表した図で、図８（ａ）は図７中の信号ｇに相当し、ビデオフレームデータである。図８（ｂ）は図７中の信号ｈに相当し、フィルビットが挿入されたものである。図８（ｃ）は図７中の信号ｉに相当し、ＦＥＣの同期信号と伝送誤りを訂正するためのパリティビット等が付加されたＦＥＣフレームである。
【００３２】
次に、図７に示す送信部の動作について説明する。
再生時には、パケット分解部７１で、記憶装置１３から出力されたパケットを受信する。パケットを受信したパケット分解部７１は、ヘッダ情報を抽出し、システム制御部１１に通知する。該システム制御部１１は、回線データ多重化部７４に対して、図１２に示すＢＡＳ１０４を使用して蓄積時の通信端末の動作モードと再生時の通信端末の動作モードとの整合をとるように指示する。回線データ多重化部７４で動作モードの整合が完了したら、パケット分解部７１ではパケットの分解を行い、画像データをフィルビット挿入部７２と情報量監視部７５に出力し、音声データ等を回線データ多重化部７４に出力する。
【００３３】
前記フィルビット挿入部７２では、情報量監視部の制御に従ってフィルビットを挿入し、ＦＥＣフレーム生成部７３に出力する。該ＦＥＣフレーム生成部７３では、ＦＥＣフレームを生成して回線データ多重化部７４に出力する。該回線データ多重化部７４では、画像や音声等のデータを図１２に示す多重化フォーマットに従って多重化して回線多重化データを生成し、通信網に送出する。
【００３４】
このように、本発明は、蓄積型の画像通信システムにおいて、再生端末でのバッファオーバーフローやバッファアンダーフロー等の発生を防止するものである。すなわち、バッファ分解部７１は、ヘッダ情報を付加して画像や音声等で構成されたパケットを蓄積した蓄積部から出力されるパケットの分解を行う。フィルビット挿入部７２は、前記パケット分解部７１から出力される画像データにフィルビットの挿入を行う。情報量監視部７５は、前記パケット分解部７１から出力される画像データの情報量を監視し、前記フィルビット挿入部７２の制御を行う。ＦＥＣフレーム生成部７３は、前記フィルビット挿入部７２から出力される画像データからＦＥＣフレームを生成する。回線データ多重化部７４は、前記ＦＥＣフレーム生成部７３から出力される画像データと前記パケット分解部７１から出力される音声等のデータから回線多重化データを生成する。これにより、再生時に蓄積画像の情報量を制御する。
【００３５】
図９は、図１の多重化データ送受信部の送信部の更に他の構成図で、図中、７６は伝送速度整合部で、その他、図７と同じ作用をする部分は同一の符号を付してある。
伝送速度整合部７６は、受信した画像データの出力を制御して伝送速度の整合を図る。例えば、蓄積画像が１秒間に１０枚のビデオフレームが蓄積したものならば、再生時の伝送速度に係わらず、１秒間の１０枚のビデオフレームの出力を行う。
【００３６】
図１０（ａ）〜（ｄ）は、図９の送信部のモジュール間の画像データを表した図で、図１０（ａ）は、図９中の信号ｊに相当し、ビデオフレームデータである。図１０（ｂ）は、図９中の信号ｋに相当し、出力が制御されたビデオフレームデータである。図１０（ｃ）は、図９中の信号ｍに相当し、フィルビット挿入されたものである。図１０（ｄ）は、図９中の信号ｎに相当し、ＦＥＣの同期信号と伝送誤りを訂正するためのパリティビット等が付加されたＦＥＣフレームである。
【００３７】
次に、図９に示す送信部の動作について説明する。
再生時には、パケット分解部７１で、記憶装置１３から出力されたパケットを受信する。パケットを受信したパケット分解部７１は、ヘッダ情報を抽出し、システム制御部１１に通知する。該システム制御部１１は、回線データ多重化部７４に対して、図１２に示すＢＡＳ１０４を使用して蓄積時の通信端末の動作モードと再生時の通信端末の動作モードとの整合をとるように指示する。もし、回線データ多重化部７４で動作モードの整合が蓄積時の端末に比べて再生時の端末の方が回線レートが多いことにより行えないとき、最も近い動作モードで接続を行う。接続が完了したら、パケット分解部７１ではパケットの分解を行い、画像データを伝送速度整合部７６に出力する。該伝送速度整合部７６は、受信したデータの出力を制御してフィルビット挿入部７２と情報量監視部７５に出力する。
【００３８】
フィルビット挿入部７２では、情報量監視部７５の制御に従ってフィルビットを挿入し、ＦＥＣフレーム生成部７３に出力する。該ＦＥＣフレーム生成部７３では、ＦＥＣフレームを生成して回線データ多重化部７４に出力する。回線データ多重化部７４では、画像や音声等のデータを図１２に示す多重化フォーマットに従って多重化して回線多重化データを生成し、通信網に送出する。
【００３９】
このように、本発明は、蓄積型の画像通信システムにおいて、蓄積時と再生時の端末の伝送レートが違う場合でも蓄積画像の再生が行える。すなわち、パケット分解部７１は、ヘッダ情報を付加して画像や音声等で構成されたパケットの分解を行う。伝送速度整合部７６は、前記パケット分解部７１から出力される画像データの伝送速度の整合を行う。フィルビット挿入部７２はフィルビットの挿入を行う。情報量監視部７５は情報量を監視し、前記フィルビット挿入部７２の制御を行う。ＦＥＣフレーム生成部７３は、前記フィルビット挿入部７２から出力される画像データからＦＥＣフレームを生成する。回線データ多重化部７４は、前記ＦＥＣフレーム生成部７３から出力される画像データと前記パケット分解部７１から出力される音声等のデータから回線多重化データを生成する。これにより、蓄積時と再生時の端末の伝送レートが違う場合でも蓄積画像の再生が行える。
【００４０】
【発明の効果】
以上の説明から明らかなように、本発明によると、以下のような効果がある。
画像の蓄積をビデオフレーム単位で行っているため、蓄積画像の再生時に従来の装置において発生していた諸問題を解決するために必要な処理を容易に行うことが可能となる。また、蓄積画像の再生を行う場合に、前もってフィルビットで構成されたフィルフレームを送出し、通信端末のＦＥＣの同期が確立してから蓄積画像を送出するため、蓄積画像の再生がスムーズに早く行えるようになる。
【図面の簡単な説明】
【図１】本発明による画像蓄積方法及び蓄積画像再生方法が適用された画像蓄積装置及び蓄積画像再生装置の一実施例を説明するための構成図である。
【図２】図１における多重化データ送受信部の受信部の構成図である。
【図３】図２の受信部におけるモジュール間の画像データの構成図である。
【図４】本発明における蓄積時のパケットフォーマットを示した図である。
【図５】図１における多重化データ送受信部の送信部の構成図である。
【図６】図５の送信部におけるモジュール間の画像データの構成図である。
【図７】図１における多重化データ送受信部の送信部の他の構成図である。
【図８】図７の送信部におけるモジュール間の画像データの構成図である。
【図９】図１における多重化データ送受信部の送信部の更に他の構成図である。
【図１０】図９の送信部におけるモジュール間の画像データの構成図である。
【図１１】従来の多重化データ送受信部の構成図である。
【図１２】従来のデータ多重化フォーマットを示した図である。
【図１３】従来の蓄積時のパケットフォーマットの示した図である。
【符号の説明】
１…通信端末、２…通信ホスト、３…ＩＳＤＮ等の通信網、４…画像入力用のカメラ、５…画像出力用のモニタ、６…音声入出力用のハンドセット、７…端末のシステム制御部、８…画像の符号化／復号化部、９…音声の符号化／復号化部、１０…端末の多重化データ送受信部、１１…ホストのシステム制御部、１２…ホストの多重化データ送受信部、１３…記憶装置、１４…受信部、１５…送信部、１６…送信部、２１…回線データ分離部、２２…ＦＥＣの誤り訂正部、２３…ビデオフレーム抽出部、２４…パケット生成部、５１…パケット分解部、５２…フィルビット挿入部、５３…ＦＥＣフレーム生成部、５４…回線データ多重化部、７１…パケット分解部、７２…フィルビット挿入部、７３…ＦＥＣフレーム生成部、７４…回線データ多重化部、７５…情報量監視部、７６…伝送速度整合部。

Claims (2)

1. 符号化された動画像データ及び符号化された音声データを多重化した多重化データを入力するステップと、
   該入力した多重化データを、符号化された動画像データと符号化された音声データとに分離するステップと、
   該分離された動画像データから、ビデオフレームを単位として符号化されたビデオフレームデータを抽出するステップと、
   該抽出されたビデオフレームデータ及び前記分離された音声データを、パケットのビデオフレームデータ及び音声データとしてパケットを生成するステップと、
   該生成したパケットを蓄積するステップと、
   を有することを特徴とする画像蓄積方法。
2. ビデオフレームを単位として符号化されたビデオフレームデータ及び符号化された音声データが所定の蓄積フォーマットに従って蓄積されたパケットから、符号化されたビデオフレームデータ及び符号化された音声データを分離するステップと、
   該分離されたビデオフレームデータからなる符号化された動画像データと前記分離された音声データとを、再生時の端末で対応可能な多重化フォーマットに従って多重化し、多重化データを生成するステップと、
   該多重化データを出力するステップと、
   を有することを特徴とする蓄積画像再生方法。

Images