JP4147767B2 - 連続情報の記録方法および記録装置 - Google Patents

連続情報の記録方法および記録装置 Download PDF

Info

Publication number
JP4147767B2
JP4147767B2 JP2001386747A JP2001386747A JP4147767B2 JP 4147767 B2 JP4147767 B2 JP 4147767B2 JP 2001386747 A JP2001386747 A JP 2001386747A JP 2001386747 A JP2001386747 A JP 2001386747A JP 4147767 B2 JP4147767 B2 JP 4147767B2
Authority
JP
Japan
Prior art keywords
information
continuous
storage medium
temporary storage
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2001386747A
Other languages
English (en)
Other versions
JP2003189222A (ja
Inventor
健一 田中
壮司 内藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2001386747A priority Critical patent/JP4147767B2/ja
Publication of JP2003189222A publication Critical patent/JP2003189222A/ja
Application granted granted Critical
Publication of JP4147767B2 publication Critical patent/JP4147767B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Television Receiver Circuits (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Description

【0001】
【発明が属する技術分野】
本発明は、音声や画像等の連続情報を圧縮・伸長する機能を含む伝送系を介して配信される前記連続情報を記録する記録方法および記録装置に関し、特に、前記連続情報の連続性を良好に保持し得る記録装置および記録装置に関する。
【0002】
近年、インターネットが急速に拡大するとともに、マルチメディア機能を有する情報通信端末装置等の普及がめざましい。すなわち、インターネットを介して音声や画像等の連続情報をやりとりする通信形態の利用が進んでおり、テレビ電話システムや動画像による遠隔監視システムのような通信アプリケーションにおいては、より安価で取扱い容易なものが求められている。
【0003】
【従来の技術】
インターネットを介して音声や画像等の連続情報をやりとりする通信形態として、インターネットテレビ電話システムを例に従来の技術を説明する。
【0004】
従来のインターネットテレビ電話システムにおいて、画像データと音声データとを別入力で録画する場合、画像データと音声データを別々にファイルに記録しておき、通話終了時に画像ファイルと音声ファイルを合成する方法をとっていた。
【0005】
このような従来の方法では、伝送系や端末性能の影響によって画像データや音声データにゆらぎが発生した場合、各データ間の同期がとれなくなり、ファイルの合成時あるいは再生時に画像と音声がずれることがあった。
【0006】
これを解決するため、ファイルにタイムスタンプなどを記録しておき、ファイル合成時に同期をとるタイムスタンプ方式があった。
【0007】
しかしながら、タイムスタンプ方式では、処理が複雑となる上、送信側および受信側が同じ方式に対応している必要があるといった問題があった。
【0008】
【発明が解決しようとする課題】
したがって、本発明の目的は、音声や画像等の連続情報を圧縮・伸長する機能を含む伝送系を介して配信される前記連続情報を記録する記録方法および記録装置において、上記のような従来の問題を解決し、相手を問わず簡便に同期をとることが可能な連続情報の記録方法および記録装置を提供することである。
【0009】
【課題を解決するための手段】
本発明は、前述の目的を達成するため、以下に述べる構成を有するものである。
【0010】
すなわち、本発明は、伝送系を介して配信される連続情報を記録する記録方法において、前記伝送系を介して配信される前記連続情報を一時記憶媒体に順次格納し、所定の一定周期の間に前記一時記憶媒体へ格納された前記連続情報の全部を、前記一時記憶媒体へ格納する動作の完了を待たずに読出して個別格納ファイルに格納することを特徴とする。
【0011】
さらに、前記一時記憶媒体への格納動作開始から経過した時間に対応する読み出し予定回数を求め、実際の読み出し回数と比較行い、前記実際の読み出し回数が前記求めた読み出し予定回数より少なければ、次の読み出し周期を待たずに一時記憶媒体から連続して連続情報を読み出し、個別格納ファイルに格納する。
【0012】
さらに、前記一時記憶媒体への格納動作開始から経過した時間に対応する連続情報の理論的情報長を求め、前記求めた理論的情報長と前記一時記憶媒体へ格納された連続情報の実際の情報長とを比較し、前記実際の情報長が大きければ理論的情報長との差分を削除し、小さければ理論的情報長との差分を抑制するように連続情報の一部を補完して個別格納ファイルに格納する。
【0013】
さらに、複数種類の連続情報によって作成された複数の前記個別格納ファイルを合成し、合成格納ファイルを作成する。
【0014】
【発明の実施の形態】
以下、図を参照しつつ、本発明の実施の形態を詳述する。
【0015】
図1は、本発明の実施例のシステム構成を示す図である。
【0016】
図1において、10はネットワーク、11,1n,2は画像通信端末装置、21は画像通信端末装置2の音声情報受信部、22は音声情報管理部、23は音声情報記録部、24は画像情報受信部、25は画像情報管理部、26は画像情報記録部、27は音声画像合成部である。
【0017】
複数の画像通信端末装置11,1n,2はそれぞれネットワーク10を介して通信可能に接続されている。画像通信端末装置2は音声情報受信部21、音声情報管理部22、音声情報記録部23、画像情報受信部24、画像情報管理部25、画像情報記録部26、音声画像合成部27を備え、ネットワーク10を介して送受される画像データ及び音声データをそれぞれ別個にファイルへ記録した後、両者を合成し音声付きの画像データを生成する。
【0018】
本発明を実装する画像通信端末装置は、画像データ及び音声データについて、次のように処理を行うことにより、インターネットテレビ電話システムを構成する。
【0019】
すなわち、画像データと音声データは単位時間あたりのデータ量は形式により特定可能である。そこで、録画時間分の保存データ量を保証することで画像データと音声データの録画時間を同期させるように、連続情報の記録方法および記録装置を構成する。画像は、フラッシュ的で且つ画像が瞬間的に止まったり飛んだりしても十分実用に耐える画質となるが、音声は比較的高い連続性が求められるため処理方式を変えている。
≪画像処理方式≫
まず、通信系のゆらぎに対する対策を説明する。
【0020】
図2は、本発明の第1の画像処理方式を説明する図である。図2に示すように、10Hzのフレームレートで通信している場合、受信側では受信すれば録画バッファに書込む。録画バッファから100ms毎に画像データを取り込み、ファイルに書き込む。この時、通信のゆらぎにより必ずしも100msでバッファのデータが書き換わっているとは限らないが、書き換わっていない場合でもバッファに残っている前の画像データをファイルに保存する。同様に1画像分とぶこともあるが、現在のバッファの画像データをファイルに保存する。
【0021】
次に、端末のゆらぎに対する対策を説明する。
【0022】
図3は、本発明の第2の画像処理方式を説明する図である。すなわち、端末のCPU使用率等によりゆらぎが発生し、正確に100ms毎にバッファから読み出せない場合も起こる。これに対して、図3に示すように、録画開始からのシステム時間からバッファから読み出すべき回数を計算し、実際に読み出した回数と比較する。回数が少なければ、次の周期を待たずに連続してバッファから画像データを読み出し、ファイルに書き込む。
≪音声処理方式≫
以下、音声処理における通信系のゆらぎに対する対策を説明する。
【0023】
図4は、本発明の音声処理方式を説明する図である。まず、図4の(イ)に示すように、録音開始直後の音声データをバッファに書き込む。次に音声データを受信すると録音開始からの時間を取得し、音声データのサイズを計算する。そのサイズと先のバッファの音声データサイズを比較し、音声データが大きければ差分を削除し、小さければ無音或いは音声データの最後の部分のデータを補完してファイルに書き込む。これを繰り返す。
【0024】
このように処理することにより、図4(ロ)に示すように、ゆらぎによるずれの少ない音声データのファイルを作成することができる。反対に、上記のような処理を行わない場合は、図4(ハ)に示す斜面部のようにデータがずれてしまう。
【0025】
図5は、本発明の記録方法の各種処理動作を説明する図である。
【0026】
音声情報受信部 21において、ネットワークに接続された画像通信端末装置11から音声情報11Aを受信する(S11)。
【0027】
音声情報管理部 22において、音声情報受信部 21から音声情報11Aを受信し(S12)、録音開始からの時間を算出し、音声情報11Aが大きければ差分を削除し、小さければ音声情報11Aを補完し(S13)、音声情報記録部23に通知する音声情報11Bを作成する(S14)。
【0028】
音声情報記録部 23において、音声情報管理部 22から受信した音声情報11Bを記録媒体に音声情報23Aとして記録する(S15)。
画像情報受信部 24において、ネットワークに接続された画像通信端末装置11から画像情報11Vを受信し(S21)、画像情報管理部25において、画像情報11Vを受信し(S22)、画像情報11Vを録画バッファ 25Bに書き込む(S23)。以後、録画バッファ25Bの内容を周期的に読み取り、画像情報記録部26に通知する画像情報11Wを作成端末の負荷等により録画バッファ25Bから正確な時間に読み出せなかった場合は、読出回数を算出し、次回の周期に連続して読み出す(S24)。
【0029】
画像情報記録部 26において、画像情報管理部 25から受信した画像情報11Wを記録媒体に画像情報26Aとして記録する(S25)。
【0030】
最後に、音声画像合成部 27において、音声情報記録部 23で作成した音声情報23Aと、 画像情報記録部 26で作成した画像情報26Aを合成して音声画像情報27Aを作成する(S30)。
【0031】
以下、図6を参照し、本発明の別の実施例を説明する。
【0032】
図6は、本発明の別の実施例のシステム構成を示す図である。図1と同一または同等の構成については、同一の符号が付されている。以下、図1とは異なる構成について説明する。
【0033】
情報出力部3を実装することにより、受信した音声および画像を画像通信端末装置11で参照することが可能となる。すなわち、音声情報受信部21で受信した音声情報11Aを音声情報管理部22に通知すると同時に音声情報出力部31に通知することにより、 画像通信端末装置で受信した音声を再生することが可能となる。また、画像情報受信部24で受信した画像情報11Vを画像情報管理部25に通知すると同時に画像情報出力部32に通知することにより、 画像通信端末装置で受信した 画像を表示することが可能となる。
【0034】
キャプチャ機器部4を実装することにより、別の画像通信端末装置1nと画像通信端末装置2間の会話を行うことが可能となる (TV電話機能) 。すなわち、音声情報入力部42でキャプチャした音声情報42Aを音声情報送信部41に通知する。
【0035】
次に、音声情報入力部から受信した音声情報42Aを画像通信端末装置11に送信することにより、画像通信端末間で音声通信を行う。また、画像情報入力部44でキャプチャした画像情報44Aを画像情報送信部43に通知する。そして、画像情報入力部から受信した画像情報44Aを画像通信端末装置11に送信することにより、画像通信端末装置間で画像通信を行う。
【0036】
さらに、圧縮処理部5および伸長処理部6を実装することにより、画像交換を行った場合に画像通信端末装置間の通信情報量を削減することが可能となる。
【0037】
圧縮処理部5においては、まず、音声情報入力部42でキャプチャした音声情報42Aを音声情報圧縮部51で圧縮して音声情報送信部41に通知する。次に、画像情報入力部52でキャプチャした画像情報44Aを画像情報圧縮部52で圧縮して画像情報送信部43に通知する。
【0038】
伸長処理部6においては、まず、音声情報受信部21で受信した音声情報11Aを音声情報伸長部61で伸長して音声情報管理部22(音声情報出力部31)に通知する。次に、画像情報受信部24で受信した画像情報24Vを画像情報伸長部62で伸長して画像情報管理部25(画像情報出力部32)に通知する。
【0039】
【発明の効果】
以上、詳述した通り、本発明によれば、音声や画像等の連続情報を圧縮・伸長する機能を含む伝送系を介して配信される前記連続情報を記録する記録方法および記録装置において、上記のような従来の問題を解決し、相手を問わず簡便に同期をとることが可能な連続情報の記録方法および記録装置を提供することが可能となる。
【図面の簡単な説明】
【図1】本発明の実施例のシステム構成を示す図である。
【図2】本発明の第1の画像処理方式を説明する図である。
【図3】本発明の第2の画像処理方式を説明する図である。
【図4】本発明の音声処理方式を説明する図である。
【図5】本発明の記録方法の各種処理動作を説明する図である。
【図6】本発明の別の実施例のシステム構成を示す図である。
【符号の説明】
10:ネットワーク
11,1n,2:画像通信端末装置
21:音声情報受信部、22:音声情報管理部、23:音声情報記録部、24:画像情報受信部、25:画像情報管理部、26:画像情報記録部、27:音声画像合成部
3:情報出力部、31:音声情報出力部、32:画像情報出力部
4:キャプチャ機器部、41:音声情報送信部、42:音声情報入力部、43:画像情報送信部、44:画像情報入力部
5:圧縮処理部、51:音声情報圧縮部、52:画像情報入力部
6:伸長処理部、61:音声情報伸長部、62:画像情報伸長部

Claims (5)

  1. 伝送系を介して配信される連続情報を記録する記録方法において、
    前記伝送系を介して配信される前記連続情報である動画像情報を一時記憶媒体に順次格納し、
    所定の一定周期の間に前記一時記憶媒体へ格納された前記動画像情報の全部を、前記一時記憶媒体へ格納する動作の完了を待たずに読出して個別格納ファイルに格納することを特徴とする連続情報の記録方法。
  2. 前記一時記憶媒体への格納動作開始から経過した時間に対応する読み出し予定回数を求め、実際の読み出し回数と比較行い、前記実際の読み出し回数が前記求めた読み出し予定回数より少なければ、次の読み出し周期を待たずに一時記憶媒体から連続して動画像情報を読み出し、個別格納ファイルに格納することを特徴とする請求項1記載の連続情報の記録方法。
  3. 伝送系を介して配信される前記連続情報である音声情報を一時記憶媒体に順次格納し、
    前記一時記憶媒体への格納動作開始から経過した時間に対応する音声情報の理論的情報長を求め、前記求めた理論的情報長と前記一時記憶媒体へ格納された音声情報の実際の情報長とを比較し、前記実際の情報長が大きければ理論的情報長との差分を削除し、小さければ理論的情報長との差分を抑制するように音声情報の一部を補完して個別格納ファイルに格納することを特徴とする請求項1記載の連続情報の記録方法。
  4. 前記連続情報である動画像情報と音声情報それぞれについて作成された前記個別格納ファイルを合成し、合成ファイルを作成することを特徴とする請求項記載の連続情報の記録方法。
  5. 伝送系を介して配信される連続情報を記録する記録装置において、
    前記伝送系を介して配信される前記連続情報である動画像情報及び音声情報を受信する連続情報受信部と、
    前記連続情報受信部で受信した動画像情報及び音声情報を一時記憶媒体にそれぞれ順次格納する連続情報管理部と、
    所定の一定周期の間に前記一時記憶媒体へ格納された前記動画像情報及び音声情報それぞれ全部を、前記一時記憶媒体へ格納する動作の完了を待たずに読出して動画像情報と音声情報をそれぞれ個別格納ファイルに格納する連続情報記録部と、
    動画像情報と音声情報のそれぞれについて作成された複数の前記個別格納ファイルを合成し、合成格納ファイルを作成する合成部とを有することを特徴とする連続情報の記録装置。
JP2001386747A 2001-12-19 2001-12-19 連続情報の記録方法および記録装置 Expired - Fee Related JP4147767B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001386747A JP4147767B2 (ja) 2001-12-19 2001-12-19 連続情報の記録方法および記録装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001386747A JP4147767B2 (ja) 2001-12-19 2001-12-19 連続情報の記録方法および記録装置

Publications (2)

Publication Number Publication Date
JP2003189222A JP2003189222A (ja) 2003-07-04
JP4147767B2 true JP4147767B2 (ja) 2008-09-10

Family

ID=27595810

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001386747A Expired - Fee Related JP4147767B2 (ja) 2001-12-19 2001-12-19 連続情報の記録方法および記録装置

Country Status (1)

Country Link
JP (1) JP4147767B2 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3840183B2 (ja) * 2003-01-10 2006-11-01 株式会社東芝 情報再生装置及び情報再生方法
CN101714385B (zh) * 2004-05-11 2012-09-26 松下电器产业株式会社 再现装置、程序、再现方法
JP6287315B2 (ja) 2014-02-20 2018-03-07 富士通株式会社 動画像音声同期装置、動画像音声同期方法及び動画像音声同期用コンピュータプログラム
JP7307306B2 (ja) * 2018-12-27 2023-07-12 キヤノンマーケティングジャパン株式会社 情報処理装置、情報処理システム、制御方法、及びプログラム

Also Published As

Publication number Publication date
JP2003189222A (ja) 2003-07-04

Similar Documents

Publication Publication Date Title
JP4949591B2 (ja) ビデオ誤り回復方法
EP2186340B1 (en) A video data reproduction system
JPWO2002023908A1 (ja) ネットワーク動画音声の配信方法、その装置及び動画音声の作成方法
JPH10164492A (ja) 撮像装置
KR100605935B1 (ko) 동영상 촬영 방법
US20100098161A1 (en) Video encoding apparatus and video encoding method
JP2001078166A (ja) 番組提供システム
JP2002199019A (ja) 通信制御装置、通信制御方法、及び通信制御プログラムが記録された記録媒体
JPH0965303A (ja) 映像音声同期方法及び装置
JP4147767B2 (ja) 連続情報の記録方法および記録装置
JP4174960B2 (ja) 信号処理装置及び方法並びにファイル生成方法
JP2003209781A (ja) データ記録装置、データ再生装置、データ記録再生方法及び撮像装置
JP4242581B2 (ja) データ変換装置
JP4254297B2 (ja) 画像処理装置及びその方法並びにそれを用いた画像処理システム及びプログラム
JP7153832B2 (ja) 映像送信システム及び映像送信方法
JP2005117447A (ja) 動画記録装置、動画記録方法および動画記録プログラム
JP4255685B2 (ja) 画像伝送方法および画像伝送装置
JP4892541B2 (ja) 画像伝送方法および画像伝送システム
JP2007043509A (ja) 映像処理装置及び映像処理方法
JP3593741B2 (ja) 映像伝送装置、映像受信装置および映像通信システム
JPH0564144A (ja) 画像メモリ装置
JPH09130263A (ja) データ通信装置、符号化装置及び復号化装置
JP2002369055A (ja) 撮像記録装置
JP2003284007A (ja) 映像撮像装置、映像変換装置及び映像編集装置
JP2004135081A (ja) 画像配信システム、その画像配信システムに利用可能な画像配信装置および方法、記録再生装置および方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20041018

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080220

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080304

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080507

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080603

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080616

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110704

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4147767

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110704

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120704

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120704

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130704

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees