JP2009182540A - Image compressing apparatus, image compression error correcting apparatus, and error correcting system and method using the same - Google Patents
Image compressing apparatus, image compression error correcting apparatus, and error correcting system and method using the same Download PDFInfo
- Publication number
- JP2009182540A JP2009182540A JP2008018446A JP2008018446A JP2009182540A JP 2009182540 A JP2009182540 A JP 2009182540A JP 2008018446 A JP2008018446 A JP 2008018446A JP 2008018446 A JP2008018446 A JP 2008018446A JP 2009182540 A JP2009182540 A JP 2009182540A
- Authority
- JP
- Japan
- Prior art keywords
- image
- data
- feature extraction
- compressed
- compression
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression Of Band Width Or Redundancy In Fax (AREA)
Abstract
Description
本発明は、画像圧縮装置、画像圧縮誤り是正装置、それらを用いる誤り是正システムならびに誤り是正方法に関し、特に画像データの閲覧および画像を蓄積する通信システムに用いられる画像圧縮装置、画像圧縮誤り是正装置、それらを用いる誤り是正システムならびに誤り是正方法に関する。 The present invention relates to an image compression apparatus, an image compression error correction apparatus, an error correction system using the same, and an error correction method, and more particularly to an image compression apparatus and an image compression error correction apparatus used in a communication system for browsing image data and storing images. , An error correction system using the same, and an error correction method.
関連する画像圧縮装置の一例として、空港監視カメラシステム、道路監視システム等の監視画像のデータ圧縮から記録再生に係る装置、あるいは音楽のライブイベント等で十数台のカメラを設置し、同時並列的に全ての映像を録画するようなシステムが存在する。 As an example of a related image compression device, dozens of cameras are installed at the same time in parallel for devices such as airport surveillance camera systems, road surveillance systems, etc. for data compression and recording / playback of surveillance images, or live music events. There are systems that record all video.
これらの関連装置では、静止画像あるいは動画圧縮されたデータをそのまま閲覧するかあるいは蓄積装置で録画していた。 In these related devices, still image or moving image compressed data is browsed as it is or recorded by a storage device.
一方、車両全体の画像と、車両一部の傷画像とを別個に送信することにより、受信側装置において傷画像を確実に受信することが可能な画像伝送システムが特許文献1に記載されている。 On the other hand, Patent Document 1 discloses an image transmission system in which an image of the entire vehicle and a scratch image of a part of the vehicle are separately transmitted so that a scratch image can be reliably received by the reception-side device. .
また、入力画像と参照画像の特徴量同士を比較し、比較結果を出力する画像処理装置が特許文献2に記載されている。 Patent Document 2 describes an image processing apparatus that compares feature amounts of an input image and a reference image and outputs a comparison result.
また、送信画像と受信画像とが不一致の場合、画像を再送する画像入力装置が特許文献3に記載されている。 Further, Patent Document 3 describes an image input device that retransmits an image when a transmitted image and a received image do not match.
画像データ、特に動画圧縮データには連続性がある。したがって、ごく短期間のデータ誤りでも動画再生に支障をきたす場合がある。これに対し、データ誤りが一部のフレームにしか発生しない場合、画像圧縮装置側ではそのようなデータ誤りは軽微と判定され、動画再生が継続される場合もある。 Image data, particularly moving image compressed data, has continuity. Therefore, even a very short data error may hinder the reproduction of moving images. On the other hand, if a data error occurs only in a part of the frames, the data compression apparatus may determine that such a data error is minor and continue to play back the moving image.
一例として、エンコーダチップの熱暴走等によりエンコーダチップ自身の誤動作の検出が困難となる場合や、MPEG(Moving Picture Experts Group)のBピクチャのデータが壊れて、続くフレームの画像データが正しく再現できないデータとして伝送されても、後続のIピクチャで復旧した場合、以降は正常に戻ってしまう場合等である。 As an example, when it is difficult to detect malfunction of the encoder chip due to thermal runaway of the encoder chip, or when the data of the B picture of MPEG (Moving Picture Experts Group) is broken, the image data of the following frame cannot be reproduced correctly Even if it is transmitted as, a case where it recovers with a subsequent I picture, a case where it returns to normal thereafter, and the like.
しかし、このような軽微なデータ誤りであっても、そのデータに重要なシーンが含まれている可能性がある。したがって、軽微なデータ誤りであっても検出されることが望ましい。記録した画像を再生した時点て初めて収録時のエンコーダの誤動作が判明するのでは遅い場合がある。 However, even for such a minor data error, there is a possibility that an important scene is included in the data. Therefore, it is desirable to detect even minor data errors. It may be slow to find out the malfunction of the encoder at the time of recording for the first time when the recorded image is reproduced.
一方、上記特許文献1〜3のいずれにも、元の画像特徴と、受信側装置で受信した圧縮画像データから生成した画像特徴とを受信側装置で比較し、不一致であった場合に是正信号を送信側装置へ送信する誤り是正システムは全く記載されていない。 On the other hand, in any of Patent Documents 1 to 3, the original image feature and the image feature generated from the compressed image data received by the receiving device are compared by the receiving device. Is not described at all.
そこで本発明の目的は、画像圧縮装置にて画像データの誤りを是正することが可能な画像圧縮装置、画像圧縮誤り是正装置、それらを用いる誤り是正システムならびに誤り是正方法を提供することにある。 SUMMARY OF THE INVENTION An object of the present invention is to provide an image compression apparatus, an image compression error correction apparatus, an error correction system using the same, and an error correction method that can correct image data errors in the image compression apparatus.
前記課題を解決するために、本発明による画像圧縮装置は、入力画像の画像特徴を抽出生成する画像特徴抽出生成部と、入力画像を圧縮する画像圧縮部と、前記画像特徴抽出生成部で抽出生成された画像特徴データと前記画像圧縮部で圧縮すれた圧縮画像データとを対向装置へ多重送信する多重送信部とを含み、前記画像圧縮部は前記対向装置から送信された是正信号に基づき画像データの誤りを是正することを特徴とする。 In order to solve the above problems, an image compression apparatus according to the present invention includes an image feature extraction / generation unit that extracts and generates an image feature of an input image, an image compression unit that compresses the input image, and an image feature extraction / generation unit that performs extraction. A multiplexing transmission unit that multiplex-transmits the generated image feature data and the compressed image data compressed by the image compression unit to the opposite device, and the image compression unit is configured to generate an image based on a correction signal transmitted from the opposite device. It is characterized by correcting data errors.
また、本発明による画像圧縮誤り是正装置は、対向装置から送信された入力画像の画像特徴データおよび前記入力画像の圧縮画像データを多重した多重データから、前記画像特徴データおよび前記圧縮画像データを分離する多重分離部と、前記分離された圧縮画像データを伸張する画像伸張部と、前記伸張された画像データの画像特徴を抽出生成する画像特徴抽出生成部と、前記分離された画像特徴データと前記画像特徴抽出生成部で抽出生成された画像特徴データとを比較し不一致であった場合に是正信号を前記対向装置へ送信する是正信号送信部とを含むことを特徴とする。 The image compression error correction apparatus according to the present invention separates the image feature data and the compressed image data from multiplexed image data of the input image and the compressed image data of the input image transmitted from the opposite device. A demultiplexing unit, an image decompressing unit that decompresses the separated compressed image data, an image feature extraction generating unit that extracts and generates image features of the decompressed image data, the separated image feature data, and the A correction signal transmitting unit that compares the image feature data extracted and generated by the image feature extraction and generation unit and transmits a correction signal to the opposite device when there is a mismatch.
また、本発明による誤り是正システムは、前記画像圧縮装置及び前記画像圧縮誤り是正装置を含むことを特徴とする。 An error correction system according to the present invention includes the image compression device and the image compression error correction device.
また、本発明による誤り是正方法は、入力画像の画像特徴を抽出生成する画像特徴抽出生成ステップと、入力画像を圧縮する画像圧縮ステップと、前記画像特徴抽出生成ステップで抽出生成された画像特徴データと前記画像圧縮ステップで圧縮すれた圧縮画像データとを対向装置へ多重送信する多重送信ステップと、前記対向装置から送信された是正信号に基づき画像データの誤りを是正する是正ステップとを含むことを特徴とする。 Further, the error correction method according to the present invention includes an image feature extraction generation step for extracting and generating an image feature of an input image, an image compression step for compressing the input image, and image feature data extracted and generated by the image feature extraction generation step. And a multiplex transmission step that multiplex-transmits the compressed image data compressed in the image compression step to the opposite device, and a correction step that corrects an error in the image data based on a correction signal transmitted from the opposite device. Features.
また、本発明による他の誤り是正方法は、対向装置から送信された入力画像の画像特徴データおよび前記入力画像の圧縮画像データを多重した多重データから、前記画像特徴データおよび前記圧縮画像データを分離する多重分離ステップと、前記分離された圧縮画像データを伸張する画像伸張ステップと、前記伸張された画像データの画像特徴を抽出生成する画像特徴抽出生成ステップと、前記分離された画像特徴データと前記画像特徴抽出生成ステップで抽出生成された画像特徴データとを比較し不一致であった場合に是正信号を前記対向装置へ送信する是正信号送信ステップとを含むことを特徴とする。 In addition, another error correction method according to the present invention separates the image feature data and the compressed image data from multiplexed data obtained by multiplexing the image feature data of the input image and the compressed image data of the input image transmitted from the opposite device. A demultiplexing step, an image decompressing step for decompressing the separated compressed image data, an image feature extracting / generating step for extracting and generating an image feature of the decompressed image data, the separated image feature data, and the And a correction signal transmitting step of comparing the image feature data extracted and generated in the image feature extraction and generation step with a correction signal when there is a mismatch.
また、本発明による別の誤り是正方法は、前記2つの誤り是正方法を含むことを特徴とする。 Further, another error correction method according to the present invention includes the two error correction methods.
また、本発明によるプログラムは、コンピュータに、入力画像の画像特徴を抽出生成する画像特徴抽出生成ステップと、入力画像を圧縮する画像圧縮ステップと、前記画像特徴抽出生成ステップで抽出生成された画像特徴データと前記画像圧縮ステップで圧縮すれた圧縮画像データとを対向装置へ多重送信する多重送信ステップと、前記対向装置から送信された是正信号に基づき画像データの誤りを是正する是正ステップとを実行させるためのプログラムであることを特徴とする。 In addition, the program according to the present invention includes a computer that extracts and generates an image feature of an input image, an image compression step that compresses the input image, and an image feature that is extracted and generated by the image feature extraction and generation step. A multiplex transmission step of multiplex-transmitting the data and the compressed image data compressed in the image compression step to the opposite device, and a correction step of correcting an error in the image data based on a correction signal transmitted from the opposite device. It is the program for this.
また、本発明による他のプログラムは、コンピュータに、対向装置から送信された入力画像の画像特徴データおよび前記入力画像の圧縮画像データを多重した多重データから、前記画像特徴データおよび前記圧縮画像データを分離する多重分離ステップと、前記分離された圧縮画像データを伸張する画像伸張ステップと、前記伸張された画像データの画像特徴を抽出生成する画像特徴抽出生成ステップと、前記分離された画像特徴データと前記画像特徴抽出生成ステップで抽出生成された画像特徴データとを比較し不一致であった場合に是正信号を前記対向装置へ送信する是正信号送信ステップとを実行させるためのプログラムであることを特徴とする。 Further, another program according to the present invention is configured to store the image feature data and the compressed image data from the multiplexed data obtained by multiplexing the image feature data of the input image and the compressed image data of the input image transmitted from the opposite device. A demultiplexing step for separating, an image decompressing step for decompressing the separated compressed image data, an image feature extracting / generating step for extracting and generating image features of the decompressed image data, and the separated image feature data; Comparing the image feature data extracted and generated in the image feature extraction and generation step, and a correction signal transmission step of transmitting a correction signal to the opposing device when there is a mismatch, the program is characterized in that To do.
本発明によれば、画像圧縮装置にて画像データの誤りを是正することが可能となる。 According to the present invention, it is possible to correct an error in image data in an image compression apparatus.
以下、本発明の実施形態について添付図面を参照しながら説明する。 Hereinafter, embodiments of the present invention will be described with reference to the accompanying drawings.
まず、第1実施形態について説明する。図1は本発明の第1実施形態の構成図である。 First, the first embodiment will be described. FIG. 1 is a block diagram of a first embodiment of the present invention.
同図を参照すると、本発明に係る画像圧縮装置1は、入力画像21の画像特徴を抽出生成する画像特徴抽出生成部11と、入力画像21を圧縮する画像圧縮部12と、画像特徴抽出生成部11で抽出生成された画像特徴データ22aと画像圧縮部12で圧縮された圧縮画像データ23とを対向装置へ多重データ25として多重送信する多重送信部13とを含み、画像圧縮部12は対向装置から送信された是正信号24に基づき画像圧縮を是正することを特徴とする。
Referring to FIG. 1, an image compression apparatus 1 according to the present invention includes an image feature extraction / generation unit 11 that extracts and generates an image feature of an input image 21, an
入力画像21には静止画像と動画像の両者が含まれる。 The input image 21 includes both still images and moving images.
画像圧縮装置1は入力画像21を圧縮した圧縮画像データ23と、入力画像21の画像特徴を抽出生成した画像特徴データ22aとを多重し、多重データ25として対向装置へ送信する。 The image compression apparatus 1 multiplexes the compressed image data 23 obtained by compressing the input image 21 and the image feature data 22 a obtained by extracting and generating the image features of the input image 21, and transmits the multiplexed data 25 to the opposite apparatus.
この多重データ25を受信した対向装置は、多重データ25に基づき所定の処理を実行し、是正信号24を画像圧縮装置1へ返送する。 The opposing device that has received the multiplexed data 25 executes a predetermined process based on the multiplexed data 25 and returns a correction signal 24 to the image compression device 1.
この是正信号24を受信した画像圧縮装置1の画像圧縮部12は、是正信号24に基づき画像圧縮を是正する。
The
次に、第1実施形態の動作について説明する。図2は本発明の第1実施形態の動作を示すフローチャートである。 Next, the operation of the first embodiment will be described. FIG. 2 is a flowchart showing the operation of the first embodiment of the present invention.
同図を参照すると、本発明に係る画像圧縮装置1は、画像特徴抽出生成部11にて入力画像21の画像特徴を抽出生成し(ステップS1)、画像圧縮部12にて入力画像21を圧縮し(ステップS2)、多重送信部13にて画像特徴データ22aと圧縮画像データ23とを対向装置へ多重データ25として多重送信する(ステップS3)。次に、対向装置からの是正信号24に基づき画像データの誤りを是正する(ステップS4)。
Referring to the figure, in the image compression apparatus 1 according to the present invention, the image feature extraction / generation unit 11 extracts and generates the image feature of the input image 21 (step S1), and the
以上説明したように、本発明の第1実施形態によれば、画像圧縮装置にて画像データの誤りを是正することが可能となる。これにより、誤ったデータの蓄積を省くことが可能となる。また、今まで人的な是正に頼っていた作業をシステムが自動的に是正するため、時間や費用を節約することが可能となる。 As described above, according to the first embodiment of the present invention, it is possible to correct image data errors in the image compression apparatus. As a result, accumulation of erroneous data can be omitted. In addition, since the system automatically corrects work that has been relied on by human correction, it can save time and money.
次に、第2実施形態について説明する。図3は本発明の第2実施形態の構成図である。 Next, a second embodiment will be described. FIG. 3 is a block diagram of the second embodiment of the present invention.
同図を参照すると、本発明に係る画像圧縮誤り是正装置2は、対向装置から送信された多重データ25から、画像特徴データ22aおよび圧縮画像データ23を分離する多重分離部31と、分離された圧縮画像データ23を伸張する画像伸張部34と、伸張された画像データ27の画像特徴を抽出する画像特徴抽出生成部32と、分離された画像特徴データ22aと画像特徴抽出生成部32で抽出生成された画像特徴データ22bとを比較し、不一致の場合に是正信号24を対向装置へ送信する是正信号送信部33とを含んでいる。
Referring to the figure, the image compression error correction apparatus 2 according to the present invention is separated from the multiplexed data 25 transmitted from the opposite apparatus, and the
多重分離部31は多重データ25を画像特徴データ22aおよび圧縮画像データ23に分離する。画像伸張部34は画像圧縮データ23を伸張する。
The
画像特徴抽出生成部32は画像圧縮装置1の画像特徴抽出生成部11(図1参照)と同様の構成を有しており、したがって画像特徴抽出生成部11と同様の処理を実行する。
The image feature extraction /
したがって、画像伸張部34で伸張された伸張画像データ27は画像特徴抽出生成部32で画像特徴抽出生成部11と同様の処理により特徴抽出がなされ、画像特徴データ22bとして出力される。
Accordingly, the expanded image data 27 expanded by the image expansion unit 34 is subjected to feature extraction by the image feature extraction /
一方、多重分離部31で分離された画像特徴データ22aはもともと、画像圧縮装置1の画像特徴抽出生成部11にて入力画像21から直接(すなわち、画像圧縮部12を介さないで)、特徴抽出されたものであり、画像圧縮部12の処理とは関わりがない。
On the other hand, the image feature data 22a separated by the
他方、多重分離部31で分離された圧縮画像データ23は画像圧縮装置1の画像圧縮部12で圧縮されたものであるため、画像圧縮部12の障害により誤ったデータとなっている可能性がある。
On the other hand, since the compressed image data 23 separated by the
したがって、圧縮画像データ23が誤ったデータである場合には、そのデータを元に特徴抽出した画像特徴データは上記画像特徴データ22aとは異なるデータとなっているはずである。したがって、本発明では、画像特徴抽出生成部32で抽出生成される画像特徴データを画像特徴データ22aと区別して画像特徴データ22bとしている。
Therefore, if the compressed image data 23 is incorrect data, the image feature data extracted based on the data should be different from the image feature data 22a. Therefore, in the present invention, the image feature data extracted and generated by the image feature extraction and
是正信号送信部33は画像特徴データ22aと画像特徴データ22bとを比較し、不一致の場合に是正信号24を対向装置へ送信する。
The correction
なお、比較結果が一致の場合は是正信号24を送信しない。 When the comparison result is coincident, the correction signal 24 is not transmitted.
次に、第2実施形態の動作について説明する。図4は本発明の第2実施形態の動作を示すフローチャートである。 Next, the operation of the second embodiment will be described. FIG. 4 is a flowchart showing the operation of the second embodiment of the present invention.
同図を参照すると、本発明に係る画像圧縮誤り是正装置2は、多重分離部31にて対向装置からの多重データ25を画像特徴データ22aと圧縮画像データ23に分離する(ステップS11)。次に、分離した圧縮画像データ23を画像伸張部34で伸張する(ステップS12)。次に、画像特徴抽出生成部32にて伸張画像データ27の画像特徴を抽出生成する(ステップS13)。次に、分離された画像特徴データ22aと伸張画像データ27から抽出生成された画像特徴データ22bとが比較され、不一致であった場合に是正信号24が対向装置へ送信される(ステップS14)。
Referring to the figure, the image compression error correction device 2 according to the present invention separates the multiplexed data 25 from the opposing device into the image feature data 22a and the compressed image data 23 by the demultiplexing unit 31 (step S11). Next, the separated compressed image data 23 is expanded by the image expansion unit 34 (step S12). Next, the image feature extraction /
以上説明したように、本発明の第2実施形態によれば、受信した圧縮画像データ23に誤りをあるか否かを判定することが可能となる。また、比較結果が一致の場合は是正信号24を送信しない構成であるため、送信データ量および処理時間の節減が可能となる。 As described above, according to the second embodiment of the present invention, it is possible to determine whether or not there is an error in the received compressed image data 23. In addition, when the comparison result is coincident, the correction signal 24 is not transmitted, so that it is possible to reduce the amount of transmission data and the processing time.
次に、第3実施形態について説明する。図5は本発明の第3実施形態の構成図である。 Next, a third embodiment will be described. FIG. 5 is a block diagram of the third embodiment of the present invention.
第3実施形態は誤り是正システムの一例に関する。なお、本実施形態では動画圧縮データの是正システムの一例について説明するが、本発明を静止画圧縮データに適用することも可能である。 The third embodiment relates to an example of an error correction system. In the present embodiment, an example of a correction system for moving image compressed data will be described. However, the present invention can also be applied to still image compressed data.
同図を参照すると、本発明に係る誤り是正システムは、動画圧縮装置41と、動画圧縮誤り是正装置42と、IP(Internet Protocol)網43と、蓄積装置44と、動画伸張装置45と、表示装置46とを含んで構成される。
Referring to the figure, an error correction system according to the present invention includes a moving
動画圧縮装置41は動画映像26を圧縮する。動画圧縮誤り是正装置42は動画映像26の圧縮誤りを是正する。IP網43は通信網の一例である。蓄積装置44は動画圧縮装置41からの動画映像26の圧縮データをIP網43を介して受信し蓄積する。動画伸張装置45は動画圧縮装置41からの動画映像26の圧縮データをIP網43を介して受信し伸張する。表示装置46は動画伸張装置45から伸張後の動画映像26を受信し表示する。
The moving
すなわち、本発明に係る是正システムは、動画圧縮装置41からの映像データをIP網43を介して蓄積し、表示する通信システムに用いられるものであり、これらの処理とともに動画圧縮装置41および動画圧縮誤り是正装置42にて動画圧縮の誤り是正が行われるところに特徴がある。
That is, the correction system according to the present invention is used in a communication system that stores and displays video data from the
次に、動画圧縮装置41の構成について説明する。動画圧縮装置41はアナログ/デジタル変換部(以下“A/D”と表示する)51と、映像フレームメモリ52と、動画圧縮部53と、多重部54と、IP部55と、画像特徴抽出生成部56と、制御部57と、プログラム格納部58とを含んでいる。
Next, the configuration of the moving
制御部57はプログラム格納部58に格納されたプログラムにしたがって各部51〜56および58を制御する。また、プログラム格納部58には図2にフローチャートで示すプログラムが格納されている。
The
次に、動画圧縮装置41の動作について説明する。動画圧縮装置41のA/D51はアナログ動画映像26をデジタル変換し、映像フレームメモリ52で1枚の画像としてデータをデジタル保管する。
Next, the operation of the moving
保管されたデジタルデータは動画圧縮部53と画像特徴抽出生成部56とに渡され、動画圧縮部53ではデジタル画像データを圧縮デジタルデータに変換する。
The stored digital data is transferred to the moving
また、動画圧縮部53はIP部55を介して動画圧縮誤り是正装置42から送信された是正信号75に基づき画像データの誤りを是正する。
The moving
画像特徴抽出生成部56は入力された1枚の画像の特徴を抽出し、デジタルデータ化し、画像比較処理のために同期管理を行い出力する。
The image feature extraction and
動画圧縮部53で変換された圧縮デジタルデータと画像特徴抽出生成部56で抽出されたデジタル特徴データは多重部54で多重化され、IP部55はこの多重データをIP網43で伝送できるプロトコルに変換しIP網43へ出力する。
The compressed digital data converted by the moving
次に、動画圧縮誤り是正装置42の構成について説明する。動画圧縮誤り是正装置42はIP部61と、多重分離部62と、動画伸張部63と、画像特徴抽出生成部64と、画像特徴抽出再生部65と、比較部66と、制御部67と、プログラム格納部68とを含んでいる。
Next, the configuration of the moving image compression
制御部67はプログラム格納部68に格納されたプログラムにしたがって各部61〜66および68を制御する。また、プログラム格納部68には図4にフローチャートで示すプログラムが格納されている。
The
次に、動画圧縮誤り是正装置42の動作について説明する。動画圧縮誤り是正装置42は、IP部61にてIP網43から多重データ(伝送プロトコル)を受信する。
Next, the operation of the moving image compression
多重分離部62は多重データを圧縮デジタルデータと、デジタル特徴データとに分離し、圧縮デジタルデータは動画伸張部63で伸張され、1枚の画像データに復元される。
The
画像特徴抽出生成部64は動画圧縮装置41の画像特徴抽出生成部56と同様の処理を行い、1枚の画像データから画像の特徴を抽出し、デジタルデータ化する。
The image feature extraction and
一方、多重分離部62で分離された残りのデジタル特徴データは、画像特徴抽出再生部65で動画圧縮装置41の画像特徴抽出生成部56で生成した画像に復元再生される。
On the other hand, the remaining digital feature data separated by the
再生されたデジタル特徴データは、画像特徴抽出生成部64でデジタル化されたデータと同じ素材を比較できるように同期管理した上で、比較部66で2つのデータが比較される。
The reproduced digital feature data is synchronously managed so that the same material as the data digitized by the image feature extraction and
比較部66での比較結果が一致の場合はIP部61を介して動画圧縮装置41宛に是正信号75は送信されない。そして、次の動画圧縮是正処理に移り上記と同様の比較を繰り返す。
When the comparison result in the
一方、比較部66での比較結果が不一致であった場合は、比較部66からIP部61を介して動画圧縮装置41宛に是正信号75が送信される。
On the other hand, if the comparison result in the
動画圧縮装置41では動画圧縮誤り是正装置42から是正信号75が送信されると、その是正信号75を動画圧縮部53へ入力する。動画圧縮部53はこの是正信号75に基づき画像データの誤りを是正する。
When the correction signal 75 is transmitted from the moving image compression
以上説明したように、本発明の第3実施形態によれば、動画圧縮装置41は動画圧縮誤り是正装置42から是正信号75を受取ることにより、動画圧縮処理と並行して画像データの誤りを是正することが可能となる。また、最低画像1枚で比較が実行できるため、誤ったデータを送出しても短時間で是正することが可能となる。
As described above, according to the third embodiment of the present invention, the moving
次に、第4実施形態について説明する。図6は本発明の第4実施形態の構成図である。第4実施形態は画像特徴抽出生成部の構成の具体例を示す。 Next, a fourth embodiment will be described. FIG. 6 is a block diagram of the fourth embodiment of the present invention. The fourth embodiment shows a specific example of the configuration of the image feature extraction / generation unit.
同図を参照すると、画像特徴抽出生成部71は画像解像度調整部81を含んでいる。
Referring to the figure, the image feature extraction /
第4実施形態では画像特徴抽出生成部71は画像解像度調整部81にて入力画像データの画像解像度を調整し、調整後の画像データを特徴抽出データとして利用する。
In the fourth embodiment, the image feature extraction /
すなわち、図5の動画圧縮装置41の画像特徴抽出生成部56に画像解像度調整部81が設けられている場合について説明すると、映像フレームメモリ52からの画像データ(動画圧縮部53で圧縮されないデータ)は画像特徴抽出生成部56内の画像解像度調整部81で解像度調整が行われる。この解像度調整された画像データが特徴抽出データとなる。
That is, the case where the image
そして、その解像度調整された画像データは多重部54およびIP部55を解して動画圧縮誤り是正装置42へ入力される。
Then, the resolution-adjusted image data is input to the moving image compression
動画圧縮誤り是正装置42ではIP部61および多重分離部62を介して画像特徴抽出再生部65にて解像度調整された画像データが復元される。
In the moving image compression
一方、動画圧縮誤り是正装置42の画像特徴抽出生成部64でも動画圧縮装置41の画像特徴抽出生成部56と同様の処理が行われ、画像特徴抽出生成部64内の画像解像度調整部81で入力画像データの解像度調整が行われる。
On the other hand, the image feature extraction /
そして、解像度調整された2つの画像データが比較部66で比較される。
Then, the
図6に戻り、一例として、画像特徴抽出生成部71内の画像解像度調整部81は画像解像度を元の画像解像度よりも小さくする。ここで得られた低解像度の画像が元の画像の特徴データとなる。
Returning to FIG. 6, as an example, the image
解像度調整の例として、VGA(video graphics array)の640×480ピクセル解像度をQVGA(quarter VGA)の320×240ピクセルにすることで、データ量を1/4に減少させることができる。また、QQVGAの160×120ピクセルでは、1/16までデータ量を減らすことが可能となる。 As an example of the resolution adjustment, the data amount can be reduced to ¼ by changing the resolution of 640 × 480 pixels of VGA (video graphics array) to 320 × 240 pixels of QVGA (quarter VGA). In addition, with QQVGA 160 × 120 pixels, the data amount can be reduced to 1/16.
特徴抽出は画面特徴を抽出するための仕組みであり、元画像に復元する必要がないのでQQVGA程度の解像度であっても十分に特徴を抽出することが可能となる。 Feature extraction is a mechanism for extracting screen features, and it is not necessary to restore the original image. Therefore, features can be sufficiently extracted even at a resolution of about QQVGA.
なお、特徴抽出生成は上記画像解像度調整の他に、画像内のエッジ、輪郭、線成分の抽出や領域分割、テクスチャ抽出等、様々な抽出生成の適用が可能である。また、元の画像の解像度を調整した後に、これらの他の方法で特徴抽出を行うことも可能である。 In addition to the image resolution adjustment described above, various extraction generations such as edge, contour, and line component extraction, region division, and texture extraction can be applied to the feature extraction generation. It is also possible to perform feature extraction by these other methods after adjusting the resolution of the original image.
以上説明したように、本発明の第4実施形態によれば、画像解像度調整により画像解像度を元の画像解像度よりも小さくすることでデータを小さく生成でき、IP網に乗せるデータ量を少なくし、ネットワーク負荷を軽減することが可能となる。 As described above, according to the fourth embodiment of the present invention, data can be generated smaller by adjusting the image resolution to be smaller than the original image resolution, and the amount of data placed on the IP network can be reduced. Network load can be reduced.
次に、第5実施形態について説明する。第5実施形態については図5を参照する。図5では、動画圧縮装置41と動画圧縮誤り是正装置42とが1台ずつ設けられた是正システムについて説明したが、動画圧縮装置41は1台に限定されるものではなく複数台設けることが可能である。
Next, a fifth embodiment will be described. Refer to FIG. 5 for the fifth embodiment. In FIG. 5, the correction system in which one moving
動画圧縮装置41が複数台存在する是正システムでは、特徴抽出を全ての動画圧縮装置41に対し実行する必要はない。
In the correction system in which a plurality of moving
本実施形態では、1台の動画圧縮誤り是正装置42が複数台の動画圧縮装置41を1台ずつ順々にチェックし、チェック対象となった動画圧縮装置41についてのみ特徴抽出を行う。
In the present embodiment, one moving image compression
以上説明したように、本発明の第5実施形態によれば、抽出生成を比較対象となった動画圧縮装置41についてのみ実行することでIP網43に送出するデータを削減することが可能となる。
As described above, according to the fifth embodiment of the present invention, it is possible to reduce the data to be sent to the IP network 43 by executing extraction generation only for the moving
本発明の動画圧縮をMPEG2、MPEG4,H.264、JPEG(Joint Photographic Experts Group)等の圧縮規格に適用することが可能である。 The moving image compression of the present invention is MPEG2, MPEG4, H.264. It is possible to apply to compression standards such as H.264, JPEG (Joint Photographic Experts Group).
IP網の帯域によっては動画圧縮伸張処理を用いずに、PCM−IM(Pulse Code Modulation−Intensity Modulation),PFM−IM(Pulse Frequency Modulation−IM)方式等の変調伝送を行うシステムに適用することも可能である。 Depending on the bandwidth of the IP network, it may be applied to a system that performs modulation transmission such as PCM-IM (Pulse Code Modulation-Intensity Modulation), PFM-IM (Pulse Frequency Modulation-IM), etc. without using video compression / decompression processing. Is possible.
また、IP網はATM(Asynchronous Transfer Mode)網、SDH(Synchronous Digital Hierarchy)網、デジタル専用線等のWAN(Wide Area Network)回線、ファイバーチャネル等の高速LAN(Local Area Network)、xDSL(x Gidital Subscriber Line)等のアクセスネットワーク、無線LANや携帯電話回線等の無線通信を用いることも可能である。 The IP network is an ATM (Asynchronous Transfer Mode) network, an SDH (Synchronous Digital Hierarchy) network, a WAN (Wide Area Network) network such as a digital leased line, and a high-speed LAN (Local Area Network) network such as a fiber channel. It is also possible to use an access network such as a subscriber line) or wireless communication such as a wireless LAN or a mobile phone line.
1,41 画像圧縮装置
2,42 画像圧縮誤り是正装置
11,32 画像特徴抽出生成部
56,64,71 画像特徴抽出生成部
12 画像圧縮部
13 多重送信部
21 入力画像
22a,22b 画像特徴データ
23 圧縮画像データ
24,75 是正信号
25 多重データ
26 動画映像
27 伸張画像データ
31,62 多重分離部
32 画像特徴抽出生成部
33 是正信号送信部
34 画像伸張部
43 IP網
44 蓄積装置
45 動画伸張装置
46 表示装置
51 アナログ/デジタル変換部(A/D)
52 映像フレームメモリ
53 動画圧縮部
54 多重部
55,61 IP部
57,67 制御部
58,68 プログラム格納部
63 動画伸張部
65 画像特徴抽出再生部
66 比較部
81 画像解像度調整部
DESCRIPTION OF
12 Image compression unit
13 Multiplexer
21 Input image 22a, 22b Image feature data
23 Compressed image data 24,75 Correction signal
25 Multiple data
26 Movie video
27
32 Image feature extraction generator
33 Correction signal transmitter
34 Image expansion unit
43 IP network
44 Storage device
45 Video expansion device
46 Display device
51 Analog / Digital converter (A / D)
52 Video frame memory
53 Video compression part
54
63 Video extension
65 Image feature extraction / playback unit
66 Comparison part
81 Image resolution adjustment unit
Claims (21)
入力画像を圧縮する画像圧縮部と、
前記画像特徴抽出生成部で抽出生成された画像特徴データと前記画像圧縮部で圧縮された圧縮画像データとを対向装置へ多重送信する多重送信部とを含み、
前記画像圧縮部は前記対向装置から送信された是正信号に基づき画像データの誤りを是正することを特徴とする画像圧縮装置。 An image feature extraction and generation unit for extracting and generating image features of the input image;
An image compression unit for compressing the input image;
A multiplex transmission unit that multiplex-transmits the image feature data extracted and generated by the image feature extraction and generation unit and the compressed image data compressed by the image compression unit to the opposite device;
The image compression device, wherein the image compression unit corrects an error in image data based on a correction signal transmitted from the opposite device.
前記分離された圧縮画像データを伸張する画像伸張部と、
前記伸張された画像データの画像特徴を抽出生成する画像特徴抽出生成部と、
前記分離された画像特徴データと前記画像特徴抽出生成部で抽出生成された画像特徴データとを比較し不一致であった場合に是正信号を前記対向装置へ送信する是正信号送信部とを含むことを特徴とする画像圧縮誤り是正装置。 A demultiplexer that separates the image feature data and the compressed image data from multiplexed data obtained by multiplexing the image feature data of the input image and the compressed image data of the input image transmitted from the opposite device;
An image decompression unit for decompressing the separated compressed image data;
An image feature extraction and generation unit for extracting and generating image features of the decompressed image data;
A correction signal transmitting unit that compares the separated image feature data with the image feature data extracted and generated by the image feature extraction and generation unit and transmits a correction signal to the opposite device when there is a mismatch. A featured image compression error correction device.
前記圧縮画像データを伸張する伸張装置と、
前記伸張された画像データを表示する表示装置とを含むことを特徴とする請求項7記載の誤り是正システム。 A storage device for storing the compressed image data of the multiplexed data transmitted from the image compression device according to any one of claims 1 to 3,
A decompression device for decompressing the compressed image data;
The error correction system according to claim 7, further comprising a display device that displays the decompressed image data.
入力画像を圧縮する画像圧縮ステップと、
前記画像特徴抽出生成ステップで抽出生成された画像特徴データと前記画像圧縮ステップで圧縮された圧縮画像データとを対向装置へ多重送信する多重送信ステップと、
前記対向装置から送信された是正信号に基づき画像データの誤りを是正する是正ステップとを含むことを特徴とする誤り是正方法。 An image feature extraction generating step for extracting and generating image features of the input image;
An image compression step for compressing the input image;
Multiplexing step of multiplexing and transmitting the image feature data extracted and generated in the image feature extraction and generation step and the compressed image data compressed in the image compression step to the opposite device;
And a correction step of correcting an error in the image data based on a correction signal transmitted from the opposite apparatus.
前記分離された圧縮画像データを伸張する画像伸張ステップと、
前記伸張された画像データの画像特徴を抽出生成する画像特徴抽出生成ステップと、
前記分離された画像特徴データと前記画像特徴抽出生成ステップで抽出生成された画像特徴データとを比較し不一致であった場合に是正信号を前記対向装置へ送信する是正信号送信ステップとを含むことを特徴とする誤り是正方法。 A demultiplexing step of separating the image feature data and the compressed image data from multiplexed data obtained by multiplexing the image feature data of the input image and the compressed image data of the input image transmitted from the opposite device;
An image expansion step of expanding the separated compressed image data;
An image feature extraction generating step for extracting and generating image features of the decompressed image data;
A correction signal transmitting step of comparing the separated image feature data with the image feature data extracted and generated in the image feature extraction and generation step and transmitting a correction signal to the opposite device when there is a mismatch. Characteristic error correction method.
入力画像を圧縮する画像圧縮ステップと、
前記画像特徴抽出生成ステップで抽出生成された画像特徴データと前記画像圧縮ステップで圧縮された圧縮画像データとを対向装置へ多重送信する多重送信ステップと、
前記対向装置から送信された是正信号に基づき画像データの誤りを是正する是正ステップとを実行させるためのプログラム。 An image feature extraction generating step for extracting and generating image features of the input image in a computer;
An image compression step for compressing the input image;
Multiplexing step of multiplexing and transmitting the image feature data extracted and generated in the image feature extraction and generation step and the compressed image data compressed in the image compression step to the opposite device;
A program for executing a correction step of correcting an error in image data based on a correction signal transmitted from the opposite apparatus.
前記分離された圧縮画像データを伸張する画像伸張ステップと、
前記伸張された画像データの画像特徴を抽出生成する画像特徴抽出生成ステップと、
前記分離された画像特徴データと前記画像特徴抽出生成ステップで抽出生成された画像特徴データとを比較し不一致であった場合に是正信号を前記対向装置へ送信する是正信号送信ステップとを実行させるためのプログラム。 A demultiplexing step of separating the image feature data and the compressed image data from the multiplexed data obtained by multiplexing the image feature data of the input image and the compressed image data of the input image transmitted from the opposite device to a computer;
An image expansion step of expanding the separated compressed image data;
An image feature extraction generating step for extracting and generating image features of the decompressed image data;
Comparing the separated image feature data with the image feature data extracted and generated in the image feature extraction and generation step, and executing a correction signal transmission step of transmitting a correction signal to the opposite device when there is a mismatch Program.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008018446A JP2009182540A (en) | 2008-01-30 | 2008-01-30 | Image compressing apparatus, image compression error correcting apparatus, and error correcting system and method using the same |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008018446A JP2009182540A (en) | 2008-01-30 | 2008-01-30 | Image compressing apparatus, image compression error correcting apparatus, and error correcting system and method using the same |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2009182540A true JP2009182540A (en) | 2009-08-13 |
Family
ID=41036184
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008018446A Pending JP2009182540A (en) | 2008-01-30 | 2008-01-30 | Image compressing apparatus, image compression error correcting apparatus, and error correcting system and method using the same |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2009182540A (en) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05328134A (en) * | 1992-05-15 | 1993-12-10 | Dainippon Screen Mfg Co Ltd | Image data transmission method |
JPH1118086A (en) * | 1997-06-20 | 1999-01-22 | Nippon Telegr & Teleph Corp <Ntt> | Image communication method and system |
JP2001157063A (en) * | 1999-11-24 | 2001-06-08 | Ricoh Co Ltd | Image data encoding and decoding device |
-
2008
- 2008-01-30 JP JP2008018446A patent/JP2009182540A/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05328134A (en) * | 1992-05-15 | 1993-12-10 | Dainippon Screen Mfg Co Ltd | Image data transmission method |
JPH1118086A (en) * | 1997-06-20 | 1999-01-22 | Nippon Telegr & Teleph Corp <Ntt> | Image communication method and system |
JP2001157063A (en) * | 1999-11-24 | 2001-06-08 | Ricoh Co Ltd | Image data encoding and decoding device |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101821145B1 (en) | Video live streaming system | |
US8724912B2 (en) | Method, apparatus, and program for compressing images, and method, apparatus, and program for decompressing images | |
KR20090125236A (en) | Information processing device and method | |
KR20090126176A (en) | Information processing apparatus and method, and program | |
JP3791904B2 (en) | Multi display device | |
CN105516542A (en) | Multichannel video synchronization system based on hardware encoders and synchronization method thereof | |
US10070017B2 (en) | Controlling synchronization between devices in a network | |
JP5172874B2 (en) | Video synchronization apparatus, video display apparatus, video synchronization method, and program | |
CN109417585B (en) | Method, system and computer readable storage medium for image transmission, image compression and image restoration | |
JP4713336B2 (en) | Information synchronization system, information transmission device, information reception device, information synchronization program, information transmission program, and information reception program | |
JP4231236B2 (en) | Video transmission apparatus and method, program, and recording medium | |
JP2009182540A (en) | Image compressing apparatus, image compression error correcting apparatus, and error correcting system and method using the same | |
US7233366B2 (en) | Method and apparatus for sending and receiving and for encoding and decoding a telop image | |
JP4738251B2 (en) | Synchronous automatic adjustment device | |
KR20030082117A (en) | Method for audio/video signal lip-sync controlling in digital broadcasting receiver | |
KR101652095B1 (en) | Realtime remote monitoring and playing system using digital video recoder, and method thereof | |
TWI812003B (en) | Method and system for previewing the image | |
WO2017014054A1 (en) | Transmission device, transmission method, reception device, reception method, and program | |
JP5289376B2 (en) | Video signal transmission device | |
JP4451754B2 (en) | Image data storage method | |
JP4920668B2 (en) | Video transmission device and video transmission method | |
JP2017224928A (en) | Information processing system, information processing unit, information processing method and program | |
US20040268409A1 (en) | System of dynamic video mode switching and method for transmitting the same | |
JP2006115001A (en) | Video image transmission apparatus and video image receiving apparatus | |
CN117278778A (en) | Image processing method, device, splicing controller and image processing system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20101209 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20111028 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20111122 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20120731 |