JPH0514408A - Picture packet processing unit - Google Patents

Abstract

PURPOSE:To prevent fluctuation in picture quality and to utilize an ineffective area of a pattern effectively. CONSTITUTION:A moving picture use high order packet composition means 13 receives a moving picture coding signal, outputs a timing use high order packet signal, generates a moving picture use high order packet signal based on a group synchronizing signal in the unit of blocks resulting from dividing a picture frame into sub frames, and outputs a high order packet to a low order packet composition means 16. A lower packet assembling means 14 allocates either an audio use high order packet signal outputted from an audio use high order packet composition means 14 or an auxiliary high order packet signal outputted from an auxiliary use high order packet composition means 15 to a sub frame equivalent to an ineffective area of the picture frame and outputs a low order packet signal.

Description

【発明の詳細な説明】Detailed Description of the Invention

【０００１】[0001]

【産業上の利用分野】本発明は、例えば非同期転送モー
ド等の実時間性を有する通信を行うパケット交換網を用
いて、画像パケット転送を行う画像パケット処理装置に
関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image packet processing device for performing image packet transfer using a packet switching network for performing communication having real-time property such as asynchronous transfer mode.

【０００２】[0002]

【従来の技術】画像通信分野においては、画像情報を伝
送する場合、画像の発生情報量が膨大であり、かつその
冗長度が大きいため、従来より各種の帯域圧縮伝送方式
あるいは高能率符号化方式が検討されている。図８に、
このような画像符号化送信側装置の構成を示す。図の装
置は、動画像符号化部１と、平滑バッファ部２と、符号
化制御部３とからなる。2. Description of the Related Art In the field of image communication, when image information is transmitted, the amount of generated image information is enormous and the redundancy thereof is large. Therefore, various band compression transmission systems or high efficiency encoding systems have been used. Is being considered. In FIG.
The configuration of such an image coding transmission side device is shown. The apparatus shown in the figure comprises a moving picture coding unit 1, a smoothing buffer unit 2, and a coding control unit 3.

【０００３】動画像符号化部１は、通常のテレビジョン
放送等の動画像信号を入力し、その符号化を行う装置で
あり、平滑バッファ部２は、動画像符号化部１より出力
された動画像符号化信号を平滑し、かつそのバッファメ
モリのオーバフロー／アンダフロー信号を出力する装置
である。符号化制御部３は、平滑バッファ部２より出力
されたオーバフロー／アンダフロー信号を入力し、この
信号に応じて符号化制御信号を生成する装置である。こ
のように構成された画像符号化送信側装置は、動画像符
号化部１に動画像信号が入力されると、動画像符号化部
１は符号化制御部３からの符号化制御信号に基づき動画
像符号化信号を出力する。そして、この動画像符号化信
号は平滑バッファ部２にて平滑化を行い、画像符号化送
信信号として固定レート伝送路に出力される。また、平
滑バッファ部２から出力されるバッファメモリのオーバ
フロー／アンドフロー信号により、符号化制御部３は動
画像符号化部１にフィードバック制御を行い、これによ
って動画像符号化部１は、バッファメモリのオーバフロ
ー／アンダフローの規制を行う。The moving picture coding section 1 is an apparatus for inputting and coding a moving picture signal of a normal television broadcast or the like, and the smoothing buffer section 2 is outputted from the moving picture coding section 1. An apparatus for smoothing a moving image coded signal and outputting an overflow / underflow signal of its buffer memory. The coding control unit 3 is a device that receives the overflow / underflow signal output from the smoothing buffer unit 2 and generates a coding control signal in accordance with this signal. In the image coding transmission side device configured as described above, when the moving image signal is input to the moving image coding unit 1, the moving image coding unit 1 is based on the coding control signal from the coding control unit 3. Outputs a moving image coded signal. Then, the moving image coded signal is smoothed by the smoothing buffer unit 2 and output to the fixed rate transmission line as an image coded transmission signal. In addition, the encoding control unit 3 performs feedback control on the moving image encoding unit 1 according to the overflow / and-flow signal of the buffer memory output from the smoothing buffer unit 2, whereby the moving image encoding unit 1 operates in the buffer memory. Overflow / underflow regulations are regulated.

【０００４】[0004]

【発明が解決しようとする課題】しかしながら、上記の
画像符号化送信側装置では、固定レート伝送に対応して
いるため、例えば、動画像符号化信号の発生情報量が一
時的に増加した場合、平滑バッファ部２のバッファメモ
リでオーバフロー信号が発生して、フィードバック制御
による符号化制御が働く。この制御方法としては、例え
ば量子化ステップを粗くすることにより動画像符号化部
１からの発生情報量を制限する等の方法がある。ところ
が、粗い量子化により、画像の歪みが増大し、画質が劣
化することになる。即ち、画像の画面の活動度による動
画像符号化信号の発生情報量を固定レートに制限してい
るため、画像の歪みが時間的に変動し、画質の変動が発
生するという問題点があった。However, since the above-mentioned image coding transmission side device supports fixed rate transmission, for example, when the amount of generated information of a moving image coded signal temporarily increases, An overflow signal is generated in the buffer memory of the smoothing buffer unit 2, and the coding control by feedback control works. As this control method, for example, there is a method of limiting the amount of information generated from the moving picture coding unit 1 by roughening the quantization step. However, the coarse quantization increases the distortion of the image and deteriorates the image quality. That is, since the generated information amount of the moving image coded signal depending on the activity of the screen of the image is limited to a fixed rate, the distortion of the image temporally fluctuates, and there is a problem that the image quality fluctuates. ..

【０００５】一方、このような問題を解決するための手
法として、近年では高速パケット交換や非同期転送モー
ド（ＡＴＭ：Asynchronous Transfer Mode）が注目され
ている。この高速パケット網、非同期転送モード（ＡＴ
Ｍ）網とは、パケット伝送レートを 1.5Mbps〜 150Mbps
と高速にし、かつ網内の通信プロトコルを簡素化してい
るため、実時間性の必要な音声、画像等の通信が可能と
なる。更に、データを含む各種の情報を全て同一のパケ
ットで統一的に扱うため、マルチメディア通信にも柔軟
に対応することができる。尚、非同期転送モードとは、
ＣＣＩＴＴ（国際電信電話諮問委員会）で命名された高
速パケット交換の転送モードであり、以下、この非同期
転送モード網を含むパケット網を高速パケット網と定義
して説明する。On the other hand, in recent years, high-speed packet switching and Asynchronous Transfer Mode (ATM) have been attracting attention as a method for solving such a problem. This high-speed packet network, asynchronous transfer mode (AT
M) Network means a packet transmission rate of 1.5Mbps to 150Mbps
Since it is faster and the communication protocol in the network is simplified, it is possible to perform communication of voice, image, etc., which requires real time. Further, since all kinds of information including data are handled in the same packet in a unified manner, it is possible to flexibly support multimedia communication. The asynchronous transfer mode is
This is a high-speed packet switching transfer mode named by CCITT (International Telegraph and Telephone Consultative Committee). Hereinafter, a packet network including this asynchronous transfer mode network will be defined and described as a high-speed packet network.

【０００６】また、このような高速パケット網を用いた
画像伝送として、例えば、安田靖彦映像のパケット伝送
テレビジョン学会誌、Vol、４２、No、６、1988年６月
号、第 533〜 537頁に記載されたものがある。この刊行
物には、映像のパケット伝送として、映像信号のバース
ト性と統計的多重化やパケット廃棄対策等が示されてい
る。しかしながら、このような技術においても、未だに
画像パケット伝送は実用化されておらず、上述した固定
レートによる画像伝送の問題点を解決する技術が要望さ
れていた。本発明は、上記の問題点を解決するためにな
されたもので、固定レートによる画質の変動を防止する
ことのできる画像パケット処理装置を提供することを目
的とする。Further, as image transmission using such a high-speed packet network, for example, packet transmission of Yasuhiko Yasuda video, Television Society of Japan, Vol. 42, No. 6, June 1988, pp. 533-537. There is one described in. This publication describes, as packet transmission of video, burstiness of video signals, statistical multiplexing, and packet discard measures. However, even with such a technique, image packet transmission has not yet been put into practical use, and there has been a demand for a technique that solves the above-mentioned problem of image transmission at a fixed rate. The present invention has been made to solve the above problems, and an object of the present invention is to provide an image packet processing device capable of preventing a change in image quality due to a fixed rate.

【０００７】[0007]

【課題を解決するための手段】本発明の画像パケット処
理装置は、実時間の通信を行うパケット交換網を用いた
画像パケット処理装置において、動画像信号を入力し
て、画像フレームをサブフレームに分割したブロック単
位のグループ同期信号を基準として、タイミング用上位
パケット信号を生成すると共に、該タイミング用上位パ
ケット信号に後続する上位パケット信号として、画像フ
レームの有効領域に相当する複数のサブフレーム群に
は、動画像用上位パケット信号を割り当てて上位パケッ
ト信号を出力する動画像用上位パケット組立手段と、音
響符号信号を入力して音響用上位パケット信号を出力す
る音響用上位パケット組立手段と、補助情報を入力して
補助用上位パケット信号を出力する補助用上位パケット
組立手段と、前記動画像用上位パケット信号と、前記音
響用上位パケット信号と、前記補助用パケット信号とを
入力し、かつ、前記音響用上位パケット信号および補助
用パケット信号のうち少なくとも一方の上位パケット信
号を、前記画像フレームの無効領域に相当するサブフレ
ームに割り当て下位パケット信号を出力する下位パケッ
ト組立手段とを備えたことを特徴とするものである。An image packet processing apparatus of the present invention is an image packet processing apparatus using a packet switching network for performing real-time communication, in which a moving image signal is input to convert an image frame into subframes. A higher-order packet signal for timing is generated on the basis of the divided block-unit group synchronization signal, and a plurality of sub-frame groups corresponding to the effective area of the image frame are generated as a higher-order packet signal following the higher-order packet signal for timing. A moving picture upper packet assembling means for allocating a moving picture upper packet signal and outputting a higher packet signal; and a sound upper packet assembling means for receiving a sound code signal and outputting a sound upper packet signal. Auxiliary upper packet assembling means for inputting information and outputting an auxiliary upper packet signal; For inputting the audio upper packet signal, the audio upper packet signal, and the auxiliary packet signal, and at least one of the audio upper packet signal and the auxiliary packet signal is used as the image frame. And a lower-order packet assembling means for outputting a lower-order packet signal assigned to a subframe corresponding to the invalid area of the above.

【０００８】[0008]

【作用】本発明の画像パケット処理装置においては、動
画像用上位パケット組立手段は、動画像符号化信号を入
力し、画像フレームをサブフレームに分割したブロック
単位のグループ同期信号を基準としてタイミング用上位
パケット信号と、画像フレームの有効領域に相当する複
数のサブフレーム群には動画像用上位パケット信号を割
り当てて上位パケット信号を下位パケット組立手段に出
力し、下位パケット組立手段は、音響用上位パケット組
立手段から出力された音響用上位パケット信号または補
助用上位パケット組立手段から出力された補助用上位パ
ケット信号のうち、少なくとも一方のパケット信号を、
画像フレームの無効領域に相当するサブフレームに割り
当てて下位パケット信号を出力する。従って、画質変動
が防止されると共に、画面の無効領域を有効に利用でき
る。In the image packet processing device of the present invention, the moving image upper packet assembling means receives the moving image coded signal and uses the group synchronization signal for each block as a reference for dividing the image frame into sub-frames for timing. The upper packet signal and a plurality of subframe groups corresponding to the effective area of the image frame are assigned to the moving image upper packet signal, and the upper packet signal is output to the lower packet assembling means. At least one of the packet signals of the audio upper packet signal output from the packet assembling means or the auxiliary upper packet signal output from the auxiliary upper packet assembling means,
The lower-order packet signal is output by allocating the sub-frame corresponding to the invalid area of the image frame. Therefore, it is possible to prevent the image quality from changing and to effectively use the invalid area of the screen.

【０００９】[0009]

【実施例】以下、本発明の実施例を図面を用いて詳細に
説明する。図１は本発明の画像パケット処理装置の実施
例を示すブロック図である。図の装置は、動画像符号化
部１１と、音響符号化部１２と、動画像用上位パケット
組立手段１３と、音響用上位パケット組立手段１４と、
補助用上位パケット組立手段１５と、下位パケット組立
手段１６と、パケット伝送制御手段１７とからなる。Embodiments of the present invention will be described in detail below with reference to the drawings. FIG. 1 is a block diagram showing an embodiment of an image packet processing device of the present invention. The apparatus shown in the figure has a moving picture coding unit 11, a sound coding unit 12, a moving picture upper packet assembling unit 13, and a sound upper packet assembling unit 14.
It consists of auxiliary upper packet assembling means 15, lower packet assembling means 16 and packet transmission control means 17.

【００１０】動画像符号化部１１は、動画像信号を入力
し、動画像の高能率符号化方式を用いて画像の冗長度を
帯域圧縮した動画像符号化信号を出力する機能を有して
いる。この高能率符号化方式としては、例えば、フレー
ム内符号化やフレーム間符号化等がある。音響符号化部
１２は、音響信号を入力し、音響の高能率符号化を行う
もので、その方式としては、例えば、適応差分ＰＣＭ等
により帯域圧縮する方法等がある。動画像用上位パケッ
ト組立手段１３は、動画像符号化部１１からの動画像符
号化信号を入力し、画像フレームをサブフレームに分割
したブロック単位のグループ同期信号を基準として、タ
イミング用上位パケット信号を生成すると共に、そのタ
イミング用上位パケット信号に後続する上位パケット信
号として、画像フレームの有効領域に相当する複数のサ
ブフレーム群には、動画像用上位パケット信号を割り当
てるよう上位パケット信号を出力する。音響用上位パケ
ット組立手段１４は、音響符号化部１２からの音響符号
化信号を入力し、音響用上位パケット信号を出力すると
共に、画像フレームの無効領域の相当するサブフレーム
に、音響用上位パケット信号を割り当てるよう上位パケ
ット信号を出力する。また、補助用上位パケット組立手
段１５は、パケットの制御情報等の補助情報を入力し、
補助用上位パケット信号を出力すると共に、画像フレー
ムの無効領域の相当するサブフレームに補助用上位パケ
ット信号を割り当てるよう上位パケット信号を出力す
る。The moving picture coding unit 11 has a function of receiving a moving picture signal and outputting a moving picture coding signal in which the redundancy of the picture is band-compressed by using the high efficiency coding method of the moving picture. There is. Examples of this high-efficiency coding method include intra-frame coding and inter-frame coding. The audio encoding unit 12 inputs an audio signal and performs high-efficiency audio encoding, and as a method thereof, for example, there is a method of band compression by adaptive difference PCM or the like. The moving image upper packet assembling means 13 receives the moving image encoded signal from the moving image encoding unit 11 and uses the block-based group synchronization signal obtained by dividing the image frame into sub-frames as a reference, and the timing upper packet signal. And outputs the upper packet signal so as to allocate the moving image upper packet signal to the plurality of subframe groups corresponding to the effective area of the image frame as the upper packet signal subsequent to the timing upper packet signal. .. The audio upper packet assembling unit 14 receives the audio encoded signal from the audio encoding unit 12, outputs the audio upper packet signal, and outputs the audio upper packet to the corresponding subframe of the invalid region of the image frame. Output the upper packet signal to allocate the signal. The auxiliary high-order packet assembling means 15 inputs auxiliary information such as packet control information,
While outputting the auxiliary high-order packet signal, the high-order packet signal is output so as to allocate the auxiliary high-order packet signal to the corresponding subframe of the invalid area of the image frame.

【００１１】下位パケット組立手段１６は、動画像用上
位パケット信号と、音響用上位パケット信号とおよび補
助用パケット信号とを入力し、画像フレームの無効領域
の相当するサブフレームに、音響用上位パケット信号お
よび補助用上位パケット信号のうち、少なくとも一方の
パケット信号を割り当てて下位パケット信号生成し、こ
れを画像パケット伝送信号として可変レート伝送路に出
力する機能を有している。パケット伝送制御手段１７
は、各上位パケット組立手段１３、１４、１５に対し
て、所定のパケット処理制御を行う機能を有している。The lower packet assembling means 16 inputs the moving image upper packet signal, the sound upper packet signal, and the auxiliary packet signal, and stores the sound upper packet in the corresponding subframe of the invalid region of the image frame. It has a function of allocating at least one of the signal and the auxiliary high-order packet signal to generate a low-order packet signal, and outputting this to the variable rate transmission line as an image packet transmission signal. Packet transmission control means 17
Has a function of performing a predetermined packet processing control on each of the upper packet assembling means 13, 14, 15.

【００１２】次に上記構成のパケット処理装置の動作に
ついて説明する。図２に、動画像、音響、補助およびタ
イミング情報のレイヤ構成の対応関係を示す。即ち、上
位レイヤでは、動画像用上位パケット組立手段１３、音
響用上位パケット組立手段１４および補助用上位パケッ
ト組立手段１５により、それぞれの情報に対応した上位
パケットが構成され、下位レイヤでは、下位パケット組
立手段１６により全ての情報に共通した下位パケットを
構成する。また、同期信号の識別に用いるタイミング情
報も同様のレイヤ構成を有する。Next, the operation of the packet processing device having the above configuration will be described. FIG. 2 shows the correspondence relationship of the layer structure of the moving image, sound, auxiliary and timing information. That is, in the upper layer, the moving image upper packet assembling unit 13, the sound upper packet assembling unit 14, and the auxiliary upper packet assembling unit 15 compose an upper packet corresponding to each information, and in the lower layer, the lower packet. The assembling means 16 constitutes a lower packet common to all information. Also, the timing information used for identifying the synchronization signal has the same layer structure.

【００１３】次に、画像フレームのブロック分割を説明
する。図３に、画像フレームとサブフレームの関係を示
す。ＮＴＳＣテレビジョン信号の場合、１フレーム当り
の水平方向の画素数は８５８、垂直方向のライン数は 5
25である。いま、３２ライン毎に一つのサブフレームを
構成した場合、サブフレーム番号０〜１５は画像の有効
領域であり、最後のサブフレーム番号１６は、垂直帰線
期間に当たるため画像の無効領域である。Next, the block division of the image frame will be described. FIG. 3 shows the relationship between image frames and subframes. For NTSC television signals, the number of pixels in the horizontal direction is 858 and the number of lines in the vertical direction is 5 per frame.
25. If one subframe is formed every 32 lines, subframe numbers 0 to 15 are effective areas of the image, and the last subframe number 16 is an invalid area of the image because it corresponds to the vertical blanking period.

【００１４】図４に、フレーム同期信号、グループ同期
信号および上位パケット信号の関係を示す。即ち、フレ
ーム同期信号（ＦＳＹＮＣ）とグループ同期信号（ＧＳ
ＹＮＣ）は、図３に示したフレームとサブフレーム（Ｇ
ＯＢ０〜１６）の関係から、これを時間軸方向に展開し
た信号である。また、それぞれのサブフレームに対応し
た上位パケット信号は、グループ同期ＧＳ０〜１６の先
頭に同期してタイミング用上位パケットを生成し、かつ
ＧＳ０〜１５の範囲には動画像用上位パケットを割り当
て、ＧＳ１６の範囲には音響用上位パケット信号または
補助用上位パケットを割り当てるよう構成されている。
尚、図中ＨＲは、上位パケットのヘッダを示している。FIG. 4 shows the relationship between the frame sync signal, the group sync signal and the upper packet signal. That is, the frame sync signal (FSYNC) and the group sync signal (GS)
YNC) is the frame and subframe (G) shown in FIG.
OB0 to 16), this is a signal developed in the time axis direction. The upper packet signal corresponding to each sub-frame generates a timing upper packet in synchronization with the head of the group synchronization GS0 to GS16, and assigns a moving image upper packet to the range GS0 to GS16. The upper range packet signal for acoustics or the upper order packet for auxiliary is allocated to the range.
In the figure, HR indicates the header of the upper packet.

【００１５】次に、上位パケットと下位パケットの関係
を説明する。図５に、上位パケットと下位パケットのタ
イミングチャートを示す。ここで、タイミング用上位パ
ケットの長さは、下位パケットのペイロードの長さに等
しくなるよう設定されている。即ち、固定長となった下
位パケットのペイロードの長さにタイミング用上位パケ
ットの長さを等しく設定しておくことにより、下位パケ
ット組立手段１６におけるハードウェアの負担が軽減さ
れる効果がある。また、タイミング用上位パケットに後
続する動画像用上位パケットは可変長パケットであり、
複数の下位パケットのペイロードに分散化処理される。
従って、下位パケットはタイミングセルと複数の動画像
セルとに構成される。尚、図中、ｈｒは下位パケットの
ヘッダを示す。Next, the relationship between the upper packet and the lower packet will be described. FIG. 5 shows a timing chart of the upper packet and the lower packet. Here, the length of the timing upper packet is set to be equal to the length of the lower packet payload. That is, by setting the length of the timing upper packet to be equal to the fixed length of the lower packet payload, the hardware load on the lower packet assembling unit 16 is reduced. Further, the moving image upper packet subsequent to the timing upper packet is a variable length packet,
Distributed processing is performed on the payloads of a plurality of lower packets.
Therefore, the lower packet is composed of a timing cell and a plurality of moving image cells. In the figure, hr indicates the header of the lower packet.

【００１６】次に、上位パケットおよび下位パケットの
フォーマット構成を説明する。図６に、上位パケットの
フォーマット構成を示す。上述したように、タイミング
用上位パケットの長さは下位パケットのペイロードの長
さに等しくなるよう設定されており、そのヘッダはフレ
ーム同期番号（ＦＳ）とＧＳ（グループ同期番号）とか
らなり、また、動画像用、音響用および補助用の上位パ
ケットは、可変長パケットであり、そのヘッダはフレー
ム同期番号（ＦＳ）、グループ同期番号（ＧＳ）および
有効データ長を示す有効バイト長（ＬＢ）で構成されて
いる。ここで、フレーム同期番号は、３０フレーム／Ｓ
の関係からＦＳ０〜２９となっており、また、グループ
同期番号は、上述したようにＧＳ０〜１６となってい
る。Next, the format structure of the upper packet and the lower packet will be described. FIG. 6 shows the format configuration of the upper packet. As described above, the length of the timing upper packet is set to be equal to the length of the lower packet payload, and its header is composed of the frame synchronization number (FS) and GS (group synchronization number). The upper packets for video, audio, and auxiliary are variable-length packets, and their headers are frame synchronization number (FS), group synchronization number (GS), and effective byte length (LB) indicating effective data length. It is configured. Here, the frame synchronization number is 30 frames / S
Therefore, the group synchronization numbers are GS0 to 16 as described above.

【００１７】図７に、下位パケットのフォーマット構成
を示す。下位パケットのヘッダとしては、シーケンス番
号（ＳＮ）と情報タイプ（ＩＴ）を有し、トレイラとし
ては、有効情報長（ＬＩ）と巡回符号（ＣＲＣ）を有
し、かつ上位パケットの情報を分散化して乗せるペイロ
ードを有している。また、下位パケットは６４バイト以
下の固定長パケットであり、例えば、非同期転送モード
網用の下位パケットは４８バイトである。FIG. 7 shows the format structure of the lower packet. The lower packet header has a sequence number (SN) and information type (IT), the trailer has a valid information length (LI) and a cyclic code (CRC), and the upper packet information is decentralized. It has a payload for loading. The lower packet is a fixed-length packet of 64 bytes or less, and for example, the lower packet for the asynchronous transfer mode network is 48 bytes.

【００１８】尚、上記実施例では、１フレームの 525ラ
インを３２ライン毎に分割して１６ブロックに設定した
が、このブロック数に限定されるものではなく、画面の
有効領域に相当する部分に動画像用上位パケット、無効
領域に相当する部分に音響用上位パケットまたは補助用
上位パケットを割り当てるよう構成すれば、上記実施例
と同様の効果を奏する。In the above embodiment, 525 lines of one frame are divided into 32 lines and set to 16 blocks. However, the number of blocks is not limited to this, and a portion corresponding to the effective area of the screen is used. If the audio upper packet or the auxiliary upper packet is assigned to the moving image upper packet and the portion corresponding to the invalid area, the same effect as that of the above embodiment can be obtained.

【００１９】[0019]

【発明の効果】以上説明したように、本発明の画像パケ
ット処理装置によれば、実時間の通信を行うパケット通
信網を用いたパケット送信側装置において、画像のフレ
ームを複数のサブフレームに分割してサブフレーム単位
に動画像情報をパケット処理化して送出するようにした
ので、発生情報量を分散化処理でき、画像の歪みの時間
的変動がなく、画質変動を防止し、パケット通信網の特
性を十分に発揮することができる。また、サブフレーム
の無効領域に音響用上位パケットまたは補助用上位パケ
ットのうちいずれか一方の上位パケットを割り当てるよ
う構成したので、画像のフレーム単位に発生する画面の
無効領域を有効に利用できる効果がある。As described above, according to the image packet processing apparatus of the present invention, in a packet transmitting side apparatus using a packet communication network for performing real-time communication, an image frame is divided into a plurality of subframes. Since the moving image information is packetized and transmitted in units of subframes, the amount of generated information can be distributed, the image distortion does not fluctuate with time, and the image quality fluctuation is prevented. The characteristics can be sufficiently exhibited. Also, since the upper packet of either the audio upper packet or the auxiliary upper packet is assigned to the invalid area of the subframe, it is possible to effectively use the invalid area of the screen generated for each frame of the image. is there.

【図面の簡単な説明】[Brief description of drawings]

【図１】本発明の画像パケット処理装置の構成を示すブ
ロック図である。FIG. 1 is a block diagram showing a configuration of an image packet processing device of the present invention.

【図２】本発明の画像パケット処理装置のレイヤ構成と
各種情報とパケットの対応関係を示す図である。FIG. 2 is a diagram showing a layer configuration of the image packet processing device of the present invention and a correspondence relationship between various information and packets.

【図３】本発明の画像パケット処理装置の画像フレーム
とサブフレームの構成を示す図である。FIG. 3 is a diagram showing a configuration of an image frame and a subframe of the image packet processing device of the present invention.

【図４】本発明の画像パケット処理装置の各種上位パケ
ットのタイミングチャートである。FIG. 4 is a timing chart of various upper packets of the image packet processing device of the present invention.

【図５】本発明の画像パケット処理装置の上位パケット
と下位パケットのタイミングチャートである。FIG. 5 is a timing chart of an upper packet and a lower packet of the image packet processing device of the present invention.

【図６】本発明の画像パケット処理装置の上位パケット
のフォーマット構成を示す図である。FIG. 6 is a diagram showing a format configuration of an upper packet of the image packet processing device of the present invention.

【図７】本発明の画像パケット処理装置の下位パケット
のフォーマット構成を示す図である。FIG. 7 is a diagram showing a format configuration of a lower packet of the image packet processing device of the present invention.

【図８】従来の固定レートの画像符号化送信側装置の構
成を示すブロック図である。FIG. 8 is a block diagram showing a configuration of a conventional fixed rate image coding transmission side apparatus.

【符号の説明】[Explanation of symbols]

１３ 動画像用上位パケット組立手段 １４ 音響用上位パケット組立手段 １５ 補助用上位パケット組立手段 １６ 下位パケット組立手段 １７ パケット伝送制御手段 13 high-order packet assembling means for moving images 14 high-order packet assembling means for audio 15 high-order packet assembling means for auxiliary 16 low-order packet assembling means 17 packet transmission control means

───────────────────────────────────────────────────── フロントページの続き (72)発明者 今井 寛 東京都港区虎ノ門１丁目７番12号 沖電気 工業株式会社内 ─────────────────────────────────────────────────── ─── Continued Front Page (72) Inventor Hiroshi Imai 1-7-12 Toranomon, Minato-ku, Tokyo Oki Electric Industry Co., Ltd.

Claims (1)

【特許請求の範囲】 【請求項１】 実時間の通信を行うパケット交換網を用
いた画像パケット処理装置において、 動画像信号を入力して、画像フレームをサブフレームに
分割したブロック単位のグループ同期信号を基準とし
て、タイミング用上位パケット信号を生成すると共に、
該タイミング用上位パケット信号に後続する上位パケッ
ト信号として、画像フレームの有効領域に相当する複数
のサブフレーム群には、動画像用上位パケット信号を割
り当てて上位パケット信号を出力する動画像用上位パケ
ット組立手段と、 音響符号信号を入力して音響用上位パケット信号を出力
する音響用上位パケット組立手段と、 補助情報を入力して補助用上位パケット信号を出力する
補助用上位パケット組立手段と、 前記動画像用上位パケット信号と、前記音響用上位パケ
ット信号と、前記補助用パケット信号とを入力し、か
つ、前記音響用上位パケット信号および補助用パケット
信号のうち少なくとも一方の上位パケット信号を、前記
画像フレームの無効領域に相当するサブフレームに割り
当て下位パケット信号を出力する下位パケット組立手段
とを備えたことを特徴とする画像パケット処理装置。Claim: What is claimed is: 1. An image packet processing device using a packet switching network for real-time communication, wherein a video signal is input, and an image frame is divided into sub-frames. Generates the upper packet signal for timing based on the signal,
As a high-order packet signal subsequent to the timing high-order packet signal, a high-order packet packet for moving image, which assigns a high-order packet signal for moving image to a plurality of subframe groups corresponding to an effective area of an image frame and outputs the high-order packet signal An assembling means, an acoustic upper packet assembling means for inputting an acoustic code signal and outputting an acoustic upper packet signal, and an auxiliary upper packet assembling means for inputting auxiliary information and outputting an auxiliary upper packet signal, The moving image upper packet signal, the sound upper packet signal, and the auxiliary packet signal are input, and at least one upper packet signal of the sound upper packet signal and the auxiliary packet signal, Assigned to the sub-frame corresponding to the invalid area of the image frame. Image packet processing apparatus characterized by comprising a Tsu preparative assembly means.