JP2006333268A - Image processor - Google Patents
Image processor Download PDFInfo
- Publication number
- JP2006333268A JP2006333268A JP2005156423A JP2005156423A JP2006333268A JP 2006333268 A JP2006333268 A JP 2006333268A JP 2005156423 A JP2005156423 A JP 2005156423A JP 2005156423 A JP2005156423 A JP 2005156423A JP 2006333268 A JP2006333268 A JP 2006333268A
- Authority
- JP
- Japan
- Prior art keywords
- moving image
- display
- data
- image data
- compressed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Pinball Game Machines (AREA)
- Display Devices Of Pinball Game Machines (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
Description
本発明は、所定の圧縮方式でデータ圧縮された複数の圧縮画像データを含む圧縮動画データにもとづく動画像を画像表示手段に再生表示するための画像処理を行う画像処理装置に関する。 The present invention relates to an image processing apparatus for performing image processing for reproducing and displaying a moving image based on compressed moving image data including a plurality of compressed image data data compressed by a predetermined compression method on an image display means.
従来から、MPEGと呼ばれる符号化技術などによる符号化方式でデータ圧縮された圧縮動画データを記憶し、圧縮動画データを伸長した動画データを用いて動画再生を行う画像処理装置が用いられている(例えば、特許文献1参照)。 2. Description of the Related Art Conventionally, an image processing apparatus that stores compressed moving image data compressed by an encoding method such as an encoding technique called MPEG and reproduces moving image using moving image data obtained by expanding the compressed moving image data has been used ( For example, see Patent Document 1).
一般に、Iピクチャ(キーピクチャ、フレーム内符号化ピクチャ)とPピクチャ(前方向予測符号化ピクチャ)のみからなる圧縮動画データ(IP圧縮動画データ)については、動画再生を行う際に各ピクチャを伸長する順番と表示する順番とが一致していることから、例えばPピクチャを伸長するときに参照される前方向のIピクチャの伸長データがそのままピクチャバッファに保持される。 In general, for compressed moving image data (IP compressed moving image data) consisting only of an I picture (key picture, intra-frame encoded picture) and P picture (forward prediction encoded picture), each picture is expanded when the moving image is reproduced. Since the order of display and the order of display match, for example, the decompressed data of the forward I picture referred to when decompressing the P picture is held in the picture buffer as it is.
また、Bピクチャ(双方向予測符号化ピクチャ)を含む圧縮動画データ(IPB圧縮動画データ)については、動画再生を行う際に各ピクチャを伸長する順番と表示する順番とが一致しないことがあるため、例えばBピクチャを伸長するときに参照される前方向のピクチャの伸長データがそのままピクチャバッファに保持されるとともに、そのBピクチャを伸長するときに参照される後方向のピクチャの伸長データが事前にピクチャバッファに保持される。 In addition, for compressed moving image data (IPB compressed moving image data) including B pictures (bidirectional predictive coded pictures), the order in which the pictures are expanded and the order in which the pictures are displayed may not match when performing moving image reproduction. For example, the decompressed data of the forward picture referred to when decompressing the B picture is held in the picture buffer as it is, and the decompressed data of the backward picture referenced when decompressing the B picture is stored in advance. Stored in the picture buffer.
上述したように、従来の画像処理装置では、IP圧縮動画データにもとづいて動画再生を行う際には各ピクチャを表示する1フレーム期間前にそのピクチャの伸長処理を行う必要があり、IPB圧縮動画データにもとづいて動画再生を行う際には各ピクチャを表示する2フレーム期間前にそのピクチャの伸長処理を行う必要があった。このため、IP圧縮動画データとIPB圧縮動画データとが混在する場合、ピクチャの伸長処理を開始するタイミングが動画データの種類によって異なることとなり、動画再生制御における伸長処理の実行タイミングの管理が煩雑であるという問題があった。 As described above, in the conventional image processing apparatus, when reproducing a moving image based on IP compressed moving image data, it is necessary to perform decompression processing of the picture one frame period before displaying each picture. When reproducing a moving image based on data, it is necessary to perform decompression processing of the picture two frame periods before displaying each picture. For this reason, when IP compressed moving image data and IPB compressed moving image data coexist, the timing for starting the picture expansion processing differs depending on the type of moving image data, and management of the execution timing of the expansion processing in moving image reproduction control is complicated. There was a problem that there was.
なお、Bピクチャを含むIPB圧縮動画データは、Bピクチャを含まないIP圧縮動画データと比較して伸長処理の処理負担が大きく、多くの動画データにIPB圧縮動画データを使用する、動画再生制御の制御負担が増大してしまうという問題もあった。 Note that IPB compressed moving image data including a B picture has a larger processing load than the IP compressed moving image data not including a B picture, and uses IPB compressed moving image data for a large amount of moving image data. There was also a problem that the control burden would increase.
そこで、本発明は、IP圧縮動画データとIPB圧縮動画データとを混在して演出に使用する画像処理装置において、動画再生制御における伸長処理の実行タイミングの管理を容易にするとともに、動画再生制御の制御負担を極力軽減させることができる画像処理装置を提供することを目的とする。 Therefore, the present invention makes it easy to manage the execution timing of decompression processing in moving image reproduction control in an image processing apparatus that uses both IP compressed moving image data and IPB compressed moving image data for production, and provides a An object of the present invention is to provide an image processing apparatus capable of reducing the control burden as much as possible.
本発明による画像処理装置は、所定の圧縮方式でデータ圧縮された複数の圧縮画像データを含む圧縮動画データ(例えば、IPムービーデータ、IPBムービーデータ)にもとづく動画像を画像表示手段に再生表示するための画像処理を行う画像処理装置であって、双方向予測符号化により圧縮された双方向圧縮画像データ(例えば、Bピクチャ)を含む第1圧縮動画データ(例えばIPBムービーデータ)と、双方向圧縮画像データを含まない第2圧縮動画データ(例えばIPムービーデータ)とを含む複数の圧縮動画データを記憶する圧縮動画データ記憶手段(例えばCGROM105)と、あらかじめ定められているフレーム期間毎に、圧縮動画データにもとづく動画像を再生表示させるための制御情報(描画指示)を設定する制御情報設定手段(例えばCPU101におけるステップS12〜S21を実行する部分)と、制御情報設定手段により設定された制御情報に含まれる伸長指示に応じて、圧縮動画データに含まれている圧縮画像データを、あらかじめ定められている伸長順番で伸長する伸長処理を行う伸長処理手段(例えばGCL104におけるステップS37を実行する部分)と、制御情報設定手段により設定された制御情報に含まれる表示指示に応じて、伸長処理手段により伸長された画像データにもとづく画像を、あらかじめ定められた表示順番に従ってフレーム期間毎に画像表示手段に順次表示することで、圧縮動画データにもとづく動画像を再生表示する再生表示処理を行う再生表示処理手段(例えばGCL104におけるステップS52を実行する部分)と、圧縮動画データにもとづく動画像を繰り返し連続して再生表示する連続再生表示手段(例えばGCL104におけるステップS37やステップS52の処理を複数のムービーデータについて連続して実行する部分)とを備え、該連続再生表示手段は、第2圧縮動画データのみにもとづく動画像を繰り返し連続して再生表示し(例えば、背景動画を継続的に表示するためにIPムービーデータを繰り返し再生表示する)、制御情報設定手段は、動画像の再生表示を開始させる際に設定する最初の制御情報にて動画像の再生表示に用いる圧縮動画データを指定するとともに(例えばステップS16)、該圧縮動画データを指定した最初の制御情報を設定したフレーム期間から伸長指示を開始し(例えばステップS19)、伸長指示を開始した制御情報を設定したフレーム期間の次のフレーム期間から表示指示を開始し(例えばステップS17,S18)、最初の制御情報にて指定した圧縮動画データが第1圧縮動画データ(例えばIPBムービーデータ)であったときは、双方向圧縮画像データの伸長を指示するための伸長指示が最初になされるフレーム期間以前のフレーム期間(例えば、図10(A)に示すムービーデータであればF3のフレーム期間以前)に設定する制御情報にて、複数回(例えば2回)の伸長指示を行う(例えばステップS19)ことを特徴とする。
An image processing apparatus according to the present invention reproduces and displays a moving image based on compressed moving image data (for example, IP movie data and IPB movie data) including a plurality of compressed image data compressed by a predetermined compression method on an image display means. An image processing apparatus that performs image processing for the first compression moving image data (for example, IPB movie data) including bidirectional compressed image data (for example, B picture) compressed by bidirectional predictive encoding, and bidirectional Compressed moving image data storage means (for example, CGROM 105) for storing a plurality of compressed moving image data including second compressed moving image data (for example, IP movie data) that does not include compressed image data, and compression for each predetermined frame period Control information for setting control information (rendering instructions) for reproducing and displaying moving images based on video data The compressed image data included in the compressed moving image data is preliminarily stored in accordance with the setting means (for example, the part that executes steps S12 to S21 in the CPU 101) and the decompression instruction included in the control information set by the control information setting means. In accordance with a display instruction included in the control information set by the expansion processing means (for example, the part that executes step S37 in the GCL 104) that performs the expansion processing to expand in the predetermined expansion order, and the control information setting means, Playback that performs playback display processing for playing back and displaying a moving image based on compressed video data by sequentially displaying an image based on the image data expanded by the means on the image display means for each frame period in accordance with a predetermined display order Display processing means (for example, a unit that executes step S52 in the GCL 104) ) And continuous playback display means for repeatedly playing back and displaying a moving image based on the compressed moving image data (for example, a portion for performing the processing of step S37 and step S52 in the
伸長処理手段が、伸長処理にて、圧縮画像データを伸長した画像データを複数のフレームバッファのいずれかに記憶させるフレームバッファ記憶処理を行い(例えばステップS37)、制御情報設定手段により設定された制御情報にて指定された動画像の再生表示に用いる圧縮動画データが第1圧縮動画データであるか第2圧縮動画データであるかに応じて伸長処理で用いるフレームバッファの数を決定するフレームバッファ数決定手段(例えばGCL104におけるステップS34を実行する部分)を備え、フレームバッファ数決定手段は、第1圧縮動画データであったときは、第2圧縮動画データであったときよりも多い数に決定する(例えば、ステップS34にてIPムービーデータのときは3個に決定し、IPBムービーデータのときは4個に決定する)ことが望ましい。 The decompression processing means performs a frame buffer storage process in which image data obtained by decompressing the compressed image data in the decompression process is stored in any of a plurality of frame buffers (for example, step S37), and the control set by the control information setting means The number of frame buffers for determining the number of frame buffers used in the decompression process according to whether the compressed moving image data used for reproducing and displaying the moving image designated by the information is the first compressed moving image data or the second compressed moving image data A determination unit (for example, a part for executing step S34 in the GCL 104) is provided, and the frame buffer number determination unit determines that the number of the first compressed moving image data is larger than that of the second compressed moving image data. (For example, in the case of IP movie data in step S34, the number of IP movie data is determined as three. Is determined to four) it is desirable.
伸長処理手段が、伸長処理にて、圧縮画像データを伸長した画像データを複数のフレームバッファのいずれかに記憶させるフレームバッファ記憶処理を行い(例えばステップS37)、制御情報設定手段により設定された制御情報にて指定された動画像の再生表示に用いる圧縮動画データにもとづく当該動画像における画像サイズを判別し、判別結果に応じたサイズの記憶領域をフレームバッファとして設定するフレームバッファ設定手段(例えばGCL104におけるステップS33を実行する部分)を備えていてもよい。 The decompression processing means performs a frame buffer storage process in which image data obtained by decompressing the compressed image data in the decompression process is stored in any of a plurality of frame buffers (for example, step S37), and the control set by the control information setting means Frame buffer setting means (for example, GCL104) that determines an image size in the moving image based on the compressed moving image data used for reproducing and displaying the moving image specified by the information, and sets a storage area having a size corresponding to the determination result as a frame buffer. The portion for executing step S33 in FIG.
制御情報設定手段が、所定のフレーム期間において設定した制御情報にて伸長指示を行ったあと、伸長処理手段が該伸長指示に応じて実行している伸長処理が終了する前に該フレーム期間が終了したときは、次のフレーム期間に設定する制御情報おいて所定のフレーム期間と同一の画像データにもとづく画像を表示させる表示指示を行う(例えばステップS18)ようにしてもよい。 After the control information setting means gives the decompression instruction with the control information set in the predetermined frame period, the frame period ends before the decompression processing executed by the decompression processing means in response to the decompression instruction is finished. In this case, a display instruction for displaying an image based on the same image data as the predetermined frame period in the control information set in the next frame period may be issued (for example, step S18).
圧縮動画データは、該圧縮動画データにもとづく動画における表示物の移動速度が速い部分に、表示物の移動速度が遅い部分と比較してフレーム内符号化により圧縮されたフレーム内圧縮画像データ(例えばIピクチャデータ)を多く用いたデータ構造とされた部分を含むように構成されていてもよい。 The compressed moving image data is a portion of the moving image based on the compressed moving image data where the moving speed of the display object is fast compared to a portion where the moving speed of the display object is low, and is compressed by intra-frame coding (for example, It may be configured to include a portion having a data structure using a large amount of (I picture data).
伸長処理手段は、伸長処理にて、圧縮画像データを伸長した画像データを複数のフレームバッファのいずれかに記憶させるフレームバッファ記憶処理を行い(例えばステップS37)、スプライト画像を表示するためのスプライト画像データを記憶するスプライト画像データ記憶手段(例えばCGROM105)と、制御情報設定手段により設定された制御情報に含まれる画像合成指示に応じて、再生表示処理手段によって圧縮動画データにもとづく動画像の再生表示処理が実行される際に、スプライト画像データ記憶手段からスプライト画像データを読み出してスプライト画像を生成し、圧縮動画データにもとづく動画像における各画像上にスプライト画像を順次合成する合成画像生成手段(例えばGCL104におけるステップS39,S41を実行する部分)と、を備え、制御情報設定手段が、1フレーム期間毎に画像合成指示を含む制御情報を設定し、2フレーム期間毎に伸長指示を含む制御情報を設定する(例えば図14に示す表示制御データに応じて描画指示を行う)ように構成されていてもよい。 The decompression processing means performs a frame buffer storage process for storing the image data obtained by decompressing the compressed image data in any of a plurality of frame buffers in the decompression process (for example, step S37), and a sprite image for displaying a sprite image A sprite image data storage unit (eg, CGROM 105) for storing data, and a reproduction display of a moving image based on the compressed moving image data by a reproduction display processing unit according to an image composition instruction included in the control information set by the control information setting unit When the processing is executed, the sprite image data is read from the sprite image data storage means to generate a sprite image, and the composite image generation means (for example, the sprite image is sequentially synthesized on each image in the moving image based on the compressed moving image data) Step S39 in the GCL104, The control information setting means sets control information including an image compositing instruction for each frame period, and sets control information including a decompression instruction for every two frame periods (for example, FIG. 14 may be configured to perform a drawing instruction according to the display control data shown in FIG.
請求項1記載の発明によれば、連続再生表示手段が、第2圧縮動画データのみにもとづく動画像を繰り返し連続して再生表示し、制御情報設定手段が、動画像の再生表示を開始させる際に設定する最初の制御情報にて動画像の再生表示に用いる圧縮動画データを指定するとともに、該圧縮動画データを指定した最初の制御情報を設定したフレーム期間から伸長指示を開始し、伸長指示を開始した制御情報を設定したフレーム期間の次のフレーム期間から表示指示を開始し、最初の制御情報にて指定した圧縮動画データが第1圧縮動画データであったときは、双方向圧縮画像データの伸長を指示するための伸長指示が最初になされるフレーム期間以前のフレーム期間に設定する制御情報にて、複数回の伸長指示を行うように構成されているので、動画再生制御における伸長処理の実行タイミングの管理を容易にすることができるとともに、動画再生制御の制御負担を極力軽減させることができる。 According to the first aspect of the present invention, the continuous reproduction display means repeatedly reproduces and displays a moving image based only on the second compressed moving image data, and the control information setting means starts the reproduction display of the moving image. The compressed video data to be used for the playback and display of the moving image is designated by the first control information set to, and the decompression instruction is started from the frame period in which the first control information designating the compressed video data is set. When the display instruction is started from the frame period next to the frame period in which the started control information is set, and the compressed moving image data designated by the first control information is the first compressed moving image data, the bidirectional compressed image data Since the control information set in the frame period before the frame period in which the decompression instruction for instructing the decompression is first made, the decompression instruction is performed a plurality of times. It is possible to facilitate the management of the execution timing of expansion processing in the moving image playback control, it can be as much as possible reduce the control load of the video playback control.
請求項2記載の発明では、伸長処理手段が、伸長処理にて、圧縮画像データを伸長した画像データを複数のフレームバッファのいずれかに記憶させるフレームバッファ記憶処理を行い、制御情報設定手段により設定された制御情報にて指定された動画像の再生表示に用いる圧縮動画データが第1圧縮動画データであるか第2圧縮動画データであるかに応じて伸長処理で用いるフレームバッファの数を決定するフレームバッファ数決定手段を備え、フレームバッファ数決定手段は、第1圧縮動画データであったときは、第2圧縮動画データであったときよりも多い数に決定するように構成されているので、動画像の再生表示に用いる圧縮動画データが双方向圧縮画像データを含むか否かに応じて動画再生制御に用いる記憶領域の容量を適切に決定することができる。
In the invention according to
請求項3記載の発明では、伸長処理手段が、伸長処理にて、圧縮画像データを伸長した画像データを複数のフレームバッファのいずれかに記憶させるフレームバッファ記憶処理を行い、制御情報設定手段により設定された制御情報にて指定された動画像の再生表示に用いる圧縮動画データにもとづく当該動画像における画像サイズを判別し、判別結果に応じたサイズの記憶領域をフレームバッファとして設定するフレームバッファ設定手段を備えているので、動画像の再生表示に用いる圧縮動画データにもとづく当該動画像の画像サイズに応じて動画再生制御に用いる記憶領域の容量を適切に決定することができる。
In the invention according to
請求項4記載の発明によれば、制御情報設定手段が、所定のフレーム期間において設定した制御情報にて伸長指示を行ったあと、伸長処理手段が該伸長指示に応じて実行している伸長処理が終了する前に該フレーム期間が終了したときは、次のフレーム期間に設定する制御情報おいて所定のフレーム期間と同一の画像データにもとづく画像を表示させる表示指示を行うように構成されているので、画面のちらつきを防止することができる。 According to the fourth aspect of the present invention, after the control information setting means gives an extension instruction with the control information set in a predetermined frame period, the extension processing means executes in accordance with the extension instruction. When the frame period ends before ending, the display information for displaying an image based on the same image data as the predetermined frame period is provided in the control information set for the next frame period. Therefore, flickering of the screen can be prevented.
請求項5記載の発明では、圧縮動画データが、該圧縮動画データにもとづく動画における表示物の移動速度が速い部分に、表示物の移動速度が遅い部分と比較してフレーム内符号化により圧縮されたフレーム内圧縮画像データを多く用いたデータ構造とされた部分を含むので、画質を維持しつつ、圧縮動画データのデータ量を極力低減させることができる。 According to the fifth aspect of the present invention, the compressed moving image data is compressed by intra-frame coding in a moving image based on the compressed moving image data in a portion where the moving speed of the display object is fast compared to a portion where the moving speed of the display object is slow. Therefore, the data structure of the compressed moving image data can be reduced as much as possible while maintaining the image quality.
請求項6記載の発明では、制御情報設定手段が、1フレーム期間毎に画像合成指示を含む制御情報を設定し、2フレーム期間毎に伸長指示を含む制御情報を設定するように構成されているので、精密な表示を実現しつつ、画像合成に関わる制御負担が重くなることを防止できる。
In the invention described in
以下、本発明の一実施形態を、図面を参照して説明する。
図1は、本発明の一実施形態における画像処理装置100の回路構成例を示すブロック図である。図1には、動画像などの画像を表示する画像表示部を備える画像表示装置120も示されている。なお、画像表示装置120は、画像処理装置100に内蔵されていてもよい。
Hereinafter, an embodiment of the present invention will be described with reference to the drawings.
FIG. 1 is a block diagram illustrating a circuit configuration example of an image processing apparatus 100 according to an embodiment of the present invention. FIG. 1 also shows an
画像処理装置100には、CPU101とともに、画像処理制御用のプログラムや動画像による演出パターン等を記憶するROM102と、ワークメモリとして使用されるRAM103とが搭載されている。なお、ROM102およびRAM103は、CPU101に内蔵されていてもよい。
In addition to the CPU 101, the image processing apparatus 100 includes a ROM 102 that stores an image processing control program, an effect pattern by moving images, and the like, and a
画像表示装置120の表示制御を実行する際に、CPU101は、画像処理制御用のプログラムに応じた描画指示(動画再生させるための制御情報)をGCL(グラフィカル コントローラ LSI)104に与える。GCL104は、描画指示に従って、CGROM105等から必要なデータを読み出す。なお、CGROM105には、後述するムービーデータや、動画像に重畳されて表示されるキャラクタの画像データなどの動画像の表示のために用いられる各種のデータが格納されている。CGROM105は、キャラクタの画像データ等の格納に用いられるため、キャラクタROMと呼ばれることもある。CGROM105に格納されているキャラクタとは、例えば、画像表示装置120に表示される人物、動物、または、文字、図形もしくは記号等からなる画像である。なお、キャラクタには、実写による動画像(映像)や静止画像も含まれる。
When executing display control of the
GCL104は、CPU101からの描画指示に従って、画像表示装置120に画像を表示させるための画像データを生成し、生成した画像データが示す画像を表示させるための画像表示信号として、ビデオ信号(R(赤),G(緑),B(青)信号および同期信号)を画像表示装置120に出力する。
The GCL 104 generates image data for displaying an image on the
画像表示装置120は、例えば、多数の画素(ピクセル)を用いたドットマトリクス方式による画面表示を行う。この実施の形態では、R,G,B信号がそれぞれ8ビットで表される。したがって、画像表示装置120は、GCL104からの画像表示信号に従って、R,G,Bそれぞれが256階調であり、約1670万色の多色表示を行うことができる。なお、R,G,B信号のビット数は8ビット以外のビット数であってもよく、また、R,G,B信号の各ビット数が互いに異なる数であってもよい。
For example, the
画像処理装置100には、CGROM105の他に、SDRAM(シンクロナスDRAM)106等の各種の記憶媒体が備えられている。なお、SDRAM106にはフレームバッファの領域が確保される。また、SDRAM106には、キャラクタのソースデータ、表示色の特定や変更等のために用いられるパレットデータ等の表示画像に関するデータが格納される。ソースデータは画像データであり、元画像のデータという意味でソースデータと表現される。さらに、SDRAM106には、VRAM(ビデオRAM)として使用される領域も確保される。
In addition to the
GCL104は、所定のパレットデータを一時的に保存するためなどに用いられるパレットバッファ107や、所定のCGデータを一時的に保存するためなどに用いられるCGデータバッファ108等の各種の記憶媒体の他、描画制御部109と、画像表示装置120にビデオ信号を出力するための表示信号制御部110と、圧縮動画データの伸長処理を行う動画伸長部111とを含む。
The
表示信号制御部110は、ビデオ信号をDAC(D−A変換回路)112に出力する。DAC112は、表示信号制御部110からのビデオ信号をアナログ信号として画像表示装置120としてのLCD(液晶表示装置)に出力する。
The display
描画制御部109は、例えば、アトリビュート解析部、VRAMアドレス生成部、クリッピング部および半透明輝度変調部を含む。アトリビュート解析部は、キャラクタを描画する際に使用されるパラメータの解析を行う。パラメータには、画像の描画順序、色数、拡大縮小率、パレット番号、座標等を指定するための情報が設定されている。
The
図1に示すように、GCL104の内部には、CGバスとVRAMバスとが設けられている。CGROM105とCGバスとの間には、CGバスインタフェース(CGバスI/F)113が設置されている。CGバスにはCPUI/F114も接続され、CPU101は、CPUI/F114を介して、CGバスに接続されている各部にアクセスすることができる。
As shown in FIG. 1, a CG bus and a VRAM bus are provided in the
具体的には、CPU101は、CGバスに接続されている描画制御レジスタ115にアクセスする。描画制御レジスタ115には、描画制御部109に対するCPU101からの描画指示等のデータが格納される。従って、CPU101は、GCL104に対する描画指示を描画制御レジスタ115に書き込み、GCL104は、CPU101からの描画指示を描画制御レジスタ115を介して受け取る。また、SDRAM106とVRAMバスとの間にはVRAMI/F116が設置されている。なお、動画伸長部111は、VRAMバスを介してSDRAM106に設けられているVRAMにアクセスできるとともに、CGバスを介して描画制御レジスタ115にアクセスすることができる。
Specifically, the CPU 101 accesses the drawing control register 115 connected to the CG bus. The drawing control register 115 stores data such as a drawing instruction from the CPU 101 to the
GCL104は、CPU101からの描画指示に応じて、CGROM105からムービーデータやキャラクタのソースデータを読み出して、VRAMに展開(描画)する。さらに、GCL104は、VRAMに展開された画像データをフレームバッファに格納する。表示信号制御部110は、フレームバッファに格納されている画像データを、ビデオ信号としてDAC112を介して画像表示装置120に出力する。なお、「VRAMに展開」とは、VRAMに書き込むこと、すなわちVRAMに記憶させることを意味する。
In response to a drawing instruction from the CPU 101, the
図2は、CGROM105に記憶されているムービーデータ(ムービー画像を再生するための動画像データ)の例を示す説明図である。図2に示すように、この例では、複数種類のムービーデータがあらかじめCGROM105に格納されている。
FIG. 2 is an explanatory diagram showing an example of movie data (moving image data for reproducing a movie image) stored in the
CGROM105に格納されているムービーデータには、図2(A)に示す複数種類のIPBムービーデータと、図2(B)に示す複数種類のIPムービーデータとが含まれている。すなわち、複数種類のIPBムービーデータと、複数種類のIPムービーデータとがあらかじめ作成されてCGROM105に格納されている。
The movie data stored in the
「IPBムービーデータ」は、Iピクチャ(キーピクチャ、フレーム内符号化ピクチャ)と、Pピクチャ(前方向予測符号化ピクチャ)と、Bピクチャ(双方向予測符号化ピクチャ)とを含む圧縮動画データ(IPB圧縮動画データ)である。また、「IPムービーデータ」は、Iピクチャと、Pピクチャとを含む圧縮動画データである。すなわち、IPムービーデータは、Bピクチャを含まない圧縮動画データ(IP圧縮動画データ)である。 “IPB movie data” is compressed video data (including a I picture (key picture, intra-frame encoded picture), a P picture (forward prediction encoded picture), and a B picture (bidirectional predictive encoded picture)). IPB compressed moving image data). “IP movie data” is compressed moving image data including an I picture and a P picture. That is, the IP movie data is compressed moving image data (IP compressed moving image data) that does not include a B picture.
「Iピクチャ」は、フレーム内符号化ピクチャと呼ばれるピクチャであって、順次表示される画像における前後の画像を用いることなく、単体で伸長されるピクチャを意味する。「Pピクチャ」は、前方向予測符号化ピクチャと呼ばれるピクチャであって、順次表示される画像のうち、自身よりも前に表示される何れかの画像(例えば、IピクチャまたはPピクチャのうち表示順番が前の最も近いピクチャ)を用いて伸長されるピクチャを意味する。「Bピクチャ」は、双方向予測符号化ピクチャと呼ばれるピクチャであって、順次表示される画像のうち前に表示される何れかの画像(例えば、IピクチャまたはPピクチャのうち表示順番が前の最も近いピクチャ)と後に表示されるいずれかの画像(例えば、IピクチャまたはPピクチャのうち表示順番が後の最も近いピクチャ)とを用いて伸長されるピクチャを意味する。 An “I picture” is a picture called an intra-frame coded picture, and means a picture that is expanded by itself without using images before and after sequentially displayed images. A “P picture” is a picture called a forward predictive coded picture, and is one of images that are displayed in front of itself among images that are sequentially displayed (for example, a display of an I picture or a P picture). This means a picture that is decompressed using the closest picture in order. A “B picture” is a picture called a bi-predictive coding picture, and is one of the images displayed before the sequentially displayed image (for example, the display order of the previous one of the I picture or P picture is the previous one). It means a picture that is decompressed using the closest picture) and any of the images displayed later (for example, the closest picture in the display order of the I picture or P picture later).
なお、「Iピクチャ」、「Pピクチャ」、および「Bピクチャ」は、特に言及しない限り、圧縮されている状態の圧縮画像データと伸長された状態の画像データの何れか一方あるいは双方を意味するものとする。また、「ピクチャ」というときには、画像データを意味するときと、画像データにもとづく画像を意味するときと、その双方を意味するときとがある。 Note that “I picture”, “P picture”, and “B picture” mean one or both of compressed image data in a compressed state and image data in a decompressed state unless otherwise specified. Shall. The term “picture” may mean image data, an image based on image data, or both.
図2に示す各ムービーデータは、例えばMPEG2と呼ばれる符号化技術によりデータ圧縮された状態でCGROM105に格納されている。各ムービーデータは、それぞれ、CPU101からの描画指示にもとづいて、GCL104の制御によって、動画像を構成する各画像の圧縮画像データが順次伸長されるとともに、動画像を構成する各画像の画像データがビデオ信号として画像表示装置120に対して順次出力されることで、画像表示装置120に一連の動画像を再生表示するために用いられる。
Each movie data shown in FIG. 2 is stored in the
図2(A)に示すIPBムービーデータのうちムービーデータA1は、動画1用のムービーデータであり、動画1の動画像を再生するためのムービーデータである。同様に、ムービーデータA2〜A7は、それぞれ、動画2〜動画7用のムービーデータであり、動画2〜動画7の動画像を再生するためのムービーデータである。また、ムービーデータA8は、動画8および動画9の前半部分の動画像を再生するためのムービーデータである。そして、ムービーデータA9は動画8の後半部分の動画像を再生するためのムービーデータであり、ムービーデータA10は動画9の後半部分の動画像を再生するためのムービーデータである。すなわち、動画8は、ムービーデータA8とムービーデータA9とが連続して表示されることによって再生され、動画9は、ムービーデータA8とムービーデータA10とが連続して表示されることによって再生される。
Movie data A1 in the IPB movie data shown in FIG. 2A is movie data for
なお、動画1〜9は、それぞれ異なる表示態様の動画像である。ただし、動画8と動画9は、前半部分が同一の表示態様であり、後半部分が異なる表示態様の動画像とされている。また、動画1〜9は、それぞれ、一連の動画像の再生表示によってその動画像による報知内容が完結するものであるとする。具体的には、動画1〜9は、それぞれ、一連の動画像によって所定の演出を行うための演出動画や、一連の動画像によって宣伝や広告を行うための宣伝動画や広告動画などとして用いられる動画である。
The moving
また、図2(B)に示すIPムービーデータのうちムービーデータB1は、背景1用のムービーデータであり、背景1の動画像を再生するためのムービーデータである。同様に、ムービーデータB2〜B5は、それぞれ、背景2〜背景5用のムービーデータであり、背景2〜背景5の動画像を再生するためのムービーデータである。
2B. Movie data B1 in the IP movie data shown in FIG. 2B is movie data for
背景1〜5は、それぞれ異なる表示態様であり、背景画像として用いられる動画像である。なお、上述した動画8,9のように、背景用のムービーデータに、前半部分が同一の表示態様であり、後半部分が異なる表示態様の動画像とされているムービーデータが含まれていてもよい。
また、背景1〜5は、それぞれ、一連の動画像の再生表示によってその動画像による報知内容が完結しないものであるとする。すなわち、背景1〜5は、それぞれ、例えば、例えば風景や景色などを一定期間ただ漫然と表示することで一連の動画像により背景を表示するための背景動画などとして用いられる動画である。なお、背景1〜5のうちのいずれか1つを繰り返し連続的に再生表示することで背景を継続的に表示するようにしてもよいし、背景1〜5のうちの2以上を繰り返し連続的に再生表示することで背景を継続的に表示するようにしてもよい。また、一連の動画像の再生表示によってその動画像による報知内容が完結しないものであれば、背景動画以外の動画であってもよい。このように、繰り返し連続的に再生表示されるムービーデータがIPムービーデータによって生成されCGROM105に格納されることとし、繰り返し連続的に再生表示されるムービーデータとしてはIPムービーデータのみが用いられるようにしているので、動画再生制御の制御負担を極力軽減させることができる。
In addition, it is assumed that the
なお、本例ではIPムービーデータが背景動画のために用いられているが、複数のIPムービーデータによるそれぞれの動画のうち一部または全部が、一連の動画像によって所定の演出を行うための演出動画や、一連の動画像によって宣伝や広告を行うための宣伝動画や広告動画などの、一連の動画像の再生表示によってその動画像による報知内容が完結するものとされていてもよい。 In this example, the IP movie data is used for the background moving image, but some or all of the moving images based on the plurality of IP movie data are used for performing a predetermined effect with a series of moving images. The notification content of the moving image may be completed by reproducing and displaying a series of moving images such as a moving image or a moving image for advertising or advertising using a series of moving images.
図2(A)に示す各ムービーデータは、スプライト画像が合成されることなく単独で再生表示される場合と、スプライト画像が合成されて再生表示される場合がある。また、図2(B)に示す背景用のムービーデータは、図2(A)に示したムービーデータやスプライト画像が合成されて再生表示される。 Each movie data shown in FIG. 2A may be reproduced and displayed independently without combining sprite images, or may be reproduced and displayed after combining sprite images. Also, the background movie data shown in FIG. 2B is reproduced and displayed by combining the movie data and sprite image shown in FIG.
この例では、GCL104は、CPU101からの描画指示にもとづいて、図2に示した複数種類のムービーデータの中からムービー画像演出に使用する所定のムービーデータを選択する。そして、GCL104は、CPU101からの描画指示にもとづいて、選択したムービーデータにもとづく動画像を再生表示するための処理を行う。
In this example, the
なお、上述した各ムービーデータは、例えば、各ムービーデータにもとづく動画における表示物の移動速度が遅い部分と比較して、表示物の移動速度が速い部分にIピクチャを多く用いたデータ構造とされている。このようなデータ構造とされているため、画質を維持しつつ、圧縮動画データのデータ量を極力低減させることができる。 Each movie data described above has, for example, a data structure in which a large number of I pictures are used in a portion where the moving speed of the display object is high compared to a portion where the moving speed of the display object is slow in a moving image based on each movie data. ing. Because of such a data structure, the data amount of the compressed moving image data can be reduced as much as possible while maintaining the image quality.
次に、ROM102に格納される表示制御データについて説明する。
表示制御データは、GCL104に描画制御を実行させ画像表示信号を出力させるための描画指示の内容を決定するために用いられるものである。GCL104は、描画指示に従って、画像表示装置120に動画像を表示させるために、描画制御を実行して画像表示信号を出力する。表示制御データは、再生動画ごとに、すなわち本例では動画1〜9(図2参照)それぞれについて別個に、あらかじめ生成されROM102に格納されているものとする。
Next, display control data stored in the ROM 102 will be described.
The display control data is used to determine the content of a drawing instruction for causing the
図3は、表示制御データの内容の例を示す説明図である。図3には、動画1についての表示制御データ(動画1用表示制御データ)の内容の一部が例示されている。
FIG. 3 is an explanatory diagram showing an example of the contents of the display control data. FIG. 3 illustrates a part of the content of the display control data (moving
表示制御データは、画像表示装置120にてムービー画像を再生するための情報を含む。表示制御データは、どのムービーデータのどのピクチャ(ムービーデータにもとづくムービー画像を構成する1フレーム分の画像)をどのタイミングで伸長・展開するかという情報、各ピクチャをどのタイミングで表示するかという情報、どのピクチャとどのスプライト画像とをどのように合成してどのタイミングで表示するかという情報を含む。そして、このような情報が、1フレーム期間分毎に分割されて設定されたデータがプロセスデータである。表示制御データは、図3に示すように、複数のプロセスデータが使用順に並べられた構造とされている。
The display control data includes information for reproducing a movie image on the
具体的には、ROM102に記憶されている表示制御データには、使用するムービーデータを示す情報、ピクチャの伸長指示を行うことを示す情報、ピクチャの表示指示を行うことを示す情報、使用するムービーデータにもとづく動画像の画像サイズを示す情報、展開モードを示す情報、ムービーデータのフレーム上にスプライト画像を合成するか否かを示す情報、画像表示装置120上に表示するスプライト画像やムービー画像の表示領域の大きさや位置を特定する情報、スプライト画像やムービー画像の拡大・縮小率、スプライト画像やムービー画像の透過率、などの情報を含む。
Specifically, the display control data stored in the ROM 102 includes information indicating movie data to be used, information indicating that a picture is to be decompressed, information indicating that a picture is to be displayed, and a movie to be used Information indicating the image size of the moving image based on the data, information indicating the development mode, information indicating whether or not to synthesize the sprite image on the frame of the movie data, and information on the sprite image or movie image displayed on the
なお、「表示領域の大きさを特定する情報」とは、画像表示装置120の表示画面のうち、スプライト画像やムービー画像をそれぞれ表示する領域のサイズを示す情報を意味する。なお、スプライト画像やムービー画像をそれぞれ表示する領域のサイズは、一連のムービー画像の再生中に変化(拡大、縮小、変形)することがあってもよい。
The “information specifying the size of the display area” means information indicating the size of the area for displaying the sprite image and the movie image on the display screen of the
図3に示すように、動画1用表示制御データにおいて最初に選択されるプロセスデータ(プロセスデータ1)には、表示制御内容として、使用するムービーデータがムービーデータA1であること、使用するムービーデータA1はIPBムービーデータであり展開モード4を使用すること、1つのピクチャの伸長指示を行うこと、さらにもう1つのピクチャの伸長指示を行うことが含まれている。
As shown in FIG. 3, in the process data (process data 1) selected first in the moving
また、プロセスデータ2には、表示制御内容として、1つのピクチャを展開すること、1つのピクチャを表示することが含まれている。プロセスデータ3には、表示制御内容として、スプライト画像A,B,Cの表示を開始すること、各スプライト画像A,B,Cの表示位置・表示サイズなどの表示態様、1つのピクチャを展開すること、1つのピクチャを表示することが含まれている。同様にして、プロセスデータ4以降についても、動画1を再生するための表示制御内容がそれぞれ設定される。本例では、動画1用表示制御データにもとづいてCPU101が描画指示を行い、この描画指示に応じてGCL106が描画制御を行うことで画像表示信号を出力することで、画像表示装置120に動画1が再生表示される。
Further, the
図4は、本例で用いられるフレームバッファの例を示す説明図である。図4(A)では、展開モード3のときに用いられる3つのフレームバッファ0〜2が示されている。図4(B)では、展開モード4のときに用いられる4つのフレームバッファ0〜3が示されている。各フレームバッファは、SDRAM106におけるVRAM領域内に設けられている。本例では、動画像の再生に使用するムービーデータがIPBムービーであるときは展開モード4が選択され、動画像の再生に使用するムービーデータがIPムービーであるときは展開モード3が選択される。
FIG. 4 is an explanatory diagram showing an example of a frame buffer used in this example. In FIG. 4A, three frame buffers 0 to 2 used in the
次に、本例の画像処理装置100の動作について説明する。
図5は、CPU101によって実行されるVブランク割込処理の例を示すフローチャートである。Vブランク割込処理は、この例では、GCL104からのVブランク割込に応じて実行される。Vブランク割込は、画像表示装置120に供給される垂直同期信号の周期と同周期でGCL104が発生する割込である。例えば、画像表示装置120の画面変更周波数(フレーム周波数)が30Hzである場合にはVブランク割込の発生周期は33.3msであり、フレーム周波数が60Hzである場合にはVブランク割込の発生周期は16.7msである。このVブランク割込の発生間隔がフレーム期間となる。例えばVブランク割込の発生周期が33.3msであるときは、フレーム期間も33.3msとなる。
Next, the operation of the image processing apparatus 100 of this example will be described.
FIG. 5 is a flowchart illustrating an example of the V blank interrupt process executed by the CPU 101. In this example, the V blank interrupt process is executed in response to the V blank interrupt from the
Vブランク割込処理において、まず、CPU101は、動画再生中であるか否か判定し(ステップS12)、動画再生中でなければ動画再生を開始するか否か判定する(ステップS13)。なお、動画再生中であるか否かは、例えばRAM103に格納されている動画再生中フラグの状態によって判定される。
In the V blank interruption process, first, the CPU 101 determines whether or not a moving image is being reproduced (step S12). If not, the CPU 101 determines whether or not to start the moving image reproduction (step S13). Whether or not a moving image is being reproduced is determined, for example, based on the state of a moving image reproducing flag stored in the
ステップS13では、あらかじめ定められている動画再生開始条件が成立したときに、動画再生を開始すると判定される。動画再生開始条件は、例えば、画像処理装置100のユーザからの再生指示操作(例えば装置100に備えられている入力装置による再生指示操作など)があったとき、あらかじめ定められている動画再生時刻が到来したとき、あるいは、前回の動画再生が終了したときなどに成立するものとすればよい。 In step S13, it is determined to start moving image reproduction when a predetermined moving image reproduction start condition is satisfied. The moving image reproduction start condition is, for example, when a reproduction instruction operation (for example, a reproduction instruction operation by an input device provided in the apparatus 100) from the user of the image processing apparatus 100 is determined, It may be established when it arrives or when the previous video playback ends.
動画再生を開始すると判定した場合には、CPU101は、動画再生中フラグをセットしたあと、あらかじめ定められている動画選択条件に従って、再生する動画の種類を選択する(ステップS14)。本例では、図2に示す動画1〜9の中から、再生する1つの動画を選択する。動画選択条件は、例えば、画像処理装置100のユーザからの再生指示操作の指示内容に従うこと、あらかじめ定められた再生順序に従うこと、乱数抽選によりランダムに決定することなどとするようにすればよい。
If it is determined to start moving image playback, the CPU 101 sets the moving image playback flag, and then selects the type of moving image to be played in accordance with a predetermined moving image selection condition (step S14). In this example, one moving image to be reproduced is selected from the moving
再生する動画を選択すると、CPU101は、選択した動画に対応する表示制御データをROM102からRAM103に読み出す(ステップS15)。次いで、CPU101は、読み出した表示制御データにおけるプロセスデータ1を参照し、再生する動画などの指定を行うとともに、伸長指示の有無およびその回数、表示指示の有無を確認する(ステップS16)。具体的には、CPU101は、描画指示(動画再生させるための制御情報)の一部として再生する動画(例えば動画A1)を示すデータと、その動画がIPBムービーデータであるかIPムービーデータであるかを示すデータと、その動画の動画サイズを示すデータと、その動画の展開モードを示すデータとを描画制御レジスタ115に書き込むとともに、伸長指示を行うか否か、伸長指示を行う場合にはその伸長指示の回数、表示指示を行うか否かを確認する。そして、ステップS18に移行する。
When a moving image to be reproduced is selected, the CPU 101 reads display control data corresponding to the selected moving image from the ROM 102 to the RAM 103 (step S15). Next, the CPU 101 refers to the
ステップS12にて動画再生中であると判定した場合には、CPU101は、現在用いられているプロセスデータの次のプロセスデータを参照し、再生中の動画の再生態様の変更(例えば画像サイズの変更)の指定を行うとともに、伸長指示の有無およびその回数、表示指示の有無を確認する(ステップS17)。なお、参照したプロセスデータが動画再生の終了を示すものであった場合には、動画再生中フラグをリセットする。そして、ステップS18に移行する。 If it is determined in step S12 that the moving image is being reproduced, the CPU 101 refers to the process data next to the currently used process data, and changes the reproduction mode of the moving image being reproduced (for example, changes in the image size). ), And the presence / absence and number of decompression instructions and the presence / absence of display instructions are confirmed (step S17). If the referenced process data indicates the end of moving image reproduction, the moving image reproducing flag is reset. Then, the process proceeds to step S18.
次いで、CPU101は、参照したプロセスデータ(ステップS16またはステップS17にて参照したプロセスデータ)に表示指示を行うことが含まれていれば、プロセスデータの設定内容に応じて表示指示を行う(ステップS18)。具体的には、CPU101は、描画指示(動画再生させるための制御情報)の一部として、表示指示を描画制御レジスタ115に書き込む。なお、ステップS18では、前回のフレーム期間で行った伸長指示にもとづく伸長処理が完了したことを示す伸長完了信号をGCL104から受信していなければ、プロセスデータの設定内容にもとづいて、前回のフレーム期間で行った伸長指示と同じ内容の表示指示を行う。すなわち、CPU101は、所定のフレーム期間にて伸長指示を行ったあと、その伸長指示に応じてGCL104が実行している伸長処理が終了する前にそのフレーム期間が終了したときは、次のフレーム期間にて前回のフレーム期間のときと同一の表示指示を行い、同一の画像データにもとづく画像を画像表示装置120に表示させるようにする。
Next, if the referred process data (the process data referred to in step S16 or step S17) includes a display instruction, the CPU 101 issues a display instruction according to the set content of the process data (step S18). ). Specifically, the CPU 101 writes a display instruction in the drawing control register 115 as part of a drawing instruction (control information for reproducing a moving image). In step S18, if the decompression completion signal indicating that the decompression process based on the decompression instruction performed in the previous frame period has been completed is not received from the
また、CPU101は、参照したプロセスデータ(ステップS16またはステップS17にて参照したプロセスデータ)に伸長指示を行うことが含まれていれば、プロセスデータの設定内容に応じて伸長指示を1回または2回行う(ステップS19)。具体的には、CPU101は、描画指示(動画再生させるための制御情報)の一部として、1つまたは2つの伸長指示を描画制御レジスタ115に書き込む。 Also, if the referred process data (the process data referred to in step S16 or step S17) includes an instruction for decompression, the CPU 101 issues an decompression instruction once or twice according to the setting content of the process data. (Step S19). Specifically, the CPU 101 writes one or two decompression instructions in the drawing control register 115 as part of a drawing instruction (control information for reproducing a moving image).
次に、CPU101は、今回使用されるプロセスデータ(ステップS16またはステップS17にて参照されたプロセスデータ)を参照し、スプライト画像の表示を開始または更新するか否かを判定する(ステップS20)。 Next, the CPU 101 refers to the process data used this time (process data referenced in step S16 or step S17), and determines whether to start or update the display of the sprite image (step S20).
スプライト画像の表示を開始または更新する場合には、CPU101は、今回使用されるプロセスデータを参照し、表示するスプライト画像の種類、表示位置、表示サイズなどのスプライト画像に関わる指示(スプライト画像表示指示)を行う(ステップS21)。具体的には、CPU101は、描画指示(動画再生させるための制御情報)の一部として、スプライト画像表示指示を描画制御レジスタ115に書き込む。 When starting or updating the display of the sprite image, the CPU 101 refers to the process data used this time, and instructs the sprite image such as the type, display position, and display size of the sprite image to be displayed (sprite image display instruction). (Step S21). Specifically, the CPU 101 writes a sprite image display instruction in the drawing control register 115 as part of a drawing instruction (control information for reproducing a moving image).
上記のようにして、CPU101は、GCL104に対して、例えば表示指示や伸長指示などを含む描画指示(動画再生させるための制御情報)を行う。
As described above, the CPU 101 issues a drawing instruction (control information for reproducing a moving image) including, for example, a display instruction and an expansion instruction to the
図6は、GCL104が実行する展開処理の例を示すフローチャートである。展開処理において、GCL104は、再生表示する動画等の指定がCPU101からあったか否か判定する(ステップS31)。再生表示する動画が指定されていれば、GCL104は、指定された動画を示すムービーデータを動画像の再生に用いるムービーデータとして設定する(ステップS32)。また、再生表示する動画の画像サイズが指定されていれば、GCL104は、その画像サイズに応じたフレームバッファのサイズを設定する(ステップS33)。また、再生表示する動画における展開モードが指定されていれば、GCL104は、その展開モードを設定する(ステップS34)。また、動画像の再生に用いるムービーデータがIPBムービーデータであるかIPムービーデータであるかが指定されていれば、GCL104は、指定内容に応じてIPBムービーデータまたはIPムービーデータを設定する(ステップS35)。なお、GCL104が、再生表示する動画がどの動画であるかに応じて、画像サイズ、展開モード、IPBムービーデータであるかIPムービーデータであるかを判定するようにしてもよい。
FIG. 6 is a flowchart illustrating an example of the expansion process executed by the
なお、ムービーデータには、各ピクチャの展開順番を示す情報、各ピクチャの表示順番を示す情報などが含まれているものとする。なお、ムービーデータに、そのムービーデータにて再生表示される動画像の画像サイズを示す情報や、そのムービーデータがIPBムービーデータであるかIPムービーデータであるかを示す情報などが含まれていてもよい。 The movie data includes information indicating the expansion order of each picture, information indicating the display order of each picture, and the like. The movie data includes information indicating the image size of a moving image reproduced and displayed with the movie data, information indicating whether the movie data is IPB movie data or IP movie data, and the like. Also good.
次いで、CPU101からの伸長指示があったときには(ステップS36)、GCL104は、動画像の再生に使用するムービーデータにおける今回の伸長順番のフレームデータ(ピクチャデータ)を抽出して伸長し、SDRAMに設けられているVRAMにおける所定のフレームバッファに展開する(ステップS37)。なお、ステップS37の伸長処理が完了すると、GCL104は、その旨を示す伸長処理完了信号をCPU101に対して送信する。CPU101は、伸長処理完了信号を受信することで、指示した伸長処理が完了したと判断することができる。
Next, when there is a decompression instruction from the CPU 101 (step S36), the
また、CPU101からのスプライト画像表示指示があったときには(ステップS38)、GCL104は、スプライト画像表示指示に従って、CPU101から指示されたスプライト画像を表示するためのスプライト画像データをROM105から抽出し(ステップS39)、必要に応じて読み出したスプライト画像データに対してスプライト画像の拡大・縮小、回転、透過のための処理を行って配置し直し、ワークメモリに展開する(ステップS40)。
When there is a sprite image display instruction from the CPU 101 (step S38), the
また、GCL104は、配置したスプライト画像データを、CPU101からのスプライト画像表示指示により指定された範囲でクリッピングして、VRAMに展開する(ステップS41)。このとき、ムービーデータにおける次に表示されるフレームデータがフレームバッファに展開されていれば、そのフレームデータ上にスプライト画像データを展開し、ムービー画像とスプライト画像とを合成する。
Further, the
GCL104は、CPU101からの描画指示に応じて上述した処理を実行することで、画像表示装置120に表示される各画面の画像を順次生成する。
The
図7は、CPU101からの表示指示に応じて33ms毎にGCL104によって実行される画像表示処理の例を示すフローチャートである。CPU101からの表示指示が33ms毎になされることによって、画像表示処理が33ms毎に実行されることになる。
FIG. 7 is a flowchart illustrating an example of image display processing executed by the
画像表示処理において、GCL104は、CPU101からの表示指示があったときに(ステップS51)、VRAM上に展開されている画像データ(例えば、RGB輝度データ)のうち今回の表示順番の画像データを読み出し、表示信号制御部110に供給する(ステップS52)。なお、ステップS52の表示処理が完了すると、GCL104は、その旨を示す表示処理完了信号をCPU101に対して送信する。CPU101は、表示処理完了信号を受信することで、指示した画面表示が完了したと判断することができる。
In the image display process, the
表示信号制御部110は、供給された画像データに従って、例えばLCD駆動信号等の制御信号(ビデオ信号、画像表示信号)を生成し、画像表示装置120に供給する。すると、画像表示装置120の表示画面に、ムービー画像におけるフレーム画像(ピクチャ)や背景画像などが表示される。
The display
上記の各処理(図5〜図7に示す各処理)が繰り返し実行されることで、画像表示装置120にムービー画像の再生画像が表示される。
By repeatedly executing each of the above processes (the processes shown in FIGS. 5 to 7), a playback image of the movie image is displayed on the
次に、IPムービーデータにもとづくムービー画像を再生するときの当該ムービー画像を構成する各画像(ピクチャ)の展開タイミングおよび表示タイミングについて説明する。 Next, the development timing and display timing of each image (picture) constituting the movie image when the movie image based on the IP movie data is reproduced will be described.
図8は、IPムービーデータにもとづくムービー画像が再生表示されるときの各ピクチャの伸長タイミングと表示タイミングの例を示す説明図である。図9は、図8に示すタイミングでIPムービーデータが処理されるときのフレームバッファの格納状態の例を示す説明図である。ここでは、簡単のため、図8に示すような13フレーム期間分の処理によって動画像が再生表示されるIPムービーデータを用いて説明する。 FIG. 8 is an explanatory diagram showing an example of the expansion timing and display timing of each picture when a movie image based on IP movie data is reproduced and displayed. FIG. 9 is an explanatory diagram showing an example of the storage state of the frame buffer when the IP movie data is processed at the timing shown in FIG. Here, for the sake of simplicity, description will be made using IP movie data in which a moving image is reproduced and displayed by processing for 13 frame periods as shown in FIG.
IPムービーデータにもとづくムービー画像を再生表示する際には、各ピクチャの伸長順序と表示順序とが異なることがなく、伸長した順番で各ピクチャが表示される。従って、各ピクチャにおける伸長順番と表示順番とは一致している。 When a movie image based on the IP movie data is played back and displayed, the pictures are displayed in the decompressed order without the order of expansion and display of the pictures being different. Therefore, the decompression order and the display order in each picture match.
CPU101は、IPムービーデータにもとづくムービー画像を再生表示するときには、最初のフレーム期間(F1)にて、GCL104に対して、表示制御データにもとづいて、再生表示に用いるムービーデータの種類の指定などを行ったあと(ステップS16参照)、伸長指示を行う(ステップS19参照)。
When the CPU 101 reproduces and displays a movie image based on IP movie data, the CPU 101 designates the type of movie data used for reproduction display to the
GCL104は、指定されたムービーデータをCGROM105から読み出し(ステップS32参照)、再生表示に用いるムービーデータとして指定されたムービーデータがIPムービーデータであるため展開モード3に設定する(ステップS34参照)。
The
また、GCL104は、伸長指示に応じて、図9に示すように、最初のフレーム期間(F1)にて、伸長順番が1番目とされているピクチャI1を伸長してフレームバッファ0に展開する(ステップS37参照)。なお、フレームバッファ0〜2のうち画像データを展開するフレームバッファは、例えば、画像データが何ら記憶されていないフレームバッファや、表示や他のピクチャの展開のために今後は使用されることがない画像データが記憶されているフレームバッファの中から任意に決定される。
In response to the decompression instruction, the
次いで、CPU101は、2番目のフレーム期間(F2)にて、表示制御データにもとづいて、GCL104に対して、表示指示を行うとともに(ステップS18参照)、伸長指示を行う(ステップS19参照)。
Next, in the second frame period (F2), the CPU 101 issues a display instruction to the
GCL104は、表示指示に応じて、2番目のフレーム期間(F2)にて、前回のフレーム期間(F1)でフレームバッファ0に展開したピクチャI1を表示するためのビデオ信号を画像表示装置120に対して出力する(ステップS52参照)。また、GCL104は、伸長指示に応じて、図9に示すように、2番目のフレーム期間(F2)にて、伸長順番が2番目とされているピクチャP1を伸長してフレームバッファ1に展開する(ステップS37参照)。
In response to the display instruction, the
その後は、CPU101は、各フレーム期間(F3〜F12)毎に表示指示と伸長指示とを繰り返し出力する。GCL104は、各フレーム期間(F3〜F12)におけるCPU101からの表示指示に応じて、それぞれ、あらかじめ定められている表示順番に従って、前回のフレーム期間で展開されたピクチャを表示するためのビデオ信号を画像表示装置120に対して出力す(ステップS52参照)。また、GCL104は、各フレーム期間(F3〜F12)におけるCPU101からの伸長指示に応じて、あらかじめ定められている伸長順番に従って、次のフレーム期間で表示されるピクチャを伸長して所望のフレームバッファに展開する(ステップS37参照)。
Thereafter, the CPU 101 repeatedly outputs a display instruction and an expansion instruction for each frame period (F3 to F12). The
そして、CPU101は、最後のフレーム期間(F13)にて、表示制御データにもとづいて、GCL104に対して、表示指示を行う(ステップS18参照)。なお、最後のフレーム期間(F13)では、CPU101による伸長指示はなされない。GCL104は、フレーム期間(F13)におけるCPU101からの表示指示に応じて、前回のフレーム期間(F12)で展開した最後のピクチャP9を表示するためのビデオ信号を画像表示装置120に対して出力する(ステップS52参照)。
Then, in the last frame period (F13), the CPU 101 issues a display instruction to the
次に、IPBムービーデータにもとづくムービー画像を再生するときの当該ムービー画像を構成する各画像(ピクチャ)の展開タイミングおよび表示タイミングについて説明する。 Next, the development timing and display timing of each image (picture) constituting the movie image when the movie image based on the IPB movie data is reproduced will be described.
図10(A)は、IPBムービーデータにもとづくムービー画像が再生表示されるときの各ピクチャの伸長タイミングと表示タイミングの例を示す説明図である。図11は、図10(A)に示すタイミングでIPBムービーデータが処理されるときのフレームバッファの格納状態の例を示す説明図である。ここでは、簡単のため、図10(A)に示すような13フレーム期間分の処理によって動画像が再生表示されるIPBムービーデータを用いて説明する。 FIG. 10A is an explanatory diagram showing an example of the expansion timing and display timing of each picture when a movie image based on IPB movie data is reproduced and displayed. FIG. 11 is an explanatory diagram showing an example of the storage state of the frame buffer when IPB movie data is processed at the timing shown in FIG. Here, for the sake of simplicity, description will be made using IPB movie data in which a moving image is reproduced and displayed by processing for 13 frame periods as shown in FIG.
IPBムービーデータにもとづくムービー画像を再生表示する際には、各ピクチャの伸長順序と表示順序とが異なる部分がある。このため、各ピクチャにおける伸長順番と表示順番とが一致しない部分がる。 When a movie image based on IPB movie data is reproduced and displayed, there are portions where the expansion order and display order of each picture are different. For this reason, there is a portion where the expansion order and the display order in each picture do not match.
CPU101は、IPBムービーデータにもとづくムービー画像を再生表示するときには、最初のフレーム期間(F1)にて、GCL104に対して、表示制御データにもとづいて、再生表示に用いるムービーデータの指定などを行ったあと(ステップS16参照)、2回の伸長指示を行う(ステップS19参照)。
When the CPU 101 reproduces and displays a movie image based on the IPB movie data, the CPU 101 designates the movie data used for reproduction display on the
GCL104は、再生表示に用いるムービーデータとして指定されたムービーデータをCGROM105から読み出し(ステップS32参照)、その指定されたムービーデータがIPBムービーデータであるため展開モード4を設定する(ステップS34参照)。
The
また、GCL104は、図11に示すように、最初のフレーム期間(F1)にて、1回目の伸長指示に応じて伸長順番が1番目とされているピクチャI1を伸長してフレームバッファ0に展開するとともに(ステップS37参照)、2回目の伸長指示に応じて伸長順番が2番目とされているピクチャP1を伸長してフレームバッファ1に展開する(ステップS37参照)。すなわち、GCL104は、最初のフレーム期間(F1)にて、上述したステップS37の伸長・展開処理を2回実行する。なお、フレームバッファ0〜3のうち画像データを展開するフレームバッファは、例えば、画像データが何ら記憶されていないフレームバッファや、表示や他のピクチャの展開に今後は使用されることがない画像データが記憶されているフレームバッファの中から任意に決定される。
Further, as shown in FIG. 11, the
次いで、CPU101は、2番目のフレーム期間(F2)にて、表示制御データにもとづいて、GCL104に対して、表示指示を行うとともに(ステップS18参照)、伸長指示を行う(ステップS19参照)。
Next, in the second frame period (F2), the CPU 101 issues a display instruction to the
GCL104は、表示指示に応じて、2番目のフレーム期間(F2)にて、前回のフレーム期間(F1)でフレームバッファ0に展開したピクチャI1を表示するためのビデオ信号を画像表示装置120に対して出力する(ステップS52参照)。また、GCL104は、伸長指示に応じて、図11に示すように、2番目のフレーム期間(F2)にて、伸長順番が3番目とされているピクチャP2を伸長してフレームバッファ2に展開する(ステップS37参照)。
In response to the display instruction, the
その後は、CPU101は、各フレーム期間(F3〜F11)毎に表示指示および伸長指示を繰り返し出力する。GCL104は、各フレーム期間(F3〜F11)におけるCPU101からの表示指示に応じて、それぞれ、あらかじめ定められている表示順番に従って、前回のフレーム期間までに展開されているピクチャを表示するためのビデオ信号を画像表示装置120に対して出力す(ステップS52参照)。また、GCL104は、各フレーム期間(F3〜F11)におけるCPU101からの伸長指示に応じて、あらかじめ定められている伸長順番に従って、次のフレーム期間以降のフレーム期間で他のピクチャの展開に用いられたり表示されたりするピクチャを伸長して所望のフレームバッファに展開する(ステップS37参照)。
Thereafter, the CPU 101 repeatedly outputs a display instruction and an expansion instruction for each frame period (F3 to F11). The
そして、CPU101は、最後から2番目のフレーム期間(F12)にて、表示制御データにもとづいて、GCL104に対して、表示指示を行う(ステップS18参照)。なお、最後から2番目のフレーム期間(F12)では、CPU101による伸長指示はなされない。GCL104は、フレーム期間(F12)におけるCPU101からの表示指示に応じて、前回のフレーム期間(F11)までに展開されている最後から2番目の表示順番のピクチャB5を表示するためのビデオ信号を画像表示装置120に対して出力する(ステップS52参照)。
Then, the CPU 101 issues a display instruction to the
さらに、CPU101は、最後のフレーム期間(F13)にて、表示制御データにもとづいて、GCL104に対して、表示指示を行う(ステップS18参照)。なお、最後のフレーム期間(F13)においても、CPU101による伸長指示はなされない。GCL104は、フレーム期間(F13)におけるCPU101からの表示指示に応じて、前回のフレーム期間(F12)までに展開されている最後の表示順番のピクチャP5を表示するためのビデオ信号を画像表示装置120に対して出力する(ステップS52参照)。
Furthermore, the CPU 101 issues a display instruction to the
従来では、IPBムービーデータにもとづくムービー画像を再生表示するときには、図10(B)に示すように、最初のフレーム期間(F1)で伸長順番が1番目のピクチャI1が伸長されて展開され、次のフレーム期間(F2)で伸長順番が2番目のピクチャP1が伸長されて展開される。次いで、3回目のフレーム期間(F3)にて、伸長順番が3番目のピクチャP2が伸長されて展開されるとともに、表示順番が1番目のピクチャI1が表示される。 Conventionally, when a movie image based on IPB movie data is reproduced and displayed, as shown in FIG. 10 (B), the first picture I1 in the expansion order is expanded and expanded in the first frame period (F1). In the frame period (F2), the picture P1 having the second expansion order is expanded and expanded. Next, in the third frame period (F3), the third picture P2 in the expansion order is expanded and expanded, and the picture I1 in the first display order is displayed.
その後のフレーム期間(F3〜F12)では、それぞれ、フレーム期間(F3)と同様にして、伸長順番とされているピクチャが伸長されて所望のフレームバッファに展開されるとともに、表示順番とされているピクチャが表示される処理が実行される。 In the subsequent frame periods (F3 to F12), in the same manner as in the frame period (F3), the pictures in the decompression order are decompressed and expanded in a desired frame buffer, and are in the display order. A process of displaying a picture is executed.
そして、最後から2番目のフレーム期間(F13)にて、あらかじめ定められている表示順番に従って、前回のフレーム期間までに展開されているピクチャB5を表示し、最後のフレーム期間(F14)にて、あらかじめ定められている表示順番に従って、前回のフレーム期間までに展開されている最後のピクチャP5を表示する処理が実行される。 Then, in the second frame period from the last (F13), the picture B5 developed up to the previous frame period is displayed according to a predetermined display order, and in the last frame period (F14), In accordance with a predetermined display order, a process of displaying the last picture P5 that has been expanded up to the previous frame period is executed.
以上説明したように、CPU101が、動画像の再生表示を開始させる際の最初のフレーム期間における描画指示にて、動画像の再生表示に用いる圧縮動画データの指示を行うとともに伸長指示を開始し、伸長指示を開始した最初の描画指示を行ったフレーム期間の次のフレーム期間における次の描画指示にて表示指示を開始し、最初の描画指示にてIPBムービーデータを指示していたときには、最初のフレーム期間にて2回の伸長指示を行う構成としているので、動画再生制御における伸長処理の実行タイミングの管理を容易にすることができる。 As described above, the CPU 101 instructs the compressed moving image data to be used for reproduction display of the moving image and starts the decompression instruction in the drawing instruction in the first frame period when starting the reproduction display of the moving image. When the display instruction is started by the next drawing instruction in the frame period next to the frame period in which the first drawing instruction is started, and the IPB movie data is instructed by the first drawing instruction, Since the extension instruction is performed twice in the frame period, it is possible to easily manage the execution timing of the extension process in the moving image reproduction control.
すなわち、IPムービーデータを再生するときとIPBムービーデータを再生するときの何れであっても、各ピクチャの表示処理を開始する1フレーム期間前にピクチャの伸長処理を開始することができるようになり、IPムービーデータとIPBムービーデータとが混在している場合であっても、ピクチャの伸長処理を開始するタイミングが共通化されているため、動画像の再生のための動画再生制御における伸長処理の実行タイミングの管理が容易となる。 That is, the picture expansion process can be started one frame period before the start of the display process of each picture, regardless of whether the IP movie data is reproduced or the IPB movie data is reproduced. Even when IP movie data and IPB movie data are mixed, the timing of starting the picture expansion process is shared, so that the expansion process in the moving image reproduction control for moving image reproduction Management of execution timing becomes easy.
上記のように、ムービーデータの種類によらずに共通の実行タイミングで伸長処理が行われることとされ、動画再生制御における伸長処理の実行タイミングの管理が容易とされているので、IPムービーデータとIPBムービーデータとを混在させた動画再生制御の制御内容(例えば、制御フロー、制御プログラム)の設計が容易となる。具体的には、動画再生制御の制御内容の設計を行う設計者が、動画再生制御における各ムービーデータの出現箇所の割り当てを行う際に、IPムービーデータであるかIPBムービーデータであるかを意識することなく各ムービーデータを割り当てることができ、動画再生制御の制御内容を容易に設計することができるようになる。よって、動画再生制御のための制御プログラムの開発などのための作業負担を軽減させることができる。 As described above, the decompression process is performed at a common execution timing regardless of the type of movie data, and the management of the execution timing of the decompression process in the moving image playback control is facilitated. It becomes easy to design the control content (for example, control flow, control program) of moving image reproduction control mixed with IPB movie data. Specifically, the designer who designs the control content of the video playback control is conscious of whether it is IP movie data or IPB movie data when assigning the appearance location of each movie data in the video playback control. Thus, it is possible to assign each movie data without performing the control, and to easily design the control content of the moving image reproduction control. Therefore, it is possible to reduce the work load for developing a control program for controlling the reproduction of moving images.
従来は、図10(B)に示したように、IPBムービーデータについては各ピクチャの表示処理を開始する2フレーム期間前にピクチャの伸長処理が開始されていたので、IPムービーデータの再生処理を行うときとピクチャの伸長処理を開始するタイミングが異なっていた。このため、動画再生制御の制御内容の設計を行う設計者は、IPムービーデータであるかIPBムービーデータであるかによって再生制御を開始してから動画表示が開始されるまでの期間が異なる(1フレーム期間ずれる)ことを加味して、動画再生制御における各ムービーデータの出現箇所の割り当てを行う必要があった。これに対して、上述した実施の形態では、IPムービーデータであるかIPBムービーデータであるかを意識することなく各ムービーデータを割り当てることができ、動画再生制御の制御内容を容易に設計することができるのである。 Conventionally, as shown in FIG. 10B, for IPB movie data, the picture expansion process has been started two frames before the start of the display process for each picture. The timing for starting the picture decompression process was different from that when performing it. For this reason, the designer who designs the control content of the moving image reproduction control has a different period from the start of reproduction control to the start of moving image display depending on whether the movie data is IP movie data or IPB movie data (1). In consideration of the fact that the frame period shifts, it is necessary to assign the appearance location of each movie data in the moving image reproduction control. On the other hand, in the above-described embodiment, each movie data can be assigned without being conscious of whether it is IP movie data or IPB movie data, and the control contents of the moving image reproduction control can be easily designed. Can do it.
なお、上述した実施の形態では、IPBムービーデータにもとづく動画像の再生表示を行うときに、最初のフレーム期間にて2回の伸長指示を行う構成としていたが、1フレーム期間内で実行される各処理を完了可能な処理能力をGCL104が備えている場合には、3回以上の伸長指示を行うようにしてもよい。この場合、2回目以降のフレーム期間において伸長指示を行わないフレーム期間を増やすようにすればよい。
In the above-described embodiment, when a moving image is reproduced and displayed based on IPB movie data, the extension instruction is performed twice in the first frame period. However, this is executed within one frame period. When the
また、上述した実施の形態では、IPBムービーデータにもとづく動画像の再生表示を行うときに、最初のフレーム期間にて2回の伸長指示を行う構成としていたが、2回の伸長指示を最初のフレーム期間で行う必要はなく、Bピクチャの伸長を指示するための伸長指示が最初になされるフレーム期間以前の何れかのフレーム期間で行うようにしてもよい。 In the above-described embodiment, when a moving image is reproduced and displayed based on the IPB movie data, the extension instruction is given twice in the first frame period. It does not have to be performed in the frame period, and may be performed in any frame period before the frame period in which the decompression instruction for instructing the decompression of the B picture is first made.
図12は、IPBムービーデータにもとづくムービー画像が再生表示されるときの各ピクチャの展開タイミングと表示タイミングの他の例を示す説明図である。図13は、図12に示すタイミングでIPBムービーデータが処理されるときのフレームバッファの格納状態の例を示す説明図である。ここでは、Bピクチャの伸長を指示するための伸長指示が最初になされる3番目のフレーム期間(F3)で2回の伸長指示がなされるものとする。また、ここでは、簡単のため、図12に示すような13フレーム期間分の処理によって動画像が再生表示されるIPBムービーデータを用いて説明する。 FIG. 12 is an explanatory diagram showing another example of the development timing and display timing of each picture when a movie image based on IPB movie data is reproduced and displayed. FIG. 13 is an explanatory diagram showing an example of the storage state of the frame buffer when IPB movie data is processed at the timing shown in FIG. Here, it is assumed that the decompression instruction is given twice in the third frame period (F3) in which the decompression instruction for instructing the decompression of the B picture is first made. Here, for the sake of simplicity, description will be made using IPB movie data in which a moving image is reproduced and displayed by processing for 13 frame periods as shown in FIG.
CPU101は、IPBムービーデータにもとづくムービー画像を再生表示するときには、最初のフレーム期間(F1)にて、GCL104に対して、表示制御データにもとづいて、再生表示に用いるムービーデータの指定などを行ったあと(ステップS16参照)、ここでは1回の伸長指示を行う(ステップS19参照)。
When the CPU 101 reproduces and displays a movie image based on the IPB movie data, the CPU 101 designates the movie data used for reproduction display on the
GCL104は、再生表示に用いるムービーデータとしてCPU101から指定されたムービーデータをCGROM105から読み出し、指定されたムービーデータがIPBムービーデータであるため展開モード4に決定する。
The
また、GCL104は、図11に示すように、最初のフレーム期間(F1)にて、1回目の伸長指示に応じて伸長順番が1番目とされているピクチャI1を伸長してフレームバッファ0に展開する(ステップS37参照)。
Further, as shown in FIG. 11, the
次いで、CPU101は、2番目のフレーム期間(F2)にて、表示制御データにもとづいて、GCL104に対して、表示指示を行うとともに(ステップS18参照)、1回の伸長指示を行う(ステップS19参照)。
Next, in the second frame period (F2), the CPU 101 issues a display instruction to the
GCL104は、表示指示に応じて、2番目のフレーム期間(F2)にて、前回のフレーム期間(F1)でフレームバッファ0に展開したピクチャI1を表示するためのビデオ信号を画像表示装置120に対して出力する(ステップS52参照)。また、GCL104は、伸長指示に応じて、図11に示すように、2番目のフレーム期間(F2)にて、伸長順番が2番目とされているピクチャP1を伸長してフレームバッファ1に展開する(ステップS37参照)。
In response to the display instruction, the
次いで、CPU101は、3番目のフレーム期間(F3)にて、表示制御データにもとづいて、GCL104に対して、表示指示を行うとともに(ステップS18参照)、ここでは2回の伸長指示を行う(ステップS19参照)。
Next, in the third frame period (F3), the CPU 101 issues a display instruction to the
GCL104は、表示指示に応じて、3番目のフレーム期間(F3)にて、前回のフレーム期間(F2)でフレームバッファ0に展開したピクチャP1を表示するためのビデオ信号を画像表示装置120に対して出力する(ステップS52参照)。
In response to the display instruction, the
また、GCL104は、図13に示すように、3番目のフレーム期間(F3)にて、1回目の伸長指示に応じて伸長順番が3番目とされているピクチャP2を伸長してフレームバッファ2に展開するとともに(ステップS37参照)、2回目の伸長指示に応じて伸長順番が4番目とされているピクチャB1を伸長してフレームバッファ3に展開する(ステップS37参照)。すなわち、GCL104は、Bピクチャが最初に伸長・展開されるフレーム期間(ここではF3)にて、上述したステップS37の伸長・展開処理を2回実行する。
Further, as shown in FIG. 13, the
その後は、CPU101は、各フレーム期間(F4〜F11)毎に表示指示および伸長指示を繰り返し出力する。GCL104は、各フレーム期間(F4〜F11)におけるCPU101からの表示指示に応じて、それぞれ、あらかじめ定められている表示順番に従って、前回のフレーム期間までに展開されているピクチャを表示するためのビデオ信号を画像表示装置120に対して出力す(ステップS52参照)。また、GCL104は、各フレーム期間(F4〜F11)におけるCPU101からの伸長指示に応じて、あらかじめ定められている伸長順番に従って、次のフレーム期間以降のフレーム期間で他のピクチャの展開に用いられたり表示されたりするピクチャを伸長して所望のフレームバッファに展開する(ステップS37参照)。
Thereafter, the CPU 101 repeatedly outputs a display instruction and an expansion instruction for each frame period (F4 to F11). The
そして、CPU101は、最後から2番目のフレーム期間(F12)にて、表示制御データにもとづいて、GCL104に対して、表示指示を行う(ステップS18参照)。なお、最後から2番目のフレーム期間(F12)では、CPU101による伸長指示はなされない。GCL104は、フレーム期間(F12)におけるCPU101からの表示指示に応じて、前回のフレーム期間(F11)までに展開されている最後から2番目の表示順番のピクチャB5を表示するためのビデオ信号を画像表示装置120に対して出力する(ステップS52参照)。
Then, the CPU 101 issues a display instruction to the
さらに、CPU101は、最後のフレーム期間(F13)にて、表示制御データにもとづいて、GCL104に対して、表示指示を行う(ステップS18参照)。なお、最後のフレーム期間(F13)においても、CPU101による伸長指示はなされない。GCL104は、フレーム期間(F13)におけるCPU101からの表示指示に応じて、前回のフレーム期間(F12)までに展開されている最後の表示順番のピクチャP5を表示するためのビデオ信号を画像表示装置120に対して出力する(ステップS52参照)。
Furthermore, the CPU 101 issues a display instruction to the
上記のように、CPU101が、動画像の再生表示を開始させる際の最初のフレーム期間における描画指示にて、動画像の再生表示に用いる圧縮動画データの指示を行うとともに伸長指示を開始し、伸長指示を開始した最初の描画指示を行ったフレーム期間の次のフレーム期間における次の描画指示にて表示指示を開始し、最初の描画指示にてIPBムービーデータを指示していたときには、Bピクチャの伸長を指示するための伸長指示が最初になされるフレーム期間以前のフレーム期間における描画指示にて、複数回の伸長指示を行う構成とした場合であっても、上述した実施の形態と同様に、動画再生制御における伸長処理の実行タイミングの管理を容易にすることができる。 As described above, the CPU 101 instructs the compressed moving image data to be used for moving image reproduction display and starts the decompression instruction and the decompression instruction by the drawing instruction in the first frame period when starting the moving image reproduction display. When the display instruction is started by the next drawing instruction in the frame period next to the frame period in which the first drawing instruction is started and the IPB movie data is instructed by the first drawing instruction, Even in the case of a configuration in which a decompression instruction is performed a plurality of times in a drawing instruction in a frame period before a frame period in which a decompression instruction for instructing decompression is first performed, as in the above-described embodiment, Management of the execution timing of the decompression process in the moving image reproduction control can be facilitated.
また、上述した各実施の形態では、GCL104が、Bピクチャを含むIPBムービーデータであったときは、Bピクチャを含まないIPムービーデータであったときよりも、伸長処理で用いるフレームバッファの数を多い数に決定(上記の例では、3つよりも多い4つに決定)するように構成されているので、動画像の再生表示に用いる圧縮動画データがBピクチャを含むか否かに応じて動画再生制御に用いる記憶領域の容量を適切に決定することができる。
In each of the above-described embodiments, when the
また、上述した各実施の形態では、GCL104が、伸長処理にて、CPU101からの描画指示にて指示された動画像の再生表示に用いる圧縮動画データにもとづく当該動画像における画像サイズを判別し、判別結果に応じたサイズの記憶領域をフレームバッファとして設定する構成とされているので、動画像の再生表示に用いる圧縮動画データにもとづく当該動画像の画像サイズに応じて動画再生制御に用いる記憶領域の容量を適切に決定することができる。
In each of the embodiments described above, the
また、上述した各実施の形態では、CPU101が、所定のフレーム期間にて伸長指示を行ったあと、その伸長指示に応じてGCL104が実行している伸長処理が終了する前にそのフレーム期間が終了したときは、次のフレーム期間にて前回のフレーム期間のときと同一の表示指示を行い、同一の画像データにもとづく画像を画像表示装置120に表示させるようにしている。この場合、GCL104は、あるフレーム期間におけるCPU101からの伸長指示に応じて実行している伸長処理が終了する前に、次のフレーム期間におけるCPU101からの描画指示(例えば表示指示)を受けたときは、伸長処理によって伸長され展開されている途中の画像データを放棄(消去)して、受信した表示指示に応じたビデオ信号を出力するようにすればよい。よって、このような場合、前のフレーム期間にて表示した画像と同じ画像が再度表示されることになる。このように構成すれば、画面のちらつきを防止することができる。
Further, in each of the above-described embodiments, after the CPU 101 issues a decompression instruction in a predetermined frame period, the frame period ends before the decompression process executed by the
また、上述した各実施の形態では特に言及していないが、GCL104が、1フレーム期間毎に画像データ上に合成されるスプライト画像が更新される毎に、2フレーム期間毎に伸長処理にて伸長された画像データがフレームバッファに記憶されるようにしてもよい。この場合、例えば、ステップS20,S21の処理を1フレーム期間毎に行い、ステップS18,S19の処理を2フレーム毎に行うようにすればよい。具体的には、例えば図14に示すような表示制御データにもとづいて、CPU101が描画指示を行うようにすればよい。すなわち、CPU101は、例えば図14に示す表示制御データにもとづいて、プロセスデータ番号が奇数のときのフレーム期間では必要に応じて伸長指示や表示指示を行うとともにスプライト画像表示指示を行い、プロセスデータ番号が偶数のときのフレーム期間では伸長指示や表示指示を行うことなく必要に応じてスプライト画像表示指示を行うようにすればよい。そして、GCL104が、あるフレーム期間において伸長指示や表示指示を受けることなくスプライト画像表示指示を受けたときには、前回のフレーム期間のときに使用した画像データと同じ画像データを示すビデオ信号を送信するようにすればよい。このように構成すれば、精密な表示を実現しつつ、画像合成に関わる制御負担が重くなることを防止できる。
Although not particularly mentioned in each of the above-described embodiments, the
また、上述した実施の形態では、IPBムービーデータを再生表示する際には、最後の2フレーム期間はピクチャの伸長・展開が行われることなく表示だけが行われるようになっていたが(図10参照)、IPBムービーデータが再生表示されるときに最後の表示順番のピクチャを表示せずに、IPムービーデータと同じように、最後の1フレーム期間だけピクチャの伸長・展開が行われることなく表示だけが行われるようにすることが好ましい。この場合、IPBムービーデータにおける最後の表示順番のピクチャが表示されないように、表示制御データを生成しておくようにすればよい。 In the above-described embodiment, when IPB movie data is played back and displayed, only the display is performed without decompressing / decompressing the picture during the last two frame periods (FIG. 10). As shown in the IP movie data, when the IPB movie data is played back and displayed, the picture in the last display order is not displayed and the picture is not expanded or expanded only for the last one frame period. It is preferred that only be done. In this case, display control data may be generated so that the last display order picture in the IPB movie data is not displayed.
図15(A)は、最後の伸長順番となっているピクチャがBピクチャとなっているIPBムービーデータを再生する際に、最後の表示順番のピクチャを表示しないとしたときの伸長タイミングと表示タイミングの例を示すタイミング図である。ここでは、簡単のため、図15(A)に示すような、最後の表示順番のピクチャを表示すれば13フレーム期間分の処理によって動画像が再生表示されるが、最後の表示順番のピクチャが表示されないため12フレーム期間分の処理によって動画像が再生表示されることとなるIPBムービーデータを用いて説明する。なお、図15(A)に示す例では、IPBムービーデータのあとに続けてIPムービーデータにもとづく動画像が再生表示されることになっている。図16は、図15(A)に示すタイミングでIPBムービーデータの再生するために用いられる表示制御データの例を示す説明図である。 FIG. 15A shows an expansion timing and a display timing when the last display order picture is not displayed when IPB movie data in which the last expansion order picture is a B picture is played back. FIG. Here, for the sake of simplicity, if a picture in the last display order as shown in FIG. 15A is displayed, a moving image is reproduced and displayed by processing for 13 frame periods. Description will be made using IPB movie data in which a moving image is reproduced and displayed by processing for 12 frame periods because it is not displayed. In the example shown in FIG. 15A, a moving image based on IP movie data is reproduced and displayed after IPB movie data. FIG. 16 is an explanatory diagram showing an example of display control data used for reproducing IPB movie data at the timing shown in FIG.
図15(A)に示すIPBムービーデータは、最後の表示順番であるピクチャP5が、再生表示されている動画像において表示されなくても少なくとも見た目上支障のないダミーピクチャとして生成されているものとする。「ダミーピクチャ」としては、例えば全体が1色の画像や、表示上最後の表示順番となるピクチャ(図15(A)に示す例では、ピクチャP5の1フレーム期間前に表示されるものとして設定されているピクチャB5)と同一の画像などが考えられる。ダミーピクチャを表示上最後の表示順番となるピクチャと同一の画像とすれば、ダミーピクチャが表示されなくても同じ画像は既に表示されているため見た目上支障がなく、また、ダミーピクチャがたとえ誤って表示されたとしても見た目上の違和感がないようにすることができる。 The IPB movie data shown in FIG. 15A is generated as a dummy picture that is at least visually unaffected even if the picture P5, which is the last display order, is not displayed in the reproduced moving image. To do. As the “dummy picture”, for example, an image of the entire color or a picture that is the last display order in the display (in the example shown in FIG. 15A, set to be displayed one frame period before the picture P5) The same image as the picture B5) being considered can be considered. If the dummy picture is the same as the last picture in the display order, the same picture is already displayed even if the dummy picture is not displayed. Even if it is displayed, it is possible to prevent an uncomfortable appearance.
CPU101は、各フレーム期間(F1〜F11)にて、GCL104に対して、表示制御データにもとづいて表示指示や伸長指示などの描画指示を行う(ステップS18,ステップS19参照)。
In each frame period (F1 to F11), the CPU 101 issues a drawing instruction such as a display instruction or an expansion instruction to the
GCL104は、CPU101からの描画指示に応じて、各フレーム期間(F1〜F11)において、前回のフレーム期間までにフレームバッファに展開されているピクチャを表示するためのビデオ信号を画像表示装置120に対して出力する処理(ステップS52参照)、伸長順番に従って各ピクチャを伸長してフレームバッファに展開する処理(ステップS37参照)などを行う。
In response to a drawing instruction from the CPU 101, the
そして、CPU101は、12番目のフレーム期間(F12)にて、GCL104に対して、表示制御データ(プロセスデータ番号12のプロセスデータ)にもとづいて表示指示を行う(ステップS18参照)。そして、表示制御データ(プロセスデータ番号12のプロセスデータ)に従って、13番目のフレーム期間(F13)における最後の表示順番のピクチャ(この例ではピクチャP5)の表示指示を行うことなく、12番目のフレーム期間までで処理を終了する。
Then, in the twelfth frame period (F12), the CPU 101 issues a display instruction to the
GCL104は、CPU101からの表示指示に応じて、12番目のフレーム期間(F12)において、前回のフレーム期間までにフレームバッファに展開されているピクチャB5を表示するためのビデオ信号を画像表示装置120に対して出力する(ステップS52参照)。そして、13番目のフレーム期間(F13)における最後の表示順番のピクチャP5の表示処理を行うことなく、12番目のフレーム期間までで処理を終了する。
In response to a display instruction from the CPU 101, the
この例では、CPU101は、12番目のフレーム期間(F12)の処理を終えると、次のフレーム期間において、続けて再生表示に用いるムービーデータ(ここでは図15(A)に示すIPムービーデータ)における1番目のフレーム期間(F1)の処理を実行する。 In this example, when the CPU 101 finishes the processing of the twelfth frame period (F12), in the next frame period, in the movie data (herein, IP movie data shown in FIG. 15A) used for playback display. The process of the first frame period (F1) is executed.
従って、GCL104は、12番目のフレーム期間(F12)の処理を終えると、次のフレーム期間において、CPU101からの伸長指示を含む描画指示に応じて、続けて再生表示に用いるムービーデータにおける1番目のフレーム期間(F1)において、伸長順番が1番目のピクチャI1を伸長してフレームバッファに展開する(ステップS37参照)。
Accordingly, when the
このようにして、IPBムービーデータによる動画像の再生表示が終了したあとに、続けてIPムービーデータによる動画像の再生表示が開始される。なお、続けてIPBムービーデータによる動画像の再生表示が開始される場合も同様である。 In this way, after the reproduction / display of the moving image by the IPB movie data is completed, the reproduction / display of the moving image by the IP movie data is started. The same applies to the case where the playback and display of a moving image using IPB movie data is subsequently started.
上記のように、CPU101が、動画像の再生表示を開始させる際の最初のフレーム期間における描画指示にて、動画像の再生表示に用いる圧縮動画データの指示を行うとともに伸長指示を開始し、伸長指示を開始した最初の描画指示を行ったフレーム期間の次のフレーム期間における次の描画指示にて表示指示を開始し、最初の描画指示にてIPBムービーデータを指示していたときには、Bピクチャの伸長を指示するための伸長指示が最初になされるフレーム期間以前のフレーム期間における描画指示にて、複数回の伸長指示を行う構成とし、さらに、IPBムービーデータの最後の表示順番のピクチャを表示することなく1フレーム期間のブランクとし、そのブランクの後に続けて次のムービーデータの再生表示を開始するようにしているので、IPBムービーデータの再生表示の後に続けてムービーデータの再生表示を行うときでも、続けて再生表示するムービーデータについての動画再生制御を開始するタイミングを共通化することができるようになり、動画再生制御の実行タイミングの管理を容易にすることができる。 As described above, the CPU 101 instructs the compressed moving image data to be used for moving image reproduction display and starts the decompression instruction and the decompression instruction by the drawing instruction in the first frame period when starting the moving image reproduction display. When the display instruction is started by the next drawing instruction in the frame period next to the frame period in which the first drawing instruction is started and the IPB movie data is instructed by the first drawing instruction, A drawing instruction is given a plurality of times in a drawing instruction in a frame period before a frame period in which an extension instruction for instructing extension is first issued, and a picture in the last display order of IPB movie data is displayed. Without a blank for one frame period, and then start playback and display of the next movie data after the blank. Therefore, even when the movie data is reproduced and displayed after the IPB movie data is reproduced and displayed, the timing for starting the moving image reproduction control for the movie data to be reproduced and displayed can be made common. Management of the execution timing of moving image reproduction control can be facilitated.
すなわち、IPムービーデータの後にムービーデータを続けて再生するときとIPBムービーデータの後にムービーデータを続けて再生するときの何れであっても、先に再生表示しているムービーデータにおいて最後の伸長指示を行ったフレーム期間が終了した2つ後のフレーム期間から続けて再生表示するムービーデータの動画再生制御を開始することができるようになり、IPムービーデータとIPBムービーデータとが混在している場合であっても、IPムービーデータの後にムービーデータを続けて再生するときとIPBムービーデータの後にムービーデータを続けて再生するときとで続けて再生するムービーデータにおけるピクチャの伸長処理を開始するタイミングが共通化されているため、動画再生制御における伸長処理の実行タイミングの管理が容易となる。 That is, whether the movie data is continuously played after the IP movie data or when the movie data is continuously played after the IPB movie data, the last decompression instruction in the movie data played back and displayed first When it becomes possible to start moving image reproduction control of movie data to be reproduced and displayed from the second frame period after the end of the frame period in which IP movie data is performed, and IP movie data and IPB movie data are mixed Even when the movie data is continuously played after the IP movie data and when the movie data is continuously played after the IPB movie data, the timing of starting the picture expansion process in the movie data to be played back continuously is determined. Execution of decompression processing in video playback control because it is standardized Timing management becomes easy.
上記のように、ムービーデータの種類によらずに共通の実行タイミングで伸長処理が開始することとされ、続けて再生するムービーデータの動画再生制御における伸長処理の実行タイミングの管理が容易とされているので、IPムービーデータとIPBムービーデータとを混在させた動画再生制御の制御内容(例えば、制御フロー、制御プログラム)の設計が容易となる。具体的には、動画再生制御の制御内容の設計を行う設計者が、動画再生制御における各ムービーデータの出現箇所の割り当てを行う際に、先に再生表示するIPムービーデータであるかIPBムービーデータであるかを意識することなく、続けて再生表示する各ムービーデータを割り当てることができ、動画再生制御の制御内容を容易に設計することができるようになる。よって、動画再生制御のための制御プログラムの開発などのための作業負担を軽減させることができる。 As described above, the decompression process starts at a common execution timing regardless of the type of movie data, and management of the execution timing of the decompression process in the moving image playback control of movie data to be continuously played back is facilitated. Therefore, it becomes easy to design the control content (for example, control flow, control program) of moving image reproduction control in which IP movie data and IPB movie data are mixed. Specifically, when the designer who designs the control content of the video playback control assigns the appearance location of each movie data in the video playback control, it is IP movie data or IPB movie data to be played back and displayed first. Therefore, it is possible to assign each piece of movie data to be reproduced and displayed continuously without being conscious of whether or not, and it is possible to easily design the control content of the moving image reproduction control. Therefore, it is possible to reduce the work load for developing a control program for controlling the reproduction of moving images.
図15(B)は、最後の伸長順番となっているピクチャがBピクチャでないIPBムービーデータを再生する際に、最後の表示順番のピクチャを表示しないとしたときの伸長タイミングと表示タイミングの例を示すタイミング図である。ここでは、簡単のため、図15(B)に示すような、最後の表示順番のピクチャを表示すれば13フレーム期間分の処理によって動画像が再生表示されるが、最後の表示順番のピクチャが表示されないため12フレーム期間分の処理によって動画像が再生表示されることとなるIPBムービーデータを用いて説明する。なお、図15(A)に示す例では、IPBムービーデータのあとに続けてIPムービーデータにもとづく動画像が再生表示されることになっている。図17は、図15(B)に示すタイミングでIPBムービーデータの再生するために用いられる表示制御データの例を示す説明図である。 FIG. 15B shows an example of decompression timing and display timing when the picture in the last display order is not displayed when playing back IPB movie data in which the picture in the last decompression order is not a B picture. FIG. Here, for the sake of simplicity, if a picture in the last display order as shown in FIG. 15B is displayed, a moving image is reproduced and displayed by processing for 13 frame periods. Description will be made using IPB movie data in which a moving image is reproduced and displayed by processing for 12 frame periods because it is not displayed. In the example shown in FIG. 15A, a moving image based on IP movie data is reproduced and displayed after IPB movie data. FIG. 17 is an explanatory diagram showing an example of display control data used for reproducing IPB movie data at the timing shown in FIG.
図15(B)に示すIPBムービーデータは、最後の表示順番となるピクチャP6が、再生表示されている動画像において表示されなくても少なくとも見た目上支障のないダミーピクチャとして生成されているものとする。 The IPB movie data shown in FIG. 15 (B) is generated as a dummy picture that is at least visually unaffected even if the picture P6 in the last display order is not displayed in the reproduced moving image. To do.
CPU101は、各フレーム期間(F1〜F11)にて、GCL104に対して、表示制御データにもとづいて表示指示や伸長指示などの描画指示を行う(ステップS18,ステップS19参照)。
In each frame period (F1 to F11), the CPU 101 issues a drawing instruction such as a display instruction or an expansion instruction to the
GCL104は、CPU101からの描画指示に応じて、各フレーム期間(F1〜F11)において、前回のフレーム期間までにフレームバッファに展開されているピクチャを表示するためのビデオ信号を画像表示装置120に対して出力する処理(ステップS52参照)、伸長順番に従って各ピクチャを伸長してフレームバッファに展開する処理(ステップS37参照)などを行う。
In response to a drawing instruction from the CPU 101, the
そして、CPU101は、12番目のフレーム期間(F12)にて、GCL104に対して、表示制御データ(プロセスデータ番号12のプロセスデータ)にもとづいて表示指示を行う(ステップS18参照)。そして、13番目のフレーム期間(F13)における最後の表示順番のピクチャ(この例ではピクチャP6)の表示指示を行うことなく、12番目のフレーム期間までで処理を終了する。
Then, in the twelfth frame period (F12), the CPU 101 issues a display instruction to the
GCL104は、CPU101からの表示指示に応じて、12番目のフレーム期間(F12)において、前回のフレーム期間までにフレームバッファに展開されているピクチャP5を表示するためのビデオ信号を画像表示装置120に対して出力する(ステップS52参照)。そして、13番目のフレーム期間(F13)における最後の表示順番のピクチャP6の表示処理を行うことなく、12番目のフレーム期間までで処理を終了する。
In response to a display instruction from the CPU 101, the
本例では、CPU101は、12番目のフレーム期間(F12)の処理を終えると、次のフレーム期間において、続けて再生表示に用いるムービーデータ(ここでは図15(B)に示すIPムービーデータ)における1番目のフレーム期間(F1)の処理を実行する。 In this example, when the CPU 101 finishes the process of the 12th frame period (F12), in the next frame period, in the movie data (here, the IP movie data shown in FIG. 15B) used for playback display. The process of the first frame period (F1) is executed.
従って、GCL104は、12番目のフレーム期間(F12)の処理を終えると、次のフレーム期間において、CPU101からの伸長指示を含む描画指示に応じて、続けて再生表示に用いるムービーデータにおける1番目のフレーム期間(F1)において、伸長順番が1番目のピクチャI1を伸長してフレームバッファに展開する(ステップS37参照)。
Accordingly, when the
このようにして、IPBムービーデータによる動画像の再生表示が終了したあとに、続けてIPムービーデータによる動画像の再生表示が開始される。なお、続けてIPBムービーデータによる動画像の再生表示が開始される場合も同様である。 In this way, after the reproduction / display of the moving image by the IPB movie data is completed, the reproduction / display of the moving image by the IP movie data is started. The same applies to the case where the playback and display of a moving image using IPB movie data is subsequently started.
上記のように、CPU101が、動画像の再生表示を開始させる際の最初のフレーム期間における描画指示にて、動画像の再生表示に用いる圧縮動画データの指示を行うとともに伸長指示を開始し、伸長指示を開始した最初の描画指示を行ったフレーム期間の次のフレーム期間における次の描画指示にて表示指示を開始し、最初の描画指示にてIPBムービーデータを指示していたときには、Bピクチャの伸長を指示するための伸長指示が最初になされるフレーム期間以前のフレーム期間における描画指示にて、複数回の伸長指示を行う構成とし、さらに、最後の伸長順番となっているピクチャがBピクチャでないIPBムービーデータの最後の表示順番のピクチャを表示することなく1フレーム期間のブランクとし、そのブランクの後に続けて次のムービーデータの再生表示を開始するようにしているので、最後の伸長順番となっているピクチャがBピクチャでないIPBムービーデータの再生表示の後に続けてムービーデータの再生表示を行うときでも、続けて再生表示するムービーデータについての動画再生制御を開始するタイミングを共通化することができるようになり、動画再生制御の実行タイミングの管理を容易にすることができる。 As described above, the CPU 101 instructs the compressed moving image data to be used for moving image reproduction display and starts the decompression instruction and the decompression instruction by the drawing instruction in the first frame period when starting the moving image reproduction display. When the display instruction is started by the next drawing instruction in the frame period next to the frame period in which the first drawing instruction is started and the IPB movie data is instructed by the first drawing instruction, A configuration in which a decompression instruction is given a plurality of times in a drawing instruction in a frame period before the first frame period in which a decompression instruction for instructing decompression is first made, and the picture in the last decompression order is not a B picture The picture in the last display order of the IPB movie data is displayed as a blank for one frame period without being displayed, and follows the blank. Since the next movie data playback display is started, even when the movie data playback display is performed after the IPB movie data playback display in which the last picture in the expansion order is not a B picture, The timing for starting the moving image reproduction control for the movie data to be reproduced and displayed subsequently can be made common, and the management of the execution timing of the moving image reproduction control can be facilitated.
すなわち、IPムービーデータの後にムービーデータを続けて再生するときとIPBムービーデータの後にムービーデータを続けて再生するときの何れであっても、先に再生表示しているムービーデータにおいて最後の伸長指示を行ったフレーム期間が終了した2つ後のフレーム期間から続けて再生表示するムービーデータの動画再生制御を開始することができるようになり、IPムービーデータとIPBムービーデータとが混在している場合であっても、IPムービーデータの後にムービーデータを続けて再生するときとIPBムービーデータの後にムービーデータを続けて再生するときとで続けて再生するムービーデータにおけるピクチャの伸長処理を開始するタイミングが共通化されているため、動画再生制御における伸長処理の実行タイミングの管理が容易となる。 That is, whether the movie data is continuously played after the IP movie data or when the movie data is continuously played after the IPB movie data, the last decompression instruction in the movie data played back and displayed first When it becomes possible to start moving image reproduction control of movie data to be reproduced and displayed from the second frame period after the end of the frame period in which IP movie data is performed, and IP movie data and IPB movie data are mixed Even when the movie data is continuously played after the IP movie data and when the movie data is continuously played after the IPB movie data, the timing of starting the picture expansion process in the movie data to be played back continuously is determined. Execution of decompression processing in video playback control because it is standardized Timing management becomes easy.
上記のように、ムービーデータの種類によらずに共通の実行タイミングで伸長処理が開始することとされ、続けて再生するムービーデータの動画再生制御における伸長処理の実行タイミングの管理が容易とされているので、IPムービーデータとIPBムービーデータとを混在させた動画再生制御の制御内容(例えば、制御フロー、制御プログラム)の設計が容易となる。具体的には、動画再生制御の制御内容の設計を行う設計者が、動画再生制御における各ムービーデータの出現箇所の割り当てを行う際に、先に再生表示するIPムービーデータであるかIPBムービーデータであるかを意識することなく、続けて再生表示する各ムービーデータを割り当てることができ、動画再生制御の制御内容を容易に設計することができるようになる。よって、動画再生制御のための制御プログラムの開発などのための作業負担を軽減させることができる。 As described above, the decompression process starts at a common execution timing regardless of the type of movie data, and management of the execution timing of the decompression process in the moving image playback control of movie data to be continuously played back is facilitated. Therefore, it becomes easy to design the control content (for example, control flow, control program) of moving image reproduction control in which IP movie data and IPB movie data are mixed. Specifically, when the designer who designs the control content of the video playback control assigns the appearance location of each movie data in the video playback control, it is IP movie data or IPB movie data to be played back and displayed first. Therefore, it is possible to assign each piece of movie data to be reproduced and displayed continuously without being conscious of whether or not, and it is possible to easily design the control content of the moving image reproduction control. Therefore, it is possible to reduce the work load for developing a control program for controlling the reproduction of moving images.
なお、上記の実施の形態では、ムービーデータの動画再生制御が終了したあと1フレーム期間のブランクを空けて次のムービーデータの動画再生制御を開始する構成としていたが、ムービーデータの動画再生制御が終了したあと2フレーム期間以上の所定のフレーム期間のブランクを空けて次のムービーデータの動画再生制御を開始するようにしてもよい。このように構成しても、続けて再生表示するムービーデータについての動画再生制御を開始するタイミングを共通化することができるようになり、動画再生制御の実行タイミングの管理を容易にすることができる。 In the above-described embodiment, after the movie data moving image reproduction control is completed, a blank for one frame period is left and the moving image reproduction control for the next movie data is started. After the end, a blank for a predetermined frame period of two frame periods or more may be left to start moving image reproduction control of the next movie data. Even with this configuration, it is possible to share the timing for starting the moving image reproduction control for the movie data to be reproduced and displayed continuously, thereby facilitating management of the execution timing of the moving image reproduction control. .
また、ムービーデータの動画再生制御が終了したあとブランクを空けずに次のフレーム期間から次のムービーデータの動画再生制御を開始するようにしてもよい。すなわち、例えば図18に示すように、先に再生表示されているムービーデータの最後の表示順番のピクチャが表示されるフレーム期間に、次に再生表示するムービーデータの最初の表示順番のピクチャを上書きして表示するようにしてもよい。この場合、例えば、先に再生表示されているムービーデータの最後の表示順番のピクチャを示す画像データが展開されているフレームバッファ以外のフレームバッファに、次に再生表示するムービーデータの最初の表示順番のピクチャを示す画像データを展開するようにすればよい。このように構成しても、続けて再生表示するムービーデータについての動画再生制御を開始するタイミングを共通化することができるようになり、動画再生制御の実行タイミングの管理を容易にすることができる。 Alternatively, the moving image reproduction control for the next movie data may be started from the next frame period without blanking after the moving image reproduction control for the movie data is completed. That is, for example, as shown in FIG. 18, the first display order picture of the movie data to be reproduced and displayed next is overwritten in the frame period in which the last display order picture of the movie data reproduced and displayed first is displayed. May be displayed. In this case, for example, the first display order of the next movie data to be reproduced and displayed in the frame buffer other than the frame buffer in which the image data indicating the picture in the last display order of the movie data reproduced and displayed first is expanded. What is necessary is just to expand the image data which shows this picture. Even with this configuration, it is possible to share the timing for starting the moving image reproduction control for the movie data to be reproduced and displayed continuously, thereby facilitating management of the execution timing of the moving image reproduction control. .
なお、図18(A)に示す例では、9番目のフレーム期間で伸長・展開されるピクチャP5がダミーピクチャとなる。また、図18(B)に示す例では、11番目のフレーム期間で伸長・展開されるピクチャP6がダミーピクチャとなる。すなわち、図18(B)に示すように、最終伸長ピクチャがBピクチャでないIPBムービーデータの場合には、伸長順番が最後となるピクチャの伸長・展開処理を行うフレーム期間が、複数のムービーデータを連続して再生表示するときの制御上のインターバルとなる。 In the example shown in FIG. 18A, the picture P5 that is expanded and expanded in the ninth frame period is a dummy picture. In the example shown in FIG. 18B, a picture P6 that is expanded and expanded in the eleventh frame period is a dummy picture. That is, as shown in FIG. 18B, when the final decompressed picture is IPB movie data that is not a B picture, the frame period for performing the decompression / decompression processing of the picture with the last decompression order is a plurality of movie data. This is a control interval for continuous playback and display.
また、上述した各実施の形態における画像処理装置100は、複数種類のムービーデータによる動画像を再生表示する装置やシステムであればどのようなものにでも適用することができ、具体的には、例えば、ゲーム装置、パチンコ遊技機やスロットマシンなどの遊技機、街頭や電車内での動画を用いた広告を表示する広告表示装置、複数種類の動画を用いたスクリーンセイバーを表示する表示装置などに適用可能である。 In addition, the image processing apparatus 100 in each of the embodiments described above can be applied to any apparatus or system that reproduces and displays moving images based on a plurality of types of movie data. Specifically, For example, it is applied to game machines, pachinko machines, slot machines, and other game machines, advertisement display devices that display advertisements using movies on the streets and trains, display devices that display screen savers using multiple types of movies, etc. Is possible.
ここで、上述した画像処理装置100を適用可能な遊技機について詳しく説明する。まず、遊技機の一例である第1種パチンコ遊技機の全体の構成について説明する。図19はパチンコ遊技機を正面からみた正面図である。 Here, a gaming machine to which the above-described image processing apparatus 100 can be applied will be described in detail. First, the overall configuration of a first type pachinko gaming machine that is an example of a gaming machine will be described. FIG. 19 is a front view of the pachinko gaming machine as viewed from the front.
パチンコ遊技機1は、縦長の方形状に形成された外枠(図示せず)と、外枠の内側に開閉可能に取り付けられた遊技枠とで構成される。また、パチンコ遊技機1は、遊技枠に開閉可能に設けられている額縁状に形成されたガラス扉枠2を有する。遊技枠は、外枠に対して開閉自在に設置される前面枠(図示せず)と、機構部品等が取り付けられる機構板と、それらに取り付けられる種々の部品(後述する遊技盤を除く。)とを含む構造体である。
The
図19に示すように、パチンコ遊技機1は、額縁状に形成されたガラス扉枠2を有する。ガラス扉枠2の下部表面には打球供給皿(上皿)3がある。打球供給皿3の下部には、打球供給皿3に収容しきれない遊技球を貯留する余剰球受皿4と打球を発射する打球操作ハンドル(操作ノブ)5が設けられている。ガラス扉枠2の背面には、遊技盤6が着脱可能に取り付けられている。なお、遊技盤6は、それを構成する板状体と、その板状体に取り付けられた種々の部品とを含む構造体である。また、遊技盤6の前面には遊技領域7が形成されている。
As shown in FIG. 19, the
遊技領域7の中央付近には、それぞれが識別情報としての図柄を可変表示する複数の可変表示部を含む可変表示装置(特別可変表示部)9が設けられている。可変表示装置9には、例えば「左」、「中」、「右」の3つの可変表示部(図柄表示エリア)がある。この例では、可変表示装置9は、上述した画像表示装置120の機能を備えている。なお、可変表示装置9には、始動入賞口14に入った有効入賞球数すなわち始動入賞記憶数を表示する4つの特別図柄始動記憶表示エリア(始動記憶表示エリア)18が設けられている。有効始動入賞(始動入賞記憶数が4未満のときの始動入賞)がある毎に、表示色を変化させる(例えば青色表示から黄色表示に変化させる)始動記憶表示エリア18を1増やす。そして、可変表示装置9の可変表示が開始される毎に、表示色が変化している始動記憶表示エリア18を1減らす(すなわち表示色をもとに戻す)。
Near the center of the
可変表示装置9の下方には、始動入賞口14を含む可変入賞球装置15が設けられている。始動入賞口14に入った入賞球は、遊技盤6の背面に導かれ、始動口スイッチ(図示せず)によって検出される。また、可変入賞球装置15は、開閉動作を行う左右の開閉片を備えている。この開閉片は、ソレノイド(図示せず)によって開状態とされる。
Below the
可変入賞球装置15の下部には、特定遊技状態(大当り状態)においてソレノイド(図示せず)によって開状態とされる開閉板20が設けられている。開閉板20は大入賞口を開閉する手段である。開閉板20から遊技盤6の背面に導かれた入賞球のうち一方(V入賞領域)に入った入賞球はV入賞スイッチ(図示せず)で検出され、開閉板20からの入賞球はカウントスイッチ(図示せず)で検出される。遊技盤6の背面には、大入賞口内の経路を切り換えるためのソレノイド(図示せず)も設けられている。
An opening /
ゲート32に遊技球が入賞しゲートスイッチ(図示せず)で検出されると、普通図柄始動入賞記憶が上限に達していなければ、所定の乱数値が抽出される。そして、普通図柄表示器10において表示状態が変化する可変表示を開始できる状態であれば、普通図柄表示器10の表示の可変表示が開始される。普通図柄表示器10において表示状態が変化する可変表示を開始できる状態でなければ、普通図柄始動入賞記憶の値が1増やされる。普通図柄表示器10の近傍には、普通図柄始動入賞記憶数を表示する4つのLEDによる表示部を有する普通図柄始動記憶表示器41が設けられている。ゲート32への入賞がある毎に、普通図柄始動記憶表示器41は点灯するLEDを1増やす。そして、普通図柄表示器10の可変表示が開始される毎に、点灯するLEDを1減らす。なお、特別図柄と普通図柄とを一つの可変表示装置で可変表示するように構成することもできる。その場合には、特別可変表示部と普通可変表示部とは1つの可変表示装置で実現される。
When a game ball wins the
この例では、左右のランプ(点灯時に図柄が視認可能になる)が交互に点灯することによって普通図柄の可変表示が行われ、可変表示は所定時間(例えば29.2秒)継続する。そして、可変表示の終了時に左側のランプが点灯すれば当りとなる。当りとするか否かは、ゲート32に遊技球が入賞したときに抽出された乱数の値が所定の当り判定値と一致したか否かによって決定される。普通図柄表示器10における可変表示の表示結果が当りである場合に、可変入賞球装置15が所定回数、所定時間だけ開状態になって遊技球が入賞しやすい状態になる。すなわち、可変入賞球装置15の状態は、普通図柄の停止図柄が当り図柄である場合に、遊技者にとって不利な状態から有利な状態に変化する。
In this example, the left and right lamps (the symbols can be visually recognized when lit) are alternately lit, so that the normal symbols are variably displayed, and the variable display continues for a predetermined time (for example, 29.2 seconds). If the left lamp is turned on at the end of the variable display, it is a win. Whether or not to win is determined by whether or not the value of the random number extracted when the game ball wins the
さらに、特別遊技状態としての確変状態では、普通図柄表示器10における停止図柄が当り図柄になる確率が高められるとともに、可変入賞球装置15の開放時間と開放回数とのうちの一方または双方が高められ、遊技者にとってさらに有利になる。また、確変状態等の所定の状態では、普通図柄表示器10における可変表示期間(変動時間)が短縮されることによって、遊技者にとってさらに有利になるようにしてもよい。
Furthermore, in the probability variation state as the special game state, the probability that the stop symbol in the
遊技盤6には、複数の入賞口29,30,33,39が設けられ、遊技球の入賞口29,30,33,39への入賞は、それぞれ入賞口スイッチによって検出される。遊技領域7の左右周辺には、遊技中に点滅表示される飾りランプ25が設けられ、下部には、入賞しなかった打球を吸収するアウト口26がある。また、遊技領域7の外側の左右上部には、効果音や音声を発する2つのスピーカ27が設けられている。遊技領域7の外周には、天枠ランプ28a、左枠ランプ28bおよび右枠ランプ28cが設けられている。
The
そして、この例では、左枠ランプ28bの近傍に、賞球残数があるときに点灯する賞球ランプ51が設けられ、右枠ランプ28cの近傍に、補給球が切れたときに点灯する球切れランプ52が設けられている。
In this example, a
打球発射装置から発射された遊技球は、打球レールを通って遊技領域7に入り、その後、遊技領域7を下りてくる。打球が始動入賞口14に入り始動口スイッチで検出されると、図柄の可変表示を開始できる状態であれば、可変表示装置9において特別図柄が可変表示(変動)を始める。図柄の可変表示を開始できる状態でなければ、始動入賞記憶数を1増やす。
The game balls launched from the hit ball launching device enter the
可変表示装置9における特別図柄の可変表示は、一定時間が経過したときに停止する。停止時の特別図柄の組み合わせが大当り図柄(特定表示態様)であると、大当り遊技状態に移行する。すなわち、開閉板20が、一定時間経過するまで、または、所定個数(例えば10個)の打球が入賞するまで開放する。そして、開閉板20の開放中に打球がV入賞領域に入賞しV入賞スイッチで検出されると、継続権が発生し開閉板20の開放が再度行われる。継続権の発生は、所定回数(例えば15ラウンド)許容される。
The variable display of the special symbol on the
停止時の可変表示装置9における特別図柄の組み合わせが確率変動を伴う大当り図柄(確変図柄)の組み合わせである場合には、次に大当りとなる確率が高くなる。すなわち、確変状態という遊技者にとってさらに有利な状態(特別遊技状態)となる。
When the combination of special symbols in the
図19に示すような遊技機において、可変表示装置9におけるムービー画像などの表示制御を画像処理装置100によって行うようにすればよい。遊技機においては、図柄を可変表示する可変表示装置9の表示制御は、例えば、遊技機に設けられている演出制御基板に搭載されている演出制御手段によって行われる。従って、この演出制御手段の機能に、上述したCPU101の機能を追加するようにすればよい。この場合、ムービー画像により、リーチ演出、大当り演出、予告演出などを行うことが考えられる。
In the gaming machine as shown in FIG. 19, display control of a movie image or the like on the
次に、遊技機の他の一例であるスロット機(スロットマシン)の全体の構成について説明する。図20はスロット機を正面からみた正面図である。 Next, an overall configuration of a slot machine (slot machine) which is another example of the gaming machine will be described. FIG. 20 is a front view of the slot machine as seen from the front.
図20に示すように、スロット機500は、中央付近に遊技パネル501が着脱可能に取り付けられている。また、遊技パネル501の前面の中央付近には、複数種類の図柄が可変表示される可変表示装置502が設けられている。この実施の形態では、可変表示装置502には、「左」、「中」、「右」の3つの図柄表示エリアがあり、各図柄表示エリアに対応してそれぞれ図柄表示リール502a,502b,502cが設けられている。
As shown in FIG. 20, in the
遊技パネル501の下部には、遊技者が各種の操作を行うための各種入力スイッチ等が配される操作テーブル520が設けられている。操作テーブル520の奥側には、コインを1枚ずつBETする(かける)ためのBETスイッチ521、1ゲームでかけることのできる最高枚数(本例では3枚)ずつコインをBETするためのMAXBETスイッチ522、精算スイッチ523、及びコイン投入口524が設けられている。コイン投入口524に投入されたコインは、図示しない投入コインセンサによって検知される。
Below the
操作テーブル520の手前側には、スタートスイッチ525、左リールストップスイッチ526a、中リールストップスイッチ526b、右リールストップスイッチ526c及びコイン詰まり解消スイッチ527が設けられている。操作テーブル520の手前左右には、それぞれランプ528a,528bが設けられている。操作テーブル520の下部には、効果音等を出力するスピーカ530が設けられている。
On the front side of the operation table 520, a
遊技パネル501の上部には、遊技者に遊技方法や遊技状態等を報知する画像表示装置(LCD:液晶表示装置)540が設けられている。例えば、入賞発生時に、キャラクタが所定動作を行う画像を画像表示装置540に表示することで、後述する当選フラグが設定されていることを遊技者に報知する。この例では、画像表示装置540は、上述した画像表示装置120の機能を備えている。また、画像表示装置540の左右には、効果音を発する2つのスピーカ541L,541Rが設けられている。
On the upper part of the
なお、スロット機500で発生する入賞役には、小役入賞と、リプレイ入賞と、ビッグボーナス入賞と、レギュラーボーナス入賞とがある。スロット機500では、スタートスイッチ525を操作したタイミングで乱数が抽出され、上記いずれかの入賞役による入賞の発生を許容するか否かを決定する。入賞の発生が許容されていることを、「内部当選している」という。内部当選した場合、その旨を示す当選フラグがスロット機500の内部で設定される。当選フラグが設定された状態でのゲームでは、その当選フラグに対応する入賞役を引き込むことが可能なようにリール502a〜502cが制御される。一方、当選フラグが設定されていない状態でのゲームでは、入賞が発生しないようにリール502a〜502cが制御される。
The winning combinations generated in the
次に、スロット機により提供されるゲームの概要について説明する。
例えば、コイン投入口524からコインが投入されBETスイッチ521又はMAXBETスイッチ522が押下される等してかけ数が設定されると、スタートスイッチ525の操作が有効となる。そして、遊技者によってスタートスイッチ525が操作されると、可変表示装置502に設けられている各図柄表示リール502a〜502cが回転を始める。また、スタートスイッチ525を操作したタイミングで、レギュラーボーナス入賞又はビッグボーナス入賞が内部当選した場合には、例えば、画像表示装置540に所定のキャラクタが所定の動作を行っている画面を表示する等して、内部当選した旨が遊技者等に報知される。
Next, an outline of the game provided by the slot machine will be described.
For example, when a multiplier is set by inserting a coin from the
各図柄表示リール502a〜502cが回転を始めてから所定時間が経過すると、各リールストップスイッチ526a〜526cの操作が有効となる。この状態で、遊技者が各リールストップスイッチ526a〜526cのいずれかを押下すれば、操作されたストップスイッチに対応するリールの回転が停止する。なお、各図柄表示リール502a〜502cを停止させずに、所定期間以上放置した場合には、各図柄表示リール502a〜502cが自動的に停止する。
When a predetermined time elapses after the
すべての図柄表示リール502a〜502cが停止した時点で、可変表示装置502に表示されている各図柄表示リール502a〜502cの上段、中段、下段の3段の図柄中、かけ数に応じて定められる有効な入賞ライン上に位置する図柄の組合せによって入賞したか否かが定められる。かけ数が1の場合には、可変表示装置502における中段の横1列の入賞ラインのみが有効となる。かけ数が2の場合には、可変表示装置502における上段、中段、下段の横3列の入賞ラインが有効となる。かけ数が3の場合には、可変表示装置502における横3列と斜め対角線上2列の合計5本の入賞ラインが有効ラインとなる。
When all the
有効ライン上の図柄の組合せが、予め定められた特定の表示態様となって入賞が発生した場合には、音、光、画像表示装置540の表示等によって所定の遊技演出がなされ、入賞の発生に応じたゲームが開始される。
When a combination of symbols on the active line becomes a specific display mode determined in advance and a winning occurs, a predetermined game effect is made by sound, light, display on the
スロット機500では、スロット機500に搭載されている演出制御手段が、スロット機500に設けられている画像表示装置540の表示制御を行う。従って、この演出制御手段の機能に、上述したCPU101の機能を追加するようにすればよい。画像表示装置540には、演出制御手段の制御によって、飾り図柄の変動表示や、遊技状態や遊技方法を報知するための表示等の様々な情報が表示される。そのような、飾り図柄の変動表示や、遊技状態や遊技方法を報知するための表示等の様々な情報の表示をムービー画像により行い、そのムービー画像の表示制御を画像処理装置100によって行うようにすればよい。
In the
本発明は、IP圧縮動画データとIPB圧縮動画データとを混在して演出に使用する画像処理装置において、動画再生制御における伸長処理の実行タイミングの管理を容易にし、動画再生制御の制御負担を極力軽減させるために有用である。 The present invention facilitates management of the execution timing of decompression processing in moving image reproduction control in an image processing apparatus that uses both IP compressed moving image data and IPB compressed moving image data for production, and minimizes the control burden of moving image reproduction control as much as possible. Useful for reducing.
100 画像処理装置
101 CPU
102 ROM(制御ROM)
103 RAM
104 GCL
105 CGROM(画像ROM)
106 SDRAM(VRAM)
107 パレットバッファ
108 CGデータバッファ
109 描画制御部
110 表示信号制御部
111 動画伸長部
120 画像表示装置
100 Image processing apparatus 101 CPU
102 ROM (control ROM)
103 RAM
104 GCL
105 CGROM (image ROM)
106 SDRAM (VRAM)
DESCRIPTION OF SYMBOLS 107
Claims (6)
双方向予測符号化により圧縮された双方向圧縮画像データを含む第1圧縮動画データと、前記双方向圧縮画像データを含まない第2圧縮動画データとを含む複数の圧縮動画データを記憶する圧縮動画データ記憶手段と、
あらかじめ定められているフレーム期間毎に、圧縮動画データにもとづく動画像を再生表示させるための制御情報を設定する制御情報設定手段と、
該制御情報設定手段により設定された制御情報に含まれる伸長指示に応じて、前記圧縮動画データに含まれている圧縮画像データを、あらかじめ定められている伸長順番で伸長する伸長処理を行う伸長処理手段と、
前記制御情報設定手段により設定された前記制御情報に含まれる表示指示に応じて、前記伸長処理手段により伸長された画像データにもとづく画像を、あらかじめ定められた表示順番に従って前記フレーム期間毎に前記画像表示手段に順次表示することで、前記圧縮動画データにもとづく動画像を再生表示する再生表示処理を行う再生表示処理手段と、
前記圧縮動画データにもとづく動画像を繰り返し連続して再生表示する連続再生表示手段と、を備え、
該連続再生表示手段は、前記第2圧縮動画データのみにもとづく動画像を繰り返し連続して再生表示し、
前記制御情報設定手段は、
動画像の再生表示を開始させる際に設定する最初の制御情報にて動画像の再生表示に用いる圧縮動画データを指定するとともに、該圧縮動画データを指定した前記最初の制御情報を設定したフレーム期間から前記伸長指示を開始し、
前記伸長指示を開始した制御情報を設定したフレーム期間の次のフレーム期間から前記表示指示を開始し、
前記最初の制御情報にて指定した圧縮動画データが前記第1圧縮動画データであったときは、双方向圧縮画像データの伸長を指示するための伸長指示が最初になされるフレーム期間以前のフレーム期間に設定する制御情報にて、複数回の伸長指示を行う
ことを特徴とする画像処理装置。 An image processing apparatus that performs image processing for reproducing and displaying a moving image based on compressed moving image data including a plurality of compressed image data that has been compressed by a predetermined compression method on an image display means,
Compressed moving image storing a plurality of compressed moving image data including first compressed moving image data including bidirectional compressed image data compressed by bidirectional predictive coding and second compressed moving image data not including the bidirectional compressed image data Data storage means;
Control information setting means for setting control information for reproducing and displaying a moving image based on compressed video data for each predetermined frame period;
Decompression processing for performing decompression processing for decompressing the compressed image data included in the compressed moving image data in a predetermined decompression order in accordance with the decompression instruction included in the control information set by the control information setting means Means,
In response to a display instruction included in the control information set by the control information setting unit, an image based on the image data expanded by the expansion processing unit is displayed for each frame period according to a predetermined display order. Reproduction display processing means for performing reproduction display processing for reproducing and displaying a moving image based on the compressed moving image data by sequentially displaying on the display means;
Continuous reproduction display means for repeatedly reproducing and displaying a moving image based on the compressed moving image data,
The continuous reproduction display means repeatedly reproduces and displays a moving image based only on the second compressed moving image data,
The control information setting means includes
A frame period in which the compressed video data used for the playback and display of the moving image is specified by the first control information set when starting the playback and display of the moving image, and the first control information specifying the compressed moving image data is set The extension instruction is started from
The display instruction is started from the frame period next to the frame period in which the control information for starting the extension instruction is set,
When the compressed moving image data specified by the first control information is the first compressed moving image data, the frame period before the frame period in which the expansion instruction for instructing expansion of the bidirectional compressed image data is first made An image processing apparatus characterized by performing a plurality of decompression instructions with the control information set in (1).
制御情報設定手段により設定された制御情報にて指定された動画像の再生表示に用いる圧縮動画データが第1圧縮動画データであるか第2圧縮動画データであるかに応じて前記伸長処理で用いるフレームバッファの数を決定するフレームバッファ数決定手段を備え、
前記フレームバッファ数決定手段は、第1圧縮動画データであったときは、第2圧縮動画データであったときよりも多い数に決定する
請求項1記載の画像処理装置。 The decompression processing means performs a frame buffer storage process for storing the image data obtained by decompressing the compressed image data in any of a plurality of frame buffers in the decompression process,
Used in the decompression process depending on whether the compressed moving image data used for reproducing and displaying the moving image designated by the control information set by the control information setting means is the first compressed moving image data or the second compressed moving image data. Frame buffer number determining means for determining the number of frame buffers;
The image processing apparatus according to claim 1, wherein the frame buffer number determination unit determines the number of first compressed moving image data to be larger than that of second compressed moving image data.
制御情報設定手段により設定された制御情報にて指定された動画像の再生表示に用いる圧縮動画データにもとづく当該動画像における画像サイズを判別し、判別結果に応じたサイズの記憶領域をフレームバッファとして設定するフレームバッファ設定手段を備えた
請求項1または請求項2記載の画像処理装置。 The decompression processing means performs a frame buffer storage process for storing the image data obtained by decompressing the compressed image data in any of a plurality of frame buffers in the decompression process,
The image size in the moving image is determined based on the compressed moving image data used for reproducing and displaying the moving image specified by the control information set by the control information setting means, and the storage area of the size corresponding to the determination result is used as a frame buffer. The image processing apparatus according to claim 1, further comprising a frame buffer setting unit for setting.
請求項1から請求項3のうちいずれかに記載の画像処理装置。 The control information setting means performs the decompression instruction with the control information set in the predetermined frame period, and then ends the frame period before the decompression processing executed by the decompression processing means in response to the decompression instruction is completed. The display instruction to display an image based on the same image data as the predetermined frame period in the control information set in the next frame period is performed. Processing equipment.
請求項1から請求項4のうちいずれかに記載の画像処理装置。 Compressed video data includes a larger amount of intra-frame compressed image data compressed by intra-frame coding in a moving image based on the compressed moving image data than in a portion where the moving speed of the displayed object is high compared to a portion where the moving speed of the display object is slow. The image processing apparatus according to any one of claims 1 to 4, including a portion having a used data structure.
スプライト画像を表示するためのスプライト画像データを記憶するスプライト画像データ記憶手段と、
制御情報設定手段により設定された制御情報に含まれる画像合成指示に応じて、再生表示処理手段によって圧縮動画データにもとづく動画像の再生表示処理が実行される際に、前記スプライト画像データ記憶手段からスプライト画像データを読み出してスプライト画像を生成し、前記圧縮動画データにもとづく動画像における各画像上に前記スプライト画像を順次合成する合成画像生成手段と、を備え、
前記制御情報設定手段は、1フレーム期間毎に前記画像合成指示を含む制御情報を設定し、2フレーム期間毎に伸長指示を含む制御情報を設定する
請求項1から請求項5のうちいずれかに記載の画像処理装置。 The decompression processing means performs a frame buffer storage process for storing the image data obtained by decompressing the compressed image data in any of a plurality of frame buffers in the decompression process,
Sprite image data storage means for storing sprite image data for displaying a sprite image;
From the sprite image data storage unit, when the reproduction display processing unit executes the moving image reproduction display processing based on the compressed moving image data in accordance with the image synthesis instruction included in the control information set by the control information setting unit. A sprite image is generated by reading out the sprite image data, and the sprite image is sequentially synthesized on each image in the moving image based on the compressed moving image data,
The control information setting means sets control information including the image composition instruction every frame period, and sets control information including a decompression instruction every two frame periods. The image processing apparatus described.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005156423A JP4624855B2 (en) | 2005-05-27 | 2005-05-27 | Image processing device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005156423A JP4624855B2 (en) | 2005-05-27 | 2005-05-27 | Image processing device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006333268A true JP2006333268A (en) | 2006-12-07 |
JP4624855B2 JP4624855B2 (en) | 2011-02-02 |
Family
ID=37554446
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005156423A Expired - Fee Related JP4624855B2 (en) | 2005-05-27 | 2005-05-27 | Image processing device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4624855B2 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112214174A (en) * | 2020-10-21 | 2021-01-12 | 合肥速显微电子科技有限公司 | Flash-memory-based cache decompression system and method for mobile equipment |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0818953A (en) * | 1994-07-01 | 1996-01-19 | Hitachi Ltd | Dynamic picture decoding display device |
JPH11168698A (en) * | 1997-12-05 | 1999-06-22 | Matsushita Electric Ind Co Ltd | Method and device for reproduction |
JP2000032456A (en) * | 1998-07-15 | 2000-01-28 | Nippon Telegr & Teleph Corp <Ntt> | Dynamic image coding method using sprite coding, decoding method, coder, decoder, dynamic image coding program and recording medium with dynamic image decoding program recorded therein |
JP2002016926A (en) * | 2000-06-28 | 2002-01-18 | Nippon Telegr & Teleph Corp <Ntt> | Sprite-encoded data transmission method, sprite encoder, sprite-encoded data decoder and storage medium |
JP2004321569A (en) * | 2003-04-25 | 2004-11-18 | Sankyo Kk | Game machine |
-
2005
- 2005-05-27 JP JP2005156423A patent/JP4624855B2/en not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0818953A (en) * | 1994-07-01 | 1996-01-19 | Hitachi Ltd | Dynamic picture decoding display device |
JPH11168698A (en) * | 1997-12-05 | 1999-06-22 | Matsushita Electric Ind Co Ltd | Method and device for reproduction |
JP2000032456A (en) * | 1998-07-15 | 2000-01-28 | Nippon Telegr & Teleph Corp <Ntt> | Dynamic image coding method using sprite coding, decoding method, coder, decoder, dynamic image coding program and recording medium with dynamic image decoding program recorded therein |
JP2002016926A (en) * | 2000-06-28 | 2002-01-18 | Nippon Telegr & Teleph Corp <Ntt> | Sprite-encoded data transmission method, sprite encoder, sprite-encoded data decoder and storage medium |
JP2004321569A (en) * | 2003-04-25 | 2004-11-18 | Sankyo Kk | Game machine |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112214174A (en) * | 2020-10-21 | 2021-01-12 | 合肥速显微电子科技有限公司 | Flash-memory-based cache decompression system and method for mobile equipment |
Also Published As
Publication number | Publication date |
---|---|
JP4624855B2 (en) | 2011-02-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5229976B2 (en) | Game machine | |
JP2007000286A (en) | Game machine | |
JP5229974B2 (en) | Game machine | |
JP2007000288A (en) | Game machine | |
JP2005152354A (en) | Game machine | |
JP2005124942A (en) | Game machine | |
JP5512838B2 (en) | Game machine | |
JP4624854B2 (en) | Image processing device | |
JP4494295B2 (en) | Image processing device | |
JP4528515B2 (en) | Game machine | |
JP5229975B2 (en) | Game machine | |
JP4624855B2 (en) | Image processing device | |
JP4494292B2 (en) | Image processing device | |
JP4472379B2 (en) | Game machine | |
JP4494293B2 (en) | Image processing device | |
JP4494294B2 (en) | Image processing device | |
JP4494291B2 (en) | Image processing device | |
JP4624863B2 (en) | Image processing device | |
JP3971733B2 (en) | Game machine | |
JP5230026B2 (en) | Game machine | |
JP2004174116A (en) | Game machine | |
JP5230028B2 (en) | Game machine | |
JP5230027B2 (en) | Game machine | |
JP5512840B2 (en) | Game machine | |
JP5512839B2 (en) | Game machine |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080422 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100202 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100330 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100527 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20101026 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20101104 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4624855 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131112 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131112 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |