JPH0225571B2 - - Google Patents

Description

【発明の詳細な説明】 (1) 発明の属する分野の説明 本発明は、画像音声混在情報提供システム、特
に情報センタと端末とを有するセンタ・エンド形
システムにおいて、画像と音声との提供時間およ
び間隔を情報センタの送出時間や伝送路の速度に
独立に制御する画像音声混在情報提供システムに
関するものである。なお、画像と音声とはそれぞ
れ識別符号がつけられデイジタル化されて蓄積さ
れているものとしている。[Detailed Description of the Invention] (1) Description of the field to which the invention pertains The present invention relates to a system for providing mixed image and audio information, particularly a center-end type system having an information center and a terminal. This invention relates to an image and audio mixed information providing system that controls the interval independently of the transmission time of the information center and the speed of the transmission line. It is assumed that the images and sounds are each given an identification code and are digitized and stored.

(2) 従来の技術の説明 従来、音声のような時間要素を含む情報と画像
情報とを同時に提供するシステムでは、情報セン
タが画像と音声との提供時間および間隔を実時間
で制御していた。例えば、音声情報がＶ（ｂ／ｓ）
のデータレートで符号化されている時には、情報
センタは画像情報を伝送する間の適当な時点で音
声情報をＶ（ｂ／ｓ）のデータレートで挿入しな
ければならなかつた。このため、情報センタに端
末に一定のデータレートで情報を供給するための
装置が必要である欠点があつた。また、端末から
の１度の要求で提供する情報（以後、頁と称す）
を全て蓄積できるメモリを端末に備えさせること
により情報センタ・端末間のデータレートを任意
にする方式が考えられるが、端末に１頁分のメモ
リを必要とする欠点があつた。(2) Description of conventional technology Conventionally, in systems that simultaneously provide information including time elements such as audio and image information, an information center controls the provision time and interval of images and audio in real time. . For example, if the audio information is V (b/s)
When encoded at a data rate of V(b/s), the information center had to insert audio information at an appropriate time during the transmission of the image information at a data rate of V(b/s). This has resulted in the disadvantage that the information center requires a device for supplying information to the terminals at a constant data rate. Also, information provided with a single request from a terminal (hereinafter referred to as a page)
It is conceivable to make the data rate between the information center and the terminal arbitrary by equipping the terminal with a memory that can store all of the data, but this method has the disadvantage that the terminal requires memory for one page.

(3) 発明の目的 本発明は画像音声混在情報中の、ある区切符号
から次の区切符号までを端末で蓄積するように
し、情報センタ・端末間のデータレートを任意に
することができ、端末に要求されるメモリを減少
するようにすることを目的としている。(3) Purpose of the Invention The present invention stores information from one delimiter code to the next delimiter code in image/audio mixed information in a terminal, and allows the data rate between the information center and the terminal to be arbitrary. The purpose is to reduce the memory required for

(4) 発明の構成および作用の説明 第１図は本発明の実施例であつて、１は情報セ
ンタ、２は端末、３は上り回線、４は下り回線、
５は入力部、６は通信バツフア、７は画像情報音
声情報分別部、８は前置区切符号検出部、９は音
声バツフア、１０は後置区切符号検出部、１１は
区切符号カウンタＡ、１２はゲートＡ、１３は音
声再生部、１４は区切符号カウンタＢ、１５はゲ
ートＢ、１６は画像情報表示部である。(4) Description of structure and operation of the invention FIG. 1 shows an embodiment of the invention, in which 1 is an information center, 2 is a terminal, 3 is an uplink, 4 is a downlink,
5 is an input unit, 6 is a communication buffer, 7 is an image/audio information separation unit, 8 is a prefix delimiter detection unit, 9 is an audio buffer, 10 is a postfix delimiter detection unit, 11 is a delimiter counter A, 12 13 is a gate A, 13 is an audio reproduction section, 14 is a delimiter counter B, 15 is a gate B, and 16 is an image information display section.

なお、通信バツフア６は後述する如く、画像情
報の一つがゲート１５を通過し得ない状態にある
場合には、当該画像情報以降の情報は、バツフア
６内に滞留されるように構成されている。 As will be described later, the communication buffer 6 is configured such that when one piece of image information cannot pass through the gate 15, the information after that image information is retained in the buffer 6. .

これを動作するには入力部５から上り回線３を
とおして情報センタ１に読出要求を行う。情報セ
ンタ１は読出要求のあつた画面を検索し下り回線
４をとおして端末２の通信バツフア６に出力す
る。通信バツフア６は受信した情報を画像情報音
声情報分別部７に送る。画像情報音声情報分別部
７が受けとる速度が情報センタ１が送り出す速度
より遅い場合には通信バツフア６がオーバーフロ
ーする前に上り回線３をとおして情報センタ１に
情報送出停止を要求する。この後、通信バツフア
に余裕が出ると上り回線３をとおして情報センタ
１に情報送出再開を要求する。このようにして下
り情報のデータレートを画像音声の再生速度に応
じて制御することができる。画像情報音声情報分
別部７で画像音声混在情報は夫々の制御コードに
もとづいて画像情報と音声情報とに分離される。
分離された音声情報と区切符号とは前置区切符号
検出部８に送られ、区切符号Ａ或はＢが検出され
た後、当該音声情報と区切符号とは夫々音声バツ
フア９に送られる。さらに音声バツフア９の内容
はゲートＡ１２がオンしている間ゲートＡ１２を
とおして後置区切符号検出部１０に送られる。こ
のとき、前記区切符号Ａ，Ｂが後置区切符号検出
部１０において再び検出された後、音声再生部１
３に送られ音声情報は音声として再生される。区
切符号カウンタＡ１１は前置区切符号検出部８で
検出した区切符号Ａと後置区切符号検出部１０で
検出した区切符号Ａとの差を計数するものであ
り、音声バツフア９内に存在している状態にある
区切符号Ａの数を示す。同様に区切符号カウンタ
Ｂ１４は前置区切符号検出部８で検出した区切符
号Ｂと後置区切符号検出部１０で検出した区切符
号Ｂとの差を計数するものであり、音声バツフア
９内に存在している状態にある区切符号Ｂの数を
示す。ゲートＡ１２は区切符号カウンタＡ１１の
内容が１以上のときのみ音声バツフア９から後置
区切符号検出部１０へ音声情報を転送するための
ものである。すなわち、音声バツフアに１個以上
の区切符号Ａが存在するときのみ音声再生が行わ
れる。ゲートＢ１５は区切符号カウンタＢ１４の
内容が０のときのみ画像情報音声情報分別部７か
ら画像情報表示部１６に画像情報を転送するため
のものである。すなわち、音声バツフアに区切符
号Ｂが存在する場合、新たな画像の表示を抑止す
るものであり、ある音声の再生後に次の画像を提
示することを可能とする。ゲートＢ１５がオフ状
態にあるときには、その間情報は通信バツフア６
内に滞留されている。 To operate this, a read request is made from the input section 5 to the information center 1 through the uplink 3. The information center 1 retrieves the screen for which the read request has been made and outputs it to the communication buffer 6 of the terminal 2 via the downlink 4. The communication buffer 6 sends the received information to the image/audio information sorting section 7. If the speed at which the image/audio information sorting section 7 receives is slower than the speed at which the information center 1 sends out, it requests the information center 1 to stop sending information through the uplink 3 before the communication buffer 6 overflows. Thereafter, when the communication buffer becomes available, a request is made to the information center 1 via the uplink 3 to resume information transmission. In this way, the data rate of the downlink information can be controlled according to the reproduction speed of the image and audio. The image/audio information separation section 7 separates the image/audio mixed information into image information and audio information based on the respective control codes.
The separated audio information and delimiter code are sent to a prefix delimiter detection section 8, and after delimiter code A or B is detected, the audio information and delimiter code are sent to an audio buffer 9, respectively. Further, the contents of the audio buffer 9 are sent to the post-delimiter detection section 10 through the gate A12 while the gate A12 is on. At this time, after the delimiter codes A and B are detected again in the post-delimiter detecting section 10, the audio reproducing section 1
3 and the audio information is reproduced as audio. The delimiter counter A11 counts the difference between the delimiter A detected by the prefix delimiter detecting section 8 and the delimiter A detected by the postdelimiter detecting section 10. Indicates the number of delimiters A in the current state. Similarly, the delimiter counter B14 counts the difference between the delimiter B detected by the prefix delimiter detection section 8 and the delimiter B detected by the postdelimiter detection section 10, and exists in the audio buffer 9. Indicates the number of delimiters B in the current state. The gate A12 is for transferring audio information from the audio buffer 9 to the post-delimiter detecting section 10 only when the content of the delimiter counter A11 is 1 or more. That is, audio reproduction is performed only when one or more delimiters A exist in the audio buffer. The gate B15 is for transferring image information from the image/audio information sorting section 7 to the image information display section 16 only when the content of the delimiter counter B14 is 0. That is, when the delimiter B exists in the audio buffer, the display of a new image is inhibited, and the next image can be presented after a certain audio is played back. When the gate B15 is in the off state, the information is transferred to the communication buffer 6.
is retained within.

区切符号Ａは文節と文節との間あるいは文章と
文章との間などで不定長にわたり音声再生が中断
してもよい所に挿入しておく。区切符号Ａから区
切符号Ａまでの一連の情報をブロツクと称す。端
末ではブロツクの蓄積が完了した後音声再生が開
始される。区切符号Ｂは、これ以前の音声情報の
再生を全て完了してから次の画像情報の表示を開
始することを指定する符号であつて、音声情報と
画像情報との中間におき、音声情報と画像表示と
の順番を保存するために用いる。区切符号Ｂから
区切符号Ｂまでの一連の情報をセグメントと称
す。第２図は区切符号Ａの効果を、第３図は区切
符号Ｂの効果を説明する説明図である。また、第
４図は１画面を構成するセグメントとブロツクの
関係を示す説明図である。一般的には１画面は表
示再生の順番を保存する複数のセグメントで構成
される。各セグメントは中断を許す複数のブロツ
クで構成される。 The delimiter A is inserted between clauses or between sentences, where audio playback may be interrupted for an indefinite length. A series of information from delimiter A to delimiter A is called a block. After the block storage is completed, the terminal starts audio playback. Delimiter code B is a code that specifies that the display of the next image information should be started after all previous audio information has been reproduced, and is placed between the audio information and the image information, and is placed between the audio information and the image information. Used to save the order of image display. A series of information from delimiter B to delimiter B is called a segment. FIG. 2 is an explanatory diagram illustrating the effect of delimiter A, and FIG. 3 is an explanatory diagram illustrating the effect of delimiter B. FIG. 4 is an explanatory diagram showing the relationship between segments and blocks that make up one screen. Generally, one screen is composed of a plurality of segments that preserve the order of display playback. Each segment consists of multiple blocks that allow interruptions.

第２図図示の場合、同じセグメントに属する画
像情報「画１」、「画１」が伝送されてきたのち
に、同じブロツクに属する「音１」、「音１」、「音
１」が伝送されてき、次いで区切符号Ａが伝送さ
れてき…ている場合を表わしている。区切符号Ａ
が到来したことによつて、前記「音１」群がまと
めて再生される。図示「音２」などについても同
様である。その間、図示の場合には「画１」が再
生され続けられている。 In the case shown in Figure 2, after the image information "Picture 1" and "Picture 1" belonging to the same segment are transmitted, "Sound 1", "Sound 1", and "Sound 1" belonging to the same block are transmitted. , and then the delimiter A is transmitted. Delimiter A
Due to the arrival of the "sound 1" group, the "sound 1" group is reproduced all at once. The same applies to the illustrated "sound 2" and the like. Meanwhile, in the illustrated case, "picture 1" continues to be reproduced.

第３図図示の場合、区切符号Ａについては第２
図に図示した態様と同じであるが、第３図図示に
おいて区切符号Ｂが到来すると、既に再生されて
いる第１のセグメントに属する画像情報「画１」
の再生と一緒に、第２のセグメントに属する画像
情報「画２」が再生され、更に図示の如く「画
３」が再生されて行く。 In the case shown in Figure 3, the delimiter A is the second
Although the mode is the same as that shown in FIG. 3, when the delimiter B arrives in the illustration in FIG.
At the same time as the image information "Picture 2" belonging to the second segment is reproduced, "Picture 3" is further reproduced as shown in the figure.

(5) 効果の説明 以上説明したように本発明によれば音声再生の
中断を許す時点を任意の位置に指定できるととも
に、必要最小限の端末バツフアを用いるだけで該
指定点以外では音声再生が中断しないことを保証
できる利点がある。また、画像と音声の表示再生
順番を保証できる利点がある。(5) Explanation of Effects As explained above, according to the present invention, the point at which audio playback is allowed to be interrupted can be specified at any position, and audio playback can be stopped at any point other than the specified point by using the minimum required terminal buffer. It has the advantage of guaranteeing no interruptions. Another advantage is that the order in which images and audio are displayed and reproduced can be guaranteed.

【図面の簡単な説明】[Brief explanation of drawings]

第１図は画像音声情報提供システム、第２図は
区切符号Ａを用いた場合の画像音声情報の伝送時
間と表示再生時間の関係、第３図は区切符号Ａと
区切符号Ｂを用いた場合の画像音声情報の伝送時
間と表示再生時間の関係、第４図はセグメントの
説明図である。 １……情報センタ、２……端末、３……上り回
線、４……下り回線、５……入力部、６……通信
バツフア、７……画像情報音声情報分別部、８…
…前置区切符号検出部、９……音声バツフア、１
０……後置区切符号検出部、１１……区切符号カ
ウンタＡ、１２……ゲートＡ、１３……音声再生
部、１４……区切符号カウンタＢ、１５……ゲー
トＢ、１６……画像情報表示部。 Figure 1 shows the image and audio information providing system, Figure 2 shows the relationship between the transmission time and display playback time of image and audio information when delimiter code A is used, and Figure 3 shows the case where delimiter code A and delimiter B are used. FIG. 4 is an explanatory diagram of segments, showing the relationship between transmission time and display playback time of image and audio information. 1... Information center, 2... Terminal, 3... Up line, 4... Down line, 5... Input section, 6... Communication buffer, 7... Image information audio information separation section, 8...
... Prefix delimiter detection unit, 9 ... Audio buffer, 1
0... Postfix delimiter detection unit, 11... Delimiter counter A, 12... Gate A, 13... Audio playback unit, 14... Delimiter counter B, 15... Gate B, 16... Image information Display section.

Claims (1)

【特許請求の範囲】[Claims] １ 画像および音声の混在した情報と２種類の区
切符号Ａ，Ｂとを収容する情報センタ、回線をと
おして情報センタから送られてきた画像音声混在
情報を受信し再生する端末から成るシステムにお
いて、前記端末は、画像情報と音声情報とを分別
する第１の手段と、音声情報を一時蓄積する第２
の手段と、該第２の手段に音声情報を蓄積する際
に２種類の区切符号Ａ，Ｂを別々に検出する第３
の手段と、該第２の手段から音声情報を取出す際
に２種類の区切符号Ａ，Ｂを別々に検出する第４
の手段と、該第３の手段により検出された区切符
号Ａ，Ｂと該第４の手段により検出された区切符
号Ａ，Ｂとのそれぞれの差を計数する第５の手段
と、該第５の手段による区切符号Ａの計数結果に
より音声の再生を制御し、該第５の手段による区
切符号Ｂの計数結果により、画素の表示を制御す
る第６の手段とを備え、画像と音声とを逐次提供
するよう構成されてなることを特徴とする画像音
声混在情報提供システム。1. In a system consisting of an information center that accommodates mixed image and audio information and two types of delimiters A and B, and a terminal that receives and reproduces the image and audio mixed information sent from the information center via a line, The terminal includes a first means for separating image information and audio information, and a second means for temporarily storing audio information.
and a third means for separately detecting two types of delimiter codes A and B when storing audio information in the second means.
and a fourth means for separately detecting two types of delimiter codes A and B when extracting audio information from the second means.
means for counting the differences between the delimiter codes A and B detected by the third means and the delimiter codes A and B detected by the fourth means; and a sixth means for controlling the reproduction of audio based on the count result of the delimiter code A by the means, and a sixth means for controlling the display of pixels based on the count result of the delimiter code B by the fifth means. A system for providing mixed image and audio information, characterized in that it is configured to sequentially provide information.