JP2001005986A - Device for generating multimedia information - Google Patents

Device for generating multimedia information

Info

Publication number
JP2001005986A
JP2001005986A JP17464999A JP17464999A JP2001005986A JP 2001005986 A JP2001005986 A JP 2001005986A JP 17464999 A JP17464999 A JP 17464999A JP 17464999 A JP17464999 A JP 17464999A JP 2001005986 A JP2001005986 A JP 2001005986A
Authority
JP
Japan
Prior art keywords
generating
objects
scenario
multimedia information
link
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP17464999A
Other languages
Japanese (ja)
Inventor
Kazuhiko Morizaki
一彦 森崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Victor Company of Japan Ltd
Original Assignee
Victor Company of Japan Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Victor Company of Japan Ltd filed Critical Victor Company of Japan Ltd
Priority to JP17464999A priority Critical patent/JP2001005986A/en
Publication of JP2001005986A publication Critical patent/JP2001005986A/en
Pending legal-status Critical Current

Links

Landscapes

  • Processing Or Creating Images (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

PROBLEM TO BE SOLVED: To obtain a multimedia information generating device capable of efficiently generating multimedia information composed of many objects as constitution components. SOLUTION: This device is provided with a material object part 2 which generates material objects such as video, sound and text, a scenario object generating part 3 which generates a scenario object instructing a user on the reproduction procedures of the material objects, a relevant object generating part 4 which generates a relevant object that defines the relationships of the material objects and a multiplexing part 5 which executes multiplex processing that generates a stream of a material object, a scenario object and a relevant object. Each object is formed so as to hold link information which corresponds to a sequence to be an object of multiplex processing and shows link relationship between objects.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、例えばディジタル
テレビ放送の番組のように、ディジタル化された映像、
音声、テキストなどデータからなるマルチメディア情報
を生成するマルチメディア情報生成装置に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a digital video, such as a digital television broadcast program.
The present invention relates to a multimedia information generation device that generates multimedia information including data such as voice and text.

【0002】[0002]

【従来の技術】映像、音声、テキストなどのデータから
なるマルチメディア情報の応用範囲が広がり、コンピュ
ータやDVD(Digital Versatile Disc)プレーヤだけ
でなく、テレビ放送方式のディジタル化も進んでおり、
そのコンテンツの質や価格が普及のための重要な要素と
なっている。そのためDVDやディジタルテレビ放送の
コンテンツとしてのマルチメディア情報を、効率よく制
作するツールが必要とされており、マルチメディアタイ
トルを構成する映像、音声とともに、ユーザインターフ
ェースを構成するボタンやメニューなども含むすべての
「もの」をオブジェクトとして扱い、管理するタイトル
制作ツール(オーサリングツール)が提供されている
(例えば特開平9−305391号公報)。
2. Description of the Related Art The application range of multimedia information composed of data such as video, audio, text, etc. is expanding, and not only computers and DVD (Digital Versatile Disc) players, but also digitalization of television broadcasting systems is progressing.
The quality and price of the content are important factors for its diffusion. Therefore, there is a need for a tool for efficiently producing multimedia information as DVD or digital television broadcast content. All of the video and audio that make up the multimedia title, as well as the buttons and menus that make up the user interface, are required. There is provided a title creation tool (authoring tool) that manages and manages “things” as objects (for example, JP-A-9-305391).

【0003】[0003]

【発明が解決しようとする課題】上述したような、タイ
トルを構成する映像や音声などの素材や部品をオブジェ
クトとして扱う制作ツールは、種々のオブジェクト同士
の関連やタイトルの全体構成を記述するスクリプト(シ
ナリオ)と、素材オブジェクトとの関連に着目している
が、これらのオブジェクトへのアクセス効率や制作環境
の効率化については、未だ十分に考慮されているとはい
えず、改善の余地が残されていた。
As described above, a production tool that handles materials and parts such as video and audio constituting a title as objects as described above is a script (for describing the relationship between various objects and the overall configuration of the title). Scenario) and material objects, but the efficiency of access to these objects and the efficiency of the production environment have not yet been fully considered, leaving room for improvement. I was

【0004】本発明は、この点に着目してなされたもの
であり、多くのオブジェクトを構成要素とするマルチメ
ディア情報を効率よく生成することができるマルチメデ
ィア情報生成装置を提供することを目的とする。
The present invention has been made in view of this point, and it is an object of the present invention to provide a multimedia information generating apparatus capable of efficiently generating multimedia information having many objects as constituent elements. I do.

【0005】[0005]

【課題を解決するための手段】上記目的を達成するため
請求項1に記載の発明は、映像、音声、テキストなどの
データをシナリオにしたがって構成し、マルチメディア
情報を生成するマルチメディア情報生成装置において、
映像、音声、テキストなどの素材オブジェクトを生成す
る素材オブジェクト生成手段と、前記素材オブジェクト
の再生手順を指示するシナリオオブジェクトを生成する
シナリオオブジェクト生成手段と、前記素材オブジェク
トの関連を定義する関連オブジェクトを生成する関連オ
ブジェクト生成手段と、前記素材オブジェクト、シナリ
オオブジェクト及び関連オブジェクトのストリームを生
成するマルチプレクス処理を実行するマルチプレクス手
段とを具備し、前記各オブジェクトは、前記マルチプレ
クス処理の対象となる順序に対応した、前記オブジェク
ト間のリンク関係を示すリンク情報を保持するように構
成したことを特徴とする。
According to the first aspect of the present invention, there is provided a multimedia information generating apparatus configured to form data such as video, audio, and text according to a scenario and generate multimedia information. At
Material object generating means for generating a material object such as video, audio, text, etc., scenario object generating means for generating a scenario object for instructing a reproduction procedure of the material object, and generating a related object defining an association of the material object Related object generating means, and multiplex means for executing multiplex processing for generating a stream of the material object, the scenario object and the related object, wherein each of the objects is arranged in an order to be subjected to the multiplex processing. It is characterized in that it is configured to hold corresponding link information indicating a link relationship between the objects.

【0006】請求項2に記載の発明は、請求項1に記載
のマルチメディア情報生成装置において、前記素材オブ
ジェクト生成手段は、前記素材オブジェクトを前記マル
チプレクス処理に適した単位オブジェクトに分割して管
理し、前記マルチプレクス手段は、前記単位オブジェク
トを用いて前記ストリームを生成することを特徴とす
る。
According to a second aspect of the present invention, in the multimedia information generating apparatus according to the first aspect, the material object generating means manages the material object by dividing the material object into unit objects suitable for the multiplex processing. The multiplexing means generates the stream using the unit object.

【0007】請求項3に記載の発明は、映像、音声、テ
キストなどのデータをシナリオにしたがって構成し、マ
ルチメディア情報を生成するマルチメディア情報生成装
置において、映像、音声、テキストなどの素材オブジェ
クトを生成する素材オブジェクト生成手段と、前記素材
オブジェクトの再生手順を指示するシナリオオブジェク
トを生成するシナリオオブジェクト生成手段と、前記素
材オブジェクトの関連を定義する関連オブジェクトを生
成する関連オブジェクト生成手段と、前記素材オブジェ
クト、シナリオオブジェクト及び関連オブジェクトのス
トリームを生成するマルチプレクス処理を実行するマル
チプレクス手段と、前記各オブジェクトが前記マルチプ
レクス処理の対象となる順序に対応した、前記オブジェ
クト間のリンク関係を示すリンク情報を保持するリンク
オブジェクトを生成するリンクオブジェクト生成手段と
を具備し、前記マルチプレクス手段は、前記リンクオブ
ジェクトが保持するリンク情報にしたがって前記ストリ
ームを生成することを特徴とする。
According to a third aspect of the present invention, there is provided a multimedia information generating apparatus configured to generate data such as video, audio, and text in accordance with a scenario and to generate multimedia information. A material object generating means for generating, a scenario object generating means for generating a scenario object for instructing a reproduction procedure of the material object, a related object generating means for generating a related object defining a relation between the material objects, and the material object Multiplexing means for executing a multiplexing process for generating a stream of scenario objects and related objects, and a link relation between the objects corresponding to the order in which the objects are subjected to the multiplexing process. ; And a link object generation means for generating a link object that holds the link information indicating the multiplexing means, and generating the stream according to the link information which the link object holds.

【0008】[0008]

【発明の実施の形態】以下本発明の実施の形態を図面を
参照して説明する。 (第1の実施形態)図1は、本発明の第1の実施形態に
かかるマルチメディア情報生成装置の構成を示すブロッ
ク図であり、この装置は、タイトル制作者等が当該装置
を操作するために使用するグラフィカルインターフェー
ス(GUI)部1と、映像、音声、テキストなどの素材
オブジェクトを生成する素材オブジェクト生成部2と、
素材オブジェクトを提示する順序を指示するシナリオオ
ブジェクトを生成するシナリオオブジェクト生成部3
と、素材オブジェクトの関連を定義する関連オブジェク
トを生成する関連オブジェクト生成部4と、素材オブジ
ェクト、シナリオオブジェクト及び関連オブジェクトの
ストリームを生成するマルチプレクス部5と、制作した
マルチメディアタイトルのテスト再生の制御を行う再生
制御部6と、素材オブジェクトを生成するために用いる
映像、音声、テキストなどのデータを格納するデータ保
存部7とを備えている。GUI部1,素材オブジェクト
生成部2,シナリオオブジェクト生成部3,関連オブジ
ェクト生成部4,マルチプレクス部5及び再生制御部6
は、具体的にはCPU(中央処理装置),ROM,RA
M、表示装置、キーボード、プログラム記憶用ハードデ
ィスク装置などからなるハードウエアと、そのハードウ
エア上で作動するソフトウエアとで構成される。またデ
ータ保存部7は、例えばハードデスク装置や光デスク装
置などの記憶装置で構成される。
Embodiments of the present invention will be described below with reference to the drawings. (First Embodiment) FIG. 1 is a block diagram showing a configuration of a multimedia information generating apparatus according to a first embodiment of the present invention. This apparatus is used by a title creator or the like to operate the apparatus. A graphical interface (GUI) unit 1 for use in a program, a material object generating unit 2 for generating material objects such as video, audio, and text;
Scenario object generation unit 3 that generates a scenario object that indicates the order in which the material objects are presented
, A related object generating unit 4 for generating a related object that defines the relationship between the material objects, a multiplex unit 5 for generating a stream of the material object, the scenario object, and the related object, and control of test reproduction of the produced multimedia title. And a data storage unit 7 for storing data such as video, audio, and text used for generating a material object. GUI unit 1, material object generation unit 2, scenario object generation unit 3, related object generation unit 4, multiplex unit 5, and playback control unit 6
Specifically, CPU (Central Processing Unit), ROM, RA
M, a display device, a keyboard, a hard disk device for storing a program, and the like, and software operating on the hardware. The data storage unit 7 is configured by a storage device such as a hard disk device or an optical disk device.

【0009】素材オブジェクトは、ディジタル化された
映像(動画、静止画)、音声、テキストなどのデータで
構成され、マルチメディア情報の構成要素となるもので
ある。シナリオオブジェクトは、素材オブジェクトをど
のような順序で提示し、再生するかを指示する情報で構
成される。関連オブジェクトは、素材オブジェクトの関
連を定義する情報で構成される。例えば動画に字幕を重
ねて表示するような場合には、オーバレイする字幕情報
の表示タイミングや画面上の位置を示す情報、動画デー
タと、字幕用データのテキストやグラフィクスデータと
の関連を示す情報などが必要となるので、関連オブジェ
クトはこれらの情報で構成される。
The material object is constituted by data such as digitized video (moving image, still image), sound, text, etc., and is a component of multimedia information. The scenario object is composed of information indicating the order in which the material objects are presented and reproduced. The related object includes information that defines the relationship between the material objects. For example, when a caption is displayed over a moving image, information indicating the display timing and the position on the screen of the caption information to be overlaid, information indicating the relationship between the moving image data and the text or graphics data of the caption data, etc. Is required, the related object is composed of such information.

【0010】デジタルテレビ放送を例にとると、ディジ
タルテレビ放送の番組は、MPEG(Motion Picture E
xpert Group)2の圧縮動画像データ、AAC(Advance
d Audio Coding)等の圧縮音声データ、テキストデー
タ、静止画像データで構成され、これらが素材オブジェ
クトに相当する。また、番組のナビゲーションには、X
ML(Extensible Markup Language)や、MHEG(Mu
ltimedia and Hypermedia Information Coding Expert
Group)が使われる。メニューを提示して再生する内容
を選択したり、インデクスを表示して関連の情報を提示
したりするための手順を示すXMLオブジェクトやMH
EGオブジェクトが生成され、これが素材オブジェクト
と同時に放送される。このXMLオブジェクトやMHE
Gオブジェクトが、シナリオオブジェクトに相当する。
ナビゲーション画面は、メニューオブジェクトやボタン
オブジェクト、及びそれらを視覚的に装飾する映像オブ
ジェクトや警告を発する音声オブジェクトといった種々
のオブジェクトによって構成される。
[0010] Taking digital television broadcasting as an example, digital television broadcasting programs are MPEG (Motion Picture E).
xpert Group) 2 compressed video data, AAC (Advance
d Audio Coding), compressed audio data, text data, and still image data, which correspond to material objects. Also, in the navigation of the program, X
ML (Extensible Markup Language), MHEG (Mu
ltimedia and Hypermedia Information Coding Expert
Group) is used. An XML object or MH indicating a procedure for presenting a menu to select a content to be reproduced or displaying an index to present related information.
An EG object is generated and broadcast simultaneously with the material object. This XML object and MHE
The G object corresponds to a scenario object.
The navigation screen is composed of various objects such as menu objects and button objects, and video objects for visually decorating them, and audio objects for issuing warnings.

【0011】素材オブジェクト生成部2は、データ保存
部7に格納されている素材データの中からシナリオオブ
ジェクトに含まれる情報により指示されるデータを検索
し、指示されるタイミングで出力する処理を行う。シナ
リオオブジェクト生成部3は、データ保存部7に格納さ
れているシナリオデータを検索し、指示されるタイミン
グで出力する処理を行う。関連オブジェクト生成部4
は、データ保存部7に格納されている関連情報を検索
し、指示されるタイミングで出力する処理を行う。マル
チプレクス部5は、素材オブジェクト生成部2、シナリ
オオブジェクト生成部3及び関連オブジェクト生成部4
で生成される各オブジェクトをストリーム化してビット
列(ビットストリーム)を生成し、マルチメディア情報
として出力する処理を行う。本明細書では、この処理を
「マルチプレクス処理」という。
The material object generation unit 2 performs a process of searching data designated by information included in the scenario object from material data stored in the data storage unit 7 and outputting the data at the designated timing. The scenario object generation unit 3 performs a process of searching for scenario data stored in the data storage unit 7 and outputting the data at an instructed timing. Related object generator 4
Performs a process of searching for related information stored in the data storage unit 7 and outputting the related information at an instructed timing. The multiplex unit 5 includes a material object generation unit 2, a scenario object generation unit 3, and a related object generation unit 4.
Is performed to generate a bit stream (bit stream) by converting each object generated in step (1) into a stream and output it as multimedia information. In this specification, this processing is referred to as “multiplex processing”.

【0012】このマルチプレクス処理では、例えばMP
EG規格などで規定されたパケットサイズやデータ構
造、ストリームの転送レートの上限を守り、シナリオの
構成にしたがってオブジェクトを配置し、動画や音声の
再生が途切れることなく連続して行われるように配置す
る。本実施形態では、放送、通信系において一般的に使
用されるMPEG規格のトランスポートストリーム構造
にデータをストリーム化してパケットを構成するが、ス
トリームの構造は、これに限定されるものではなく、例
えばMPEG規格で規定されているプログラムストリー
ム構造を採用してもよい。
In the multiplex processing, for example, MP
Observe the upper limit of the packet size, data structure and stream transfer rate specified by the EG standard, etc., arrange objects according to the configuration of the scenario, and arrange them so that video and audio playback are performed continuously without interruption. . In the present embodiment, data is streamed into a transport stream structure of the MPEG standard generally used in broadcasting and communication systems to form packets, but the stream structure is not limited to this. A program stream structure defined by the MPEG standard may be adopted.

【0013】データ保存部7は、予め専用のツールで生
成された素材オブジェクト、シナリオオブジェクト及び
関連オブジェクトを例えば図2に示すようなデータベー
ス構造で格納している。すなわち、映像オブジェクト、
音声オブジェクト、シナリオオブジェクトというよう
に、共通の属性を有するオブジェクトがまとめて格納さ
れている。これにより、図2に示すような構造を定義す
るリストを参照することにより、格納されている各オブ
ジェクトに高速にアクセス可能となる。
The data storage unit 7 stores material objects, scenario objects, and related objects generated in advance by a dedicated tool in a database structure as shown in FIG. That is, a video object,
Objects having common attributes, such as a voice object and a scenario object, are stored together. This makes it possible to access the stored objects at a high speed by referring to the list defining the structure as shown in FIG.

【0014】さらに本実施形態では、データ保存部7に
格納されている各オブジェクトが、マルチプレクス処理
実行時の読み出し順序に対応したリンク情報を有するよ
うに構成されている。例えば映像オブジェクトV1,音
声オブジェクトA1,テキストオブジェクトT1,T
2,T3を、図4に示すようにこの順序で読み出す場
合、図3に示すように映像オブジェクトV1は、音声オ
ブジェクトA1を示すリンク情報を有し、音声オブジェ
クトA1は、テキストオブジェクトT1を示すリンク情
報を有し、テキストオブジェクトT1は、テキストオブ
ジェクトT2を示すリンク情報を有し、テキストオブジ
ェクトT2は、テキストオブジェクトT3を示すリンク
情報を有するように構成される。これにより、マルチプ
レクス部5が実際にマルチプレクス処理を実行するとき
に、リンク構造をたどることにより、高速なオブジェク
トへのアクセスを実現することができる。
Further, in the present embodiment, each object stored in the data storage unit 7 is configured to have link information corresponding to the reading order at the time of executing the multiplex processing. For example, video object V1, audio object A1, text object T1, T
2, T3 is read in this order as shown in FIG. 4, the video object V1 has link information indicating the audio object A1, and the audio object A1 is a link indicating the text object T1 as shown in FIG. The text object T1 is configured to have link information indicating the text object T2, and the text object T2 is configured to have link information indicating the text object T3. Thereby, when the multiplex unit 5 actually executes the multiplex processing, it is possible to realize a high-speed access to the object by following the link structure.

【0015】再生制御部6は、マルチプレクス処理され
たデータストリームを、再生側装置(例えばディジタル
放送の受信装置、あるいはDVDプレーヤなど)と同様
の処理により再生する処理を行い、映像及び音声をモニ
タ(図示せず)に出力する。なお、再生制御部6は、マ
ルチプレクス処理されたデータストリームの再生処理だ
けでなく、データ保存部7に格納されているオブジェク
トのリンク情報をたどることにより各オブジェクトに直
接アクセスしてリアルタイムで順次読み出しながら、仮
想的につなぎ合わせて再生を行う機能を有することが望
ましい。これにより、制作した番組やタイトルの再生テ
ストを柔軟に行うことができる。
The reproduction control section 6 performs processing for reproducing the multiplexed data stream by the same processing as that of a reproducing apparatus (for example, a digital broadcast receiving apparatus or a DVD player), and monitors video and audio. (Not shown). In addition, the reproduction control unit 6 directly accesses each object by following the link information of the object stored in the data storage unit 7 and sequentially reads out the object in real time, in addition to the reproduction process of the multiplexed data stream. It is desirable to have a function of virtually connecting and reproducing. Thereby, the reproduction test of the produced program or title can be flexibly performed.

【0016】なお、データ保存部7に格納する映像オブ
ジェクト及び音声オブジェクトは、図5に示すようにマ
ルチプレクス処理の単位で分割してオブジェクトを構成
することが望ましい。映像素材や音声素材を構成するデ
ータの1つのファイルが数Gバイト(ギガバイト)にな
る場合があり、そのようなデータの特定部分にアクセス
する場合、タイムコードを指定してフレームシーケンケ
ンシャル検索を行うと効率が悪いからである。図5に示
す例は、映像素材を構成する1つのファイルを4つの映
像オブジェクトV1,V2,V3,V4に分割し(同図
(a))、音声素材を構成する1つのファイルを2つの
音声オブジェクトA1,A2に分割して(同図(b))
管理する場合を示しており、同図(c)に示すようにマ
ルチプレクス処理によりV1,V2,A1,V3,V
4,A2の順序で配置される場合に、映像素材及び音声
素材の必要な部分に効率よくアクセスすることが可能と
なる。ここで、分割した各オブジェクトV1〜V4及び
A1,A2は、上述したリンク情報を有する構成とす
る。図5に示す例では、オブジェクトV1〜V4,A
1,A2が、請求項2の「単位オブジェクト」に相当す
る。
It is desirable that the video object and the audio object stored in the data storage unit 7 are divided into multiplex processing units to form the objects as shown in FIG. One file of data constituting video and audio materials may be several gigabytes (gigabytes). When accessing a specific portion of such data, a frame sequential search is performed by specifying a time code. This is because doing so is inefficient. In the example shown in FIG. 5, one file constituting the video material is divided into four video objects V1, V2, V3, and V4 (FIG. 5A), and one file constituting the audio material is divided into two audio objects. Divided into objects A1 and A2 ((b) in the figure)
FIG. 4C shows a case where the data is managed by V1, V2, A1, V3, and V by the multiplex processing as shown in FIG.
When they are arranged in the order of 4, A2, it is possible to efficiently access necessary portions of video and audio materials. Here, each of the divided objects V1 to V4 and A1, A2 is configured to have the link information described above. In the example shown in FIG. 5, the objects V1 to V4, A
1 and A2 correspond to the “unit object” of claim 2.

【0017】(第2の実施形態)図6は、本発明の第2
の実施形態にかかるマルチメディア情報生成装置の構成
を示すブロック図である。この装置は、図1に示す構成
にストリーム化関連オブジェクト生成部8を追加したも
のである。
(Second Embodiment) FIG. 6 shows a second embodiment of the present invention.
It is a block diagram showing the composition of the multimedia information generating device concerning an embodiment. This apparatus is obtained by adding a stream-related object generation unit 8 to the configuration shown in FIG.

【0018】第1の実施形態では、各オブジェクトがリ
ンク情報を有するように構成するようにしたが、本実施
形態は、各オブジェクトがリンク情報を有するのではな
く、ストリーム化関連オブジェクト生成部8が、各オブ
ジェクトがマルチプレクス処理の対象となる順序に対応
した、オブジェクト間のリンク関係を示すリンク情報を
保持するリンクオブジェクトを生成するようにしたもの
である。
In the first embodiment, each object is configured to have the link information. However, in the present embodiment, each object does not have the link information. A link object that holds link information indicating a link relationship between objects, corresponding to the order in which each object is subjected to the multiplex processing, is generated.

【0019】ストリーム化関連オブジェクト生成部8に
より生成されるリンクオブジェクトが、データ保存部7
に格納された各オブジェクトを指示し、マルチプレクス
部5は、この指示、すなわちこのリンクオブジェクトが
保持するリンク情報にしたがってマルチプレクス処理を
実行する。リンクオブジェクトは、リスト構造(マルチ
プレクス処理の対象となる順序に対応して、オブジェク
トを特定する情報が記述されている構造)を持つように
構成されており、これにより、マルチプレクス処理や再
生制御部6による各オブジェクトへの直接アクセス時
に、所望のオブジェクトへの高速のアクセスが可能とな
る。
The link object generated by the stream-related object generation unit 8 is stored in the data storage unit 7.
And the multiplexing unit 5 executes multiplex processing according to the instruction, that is, the link information held by the link object. The link object is configured to have a list structure (a structure in which information for specifying an object is described in correspondence with the order in which the multiplex processing is performed). At the time of direct access to each object by the unit 6, high-speed access to a desired object becomes possible.

【0020】[0020]

【発明の効果】以上詳述したように請求項1に記載の発
明によれば、素材オブジェクト、シナリオオブジェクト
及び関連オブジェクトは、マルチプレクス処理の対象と
なる順序に対応した、オブジェクト間のリンク関係を示
すリンク情報を保持するように構成されているので、リ
ンク情報をたどることにより、マルチプレクス処理の対
象となるオブジェクトに高速でアクセスすることがで
き、処理の高速化を図ることができる。その結果、多く
のオブジェクトを構成要素とするマルチメディア情報を
効率よく生成することができる。
As described in detail above, according to the first aspect of the present invention, the material object, the scenario object, and the related object have a link relationship between the objects corresponding to the order of the multiplex processing. Since the link information is configured to be held, by following the link information, the object to be subjected to the multiplex processing can be accessed at high speed, and the processing speed can be increased. As a result, multimedia information including many objects as constituent elements can be efficiently generated.

【0021】請求項2に記載の発明によれば、素材オブ
ジェクトがマルチプレクス処理に適した単位オブジェク
トに分割されて管理され、単位オブジェクトを用いてオ
ブジェクトのストリームが生成されるので、ひとまとま
りの素材オブジェクトの規模が大きい場合でも、所望の
部分に対応したオブジェクトに高速でアクセスすること
ができる。
According to the second aspect of the present invention, a material object is divided into unit objects suitable for multiplex processing and managed, and a stream of objects is generated using the unit objects. Even when the size of the object is large, it is possible to access the object corresponding to the desired portion at high speed.

【0022】請求項3に記載の発明によれば、オブジェ
クトがマルチプレクス処理の対象となる順序に対応し
た、オブジェクト間のリンク関係を示すリンク情報を保
持するリンクオブジェクトが生成され、このリンクオブ
ジェクトが保持するリンク情報にしたがってオブジェク
トのストリームが生成されるので、請求項1に記載の発
明と同様の効果を奏する。
According to the third aspect of the present invention, a link object is generated which holds link information indicating a link relationship between objects, corresponding to the order in which the objects are subjected to the multiplex processing. Since the stream of the object is generated according to the held link information, the same effect as that of the first aspect is obtained.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の第1の実施形態にかかるマルチメディ
ア情報生成装置の構成を示すブロック図である。
FIG. 1 is a block diagram illustrating a configuration of a multimedia information generation device according to a first embodiment of the present invention.

【図2】図1のデータ保存部に格納されるオブジェクト
の配置を説明するための図である。
FIG. 2 is a diagram for explaining an arrangement of objects stored in a data storage unit of FIG. 1;

【図3】オブジェクトのリンク関係を説明するための図
である。
FIG. 3 is a diagram illustrating a link relationship between objects.

【図4】ストリーム化されたオブジェクトを示す図であ
る。
FIG. 4 is a diagram showing a streamed object.

【図5】映像素材や音声素材の分割を説明するための図
である。
FIG. 5 is a diagram for describing division of a video material and an audio material.

【図6】本発明の第2の実施形態にかかるマルチメディ
ア情報生成装置の構成を示すブロック図である。
FIG. 6 is a block diagram illustrating a configuration of a multimedia information generation device according to a second embodiment of the present invention.

【符号の説明】[Explanation of symbols]

2 素材オブジェクト生成部(素材オブジェクト生成手
段) 3 シナリオオブジェクト生成部(シナリオオブジェク
ト生成手段) 4 関連オブジェクト生成部(関連オブジェクト生成手
段) 5 マルチプレクス部(マルチプレクス手段) 6 再生制御部 7 データ保存部 8 ストリーム化関連オブジェクト生成部(リンクオブ
ジェクト生成手段)
2 material object generation unit (material object generation unit) 3 scenario object generation unit (scenario object generation unit) 4 related object generation unit (related object generation unit) 5 multiplex unit (multiplex unit) 6 playback control unit 7 data storage unit 8 Streaming related object generation unit (link object generation means)

Claims (3)

【特許請求の範囲】[Claims] 【請求項1】 映像、音声、テキストなどのデータをシ
ナリオにしたがって構成し、マルチメディア情報を生成
するマルチメディア情報生成装置において、 映像、音声、テキストなどの素材オブジェクトを生成す
る素材オブジェクト生成手段と、 前記素材オブジェクトの再生手順を指示するシナリオオ
ブジェクトを生成するシナリオオブジェクト生成手段
と、 前記素材オブジェクトの関連を定義する関連オブジェク
トを生成する関連オブジェクト生成手段と、 前記素材オブジェクト、シナリオオブジェクト及び関連
オブジェクトのストリームを生成するマルチプレクス処
理を実行するマルチプレクス手段とを具備し、 前記各オブジェクトは、前記マルチプレクス処理の対象
となる順序に対応した、前記オブジェクト間のリンク関
係を示すリンク情報を保持するように構成したことを特
徴とするマルチメディア情報生成装置。
1. A multimedia information generating apparatus configured to generate data such as video, audio, text, etc. according to a scenario and generate multimedia information, comprising: a material object generating means for generating a material object such as video, audio, text, etc. A scenario object generating means for generating a scenario object that instructs a reproduction procedure of the material object; a related object generating means for generating a related object that defines a relation of the material object; Multiplexing means for executing multiplexing processing for generating a stream, wherein each of the objects has a link relationship between the objects corresponding to an order in which the multiplexing processing is performed. Multimedia information generating apparatus characterized by being configured to hold the click information.
【請求項2】 前記素材オブジェクト生成手段は、前記
素材オブジェクトを前記マルチプレクス処理に適した単
位オブジェクトに分割して管理し、前記マルチプレクス
手段は、前記単位オブジェクトを用いて前記ストリーム
を生成することを特徴とする請求項1に記載のマルチメ
ディア情報生成装置。
2. The method according to claim 1, wherein the material object generation unit divides the material object into unit objects suitable for the multiplex processing and manages the divided object objects, and the multiplex unit generates the stream using the unit objects. The multimedia information generation device according to claim 1, wherein:
【請求項3】 映像、音声、テキストなどのデータをシ
ナリオにしたがって構成し、マルチメディア情報を生成
するマルチメディア情報生成装置において、 映像、音声、テキストなどの素材オブジェクトを生成す
る素材オブジェクト生成手段と、 前記素材オブジェクトの再生手順を指示するシナリオオ
ブジェクトを生成するシナリオオブジェクト生成手段
と、 前記素材オブジェクトの関連を定義する関連オブジェク
トを生成する関連オブジェクト生成手段と、 前記素材オブジェクト、シナリオオブジェクト及び関連
オブジェクトのストリームを生成するマルチプレクス処
理を実行するマルチプレクス手段と、 前記各オブジェクトが、前記マルチプレクス処理の対象
となる順序に対応した、前記オブジェクト間のリンク関
係を示すリンク情報を保持するリンクオブジェクトを生
成するリンクオブジェクト生成手段とを具備し、 前記マルチプレクス手段は、前記リンクオブジェクトが
保持するリンク情報にしたがって前記ストリームを生成
することを特徴とするマルチメディア情報生成装置。
3. A multimedia information generating apparatus for generating data such as video, audio, text, etc. according to a scenario and generating multimedia information. A scenario object generating means for generating a scenario object that instructs a reproduction procedure of the material object; a related object generating means for generating a related object that defines a relation of the material object; Multiplexing means for executing a multiplexing process for generating a stream, and link information indicating a link relationship between the objects, wherein each of the objects corresponds to an order in which the multiplexing process is performed. ; And a link object generation means for generating a link object that holds the multiplexing means, multimedia information generating apparatus characterized by generating the stream according to the link information which the link object holds.
JP17464999A 1999-06-21 1999-06-21 Device for generating multimedia information Pending JP2001005986A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP17464999A JP2001005986A (en) 1999-06-21 1999-06-21 Device for generating multimedia information

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP17464999A JP2001005986A (en) 1999-06-21 1999-06-21 Device for generating multimedia information

Publications (1)

Publication Number Publication Date
JP2001005986A true JP2001005986A (en) 2001-01-12

Family

ID=15982296

Family Applications (1)

Application Number Title Priority Date Filing Date
JP17464999A Pending JP2001005986A (en) 1999-06-21 1999-06-21 Device for generating multimedia information

Country Status (1)

Country Link
JP (1) JP2001005986A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002037841A1 (en) * 2000-11-02 2002-05-10 Fujiyama Co., Ltd. Distribution system of digital image content and reproducing method and medium recording its reproduction program
WO2005109269A1 (en) * 2004-05-10 2005-11-17 Sony Computer Entertainment Inc. Content providing system

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05304653A (en) * 1992-04-24 1993-11-16 Toshiba Corp Picture file device
JPH1070718A (en) * 1996-06-06 1998-03-10 Internatl Business Mach Corp <Ibm> Video data transmitting method
JPH1169294A (en) * 1997-08-22 1999-03-09 Matsushita Electric Ind Co Ltd Program editing device
JPH11136629A (en) * 1997-10-29 1999-05-21 Matsushita Electric Ind Co Ltd Multimedia data preparation device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05304653A (en) * 1992-04-24 1993-11-16 Toshiba Corp Picture file device
JPH1070718A (en) * 1996-06-06 1998-03-10 Internatl Business Mach Corp <Ibm> Video data transmitting method
JPH1169294A (en) * 1997-08-22 1999-03-09 Matsushita Electric Ind Co Ltd Program editing device
JPH11136629A (en) * 1997-10-29 1999-05-21 Matsushita Electric Ind Co Ltd Multimedia data preparation device

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002037841A1 (en) * 2000-11-02 2002-05-10 Fujiyama Co., Ltd. Distribution system of digital image content and reproducing method and medium recording its reproduction program
WO2005109269A1 (en) * 2004-05-10 2005-11-17 Sony Computer Entertainment Inc. Content providing system

Similar Documents

Publication Publication Date Title
KR100579387B1 (en) Efficient transmission and playback of digital information
US20020106191A1 (en) Systems and methods for creating a video montage from titles on a digital video disk
JP2000217058A (en) Video image retrieval system, data structure and retrieval method according thereto
US20060236219A1 (en) Media timeline processing infrastructure
JPH08504306A (en) Digital video editing system and method
JP2007510230A (en) Annotating media content using user-specified information
JP2008508659A (en) Recording medium including metadata, reproducing apparatus and method thereof
JP2004287595A (en) Device and method for converting composite media contents and its program
JP5307099B2 (en) Recording medium and device for reproducing data from recording medium
WO2005013618A1 (en) Live streaming broadcast method, live streaming broadcast device, live streaming broadcast system, program, recording medium, broadcast method, and broadcast device
KR20040091511A (en) Distributed interactive media authoring and recording
JP2000285643A (en) Information recording medium having logically structured recording areas, method and device for preparing information for preparing the same medium, information recording medium recording preparing program therefor, method and device for preparing information recording medium, information recording medium recording the preparing program, method and device for preparing information recording medium recording image and sound information using the information recording medium and information recording medium recording the preparing program
GB2424534A (en) Authoring an audiovisual production with subtitles or other captions
US7356250B2 (en) Systems and methods for creating a single video frame with one or more interest points
JP2006033841A (en) Screen searching method and screen searching device for digital reproduction
JP2001008136A (en) Authoring device for multimedia data
JP2001005986A (en) Device for generating multimedia information
JPH1032773A (en) Summary video browsing method/device
KR102078479B1 (en) Method for editing video and videos editing device
KR100459668B1 (en) Index-based authoring and editing system for video contents
WO2006030995A9 (en) Index-based authoring and editing system for video contents
JP4084115B2 (en) Program editing method
JP4796466B2 (en) Content management server, content presentation device, content management program, and content presentation program
JP2002245753A (en) Recording method for recording medium recorded with audio data and sub-video dat of multiple channels together with moving picture data, and reproducing device and reproducing method therefor
JP2000083194A (en) Method for editing video data

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20041109

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20050308