JP3121194B2 - Method and apparatus for editing multimedia data - Google Patents

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【０００１】[0001]

【産業上の利用分野】本発明は、マルチメディアデータ
（例えば音声データ、動画像データなど）のアイコン移
動操作による編集処理方法及び装置に関するものであ
る。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a method and apparatus for editing multimedia data (for example, audio data, moving image data, etc.) by moving icons.

【０００２】[0002]

【従来の技術】従来、ワークステーションやパソコン、
その他、計算機などにおいて、音声等を含むマルチメデ
ィアデータを画面上で編集・再生する方法としては、例
えば特開平２−２８７８８４号公報に記載のように、画
面上に所望領域を設けて、これを音声ユニットと定義
し、この部分をクリックすることにより、あらかじめ記
憶した音声を再生することが提案されている程度であ
る。一般には、音声データ等の編集処理は専門的な音声
データ編集専用画面を利用しなければならず、ある音声
データの終点と別の音声データの始点をつなげて１つの
音声データに合成するような単純な音声合成を行いたい
場合でも操作が複雑であった。2. Description of the Related Art Conventionally, workstations, personal computers,
In addition, as a method of editing / reproducing multimedia data including audio and the like on a screen in a computer or the like, a desired area is provided on the screen as described in, for example, It is a degree that it is proposed to define a voice unit and click on this part to reproduce the voice stored in advance. Generally, the editing process of audio data or the like must use a specialized audio data editing screen, and the end point of one audio data is connected to the start point of another audio data to synthesize one audio data. The operation is complicated even if a simple speech synthesis is desired.

【０００３】[0003]

【発明が解決しようとする課題】従来技術では、マルチ
メディアデータを画面上で編集処理する場合、単純な音
声合成等を簡単なアイコン操作で迅速に行うことについ
て配慮がされておらず、単純な音声合成等の編集に際し
ても、音声データ編集専用画面を使用して複雑な操作を
行わなければならないという問題があった。In the prior art, when multi-media data is edited on a screen, no consideration is given to quickly performing a simple voice synthesis or the like with a simple icon operation. In editing speech synthesis and the like, there is a problem that complicated operations must be performed using a dedicated screen for editing speech data.

【０００４】本発明は、マルチメディアデータの編集処
理を、表示面上のアイコンに対するマウス等のドラッグ
操作によるアイコン移動によって、簡単かつ迅速に行う
ことを目的としている。It is an object of the present invention to perform multimedia data editing processing simply and quickly by dragging an icon on a display surface with an icon such as a mouse.

【０００５】[0005]

【課題を解決するための手段】上記目的を達成するため
に、本発明は、各マルチメディアデータに対応する複数
のアイコンを画面上に表示し、アイコンの移動操作によ
りマルチメディアデータの編集処理を行うにあたり、画
面上のアイコンの移動操作を検出する手段と、該移動し
たアイコン（第１のアイコン）と特定の位置関係にある
アイコン（第２のアイコン）を検出する手段と、前記第
１のアイコンに対応するマルチメディアデータと前記第
２のアイコンに対応するマルチメディアデータについ
て、当該第１と第２のアイコン間の上下左右の位置関係
に対応した編集処理を行う手段を設けたことを特徴とす
る。 In order to achieve the above object, the present invention displays a plurality of icons corresponding to each multimedia data on a screen and edits the multimedia data by moving the icons. In doing so , means for detecting an operation of moving an icon on the screen , and
Has a specific positional relationship with the icon (first icon)
Means for detecting an icon (second icon);
The multimedia data corresponding to one icon first
Top, bottom, left and right positional relationship between the first and second icons for the multimedia data corresponding to the second icon
Means for performing editing processing corresponding to
You.

【０００６】[0006]

【作用】例えば、オペレータがマウス等のドラッグ操作
により、アイコン１（第１のアイコン）をアイコン２
（第２のアイコン）の左に移動した場合、アイコン１に
対応するマルチメディアデータの終点とアイコン２に対
応するマルチメディアデータの始点をつなげて１つのマ
ルチメディアデータに編集する。逆にアイコン２の右に
アイコン１を移動した場合は、アイコン２に対応するマ
ルチメディアデータの終点とアイコン１に対応するマル
チメディアデータの始点をつなげる。アイコン１をアイ
コン２の上に移動した場合、アイコン１に対応するマル
チメディアデータを上、アイコン２に対応するマルチメ
ディアデータを下にして、これら２つのマルチメディア
データの始点を同じとする１つの並列マルチメディアデ
ータに編集し、逆に、アイコン２の下にアイコン１を移
動した場合は、上下逆の関係の並列マルチメディアデー
タに編集する。同様に、アイコン１とアイコン２の位置
関係が斜め等の場合にも、その位置関係に対応して２つ
のマルチメディアデータを編集する。さらに、アイコン
１とアイコン２、アイコン３との間など、３つ以上のア
イコンの場合も、各アイコンの位置関係に対応して各マ
ルチメディアデータを編集する。編集対象のマルチメデ
ィアデータは、音声データ、動画像データ、地図データ
等、何でもよい。For example, the icon 1 (first icon) is changed to the icon 2 by the drag operation of the mouse or the like by the operator.
When moving to the left of (the second icon) , the end point of the multimedia data corresponding to the icon 1 and the start point of the multimedia data corresponding to the icon 2 are connected to edit the multimedia data into one multimedia data. Conversely, when the icon 1 is moved to the right of the icon 2, the end point of the multimedia data corresponding to the icon 2 is connected to the start point of the multimedia data corresponding to the icon 1. When the icon 1 is moved over the icon 2, the multimedia data corresponding to the icon 1 is set to the top, the multimedia data corresponding to the icon 2 is set to the bottom, and one starting point of the two multimedia data is set to be the same. When editing is performed on the parallel multimedia data, and conversely, when the icon 1 is moved below the icon 2, the editing is performed on the parallel multimedia data having an upside-down relationship. Similarly, when the positional relationship between the icon 1 and the icon 2 is oblique or the like, the two multimedia data are edited according to the positional relationship. Further, in the case of three or more icons, such as between icon 1 and icon 2 and icon 3, each multimedia data is edited in accordance with the positional relationship of each icon. The multimedia data to be edited may be any data such as audio data, moving image data, map data, and the like.

【０００７】[0007]

【実施例】以下、本発明の一実施例について図面により
詳細に説明する。なお、以下の実施例では説明の便宜
上、アイコン間の位置関係は２つのアイコンに限定し、
編集処理は、移動操作したアイコンが、あるアイコンの
上に隣接する場合（上隣接）、下に隣接する場合（下隣
接）、左に隣接する場合（左隣接）、及び、右に隣接す
る場合（右隣接）、の４種類に限定する。また、編集対
象は音声データとする。DESCRIPTION OF THE PREFERRED EMBODIMENTS One embodiment of the present invention will be described below in detail with reference to the drawings. In the following embodiment, the positional relationship between the icons is limited to two icons for convenience of explanation,
The editing process is performed when the moved icon is adjacent to a certain icon (upper adjacent), adjacent to below (lower adjacent), adjacent to left (left adjacent), and adjacent to right. (Right adjacent). The editing target is audio data.

【０００８】図１は本発明の一実施例のシステム構成図
である。図１において、１は本装置全体を制御する制御
装置、２はオペレータがコマンドやデータを入力するキ
ーボード等の入力装置、３はアイコン、マルチメディア
データなどを表示する表示装置、４は音声を出力するス
ピーカ等の音声出力装置、５は複数の音声データを合成
する合成装置、６はプログラム類を格納する記憶装置、
７は各種データ類を格納する記憶装置である。ここで、
本実施例では、記憶装置６には音声データの編集処理プ
ログラム６１が格納され、記憶装置７には編集指示相対
位置テーブル７１、アイコンテーブル７２、音声データ
群７３が格納されている。FIG. 1 is a system configuration diagram of an embodiment of the present invention. In FIG. 1, 1 is a control device for controlling the entire apparatus, 2 is an input device such as a keyboard for inputting commands and data by an operator, 3 is a display device for displaying icons, multimedia data, and the like, and 4 is a voice output device. An audio output device such as a loudspeaker, a synthesis device for synthesizing a plurality of audio data, a storage device for storing programs,
Reference numeral 7 denotes a storage device for storing various data. here,
In this embodiment, the storage device 6 stores an audio data editing processing program 61, and the storage device 7 stores an editing instruction relative position table 71, an icon table 72, and an audio data group 73.

【０００９】なお、入力装置２あるいは表示装置３に
は、ポインティングデバイスのマウス等が接続される
が、図１では省略してある。一般に表示面上のアイコン
の移動は、この種のマウスを操作して行われる。また、
記憶装置６，７は内部記憶（ＲＡＭ、ＲＯＭ、ハードデ
ィスク等）、外部記憶（フロッピーディスク、光ディス
ク等）の総称であり、その利用形態は任意である。Note that a mouse or the like as a pointing device is connected to the input device 2 or the display device 3, but is omitted in FIG. Generally, the movement of the icons on the display surface is performed by operating such a mouse. Also,
The storage devices 6 and 7 are generic names of internal storage (RAM, ROM, hard disk, etc.) and external storage (floppy disk, optical disk, etc.), and their use forms are arbitrary.

【００１０】図２は記憶装置６上の編集処理プログラム
６１の構成例である。編集処理プログラム６１は、２つ
のアイコンの位置関係により、２つの対応する音声デー
タについて所定の編集処理を司どるプログラムである。
ここでは、編集処理プログラム６１としてプログラム１
〜４の４種類あり、上から順に各々、移動したアイコン
（第１のアイコン）の他のアイコン（第１のアイコン）
に対して、上、下、左、右の各位置関係に対応する編集
処理を司どるとする。なお、図２では、プログラム１〜
４を記憶装置６上の連続領域に用意する例を示したが、
勿論、飛び飛びの領域に用意することも可能である。ま
た、着目する位置関係の組合せに応じてプログラムの追
加、削除は自由である。FIG. 2 shows an example of the configuration of the editing processing program 61 on the storage device 6. The editing processing program 61 is a program that performs predetermined editing processing on two corresponding audio data according to the positional relationship between two icons.
Here, as the editing processing program 61, the program 1
There are four types of up to 4, each icon moved from the top
(First icon) of other icons (first icon)
, The editing process corresponding to each of the upper, lower, left, and right positional relationships is controlled. Note that in FIG.
4 is prepared in the continuous area on the storage device 6,
Of course, it is also possible to prepare in a discrete area. In addition, programs can be freely added or deleted according to the combination of the positional relationships of interest.

【００１１】図３は、記憶装置７上の編集指示相対位置
テーブル７１の構成例であり、カラムＮo.１〜Ｎo.４は
図３のプログラム１〜４に対応している。該編集指示相
対位置テーブル７１は、２つのアイコン間の位置関係と
編集処理プログラムの対応を管理するテーブルであり、
各カラム毎に、２つのアイコン間の相対座標範囲を表わ
す左右上下限界値を格納するエリアと、対応する編集処
理プログラムの記憶装置６上のアドレスを示すアドレス
ポインタ（例えば図２に示す開始アドレス）を格納する
エリアからなる。図３中、相対座標範囲の左右上下限界
値は、一例としてアイコンの大きさを１０×１０の正方
形とし、移動操作したアイコン（注目アイコン）の、隣
接アイコンの中心点からの座標値で示したものである。
なお、座標系は、一般に表示面上の表示が左から右、上
から下に行われるのに合わせて、左が「−」、右が
「＋」、上が「−」、下が「＋」としてある。図３の各
ケース（Ｎo.１〜Ｎo.４）におけるアイコン間の位置関
係の様子を具体的に示すと、図４の（１）〜（４）のよ
うになる。図４中、実線の正方形が隣接アイコン、点線
の正方形が移動操作対象のアイコン（注目アイコン）で
ある。図３の編集指示相対位置テーブル７１の構成は、
図２の編集処理プログラム６１の追加、削除に対応し
て、同様に追加、削除されることは云うまでもない。FIG. 3 shows an example of the configuration of the editing instruction relative position table 71 on the storage device 7. Columns No. 1 to No. 4 correspond to the programs 1 to 4 in FIG. The edit instruction relative position table 71 is a table for managing the correspondence between the positional relationship between two icons and the edit processing program,
For each column, an area for storing left, right, upper and lower limit values indicating a relative coordinate range between two icons, and an address pointer (for example, a start address shown in FIG. 2) indicating an address of the corresponding editing processing program on the storage device 6. Area. In FIG. 3, the left, right, upper and lower limit values of the relative coordinate range are, for example, a 10 × 10 square icon size, and are represented by the coordinate values of the moved icon (the icon of interest) from the center point of the adjacent icon. Things.
In general, the coordinate system is such that the display on the display surface is performed from left to right and from top to bottom, so that the left is “−”, the right is “+”, the upper is “−”, and the lower is “+”. There is. The state of the positional relationship between the icons in each case (No. 1 to No. 4) in FIG. 3 is specifically shown as (1) to (4) in FIG. In FIG. 4, a solid square is an adjacent icon, and a dotted square is an icon (attention icon) to be moved. The configuration of the edit instruction relative position table 71 in FIG.
Needless to say, they are similarly added and deleted in correspondence with the addition and deletion of the editing processing program 61 in FIG.

【００１２】図５は記憶装置７上のアイコンテーブル７
２の構成例である。該アイコンテーブル７２は、表示装
置３に表示されている各アイコンの表示位置、及び後述
の音声データ群７３との対応を管理するテーブルであ
り、各アイコン毎に、当該アイコンに付された番号（Ｎ
o.）、名前・意味などの属性情報、該アイコンの表示面
上での現在座標値、対応する音声データの格納先アドレ
スポインタ（開始／終了アドレス）からなる。ここで、
現在座標値は、対応するアイコンの移動に従って更新さ
れるものである。なお、図５では、アイコンの現在座標
値を左上隅と右下隅の２点で示すとしたが、これは４隅
の各座標で示してもよい。音声データのアドレスポイン
タは、当該アイコンに対応する音声データが存在しない
場合はブランクである。また、アイコンに動画像データ
を対応づける場合には、動画像データのアドレスポイン
タを追加すればよい。一般に、アドレスポインタのエリ
アはマルチメディアの数だけ用意されることになる。FIG. 5 shows an icon table 7 on the storage device 7.
2 is a configuration example. The icon table 72 is a table for managing a display position of each icon displayed on the display device 3 and a correspondence with a later-described audio data group 73, and for each icon, a number ( N
o.), attribute information such as name and meaning, the current coordinate value of the icon on the display surface, and a storage address pointer (start / end address) of the corresponding audio data. here,
The current coordinate value is updated according to the movement of the corresponding icon. In FIG. 5, the current coordinate value of the icon is indicated by two points, the upper left corner and the lower right corner, but this may be indicated by the coordinates of the four corners. The audio data address pointer is blank when there is no audio data corresponding to the icon. When associating moving image data with an icon, an address pointer for moving image data may be added. Generally, the area of the address pointer is prepared by the number of multimedia.

【００１３】図６は記憶装置７上の音声データ群７３の
構成例である。アイコンに音声データを対応づける場
合、音声データの開始／終了アドレスが、図５の対応す
るアイコンの音声データアドレスポインタとして登録さ
れる。後述するように、該音声データ群７３には編集処
理で得られた音声データが追加格納される。この時、該
音声データに対応するアイコンが新しく表示装置３に表
示され、該アイコンの管理データが図５のアイコンテー
ブル７２に追加登録される。FIG. 6 shows a configuration example of the audio data group 73 on the storage device 7. When associating audio data with an icon, a start / end address of the audio data is registered as an audio data address pointer of the corresponding icon in FIG. As described later, the audio data group 73 additionally stores audio data obtained by the editing process. At this time, an icon corresponding to the voice data is newly displayed on the display device 3, and management data of the icon is additionally registered in the icon table 72 of FIG.

【００１４】以下に、本発明のマルチメディアデータの
編集処理方法の一実施例として、図１乃至図６の構成に
おいて、アイコンの移動操作により、該移動操作したア
イコン（第１のアイコン）とそれに隣接するアイコン
（第２のアイコン）の上下左右の位置関係に応じた編集
処理プログラムを起動するまでの動作を、図７のフロー
チャートに基づいて説明する。なお、図７の制御は、図
１の制御装置１が受け持つことになる。In the following, as one embodiment of the multimedia data editing method according to the present invention, in the configuration shown in FIGS. 1 to 6, by moving an icon, the moved icon (first icon) and the icon (first icon) are displayed. Adjacent icon
The operation up to the start of the editing processing program according to the upper, lower, left and right positional relationship of the (second icon) will be described with reference to the flowchart of FIG. The control in FIG. 7 is performed by the control device 1 in FIG.

【００１５】図７において、カウンタｉは、移動操作し
たアイコンと上下左右の位置関係のアイコンを識別する
ためのカウンタであり、「ｉ」は図５のアイコンテーブ
ルのアイコンＮo.を示す。また、カウンタｊは、移動操
作したアイコンと隣接アイコンの位置関係に対応する編
集処理プログラムを識別するためのカウンタであり、
「ｊ」は図２のプログラム１〜４すなわち図３の編集指
示相対位置テーブルのカラムＮo.を示す。In FIG. 7, a counter i is a counter for identifying an icon which has been moved and an icon having a vertical, horizontal and positional relationship, and "i" indicates an icon No. in the icon table of FIG. The counter j is a counter for identifying an editing processing program corresponding to the positional relationship between the moved icon and the adjacent icon,
"J" indicates the program No. 1 to No. 4 in FIG. 2, that is, the column No. of the edit instruction relative position table in FIG.

【００１６】オペレータが、あるアイコンを移動操作す
ると、ステップ１０１でそれを判定し、ステップ１０２
で、図５のアイコンテーブル７２中より該移動操作した
アイコンの管理データを読み出して保持する。この管理
データにおける現在座標値は移動後の値を示している。When the operator moves a certain icon, the icon is determined in step 101, and the icon is determined in step 102.
Then, the management data of the moved icon is read out from the icon table 72 of FIG. 5 and held. The current coordinate value in the management data indicates a value after the movement.

【００１７】ステップ１０３以降の処理は、図５のアイ
コンテーブル７２をアイコンＮo.１から順に見ていっ
て、移動操作したアイコンとそれ以外の各アイコンとの
相対位置関係を調べ、その都度、図３の編集指示相対位
置テーブル７１を参照して、移動操作したアイコンと上
下左右の位置関係にある隣接アイコンを検出し、該位置
関係に対応する編集処理プログラムを起動する処理であ
る。In the processing after step 103, the icon table 72 shown in FIG. 5 is viewed in order from the icon No. 1, and the relative positional relationship between the moved icon and each of the other icons is checked. Referring to the edit instruction relative position table 71 of FIG. 3, adjacent icons having an upper, lower, left, and right positional relationship with the moved icon are detected, and an edit processing program corresponding to the positional relationship is started.

【００１８】まず、ステップ１０３でカウンタｉを初期
化（ｉ＝１）し、ステップ１０４で、カウンタｉで示さ
れるアイコンが移動操作したアイコンと同一か判定す
る。ここで、同一であれば、図５のアイコンテーブル７
２を次のアイコンＮo.に進めるため、ステップ１１０で
カウンタｉを１加算した後、ステップ１１１を経由して
ステップ１０４に戻る。First, at step 103, the counter i is initialized (i = 1), and at step 104, it is determined whether the icon indicated by the counter i is the same as the icon that has been moved. Here, if they are the same, the icon table 7 in FIG.
In order to advance 2 to the next icon No., after adding 1 to the counter i in step 110, the process returns to step 104 via step 111.

【００１９】ステップ１０４で、カウンタｉが移動操作
したアイコンに一致しないことが判定された場合、次の
ステップ１０５において、図５のアイコンテーブル７２
よりカウンタｉに対応するアイコンの管理データを読み
出して、該管理データ中の現在座標値とステップ１０２
で読み出した管理データ中の現在座標値より、移動操作
したアイコンと該カウンタｉで示されるアイコン間の相
対座標を計算する。If it is determined in step 104 that the counter i does not match the icon that has been moved, then in the next step 105, the icon table 72 of FIG.
Then, the management data of the icon corresponding to the counter i is read out, and the current coordinate value in the management data and step 102 are read.
The relative coordinates between the icon that has been moved and the icon indicated by the counter i are calculated from the current coordinate values in the management data read in step (1).

【００２０】次に、ステップ１０６において、カウンタ
ｊを初期化（ｊ≠１）する。ステップ１０７〜１０９の
ループは、図３の編集指示相対位置テーブル７１のカラ
ムをＮo.１からＮo.４まで順次検索して、ステップ１０
５で計算した相対座標が、該編集指示相対位置テーブル
７１に設定されている４つの相対座標範囲のいずれかに
含まれるか判定する処理である。Next, at step 106, a counter j is initialized (j ≠ 1). In the loop of steps 107 to 109, the columns of the edit instruction relative position table 71 of FIG. 3 are sequentially searched from No. 1 to No.
This is a process of determining whether the relative coordinates calculated in step 5 are included in any of the four relative coordinate ranges set in the editing instruction relative position table 71.

【００２１】ステップ１０７〜１０９の処理を繰り返
し、ステップ１０９において、カウンタｊの値が編集指
示相対位置テーブル７１の登録カラム数（図３のテーブ
ルでは４）を超えたことが判定されると、即ち、ステッ
プ１０５で計算した相対座標が図３の編集指示相対位置
テーブル７１のいずれの座標範囲にも含まれない場合、
ステップ１１０へ進み、カウンタｉを１加算する。そし
て、次のステップ１１１において、カウンタｉの値が全
アイコン数を超えたかどうか判定し、即ち、図５のアイ
コンテーブル７２を全て見たか判定し、超えていなけれ
ば、ステップ１０４に戻って、カウンタｉで示される次
のアイコンのチェックに移る。The processing of steps 107 to 109 is repeated. When it is determined in step 109 that the value of the counter j has exceeded the number of registered columns (4 in the table of FIG. 3) of the edit instruction relative position table 71, that is, If the relative coordinates calculated in step 105 are not included in any coordinate range of the edit instruction relative position table 71 in FIG.
Proceeding to step 110, the counter i is incremented by one. Then, in the next step 111, it is determined whether or not the value of the counter i has exceeded the total number of icons, that is, whether or not all the icon tables 72 in FIG. 5 have been viewed. Move to the check of the next icon indicated by i.

【００２２】こうして、ステップ１０７において、カウ
ンタｉのアイコンと移動操作したアイコン間の相対座標
が、図３の編集指示相対位置テーブル７１内のカウンタ
ｊで示されるカラム中の相対座標範囲内であることが判
定された場合、ステップ１２０の処理に移る。ステップ
１２０では、図３の編集指示相対位置テーブル７１の該
当カラムｊに設定されているアドレスポインタｊに従っ
て、記憶装置６内の図２に示す編集処理プログラム６１
におけるプログラムｊを起動する。Thus, in step 107, the relative coordinates between the icon of the counter i and the moved icon are within the relative coordinate range in the column indicated by the counter j in the edit instruction relative position table 71 of FIG. Is determined, the process proceeds to step 120. In step 120, according to the address pointer j set in the corresponding column j of the edit instruction relative position table 71 in FIG.
Activate the program j.

【００２３】一方、ステップ１１１において、カウンタ
ｉの値が全アイコン数を超えたことが判定された場合、
即ち、図５のアイコンテーブル７２を全て見おわり、移
動操作したアイコンに対して、図３の編集指示相対位置
テーブル７１で定めた上下左右の位置関係のアイコンが
存在しない場合、オペレータのアイコン移動操作は、２
つのアイコン位置関係に対応した音声データの編集処理
（合成処理）を指示するものでなかったとして、処理を
終了とする。On the other hand, if it is determined in step 111 that the value of the counter i has exceeded the total number of icons,
In other words, if the icon table 72 in FIG. 5 is completely viewed and there is no icon in the upper, lower, left, or right positional relationship determined by the edit instruction relative position table 71 in FIG. Is 2
It is determined that the instruction does not instruct the editing process (synthesizing process) of the audio data corresponding to the two icon positional relationships, and the process ends.

【００２４】次に、図１の合成装置５について説明す
る。合成装置５は、起動した編集処理プログラムの制御
下でもって、次のようにして２つのアイコンに対応する
音声データを編集（合成）し、表示装置３あるいは音声
出力装置４に出力する。まず、記憶装置７内の図５に示
すアイコンテーブル７２を参照して、移動操作したアイ
コン（アイコン１とする）に対応する管理データ中のア
ドレスポインタおよびカウンタｉのアイコン（アイコン
２とする）に対応する管理データ中のアドレスポインタ
に従って、記憶装置７内の図６に示す音声データ群７３
よりアイコン１対応音声データとアイコン２対応音声デ
ータを読み出す。次に、この読み出した２つの音声デー
タに対して、アイコン１とアイコン２の位置関係に従っ
た合成処理を施こし、表示装置３あるいは音声出力装置
４に出力する。なお、この時、制御装置１は、合成装置
５で作成された新たな音声データを、記憶装置７内の図
６に示す音声データ群７３に追加格納するとともに、該
音声データに対応する新たなアイコンを表示装置３に表
示し、該アイコンの管理データを記憶装置７内の図５に
示すアイコンテーブル７２に追加登録する。Next, the synthesizing device 5 of FIG. 1 will be described. The synthesis device 5 edits (synthesizes) the audio data corresponding to the two icons under the control of the activated editing processing program, and outputs the edited data to the display device 3 or the audio output device 4 as follows. First, referring to the icon table 72 shown in FIG. 5 in the storage device 7, the address pointer in the management data corresponding to the icon (the icon 1) moved and the icon of the counter i (the icon 2) are stored. According to the address pointer in the corresponding management data, the audio data group 73 shown in FIG.
The voice data corresponding to icon 1 and the voice data corresponding to icon 2 are read. Next, a synthesis process is performed on the two read voice data in accordance with the positional relationship between the icon 1 and the icon 2, and output to the display device 3 or the voice output device 4. At this time, the control device 1 additionally stores the new audio data created by the synthesizing device 5 in the audio data group 73 shown in FIG. The icon is displayed on the display device 3, and the management data of the icon is additionally registered in the icon table 72 shown in FIG.

【００２５】図８に、オペレータのアイコン移動操作と
そのとき編集処理（合成処理）される音声データの例を
示す。図中、８００は表示面である。ここで、８０１に
示すアイコン１は８１１に示す音声データを表現し、８
０２に示すアイコン２は８１２に示す音声データを表現
したものであるとする。オペレータが、入力装置２等に
付属のマウス等を用いアイコン１をアイコン２の左に隣
接する移動操作を行うと、図３および図４より、図２の
編集処理プログラム６１中の左隣接時の編集処理プログ
ラム３が起動される。このプログラムの制御下で、合成
装置５において、図５のアイコンテーブル７２を参照し
て、図６の音声データ群７３より、アイコン１対応音声
データ８１１とアイコン２対応音声データ８１２が読み
出されて、音声データ８１１の終点に音声データ８１２
の始点がつながって１つの音声データとなる処理が行わ
れる。この編集処理で作成された音声データが８１３に
示すものである。制御装置１では、この合成装置５で作
成された音声データ８１３を図６の音声データ群７３に
追加するととに、該音声データ８１３を表現する８０３
に示すアイコン３を表示面上に表示し、該アイコン３に
対応する管理データを図５のアイコンテーブル７２に追
加する。FIG. 8 shows an example of an icon moving operation by the operator and audio data to be edited (combined) at that time. In the figure, reference numeral 800 denotes a display surface. Here, the icon 1 indicated by 801 expresses the voice data indicated by 811,
It is assumed that the icon 2 indicated by 02 represents the audio data indicated by 812. When the operator performs an operation of moving the icon 1 adjacent to the left of the icon 2 using a mouse or the like attached to the input device 2 or the like, the operation of the editing processing program 61 in FIG. The editing processing program 3 is started. Under the control of this program, the synthesizing device 5 reads out the icon 1 corresponding audio data 811 and the icon 2 corresponding audio data 812 from the audio data group 73 of FIG. 6 with reference to the icon table 72 of FIG. , The audio data 812 at the end point of the audio data 811
Are connected to the start point of the audio data to form one audio data. The audio data created by the editing process is shown by reference numeral 813. The control device 1 adds the audio data 813 created by the synthesizing device 5 to the audio data group 73 in FIG.
Is displayed on the display surface, and management data corresponding to the icon 3 is added to the icon table 72 of FIG.

【００２６】同様に、オペレータがアイコン１をアイコ
ン２の上に隣接する操作を行うと、図２乃至図４より、
上隣接時の編集処理プログラム１が起動される。この場
合、合成装置５においては、８１１に示す音声データと
８１２に示す音声データの始点を同時に始点とし、それ
ぞれの音声データを別のトラックに格納した１つの音声
データを合成する処理が行われる。即ち、この編集処理
では８１４に示す音声データが作成され、これを表現す
る８０４に示すアイコン４が表示面に表示される。そし
て、アイコン４のアイコンデータが図５のアイコンテー
ブル７２に追加され、音声データ８１４が図６の音声デ
ータ群７３に追加される。Similarly, when the operator performs an operation of adjoining icon 1 on icon 2, FIG. 2 to FIG.
The editing processing program 1 at the time of the upper adjacent is activated. In this case, the synthesizing device 5 performs a process of simultaneously setting the start points of the audio data indicated by 811 and the audio data indicated by 812 as start points, and synthesizing one audio data in which each audio data is stored in another track. That is, in this editing processing, audio data 814 is created, and the icon 4 804 representing this is displayed on the display surface. Then, the icon data of the icon 4 is added to the icon table 72 of FIG. 5, and the audio data 814 is added to the audio data group 73 of FIG.

【００２７】以上、本発明の一実施例について説明した
が、３つ以上のアイコンの位置関係に応じた３つ以上の
音声データの編集処理に拡張することは容易に可能であ
る。また、これまでの実施例の説明において、音声デー
タを動画像データと置き替えれば、全く同様にして、複
数の動画像データを順次つなげたり、合成したりする編
集処理を簡単なアイコン操作で行うことが可能である。
音声データや動画像データ以外の種々のマルチメディア
データについても同様である。The embodiment of the present invention has been described above. However, the present invention can be easily extended to editing processing of three or more audio data in accordance with the positional relationship of three or more icons. Further, in the description of the embodiments, if audio data is replaced with moving image data, the editing process of sequentially connecting or synthesizing a plurality of moving image data is performed by a simple icon operation in exactly the same manner. It is possible.
The same applies to various multimedia data other than audio data and moving image data.

【００２８】[0028]

【発明の効果】請求項１および３の発明によれば、アイ
コンの移動操作という簡単な操作だけで、音声データや
動画像データ等のマルチメディアデータを自在に編集処
理ができ、音声等に関する専門知識がない人でも容易に
利用できる。また、音声データ編集専用画面などを利用
しない、アイコン移動操作だけなので、オペレーション
指示数が少なく、編集処理時間を短縮できるという効果
がある。According to the first and third aspects of the present invention, multimedia data such as audio data and moving image data can be freely edited with only a simple operation of moving an icon. It can be easily used by people without knowledge. In addition, since only the icon moving operation is not used, such as a screen dedicated to audio data editing, there is an effect that the number of operation instructions is small and the editing processing time can be reduced.

【００２９】請求項２の発明によれば、編集処理して得
られたマルチメディアデータを、同様のアイコンの移動
操作という簡単な操作で以後の編集処理に利用でき、あ
る程度複雑な編集処理も可能になる。According to the second aspect of the present invention, the multimedia data obtained by the editing process can be used for the subsequent editing process by a simple operation of moving the same icon, and a somewhat complicated editing process can be performed. become.

【図面の簡単な説明】[Brief description of the drawings]

【図１】本発明の一実施例のシステム構成図である。FIG. 1 is a system configuration diagram of an embodiment of the present invention.

【図２】編集処理プログラムの構成例である。FIG. 2 is a configuration example of an editing processing program.

【図３】編集指示相対位置テーブルの構成例である。FIG. 3 is a configuration example of an edit instruction relative position table.

【図４】図３の編集指示相対位置テーブル中の相対座標
範囲を説明する図である。FIG. 4 is a diagram illustrating a relative coordinate range in an editing instruction relative position table of FIG. 3;

【図５】アイコンテーブルの構成例である。FIG. 5 is a configuration example of an icon table.

【図６】音声データ群の構成例である。FIG. 6 is a configuration example of an audio data group.

【図７】アイコン移動操作により編集処理プログラムを
起動する手順を示すフローチャートである。FIG. 7 is a flowchart showing a procedure for starting an editing processing program by an icon moving operation.

【図８】アイコン移動操作による編集処理の具体例であ
る。FIG. 8 is a specific example of an editing process by an icon moving operation.

【符号の説明】[Explanation of symbols]

１ 制御装置 ２ 入力装置 ３ 表示装置 ４ 音声出力装置 ５ 合成装置 ６ プログラム記憶装置 ６１ 編集処理プログラム ７ データ記憶装置 ７１ 編集指示相対位置テーブル ７２ アイコンテーブル ７３ 音声データ群 REFERENCE SIGNS LIST 1 control device 2 input device 3 display device 4 audio output device 5 synthesizing device 6 program storage device 61 editing processing program 7 data storage device 71 editing instruction relative position table 72 icon table 73 audio data group

───────────────────────────────────────────────────── フロントページの続き (72)発明者 鳩岡 順一 神奈川県横浜市戸塚区戸塚町5030番地 株式会社 日立製作所 ソフトウェア開 発本部内 (56)参考文献 特開 平２−32473（ＪＰ，Ａ) 特開 平４−196987（ＪＰ，Ａ) (58)調査した分野(Int.Cl.⁷，ＤＢ名) G06T 11/80 G06F 17/30 310 G06F 3/14 370 ＪＩＣＳＴファイル（ＪＯＩＳ)──────────────────────────────────────────────────続 き Continuation of the front page (72) Inventor Junichi Hatooka 5030 Totsuka-cho, Totsuka-ku, Yokohama-shi, Kanagawa Prefecture Within the Software Development Division, Hitachi, Ltd. (56) References JP-A-2-32473 (JP, A) Kaihei 4-196987 (JP, A) (58) Fields investigated (Int. Cl. ⁷ , DB name) G06T 11/80 G06F 17/30 310 G06F 3/14 370 JICST file (JOIS)

Claims (3)

(57)【特許請求の範囲】(57) [Claims] 【請求項１】 各マルチメディアデータに対応する複数
のアイコンを画面上に表示し、アイコンの移動操作によ
りマルチメディアデータの編集処理を行う方法であっ
て、 画面上のアイコンの移動操作を検出するステップと、前記 移動した第１のアイコンと特定の位置関係にある第
２のアイコンを検出するステップと、前記第１のアイコンが前記第２のアイコンの右又は左に
位置する場合、前記第１のアイコンに対応するマルチメ
ディアデータと前記第２のアイコンに対応するマルチメ
ディアデータを、前記第１のアイコンと第２のアイコン
の左右位置関係順につなげて１つのマルチメディアデー
タに編集処理するステップと、 前記第１のアイコンが前記第２のアイコンの上又は下に
位置する場合、前記第１のアイコンに対応するマルチメ
ディアデータと前記第２のアイコンに対応するマルチメ
ディアデータを、両方の始点を揃えて前記第１のアイコ
ンと第２のアイコンの上下位置関係通りの１つのマルチ
メディアデータに編集処理するステップと、 からなることを特徴とするマルチメディアデータの編集
処理方法。1. A method for displaying a plurality of icons corresponding to respective multimedia data on a screen and performing an editing process on the multimedia data by an operation of moving the icon, wherein the operation of moving the icon on the screen is detected. a step, first a specific positional relationship with the first icon to the mobile
Detecting the second icon, wherein the first icon is located to the right or left of the second icon.
If it is located, the multimedia corresponding to the first icon
Media and multimedia corresponding to the second icon.
Media data from the first icon and the second icon
Multimedia data by connecting the left and right
And editing the first icon above or below the second icon.
If it is located, the multimedia corresponding to the first icon
Media and multimedia corresponding to the second icon.
Media data from the first icon with both starting points aligned.
One multi according to the vertical position relationship between the icon and the second icon
Editing the media data . A method for editing multimedia data. 【請求項２】 請求項１記載のマルチメディアデータの
編集処理方法において、前記編集処理して得られたマル
チメディアデータに対応して新規にアイコンを追加する
ことを特徴とするマルチメディアデータの編集処理方
法。2. The multimedia data editing method according to claim 1, wherein a new icon is added in correspondence with the multimedia data obtained by said editing process. Processing method. 【請求項３】 複数のアイコンを表示する表示手段と、
アイコンの表示位置を移動せしめるアイコン移動手段
と、各アイコンに対応するマルチメディアデータを記憶
する記憶手段を具備し、アイコンの移動操作によりマル
チメディアデータの編集処理を行う装置であって、表示手段の画面上のアイコンの移動操作を検出する手段
と、 前記移動した第１のアイコンと特定の位置関係にある第
２のアイコンを検出する手段と、 前記第１のアイコンが前記第２のアイコンの右又は左に
位置する場合、前記第１のアイコンに対応するマルチメ
ディアデータと前記第２のアイコンに対応するマルチメ
ディアデータを、前記第１のアイコンと第２のアイコン
の左右位置関係順につなげて１つのマルチメディアデー
タに編集処理する手段と、 前記第１のアイコンが前記第２のアイコンの上又は下に
位置する場合、前記第１のアイコンに対応するマルチメ
ディアデータと前記第２のアイコンに対応するマルチメ
ディアデータを、両方の始点を揃えて前記第１のアイコ
ンと第２のアイコンの上下位置関係通りの１つのマルチ
メディアデータに編集処理する手段と、 を有することを
特徴とするマルチメディアデータの編集処理装置3. A display means for displaying a plurality of icons,
An apparatus comprising: an icon moving unit for moving a display position of an icon; and a storage unit for storing multimedia data corresponding to each icon, wherein the device performs editing processing of multimedia data by an operation of moving the icon . Means for detecting movement of icons on the screen
And a third icon having a specific positional relationship with the moved first icon.
Means for detecting the second icon, wherein the first icon is located on the right or left of the second icon.
If it is located, the multimedia corresponding to the first icon
Media and multimedia corresponding to the second icon.
Media data from the first icon and the second icon
Multimedia data by connecting the left and right
Means for editing the data, and wherein the first icon is above or below the second icon.
If it is located, the multimedia corresponding to the first icon
Media and multimedia corresponding to the second icon.
Media data from the first icon with both starting points aligned.
One multi according to the vertical position relationship between the icon and the second icon
Means for editing the media data, and a multimedia data editing apparatus.