JP2006115468A - Apparatus, method, and program for image processing program storing medium - Google Patents
Apparatus, method, and program for image processing program storing medium Download PDFInfo
- Publication number
- JP2006115468A JP2006115468A JP2005228657A JP2005228657A JP2006115468A JP 2006115468 A JP2006115468 A JP 2006115468A JP 2005228657 A JP2005228657 A JP 2005228657A JP 2005228657 A JP2005228657 A JP 2005228657A JP 2006115468 A JP2006115468 A JP 2006115468A
- Authority
- JP
- Japan
- Prior art keywords
- video
- display
- video display
- display unit
- displayed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、画像処理装置、画像処理方法、画像処理プログラム及びプログラム格納媒体に関し、例えばノンリニア編集装置に適用して好適なものである。 The present invention relates to an image processing apparatus, an image processing method, an image processing program, and a program storage medium, and is suitable for application to, for example, a non-linear editing apparatus.
従来、テレビジョン放送局等のコンテンツ制作現場においては、ビデオカメラで撮影することにより得られた映像音声素材（以下、これをクリップと呼ぶ）からその一部を切り取るようにして新たな１つのクリップを作成し、同様に作成した複数のクリップを繋ぎ合わせるようにして１本のコンテンツを作成している（例えば、非特許文献１参照）。 Conventionally, in a content production site such as a television broadcasting station, a new clip is created by cutting a part from video / audio material (hereinafter referred to as a clip) obtained by shooting with a video camera. One content is created by connecting a plurality of similarly created clips (for example, see Non-Patent Document 1).
図４１は、このような編集作業に用いられる編集装置のディスプレイに表示されるＧＵＩ（Graphical User Interface）画面（以下、これを編集画面と呼ぶ）の一例を示すものである。この図４１からも明らかなように、この編集画面１は、クリップ一覧表示部２、モニタ部３、ストーリーボード部４、タイムライン部５及びエフェクト情報表示部６Ａ〜６Ｃから構成されている。
FIG. 41 shows an example of a GUI (Graphical User Interface) screen (hereinafter referred to as an editing screen) displayed on the display of the editing apparatus used for such editing work. As is apparent from FIG. 41, the
この場合クリップ一覧表示部２には、その編集装置に登録されている各種ビン及びファイルの中から所望の１つのビン又はファイルを選択して、そのビン又はファイルに収納されているクリップの一覧を表示させることができるようになされている。
In this case, the clip
そしてオペレータは、これらクリップ一覧表示部２に一覧表示されたクリップの中から所望のクリップを選択し、これをモニタ部３にドラッグアンドドロップすることによって、そのクリップの先頭画像をモニタ部３内に表示させることができる。
Then, the operator selects a desired clip from the clips displayed in the list on the clip
またオペレータは、その状態でモニタ部３の下部に表示されたボタン群７の中から対応するボタンをクリックすることによって、かかるドラッグアンドドロップされたクリップの再生を開始させてその再生映像をモニタ部３に表示させることや、その表示された再生映像を早送り又は巻き戻し等させることができ、さらにボタン群７の上側に表示されたそのクリップ全体における現在の表示画像の位置を表すスクラブカーソル８をマウス操作により左右に移動させることによって、そのときのスクラブカーソル８の位置に応じた画像をモニタ部３に表示させることができる。
In addition, the operator clicks the corresponding button from the button group 7 displayed at the bottom of the
かくしてオペレータは、モニタ部３に表示される再生映像を目視確認しながら、かかるボタン群７内の再生ボタン等やスクラブカーソル８を操作することによって所望のフレームを探索し、そのフレームの画像をモニタ部３に表示させた状態で当該モニタ部３の下部に設けられたイン点ボタン９ＩＮ又はアウト点ボタン９ＯＵＴをクリックすることにより、そのクリップから切り取るべき映像音声部分の開始点（以下、イン点）及び終了点（以下、アウト点）をそれぞれ指定することができる。
Thus, the operator searches for a desired frame by operating the playback button or the like in the button group 7 or the scrub cursor 8 while visually confirming the playback video displayed on the
そして、このようにしてイン点及びアウト点を指定したクリップについては、当該イン点及びアウト点で挟まれる映像音声部分を新たなクリップとして、ドラッグアンドドロップによりストーリーボード部４に貼り付けることができる。これにより編集画面１においては、編集に使用するクリップを予めストーリーボード部４に並べることによって、オペレータが編集結果を容易にイメージし得るようになされている。なお、このときストーリーボード部４には、貼り付けられた各クリップの先頭画像等の代表画像のサムネイル及び詳細情報が表示される。
Then, with respect to a clip in which the In point and Out point are specified in this way, the video / audio part sandwiched between the In point and Out point can be pasted on the
そしてオペレータは、この後かかるストーリーボード部４に貼り付けた各クリップを、それぞれドラッグアンドドロップによりタイムライン部５のビデオトラック１０Ｖ上に並べるように順次貼り付けるようにする。このときビデオトラック１０Ｖには、タイムスケール１１を指標として、貼り付けられたクリップの素材長に応じた長さの帯１２Ｖが表示される。またこのときそのクリップに音声がある場合には、オーディオトラック１０Ａにおけるタイムスケール１１上の同じ位置に同じ長さの帯１２Ａが表示される。
The operator, each clip pasted to the Storyboard 4 according Thereafter, by dragging and dropping each to pasted sequentially so arranged on the
ここで、このようにタイムライン部５のビデオトラック１０Ｖやオーディオトラック１０Ａに帯１２Ｖ、１２Ａが表示されることは、編集映像音声の出力時にタイムスケール１１で表された時間にその帯１２Ｖ、１２Ａに対応するクリップの映像が表示され又は音声が出力されることを意味する。従って、このような操作により編集映像として表示され、又は編集音声として出力されるクリップの映像又は音声を順次規定してなる編集リストを作成することができる。
Here, the bands 12 V and 12 A are displayed on the
なお、このようにして編集リストを作成する際に、例えば第１のクリップの映像から第２のクリップの映像への切り替わり時に映像特殊効果処理を施したいときには、エフェクト情報表示部６Ａ〜６Ｃのうちのエフェクト一覧表示部６Ｃに一覧表示された、この編集装置が実行できる各種映像特殊効果の中から、所望する映像特殊効果と対応付けられたアイコン（以下、これをエフェクトアイコンと呼ぶ）１３を、タイムライン部５のトラジショントラック１０Ｔにおける第１及び第２のクリップの切り替わり部分とタイムスケール１１上で同じ位置にドラッグアンドドロップにより貼り付けるようにする。
When creating the edit list in this way, for example, when it is desired to perform video special effect processing at the time of switching from the video of the first clip to the video of the second clip, among the effect
これにより編集映像における第１のクリップの映像と第２のクリップの映像との繋ぎ部分において、上述のようにトラジショントラック１０Ｔに貼り付けられたエフェクトアイコン１３と対応付けられた映像特殊効果処理を実行すべき旨の指示を入力することができる。
ところで、上述のような編集画面１を用いた編集作業では、上述のように、オペレータが個々のクリップの切り出しと、これら切り出したクリップを用いた編集内容の設定と、編集結果の確認とをそれぞれ別個の作業領域（モニタ部３又はタイムライン部５）において行わなければならない。
By the way, in the editing work using the
このためかかる編集作業では、モニタ部３を用いてクリップ切り出し、この切り出したクリップをドラッグアンドドロップによりストーリーボード部４に貼り付け、さらにこのストーリーボード部４に貼り付けられたクリップをドラッグアンドドロップによりタイムライン部５に貼り付け、その後かくして作成された編集リストに基づく編集映像をモニタ部３で確認するといった煩雑な手続を必要とし、この結果、編集作業を短時間かつ容易には行い難い問題があった。
For this reason, in such an editing operation, a clip is cut out using the
またかかる従来の編集画面１を用いた編集作業では、モニタ部３を用いて切り出した各クリップをタイムライン部５に並べた後にタイムライン部５内のスクラブバー５Ａ（図４１）をマウス操作により左右に移動させるスクラブ操作や、モニタ部３の再生ボタン等をクリックする操作を行わなければ編集結果を編集画面１上に表示させることができず、編集結果をリアルタイムで確認しながら直感的な編集作業を行い難い問題があった。
In the editing operation using the
従って、例えば編集画面内の１つの作業領域内において、編集結果をリアルタイムで目視確認しながら、個々のクリップの切り出しから複数クリップの編集までの一連の作業を行い得るようにすることができれば、編集作業を容易かつ直感的に行い得るようにすることができるものと考えられる。 Therefore, for example, if it is possible to perform a series of operations from clipping of individual clips to editing of a plurality of clips while visually confirming the editing result in real time in one work area in the editing screen, editing can be performed. It is considered that the work can be performed easily and intuitively.
本発明は以上の点を考慮してなされたもので、編集作業を容易化にかつ直感的に行い得るようにすることができる画像処理装置、画像処理方法、画像処理プログラム及びプログラム格納媒体を提案しようとするものである。 The present invention has been made in consideration of the above points, and proposes an image processing apparatus, an image processing method, an image processing program, and a program storage medium that can make editing work easy and intuitive. It is something to try.
かかる課題を解決するため本発明の画像処理装置においては、編集操作入力に応じて編集操作に対応する編集情報を取得する編集情報取得手段と、符号化ストリームを記憶する記憶手段から符号化ストリームを読み出す読出手段と、当該読出手段により読み出された符号化ストリームを復号処理し、表示画面上の複数の映像表示部に対して表示させる表示映像データをそれぞれ生成する画像処理手段と、当該画像処理手段により生成された複数の表示映像データを、上記複数の映像表示部の間において動画像の状態で時間差を設けながら、上記複数の映像表示部が表示順に連携した映像表示部群として連動表示させるように読出手段及び画像処理手段を制御すると共に、編集情報取得手段により取得された編集情報の内容に応じて映像表示部群の表示形態を変更するように読出手段及び画像処理手段を制御する制御手段とを設けるようにした。 In order to solve such a problem, in the image processing apparatus of the present invention, an encoded stream is obtained from an editing information acquisition unit that acquires editing information corresponding to an editing operation in response to an editing operation input, and a storage unit that stores the encoded stream. Reading means for reading, image processing means for decoding the encoded stream read by the reading means, and generating display video data to be displayed on a plurality of video display units on the display screen, and the image processing The plurality of display video data generated by the means are interlockedly displayed as a group of video display units in which the plurality of video display units are linked in the display order while providing a time difference in a moving image state between the plurality of video display units. The image display unit is controlled according to the content of the editing information acquired by the editing information acquiring unit and controls the reading unit and the image processing unit It was provided and control means for controlling the reading means and the image processing means to change the display form.
これにより、この画像処理装置では符号化ストリームを復号処理した結果得られる表示映像データを、複数の映像表示部の間において動画像の状態で時間差を設けながら、複数の映像表示部が表示順に連携した映像表示部群として連動表示させることができると共に、編集情報の内容に応じて映像表示部群の表示形態を変更することができるので、表示映像データに基づく一連の映像をユーザ所望の編集内容に合わせて変更表示させることができる。 As a result, in this image processing apparatus, the display video data obtained as a result of decoding the encoded stream is linked with the plurality of video display units in the display order while providing a time difference in a moving image state between the plurality of video display units. The video display unit group can be linked and displayed, and the display form of the video display unit group can be changed according to the content of the editing information, so that a series of videos based on the display video data can be edited as desired by the user. It can be changed and displayed according to.
また本発明の画像処理方法においては、編集操作入力に応じて編集操作に対応する編集情報を取得する編集情報取得ステップと、符号化ストリームを記憶する記憶手段から符号化ストリームを読み出す読出ステップと、当該読出ステップにより読み出された符号化ストリームを復号処理し、表示画面上の複数の映像表示部に対して表示させる表示映像データをそれぞれ生成する表示映像データ生成ステップと、当該表示映像データ生成ステップにより生成された複数の表示映像データを、複数の映像表示部の間において動画像の状態で時間差を設けながら、複数の映像表示部が表示順に連携した映像表示部群として連動表示させるように読出手段及び画像処理手段を制御すると共に、編集情報取得ステップにより取得された編集情報の内容に応じて映像表示部群の表示形態を変更するように制御する制御ステップとを設けるようにした。 Further, in the image processing method of the present invention, an editing information acquisition step for acquiring editing information corresponding to the editing operation in response to an editing operation input, a reading step for reading the encoded stream from the storage means for storing the encoded stream, A display video data generation step for decoding each of the encoded streams read in the reading step and generating display video data to be displayed on a plurality of video display units on the display screen, and the display video data generation step The plurality of display video data generated by the above is read so that the plurality of video display units are linked and displayed as a group of video display units linked in the display order while providing a time difference in a moving image state between the plurality of video display units. Control means and image processing means, and the contents of the editing information acquired by the editing information acquisition step Flip was provided and a control step of controlling so as to change the display form of the display area group to.
これにより、この画像処理方法では符号化ストリームを復号処理した結果得られる表示映像データを、複数の映像表示部の間において動画像の状態で時間差を設けながら、複数の映像表示部が表示順に連携した映像表示部群として連動表示させることができると共に、編集情報の内容に応じて映像表示部群の表示形態を変更することができるので、表示映像データに基づく一連の映像をユーザ所望の編集内容に合わせて変更表示させることができる。 As a result, in this image processing method, the display video data obtained as a result of decoding the encoded stream is linked in the display order while providing a time difference in the state of moving images between the video display units. The video display unit group can be linked and displayed, and the display form of the video display unit group can be changed according to the content of the editing information, so that a series of videos based on the display video data can be edited as desired by the user. It can be changed and displayed according to.
さらに本発明の画像処理プログラムにおいては、コンピュータに対して、編集操作入力に応じて編集操作に対応する編集情報を取得する編集情報取得ステップと、符号化ストリームを記憶する記憶手段から符号化ストリームを読み出す読出ステップと、当該読出ステップにより読み出された符号化ストリームを復号処理し、表示画面上の複数の映像表示部に対して表示させる表示映像データをそれぞれ生成する表示映像データ生成ステップと、当該表示映像データ生成ステップにより生成された複数の表示映像データを、複数の映像表示部の間において動画像の状態で時間差を設けながら、複数の映像表示部が表示順に連携した映像表示部群として連動表示させるように読出手段及び画像処理手段を制御すると共に、編集情報取得ステップにより取得された編集情報の内容に応じて映像表示部群の表示形態を変更するように制御する制御ステップとを実行させるようにした。 Furthermore, in the image processing program of the present invention, an encoded stream is obtained from an editing information acquisition step for acquiring editing information corresponding to an editing operation in response to an editing operation input to a computer, and a storage means for storing the encoded stream. A read step for reading, a display video data generation step for decoding the encoded stream read by the read step, and generating display video data to be displayed on a plurality of video display units on the display screen, The multiple display video data generated in the display video data generation step is linked as a video display unit group in which multiple video display units are linked in the display order while providing a time difference in the state of moving images between the multiple video display units. The reading means and the image processing means are controlled so as to be displayed, and at the editing information acquisition step And so as to execute a control step of controlling so as to change the display form of the display area group in accordance with the contents of the acquired editing information Ri.
この結果この画像処理プログラムによれば、符号化ストリームを復号処理した結果得られる表示映像データを、複数の映像表示部の間において動画像の状態で時間差を設けながら、複数の映像表示部が表示順に連携した映像表示部群として連動表示させることができると共に、編集情報の内容に応じて映像表示部群の表示形態を変更することができるので、表示映像データに基づく一連の映像をユーザ所望の編集内容に合わせて変更表示させることができる。 As a result, according to the image processing program, the display video data obtained as a result of decoding the encoded stream is displayed on the plurality of video display units while providing a time difference in a moving image state between the plurality of video display units. The video display unit group can be linked and displayed in order, and the display form of the video display unit group can be changed according to the content of the editing information. It can be changed and displayed according to the editing content.
さらに本発明のプログラム格納媒体においては、編集操作入力に応じて編集操作に対応する編集情報を取得する編集情報取得ステップと、符号化ストリームを記憶する記憶手段から符号化ストリームを読み出す読出ステップと、当該読出ステップにより読み出された符号化ストリームを復号処理し、表示画面上の複数の映像表示部に対して表示させる表示映像データをそれぞれ生成する表示映像データ生成ステップと、当該表示映像データ生成ステップにより生成された複数の表示映像データを、複数の映像表示部の間において動画像の状態で時間差を設けながら、複数の映像表示部が表示順に連携した映像表示部群として連動表示させるように読出手段及び画像処理手段を制御すると共に、編集情報取得ステップにより取得された編集情報の内容に応じて映像表示部群の表示形態を変更するように制御する制御ステップとをコンピュータに読み取らせて実行させるようにした。 Furthermore, in the program storage medium of the present invention, an editing information acquisition step for acquiring editing information corresponding to the editing operation in response to the editing operation input, a reading step for reading the encoded stream from the storage means for storing the encoded stream, A display video data generation step for decoding each of the encoded streams read in the reading step and generating display video data to be displayed on a plurality of video display units on the display screen, and the display video data generation step The plurality of display video data generated by the above is read so that the plurality of video display units are linked and displayed as a group of video display units linked in the display order while providing a time difference in a moving image state between the plurality of video display units. Information acquired by the editing information acquisition step while controlling the image processing means and the image processing means It was set to be executed is read by a control step of controlling so as to change the display form of the display area group to the computer according to the content.
この結果このプログラム格納媒体によれば、符号化ストリームを復号処理した結果得られる表示映像データを、複数の映像表示部の間において動画像の状態で時間差を設けながら、複数の映像表示部が表示順に連携した映像表示部群として連動表示させることができると共に、編集情報の内容に応じて映像表示部群の表示形態を変更することができるので、表示映像データに基づく一連の映像をユーザ所望の編集内容に合わせて変更表示させることができる。 As a result, according to the program storage medium, the display video data obtained as a result of decoding the encoded stream is displayed on the plurality of video display units while providing a time difference in a moving image state between the plurality of video display units. The video display unit group can be linked and displayed in order, and the display form of the video display unit group can be changed according to the content of the editing information. It can be changed and displayed according to the editing content.
本発明の画像処理装置、画像処理方法、画像処理プログラム及びプログラム格納媒体によれば、符号化ストリームを復号処理した結果得られる表示映像データを、複数の映像表示部の間において動画像の状態で時間差を設けながら、複数の映像表示部が表示順に連携した映像表示部群として連動表示させることができると共に、編集情報の内容に応じて映像表示部群の表示形態を変更することができるので、表示映像データに基づく一連の映像をユーザ所望の編集内容に合わせて変更表示させることができ、かくして編集作業を容易化にかつ直感的に行い得るようにすることができる編集作業を容易化にかつ直感的に行い得るようにすることができる画像処理装置、画像処理方法、画像処理プログラム及びプログラム格納媒体を実現することができる。 According to the image processing device, the image processing method, the image processing program, and the program storage medium of the present invention, the display video data obtained as a result of decoding the encoded stream is displayed in a moving image state between a plurality of video display units. While providing a time difference, a plurality of video display units can be linked and displayed as a video display unit group linked in the display order, and the display form of the video display unit group can be changed according to the content of the editing information. A series of videos based on display video data can be changed and displayed in accordance with user-desired editing contents, thus making the editing work easy and intuitive. Realizing an image processing apparatus, an image processing method, an image processing program, and a program storage medium that can be performed intuitively It can be.
以下図面について、本発明の一実施の形態を詳述する。 Hereinafter, an embodiment of the present invention will be described in detail with reference to the drawings.
（１）第１の実施の形態
（１−１）第１の実施の形態による編集システム２０の構成
図１において、２０は全体として本発明を適用した本実施の形態による編集システムを示し、ビデオテープに記録された映像音声の一部又は全部をクリップとして編集装置２１を介してＲＡＩＤ（Redundant Arrays of Independent Disks）でなる大容量の記憶装置２２に取り込み得るようになされている。
(1) First Embodiment (1-1) Configuration of
またこの編集システム２０では、記憶装置２２に取り込まれたクリップを所望状態につなぎ合わせて所望の編集映像音声を得るための編集内容に規定した編集リストを作成でき、さらにこの作成した編集リストに従って実際に編集処理を実行し、得られた編集映像及び編集音声を記憶装置２２に蓄積し、或いはビテオテープに記録することができるようになされている。
In addition, the
すなわちこの編集システム２０は、編集装置２１、記憶装置２２及び複数台のビデオテープレコーダ２〜２３ｎから構成されている。
That is, the
この場合、編集装置２１においては、ＣＰＵ（Central Processing Unit）３０、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）３２、ハードディスク装置３３、信号処理部３４及び映像特殊効果／音声ミキシング処理部３５と、第１〜第４のインタフェース部３６Ａ〜３６Ｄとがバス３７を介して相互に接続されることにより構成されている。そして第１のインタフェース部３６Ａにマウス３８及びキーボード３９が接続され、第２のインタフェース部３６Ｂに各ビデオテープレコーダ２３１〜２３ｎが接続され、第３のインタフェース部３６Ｃに記憶装置２２が接続され、第４のインタフェース部３６Ｄにディスプレイ４０及びスピーカ４１が接続されている。
In this case, in the
そしてＣＰＵ３０は、起動時、ＲＯＭ３１に格納された制御プログラムに基づき、ハードディスク装置３３に格納された必要なソフトウェアを読み出してＲＡＭ３２に展開し、この後このソフトウェア及びユーザ操作に基づいて必要な制御処理を実行する。
At startup, the
実際上、ＣＰＵ３０は、マウス３８やキーボード３９が操作されて、ビデオテープに記録された映像音声を記憶装置２２に取り込むための所定のウィンドウ（以下、これをクリップ取込みウィンドウと呼ぶ）の表示命令が入力されると、これに応動してハードディスク装置３３を制御することにより、対応する画像データを読み出させる一方、これと併せて信号処理部３４を制御することにより、この画像データに基づく上述のクリップ取込みウィンドウをディスプレイ４０に表示させる。
In practice, the
またＣＰＵ３０は、この状態でマウス３８が操作されて、あるビデオテープレコーダ２３１〜２３ｎに対する再生動作命令が入力されると、これに応動して第２のインタフェース部３６Ｂを介して対応するビデオテープレコーダ２３１〜２３ｎを制御することにより、ビデオテープに記録された映像音声信号の再生動作を実行させる。この結果このビデオテープレコーダ２３１〜２３ｎからは、当該ビデオテープレコーダ２３１〜２３ｎに装填されているビデオテープから再生された映像音声信号Ｓ１が出力され、これが第２のインタフェース部３６Ｂ、バス３７及び映像特殊効果／音声ミキシング処理部３５を順次介して信号処理部３４に与えられる。
In addition, when the
このとき信号処理部３４は、ＣＰＵ３０の制御のもとに、供給される映像音声信号Ｓ１に対して所定の信号処理を施し、得られた映像信号Ｓ２をバス３７及び第４のインタフェース部３６Ｄを介してディスプレイ４０に送出することにより、映像信号Ｓ２に基づく映像をクリップ取込みウィンドウ内の所定位置に表示させる一方、このとき得られた音声信号Ｓ３をバス３７及び第４のインタフェース部３６Ｄを介してスピーカ４１に送出することにより、当該音声信号Ｓ３に基づく音声をスピーカ４１から出力させる。
At this time, the
かくしてオペレータは、ディスプレイ４０に表示された映像及びスピーカ４１から出力される音声に基づいて、マウス３８及びキーボード３９を用いて映像及び音声の所望部分を指定することができ、さらにその映像音声部分をクリップとしてそのイン点及びアウト点のタイムコードや素材長（デュレーション）、クリップＩＤ、クリップ名、その映像音声の撮影日時、そのクリップの作成日時等の管理情報を登録することができる。そしてこの登録されたそのクリップの管理情報が、ＣＰＵ３０の制御のもとに、ハードディスク装置３３内のクリップ管理情報データベースに登録される。
Thus, based on the video displayed on the
またＣＰＵ３０は、この後マウス３８又はキーボード３９が操作されて、そのクリップの取込み命令が入力されると、これに応動して第２のインタフェース部３６Ｂを介してそのビデオテープレコーダ２３１〜２３ｎを制御することにより、指定されたクリップの映像音声の再生動作を実行させる。この結果、ビデオテープレコーダ２３１〜２３ｎからは、ビデオテープから再生されたそのクリップの映像音声信号Ｓ１が出力され、これが第２のインタフェース部３６Ｂ及びバス３７を順次介して映像特殊効果／音声ミキシング処理部３５に与えられる。またＣＰＵ３０は、これと併せて映像特殊効果／音声ミキシング処理部３５及び記憶装置２２を制御することにより、ビデオテープレコーダ２３１〜２３ｎから与えられるかかるクリップの映像音声信号Ｓ１を映像特殊効果／音声ミキシング処理部３５を介して記憶装置２２に取り込ませる。
The
このようにしてこの編集システム１においては、指定されたクリップの映像音声をビデオテープから再生して記憶装置２２に取り込むことができるようになされている。
In this way, in the
一方、オペレータは、この後マウス３８やキーボード３９を用いた所定操作により編集作業を行うための後述のような編集画面５０（図２）をディスプレイ４０に表示させることができ、この編集画面５０を用いてどのクリップとどのクリップとをどのように繋ぎ合わせるかといった編集内容を規定した編集リストを作成することができる。またオペレータは、編集リストの作成後又は作成途中において、その編集リストに基づく編集映像及び編集音声を確認することができる。
On the other hand, the operator can subsequently display an editing screen 50 (FIG. 2), which will be described later, for performing an editing operation by a predetermined operation using the
そしてＣＰＵ３０は、編集リストが作成された後マウス３８が操作されてその編集リストの登録命令が入力された場合には、その編集リストにおいて規定された全てのユーザプログラムによる設定でなる編集データをファイル化してハードディスク装置３３内の編集リストデータベースに登録する。
When the edit list is created and the
またＣＰＵ３０は、編集リストの作成後又は作成途中において、マウス３８又はキーボード３９が操作されて、その編集リストに基づく編集映像音声の再生命令が入力されると、これに応動して記憶装置２２を制御することにより、必要なクリップの映像音声信号Ｓ１を記憶装置３に読み出させる。かくしてこの記憶装置２２から読み出された映像音声信号Ｓ４が第３のインタフェース部３６Ｃ及びバス３７を順次介して映像特殊効果／音声ミキシング処理部３５に与えられ、この後ＣＰＵ３０の制御のもとに、当該映像特殊効果／音声ミキシング処理部３５において必要に応じて映像特殊効果加工処理や音声ミキシング処理が施され、得られた編集結果でなる編集映像音声信号Ｓ５が信号処理部３４に与えられる。
Further, the
このとき信号処理部３４は、ＣＰＵ３０の制御のもとに、供給される編集映像音声信号Ｓ５に対して所定の信号処理を施し、得られた映像信号Ｓ２及び音声信号Ｓ３をそれぞれバス３７及び第４のインタフェース部３６Ｄを順次介してディスプレイ４０又はスピーカ４１に送出する。この結果、この映像信号Ｓ２に基づいて、編集画面５０内の所定位置に編集映像音声信号Ｓ５に基づく編集映像が表示され、スピーカ４１から当該編集映像音声信号Ｓ５に基づく編集音声が出力される。
At this time, the
このようにしてこの編集システム１においては、オペレータが編集リストに基づく編集映像及び編集音声を確認しながら編集作業を行うことができる。
In this way, in the
さらにＣＰＵ３０は、編集リストが作成された後、マウス３８又はキーボード３９が操作されてその実行命令が入力されると、これに応動して記憶装置２２を制御することにより、編集処理に利用するクリップの映像音声信号Ｓ４を記憶装置２２から読み出させて映像特殊効果／音声ミキシング処理部３５に送出させる。
Further, after the edit list is created, the
そしてこのとき映像特殊効果／音声ミキシング処理部３５は、ＣＰＵ３０の制御のもとに、上述の再生モード時と同様にして、供給される各クリップの映像音声信号Ｓ４に対して必要に応じて特殊効果加工処理や音声ミキシング処理を施す一方、得られた編集映像音声信号Ｓ５をバス３７と、第３又は第２のインタフェース部３６Ｃ、３６Ｂとを順次介して記憶装置２２又は対応するビデオテープレコーダ２３１〜２３ｎに送出する。
At this time, the video special effect / audio
かくして記憶装置２２は、ＣＰＵ３０の制御のもとに、供給される編集映像音声信号Ｓ５を指定されたアドレス位置に記憶する。またビデオテープレコーダ２３１〜２３ｎは、ＣＰＵ３０の制御のもとに、供給される編集映像音声信号Ｓ５をビデオテープの指定された位置に記録する。
Thus, the
このようにしてこの編集システム１では、作成された編集データに従って、指定されたクリップの映像音声を指定された状態に編集加工して記憶装置２２に蓄積したり、ビデオテープに記録したりすることができるようになされている。また、本説明では映像音声の蓄積場所として記憶装置２２を使い、説明を行ったが、ハードディスク装置３３に蓄積してもよい。
In this way, the
（１−２）編集画面５０における操作手順
（１−２−１）編集画面５０における再生映像の表示方法
（１−２−１−１）編集画面５０における再生映像の表示方法
ここでＣＰＵ３０は、マウス３８又はキーボード３９が操作されて編集画面を表示すべき命令が入力されると、ハードディスク装置３３及び信号処理部３４を制御することにより、図２に示すような編集画面５０をディスプレイ４０に表示させる。
(1-2) Operation procedure on the editing screen 50 (1-2-1) Reproduction video display method on the editing screen 50 (1-2-1-1) Reproduction video display method on the
この編集画面５０は、図４１について上述した編集画面１のクリップ一覧表示部２、ストーリーボード部４、タイムライン部５及びエフェクト情報表示部６Ａ〜６Ｃとそれぞれ同様の機能を有するクリップ一覧表示部５１、ストーリーボード部５２、タイムライン部５３及びエフェクト情報表示部５４と、この編集画面５０に固有の機能を有する帯状表示部５５とから構成される。なお、編集画面５０の場合、後述のように編集作業は主として帯状表示部５５を用いて行われるため、ストーリーボード部５２及びタイムライン部５３は補助的に設けられたものである。
This
そして帯状表示部５５には、初期時、図３に示すように、例えばゴルフスイングのような一連の動きを示す映像を表示するのに適した複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）が、例えば楕円状に３次元的に湾曲させて連続的かつ手前中央部の映像表示部（以下、適宜、これを基準映像表示部と呼ぶ）５７Ａを中心として左右両側に同じ数だけ位置するように並べて配置されてなる帯状の映像表示部群５８が表示される。
In the initial state, as shown in FIG. 3, a plurality of video display units 57 (57F to 57A to 57V) suitable for displaying a video showing a series of movements such as a golf swing are displayed on the belt-shaped
この場合において、映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）は、例えば基準映像表示部５７Ａが最も大きく、これから離れるにつれて徐々に小さくなるように、かつ手前側の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）と後側の映像表示部５７とが重なる部分では後側の映像表示部５７が手前側の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）によって隠れるように表示される。
In this case, each of the image display units 57 (57F to 57A to 57V) of the image
但し、各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）においては、半透明の再生映像が表示されるようになされており、手前側の映像表示部５７Ａによって隠れる後側の映像表示部５７Ｂ及び５７Ｚの一部分や、当該映像表示部５７Ｂ及び５７Ｚによって隠れる後側の映像表示部５７Ｃ及び５７Ｙの一部分や、当該映像表示部５７Ｃ及び５７Ｙによって隠れる後側の映像表示部５７Ｄ及び５７Ｘの一部分や、当該映像表示部５７Ｄ及び５７Ｘによって隠れる後側の映像表示部５７Ｅ及び５７Ｗの一部分や、当該映像表示部５７Ｅ及び５７Ｗによって隠れる後側の映像表示部５７Ｆ及び５７Ｖの一部分についても透けた状態で目視確認し得るようになされている。
However, in each of the video display units 57 (57F to 57A to 57V), a translucent reproduced video is displayed, and the rear
なお、この場合のＣＰＵ３０は、ハードディスク装置３３から複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）の表示サイズ及び帯状表示部５５上における表示位置を含む表示情報を取得し、この表示情報に基づいて画像処理を施すことにより当該複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示すべき対応する表示映像データをそれぞれ生成するようになされている。
In this case, the
そしてこの編集画面５０では、例えばクリップ一覧表示部５１に一覧表示されたクリップの中から所望するクリップをドラッグアンドドロップにより帯状表示部５５内に移動させ、その後帯状表示部５５の左下隅に表示された再生ボタン５６をクリックすると、図４に示すように、この映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に、それぞれ右側に隣接する映像表示部５７に表示された再生映像に対して予め設定された所定の等間隔の時間差（以下、この時間を再生時間差と呼ぶ）ΔＴ（図５）をもって順次再生されたそのクリップの再生映像が順次表示される。
On the
つまり、図５に示すように、最初に右奥の映像表示部５７Ｆ内にそのクリップの再生映像が先頭から表示され、その後設定された再生時間差ΔＴ分の時間経過後にこれと左側に隣接する次の映像表示部５７Ｅにそのクリップの再生映像が先頭から表示され、さらにその後当該再生時間差ΔＴ分の時間経過後にこれと左側に隣接する次の映像表示部５７Ｄにその再生映像が先頭から表示され、……というように、そのクリップの再生映像が、かかる等間隔の再生時間差ΔＴをもって各映像表示部５７に図４の矢印ａの方向の順番で時系列の流れとして順次表示されることとなる。なお図５において破線で示す部分は、初期状態において編集画面５０には表示されないが、映像の再生が行われている後述の映像表示部５７Ｇ，５７Ｈ，……、５７Ｕ，５７Ｔ，……における当該映像の再生タイミングを示すものである。
That is, as shown in FIG. 5, the playback video of the clip is first displayed from the top in the
従ってＣＰＵ３０は、複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）の間において動画像の状態で再生時間差ΔＴ分の時間差を設けながら、複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）が表示順に連携した映像表示部群５８として再生映像を連動表示させ得るようになされている。
Therefore, the
また図６に示すように各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示される再生映像は、予め設定された画像更新速度、すなわち再生速度ｖで再生画像が表示される。従って、かかる再生速度ｖの設定値が大きい場合には、これに応じて各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に等速度で高速再生された再生映像がそれぞれ表示され、当該設定された再生速度ｖが遅い場合には、これに応じて各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に等速度でスロー再生された再生映像がそれぞれ表示されることとなる。 Further, as shown in FIG. 6, the playback images displayed on the respective video display units 57 (57F to 57A to 57V) are displayed at a preset image update speed, that is, the playback speed v. Therefore, when the set value of the playback speed v is large, the playback video that has been played back at high speed at the same speed is displayed on each video display unit 57 (57F to 57A to 57V) accordingly. When the playback speed v is slow, the playback video slow-played at a constant speed is displayed on each video display unit 57 (57F to 57A to 57V) accordingly.
なお、これら再生時間差ΔＴ及び再生速度ｖの初期値は、帯状表示部５５の上部に表示されたツールバー５９における「設定」をクリックし、かくして表示される図示しないコンテキストメニューの中から「再生時間差・再生速度」を選択したときに表示される図７に示すような再生時間差・再生速度設定ダイアログ６０を用いて設定することができる。
The initial values of the playback time difference ΔT and the playback speed v are set by clicking “Setting” in the
実際上、かかる再生時間差ΔＴ及び再生速度ｖの初期値を設定する場合には、これら再生時間差ΔＴ及び再生速度ｖにそれぞれ対応させてこの時間差・再生速度設定ダイアログ６０に設けられた各テキストボックス６１、６２内の数値を、例えば対応するアップダウンキー６３Ａ、６３Ｂ、６４Ａ、６４Ｂをクリック操作し、又はキーボード３９を用いて所望する数値を直接入力するようにして変更した後に、「ＯＫ」ボタン６５をクリックすれば良く、このときこれらテキストボックス６１、６２内に表示されていた数値が、それぞれかかる再生時間差ΔＴ及び再生速度ｖの初期値として設定される。
In practice, when setting the initial values of the reproduction time difference ΔT and the reproduction speed v, each
これによりこの編集装置５１においては、例えばその映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示される再生映像の再生時間差ΔＴを小さくし、かつこれら再生映像の再生速度ｖを遅く設定することによって、クリップの狭い範囲の映像を当該映像表示部群５８に表示させることができ、またかかる再生時間差ΔＴを大きく、かつこれら再生映像の再生速度ｖを遅く設定することによって、クリップの広い範囲の映像を当該映像表示部群５８に表示させることができるようになされている。
Thereby, in the
実際上、図６に示したような各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示される再生映像は、再生速度ｖが変更されることに応じて可変速表示され、また再生時間差ΔＴ分が変更されることに応じて任意の時間間隔で時間差表示されることになるため、全体としては太矢印ＳＴ１に示すフォワード方向へ流れるように可変速表示された状態で連動表示される。 In practice, the playback video displayed on each video display unit 57 (57F to 57A to 57V) as shown in FIG. 6 is displayed at a variable speed according to the change of the playback speed v, and the playback time difference ΔT. Since the time difference is displayed at an arbitrary time interval in accordance with the change of the minute, the entire display is interlocked and displayed in a variable speed display so as to flow in the forward direction indicated by the thick arrow ST1.
この場合、各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）では、映像表示部５７Ｆに対して最も時間的に進んだタイミングの再生映像が表示されることになり、映像表示部５７Ｖに対して最も時間的に遅れたタイミングの再生映像が表示されることになるため、時系列順にずらした状態で流れるような映像表示が行われていることをユーザに対して直感的に認識させ得るようになされている。
In this case, in each of the video display units 57 (57F to 57A to 57V), a playback video at a timing most advanced in time with respect to the
また図８に示すように、各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示される再生映像としては、再生速度−ｖと設定された場合、逆戻り方法に可変速表示され、また再生時間差ΔＴ分が変更されることに応じて任意の時間間隔で時間差表示されることになるため、全体としては太矢印ＳＴ２に示すリバース方向へ流れるように可変速表示された常態で連動表示される。 Also, as shown in FIG. 8, the playback video displayed on each video display unit 57 (57F to 57A to 57V) is displayed in variable speed in the reverse method when the playback speed is set to -v, and the playback time difference Since the time difference is displayed at an arbitrary time interval in accordance with the change of ΔT, the entire display is interlocked and displayed in a normal state in which the variable speed is displayed so as to flow in the reverse direction indicated by the thick arrow ST2.
さらにこの編集画面５０では、帯状表示部５５内に既に１又は複数の映像表示部群５８が表示されている状態において、クリップ一覧表示部５１に表示された他のクリップを帯状表示部５５内にドラッグアンドドロップすることにより、帯状表示部５５内にそれまで表示されていた１又は複数の映像表示部群５８に加えて、その新たにドラッグアンドドロップされたクリップと対応付けられた映像表示部群５８を帯状表示部５５内に表示させることができる。
Further, in this
逆に、編集画面５０では、帯状表示部５５内に既に１又は複数の映像表示部群５８が表示されている状態において、帯状表示部５５内の１又は複数の映像表示部群５８を選択してクリップ一覧表示部５１にドラッグアンドドロップすることにより、それまで帯状表示部５５内に表示されていた１又は複数の映像表示部群５８から、選択した１又は複数の映像表示部群５８を帯状表示部５５から削除することもできる。あるいは、帯状表示部５５内の１又は複数の映像表示部群５８を選択して、Deleteキーを押すことによっても削除できる。
On the contrary, in the
そして帯状表示部５５に複数の映像表示部群５８を表示させた場合には、マウス操作により１つの映像表示部群５８を選択した後に、再生ボタン５６をクリックすることによって、その映像表示部群５８の各映像表示部５７に対応するクリップの再生映像をそれぞれ表示させることができる。なお、この場合における上述の再生時間差ΔＴ及び再生速度ｖの初期値は、いずれも上述の再生時間差・再生速度設定ダイアログ６０を用いて設定された値となる。
When a plurality of video
一方、編集画面５０では、帯状表示部５５の上部に表示されたツールバー５９の「設定」をクリックし、かくして表示される図示しないコンテキストメニューの中から「音声出力モード」を選択することによって、クリップの再生映像を帯状表示部５５に表示しているときの音声出力モードとして、例えば「メイン音声出力モード」及び「全音声出力モード」のうちのいずれかを１つを選択して設定することができる。
On the other hand, on the
そして音声出力モードとして「メイン音声出力モード」を設定したときには、そのとき操作している映像表示部群５８の基準映像表示部５７Ａに表示された再生映像に付随する再生音声のみがスピーカ４１から出力され、「全音声出力モード」を設定したときには、基準映像表示部５７Ａから離れた映像表示部５７に表示された再生映像の音声ほど小さい音量となるように音量調整された状態で、そのとき操作している映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示された再生映像に付随するすべての再生音声がスピーカ４１から出力される。
When “main audio output mode” is set as the audio output mode, only the playback audio accompanying the playback video displayed on the reference
ただし、音声出力モードとして「全音声出力モード」を設定した場合において、隣接する映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示された再生映像間の再生時間差ΔＴが大きくなった場合や、シーンチェンジを検出した場合など、予め定められた音混ざりが予測される所定の場合には、基準映像表示部５７Ａ及びその近傍数個の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示された各再生映像の音声のみをスピーカ４１から出力するように自動的に出力音声が調整される。これにより「全音声出力モード」時においても良好な状態で音声を出力し得るようになされている。
However, when the “all audio output mode” is set as the audio output mode, the reproduction time difference ΔT between the reproduced images displayed on the adjacent image display units 57 (57F to 57A to 57V) becomes large, or the scene When a predetermined sound mixture is predicted, such as when a change is detected, the reference
（１−２−１−２）編集画面５０における再生映像の表示に関するＣＰＵ３０の処理
ここでＣＰＵ３０は、上述のような再生映像の表示や再生音声の出力に関する処理を、ＲＯＭ３１（図１）に格納された制御プログラムに基づき、図９に示す再生処理手順ＲＴ１に従って実行する。
(1-2-1-2) Processing of
すなわちＣＰＵ３０は、編集画面５０のクリップ一覧部５１から１つのクリップが帯状表示部５５にドラッグアンドドロップされた後に再生ボタン５６がクリック（帯状表示部５５に複数の映像表示部群５８が表示されている場合には、１つの映像表示部群５８が選択されて再生ボタン５６がクリック）されると、この再生処理手順ＲＴ１をステップＳＰ０において開始し、続くステップＳＰ１において、その映像表示部群５８に対応するクリップのクリップＩＤを確認する。
In other words, the
続いてＣＰＵ３０は、ステップＳＰ２に進んで、そのとき設定されている再生映像の再生速度ｖ（又は−ｖ）及び再生時間差ΔＴの各初期値と、音声出力モードの設定とをそれぞれ確認し、この後ステップＳＰ３に進んで、マウス３８、キーボード３９により決められた再生映像の再生速度ｖ（又は−ｖ）及び再生時間差ΔＴ並びに表示形態を確認する。
Subsequently, the
このときステップＳＰ４においてＣＰＵ３０は、停止操作あるいはストリームが終了しているか否かを判定し、肯定結果が得られると次のステップＳＰ１０へ移って表示の更新処理を中止し、否定結果が得られると次のステップＳＰ５へ移る。
At this time, in step SP4, the
ステップＳＰ５においてＣＰＵ３０は、その映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示すべき再生映像の表示位置及びその大きさと、これら再生映像に付随する各再生音声の出力音量とをそれぞれ計算する。
In step SP5, the
そしてＣＰＵ３０は、この後ステップＳＰ６に進んで、ステップＳＰ１で確認した対応するクリップのクリップＩＤに基づいて記憶装置２２を制御することにより、そのクリップの映像音声信号Ｓ４をステップＳＰ２で確認したそのとき設定されている再生速度で読み出し、必要に応じて圧縮された映像音声信号Ｓ４を復号し、映像信号に関してはステップＳＰ５において計算した位置及び大きさで表示させるための映像信号Ｓ２を生成する。さらに、この映像信号Ｓ２に対応した再生映像に付随する再生音声の音声信号Ｓ３を、ステップＳＰ５においてその再生映像について算出した信号レベルで生成させ、その生成した映像信号Ｓ２及び音声信号Ｓ３をＲＡＭ３２や信号処理部３４内のメモリに一時的に蓄積する。
Then, the
ステップＳＰ７においてＣＰＵ３０は、全ての映像表示部５７（５７Ｖ〜５７Ａ〜５７Ｆ）に表示再生するのに必要な画像及び音声が準備できたかを判断し、否定結果が得られた場合にはステップＳＰ６へ戻り、肯定結果が得られた場合にはステップＳＰ８へ移る。
In step SP7, the
ステップＳＰ８においてＣＰＵ３０は、画面表示周期時間の経過を監視し、経過した場合にはステップＳＰ９へ移って映像表示部群５８を表示し、その再生映像に付随する再生音声を対応する音量でスピーカ４１から出力すると同時にステップＳＰ３へ戻り、次の再生映像音声の準備を行う。
In step SP8, the
なおＣＰＵ３０は、ステップＳＰ６において、以前に再生したＲＡＭ３２や信号処理部３４内のメモリに残っている画像データのうち再利用できるものがあれば使い、足りないもののみを生成し、当該生成した画像データをＲＡＭ３２や信号処理部３４内のメモリに蓄積されている古いデータから順に上書きしていく。
In step SP6, the
（１−２−２）編集画面５０の帯状表示部５５における各種操作方法
次に、編集画面５０の帯状表示部５５における各種操作方法について説明する。
(1-2-2) Various Operation Methods in the
（１−２−２−１）基本操作
帯状表示部５５では、図１０に示すように、映像表示部群５８内の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示された再生映像のうちのそのとき所望のシーンを表示している映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）をクリック（この場合、例えば最初に映像表示部５７Ｄをクリック）することによって、その映像表示部５７Ｄが編集操作に伴う編集位置に対応した再生映像であることを所定色に着色させるようにして強調表示させることができる。
(1-2-2-1) Basic Operation As shown in FIG. 10, in the band-
そしてこの映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）の強調表示は、映像表示部群５８におけるそのシーンの流れ（映像の時系列の流れ）に従って、図１０及び図１１に示すように、再生時間差ΔＴをもって映像表示部群５８の各映像表示部（５７Ｆ〜５７Ａ〜５７Ｖ）のうちの左側（リバース再生のときには右側）に隣接する映像表示部（５７Ｆ〜５７Ａ〜５７Ｖ）に順次移動する。これによりオペレータは、この映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）の強調表示の流れに基づいて、かかるシーンが現在どの映像表示部（５７Ｆ〜５７Ａ〜５７Ｖ）に表示されているかを認識することができる。
Then, the highlighted display of the video display unit 57 (57F to 57A to 57V) is performed according to the scene flow (the time-series flow of video) in the video
すなわち映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に対する強調表示は、ユーザが最初に着目した編集操作に伴う編集位置に対応するシーン（映像表示部５７Ｄ）であり、それが移動したときであっても終始かかるシーンを強調表示によって提示し続けることになるため、図１１の長い太矢印に示すように映像表示部（５７Ｆ〜５７Ａ〜５７Ｖ）に対して流れるような映像表示が行われるなかで、ユーザに対して最初の着目シーンを強調表示によって瞬時かつ直感的に認識させ得るようになされている。
That is, the highlighted display on the video display unit 57 (57F to 57A to 57V) is a scene (
なお、図１１の短い太矢印に示すように、例えばユーザが最初に着目した編集操作に伴う編集位置に対応するシーンが映像表示部５７Ｂであったときは、そのユーザが着目したシーンが強調表示されるので、ユーザに対してはそこから流れが始まるかのように印象付けさせることができるようになされている。
As indicated by a short thick arrow in FIG. 11, for example, when the scene corresponding to the editing position associated with the editing operation first noticed by the user is the
また帯状表示部５５では、図１２（Ａ）に示すように、例えばキーボード３９の方向キー７０のうちの上方向に対応した「上（↑）」キー７０Ｕを押圧操作し（図１２（Ａ−１））、又はマウス３８の右ボタンを押圧した状態で、カーソル７１によって映像表示部群５８に表示された再生映像の一部を、その映像表示部群５８に沿って左方向に引くように当該カーソル７１を移動させる表示操作入力（図１２（Ａ−２））に応じて、対応するクリップの映像の表示速度を上げることができる。
12A, for example, as shown in FIG. 12A, the “up (↑)” key 70U corresponding to the upward direction among the
この場合ＣＰＵ３０は、マウス３８による表示操作入力に対応した表示状態変更情報を第１のインタフェース部３６Ａを介して取得し、当該表示状態変更情報の内容に応じてクリップの映像の表示速度を上げるようになされている。
In this case, the
なお、ここで言う『クリップの映像の表示速度を上げる』とは、その映像表示部群５８内の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示される再生映像の再生速度ｖが増加し、かつこれと連携して隣接する映像表示部５７間における再生映像の再生時間差ΔＴが増加することを意味する。
Here, “increasing the display speed of the video of the clip” means that the playback speed v of the playback video displayed on each video display unit 57 (57F to 57A to 57V) in the video
そしてこの「再生映像の表示速度」の変化の大きさは、そのときキーボード３９の「上（↑）」キー７０Ｕを押圧操作し又はマウス操作により映像表示部群５８の一部を引いたときの時間が長いほど大きくなる。つまりこの時間が長いほど、かかる再生速度ｖ及び再生時間差ΔＴが共により多く増加して、そのクリップの映像全体としての見た目（再生映像の各シーンの流れ）の表示速度が上がることとなる。
The magnitude of the change in the “reproduction video display speed” is determined when the “up (↑)” key 70U of the
すなわち帯状表示部５５では、キーボード３９の「上（↑）」キー７０Ｕを押圧操作し、マウス操作によりカーソル７１を介して映像表示部群５８の一部を左方向へ引いたときの時間が長いほど、映像表示部群５８内の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示される再生映像の表示加速度ＧＳ１を増加させ得るようになされている。因みに帯状表示部５５では、時間を用いるのではなく、例えばキーボード３９の「上（↑）」キー７０Ｕに対する押下回数が多いほど再生映像の表示化速度ＧＳ１を増加させるようにしても良い。
That is, in the belt-
これに対して、帯状表示部５５では、図１２（Ｂ）に示すように、例えばキーボード３９の方向キー７０のうちの下方向に対応した「下（↓）」キー７０Ｄを押圧操作し（図１０（Ｂ−１））、又はマウス３８の右ボタンを押圧した状態で、カーソル７１によって映像表示部群５８に表示された再生映像の一部をその映像表示部群５８に沿って右方向に引くように当該カーソル７１を移動させる表示操作入力（図１２（Ｂ−２））に応じて、対応するクリップの映像の表示速度を下げることができる。
On the other hand, as shown in FIG. 12B, the band-shaped
この場合ＣＰＵ３０は、マウス３８による表示操作入力に対応した表示状態変更情報を第１のインタフェース部３６Ａを介して取得し、当該表示状態変更情報の内容に応じてクリップの映像の表示速度を下げるようになされている。
In this case, the
なお、ここで言う『クリップの映像の表示速度を下げる』とは、その映像表示部群５８内の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示される再生映像の再生速度ｖが減少し、かつこれと連携して隣接する映像表示部５７間における再生映像の再生時間差ΔＴが減少することを意味する。
Here, “reducing the clip video display speed” means that the playback speed v of the playback video displayed on each video display unit 57 (57F to 57A to 57V) in the video
そしてこの「再生映像の表示速度」の変化の大きさは、そのときキーボード３９の「下（↓）」キー７０Ｄを押圧操作した時間又はマウス操作により映像表示部群５８の一部を引いたときの時間が長いほど大きくなる。つまりこの時間が長いほど、かかる再生速度ｖ及び再生時間差ΔＴが共に減少して、そのクリップの映像全体としての見た目の表示速度が下がることとなる。
The magnitude of the change in the “reproduction video display speed” is determined when the “down (↓)” key 70D of the
すなわち帯状表示部５５では、キーボード３９の「下（↓）」キー７０Ｄを押圧操作し、マウス操作によりカーソル７１を介して映像表示部群５８の一部を右方向へ引いたときの時間が長いほど、映像表示部群５８内の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示される再生映像の表示加速度ＧＳ２を減少させ得るようになされている。因みに帯状表示部５５では、時間を用いるのではなく、例えばキーボード３９の「下（↓）」キー７０Ｄに対する押下回数が多いほど再生映像の表示化速度ＧＳ１を減少させるようにしても良い。
That is, in the belt-
この場合において、かかる再生速度ｖや再生時間差ΔＴが「０」となった後は、その再生速度ｖ又は再生時間差ΔＴはさらに減少（すなわち、負方向に増加）する。従ってこの場合には、今まで映像表示部群５８において左方向に流れていた再生映像の各シーンの流れが徐々に遅くなってやがて止まり、その後右方向へ流れ始めてリバース再生に変わり、やがてその速度が次第に上がってゆくように見えるようになる。
In this case, after the playback speed v or playback time difference ΔT becomes “0”, the playback speed v or playback time difference ΔT further decreases (that is, increases in the negative direction). Therefore, in this case, the flow of each scene of the playback video that has flowed in the left direction in the video
さらに帯状表示部５５では、マウス５０の左ボタンを押圧した状態で、当該マウス操作に応動して編集画面５０上を自由に移動するように表示されるカーソル７１により映像表示部群５８の一部を例えば１秒以上同じ位置で押さえるように操作することによって、対応するクリップの映像を停止させることができる。なお、ここで言う『クリップの映像を停止させる』とは、その映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に、再生時間差ΔＴを保った状態で静止画像をそれぞれ表示させることをいう。
Further, in the belt-
（１−２−２−２）拡張操作
（１−２−２−２−１）再生時間差ΔＴ及び再生速度ｖの変更操作
一方、帯状表示部５５では、上述のような基本操作のほか、キーボード３９の「シフト」キーを押圧したまま、上述の『クリップの映像の表示速度を上げる』操作、つまりキーボード３９の方向キー７０の「上（↑）」キー７０Ｕを押圧操作し、又はマウス３８の右ボタンを押圧した状態で、カーソル７１によって映像表示部群５８に表示された再生映像の一部を、その映像表示部群５８に沿って左方向へ引くように当該カーソル７１を移動させることによって、その映像表示部群５８の各映像表示部５７に表示された再生映像の再生速度ｖを固定としながら、隣接する映像表示部５７にそれぞれ表示される再生映像の再生時間差ΔＴを増加させることができる。
(1-2-2-2) Extended operation (1-2-2-2-1) Operation for changing reproduction time difference ΔT and reproduction speed v On the other hand, in the band-
この場合ＣＰＵ３０は、キーボード３９又はマウス３８による表示操作入力に対応した表示状態変更情報を第１のインタフェース部３６Ａを介して取得し、当該表示状態変更情報の内容に応じて再生映像の再生速度ｖを固定としながら、再生映像の再生時間差ΔＴを増加させるようになされている。
In this case, the
このとき隣接する映像表示部５７にそれぞれ表示される再生映像の連続性は低くなるが、映像表示部群５８全体として、時間的に広い範囲の再生映像を表示させることができる。
At this time, the continuity of the reproduced video displayed on the adjacent
これに対して編集画面５０では、例えばキーボード３９の「シフト」キーを押圧したまま、上述の『クリップの映像の表示速度を下げる』操作、つまりキーボード３９の方向キー７０の「下（↓）」キー７０Ｄを押圧操作し、又はマウス３８の右ボタンを押圧した状態で、カーソル７１によって映像表示部群５８に表示された再生映像の一部をその映像表示部群５８に沿って右方向へ引くように当該カーソル７１を移動させることによって、その映像表示部群５８の各映像表示部５７に表示された再生映像の再生速度ｖを固定としながら、隣接する映像表示部５７にそれぞれ表示される再生映像の再生時間差ΔＴを減少させることができる。
On the other hand, on the
この場合ＣＰＵ３０は、キーボード３９又はマウス３８による表示操作入力に対応した表示状態変更情報を第１のインタフェース部３６Ａを介して取得し、当該表示状態変更情報の内容に応じて再生映像の再生速度ｖを固定としながら、再生映像の再生時間差ΔＴを減少させるようになされている。
In this case, the
このとき映像表示部群５８全体として、時間的に狭い範囲の再生映像が表示されることとなるが、その映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示される再生映像の連続性は高く、同じシーンが短い再生時間差ΔＴをもってその映像表示部群５８内を左方向へ流れるように各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に順次表示されるようになる。そして、この流れは、隣接する映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示される再生映像の再生時間差ΔＴを減少させるほど速くなる。
At this time, a playback video in a narrow range in time is displayed as the entire video
また帯状表示部５５では、例えばキーボード３９の「シフト」キー及び「ＡＬＴ」キーの双方を押圧したまま、かかる『クリップの映像の表示速度を上げる』操作を行うことによって、隣接する映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示される再生映像の再生時間差ΔＴを固定としながら、その映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示された再生映像の再生速度ｖを増加させることができる。
Further, in the belt-
この場合もＣＰＵ３０は、キーボード３９又はマウス３８による表示操作入力に対応した表示状態変更情報を第１のインタフェース部３６Ａを介して取得し、当該表示状態変更情報の内容に応じて再生映像の再生時間差ΔＴを固定としながら、再生映像の再生速度ｖを増加させるようになされている。
Also in this case, the
この結果、映像表示部群５８にクリップ全体の映像から見て時間的に同じ範囲の再生映像を表示させたまま、その映像表示部群５８における再生映像の各シーンの流れを速くすることができる。なおこの場合には、隣接する映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示される再生映像の連続性が高くなる。
As a result, it is possible to speed up the flow of each scene of the playback video in the video
これに対して編集画面５０では、例えばキーボード３９の「シフト」キー及び「ＡＬＴ」キーの双方を押圧したまま、かかる『クリップの映像の表示速度を下げる』操作を行うことによって、隣接する映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示される再生映像の再生時間差ΔＴを固定としながら、その映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示された再生映像の再生速度ｖを減少させることができる。
On the other hand, on the
この場合もＣＰＵ３０は、キーボード３９又はマウス３８による表示操作入力に対応した表示状態変更情報を第１のインタフェース部３６Ａを介して取得し、当該表示状態変更情報の内容に応じて再生映像の再生時間差ΔＴを固定としながら、再生映像の再生速度ｖを減少させるようになされている。
Also in this case, the
この結果、映像表示部群５８にクリップ全体の映像から見て時間的に同じ範囲の再生映像を表示させたまま、その映像表示部群５８における再生映像の各シーンの流れを遅くすることができる。なおこの場合には、隣接する映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示される再生映像の連続性が低くなる。
As a result, it is possible to slow down the flow of each scene of the reproduced video in the video
（１−２−２−２−２）再生映像の瞬間送り又は戻し操作
一方、帯状表示部５５では、図１３（Ａ）に示すように、キーボード３９の方向キー７０の「左（←）」キー７０Ｌを押圧操作し（図１３（Ａ−１））、又はマウス３８の左ボタンを押圧した状態で１秒以内にカーソル７１によって映像表示部群５８に表示された再生映像の一部（映像表示部５７Ｃ）を表示選択操作（つかみ）し、その映像表示部群５８に沿って左方向へ引くように当該カーソル７１を移動させる（図１３（Ａ−２））ときの映像表示部群移動操作に応じて、その映像表示部群５８に表示される再生映像の再生速度ｖと、隣接する映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示される再生映像の再生時間差ΔＴとの双方を共に固定とした状態で、その映像表示部群５８の各映像表示部５７の表示位置を、図１４に示すように、当該映像表示部群５８に沿って、引かれた方向（画面右側から画面左側へ向かう方向）と同一方向へカーソル７１と一体に移動させることができる。
(1-2-2-2-2) Instantaneous Forward or Return Operation of Reproduced Video On the other hand, in the belt-
この場合ＣＰＵ３０は、キーボード３９又はマウス３８による映像表示部群移動操作に対応した表示状態変更情報を第１のインタフェース部３６Ａを介して取得し、当該表示状態変更情報の内容に応じて再生映像の再生速度ｖ及び再生時間差ΔＴの双方を固定としながら、各映像表示部５７の表示位置を当該映像表示部群５８に沿って画面右側から画面左側へ向かってカーソル７１と一体に移動させるようになされている。
In this case, the
そのとき引っ張られた再生映像を表示していた映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｗ）が映像表示部群５８における引っ張り終えた位置にまで移動して表示される。またこれに伴って、図１４及び図１５に示すように、それまで表示されていた映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）の中から、当該操作前に基準映像表示部５７Ａに表示された再生映像を基準とした場合の時間的に過去の再生映像を表示していた映像表示部５７Ｖ，５７Ｗ，……が消え、これと同じ数のそれまで表示されていなかった図５において破線で示す時間的に未来の再生映像を表示する映像表示部５７Ｇ，５７Ｈ，……がその映像表示部群５８内に新たに表示される。
The video display unit 57 (57F to 57A to 57W) displaying the pulled playback video at that time is moved to the position where the video
なおＣＰＵ３０は、映像表示部５７Ｃに対する表示選択操作（図１４）に応じて当該映像表示部５７Ｃを強調表示（破線で囲われた部分）すると共に、その映像表示部５７Ｃからそれ以降の映像表示部５７Ｄ、５７Ｅ、……を表示順に順次強調表示することにより、映像表示部５７Ｃの移動開始点以降の流れをユーザに対して直感的に認識させ得るようになされている。
Note that the
なお、このときＣＰＵ３０は、表示選択操作された瞬間の映像表示部５７Ｃに対する表示映像データ又は各映像表示部５７に対する表示映像データの全てをその状態で一時的に停止（保持）し、その状態をユーザに目視確認させ得るようになされている。
At this time, the
因みにＣＰＵ３０は、映像表示部５７Ｃに対する表示選択操作を解除する表示選択解除操作が入力された場合、当該映像表示部５７Ｃに対する表示映像データ又は各映像表示部５７に対する表示映像データの全てを停止状態から解除し、複数の映像表示部５７の間において動画像の状態で時間差を設けながら、当該複数の映像表示部５７が表示順に連携した映像表示部群５８として再度連動表示させるようになされている。
Incidentally, when a display selection cancellation operation for canceling the display selection operation for the
この場合において、かかる映像表示部群５８の移動操作後における各映像表示部５７（……，５７Ｆ〜５７Ａ〜５７Ｖ，……）は、それぞれの表示情報（表示サイズ及び表示位置を含む表示情報）に応じて、かかる映像表示部群５８の移動操作前にその位置に表示されていた映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）と同じ大きさで表示されるため、それまでその映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示されていた再生映像があたかも瞬時に未来側へ送られたように見えることとなる。
In this case, each video display unit 57 (..., 57F to 57A to 57V,...) After the moving operation of the video
またこの場合において、各映像表示部５７（……，５７Ｆ〜５７Ａ〜５７Ｖ，……）に表示された再生映像に付随する各再生音声は、音声出力モードとしてメイン音声出力モードが設定されているときには、そのとき手前中央部に位置する映像表示部５７（図１３（Ａ−２）では５７Ｃとなる）に表示された再生映像に付随する再生音声のみが出力され、音声出力モードとして全音声出力モードが設定されているときには、手前中央部に位置する映像表示部５７（５７Ｃ）から離れた映像表示部５７（５７Ｄ〜５７Ｆ，……、５７Ｂ，５７Ａ，５７Ｚ〜５７Ｗ，……）に表示された再生映像に付随する再生音声ほど小さい音量となるように、各再生音声の出力音量が調整される。 In this case, the main audio output mode is set as the audio output mode for each reproduced audio accompanying the reproduced video displayed on each video display unit 57 (..., 57F-57A-57V,...). In some cases, only the playback audio associated with the playback video displayed on the video display unit 57 (57C in FIG. 13A-2) located at the front center is output, and all audio output is performed as the audio output mode. When the mode is set, it is displayed on the video display unit 57 (57D to 57F,..., 57B, 57A, 57Z to 57W,...) That is distant from the video display unit 57 (57C) located at the front center. The output volume of each playback sound is adjusted so that the playback sound accompanying the playback video has a lower volume.
これに対して帯状表示部５５では、図１３（Ｂ）に示すように、キーボード３９の方向キー７０の「右（→）」キー７０Ｒを押圧操作し（図１３（Ｂ−１））、又はマウス３８の左ボタンを押圧した状態で１秒以内にカーソル７１によって映像表示部群５８の一部（映像表示部５７Ｙ）を選択（つかみ）し、を画面左側から画面右側に引っ張るように当該カーソル７１を移動させる（図１３（Ｂ−２））ときの映像表示部群移動操作に応じて、その映像表示部群５８に表示される再生映像の再生速度ｖと、隣接する映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示される再生映像の再生時間差ΔＴとの双方を共に固定とした状態で、その映像表示部群５８の各映像表示部５７の表示位置を、図１６に示すように、当該映像表示部群５８に沿って、引かれた方向（画面左側から画面右側に向かう方向）と同一方向へカーソル７１と一体に移動させることができる。
On the other hand, as shown in FIG. 13B, the band-shaped
この場合ＣＰＵ３０は、キーボード３９又はマウス３８による映像表示部群移動操作に対応した表示状態変更情報を第１のインタフェース部３６Ａを介して取得し、当該表示状態変更情報の内容に応じて再生映像の再生速度ｖ及び再生時間差ΔＴの双方を固定としながら、各映像表示部５７の表示位置を当該映像表示部群５８に沿って画面左側から画面右側へ向かってカーソル７１と一体に移動させるようになされている。
In this case, the
そのとき引っ張られた再生映像を表示していた映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）が映像表示部群５８における引っ張り終えた位置にまで移動して表示される。またこれに伴って、図１６及び図１７に示すように、それまで表示されていた映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）の中から、当該操作前に基準映像表示部５７Ａに表示された再生映像を基準とした場合の時間的に未来の再生映像を表示していた映像表示部５７Ｆ，５７Ｅ，……が消え、これと同じ数のそれまで表示されていなかった図５において破線で示す時間的に過去の再生映像を表示する映像表示部５７Ｕ，５７Ｔ，……がその映像表示部群５８内に新たに表示される。
The video display unit 57 (57F to 57A to 57V) displaying the pulled playback video at that time is moved to the position where the video
これにより帯状表示部５５では、フォワード方向へ流れるように映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）を再生させた状態で、映像表示部群移動操作に応じて各映像表示部５７の表示位置をバックワード側へ瞬時に移動させることができるので、ＭＰＥＧ方式のロングＧＯＰフォーマットでリバース再生を行った場合等のような表示映像の応答性が悪くなるようなことがなく、過去のシーンを直ちに再表示させ得るようになされている。
As a result, the display position of each
なおＣＰＵ３０は、映像表示部５７Ｙに対する表示選択操作（図１６）に応じて当該映像表示部５７Ｙを強調表示（破線で囲われた部分）すると共に、その映像表示部５７Ｙからそれ以降の映像表示部５７Ｚ、５７Ａ、……を表示順に順次強調表示することにより、映像表示部５７Ｙの移動開始点以降の流れをユーザに対して直感的に認識させ得るようになされている。
The
なお、このときＣＰＵ３０は、表示選択操作された瞬間の映像表示部５７Ｙに対する表示映像データ又は各映像表示部５７に対する表示映像データの全てをその状態で一時的に停止（保持）し、その状態をユーザに目視確認させ得るようになされている。
At this time, the
因みにＣＰＵ３０は、映像表示部５７Ｙに対する表示選択操作を解除する表示選択解除操作が入力された場合、当該映像表示部５７Ｙに対する表示映像データ又は各映像表示部５７に対する表示映像データの全てを停止状態から解除し、複数の映像表示部５７の間において動画像の状態で時間差を設けながら、当該複数の映像表示部５７が表示順に連携した映像表示部群５８として再度連動表示させるようになされている。
Incidentally, when the display selection canceling operation for canceling the display selecting operation for the
この場合においても、かかる映像表示部群５８の移動操作後における各映像表示部５７（……，５７Ｆ〜５７Ａ〜５７Ｖ，……）は、それぞれの表示情報（表示サイズ及び表示位置を含む表示情報）に応じて、かかる映像表示部群５８の移動操作前にその位置に表示されていた映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）と同じ大きさで表示されるため、それまでその映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示されていた再生映像があたかも瞬時に過去側へ戻されたように見えることとなる。
Also in this case, each video display unit 57 (..., 57F to 57A to 57V,...) After the moving operation of the video
またこの場合において、各映像表示部５７（……，５７Ｆ〜５７Ａ〜５７Ｖ，……）に表示された再生映像に付随する各再生音声は、音声出力モードとしてメイン音声出力モードが設定されているときには、そのとき手前中央部に位置する映像表示部５７（図１３（Ｂ−２）では５７Ｙとなる）に表示された再生映像に付随する再生音声のみが出力され、音声出力モードとして全音声出力モードが設定されているときには、手前中央部に位置する映像表示部５７（５７Ｙ）から離れた映像表示部５７（５７Ｘ，５７Ｗ，……、５７Ｚ，５７Ａ〜５７Ｆ，……）に表示された再生映像に付随する再生音声ほど小さい音量となるように、各再生音声の出力音量が調整される。 In this case, the main audio output mode is set as the audio output mode for each reproduced audio accompanying the reproduced video displayed on each video display unit 57 (..., 57F-57A-57V,...). In some cases, only the playback audio associated with the playback video displayed on the video display unit 57 (57Y in FIG. 13B-2) positioned at the front center is output, and all audio output is performed as the audio output mode. When the mode is set, the playback displayed on the video display unit 57 (57X, 57W,..., 57Z, 57A to 57F,...) Distant from the video display unit 57 (57Y) located at the front center. The output volume of each playback sound is adjusted so that the playback sound accompanying the video has a lower volume.
（１−２−２−２−３）映像表示部群５８の表示形態変更操作
他方、帯状表示部５５では、映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示される再生映像を停止させた状態で、例えばキーボード３９の「コントロール」キーを押圧操作しながら、上述の『クリップの映像の表示速度を上げる』操作を行うことによって、図１８（Ａ）に示すように、その映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）の表示位置を全体として当該映像表示部群５８に沿って画面右側から画面左側へ向かう方向に移動させることができ、これにより映像表示部群５８の表示形態を変更することができる。
(1-2-2-2-3) Display Form Change Operation of Video
この場合において、かかる映像表示部群５８の移動操作後における各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）は、それぞれその表示位置に応じて、かかる映像表示部群５８の移動操作前にその位置に表示されていた映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）と同じ大きさで表示されるため、当該操作後の映像表示部群５８では、当該移動操作前の状態と比べて、手前中央部に表示される映像表示部５７（５７Ｂ〜５７Ｆ）内の再生映像を基準として、時間的に過去の再生映像が多く、時間的に未来の再生映像が少なくなるように、その映像表示部群５８が表示されることとなる。
In this case, each of the video display units 57 (57F to 57A to 57V) after the moving operation of the video
またこの場合においても、その後その状態で再生が開始された場合、各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示された再生映像に付随する各再生音声は、音声出力モードとしてメイン音声出力モードが設定されているときには、そのとき手前中央部に位置する映像表示部５７（５７Ｃ）に表示された再生映像に付随する再生音声のみが出力され、音声出力モードとして全音声出力モードが設定されているときには、手前中央部に位置する映像表示部５７（５７Ｃ）から離れた映像表示部５７（５７Ｄ〜５７Ｆ、５７Ｂ，５７Ａ，５７Ｚ〜５７Ｖ）に表示された再生映像に付随する再生音声ほど小さい音量となるように、各再生音声の出力音量が調整される。 Also in this case, when reproduction is started in that state, each reproduction audio accompanying the reproduction video displayed on each video display unit 57 (57F to 57A to 57V) is output as a main audio as an audio output mode. When the mode is set, only the playback audio accompanying the playback video displayed on the video display unit 57 (57C) positioned at the front center is output, and the all audio output mode is set as the audio output mode. The playback sound associated with the playback video displayed on the video display unit 57 (57D to 57F, 57B, 57A, 57Z to 57V) distant from the video display unit 57 (57C) located at the front center is smaller. The output volume of each playback sound is adjusted so that the volume is the same.
これに対して帯状表示部５５では、映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示される再生映像を停止させた状態で、例えばキーボード３９の「コントロール」キーを押圧操作しながら、上述の『クリップの映像の表示速度を下げる』操作を行うことによって、図１８（Ｂ）に示すように、その映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）の表示位置を全体として当該映像表示部群５８に沿って画面左側から画面右側へ向かう方向に移動させることができ、これにより映像表示部群５８の表示形態を変更することができる。
On the other hand, in the belt-
この場合においても、かかる映像表示部群５８の移動操作後における各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）は、それぞれその表示位置に応じて、かかる映像表示部群５８の移動操作前にその位置に表示されていた映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）と同じ大きさで表示されるため、当該操作後の映像表示部群５８では、当該操作前の状態と比べて、手前中央部に表示される映像表示部５７（５７Ｚ〜５７Ｖ）内の再生映像を基準として、時間的に未来の再生映像が多く、時間的に過去の再生映像が少なくなるように、その映像表示部群５８が表示されることとなる。
Also in this case, each video display unit 57 (57F to 57A to 57V) after the moving operation of the video
またこの場合においても、その後その状態で再生が開始された場合、各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示された再生映像に付随する各再生音声は、音声出力モードとしてメイン音声出力モードが設定されているときには、そのとき手前中央部に位置する映像表示部５７（５７Ｙ）に表示された再生映像に付随する再生音声のみが出力され、音声出力モードとして全音声出力モードが設定されているときには、手前中央部に位置する映像表示部５７（５７Ｙ）から離れた映像表示部５７（５７Ｚ，５７Ａ〜５７Ｆ、５７Ｘ〜５７Ｖ）に表示された再生映像に付随する再生音声ほど小さい音量となるように、各再生音声の出力音量が調整される。 Also in this case, when reproduction is started in that state, each reproduction audio accompanying the reproduction video displayed on each video display unit 57 (57F to 57A to 57V) is output as a main audio as an audio output mode. When the mode is set, only the playback audio associated with the playback video displayed on the video display unit 57 (57Y) located at the front center at that time is output, and the full audio output mode is set as the audio output mode. The playback sound associated with the playback video displayed on the video display unit 57 (57Z, 57A to 57F, 57X to 57V) distant from the video display unit 57 (57Y) located in the front center portion has a lower volume. Thus, the output volume of each playback sound is adjusted.
（１−２−２−２−４）映像表示部群５８の拡大縮小操作
他方、帯状表示部５５では、例えば１つの映像表示部群５８をマウス操作により選択し、その後マウス３８の左ボタンをクリックしたまま、キーボード３９の方向キー７０のうちの「下（↓）」キー７０Ｄを押圧操作することによって、その映像表示部群５８の表示を小さくさせることができ、また１つの映像表示部群５８をマウス操作により選択し、その後マウス３８の左ボタンをクリックしたまま、キーボード３９の方向キー７０のうちの「上（↑）」キー７０Ｕを押圧操作することによって、その映像表示部群５８の表示を大きくさせることができる。
(1-2-2-2-4) Enlarging / Reducing Operation of Video
これにより帯状表示部５５では、例えばある第１のクリップの編集作業中に他の第２のクリップの映像音声部分を切り出して第１のクリップに挿入するインサート編集を行う場合に、編集途中の第１のクリップの映像表示部群５８を小さく表示させることにより帯状表示部５５内に大きなスペースを作ってから、新しい第２のクリップの映像表示部群５８をそのスペースに大きく表示させて所望の映像音声部分の切出し操作を行い、その後第１のクリップの映像表示部群５８の表示サイズを戻して、当該切り出した第２のクリップの映像音声部分を第１のクリップの所望位置に挿入するといった操作を行うことができる。
As a result, in the band-
（１−２−２−３）各種基本又は拡張操作入力に対するＣＰＵ３０の処理
ここでＣＰＵ３０は、上述のような各種基本又は拡張操作入力に対する処理を、ＲＯＭ３１（図１）に格納された制御プログラムに基づき、図９に示す表示変更処理手順ＲＴ１に従って実行する。
(1-2-2-3) Processing of
例えば、図９のステップＳＰ３において認識した操作が上述の『クリップの映像の表示速度を上げる』操作であった場合、ＣＰＵ３０は、記憶装置２２を制御して、対応する映像表示部群５８の各映像表示部５７に表示させる再生映像の再生速度ｖに応じて、映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示する各映像を選択し、生成する。このとき各映像表示部間の再生フレームの間隔を広げると共に、各映像表示部５７内においても表示再生速度を上げることにより、映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示される再生映像の再生速度ｖが増加し、かつ隣接する映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）間における再生映像の再生時間差ΔＴが増加する。
For example, when the operation recognized in step SP3 in FIG. 9 is the above-described “increase display speed of clip video” operation, the
またＣＰＵ３０は、ステップＳＰ３において認識した操作が上述の『クリップの映像の表示速度を下げる』操作であった場合には、記憶装置２２を制御して、対応する映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示させる再生映像の再生速度ｖに応じて、映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示する各映像を選択し、生成する。このとき各映像表示部間の再生フレームの間隔を小さくすると共に、各映像表示部５７内においても表示再生速度を下げることにより、映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示される再生映像の再生速度ｖが減少し、かつ隣接する映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）間における再生映像の再生時間差ΔＴが減少する。
If the operation recognized in step SP3 is the above-described “decrease clip image display speed” operation, the
さらにＣＰＵ３０は、ステップＳＰ３において認識した操作が『クリップの映像を停止させる』操作であった場合には、記憶装置２２を制御して、対応する映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示させる再生映像の再生を停止させる一方、信号処理部３４を制御して、当該映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に再生停止直前の最後のフレームの画像をそれぞれ表示させ続ける。この結果、各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に、もとの再生時間差ΔＴを保った状態でそれぞれ対応する静止画像が表示されることとなる。
Further, when the operation recognized in step SP3 is an operation of “stopping the video of the clip”, the
さらにＣＰＵ３０は、ステップＳＰ３において認識した操作が『キーボード３９の「シフト」キーを押圧したまま、「クリップの映像を停止させる」』操作等の各種拡張操作であった場合には、帯状表示部５５の対応する映像表示部群５８に表示される各再生映像や、その映像表示部群５８自体の表示映像を、その拡張操作に応じた状態に変化させるように記憶装置２２や信号処理部３４を制御する。
Further, when the operation recognized in step SP3 is various extended operations such as “stop the video of the clip” while pressing the “shift” key of the
そしてＣＰＵ３０は、ステップＳＰ５、ステップＳＰ６において、帯状表示部５５に表示された映像表示部群５８内の各再生映像や映像表示部群５８自体の表示映像を操作入力に応じた状態に変更する。
Then, in step SP5 and step SP6, the
（１−２−３）帯状表示部５５における編集内容設定のための各種操作
（１−２−３−１）帯状表示部５５における編集内容設定のための各種操作
次に、帯状表示部５５における編集内容設定のための具体的な個々の操作の操作手順について説明する。
(1-2-3) Various operations for setting editing contents in the band-shaped display unit 55 (1-2-3-1) Various operations for setting editing contents in the band-shaped
まず同一クリップ内でのカット編集について説明する。帯状表示部５５にドラッグアンドドロップしたクリップについて、そのクリップ内でのカット編集を行う場合には、図１９（Ａ）に示すように、まずそのクリップの映像の再生を開始させ、必要に応じてその映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示された各再生映像の再生速度ｖや、隣接する映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示される再生映像の再生時間差ΔＴを上述のようにして変更しながら、切り取るべき映像音声部分の最初のフレームＦＲＩＮを探すようにする。
First, cut editing within the same clip will be described. When a clip dragged and dropped on the belt-
そしてそのフレームＦＲＩＮが編集位置として決まったら、各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示される再生映像を全て停止させ、その状態でそのフレームＦＲＩＮの画像が表示されている映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）をクリックする。この編集操作入力の結果、そのフレームＦＲＩＮが切り取るべき映像音声部分のイン点として設定され、その映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）の枠部分が所定色（例えば黄色）に着色される。 When the frame FR IN is determined as the editing position, all the playback videos displayed on the video display units 57 (57F to 57A to 57V) are stopped, and the video in which the image of the frame FR IN is displayed in that state. The display part 57 (57F-57A-57V) is clicked. As a result of this editing operation input, the frame FR IN is set as the In point of the video / audio part to be cut, and the frame part of the video display unit 57 (57F to 57A to 57V) is colored in a predetermined color (for example, yellow). .
次に、これと同様にして、切り取ろうとする映像音声部分の最後のフレームの次のフレームＦＲＯＵＴを探し出し、そのフレームＦＲＯＵＴが編集位置として決まったら、各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示される再生映像を全て停止させ、その状態でそのフレームＦＲＯＵＴの画像が表示されている映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）をクリックするようにする。この編集操作入力の結果、そのフレームＦＲＯＵＴが切り取るべき映像音声部分のアウト点として設定され、その映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）のうち切り取られるフレームの枠部分が所定色（例えば白色）に表示される。 Next, in the same manner as described above, the next frame FR OUT of the last frame of the video / audio portion to be cut out is found, and when the frame FR OUT is determined as the editing position, each video display unit 57 (57F to 57A to 57V). ) Is stopped, and in this state, the video display unit 57 (57F to 57A to 57V) on which the image of the frame FR OUT is displayed is clicked. As a result of this editing operation input, the frame FR OUT is set as the out point of the video / audio portion to be cut out, and the frame portion of the frame to be cut out of the video display portion 57 (57F to 57A to 57V) is a predetermined color (for example, white) ) Is displayed.
そして、このようにしてそのクリップ内にイン点及びアウト点を編集位置として設定した後に、必要に応じて隣接する映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示される再生映像の再生時間差ΔＴを上述のようにして変更することにより、イン点及びアウト点の各フレームＦＲＩＮ、ＦＲＯＵＴの画像をそれぞれその映像表示部群５８に静止させた状態で表示させ、その後図１９（Ｂ）に示すように、イン点及びアウト点を繋ぎ合わせる操作、つまりかかるアウト点に設定されたフレームＦＲＯＵＴの画像を、イン点に設定されたフレームＦＲＩＮの画像上に重ねるようにドラッグアンドドロップする編集操作入力を行う。
Then, after setting the IN point and OUT point in the clip as editing positions in this way, the playback time difference ΔT of the playback video displayed on the adjacent video display unit 57 (57F to 57A to 57V) as necessary. As described above, the images of the frames FR IN and FR OUT at the IN point and the OUT point are displayed on the video
この結果、図１９（Ｃ）に示すように、そのクリップ全体の映像音声部分のうちのイン点に設定されたフレームＦＲＩＮからアウト点に設定されたからフレームＦＲＯＵＴの１つ前のフレームまでの映像音声部分を削除し、イン点に設定されたフレームＦＲＩＮの１つ前のフレームとアウト点に設定されたフレームＦＲＯＵＴとを繋ぎ合わせるべき旨の編集データが作成され、この編集データに基づく加工処理により得られる編集映像音声の映像が、そのクリップと同じ表示形態で帯状表示部５５に表示される。つまり、かかるように表示形態が変更されたカット編集後の編集映像音声の所定再生時間差ΔＴごとの再生映像を各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示した映像表示部群５８が帯状表示部５５に表示される。
As a result, as shown in FIG. 19 (C), from the frame FR IN set at the In point in the video / audio portion of the entire clip to the frame immediately before the frame FR OUT from the frame FR IN set at the Out point. The video / audio part is deleted, and edit data indicating that the frame immediately before the frame FR IN set at the IN point and the frame FR OUT set at the OUT point should be connected is created. Based on this edit data The edited video / audio video obtained by the processing is displayed on the belt-
なお、このような加工処理により切り出される映像音声部分を削除することなく、別クリップとして残しておきたいときには、まず帯状表示部５５のツールバー５９に表示された「設定」をクリックすることにより表示されるコンテキストメニューの中から「分離モード」を選択して設定し、その後図２０（Ａ）及び（Ｂ）に示すように、図１９（Ａ）及び（Ｂ）について上述したカット編集のときと同様にしてイン点及びアウト点の各フレームＦＲＩＮ、ＦＲＯＵＴをそれぞれ設定し、さらにその後アウト点に設定したフレームＦＲＯＵＴの画像をドラッグアンドドロップにより、イン点に設定したフレームＦＲＩＮ上に重ねる編集操作入力を行う。
When it is desired to leave the video / audio part cut out by such processing without deleting it as a separate clip, it is displayed by first clicking “Setting” displayed on the
この結果、図２０（Ｃ）に示すように、そのクリップ全体の映像音声部分のうちのイン点に設定されたフレームＦＲＩＮの１つ前のフレームと、アウト点に設定されたフレームＦＲＯＵＴとを繋ぎ合わせ、さらにイン点に設定されたフレームＦＲＩＮからアウト点に設定されたフレームＦＲＯＵＴの１つ前のフレームまでの映像音声部分を別クリップとすべき旨の編集データが作成される。 As a result, as shown in FIG. 20C, the frame immediately before the frame FR IN set at the In point and the frame FR OUT set at the Out point of the entire video / audio portion of the clip. Then, editing data is created to indicate that the video / audio portion from the frame FR IN set at the In point to the frame immediately before the frame FR OUT set at the Out point should be a separate clip.
このとき帯状表示部５５には、かかる編集データに基づく加工処理により得られるカット編集後の表示形態が変更された編集映像音声の映像と、別クリップとして生成されたイン点に設定されたフレームＦＲＩＮからアウト点に設定されたフレームＦＲＯＵＴの１つ前のフレームまでの映像音声部分の映像とがそのクリップと同じ表示形態で帯状表示部５５に表示される。つまりかかるカット編集により得られた編集映像音声の所定再生時間差ΔＴごとの再生映像が各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示された映像表示部群５８Ａと、かかる別クリップとされた映像音声部分の所定再生時間差ΔＴごとの再生映像が各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示された映像表示部群５８Ｂとが帯状表示部５５に表示されることとなる。
At this time, the band-
なお、この場合ＣＰＵ３０は、映像表示部群５８Ａ及び映像表示部群５８Ｂにおけるそれぞれの表示情報（表示サイズ及び表示位置を含む表示情報）に応じて、映像表示部群５８Ａと映像表示部群５８Ｂとが帯状表示部５５内に収まるよう上下方向に僅かに圧縮された状態に変形して表示するようになされている。
In this case, the
このようにＣＰＵ３０は、キーボード３９又はマウス３８による上述のような編集操作入力が行われると、当該編集操作入力に対応した編集情報を第１のインタフェース部３６Ａを介して取得し、当該編集情報の内容に応じて各映像表示部５７の表示形態を変更させ得るようになされている。
As described above, when the editing operation input as described above is performed by the
因みにＣＰＵ３０は、編集位置として設定する編集操作入力を解除するための編集位置設定解除操作が入力された場合、各映像表示部５７に対する表示映像データの全てを停止状態から解除し、複数の映像表示部５７の間において動画像の状態で時間差を設けながら、当該複数の映像表示部５７が表示順に連携した映像表示部群５８として再度連動表示させるようになされている。
Incidentally, when an edit position setting cancel operation for canceling an edit operation input to be set as an edit position is input, the
さらに１つのクリップを、所望フレームを境として２つのクリップに分離したいときには、上述のようにして「分離モード」を設定し、その後上述と同様にして編集位置として所望するフレームＦＲＩＮをイン点に設定する。この結果図２１（Ａ）に示すように、そのフレームＦＲＩＮの画像が表示されている映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）の枠部分が所定色（例えば黄色）に着色され、これによりそのフレームを、分離する際の境とすべきフレームとして設定することができる。そして、例えばその後キーボード３９の「オルト（Alt）」キー及び「スペース」キーの双方を押圧するような編集操作入力を行う。
When it is desired to separate one clip into two clips with a desired frame as a boundary, the “separation mode” is set as described above, and then the desired frame FR IN as the editing position is set to the in point as described above. Set. As a result, as shown in FIG. 21A, the frame portion of the video display unit 57 (57F to 57A to 57V) on which the image of the frame FR IN is displayed is colored in a predetermined color (for example, yellow), thereby The frame can be set as a frame to be used as a boundary for separation. Then, for example, an editing operation input is performed so as to press both the “Alt” key and the “Space” key of the
この結果、図２１（Ｂ）に示すように、そのクリップのイン点に設定されたフレームＦＲＩＮを境として分割すべき編集データが生成され、この編集データに基づく加工処理により得られるそのクリップの前半及び後半の各映像音声部分の映像がそのクリップと同じ表示形態で帯状表示部５５に表示される。つまり、そのクリップにおける前半の映像音声部分の所定再生時間差ΔＴごとの再生映像が各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示された映像表示部群５８Ａと、そのクリップにおける後半の映像音声部分の所定再生時間差ΔＴごとの再生映像が各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示された映像表示部群５８Ｂとが帯状表示部５５に表示されることとなる。
As a result, as shown in FIG. 21B, edit data to be divided with the frame FR IN set at the IN point of the clip as a boundary is generated, and the clip of the clip obtained by the processing based on the edit data is generated. The video images of the first and second video / audio portions are displayed on the belt-
なお、この場合にもＣＰＵ３０は、映像表示部群５８Ａ及び映像表示部群５８Ｂにおけるそれぞれの表示情報（表示サイズ及び表示位置を含む表示情報）に応じて、映像表示部群５８Ａと映像表示部群５８Ｂとが帯状表示部５５内に収まるよう上下方向に僅かに圧縮された状態に変形して表示するようになされている。
Also in this case, the
一方、かかる編集画面５０では、帯状表示部５５に２つのクリップの映像表示部群５８をそれぞれ表示させ、これらを利用して２つのクリップを繋ぎ合わせるいわゆるアッセンブル編集や、一方のクリップの所望位置に他方のクリップの一部を挿入するインサート編集などのカット編集を行うこともできる。
On the other hand, on the
実際上、アッセンブル編集を行う場合、上述した操作により、図２２（Ａ）に示すように、アッセンブル編集に使用しようとする２つのクリップとそれぞれ対応付けられた映像表示部群５８（５８Ａ、５８Ｂ）を帯状表示部５５内にそれぞれ表示させる。
In practice, when performing assemble editing, as shown in FIG. 22 (A), the video display section group 58 (58A, 58B) associated with each of the two clips to be used for assemble editing, as shown in FIG. Are respectively displayed in the belt-
続いて、帯状表示部５５に表示された２つの映像表示部群５８のうち、下地にしようとする一方の第１のクリップと対応付けられた映像表示部群５８（５８Ａ）をマウス操作により選択した後に、カット編集のときと同様にして、この第１のクリップ内に第１の編集位置としてイン点を設定する。
Subsequently, of the two video
またこの後、帯状表示部５５に表示された２つの映像表示部群５８のうち、挿入側にしようとする他方の第２のクリップと対応付けられた映像表示部群５８（５８Ｂ）をマウス操作により選択した後に、カット編集のときと同様にして、この第２のクリップ内に第２の編集位置としてイン点及び必要に応じてアウト点を設定する。
Thereafter, of the two video
そして、この後図２２（Ｂ）に示すように、第１の編集位置として設定された第１のクリップのイン点と第２の編集位置として設定された第２のクリップのイン点とを繋ぎ合わせる操作、つまり第２のクリップと対応付けられた映像表示部群５８（５８Ｂ）に表示された第２のクリップのイン点に設定されたフレームＦＲＩＮ−２の画像を、第１のクリップと対応付けられた映像表示部群５８（５８Ａ）に表示された第１のクリップのイン点に設定されたフレームＦＲＩＮ−１の画像上に重ねるようにドラッグアンドドロップする編集接続操作を行う。 Then, as shown in FIG. 22B, the In point of the first clip set as the first editing position and the In point of the second clip set as the second editing position are connected. The operation of matching, that is, the image of the frame FR IN-2 set at the in point of the second clip displayed on the video display unit group 58 (58B) associated with the second clip is referred to as the first clip. An edit connection operation is performed by dragging and dropping so as to overlap the image of the frame FR IN-1 set at the in point of the first clip displayed on the associated video display unit group 58 (58A).
この結果、図２２（Ｃ）に示すように、第１のクリップの先頭のフレームからイン点に設定されたフレームとＦＲＩＮ−１の１フレーム前までの映像音声部分と、第２のクリップのイン点に設定されたフレームＦＲＩＮ−２から最後のフレームまで（第２のクリップ内にアウト点を設定したときには、イン点に設定されたフレームＦＲＩＮ−２からアウト点に設定されたフレームまで）の映像音声部分とを繋げ合わせるべき旨の編集データが生成され、またこの編集データに基づく加工処理により得られる編集映像音声の映像がそのときの第１及び第２のクリップの映像と同じ表示形態で帯状表示部５５に表示される。つまり、かかる編集映像音声の所定再生時間差ΔＴごとの映像を各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示した映像表示部群５８が帯状表示部５５に表示される。
As a result, as shown in FIG. 22C, the video / audio part from the first frame of the first clip to the frame set at the in point, one frame before FR IN-1 , and the second clip. From the frame FR IN-2 set at the In point to the last frame (when the Out point is set in the second clip, from the frame FR IN-2 set at the In point to the frame set at the Out point ) Is generated to be connected to the video / audio portion of the video and audio, and the video of the edited video / audio obtained by the processing based on the edit data is displayed in the same way as the video of the first and second clips at that time. It is displayed on the belt-
これに対してインサート編集を行う場合には、アッセンブル編集時と同様にして、図２３（Ａ）に示すように、インサート編集に使用しようとする２つのクリップの映像表示部群５８（５８Ａ、５８Ｂ）を帯状表示部５５内にそれぞれ表示させる。
On the other hand, when insert editing is performed, as in the case of assemble editing, as shown in FIG. 23A, two clip video display sections 58 (58A, 58B) to be used for insert editing are used. ) Are respectively displayed in the band-shaped
続いて、帯状表示部５５に表示されたこれら２つの映像表示部群５８（５８Ａ、５８Ｂ）のうち、下地にしようとする一方の第１のクリップと対応付けられた映像表示部群５８（５８Ａ）をマウス操作により選択した後に、カット編集のときと同様にして、この第１のクリップ内にイン点及びアウト点を第１の編集位置としてそれぞれ設定する一方、これと同様にして他方の第２のクリップ内にイン点及びアウト点を第２の編集位置としてそれぞれ設定する。
Subsequently, of these two video display unit groups 58 (58A, 58B) displayed on the band-shaped
そして、この後図２３（Ｂ）に示すように、第１のクリップのイン点と第２のクリップのイン点とを繋ぎ合わせる操作、つまり第２のクリップと対応付けられた映像表示部群５８（５８Ｂ）に表示された当該第２のクリップのイン点に設定されたフレームＦＲＩＮ−２の画像を、第１のクリップと対応付けられた映像表示部群５８（５８Ａ）に表示された当該第１のクリップのイン点に設定されたフレームＦＲＩＮ−１の画像上に重ねるようにドラッグアンドドロップする編集接続操作を行う。
Then, as shown in FIG. 23B, an operation for connecting the in point of the first clip and the in point of the second clip, that is, the video
この結果、図２３（Ｃ）に示すように、第１のクリップの先頭のフレームからイン点に設定されたフレームＦＲＩＮ−１の１つ前のフレームまでの映像音声部分と、第２のクリップのイン点に設定されたフレームＦＲＩＮ−２からアウト点に設定されたフレームＦＲＯＵＴ−２の１フレーム前までの映像音声部分と、第１のクリップのアウト点に設定されたフレームＦＲＯＵＴ−１から当該第１のクリップの最後のフレームまでの映像音声部分とを順次繋ぎ合わせるべき旨の編集データが生成され、この編集データに基づく加工処理により得られる編集映像音声の映像がそのときの第１及び第２のクリップの映像と同じ表示形態で帯状表示部５５に表示される。つまり、かかる編集映像音声の所定再生時間差ΔＴごとの映像を各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示した映像表示部群５８が帯状表示部５５に表示される。
As a result, as shown in FIG. 23C, the audio / video part from the first frame of the first clip to the frame immediately before the frame FR IN-1 set at the in point, and the second clip The video / audio portion from the frame FR IN-2 set at the In point to the frame FR OUT-2 set at the Out point and the frame FR OUT− set at the Out point of the first clip. Editing data indicating that the video and audio portions from 1 to the last frame of the first clip should be sequentially connected is generated, and the edited video and audio video obtained by the processing based on the editing data is the first video. It is displayed on the belt-
他方、このように得られたアッセンブル編集又はインサート編集の編集映像音声について、第１及び第２のクリップの切替わり部分に映像特殊効果を設定したい場合には、図２４（Ａ）に示すように、カット編集時と同様にして、かかる編集映像音声における第１のクリップ側の終わり近傍にイン点を編集位置として設定すると共に、第２のクリップ側の始まり近傍にアウト点を設定する。 On the other hand, when it is desired to set a video special effect at the switching portion between the first and second clips with respect to the edited video / audio of the assemble editing or the insert editing obtained as described above, as shown in FIG. In the same manner as in cut editing, an in point is set as an editing position near the end on the first clip side in the edited video and audio, and an out point is set near the beginning on the second clip side.
次いで、エフェクト情報表示部５４に表示されるエフェクト一覧の中から所望する映像特殊効果と対応付けられたエフェクトアイコン１３を選択し、図２４（Ｂ）に示すように、例えばこれをドラッグアンドドロップにより、対応する映像表示部群５８に表示されたイン点に設定されたフレームＦＲＩＮからアウト点に設定されたフレームＦＲＯＵＴまでの間のいずれかのフレームの画像上に貼り付けるようにする。
Next, the
この結果、その編集映像音声について、図２４（Ｃ）に示すように、第１及び第２のクリップの切替わり部分において、貼り付けられたエフェクトアイコン１３に対応する映像特殊効果処理を施すべき編集データが生成され、編集データに基づく加工処理により得られる編集映像音声の映像が元の編集映像音声の映像と同じ表示形態で帯状表示部５５に表示される。つまり、かかる映像特殊効果処理が施された編集映像音声の所定再生時間差ΔＴごとの映像を各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示した映像表示部群５８が帯状表示部５５に表示されることとなる。
As a result, as shown in FIG. 24C, the edited video / audio is to be subjected to video special effect processing corresponding to the pasted
このようにしてオペレータは、この編集画面５０の帯状表示部５５を利用して、所望のクリップを順次繋ぎ合わせ、所望位置に所望の映像特殊効果を設定してなる編集映像音声を得るための編集データを作成することができる。
In this way, the operator uses the strip-shaped
なお、上述のようにして編集データを作成後、これらを編集リストとして保存したいときには、帯状表示部５５のツールバー５９の「ファイル」をクリックすることによって表示される図示しないコンテキストメニューの中から「編集リストの保存」を選択するようにする。この結果、そのとき作成した各編集データが１つの編集リストとしてファイルかされてハードディスク装置３３（図１）内の編集リストデータベースに登録される。
Note that after creating edit data as described above and wishing to save them as an edit list, the user can select “Edit” from the context menu (not shown) displayed by clicking “File” on the
（１−２−３−２）各種操作に対するＣＰＵ３０の処理
ここで、ＣＰＵ３０は、操作入力に対する上述のような各種表示映像等の変更処理を、ＲＯＭ３１（図１）に格納された制御プログラムに基づき、図２５に示す編集操作応答処理手順ＲＴ２に従って実行する。
(1-2-3-2) Processing of
すなわちＣＰＵ３０は、図９に示す再生処理手順ＲＴ１に従って指定されたクリップの映像表示部群５８を編集画面５０の帯状表示部５５に表示し終えると、図９を用いた上述した表示変更処理手順ＲＴ１と並行してこの編集操作応答処理手順ＲＴ２をステップＳＰ２０において開始し、続くステップＳＰ２１において、そのとき帯状表示部５５に表示している映像表示部群５８上においてクリックされたか否かを判断する。
That is, when the
そしてＣＰＵ３０は、このステップＳＰ２１において否定結果を得るとステップＳＰ２２に進んで、オペレータが所定の編集操作入力が行われたか否かを判断する。なお、ここでいう「編集操作入力」とは、図１９及び図２０について上述したように、同一クリップ内にイン点やアウト点が設定された後に、アウト点に設定されたフレームＦＲＯＵＴの画像をイン点に設定されたフレームＦＲＩＮの画像上にドラッグアンドドロップする操作や、図２１について上述したように、「分離モード」が設定されている状態で、あるクリップにイン点が設定され、その後キーボード３９の「オルト（Alt）」キー及び「スペース」キーの双方が押圧される操作、図２２及び図２３について上述したように、第１及び第２のクリップにそれぞれ対応する映像表示部群５８が帯状表示部５５に表示された状態で、これら第１及び第２のクリップにイン点（及びアウト点）がそれぞれ設定され、その後第２のクリップのイン点に設定されたフレームＦＲＩＮ−２の画像を第１のクリップのイン点のフレームＦＲＩＮ−１の画像上にドラッグアンドドロップする操作、又は図２４について上述したように、エフェクトアイコン１３を対応する映像表示部群５８上にドラッグアンドドロップする操作等をいう。
If the
そしてＣＰＵ３０は、このステップＳＰ２２において否定結果を得ると、ステップＳＰ２１に戻って、この後ステップＳＰ２１−ＳＰ２２−ＳＰ２１のループを繰り返しながら、ステップＳＰ２１又はステップＳＰ２２において肯定結果を得るのを待ち受ける。
If the
そしてＣＰＵ３０は、やがてオペレータが帯状表示部５５内に表示された映像表示部群５８上でクリックすることによりステップＳＰ２１において肯定結果を得ると、ステップＳＰ２３に進んで、そのときクリックされたフレームを状況に応じてイン点又はアウト点に設定すると共に、これと併せて信号処理部３４を制御することにより、その映像表示部群５８におけるそのイン点又はアウト点に設定されたフレームＦＲＩＮ、ＦＲＯＵＴ（ＦＲＩＮ−１、ＦＲＩＮ−２、ＦＲＯＵＴ−１、ＦＲＯＵＴ−２）の画像を表示している映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）の枠部を所定色に着色させる。
Then, when the
またＣＰＵ３０は、クリップにイン点（及びアウト点）が設定された後に、オペレータが所定の編集操作を入力することによりステップＳＰ２２で肯定結果を得ると、ステップＳＰ２４に進んで、その編集操作に応じた編集結果を得るための編集データを生成する。
Further, when the operator inputs a predetermined editing operation after the in point (and out point) is set in the clip and obtains a positive result in step SP22, the
そしてＣＰＵ３０は、この後ステップＳＰ２５に進んで、信号処理部３４を制御することにより、このようにして生成した編集データに基づく映像、つまり図１９（Ｃ）、図２０（Ｃ）、図２１（Ｂ）、図２２（Ｃ）〜図２４（Ｃ）について上述したような編集後の表示形態が変更された編集映像音声の映像を帯状表示部５５内に表示させる。さらにＣＰＵ３０は、この後ステップＳＰ２６に進んで、この編集操作応答処理手順ＲＴ２を終了する。
Then, the
このようにしてＣＰＵ３０は、オペレータにより入力された編集操作入力に応じた編集データを生成すると共に、当該編集操作入力に応じて表示形態が変更された編集結果の映像を帯状表示部５５に表示させる。
In this way, the
（１−３）編集システムの構成例
次に、編集システム１としては図１に示した構成を一例として説明したが、実際には種々の構成が考えられ、その具体的な構成を第１構成例及び第２構成例として順に説明する。
(1-3) Configuration Example of Editing System Next, the configuration shown in FIG. 1 has been described as an example of the
（１−３−１）第１構成例
図１との対応部分に同一符号を付した図２６に示すように、２００は全体として本実施の形態による編集システム１（図１）をさらに具体化した第１構成例の編集システムを示し、編集装置２０１、記憶装置２２及び複数台のビデオテープレコーダ２３１〜２３ｎ等から構成されている。
(1-3-1) First Configuration Example As shown in FIG. 26 in which parts corresponding to those in FIG. 1 are assigned the same reference numerals, 200 further embodies the editing system 1 (FIG. 1) according to the present embodiment as a whole. 1 shows an editing system of the first configuration example, which includes an editing device 201, a
この編集システム２００においても、編集システム１（図１）と同様にビデオテープに記録された映像音声の一部又は全部をクリップとして編集装置２０１を介してＲＡＩＤでなる大容量の記憶装置２２に取り込み得るようになされている。
In this
またこの編集システム２００においても、記憶装置２２に取り込まれたクリップを所望状態につなぎ合わせて所望の編集映像音声を得るための編集内容を規定した編集リストを作成でき、さらにこの作成した編集リストに従って実際に編集処理を実行し、得られた編集映像及び編集音声を記憶装置２２に蓄積し、ビデオテープに記録することができるようになされている。
Also in this
この場合、編集装置２０１においては、編集装置２１（図１）とは異なり、ノースブリッジ２０４に対してＣＰＵ２０２、ＲＡＭ３２、編集装置２１の信号処理部３４（図１）に相当する画像描画部としてのＧＰＵ（Graphic Processing Unit）２０３及びサウスブリッジ２０５が接続されると共に、当該サウスブリッジ２０５にハードディスク装置３３、ＵＳＢインタフェース２０６及びサウンド入出力コーデック２０８が接続されている。このサウンド入出力コーデック２０８にはスピーカ４１が接続されている。
In this case, in the editing apparatus 201, unlike the editing apparatus 21 (FIG. 1), the
またサウスブリッジ２０５には、ＰＣＩ（Peripheral Component Interconnect）バス２０７を介してマウス３８、キーボード３９、ビデオテープレコーダ２３１〜２３ｎ、記憶装置２２が接続されている。なおＧＰＵ２０３にはディスプレイ４０が接続されている。
The
ところで編集装置２０１のＣＰＵ２０２は、主にＭＰＥＧデコーダやＪＰＥＧ2000、H.264／AVC(Advanced Video Coding)等のコーデック等の役割を担い、デコードした結果得られる映像表示部５７に表示するための再生映像をＧＰＵ２０３へデータ転送したり、再生時間差ΔＴ及び再生速度ｖの設定を変更したり、或いは物理演算等を行うようになされている。
By the way, the
一方ＧＰＵ２０３は、各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示する再生映像を動かすときのテクスチャの張り込みなどの最終的なレンダリング処理に加えて座標変換計算処理や、再生映像の拡大・縮小処理等を行う機能を司り、ＣＰＵ２０２の処理負担を軽減させるようになされている。
On the other hand, the
実際上、ＣＰＵ２０２は、起動時、ハードディスク装置３３に格納された制御プログラムに基づき、当該ハードディスク装置３３に格納されている必要なソフトウェアを読み出してＲＡＭ３２に展開し、この後このソフトウェア及びユーザ操作に基づいて必要な制御処理を実行する。
In practice, the
ＣＰＵ２０２は、マウス３８やキーボード３９が操作されて、ビデオテープに記録された映像音声を記憶装置２２に取り込むためのクリップ取込みウィンドウの表示命令が入力されると、これに応動してハードディスク装置３３を制御することにより、対応する画像データを読み出させる一方、これと併せてＧＰＵ２０３を制御することにより、この画像データに基づく上述のクリップ取込みウィンドウをディスプレイ４０に表示させる。
When the
またＣＰＵ２０２は、この状態でマウス３８が操作されて、あるビデオテープレコーダ２３１〜２３ｎに対する再生動作命令が入力されると、これに応動してビデオテープレコーダ２３１〜２３ｎを制御することにより、ビデオテープに記録された映像音声信号の再生動作を実行させる。
The CPU202 the
この結果このビデオテープレコーダ２３１〜２３ｎからは、当該ビデオテープレコーダ２３１〜２３ｎに装填されたビデオテープから再生された映像音声信号Ｓ１が出力され、そのうち映像信号Ｓ２がＰＣＩバス２０７、サウスブリッジ２０５、ノースブリッジ２０４を順次介してＧＰＵ２０３に与えられる。
As a result, the
因みに映像信号Ｓ２は、ＰＣＩバス２０７、サウスブリッジ２０５、ノースブリッジ２０４を順次介してＧＰＵ２０３に供給されるのだが、映像信号Ｓ２に基づいて各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示すべき複数の再生映像を全て転送する際の転送速度はノースブリッジ２０４とＧＰＵ２０３との間における転送レート（例えば最大５Gbyte/sec）に依存する。
Incidentally, the video signal S2 is supplied to the
ＧＰＵ２０３は、ＣＰＵ２０２の制御のもとに、供給される映像信号Ｓ２に対して所定の信号処理を施し、その結果得られた映像信号をディスプレイ４０に送出することにより、当該映像信号に基づく映像をクリップ取込みウィンドウ内の所定位置に表示させる。一方、ＣＰＵ２０２はこのとき映像音声信号Ｓ１から抽出した音声信号Ｓ３をサウンド入出力コーデック２０８を介してスピーカ４１に送出することにより、当該音声信号Ｓ３に基づく音声をスピーカ４１から出力させる。
The
かくしてオペレータは、ディスプレイ４０に表示された映像及びスピーカ４１から出力される音声に基づいて、マウス３８及びキーボード３９を用いて映像及び音声の所望部分を指定することができ、さらにその映像音声部分をクリップとしてそのイン点及びアウト点のタイムコードや素材長、クリップＩＤ、クリップ名、その映像音声の撮影日時、そのクリップの作成日時等の管理情報を登録することができる。そしてこの登録されたそのクリップの管理情報が、ＣＰＵ２０２の制御のもとに、ハードディスク装置３３内のクリップ管理情報データベースに登録される。
Thus, based on the video displayed on the
またＣＰＵ２０２は、この後マウス３８又はキーボード３９が操作されて、そのクリップの取込み命令が入力されると、これに応動してビデオテープレコーダ２３１〜２３ｎを制御することにより、指定されたクリップの映像音声の再生動作を実行させる。
In addition, when the
この結果、ビデオテープレコーダ２３１〜２３ｎからは、ビデオテープから再生されたそのクリップの映像音声信号Ｓ１が出力され、そのうち映像信号Ｓ２がＰＣＩバス２０７、サウスブリッジ２０５及びノースブリッジ２０４を順次介してＧＰＵ２０３に与えられる。またＣＰＵ２０２は、これと併せてＧＰＵ２０３及び記憶装置２２を制御することにより、ビデオテープレコーダ２３１〜２３ｎから与えられるかかるクリップの映像音声信号Ｓ１を記憶装置２２に取り込ませる。
As a result, the
このようにしてこの編集システム２００においても、編集システム１（図１）と同様に、指定されたクリップの映像音声をビデオテープから再生して記憶装置２２に取り込むことができるようになされている。
In this way, in the
一方、オペレータは、この後マウス３８やキーボード３９を用いた所定操作により編集作業を行うための編集画面５０（図２）をディスプレイ４０に表示させることができ、この編集画面５０を用いてどのクリップとどのクリップとをどのように繋ぎ合わせるかといった編集内容を規定した編集リストを作成することができる。またオペレータは、編集リストの作成後又は作成途中において、その編集リストに基づく編集映像及び編集音声を確認することができる。
On the other hand, the operator can subsequently display an editing screen 50 (FIG. 2) for performing an editing operation by a predetermined operation using the
そしてＣＰＵ２０２は、編集リストが作成された後マウス３８が操作されてその編集リストの登録命令が入力された場合には、その編集リストにおいて規定された全てのユーザプログラムによる設定でなる編集データをファイル化してハードディスク装置３３内の編集リストデータベースに登録する。
When the edit list is created and the
またＣＰＵ２０２は、編集リストの作成後又は作成途中において、マウス３８又はキーボード３９が操作されて、その編集リストに基づく編集映像音声の再生命令が入力されると、これに応動して記憶装置２２を制御することにより、必要なクリップの映像音声信号Ｓ４を記憶装置２２に読み出させる。
Further, the
かくしてこの記憶装置２２から読み出された映像音声信号Ｓ４のうち映像信号がＰＣＩバス２０７、サウスブリッジ２０５及びノースブリッジ２０４を順次介してＧＰＵ２０３に与えられ、この後ＣＰＵ２０２の制御のもとに、当該ＧＰＵ２０３又はＣＰＵ２０２において必要に応じて映像特殊効果加工処理が施される。
Thus, the video signal out of the video / audio signal S4 read out from the
そしてＧＰＵ２０３は、ＣＰＵ２０２の制御のもとに、供給される映像信号に対して映像特殊効果加工処理を施すことにより得られた編集映像信号に対して所定の信号処理を施し、その結果得られた映像信号をディスプレイ４０へ送出する。一方、ＣＰＵ２０２は、映像音声信号Ｓ４のうち音声信号に対して音声ミキシング処理を施し、その結果得られた編集音声信号をサウンド入出力コーデック２０８を介してスピーカ４１へ送出する。この結果、編集画面５０内の所定位置に編集映像が表示され、スピーカ４１から編集音声が出力される。
Then, the
このようにしてこの編集システム２００においては、オペレータが編集リストに基づく編集映像及び編集音声を確認しながら編集作業を行うことができる。
In this manner, in the
さらにＣＰＵ２０２は、編集リストが作成された後、マウス３８又はキーボード３９が操作されてその実行命令が入力されると、これに応動して記憶装置２２を制御することにより、記憶装置２２から読み出した編集処理に利用するクリップの映像音声信号Ｓ４のうち映像信号をＰＣＩバス２０７、サウスブリッジ２０５及びノースブリッジ２０４を介してＧＰＵ２０３に送出させる。
Further, after the edit list is created, the
同様にＣＰＵ２０２は、記憶装置２２から読み出した映像音声信号Ｓ４のうち音声信号を、ＰＣＩバス２０７、サウスブリッジ２０５を介してサウンド入出力コーデック２０８からスピーカ５１へ出力する。
Similarly, the
そしてこのときＧＰＵ２０３は、ＣＰＵ２０２の制御のもとに、上述の再生モード時と同様にして、供給される各クリップの映像信号に対して必要に応じて特殊効果加工処理を施す一方、得られた編集映像信号をノースブリッジ２０４、サウスブリッジ２０５及びＰＣＩバス２０７を順次介して記憶装置２２又は対応するビデオテープレコーダ２３１〜２３ｎに送出する。
At this time, the
かくして記憶装置２２は、ＣＰＵ２０２の制御のもとに、供給される編集映像信号を指定されたアドレス位置に記憶する。またビデオテープレコーダ２３１〜２３ｎは、ＣＰＵ２０２の制御のもとに、供給される編集映像信号をビデオテープの指定された位置に記録する。
Thus, the
このようにしてこの編集システム２００においても、編集装置１（図１）と同様に、作成した編集データに従って、指定されたクリップの映像音声を指定された状態に編集加工して記憶装置２２に蓄積したり、ビデオテープに記録したりすることができるようになされている。
In this way, in the
従って編集システム２００では、編集システム１と同様に、編集装置２０１のＣＰＵ２０２及びＧＰＵ２０３により、編集画面５０の帯状表示部５５における映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に対して、所定の再生速度ｖ及び再生時間差ΔＴに設定された、流れるような映像表示（図４）を実行し得ると共に、種々の拡張操作や編集処理を実行し得るようになされている。
Therefore, in the
（１−３−２）第２構成例
図２６との対応部分に同一符号を付した図２７に示すように、２５０は全体として本実施の形態による編集システム１（図１）をさらに具体化した第２構成例の編集システムを示し、編集装置２５１、記憶装置２２及び複数台のビデオテープレコーダ２３１〜２３ｎ等から構成されている。
(1-3-2) Second Configuration Example As shown in FIG. 27 in which parts corresponding to those in FIG. 26 are given the same reference numerals, 250 further embodies the editing system 1 (FIG. 1) according to the present embodiment as a whole. The editing system of the second configuration example is shown, and includes an editing device 251, a
この編集システム２５０においても、編集システム２００（図２６）と同様にビデオテープに記録された映像音声の一部又は全部をクリップとして編集装置２５１を介してＲＡＩＤでなる大容量の記憶装置２２に取り込み得るようになされている。
In the editing system 250 as well, as in the editing system 200 (FIG. 26), part or all of the video / audio recorded on the video tape is taken as a clip into the large-
またこの編集システム２５０においても、記憶装置２２に取り込まれたクリップを所望状態につなぎ合わせて所望の編集映像音声を得るための編集内容を規定した編集リストを作成でき、さらにこの作成した編集リストに従って実際に編集処理を実行し、得られた編集映像及び編集音声を記憶装置２２に蓄積したり、ビデオテープに記録することができるようになされている。
The editing system 250 can also create an edit list that defines the editing content for obtaining the desired edited video and audio by joining the clips captured in the
この場合、編集装置２５１においては、編集装置２０１（図２６）とは異なり、マイクロプロセッサ２５２に対してＧＰＵ２６５、ＸＤＲ（Extreme Data Rate）−ＲＡＭ２６６及びサウスブリッジ２０５が接続されると共に、当該サウスブリッジ２０５にハードディスク装置３３、ＵＳＢインタフェース２０６及びサウンド入出力コーデック２０８が接続されている。このサウンド入出力コーデック２０８にはスピーカ４１が接続されている。
In this case, in the editing device 251, unlike the editing device 201 (FIG. 26), a
またサウスブリッジ２０５には、ＰＣＩバス２０７を介してマウス３８、キーボード３９、ビデオテープレコーダ２３１〜２３ｎ及び記憶装置２２が接続されている。なおＧＰＵ２６５にはディスプレイ４０が接続されている。
The
ところでマイクロプロセッサ２５２は、ＯＳ（Operating System）等の基本プログラムを実行する汎用のメインＣＰＵコア２５３と、当該メインＣＰＵコア２５３に内部バス２６３を介して接続された複数（この場合８個）のＲＩＳＣ（Reduced Instruction Set Computer）タイプの信号処理プロセッサ（以下、これをサブＣＰＵコアと呼ぶ）２５４〜２６１と、例えば２５６[MByte]の容量を有するＸＤＲ−ＲＡＭ２６６に対するメモリコントロールを行うメモリコントローラ２６２と、サウスブリッジ２０５との間でデータの入出力を管理するＩ／Ｏ（In/Out）コントローラ２６４とが１チップに集積されたマルチコア構成でなり、例えば動作周波数４[GHz]を可能としている。
The microprocessor 252 includes a general-purpose
この編集装置２５１のマイクロプロセッサ２５２は、主にＭＰＥＧデコーダ、ＪＰＥＧ2000、H.264／AVC(Advanced Video Coding)等のコーデックの役割を担い、デコードした結果得られる映像表示部５７に表示するための再生映像をＧＰＵ２６５へデータ転送したり、再生時間差ΔＴ及び再生速度ｖの設定を変更したり、或いは物理演算等を行うようになされている。
The microprocessor 252 of the editing device 251 mainly plays a role of a codec such as MPEG decoder, JPEG2000, H.264 / AVC (Advanced Video Coding), and is reproduced for display on the
特にマイクロプロセッサ２５２は、８個のサブＣＰＵコア２５４〜２６１がデコーダの役割をそれぞれ担い、当該８個のサブＣＰＵコア２５４〜２６１がＨＤ（High Definition）の再生映像を同時並列的にデコードすることが可能である。
In particular, in the microprocessor 252, the eight
またメインＣＰＵコア２５３は、８個のサブＣＰＵコア２５４〜２６１が行う以外の処理や管理を行うようになされており、サウスブリッジ２０５を介してマウス３８やキーボード３９から供給された命令を受け付け、当該命令に応じた種々の処理を実行する。
The
このようにマイクロプロセッサ２５２は、８個のサブＣＰＵコア２５４〜２６１によって同時並列的に再生映像をデコードすることができるようになされており、かつマイクロプロセッサ２５２とＧＰＵ２６５との間を帯域幅の大きなバス２６８により例えば最大３０[Gbyte/sec]の転送速度でデータ転送し得るようになされているため、多くの枚数の高精細な再生画像をデコードして短時間にデータ転送し得るようになされている。
In this way, the microprocessor 252 can decode the playback video simultaneously and in parallel by the eight
因みに、この場合８個のサブＣＰＵコア２５４〜２６１では、例えば同時に２枚のＨＤの再生映像をそれぞれデコードすることが可能であり、すなわちマイクロプロセッサ２５２からＧＰＵ２６５へは一度に１６枚（この場合）もの高精細な再生画像を高速転送することができる。但し、８個のサブＣＰＵコア２５４〜２６１が同時にデコード可能なＨＤの枚数としてはこれに限るものではない。
Incidentally, in this case, the eight
一方ＧＰＵ２６５は、第１構成例のＧＰＵ２０３と同様に、各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示する再生映像を動かすときのテクスチャの張り込みなどの最終的なレンダリング処理に加えて座標変換計算処理や、再生映像の拡大・縮小処理等を行う機能を司り、マイクロプロセッサ２５２の処理負担を軽減させるようになされている。
On the other hand, the
実際上、マイクロプロセッサ２５２は、起動時、ハードディスク装置３３に格納された制御プログラムに基づき、当該ハードディスク装置３３に格納されている必要なソフトウェアを読み出してＸＤＲ−ＲＡＭ３２に展開し、この後このソフトウェア及びユーザ操作に基づいて必要な制御処理を実行する。
In practice, upon startup, the microprocessor 252 reads necessary software stored in the
マイクロプロセッサ２５２は、マウス３８やキーボード３９が操作されて、ビデオテープに記録された映像音声を記憶装置２２に取り込むためのクリップ取込みウィンドウの表示命令が入力されると、これに応動してハードディスク装置３３を制御することにより、対応する画像データを読み出させる一方、これと併せてＧＰＵ２６５を制御することにより、この画像データに基づく上述のクリップ取込みウィンドウをディスプレイ４０に表示させる。
When the
またマイクロプロセッサ２５２は、この状態でマウス３８が操作されて、あるビデオテープレコーダ２３１〜２３ｎに対する再生動作命令が入力されると、これに応動してビデオテープレコーダ２３１〜２３ｎを制御することにより、ビデオテープに記録された映像音声信号の再生動作を実行させる。
The microprocessor 252, a
この結果このビデオテープレコーダ２３１〜２３ｎからは、当該ビデオテープレコーダ２３１〜２３ｎに装填されたビデオテープから再生された映像音声信号Ｓ１が出力され、そのうち映像信号Ｓ２がＰＣＩバス２０７、サウスブリッジ２０５及びマイクロプロセッサ２５２を順次介してＧＰＵ２６５に与えられる。
As a result, the
ＧＰＵ２６５は、マイクロプロセッサ２５２の制御のもとに、供給される映像信号Ｓ２に対して所定の信号処理を施し、その結果得られた映像信号をディスプレイ４０に送出することにより、当該映像信号に基づく映像をクリップ取込みウィンドウ内の所定位置に表示させる。一方、ＣＰＵ２６５は、このとき映像音声信号Ｓ１から抽出した音声信号Ｓ３をサウンド入出力コーデック２０８を介してスピーカ４１に送出することにより、当該音声信号Ｓ３に基づく音声をスピーカ４１から出力させる。
The
かくしてオペレータは、ディスプレイ４０に表示された映像及びスピーカ４１から出力される音声に基づいて、マウス３８及びキーボード３９を用いて映像及び音声の所望部分を指定することができ、さらにその映像音声部分をクリップとしてそのイン点及びアウト点のタイムコードや素材長、クリップＩＤ、クリップ名、その映像音声の撮影日時、そのクリップの作成日時等の管理情報を登録することができる。そしてこの登録されたそのクリップの管理情報が、マイクロプロセッサ２５２の制御のもとに、ハードディスク装置３３内のクリップ管理情報データベースに登録される。
Thus, based on the video displayed on the
またマイクロプロセッサ２５２は、この後マウス３８又はキーボード３９が操作されて、そのクリップの取込み命令が入力されると、これに応動してビデオテープレコーダ２３１〜２３ｎを制御することにより、指定されたクリップの映像音声の再生動作を実行させる。
Further, the microprocessor 252 is designated by controlling the
この結果、ビデオテープレコーダ２３１〜２３ｎからは、ビデオテープから再生されたそのクリップの映像音声信号Ｓ１が出力され、そのうち映像信号Ｓ２がＰＣＩバス２０７、サウスブリッジ２０５、マイクロプロセッサ２５２及びバス２６８を順次介してＧＰＵ２６５に与えられる。またマイクロプロセッサ２５２は、これと併せてＧＰＵ２６５及び記憶装置２２を制御することにより、ビデオテープレコーダ２３１〜２３ｎから与えられるかかるクリップの映像音声信号をＧＰＵ２６５を介して記憶装置２２に取り込ませる。
As a result, the
このようにしてこの編集システム２５０においても、編集システム１（図１）と同様に、指定されたクリップの映像音声をビデオテープから再生して記憶装置２２に取り込むことができるようになされている。
In this way, in the editing system 250, as in the editing system 1 (FIG. 1), the video and audio of the designated clip can be reproduced from the video tape and taken into the
一方、オペレータは、この後マウス３８やキーボード３９を用いた所定操作により編集作業を行うための編集画面５０（図２）をディスプレイ４０に表示させることができ、この編集画面５０を用いてどのクリップとどのクリップとをどのように繋ぎ合わせるかといった編集内容を規定した編集リストを作成することができる。またオペレータは、編集リストの作成後又は作成途中において、その編集リストに基づく編集映像及び編集音声を確認することができる。
On the other hand, the operator can subsequently display an editing screen 50 (FIG. 2) for performing an editing operation by a predetermined operation using the
そしてマイクロプロセッサ２５２は、編集リストが作成された後マウス３８が操作されてその編集リストの登録命令が入力された場合には、その編集リストにおいて規定された全てのユーザプログラムによる設定でなる編集データをファイル化してハードディスク装置３３内の編集リストデータベースに登録する。
When the edit list is created and the
またマイクロプロセッサ２５２は、編集リストの作成後又は作成途中において、マウス３８又はキーボード３９が操作されて、その編集リストに基づく編集映像音声の再生命令が入力されると、これに応動して記憶装置２２を制御することにより、必要なクリップの映像音声信号Ｓ４を記憶装置２２に読み出させる。
Further, the microprocessor 252 operates in response to the input of the playback instruction of the edited video / audio based on the edit list after the
かくしてこの記憶装置２２から読み出された映像音声信号Ｓ４のうち映像信号がＰＣＩバス２０７、サウスブリッジ２０５、マイクロプロセッサ２５２及びバス２６８を順次介してＧＰＵ２６５に与えられ、この後マイクロプロセッサ２５２の制御のもとに、当該ＧＰＵ２６５において必要に応じて映像特殊効果加工処理が施される。
Thus, the video signal out of the video / audio signal S4 read out from the
そしてＧＰＵ２６５は、マイクロプロセッサ２５２の制御のもとに、供給される映像信号に対して映像特殊効果加工処理を施すことにより得られた編集映像信号に対して所定の信号処理を施し、その結果得られた映像信号をディスプレイ４０へ送出する。一方、マイクロプロセッサ２５２は、映像音声信号Ｓ４のうち音声信号に対して音声ミキシング処理を施し、その結果得られた編集音声信号をサウンド入出力コーデック２０８を介してスピーカ４１へ送出する。この結果、編集画面５０内の所定位置に編集映像が表示され、スピーカ４１から編集音声が出力される。
The
このようにしてこの編集システム２５０においては、オペレータが編集リストに基づく編集映像及び編集音声を確認しながら編集作業を行うことができる。 In this way, in the editing system 250, the operator can perform editing work while confirming the edited video and edited audio based on the editing list.
さらにマイクロプロセッサ２５２は、編集リストが作成された後、マウス３８又はキーボード３９が操作されてその実行命令が入力されると、これに応動して記憶装置２２を制御することにより、編集処理に利用するクリップの映像音声信号Ｓ４を記憶装置２２から読み出させてＰＣＩバス２０７、サウスブリッジ２０５及びバス２６８を介してＧＰＵ２６５に送出させる。
Further, after the edit list is created, the microprocessor 252 operates the
そしてこのときＧＰＵ２６５は、マイクロプロセッサ２５２の制御のもとに、上述の再生モード時と同様にして、供給される各クリップの映像信号に対して必要に応じて特殊効果加工処理や音声ミキシング処理を施す一方、得られた編集映像信号をバス２６８、マイクロプロセッサ２５２、サウスブリッジ２０５及びＰＣＩバス２０７を順次介して記憶装置２２又は対応するビデオテープレコーダ２３１〜２３ｎに送出する。
At this time, the
かくして記憶装置２２は、マイクロプロセッサ２５２の制御のもとに、供給される編集映像信号を指定されたアドレス位置に記憶する。またビデオテープレコーダ２３１〜２３ｎは、マイクロプロセッサ２５２の制御のもとに、供給される編集映像信号をビデオテープの指定された位置に記録する。
Thus, the
このようにしてこの編集システム２５０においても、編集装置１（図１）と同様に、作成した編集データに従って、指定されたクリップの映像音声を指定された状態に編集加工して記憶装置２２に蓄積したり、ビデオテープに記録したりすることができるようになされている。
In this way, in the editing system 250 as well as the editing device 1 (FIG. 1), the video and audio of the specified clip is edited and stored in the
従って編集システム２５０では、編集システム１と同様に、編集装置２５１のマイクロプロセッサ２５２及びＧＰＵ２６５により、編集画面５０の帯状表示部５５における映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に対して、所定の再生速度ｖ及び再生時間差ΔＴに設定された、流れるような映像表示（図４）を実行し得ると共に、種々の拡張操作や編集処理を実行し得るようになされている。
Therefore, in the editing system 250, as with the
ところで、マイクロプロセッサ２５２における８個のサブＣＰＵコア２５４〜２６１で同時並列的にデコードされた映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示する再生映像は、バス２６８を介してＧＰＵ２６５にデータ転送されるのだが、このときの転送速度は例えば最大３０[Gbyte/sec]である。
By the way, the reproduced video displayed on the video display unit 57 (57F to 57A to 57V) decoded in parallel by the eight
これに対して第１構成例の編集装置２０１（図２６）では、ノースブリッジ２０４とＧＰＵ２０３との間における転送レートがこの場合最大５Gbyte/secであるので、ＣＰＵ２０２からノースブリッジ２０４を介してＧＰＵ２０３へ転送される再生映像の転送速度よりも、マイクロプロセッサ２５２からＧＰＵ２６５へ転送される再生映像の転送速度の方が数倍高速である。
On the other hand, in the editing apparatus 201 (FIG. 26) of the first configuration example, the maximum transfer rate between the
従って第２構成例の編集システム２５０では、第１構成例の編集システム２００に比べて、映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示する再生映像を高速かつ滑らかに表示し得るようになされている。
Therefore, in the editing system 250 of the second configuration example, the playback video displayed on the video display unit 57 (57F to 57A to 57V) can be displayed at high speed and smoothly compared to the
このような第２構成例の編集システム２５０における編集装置２５１のマイクロプロセッサ２５２に設けられた８個のサブＣＰＵコア２５４〜２６１を用いて同時並列的にデコード処理を行う並列デコード処理手順を次に説明する。
A parallel decoding processing procedure for performing parallel decoding processing using the eight
図２８に示すように編集装置２５１は、ルーチンＲＴ３をステップＳＰ４０において開始し、続くステップＳＰ４１においてマウス３８やキーボード３９から入力された制御信号をサウスブリッジ２０５を介してマイクロプロセッサ２５２に取り込み、当該制御信号をメインＣＰＵコア２５３で認識すると、次のステップＳＰ４２へ移る。
As shown in FIG. 28, the editing apparatus 251 starts the routine RT3 in step SP40, and in the subsequent step SP41, takes in the control signal input from the
ステップＳＰ４２において編集装置２５１は、ステップＳＰ４１で認識した制御信号が映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示すべきクリップを特定する命令であったとき、各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示するクリップの描画ループをメインＣＰＵコア２５３で設定し、次のステップＳＰ４３へ移る。
In step SP42, when the control signal recognized in step SP41 is a command for specifying a clip to be displayed on the video display unit 57 (57F to 57A to 57V), the editing device 251 determines each video display unit 57 (57F to 57A). (57V) is set in the
ステップＳＰ４３において編集装置２５１は、当該クリップに対応した再生映像、表示位置、表示サイズ等の各種物理演算をメインＣＰＵコア２５３で行い、次のステップＳＰ４４へ移る。
In step SP43, the editing device 251 performs various physical operations such as a playback image, display position, and display size corresponding to the clip by the
ステップＳＰ４４において編集装置２５１は、メインＣＰＵコア２５３で描画ループを構成するクリップの再生映像のフレーム位置計算を行うと共に、各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示するクリップの再生映像を何れのサブＣＰＵコア２５４〜２６１でデコードさせるかの担当をメインＣＰＵコア２５３により割り当て、次のステップＳＰ４５へ移る。
In step SP44, the editing device 251 calculates the frame position of the playback video of the clip constituting the drawing loop by the
ステップＳＰ４５において編集装置２５１は、記憶装置２２から再生映像の出力に必要なフレームを読み出し、ステップＳＰ４４で割り当てたサブＣＰＵコア２５４〜２６１へ分配し、次のステップＳＰ４６へ移る。
In step SP45, the editing device 251 reads out a frame necessary for outputting the reproduced video from the
ステップＳＰ４６において編集装置２５１は、デコーダとしての役割を担う８個のサブＣＰＵコア２５４〜２６１により、ステップＳＰ４５で分配されたフレームを同時並列的にデコードし、次のステップＳＰ４７へ移る。
In step SP46, the editing device 251 decodes the frames distributed in step SP45 simultaneously and in parallel by the eight
ステップＳＰ４７において編集装置２５１は、メインＣＰＵコア２５３により、ステップＳＰ４６でデコードされた再生映像を、帯状表示部５５の画面上に表示すべき位置やサイズを示した表示情報（表示サイズ及び表示位置）と共にＧＰＵ２６５へ高速データ転送し、次のステップＳＰ４８へ移る。
In step SP47, the editing device 251 displays display information (display size and display position) indicating the position and size at which the
ステップＳＰ４８において編集装置２５１は、ＧＰＵ２６５により、メインＣＰＵコア２５３からデータ転送された再生映像を表示情報（表示サイズ及び表示位置）に従って各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）の所定位置に貼り付けて表示し、次のステップＳＰ４９へ移って処理を終了する。
In step SP48, the editing device 251 uses the
このように編集装置２５１では、マイクロプロセッサ２５２における８個のサブＣＰＵコア２５４〜２６１が各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示する再生映像のデコーダとしての役割をそれぞれ担って同時並列的にデコードし、そのデコードされた再生映像を帯域幅の大きなバス２６８により例えば最大３０[Gbyte/sec]の転送速度でＧＰＵ２６５へ高速データ転送し得るようになされているため、多くの枚数の高精細な再生画像をデコードして短時間にＧＰＵ２６５へデータ転送することができ、かくして複数の映像表示部５７の間において動画像の状態で時間差を設けながら表示順に連携した映像表示部群５８として帯状表示部５５にレスポンス良く滑らかに連動表示させ得るようになされている。
As described above, in the editing apparatus 251, the eight
（１−４）第１の実施の形態の動作及び効果
以上の構成において、この編集システム２０の編集装置２１、２０１及び２５１では、ディスプレイ４０に表示された編集画面５０のクリップ一覧表示部５１から所望のクリップを選択して帯状表示部５５にドラッグアンドドロップし、この後必要に応じてそのクリップと対応付けられた映像表示部群５８を選択した後に再生ボタン５６をクリックすると、その映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に一定の時間差をもってそのクリップの再生映像がそれぞれ表示される。
(1-4) Operation and Effect of First Embodiment In the above configuration, the
そしてこのような映像表示方法によれば、かかるクリップの再生映像の各シーンが、その映像表示部群５８の右奥の映像表示部から左奥の映像表示部へ向けて、そのとき設定されている再生時間差ΔＴをもって順次右回りに流れて行くように表示されるため、２次元の再生映像に時間的な奥行きをもたせることができ、この結果、従来の編集画面１（図４１）のように２次元１画面の再生映像を目視しながら所望する映像部分を探索する場合に比べて、格段的に容易に画探し作業を行うことができる。
According to such a video display method, each scene of the playback video of the clip is set at that time from the video display unit at the back right of the video
またこの場合において編集装置２１、２０１及び２５１では、キーボード３９の方向キー７０の「上（↑）」キー７０Ｕを押下操作し、又はマウス３８の右ボタンを押圧した状態で、カーソル７１によって映像表示部群５８に表示された再生映像の一部を、その映像表示部群５８に沿って左方向へ引くように当該カーソル７１を移動させることによって、その映像表示部群５８に表示されている対応する再生映像の表示速度を上げることができ、キーボード３９の方向キー７０の「下（↓）」キー７０Ｄを押圧操作し、又はマウス３８の右ボタンを押圧した状態で、カーソル７１によって映像表示部群５８に表示された再生映像の一部を、その映像表示部群５８に沿って右方向へ引くように当該カーソル７１を移動させることによって、その映像表示部群５８に表示されている対応する再生映像の表示速度を下げることができる。またマウス３８の左ボタンを押圧した状態で、当該マウス操作に応動して編集画面５０上を自由に移動するように表示されるカーソル７１により映像表示部群５８の一部を１秒以上同じ位置で押さえるように操作することによって、その映像表示部群５８の各映像表示部５７にそれぞれ表示された各再生映像を停止させることができる。
In this case, in the
すなわちこの映像表示方法では、映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に動画像の状態で一定の時間差を設けながら各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）が表示的に連携した映像表示部群としてクリップの再生映像を表示することにより、映像表示部群５８の右奥から左奥へ向かって流れるような映像表示を実行し、その映像表示の表示状態を変更する表示操作入力に応じて当該表示状態を変更することができるので、その結果ユーザに対して見易い状態で編集画面を提示し、直感的な操作による編集作業を容易に実行させることができる。
That is, in this video display method, each video display unit 57 (57F to 57A to 57V) is provided with a certain time difference in the state of moving images to each video display unit 57 (57F to 57A to 57V) of the video
そしてこのような映像表示方法によれば、これら基本操作として、その操作を行ったことによる操作結果（表示速度の上げ下げや停止）を想起し易く、かつそれ自体が容易な操作が割り当てられているため、これら基本操作を容易かつ直感的に行うことができる。 According to such a video display method, as these basic operations, operations that are easy to recall the operation results (increase / decrease or stop display speed) due to the operations are performed and the operations themselves are assigned. Therefore, these basic operations can be performed easily and intuitively.
またこの場合において、編集装置２１、２０１及び２５１では、かかる再生時間差ΔＴや映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示される再生映像の再生速度ｖを自在に変更することができるため、対象とするクリップの内容に応じて当該クリップの所望範囲をその映像表示部群５８に表示させることができ、その分かかる画探し作業をより容易化させることができる。さらにこのとき、かかる再生時間差ΔＴ及び再生速度ｖを連携して変化させることができるため、かかる画探し作業をより一層と容易化させることができる。
In this case, the
さらに編集装置２１、２０１及び２５１では、かかる映像表示部群５８を表示するに際して、手前中央部の基準映像表示部５７Ａを最も大きく、これから離れるにつれて徐々に小さくなるように各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）を表示するため、オペレータが基準映像表示部５７Ａに表示された再生映像に注目し易く、また基準映像表示部５７Ａに表示された再生映像を基準として映像表示部群５８を見ることによって、当該映像表示部群５８に表示された再生映像を基準とする過去及び未来の再生映像を容易に把握することができる。
Further, in the
さらに編集装置２１、２０１及び２５１では、個々のクリップの切り出し、複数クリップの編集及び編集映像の確認といった作業を１つの帯状表示部５５内で行うことができるため、例えば図４１について上述した従来の編集装置のようにクリップの切り出しはモニタ部３を用いて行い、編集はストーリーボード部４及びタイムライン部５を用いて行い、編集映像の確認はモニタ部３を用いて行うといった煩雑な作業を必要とせず、かかる一連の編集作業を帯状表示部５５内で一括して行うことができる。かくするにつき、いわゆる画探し作業のみならず、編集作業を全体として容易化させることができる。
Furthermore, the
さらに編集装置２１、２０１及び２５１では、かかる映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に再生映像をそれぞれ表示する際に、音声出力モードとして「メイン音声出力モード」及び「全音声出力モード」を選択することができるため、そのとき対象としているクリップの再生音声の内容に応じて音声出力モードを切り換えることによって、出力音声による所望の映像音声部分の探索作業も可能となる。
Further, in the
またこの場合において、この編集装置２１、２０１及び２５１では、音声出力モードとして「全音声出力モード」を設定したときには、基準映像表示部５７Ａから離れた映像表示部５７（５７Ｂ，５７Ｃ，……、５７Ｚ，５７Ｙ，……）に表示された再生映像の音声ほど小さい音量となるように音量調整された状態で、そのとき操作している映像表示部群５８の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示された再生映像に付随するすべての再生音声がスピーカ４１から出力されるため、音声を３次元的に表現することができ、その分クリップの内容によって、かかる出力音声に基づく所望の映像音声部分の探索作業をより容易化させることができる。もちろん、編集の容易性だけでなく、帯状表示による再生を行うだけでも今までに無い奥行き感を感じさせる音声表現が可能となる。
Further, in this case, in the
以上の構成によれば、選択されたクリップの再生映像を一定の時間差をもって帯状に複数表示するようにしたことにより、再生映像に時間的な奥行きをもたせることができる。かくするにつき、従来の編集画面１のように２次元１画面の再生映像を目視しながら所望する映像部分を探索する場合に比べて、オペレータが格段的に容易に所望する映像部分の探索を行うことができ、かくして編集作業を容易化させ得る編集システムを実現できる。
According to the above configuration, a plurality of playback images of the selected clip are displayed in a band shape with a certain time difference, so that the playback image can have a temporal depth. As a result, the operator can search for the desired video portion much more easily than when searching for the desired video portion while viewing the reproduced video of the two-dimensional one screen as in the
また以上の構成によれば、クリップの再生映像を、一定の再生時間差ΔＴを有する複数の再生映像を帯状に並べて配置した所定の表示形態で表示する一方、その再生時間差ΔＴや各再生映像の再生速度ｖを増減させるための基本操作として、その操作を行ったことによる操作結果を想起し易く、かつそれ自体が容易な操作を割り当てるようにしたことにより、これら操作を容易かつ直感的に行うことができ、かくして編集作業の作業効率を格段的に向上させ得る編集システムを実現できる。 Further, according to the above configuration, the playback video of the clip is displayed in a predetermined display form in which a plurality of playback videos having a fixed playback time difference ΔT are arranged in a band, while the playback time difference ΔT and the playback of each playback video are displayed. As a basic operation for increasing or decreasing the speed v, it is easy to recall the operation result by performing the operation, and assigning an operation that is easy on its own, so that these operations can be easily and intuitively performed. Thus, it is possible to realize an editing system that can remarkably improve the efficiency of editing work.
（２）第２の実施の形態
（２−１）本実施の形態による編集システムの構成
図１において、９０は第２の実施の形態による編集システムを示し、編集画面５０の帯状表示部５５に表示される映像表示部群１００（図２）の各映像表示部１０１（図２）の大きさが、その映像表示部１０１に表示される再生映像に付随する再生音声の信号レベルに応じて変動する点を除いて第１の実施の形態による編集システム１（図１）と同様に構成されている。
(2) Second Embodiment (2-1) Configuration of Editing System According to this Embodiment In FIG. 1,
すなわちこの編集システム９０の場合、編集装置９１の信号処理部９２は、必要時、上述のように記憶装置２２から映像特殊効果／音声ミキシング処理部３５を介して与えられる映像音声信号Ｓ４に基づいて、図２に示すように、対応する映像表示部群１００の各映像表示部１０１に対応するクリップの再生映像をそれぞれ表示させる一方、これら再生映像に付随する各再生音声のフレームごとの音声レベル（音声信号Ｓ３の信号レベル）のピークレベルをＣＰＵ９３に順次通知するようになされている。
That is, in the case of this
そしてＣＰＵ９３は、かかる信号処理部９２からの通知に基づいて、これら各再生音声について、その音声レベルのピークレベルが予め設定された閾値Ｔｈｄ（図２９（Ｂ））よりも大きいか否かをそれぞれ判断し、大きいと判断したときには、信号処理部９２を制御して、そのフレームの画像を表示する際に、対応する映像表示部１０１を通常表示すべき大きさよりも大きく表示させる。
Then, based on the notification from the
例えば、各映像表示部１０１に表示された再生映像がそれぞれ図２９（Ａ）であり、そのときこれら再生映像に付随する再生音声の音声レベル（音声信号の信号レベル）が図２９（Ｂ）である場合には、手前中央の基準映像表示部１０１Ａから右側に数えて２〜４番目の映像表示部１０１Ｃ〜１０１Ｅに表示される再生映像に付随する各再生音声と、基準映像表示部１０１Ａから左側に数えて２番目及び４番目の映像表示部１０１Ｙ、１０１Ｗに表示される再生映像に付随する各再生音声の音声レベルがそれぞれ閾値Ｔｈｄよりも大きいことから、この瞬間では図２９（Ｃ）において十字の矢印で示すように、これら基準映像表示部１０１Ａから右側に数えて２〜４番目の各映像表示部１０１Ｃ〜１０１Ｅと、基準映像表示部１０１Ａから左側に数えて２番目及び４番目の映像表示部１０１Ｙ、１０１Ｗとが大きく表示されることとなる。
For example, the reproduced video displayed on each
またこの場合においてＣＰＵ９３は、かかる大きく表示させる映像表示部１０１Ｃ〜１０１Ｅ、１０１Ｙ、１０１Ｗについて、その映像表示部１０１に表示される再生映像に付随する再生音声の音声レベルが大きければ大きいほど、対応する映像表示部１０１Ｃ〜１０１Ｅ、１０１Ｙ、１０１Ｗの拡大率が大きくなるように各映像表示部１０１を表示するように信号処理部９２を制御する。
Further, in this case, the
従って、例えば図２９（Ｂ）の例では、この瞬間では基準映像表示部１０１Ａから右側に２番目の映像表示部１０１Ｃに表示される再生映像に付随する再生音声の音声レベルが最も高く、他の基準映像表示部１０１Ａから右側に数えて３番目及び４番目の映像表示部１０１Ｄ、１０１Ｅと、基準映像表示部１０１Ａから左側に数えて２番目及び４番目の映像表示部１０１Ｙ、１０１Ｗとにそれぞれ表示される再生映像に付随する再生音声の音声レベルがこれよりも少し低いほぼ同じ大きさであるため、基準映像表示部１０１Ａから右側に２番目の映像表示部１０１Ｃが最も大きい拡大率で拡大表示され、他の基準映像表示部１０１Ａから右側に数えて３番目及び４番目の映像表示部１０１Ｄ、１０１Ｅと、基準映像表示部１０１Ａから左側に数えて２番目及び４番目の映像表示部１０１Ｙ、１０１Ｗとがこれよりも少し小さい拡大率で拡大表示されることとなる。
Therefore, for example, in the example of FIG. 29B, at this moment, the audio level of the reproduced audio accompanying the reproduced video displayed on the second video display unit 101C on the right side from the reference
このようにしてこの編集システム９０では、編集画面５０の帯状表示部５５において、映像表示部群１００の各映像表示部１０１（１０１Ｆ〜１０１Ａ〜１０１Ｖ）にそれぞれ表示された再生映像に付随する再生音声の音声レベルを視覚的に認識し得るように表示し得るようになされ、これによりオペレータがより直感的にクリップの内容を認識して編集作業を行い得るようになされている。
As described above, in the
（２−２）映像表示部拡大表示処理手順
ここで、実際上、ＣＰＵ９３は、上述のような映像表示部１０１（１０１Ｆ〜１０１Ａ〜１０１Ｖ）に表示された再生映像に付随する再生音声の音声レベルに応じて必要な映像表示部１０１（１０１Ｆ〜１０１Ａ〜１０１Ｖ）を拡大表示させる処理を、ＲＯＭ９４（図１）に格納された制御プログラムに基づき、図３０に示す映像表示部拡大表示処理手順ＲＴ４に従って実行する。
(2-2) Video Display Unit Enlargement Display Processing Procedure Here, in practice, the
すなわちＣＰＵ９３は、図９に示す再生処理手順ＲＴ１に従ってクリップの再生映像を映像表示部群１００に表示させ終えると、図９を用いた上述の表示変更処理手順ＲＴ２及び図２５について上述した編集操作応答処理手順ＲＴ３と並行してこの映像表示部拡大表示処理手順ＲＴ４をステップＳＰ３０において開始し、続くステップＳＰ３１において、信号処理部９２から供給される、対応する映像表示部群１００の１つの映像表示部１０１について、表示フレーム（例えば、１フレーム分）に付随する音声のピークレベルを取得する。
That is, when the
続いてＣＰＵ９３は、ステップＳＰ３２に進んで、そのピークレベルが予め設定された閾値Ｔｈｄよりも大きいか否かを判断し、否定結果を得るとステップＳＰ３１に戻る。
Subsequently, the
これに対してＣＰＵ９３は、ステップＳＰ３２において肯定結果を得ると、ステップＳＰ３３に進んで、そのとき取得したその映像表示部１０１についてのピークレベルに基づいて拡大率を算出し、この後ステップＳＰ３４に進んで、この算出結果に基づいて信号処理部９２を制御する。かくして、このとき編集画面５０の帯状表示部５５に表示された対応する映像表示部群１００の対応する映像表示部１０１（１０１Ｆ〜１０１Ａ〜１０１Ｖ）が、通常時の大きさ（ピークレベルが閾値Ｔｈｄ以下の場合の大きさ）と比べてステップＳＰ３３で算出した拡大率に応じた大きさに拡大されて表示される。
In contrast, if the
次いでＣＰＵ９３は、ステップＳＰ３１に戻って、この後対象とする映像表示部１０１（１０１Ｆ〜１０１Ａ〜１０１Ｖ）を順次循環的に代えながら、ステップＳＰ３１〜ステップＳＰ３４を同様に処理する。
Next, the
このようにしてＣＰＵ９３は、対応する映像表示部群１００の各映像表示部１０１に表示された再生映像に付随する音声の音声レベルが大きいときに、その映像表示部１０１（１０１Ｆ〜１０１Ａ〜１０１Ｖ）をその音声レベルに応じた大きさに表示させる。
In this way, when the audio level of the audio accompanying the reproduced video displayed on each
（２−３）第２の実施の形態の動作及び効果
以上の構成において、この編集システム９０の編集装置９１では、映像表示部群１００内の各映像表示部１０１（１０１Ｆ〜１０１Ａ〜１０１Ｖ）にそれぞれ表示されている再生映像に付随する再生音声の音声レベルに応じて、当該音声レベルが大きいときには、これに応じて対応する映像表示部１０１（１０１Ｆ〜１０１Ａ〜１０１Ｖ）も大きく表示する。
(2-3) Operation and Effect of Second Embodiment In the above configuration, in the editing device 91 of the
そしてこのような映像表示方法によれば、映像表示部群１００の各映像表示部１０１（１０１Ｆ〜１０１Ａ〜１０１Ｖ）の大きさに基づいてそのとき各映像表示部１０１（１０１Ｆ〜１０１Ａ〜１０１Ｖ）にそれぞれ表示されている再生映像に付随する再生音声の音声レベルも目視により認識できるため、映像と音声とを連携させた編集を容易に行うことができる。
And according to such a video display method, based on the size of each video display unit 101 (101F to 101A to 101V) of the video
以上の構成によれば、映像表示部群１００内の各映像表示部１０１（１０１Ｆ〜１０１Ａ〜１０１Ｖ）にそれぞれ表示されている再生映像に付随する再生音声の音声レベルに応じて、当該音声レベルが大きいときには、これに応じて対応する映像表示部１０１（１０１Ｆ〜１０１Ａ〜１０１Ｖ）も大きく表示するようにしたことにより、映像と音声とを連携させた編集を容易に行い得るようにすることができ、かくして第１の実施の形態による編集システムに比べてより一層と編集作業を容易化させ得る編集システムを実現できる。
According to the above configuration, the audio level is set according to the audio level of the reproduced audio associated with the reproduced video displayed on each of the video display units 101 (101F to 101A to 101V) in the video
（３）他の実施の形態
なお上述の第１及び第２の実施の形態においては、本発明をノンリニア編集装置である編集装置２１、２０１及び２５１に適用するようにした場合について述べたが、本発明はこれに限らず、この他種々の形態の編集装置や、編集装置以外の種々の映像表示制御装置に広く適用することができる。
(3) Other Embodiments In the first and second embodiments described above, the case where the present invention is applied to the
また上述の第１及び第２の実施の形態においては、映像表示部群５８、１００の各映像表示部５７、１０１にそれぞれ再生映像を表示するに際して、その都度、記憶装置２２を制御して対応するクリップの映像音声信号Ｓ４を読み出させるようにした場合について述べたが、本発明はこれに限らず、例えば信号処理部３４内にバッファメモリを設け、映像表示部群５８、１００の各映像表示部５７、１０１にそれぞれ再生映像を表示するに際しては、対応するクリップの映像音声信号Ｓ４を記憶装置２２から１度だけ読み出してこれをバッファメモリに保持し、その後このバッファメモリに保持された映像音声信号Ｓ４に基づいて、映像表示部群５８、１００の各映像表示部５７、１０１に再生映像を表示するようにしても良い。なおこの場合には、１又は複数の映像素材の映像情報を記憶する記憶手段は記憶装置２２及びかかるバッファメモリから構成されることとなる。また、第１及び第２の実施の形態においては、記憶装置２２に、映像音声信号を保存する説明を行ったがハードディスク装置３３に全てあるいは一部を保存しても良い。
Further, in the first and second embodiments described above, when the playback video is displayed on the
さらに上述の第１及び第２の実施の形態においては、複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）を楕円状に３次元的に湾曲させて連続的に並べた帯状表示部５５を一つだけ編集画面５０に設けるようにした場合について述べたが、本発明はこれに限らず、図３１に示すように、映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）及び映像表示部群５８を構成する表示領域の数（この場合４個）に応じてクリップ全体を時間軸上で４分割してそれぞれが帯状表示部５５Ａ〜５５Ｄの表示領域に表示されてなる帯状表示部５５を編集画面５０に設けるようにしても良い。この場合ＣＰＵ３０は、帯状表示部５５Ａ〜５５Ｄの各表示領域に表示すべき４分割された映像表示部５７の部分をそれぞれ独立して制御して表示するようにする。
Furthermore, in the first and second embodiments described above, a single band-shaped
この帯状表示部５５Ａでは、画面下部に再生、停止、一時停止、早送り、早戻し等の各種操作ボタン群５５Ａ１が設けられ、その下部に全体の１／４時間に相当するクリップ部分の再生タイミング表示バー５５Ａ２が設けられると共に、その下部のタイムライン上にスライダー５５Ａ３が設けられ、帯状表示部５５Ｂ、帯状表示部５５Ｃ及び帯状表示部５５Ｄに対しても同様の各種操作ボタン群５５Ｂ１、５５Ｃ１及び５５Ｄ１、再生タイミング表示バー５５Ｂ２、５５Ｃ２及び５５Ｄ２、スライダー５５Ｂ３、５５Ｃ３及び５５Ｄ３が設けられている。
In the belt-
特に、再生タイミング表示バー５５Ａ２、５５Ｂ２、５５Ｃ２及び５５Ｄ２については、画面最下部分の表示エリア５５Ｅに全てが時系列に沿って一本化された状態で表示され、そのうち例えば再生タイミング表示バー５５Ｃ２が選択されると、図３２に示すように、表示エリア５５Ｅの上に帯状表示部５５Ｃが拡大表示されるようになされている。
In particular, the playback timing display bars 55A2, 55B2, 55C2, and 55D2 are all displayed in a time series in the
なお再生タイミング表示バー５５Ａ２、５５Ｂ２、５５Ｃ２及び５５Ｄ２では、現在、複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示されている再生映像の部分が１／４時間のうちのどの辺に相当するのかを白抜エリアＷＥによって表現すると共に、その中でユーザにより選択された強調表示されている映像表示部５７Ａ及び５７Ｄに対応する部分を所定色のバーＢ１及びＢ２によって示すようになされている。これにより編集システム２０及び９０では、４つの帯状表示部５５Ａ、帯状表示部５５Ｂ、帯状表示部５５Ｃ及び帯状表示部５５Ｄを介して１度に４つの時間範囲のクリップ部分に相当する再生映像をユーザに対して提示し得、編集作業の効率化を促進し得るようになされている。
In the playback timing display bars 55A2, 55B2, 55C2, and 55D2, the portion of the playback video currently displayed on the plurality of video display units 57 (57F to 57A to 57V) corresponds to which side of the 1/4 hour. This is expressed by a white area WE, and portions corresponding to the highlighted
さらに上述の第１及び第２の実施の形態においては、複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）を楕円状に３次元的に湾曲させて連続的に並べるようにした場合について述べたが、本発明はこれに限らず、図３３（Ａ）に示すように、複数の映像表示部５７（５７Ｈ〜５７Ａ〜５７Ｔ）を直線的に複数行及び複数列に順次生成し、各太矢印に示す方向へ順番に連続的に並べるようにしても良い。 Further, in the first and second embodiments described above, a case has been described in which a plurality of video display units 57 (57F to 57A to 57V) are curved in an elliptical manner in a three-dimensional manner and continuously arranged. However, the present invention is not limited to this, and as shown in FIG. 33A, a plurality of video display units 57 (57H to 57A to 57T) are sequentially generated in a plurality of rows and columns, and each thick arrow is displayed. May be arranged in order in the direction shown in FIG.
この場合、編集システム２０及び９０では、画面サイズにもよるがクリップを構成する全ての再生映像を同一サイズで表示することができるので、一度に全ての再生映像を均一な状態でユーザに目視確認させることができ、いずれの再生映像についても見難いという印象をユーザに抱かせることはない。
In this case, in the
なお編集システム２０及び９０では、図３３（Ｂ）に示すように、例えば５つの映像表示部５７Ｈ〜５７Ｄまでの１行を単位とするカーソルＣＫ１と、各映像表示部（５７Ｈ〜５７Ａ〜５７Ｔ）の一つを単位とするカーソルＣＫ２とを連携させてユーザが希望するシーンを選択させ得るようになされており、このときカーソルＣＫ１によって選択された５つの映像表示部５７Ｆ〜５７Ｂを全て同じ見易さでユーザに提示することができる。
In the
さらに上述の第１及び第２の実施の形態においては、複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）を楕円状に３次元的に湾曲させて連続的に並べて帯状表示部５５に表現するようにした場合について述べたが、本発明はこれに限らず、図３４に示すように、複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）を奥行方向から手前方向へ順次向かってくるように連続的に並べ、最も手前側に位置した映像表示部５７Ａの再生映像を最終的には手前側に倒して消滅させるよう帯状表示部５５に表現するようにしても良い。
Furthermore, in the above-described first and second embodiments, the plurality of video display units 57 (57F to 57A to 57V) are curved in an elliptical shape three-dimensionally and continuously arranged to be expressed in the belt-
このとき編集装置２１、２０１及び２５１では、例えば映像表示部５７Ｂ及び５７Ｅに対してその時点における１０分や１５分の再生経過時間の数字（「１０」、「１５」）を表示することにより、クリップの時間的な流れをユーザに対して直感的に提示するようにしても良い。この場合も編集装置２１、２０１及び２５１では、複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示する再生映像の再生速度ｖ及び再生時間差ΔＴを任意に設定することにより、ユーザにとって編集し易い帯状表示部５５を提供することができる。
At this time, the
さらに上述の第１及び第２の実施の形態においては、複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）を楕円状に３次元的に湾曲させて連続的に並べて帯状表示部５５に表現するようにした場合について述べたが、本発明はこれに限らず、図３５に示すように、複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）を奥行方向から手前方向へ順次向かってくるように連続的に並べ、最も手前側に位置した映像表示部５７Ａの再生映像を順次反転させて奥行方向へ戻っていくよう帯状表示部５５に表現するようにしても良い。
Furthermore, in the above-described first and second embodiments, the plurality of video display units 57 (57F to 57A to 57V) are curved in an elliptical shape three-dimensionally and continuously arranged to be expressed in the belt-
このとき編集装置２１、２０１及び２５１では、例えば映像表示部５７Ｖ、５７Ｙ、５７Ｂ及び５７Ｅに対してその時点における０分、５分、１０分及び１５分の再生経過時間の数字（「０」、「５」、「１０」）「１５」）を表示することにより、クリップの時間的な流れをユーザに対して直感的に提示するようにしても良い。この場合も編集装置２１、２０１及び２５１では、複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示する再生映像の再生速度ｖ及び再生時間差ΔＴを任意に設定することにより、ユーザにとって編集し易い帯状表示部５５を提供することができる。
At this time, the
さらに上述の第１及び第２の実施の形態においては、複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）を楕円状に３次元的に湾曲させて連続的に並べて帯状表示部５５に表現するようにした場合について述べたが、本発明はこれに限らず、図３６に示すように、両手の間で左手から右手の方向へ映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）の再生画像を時系列に順次飛ばすよう帯状表示部５５に表現するようにしても良い。
Furthermore, in the above-described first and second embodiments, the plurality of video display units 57 (57F to 57A to 57V) are curved in an elliptical shape three-dimensionally and continuously arranged to be expressed in the belt-
この場合、編集装置２１、２０１及び２５１では、図３７に示すように左手の掌を奥行方向へ倒すように操作されたことを認識すると、複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に対する再生映像を時系列に流す速度に応じて手前側から奥行側へ倒れるように表示角度を変更して順次飛ばすように連動表示し、図３８に示すように左手の掌を手前方向へ倒すように操作されたことを認識すると、複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に対する再生映像を奥行側から手前側へ倒れるように表示角度を変更して順次飛ばすように連動表示することができる。
In this case, when the
因みに編集装置２１、２０１及び２５１は、例えば映像表示部５７Ｂに対して時系列に流す速度の状態を表すその時点における１０分の再生経過時間の数字（「１０」）を速度表示データとして表示することにより、クリップの時間的な流れをユーザに対して直感的に認識させるようにしても良い。この場合も編集装置２１、２０１及び２５１では、複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示する再生映像の再生速度ｖ及び再生時間差ΔＴを任意に設定することにより、ユーザにとって編集し易い帯状表示部５５を提供することができる。
For example, the
さらに上述の第１及び第２の実施の形態においては、複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）を楕円状に３次元的に湾曲させて連続的に並べて帯状表示部５５に表現するようにした場合について述べたが、本発明はこれに限らず、図３９（Ａ）及び（Ｂ）に示すように、複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）の再生画像が奥行側から手前側へあたかも滑り台を順次滑り落ちるよう帯状表示部５５に表示するようにしても良い。
Furthermore, in the above-described first and second embodiments, the plurality of video display units 57 (57F to 57A to 57V) are curved in an elliptical shape three-dimensionally and continuously arranged to be expressed in the belt-
この場合、編集装置２１、２０１及び２５１は、既に表示し終わった映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）の再生画像については順次積み上げて表示すると共に、これから表示予定の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）の再生映像についても複数枚分を重ねられた状態で表示するようになされているため、現在表示している再生映像部分がクリップ全体のどの辺りであるかを直感的に認識させ得るようになされている。
In this case, the
因みに編集装置２１、２０１及び２５１は、これとは逆に、右側に積み重ねられた映像表示部５７の再生映像があたかも滑り台を順次駆け上るように帯状表示部５５に表現するようにしても良い。
Incidentally, on the contrary, the
さらに上述の実施の形態においては、図１０に示したように映像表示部群５８内の各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）にそれぞれ表示された再生映像のうちのそのとき所望のシーンを表示している映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）をクリック（この場合、例えば最初に映像表示部５７Ｄをクリック）することによって、その映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）が編集操作に伴う編集位置に対応した再生映像であることを所定色に着色して強調表示するようにした場合について述べたが、本発明はこれに限らず、シーンチェンジに対応する表示映像データを映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）に表示する際、そのシーンチェンジの表示映像データを表示する映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）だけを強調表示するようにしても良い。
Further, in the above-described embodiment, as shown in FIG. 10, a desired scene at that time among the reproduced videos respectively displayed on the video display units 57 (57F to 57A to 57V) in the video
さらに上述の実施の形態においては、キーボード３８やマウス３９を介して設定や編集等の入力操作等を行うようにした場合について述べたが、本発明はこれに限らず、ゲームコントローラ等を介して種々の入力操作を行うようにしても良い。
Furthermore, in the above-described embodiment, the case where the input operation such as setting and editing is performed via the
さらに上述の第１及び第２の実施の形態においては、映像表示部群５８、１００の手前中央部に表示される映像表示部５７Ａ、１０１Ａを最も大きく、かつこれから離れるにつれて徐々に小さくなるように各映像表示部５７、１０１を表示することにより、映像表示部群５８の手前中央の映像表示部５７Ａ、１０１Ａに近づくほど注目度を向上させるようにした場合について述べたが、本発明はこれに限らず、これに加えて例えば手前中央部の映像表示部５７Ａ、１０１Ａから距離が離れるにつれて解像度を下げ、各映像表示部５７、１０１の配置間隔を狭め又はぼかすように各映像表示部５７、１０１に再生映像を表示するようにしても良い。このようにすることによって、より一層と映像表示部群５８の手前中央の映像表示部５７Ａ、１０１Ａに近づくほど注目度を向上させ得ることができる。なお、映像表示部複数の映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｖ）群５８の手前中央の映像表示部５７Ａ、１０１Ａに近づくほど注目度を向上させる手法としては、この他種々の手法を広く適用することができる。
Further, in the first and second embodiments described above, the
さらに上述の第１及び第２の実施の形態においては、手前側の映像表示部５７、１０１と後側の映像表示部５７、１０１とが重なる部分では後側の映像表示部５７、１０１が透けて表示されるようにした場合について述べたが、本発明はこれに限らず、透けて表示することにより見難くなる場合には、後側の映像表示部５７、１０１が透けて表示されるのではなく手前側の映像表示部５７、１０１によって隠れるように表示ようにしても良い。
Furthermore, in the first and second embodiments described above, the rear
さらに上述の第１及び第２の実施の形態においては、映像表示部群５８、１００の各映像表示部５７、１０１に表示する再生映像間の再生時間差ΔＴや各再生映像の再生速度ｖをすべての再生映像間及び再生映像について一定とするようにした場合について述べたが、本発明はこれに限らず、これを再生映像間ごとに又は再生映像ごとに独立に設定できるようにしても良い。
Furthermore, in the first and second embodiments described above, the reproduction time difference ΔT between the reproduced images displayed on the respective
この場合には、表示画面上において各映像表示部５７、１０１にそれぞれ表示される再生映像の再生速度ｖや各映像表示部５７、１０１にそれぞれ表示される再生映像の再生時間差ΔＴを、表示画面上における各映像表示部５７、１０１の座標位置（絶対座標位置）に応じて再生制御するようにすれば良い。具体的には、ＣＰＵ３０、９３が、表示画面上における各映像表示部５７、１０１の座標値をそれぞれ検出すると共に、この検出結果に基づいて、各映像表示部５７、１０１に表示する再生映像の再生速度ｖや各映像表示部５７、１０１にそれぞれ表示される再生映像の再生時間差ΔＴがそのときの設定値となるように記憶装置２２を制御するようにする。具体的な再生時間差ΔＴの座標位置による変更の方法としては、映像表示部群５８、１００の手前中央部に表示される映像表示部５７Ａから離れ奥にいくほど再生時間差ΔＴを大きくする。視覚効果として、右奥から高速に画像が飛んできて手前部分ではスピードを落とし、再び、左奥へ行くほど高速に消えていくように見える。
In this case, the playback speed v of the playback video displayed on the
またユーザの所定の操作入力によって映像表示部５７、１０１や映像表示部群５８、１００の位置が変更（移動）された場合には、ＣＰＵ３０、９３がこれに応じてディスプレイ４０上における映像表示部５７、１０１や映像表示部群５８、１００の表示位置を変更する一方で、変更後の映像表示部５７、１０１や映像表示部群５８、１００の座標位置を順次検出して、その座標位置の変化に応じて各映像表示部５７、１０１に表示させる再生映像の再生速度ｖや再生時間差ΔＴを制御するようにすれば良い。またＣＰＵ３０、９３の一部機能として再生状態を検出する再生状態検出機能を搭載するようにしても良い。なお再生状態とは、再生速度、再生時刻（映像素材中の相対時刻等）のパラメータの集合などが考えられる。
Further, when the positions of the
さらに上述の第１及び第２の実施の形態においては、映像表示部群５８、１００の各映像表示部５７、１０１にそれぞれ表示される再生映像の再生速度ｖ及び再生時間差ΔＴがユーザ操作に応じて変更できるようにした場合について述べたが、本発明はこれに限らず、例えば可変ビットレートで圧縮符号化された映像を再生する場合に、発生符号量が多い高ビットレートで圧縮符号化された部分は動きの速い映像部分と推測することができることから、その部分では映像をゆっくりと確認できるように再生速度ｖを及び又は再生時間差ΔＴを小さくする一方、発生符号量が少ない低ビットレートで圧縮符号化された部分は動きが少ない映像部分と推測することができることから、その部分では映像をある程度速く流すように再生速度ｖ及び又は再生時間差ΔＴを大きくするようにしても良い。このようにすることによってオペレータにとって再生映像を目視確認し易く、かつ編集し易いように映像を表示することができる。なお、この場合の再生及び表示制御は、発生符号量等の閾値を予めメニュー画面等から設定する、又は編集システムにおいて自動的に制御するようにしても良い。
Furthermore, in the first and second embodiments described above, the playback speed v and the playback time difference ΔT of the playback video displayed on the
さらに上述の第１及び第２の実施の形態においては、帯状表示部５５内に映像表示部群５８、１００のみを表示するようにした場合について述べたが、本発明はこれに限らず、帯状表示部５５内に映像表示部群５８、１００に沿ってタイムスケールを表示するようにしても良い。このようにすることによって編集映像音声の時間情報を容易に確認できるようにすることができる。
Furthermore, in the above-described first and second embodiments, the case where only the video
さらに上述の第１及び第２の実施の形態においては、タイムライン部５３を補助的に設けるようにした場合について述べたが、本発明はこれに限らず、タイムライン部５３を時間軸表示用としての機能をもたせるようにしても良い。この場合には、映像表示部群５８、１００の基準映像表示部５７Ａにそのとき表示されている再生映像が、対応するクリップ全体のどの部分に相当するかをタイムライン部５３に表示するような機能をもたせるようにすれば良い。
Further, in the first and second embodiments described above, the case where the
さらに上述の第１及び第２の実施の形態においては、図１９〜図２４について上述した操作を行うごとに、当該操作に応じた加工処理の処理結果を、かかる表示形態と同じ表示形態で編集画面５０の帯状表示部５５内に順次表示するようにした場合について述べたが、この場合において、例えば直前の編集内容を自動的にバックアップしておき、かかる操作後にその操作直前の状態に戻れるようにしても良い。
Further, in the first and second embodiments described above, each time the operation described above with reference to FIGS. 19 to 24 is performed, the processing result of the processing according to the operation is edited in the same display form as the display form. The case where the images are sequentially displayed in the belt-
さらに上述の第１及び第２の実施の形態においては、キーボード３９の方向キー７０の「上（↑）」キー７０Ｕを押圧操作し、又はマウス３８の右ボタンを押圧した状態で、カーソル７１によって映像表示部群５８、１００に表示された再生映像の一部を、その映像表示部群５８に沿って左方向に引くように当該カーソル７１を移動させる操作を行ったときに、その映像表示部群５８、１００内の各映像表示部５７、１０１にそれぞれ表示される再生映像の再生速度ｖが増加し、かつこれと連携して隣接する映像表示部５７、１０１間における再生映像の再生時間差ΔＴが増加するようにした場合について述べたが、本発明はこれに限らず、例えばかかる再生速度ｖ及び再生時間差ΔＴのいずれか一方のみが増加するように編集装置２１を構築するようにしても良い。
Further, in the first and second embodiments described above, the
同様に、上述の第１及び第２の実施の形態においては、キーボード３９の方向キー７０の「下（↓）」キー７０Ｄを押圧操作し、又はマウス３８の右ボタンを押圧した状態で、カーソル７１によって映像表示部群５８、１００に表示された再生映像の一部を、その映像表示部群５８、１００に沿って右方向に引くように当該カーソル７１を移動させる操作を行ったときに、その映像表示部群５８内の各映像表示部５７、１０１にそれぞれ表示される再生映像の再生速度ｖが減少し、かつこれと連携して隣接する映像表示部５７、１０１間における再生映像の再生時間差ΔＴが減少するようにした場合について述べたが、本発明はこれに限らず、例えばかかる再生速度ｖ及び再生時間差ΔＴのいずれか一方のみが減少するように編集装置２１を構築するようにしても良い。
Similarly, in the first and second embodiments described above, the cursor is operated by pressing the “down (↓)” key 70D of the
さらに上述の第１及び第２の実施の形態においては、映像表示部群５８、１００の各映像表示部５７、１０１にそれぞれ表示される再生映像の再生速度ｖ及び再生時間差ΔＴを設定自在とすることにより、映像表示部群５８、１００に表示される再生映像の見た目を変更することができるようにした場合について述べたが、本発明はこれに限らず、再生映像の再生速度ｖ及び再生時間差ΔＴのほかに例えばフレーム・フィールド間隔を数値設定できるようにすることによって、映像表示部群５８、１００に表示される再生映像の見た目を変更することができるようにしても良く、当該再生映像の見た目を変更するパラメータとしてこの他のパラメータを設定自在とするようにしても良い。
Furthermore, in the first and second embodiments described above, the playback speed v and playback time difference ΔT of the playback video displayed on the
さらに上述の第１の実施の形態においては、図１３（Ａ）又は図１３（Ｂ）について上述した再生映像の瞬間送り又は瞬間戻し操作の結果、その映像表示部群５８の各映像表示部５７の表示位置を、当該映像表示部群５８に沿って、引かれた方向にカーソル７１と一体に移動表示することにより、それまでその映像表示部群５８の各映像表示部５７に表示していた再生映像があたかも瞬時に未来側又は過去側に送られたように見せるようにした場合について述べたが、本発明はこれに限らず、各映像表示部５７の表示位置は変えずに、かかる操作が入力されたときに各映像表示部５７に表示した映像のみを瞬間的に早送り又は戻すようにして、各映像表示部５７に表示していた再生映像をあたかも瞬時に未来側に進み又は過去側に戻したように見せるようにしても良い。
Furthermore, in the first embodiment described above, as a result of the instantaneous playback or instantaneous return operation of the playback video described above with reference to FIG. 13 (A) or FIG. 13 (B), each
さらに上述の第２の実施の形態においては、再生音声の音声レベルのピークレベルが予め設定された閾値Ｔｈｄよりも大きいときにのみ、そのフレームの画像を表示する際に、対応する映像表示部１０１を通常表示すべき大きさよりも大きく表示させるようにした場合について述べたが、本発明はこれに限らず、かかる閾値Ｔｈｄを設定することなく、対応する再生音声の音声レベルに応じて各映像表示部１０１を拡大又は縮小させるように表示するようにしても良い。
Furthermore, in the above-described second embodiment, the corresponding
さらに上述の第２の実施の形態においては、再生音声の音声レベルのピークレベルを閾値Ｔｈｄよりも大きいときに、そのフレームの画像を表示する際に、対応する映像表示部１０１を通常表示すべき大きさよりも大きく表示させるようにした場合について述べたが、本発明はこれに限らず、音声レベルの平均を閾値Ｔｈｄと比較して、平均が閾値Ｔｈｄよりも大きいときにはその映像表示部１０１を拡大表示する一方、当該平均が閾値Ｔｈｄよりも小さいときにはその映像表示部１０１を縮小表示するようにしても良い。
Further, in the second embodiment described above, when the peak level of the sound level of the reproduced sound is larger than the threshold value Thd, the corresponding
さらに上述の第１及び第２の実施の形態においては、図６においてフォワード方向再時に右から左へ流れるように映像表示部５７を表示するようにした場合について述べたが、本発明はこれに限らず、ユーザの設定により流れる方向を任意に切り換えられるようにし、映像素材によっては左から右へ流れる場合を正方向として左から右へ流れるように映像表示部５７を表示するようにしても良い。
Further, in the first and second embodiments described above, the case where the
さらに上述の第１及び第２の実施の形態においては、各映像表示部５７を固定した状態で表示するようにした場合について述べたが、本発明はこれに限らず、各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｗ）の表示映像の再生速度ｖが極めて低速時でかつ再生時間差ΔＴが１フレーム以下の場合、各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｗ）に表示中の画像については更新することなく各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｗ）全体を再生方向へ向かって動かしていくかのように各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｗ）の位置を順次ずらすことにより、低速再生時に一段と滑らかな動きの画像表示群を目視確認させるようにしても良い。
Furthermore, in the first and second embodiments described above, the case where each
例えば編集装置２１、２０１及び２５１では、図４０（Ａ）及び（Ｂ）に示すように、各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｗ）の画像についてはそれぞれ更新することなく停止させた状態で、各映像表示部５７（５７Ｆ〜５７Ａ〜５７Ｗ）の位置を隣へずらすことにより一斉に１コマずつ右側から左側へシフトしているかのような低速の動きを表現することができる。
For example, in the
さらに上述の第１及び第２の実施の形態においては、図２４で示したように編集点に対するエフェクト操作の方法としては、イン点及びアウト点において、同時に、エフェクト処理を行うようにした場合について述べたが、本発明はこれに限らず、イン点及びアウト点に対して個別にエフェクト設定できるようにしてもよい。具体的には、図２４（Ｂ）において、エフェクトアイコン１３を選択後、イン点のフレーム付近にドラッグアンドドロップすることによりイン点側の設定を、アウト点のフレーム付近にドラッグアンドドロップすることによりアウト点側の設定を行う。
Furthermore, in the first and second embodiments described above, as shown in FIG. 24, the effect operation method for the edit point is the case where effect processing is performed simultaneously at the In point and the Out point. As described above, the present invention is not limited to this, and effects may be individually set for the in point and the out point. Specifically, in FIG. 24B, after the
なお、このときのエフェクト効果がかかるフレームの前後数フレームやエフェクト効果がかかるフレームの前後数秒間に関してもエフェクト処理を行うことができ、ユーザが事前に設定しておく方法と、エフェクト設定後に調整する方法の両者を選択させるようにしておく。後者の具体的な方法としては、編集点のエフェクトフレームをシフトキーを押下しながらクリック後、シフトキーを押下したままエフェクト区間を延ばす、あるいは縮める先のフレームをクリックすることにより可能とすることができる。 In addition, the effect processing can be performed for several frames before and after the frame to which the effect effect is applied and for several seconds before and after the frame to which the effect effect is applied, and a method set in advance by the user and an adjustment after the effect setting are performed. Try to select both methods. As a specific method of the latter, it can be made possible by clicking an effect frame at an edit point while pressing the shift key, and then extending the effect section while pressing the shift key or clicking a frame to be shortened.
さらに上述の第１及び第２の実施の形態においては、本発明を図１のように構成された編集装置２１、図２６のように構成された編集装置２０１及び図２７のように構成された編集装置２５１に適用するようにした場合について述べたが、本発明はこれに限らず、編集装置としての機能の提供が可能な画像処理装置であれば、この他種々の構成の画像処理装置に広く適用することができる。なおこの画像処理装置には、例えばコンピュータ、ビデオカメラ、ディジタルカメラ、ゲーム機器、携帯情報端末（携帯型のコンピュータ、携帯電話機、携帯型ゲーム機器）、ストレージ機器（例えば光ディスク装置、ホームサーバ）、発明に係る機能を搭載した処理ボードや処理カードが含まれる。なお、いずれの画像処理装置の場合にも、筐体と、信号処理部と、外部インタフェースとを共通構成とし、商品形態に応じた周辺装置が組み合わされて構成される。例えば、ビデオカメラやディジタルカメラであれば、前述の構成に加え、カメラユニットや撮像された映像データを記憶媒体に保存するための書込み回路を有する。また例えば携帯電話機その他の通信機能を有する電子機器であれば、前述の構成に加え、送受信回路やアンテナを有する。
Further, in the first and second embodiments described above, the present invention is configured as an
なお、発明の趣旨の範囲内で上述のほかに様々な変形例が考えられる。また本明細書の記載に基づいて創作される各種の変形例及び応用例も考えられる。 Various modifications other than those described above are possible within the scope of the invention. Various modifications and applications created based on the description of the present specification are also conceivable.
本発明は、ノンリニア編集装置のほか、これ以外の編集装置や、編集装置以外の映像を表示する種々の映像表示制御装置に広く適用することができる。 The present invention can be widely applied to non-linear editing devices, other editing devices, and various video display control devices that display videos other than editing devices.
１３……エフェクトアイコン、２０、９０……編集システム、２１、９１、２０１及び２５１……編集装置、２２……記憶装置、３０、９３……ＣＰＵ、９４……ＲＯＭ、３４、９２……信号処理部、３８……マウス、３９……キーボード、５０……編集画面、５５……帯状表示部、５７、５７Ａ〜５７Ｈ、５７Ｔ〜５７Ｚ、１０１……映像表示部、５８、５８Ａ、５８Ｂ、５８Ｃ、１００……映像表示部群、７０……十字キー、７０Ｕ……上キー、７０Ｄ……下キー、７０Ｌ……左キー、７０Ｒ……右キー。
13 ...
Claims (13)
符号化ストリームを記憶する記憶手段から上記符号化ストリームを読み出す読出手段と、
上記読出手段により読み出された上記符号化ストリームを復号処理し、表示画面上の複数の映像表示部に対して表示させる表示映像データをそれぞれ生成する画像処理手段と、
上記画像処理手段により生成された複数の上記表示映像データを、上記複数の映像表示部の間において動画像の状態で時間差を設けながら、上記複数の映像表示部が表示順に連携した映像表示部群として連動表示させるように上記読出手段及び上記画像処理手段を制御すると共に、上記編集情報取得手段により取得された上記編集情報の内容に応じて上記映像表示部群の表示形態を変更するように上記読出手段及び上記画像処理手段を制御する制御手段と
を具えることを特徴とする画像処理装置。 Editing information acquisition means for acquiring editing information corresponding to the editing operation in response to the editing operation input;
Reading means for reading the encoded stream from the storage means for storing the encoded stream;
Image processing means for decoding the encoded stream read by the reading means and generating display video data to be displayed on a plurality of video display units on a display screen;
A group of video display units in which the plurality of video display units are linked in the display order while providing a time difference in the state of a moving image between the plurality of video display units for the plurality of display video data generated by the image processing means. The reading unit and the image processing unit are controlled so as to be linked and displayed, and the display form of the video display unit group is changed according to the content of the editing information acquired by the editing information acquiring unit. An image processing apparatus comprising: reading means; and control means for controlling the image processing means.
ことを特徴とする請求項１に記載の画像処理装置。 The image processing means acquires display information including a display size and a display position in the plurality of video display units, and performs image processing on data decoded based on the acquired display information, thereby performing the plurality of videos. The image processing apparatus according to claim 1, wherein the display video data corresponding to a display unit is generated.
ことを特徴とする請求項１に記載の画像処理装置。 The control means controls the reading means and the image processing means so that the display video data corresponding to the plurality of video display sections included in the video display section group are displayed in an interlocked manner in a state where each of the display video data is displayed at a variable speed. The image processing apparatus according to claim 1, wherein:
ことを特徴とする請求項１に記載の画像処理装置。 2. The control unit according to claim 1, wherein the control unit controls the reading unit and the image processing unit to display the plurality of display video data in an interlocked manner with the display speeds being equal to each other. Image processing device.
ことを特徴とする請求項３に記載の画像処理装置。 4. The image processing according to claim 3, wherein the control means controls the reading means and the image processing means so as to perform interlocking display while providing time intervals of equal intervals between the plurality of video display units. apparatus.
上記制御手段は、上記編集位置設定操作が入力された場合、上記編集位置に対応する上記表示映像データの表示状態を保持させるように上記読出手段及び上記画像処理手段を制御する
ことを特徴とする請求項１に記載の画像処理装置。 The editing operation input includes an editing position setting operation for setting designated display data to be designated as an editing position among the display video data corresponding to the plurality of video display units included in the video display unit group,
The control means controls the reading means and the image processing means so as to maintain a display state of the display video data corresponding to the edit position when the edit position setting operation is input. The image processing apparatus according to claim 1.
ことを特徴とする請求項６に記載の画像処理装置。 When the editing position setting operation is input, the control unit supports all the video display units included in the video display unit group in conjunction with the display state of the display video data corresponding to the editing position. The image processing apparatus according to claim 6, wherein the reading unit and the image processing unit are controlled to hold a display state of the display video data.
上記制御手段は、上記編集位置設定解除操作が入力された場合、上記編集位置設定操作に応じて保持された上記表示映像データの表示状態を解除し、上記復号手段により生成された複数の上記表示映像データを上記複数の映像表示部の間において動画像の状態で時間差を設けながら、上記複数の映像表示部が表示順に連携した上記映像表示部群として再度連動表示させるように上記読出手段及び上記画像処理手段を制御する
ことを特徴とする請求項６又は７に記載の画像処理装置。 The edit operation input includes an edit position setting cancel operation for canceling the edit position setting operation,
The control means cancels the display state of the display video data held in response to the edit position setting operation when the edit position setting release operation is input, and a plurality of the display generated by the decoding means The reading means and the display unit are configured to display the video data again as the video display unit group in which the video display units are linked in the display order while providing a time difference in a moving image state between the video display units. The image processing apparatus according to claim 6, wherein the image processing unit is controlled.
上記制御手段は、上記編集位置決定操作が入力された場合、上記編集位置に対応する上記表示映像データを基準にして上記映像表示部群の表示形態を分割し、第１の映像表示部群と第２の映像表示部群を生成するように上記読出手段及び上記画像処理手段を制御する
ことを特徴とする請求項６に記載の画像処理装置。 The edit operation input includes an edit position determining operation for determining the edit position after the edit position setting operation is input,
When the edit position determination operation is input, the control unit divides the display form of the video display unit group on the basis of the display video data corresponding to the edit position, and the first video display unit group The image processing apparatus according to claim 6, wherein the reading unit and the image processing unit are controlled so as to generate a second video display unit group.
上記制御手段は、上記編集接続操作が入力された場合、上記第２の映像表示部群を移動させることにより、上記第１の映像表示部群と上記第２の映像表示部群とを接続して、編集映像表示部群を生成するように上記読出手段及び上記画像処理手段を制御する
ことを特徴とする請求項９に記載の画像処理装置。 The edit operation input includes an edit connection operation for connecting the first edit position and the second edit position determined by the edit position determination operation,
The control means connects the first video display unit group and the second video display unit group by moving the second video display unit group when the edit connection operation is input. The image processing apparatus according to claim 9, wherein the reading unit and the image processing unit are controlled so as to generate an edited video display unit group.
符号化ストリームを記憶する記憶手段から上記符号化ストリームを読み出す読出ステップと、
上記読出ステップにより読み出された上記符号化ストリームを復号処理し、表示画面上の複数の映像表示部に対して表示させる表示映像データをそれぞれ生成する表示映像データ生成ステップと、
上記表示映像データ生成ステップにより生成された複数の上記表示映像データを、上記複数の映像表示部の間において動画像の状態で時間差を設けながら、上記複数の映像表示部が表示順に連携した映像表示部群として連動表示させるように上記読出手段及び上記画像処理手段を制御すると共に、上記編集情報取得ステップにより取得された上記編集情報の内容に応じて上記映像表示部群の表示形態を変更するように制御する制御ステップと
を具えることを特徴とする画像処理方法。 An editing information acquisition step for acquiring editing information corresponding to the editing operation according to the editing operation input;
A reading step of reading the encoded stream from storage means for storing the encoded stream;
A display video data generation step for decoding the encoded stream read by the reading step and generating display video data to be displayed on a plurality of video display units on a display screen;
The plurality of display video data generated by the display video data generation step is a video display in which the plurality of video display units cooperate with each other in the display order while providing a time difference in a moving image state between the plurality of video display units. The reading unit and the image processing unit are controlled so as to be linked and displayed as a group of units, and the display form of the video display unit group is changed according to the content of the editing information acquired by the editing information acquisition step. An image processing method comprising: a control step for controlling the image processing.
編集操作入力に応じて編集操作に対応する編集情報を取得する編集情報取得ステップと、
符号化ストリームを記憶する記憶手段から上記符号化ストリームを読み出す読出ステップと、
上記読出ステップにより読み出された上記符号化ストリームを復号処理し、表示画面上の複数の映像表示部に対して表示させる表示映像データをそれぞれ生成する表示映像データ生成ステップと、
上記表示映像データ生成ステップにより生成された複数の上記表示映像データを、上記複数の映像表示部の間において動画像の状態で時間差を設けながら、上記複数の映像表示部が表示順に連携した映像表示部群として連動表示させるように上記読出手段及び上記画像処理手段を制御すると共に、上記編集情報取得ステップにより取得された上記編集情報の内容に応じて上記映像表示部群の表示形態を変更するように制御する制御ステップと
を実行させることを特徴とする画像処理プログラム。 Against the computer,
An editing information acquisition step for acquiring editing information corresponding to the editing operation according to the editing operation input;
A reading step of reading the encoded stream from storage means for storing the encoded stream;
A display video data generation step for decoding the encoded stream read by the reading step and generating display video data to be displayed on a plurality of video display units on a display screen;
The plurality of display video data generated by the display video data generation step is a video display in which the plurality of video display units cooperate with each other in the display order while providing a time difference in a moving image state between the plurality of video display units. The reading unit and the image processing unit are controlled so as to be linked and displayed as a group of units, and the display form of the video display unit group is changed according to the content of the editing information acquired by the editing information acquisition step. An image processing program characterized by causing a control step to be executed to be executed.
符号化ストリームを記憶する記憶手段から上記符号化ストリームを読み出す読出ステップと、
上記読出ステップにより読み出された上記符号化ストリームを復号処理し、表示画面上の複数の映像表示部に対して表示させる表示映像データをそれぞれ生成する表示映像データ生成ステップと、
上記表示映像データ生成ステップにより生成された複数の上記表示映像データを、上記複数の映像表示部の間において動画像の状態で時間差を設けながら、上記複数の映像表示部が表示順に連携した映像表示部群として連動表示させるように上記読出手段及び上記画像処理手段を制御すると共に、上記編集情報取得ステップにより取得された上記編集情報の内容に応じて上記映像表示部群の表示形態を変更するように制御する制御ステップと
を含むことを特徴とするコンピュータが読み取り可能な画像処理プログラムが格納されているプログラム格納媒体。 An editing information acquisition step for acquiring editing information corresponding to the editing operation according to the editing operation input;
A reading step of reading the encoded stream from storage means for storing the encoded stream;
A display video data generation step for decoding the encoded stream read by the reading step and generating display video data to be displayed on a plurality of video display units on a display screen;
The plurality of display video data generated by the display video data generation step is a video display in which the plurality of video display units cooperate with each other in the display order while providing a time difference in a moving image state between the plurality of video display units. The reading unit and the image processing unit are controlled so as to be linked and displayed as a group of units, and the display form of the video display unit group is changed according to the content of the editing information acquired by the editing information acquisition step. A program storage medium storing a computer-readable image processing program, characterized by comprising:
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005228657A JP2006115468A (en) | 2004-09-15 | 2005-08-05 | Apparatus, method, and program for image processing program storing medium |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2004268940 | 2004-09-15 | ||
| JP2005228657A JP2006115468A (en) | 2004-09-15 | 2005-08-05 | Apparatus, method, and program for image processing program storing medium |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2006115468A true JP2006115468A (en) | 2006-04-27 |
Family
ID=36383536
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2005228657A Pending JP2006115468A (en) | 2004-09-15 | 2005-08-05 | Apparatus, method, and program for image processing program storing medium |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2006115468A (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112534804A (en) * | 2018-09-26 | 2021-03-19 | 欧姆龙株式会社 | Image processing system, image processing apparatus, image processing method, and image processing program |
-
2005
- 2005-08-05 JP JP2005228657A patent/JP2006115468A/en active Pending
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112534804A (en) * | 2018-09-26 | 2021-03-19 | 欧姆龙株式会社 | Image processing system, image processing apparatus, image processing method, and image processing program |
| US11671565B2 (en) | 2018-09-26 | 2023-06-06 | Omron Corporation | Image processing system, image processing device, image processing method, and non-transitory computer readable medium storing program |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4727342B2 (en) | Image processing apparatus, image processing method, image processing program, and program storage medium | |
| EP1872268B1 (en) | Icon bar display for video editing system | |
| US6714216B2 (en) | Video editing apparatus and method | |
| KR101252933B1 (en) | User interfaces for editing video clips | |
| JP5524653B2 (en) | Display control apparatus and control method thereof | |
| JP5421627B2 (en) | Video data display apparatus and method | |
| JPWO2007111206A1 (en) | Image processing apparatus and image processing method | |
| JP2008141746A (en) | System and method for playing moving images | |
| US20140193140A1 (en) | System and method for slow motion display, analysis and/or editing of audiovisual content on a mobile device | |
| JP2010288015A (en) | Information processing device, information processing method, and information processing program | |
| US8837912B2 (en) | Information processing apparatus, information processing method and program | |
| US8750685B2 (en) | Image processing apparatus | |
| JP2006115469A (en) | Apparatus, method, and program for image processing program storing medium | |
| JP2007250048A (en) | Image processor, image processing method, image processing program and program storage medium | |
| JPH10200814A (en) | Method and device for image editing, and medium where program for making computer perform image editing process operation is recorded | |
| JP2006115468A (en) | Apparatus, method, and program for image processing program storing medium | |
| CN100474391C (en) | Image processing apparatus and method | |
| JP6117621B2 (en) | Information processing apparatus, information processing method, and information processing program | |
| JP4891520B2 (en) | Video editing device | |
| JP2002016871A (en) | Method and apparatus for editing video as well as recording medium for recording computer program for editing video | |
| JP5023136B2 (en) | Information playback device | |
| JP2009017385A (en) | Motion picture generating apparatus, motion picture generating method and motion picture generating program | |
| JP2006033388A (en) | Display program, display method, display apparatus, and recording medium | |
| JP2008198344A (en) | Information reproducing device | |
| JP2007267396A (en) | Apparatus and method for data processing, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080207 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080222 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080313 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20081211 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20090209 Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090209 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20090312 |