JP3331291B2 - 映像情報編集装置 - Google Patents
映像情報編集装置Info
- Publication number
- JP3331291B2 JP3331291B2 JP07600996A JP7600996A JP3331291B2 JP 3331291 B2 JP3331291 B2 JP 3331291B2 JP 07600996 A JP07600996 A JP 07600996A JP 7600996 A JP7600996 A JP 7600996A JP 3331291 B2 JP3331291 B2 JP 3331291B2
- Authority
- JP
- Japan
- Prior art keywords
- frame
- unit
- position information
- cut point
- video sequence
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
- Controls And Circuits For Display Device (AREA)
Description
関し,特にパーソナルコンピュータまたはワークステー
ション等の表示画面上に,時間的な関連を持つ一連の映
像情報をコミック風に表示するための映像情報(コミッ
ク形式ムービー)を,素材映像シーケンスから編集して
作成する装置に関するものである。
ステーションなどの計算機の表示画面上に,動画像情報
と音声情報とから構成される映像情報を,動画像情報と
音声情報とを同期させながらリアルタイムに表示する手
法として,Quick Time Movie,Video for Windows, SGI
movieなどの映像情報表示方式が提案されている。これ
らの映像情報表示方式を,以後,ムービー方式と呼び,
ムービー方式で用いられる映像情報を単にムービーと呼
ぶことにする。
ーケンスが,独立した一つのムービーとして管理され,
かつムービーの表示画面上での表示枠形状は矩形に固定
されていた。このため従来は,まず素材映像シーケンス
から,切り貼り加工によって必要な映像シーケンスを切
り出し,切り出した映像シーケンスをムービーに変換
し,そのムービーを表示画面上の所望の位置に空間的に
配置していた。
は,映像シーケンスの単純な切り貼り加工処理機能を持
つ一般的な映像情報編集装置,映像シーケンスのムービ
ーへの変換装置,およびムービー(それに図形や文字な
ど)を表示画面上に空間的に配置処理する機能を持つ表
示画面編集装置が必要であり,各作業は独立して流れ作
業的に実行することができた。
ムービーを,表示画面上にコミックのコマのように空間
的に配置された複数の任意形状の表示枠に割り当て,し
かも各ムービーを一連の映像シーケンスとして,コマの
読み順に従って順次再生するコミック形式のムービー方
式が提案されている(特願平7−250355号:映像
情報表示装置)。
像情報編集装置と表示画面編集装置を用いて作成する場
合,以下の手順で行うことになる。 (1) まず,素材映像シーケンスをどのように分割して,
表示画面上にどのように配置するかをあらかじめ設計す
る。
で素材映像シーケンスをM本の映像シーケンスに分割す
る。 (3) さらに,分割された映像シーケンスを,設計に従っ
て表示画面編集装置で所定の大きさ,形状に加工し,表
示画面上の所定の位置に配置する。
る。
を用いてコミック形式ムービーを作成する場合,全体の
設計,映像シーケンスの分割処理,および分割された各
映像シーケンスの表示画面上への加工・配置処理とが完
全に独立することになる。このため,最終的にコミック
形式ムービーを完成して表示画面上で表示してみなけれ
ば,意図通りのものが得られたか否かは制作者には不明
であり,しかも修正する必要が生じた場合には,前述し
た(1) から(4) までの手順をすべてやり直さなくてはな
らないという問題点を有していた。
ムービーでは,隣接する二つのコマの大きさや形状が相
互に関連を有するため,各コマに対応する二つのムービ
ーのうち,片方の形状または大きさを変更した場合,も
う片方のムービーの形状や大きさも同時に変更する必要
が生じる。
式のムービーでは,読み順が連続している二つのコマに
対応するムービーのうち,片方のムービーの開始フレー
ムまたは終了フレームを変更すると,もう片方のムービ
ーの開始フレームまたは終了フレームも変更する必要が
生じる。これらの処理はすべて,関連する各コマに対応
するムービーについて,前述した(1) の手順からやり直
す必要がある。
たコミック形式ムービーの編集作業は,制作者に非常に
大きな負荷を課すものとなっていた。本発明は上記問題
点の解決を図り,制作者に負荷を課すことなく,コミッ
ク形式ムービーのデータを,直感的かつ簡単に制作可能
な映像情報編集装置を実現することを目的としている。
するための本発明の構成例を示す。図1において,1は
表示部であって,映像シーケンス表示部1−2とページ
画像表示部1−5とを持つ。2は映像シーケンス入力
部,3はカット点位置情報入力部,4はコマ情報入力
部,5は命令入力部,6は画像座標入力部,7は映像シ
ーケンス蓄積部,8はカット点位置情報蓄積部,9はコ
マ情報蓄積部,10は編集処理部,11はコミック形式
ムービー生成処理部,12は生成されたコミック形式ム
ービーを出力する出力部を表す。
ケンスを入力する。映像シーケンス蓄積部7は,映像シ
ーケンス入力部2が入力した素材映像シーケンスを蓄積
する。カット点位置情報入力部3は,素材映像シーケン
スのカット点位置情報を入力する。カット点位置情報蓄
積部8は,そのカット点位置情報を蓄積する。コマ情報
入力部4は,コマ形状情報およびコマ位置情報から構成
されるコマ情報を入力する。コマ情報蓄積部9は,コマ
形状情報およびコマ位置情報から構成されるコマ情報を
蓄積する。
点位置情報とコマ情報とを用いて,ページ画像の各コマ
と素材映像シーケンスのカット点位置の対応関係がつく
ように,映像シーケンス表示部1−2に映像シーケンス
を表示し,ページ画像表示部1−5にページ画像を表示
する。
像中のコマの位置座標と,映像シーケンス画像中のフレ
ーム画像の位置座標とを入力すると,各々対応するコマ
識別番号およびフレーム識別番号に変換する。
分割命令,コマ統合命令,コマ拡縮開始命令,コマ拡縮
終了命令,コマ変形開始命令,コマ変形終了命令などの
編集命令を入力する手段である。
ト点変更命令が入力されると,指定されたコマ識別番号
およびフレーム識別番号に基づいて,カット点位置情報
蓄積部8に蓄積されたカット点位置情報を書き換えてカ
ット点変更処理を行う。また,命令入力部5からコマ分
割命令またはコマ統合命令が入力されると,指定された
コマ識別番号に基づいて,カット点位置情報蓄積部8に
蓄積されたカット点位置情報およびコマ情報蓄積部9に
蓄積されたコマ情報を書き換えることにより,ページ画
像におけるコマの分割処理またはコマの統合処理を行
う。
らコマ拡縮開始命令またはコマ変形開始命令が入力され
ると,指定されたコマ識別番号およびコマ拡縮開始命令
またはコマ変形開始命令に応じた操作バー画像を生成し
て表示部1に出力し,その後,命令入力部5からコマ拡
縮終了命令またはコマ変形終了命令が入力されると,現
在の操作バー画像の位置と形状に応じてコマ情報蓄積部
9に蓄積されたコマ情報を書き換えてコマ拡縮処理また
はコマ変形処理を行う。
映像シーケンス蓄積部7に蓄積された編集処理後の映像
素材の映像シーケンスと,カット点位置情報蓄積部8に
蓄積されたカット点位置情報と,コマ情報蓄積部9に蓄
積されたコマ情報とからコミック形式ムービーを生成す
る。この生成されたコミック形式ムービーは,出力部1
2によって,表示装置または外部記憶装置等に出力され
る。
を説明するための図である。コミック形式のムービー
を,直感的かつ簡単に制作するためには,基本的に制作
作業は,映像シーケンスの時間軸方向の編集作業と,表
示画面上での空間方向の編集作業の両者を同時に連携し
て実行する必要がある。
を実現するために,図2に示すように,映像情報編集装
置の基本的な表示画面を,映像シーケンス表示部1−2
とページ画像表示部1−5から構成する。
ーケンス蓄積部7に蓄積された素材映像シーケンスが,
図2に示すようにフレーム単位で表示される。この素材
映像シーケンスは,あらかじめ適当な方法で(例えば,
等フレーム間隔で,または各フレーム間の物理的特徴量
の変化に基づくカット点検出手法によって),N個のカ
ットSi(i=0,…,N−1)に区分されているもの
とする。各カットSiの先頭フレーム識別番号が,カッ
ト点位置情報fiとして,カット点位置情報蓄積部8に
蓄積されている。
は,例えば以下のものがあるが,これに限られるわけで
はない。 [1]K.Otsuji et al., "Projection detecting filte
r for video cut detection," Proc. ACM Multimedia 9
3, ACM Press, New York, 1993, pp.251-257. [2]H.Ueda et al., "Automatic structure visualiz
ation for video editing," Proc. Inter CHI93, ACM P
ress, New York, 1993, pp.137-141. ページ画像表示部1−5には,現在のコミック形式ムー
ビーが初期状態で(すなわち静止状態で)表示される。
初期状態では,図2のような定型的なコマ配置で,N個
のコマがページ画像表示部1−5に配置される。このよ
うに静止画像状態のコミック形式ムービーをページ画像
と呼ぶことにする。
素材映像シーケンスのN個のカットに対応しており,各
カットの先頭フレームの静止画像が対応するページ画像
表示部1−5のコマ内に表示される。また,これらの各
コマの外枠は,それぞれ識別可能なように別個の識別色
等で表示され,各コマに対応する映像シーケンス表示部
1−2の各カットの先頭フレームの外枠も同じ識別色で
表示される。
1)の位置情報piが,コマ位置情報蓄積部9−1に蓄
積され,また各コマCiの形状情報giが,コマ形状情
報蓄積部9−2に蓄積されている。コマの位置情報とし
ては,例えばページ画像表示部1−5におけるコマの左
下隅の絶対座標情報などを用いる。形状情報としては,
例えばコマの位置情報が示す絶対座標を始点とするコマ
の各頂点の相対座標情報などを用いる。
された初期状態のページ画像を見て,あるコマに対応す
るムービーのフレーム開始位置を変更する必要を感じた
場合,映像シーケンス表示部1−2で,そのコマと同じ
識別色の外枠を有するフレームをマウスなどのポインテ
ィングデバイスを用いて指定し,次いで所望のフレーム
開始位置に対応する映像シーケンス表示部1−2上のフ
レームを指定する。
対応するカットのカット点位置情報が新たなフレーム識
別番号に書き換えられ,同時にページ画像表示部1−5
上の指定されたコマに表示されている静止画像も,書き
換えられたフレーム識別番号に対応する新たなフレーム
画像に変更される。すなわち,映像シーケンス表示部1
−2のフレーム開始位置を変更すると,ページ画像表示
部1−5の対応するコマ内のフレーム画像表示と,カッ
ト点位置情報蓄積部8の対応するカット点位置情報とが
連動して書き換わる。
開始位置を変更すると,同時にそのコマに対して読み順
が直前であるコマに対応するカットのフレーム終了位置
も自動的に変更されることになる。
るページ画像表示部1−5上でのページ画像の変化を直
ちに観察可能となるため,即座に編集結果を把握するこ
とが可能となる。
うな定型的なコマ配置のままである。そこで,例えば図
3(a)に示すように,ページ画像表示部1−5上のコ
マC0とC1のコマを統合して大きなコマにしたい場合
には,この両者をポインティングデバイスで指定し,コ
マ統合処理を指示する。
されて,新たなコマC0に変換され,コマC1は消滅す
る。このとき同時に,図3(b)に示すように,カット
点位置情報蓄積部8のカットS1のカット点位置情報f
1を消去することで,映像シーケンス表示部1−2で
も,コマC0に対応するカットS0と,コマC1に対応
するカットS1とが統合されて,新たなカットS0とな
り,カットS1は消滅する。さらに,カット点位置情報
f1に対応するコマ形状情報g1とコマ位置情報p1
も,各々コマ形状情報蓄積部9−2とコマ位置情報蓄積
部9−1から消去される。また,コマC0のコマ形状情
報g0とコマ位置情報p0も,統合後のコマ位置と形状
を表すものに書き換えられる。
は,ページ画像上でコマC0をポインティングデバイス
で指定し,コマ分割処理を指示する。そうすると,図3
(c)のように,コマC0は二分割され,新たなコマC
0とC0’に変換される。このとき同時に,映像シーケ
ンス表示部1−2でも,コマC0に対応するカットS0
は,カットS0とS0’に二分割され,カット点位置情
報蓄積部8にはS0’のフレーム開始位置に対応するカ
ット点位置情報f0’が,コマ位置情報蓄積部9−1に
はコマC0’の位置情報p0’が,そしてコマ形状情報
蓄積部9−2にはコマC0’の形状情報g0’が各々追
加される。また,コマC0の位置情報と形状情報も分割
に伴って変更される。
で,コマの統合・分割を行うと,これに連動して,カッ
ト点位置情報蓄積部8のカット点位置情報を自動的に変
更することが可能となる。
定型的な矩形のままである。そこで,例えばページ画像
表示部1−5上のコマC0とC1の境界部を変形したい
場合には,まず,この両者をポインティングデバイスで
指定し,コマ変形処理を指示する。そうすると,図4
(a)に示すように,コマC0とC1の境界上に操作バ
ー20が表示される。図4(b)に示すように,操作バ
ー20の端部をポインティングデバイスで指定しながら
移動すると,この移動に従って操作バー20がその中点
を支点としながら傾斜する。この傾斜した操作バー20
がコマC0とC1との新たな境界線となり,これに応じ
てコマC0とC1の形状が,図4(c)に示すように変
更される。すなわち,コマC0とC1のコマ形状情報と
コマ位置情報が変更される。
で,その大きさだけを変更したいときには,両者をポイ
ンティングデバイスで指定し,コマ拡縮処理を指示す
る。そうすると,図5(a)に示すように,コマC0と
C1の境界上に操作バー20が表示される。図5(b)
に示すように,操作バー20をポインティングデバイス
で指定しながら移動すると,この移動に従って操作バー
20が平行移動する。この平行移動した操作バー20の
位置が,コマC0とC1との新たな境界線となり,これ
に応じてコマC0とC1の大きさが,図5(c)に示す
ように変更される。すなわち,コマC0とC1の大きさ
変更後のコマ形状情報とコマ位置情報が,コマ形状情報
蓄積部9−2およびコマ位置情報蓄積部9−1に蓄積さ
れる。
作によって,隣接する二つのコマ形状や大きさを一度に
変更することが可能となる。所望のコマ割りを有するコ
ミック形式ムービーになるよう編集した後,映像シーケ
ンス蓄積部7に蓄積されている素材映像シーケンスを,
カット点位置情報蓄積部8に蓄積されているカット点位
置情報に基づいてカット分けし,さらに各カットのペー
ジ画像上でのコマの位置情報piと形状情報giとか
ら,例えば特願平7−250355号の「映像情報表示
装置」に示される手法によって,コミック形式ムービー
を生成することが可能となる。
するページ画像表示部1−5と映像シーケンスを表示す
る映像シーケンス表示部1−2の両者から構成される表
示部1を有し,さらに,ページ画像表示部1−5上での
空間方向の編集結果と映像シーケンス表示部1−2上で
の時間軸方向の編集結果が,相互に必要な影響を与え連
携動作することが可能となっている。したがって,制作
者は,直感的かつ容易にコミック形式ムービーの編集作
業を行うことが可能となる。
ロック図である。図6に示す*A〜*Eは,それぞれ図
7に示す*A〜*Eに接続される。図中,1は表示部で
あって,映像シーケンス表示部1−2,映像シーケンス
画像蓄積部1−3,映像シーケンス画像生成部1−4,
ページ画像表示部1−5,ページ画像蓄積部1−6,ペ
ージ画像生成部1−7,コマ識別色情報蓄積部1−8か
ら構成される。
表示部1−5は,CRTなどの表示装置上におけるあら
かじめ確保された表示領域である。コマ識別色情報蓄積
部1−8には,あらかじめ各コマCiに一意に付された
コマ識別番号によってアクセス可能な各コマCi毎に異
なるコマ識別色情報が蓄積されている。
位置情報入力部である。4はコマ情報入力部であって,
コマ位置情報入力部4−1とコマ形状情報入力部4−2
から構成される。5は命令入力部である。6は画像座標
入力部であって,ページ画像座標入力部6−1,ページ
画像座標アドレス変換部6−2,第一アドレス蓄積部6
−3,第二アドレス蓄積部6−4,映像シーケンス座標
入力部6−5,映像シーケンス座標アドレス変換部6−
6,フレームアドレス蓄積部6−7から構成される。
かじめ素材映像シーケンスを構成するM個のフレーム画
像に先頭から順番に付されたフレーム番号によってアク
セス可能なフレーム画像蓄積部7−1〜Mから構成され
る。8はカット点位置情報蓄積部であって,コマ識別番
号によってアクセス可能なN個の単位カット点位置情報
蓄積部8−1〜Nから構成され,初期状態では,各単位
カット点位置情報蓄積部8−1〜Nには,あらかじめ空
白情報が蓄積されている。
報蓄積部9−1とコマ形状情報蓄積部9−2から構成さ
れる。コマ位置情報蓄積部9−1は,コマ識別番号によ
ってアクセス可能なN個の単位コマ位置情報蓄積部9−
1−1〜Nから構成される。各単位コマ位置情報蓄積部
9−1−1〜Nには,あらかじめ空白情報が蓄積されて
いる。コマ形状情報蓄積部9−2も,コマ識別番号によ
ってアクセス可能なN個の単位コマ形状情報蓄積部9−
2−1〜Nから構成され,各単位コマ形状情報蓄積部9
−2−1〜Nには,あらかじめ空白情報が蓄積されてい
る。
処理部10−1,コマ統合処理部10−2,コマ分割処
理部10−3,コマ変形処理部10−4,コマ拡縮処理
部10−5,ソート処理部10−6,操作バー画像生成
部10−7,操作バー位置情報蓄積部10−8,操作バ
ー形状情報蓄積部10−9から構成される。11はコミ
ック形式ムービー生成処理部,12は出力部である。
ず,映像シーケンス入力部2から素材映像シーケンスを
フレーム画像毎に順次入力する。映像シーケンス入力部
2は素材映像シーケンスが入力されると,素材映像シー
ケンスの各フレーム画像を,映像シーケンス蓄積部7の
各フレーム画像蓄積部7−1〜Mに頭から順に蓄積す
る。
スのカット点位置情報,すなわちカット点に対応するフ
レーム画像のフレーム識別番号を,カット点位置情報入
力部3に順次入力する。カット点位置情報入力部3は,
入力されたフレーム識別番号を,順次カット点位置情報
蓄積部8の単位カット点位置情報蓄積部8−1〜Nに蓄
積する。
状態におけるページ画像表示部1−5における各コマの
位置情報を順次入力する。コマ位置情報入力部4−1は
各コマの位置情報が入力されると,コマの位置情報を,
順次,コマ位置情報蓄積部9−1の単位コマ位置情報蓄
積部9−1−1〜Nに蓄積する。さらに,コマ形状情報
入力部4−2に,初期状態におけるページ画像表示部1
−5における各コマの形状情報を順次入力する。コマ形
状情報入力部4−2は,コマの形状情報が入力される
と,コマの形状情報を,順次,コマ形状情報蓄積部9−
2の単位コマ形状情報蓄積部9−2−1〜Nに蓄積す
る。
像シーケンス画像の書き換え処理は,映像シーケンス画
像生成部1−4によって,次のように行われる。
シーケンス蓄積部7のフレーム画像蓄積部7−1〜Mに
蓄積されたフレーム画像を先頭から順に,すなわちフレ
ーム識別番号の小さい順に順次読み出し,映像シーケン
ス画像蓄積部1−3に,図2に示すような映像シーケン
ス画像を構成するように順次蓄積する。
1〜Nに蓄積されたフレーム識別番号を順次読み出し,
単位カット点位置情報蓄積部8−1〜Nに対応するコマ
識別色情報蓄積部1−8からコマ識別色情報を読み出
し,映像シーケンス画像蓄積部1−3に蓄積されたフレ
ーム識別番号が示すフレーム画像の外周に,コマ識別色
情報が示す色で外枠情報を書き込む。映像シーケンス表
示部1−2は,映像シーケンス画像蓄積部1−3に蓄積
された内容を読み出して,これを表示する。
き換え処理は,ページ画像生成部1−7によって,次の
ように行われる。
位置情報蓄積部8−1〜Nに蓄積されたフレーム識別番
号と,これに対応するフレーム画像蓄積部7−1〜Mに
蓄積されたフレーム画像,単位コマ位置情報蓄積部9−
1−1〜Nに蓄積されたコマの位置情報,単位コマ形状
情報蓄積部9−2−1〜Nに蓄積されたコマの形状情
報,およびコマ識別色情報蓄積部1−8に蓄積されたコ
マ識別色情報を読み出し,ページ画像蓄積部1−6に,
コマの位置情報が示す位置にコマの形状情報が示す形状
でフレーム画像を書き込み,さらに,コマの外周にコマ
識別色情報が示す色で外枠情報を書き込む。ページ画像
表示部1−5は,ページ画像蓄積部1−6に蓄積された
内容を読み出してこれを表示する。
示すような初期状態におけるページ画像をページ画像表
示部1−5に,その映像シーケンスをフレーム画像毎に
映像シーケンス表示部1−2に表示し,かつ,ページ画
像表示部1−5に表示された各コマの外枠と,対応する
映像シーケンス表示部1−2の各フレーム画像の外枠は
同色のコマ識別色で表示される。
点の位置変更を行う場合には,まずページ画像座標入力
部6−1から,ページ画像表示部1−5上でカット点位
置を変更したいフレーム画像が表示されているコマの位
置座標を入力する。ページ画像座標アドレス変換部6−
2は,ページ画像座標入力部6−1に入力された位置座
標を読み出すと,その位置座標が示すコマに対応するコ
マ識別番号に変換し,第一アドレス蓄積部6−3に蓄積
する。
から,映像シーケンス表示部1−2上で,前記カット点
位置を変更したいコマの変更後のカット点位置に対応す
るフレーム画像が表示されている位置座標を入力する。
映像シーケンス座標アドレス変換部6−6は,位置座標
を読み出すと,位置座標に対応するフレーム画像に対応
するフレーム識別番号に変換し,フレーム識別番号をフ
レームアドレス蓄積部6−7に蓄積する。
を入力する。カット点変更処理部10−1は,命令入力
部5からカット点変更命令を読み出すと,第一アドレス
蓄積部6−3から前記コマ識別番号を読み出し,コマ識
別番号に対応する単位カット点位置情報蓄積部8−1〜
Nに蓄積されたフレーム識別番号を,フレームアドレス
蓄積部6−7から読み出した前記フレーム識別番号に書
き換える。
映像シーケンス画像の書き換え処理を行う。映像シーケ
ンス表示部1−2は,映像シーケンス画像蓄積部1−3
に蓄積された内容を読み出して,これを表示する。ペー
ジ画像生成部1−7は,前記ページ画像の書き換え処理
を行う。ページ画像表示部1−5は,ページ画像蓄積部
1−6に蓄積された内容を読み出してこれを表示する。
画像表示部1−5上で指定したコマに対応する素材映像
シーケンスのカット点位置を,映像シーケンス表示部1
−2上で変更することが可能である。
表示部1−5上に表示されているページ画像上のコマの
分割を行う場合には,まずページ画像座標入力部6−1
から,ページ画像表示部1−5上で分割対象コマの位置
座標を入力する。ページ画像座標アドレス変換部6−2
は,ページ画像座標入力部6−1に入力された分割対象
コマの位置座標を読み出すと,対応するコマ識別番号に
変換し,第一アドレス蓄積部6−3に蓄積する。
力する。コマ分割処理部10−3は,命令入力部5から
コマ分割命令を読み出すと,第一アドレス蓄積部6−3
に蓄積された第一のコマ識別番号を読み出し,第一のコ
マ識別番号が示す単位カット点位置情報蓄積部8−1〜
Nに蓄積されているフレーム識別番号と第一のコマ識別
番号の次のコマ識別番号が示す単位カット点位置情報蓄
積部8−1〜Nに蓄積されているフレーム識別番号を読
み出し,両者の中間のフレーム識別番号を生成して,カ
ット点位置情報蓄積部8の空白情報が蓄積されている最
小のコマ識別番号(第二のコマ識別番号)を有する単位
カット点位置情報蓄積部8−1〜Nに,両者の中間のフ
レーム識別番号を蓄積する。
位置情報蓄積部9−1の前記第一のコマ識別番号および
第二のコマ識別番号に対応する単位コマ位置情報蓄積部
9−1−1〜Nに分割後のコマ位置情報を蓄積し,次い
で,コマ形状情報蓄積部9−2の前記第一のコマ識別番
号および第二のコマ識別番号に対応する単位コマ形状情
報蓄積部9−2−1〜Nに,分割後のコマ形状情報を蓄
積する。その後,コマ分割処理部10−3は,ソート処
理部10−6にソート開始命令を出力する。
が入力されると,ソート処理を行う。すなわち,カット
点位置情報蓄積部8の各単位カット点位置情報蓄積部8
−1〜Nに蓄積されたフレーム識別番号を若い順に並び
替える。ソート処理部10−6は,各単位コマ位置情報
蓄積部9−1−1〜Nに蓄積された各コマ情報,および
各単位コマ形状情報蓄積部9−2−1〜Nに蓄積された
各コマ形状情報も同様に並び替える。ソート処理部10
−6がソート処理を行う場合,単位カット点位置情報蓄
積部8−1〜Nに蓄積された空白情報は最も大きいフレ
ーム識別番号であるとみなして処理を行う。
映像シーケンス画像の書き換え処理を行う。そして,映
像シーケンス表示部1−2は,映像シーケンス画像蓄積
部1−3に蓄積された内容を読み出して,これを表示す
る。ページ画像生成部1−7は,前記ページ画像の書き
換え処理を行う。そして,ページ画像表示部1−5は,
ページ画像蓄積部1−6に蓄積された内容を読み出して
これを表示する。
画像表示部1−5上のコマを分割すると,分割したコマ
に対応する素材映像シーケンスのカットも自動的に二つ
に分割される。
表示部1−5上に表示されているコミック形式ムービー
のコマの統合を行う場合には,まずページ画像座標入力
部6−1から,ページ画像表示部1−5上で第一の統合
対象コマの位置座標を入力する。ページ画像座標アドレ
ス変換部6−2は,ページ画像座標入力部6−1に入力
された統合対象コマの位置座標を読み出すと,対応する
コマ識別番号に変換し,第一アドレス蓄積部6−3に蓄
積する。
ら,ページ画像表示部1−5上で第二の統合対象コマの
位置座標を入力する。ページ画像座標アドレス変換部6
−2は,ページ画像座標入力部6−1に入力された統合
対象コマの位置座標を読み出すと,対応するコマ識別番
号に変換し,第二アドレス蓄積部6−4に蓄積する。
力する。コマ統合処理部10−2は,命令入力部5から
コマ統合命令を読み出すと,第一アドレス蓄積部6−3
に蓄積された第一のコマ識別番号と,第二アドレス蓄積
部6−4に蓄積された第二のコマ識別番号とを読み出
し,カット点位置情報蓄積部8の第一のコマ識別番号に
対応する単位カット点位置情報蓄積部8−1〜Nに蓄積
されたフレーム識別番号,および第二のコマ識別番号に
対応する単位カット点位置情報蓄積部8−1〜Nに蓄積
されたフレーム識別番号を読み出して,両者を比較し,
大きいフレーム識別番号が蓄積されていた単位カット点
位置情報蓄積部8−1〜Nに空白情報を書き込む。
いフレーム識別番号が蓄積されていた単位カット点位置
情報蓄積部8−1〜Nに対応する単位コマ位置情報蓄積
部9−1−1〜N,および単位コマ形状情報蓄積部9−
2−1〜Nに空白情報を書き込み,小さいフレーム識別
番号が蓄積されていた単位カット点位置情報蓄積部8−
1〜N,および単位コマ形状情報蓄積部9−2−1〜N
に,各々,統合後のコマの位置情報,およびコマの形状
情報を書き込む。その後,コマ統合処理部10−2は,
ソート処理部10−6にソート開始命令を出力する。ソ
ート処理部10−6はソート開始命令が入力されると,
前記ソート処理を行う。
映像シーケンス画像の書き換え処理を行う。映像シーケ
ンス表示部1−2は,映像シーケンス画像蓄積部1−3
に蓄積された内容を読み出して,これを表示する。ペー
ジ画像生成部1−7は,前記ページ画像の書き換え処理
を行う。ページ画像表示部1−5は,ページ画像蓄積部
1−6に蓄積された内容を読み出してこれを表示する。
画像表示部1−5上の二つのコマの統合処理を行うと,
自動的に各コマに対応する素材映像シーケンスのカット
も統合される。
表示部1−5上に表示されているコミック形式ムービー
のコマの拡縮を行う場合には,まずページ画像座標入力
部6−1から,ページ画像表示部1−5上で第一の拡縮
対象コマの位置座標を入力する。ページ画像座標アドレ
ス変換部6−2は,ページ画像座標入力部6−1に入力
された拡縮対象コマの位置座標を読み出すと,対応する
コマ識別番号に変換し,第一アドレス蓄積部6−3に蓄
積する。
ら,ページ画像表示部1−5上で第二のコマの位置座
標,すなわち第一の拡縮対象コマに隣接する拡縮対象コ
マの位置座標を入力する。ページ画像座標アドレス変換
部6−2は,ページ画像座標入力部6−1に入力された
拡縮対象コマの位置座標を読み出すと,対応するコマ識
別番号に変換し,第二アドレス蓄積部6−4に蓄積す
る。
を入力する。コマ拡縮処理部10−5は,命令入力部5
からコマ拡縮開始命令を読み出すと,第一アドレス蓄積
部6−3から第一のコマ識別番号を,第二アドレス蓄積
部6−4から第二のコマ識別番号を読み出す。
のコマ識別番号に対応する単位コマ位置情報蓄積部9−
1−1〜Nおよび単位コマ形状情報蓄積部9−2−1〜
Nから第一のコマの位置情報およびコマ形状情報を読み
出し,同様に,第二のコマの位置情報およびコマ形状情
報を読み出して,両者の間に表示する操作バーの位置情
報を操作バー位置情報蓄積部10−8に蓄積し,操作バ
ーの形状情報を操作バー形状情報蓄積部10−9に蓄積
する。
位置情報蓄積部10−8から操作バー位置情報を,操作
バー形状情報蓄積部10−9から操作バー形状情報を読
み出し,操作バー位置情報と操作バー形状情報が示す操
作バー画像をページ画像蓄積部1−6に書き込む。ペー
ジ画像表示部1−5は,ページ画像蓄積部1−6の内容
を読み出して表示する。
された操作バーを観察しながら,操作バー移動量を命令
入力部5から入力する。コマ拡縮処理部10−5は,命
令入力部5から操作バー移動量を読み出すと,操作バー
移動量に従って新たな操作バー位置情報を操作バー位置
情報蓄積部10−8に蓄積する。
位置情報蓄積部10−8から操作バー位置情報を,操作
バー形状情報蓄積部10−9から操作バー形状情報を読
み出し,操作バー位置情報と操作バー形状情報が示す操
作バー画像をページ画像蓄積部1−6に書き込む。ペー
ジ画像表示部1−5はページ画像蓄積部1−6の内容を
読み出して表示する。
された操作バーの位置が適当であると認めたならば,命
令入力部5にコマ拡縮終了命令を入力する。コマ拡縮処
理部10−5は,コマ拡縮終了命令を読み取ると,操作
バー位置情報蓄積部10−8から最終の操作バー位置情
報を,操作バー形状情報蓄積部10−9から最終の操作
バー形状情報を読み出す。
第一のコマ識別番号に対応する単位コマ位置情報蓄積部
9−1−1〜Nおよび単位コマ形状情報蓄積部9−2−
1〜Nから第一のコマの位置情報およびコマ形状情報を
読み出し,操作バー位置情報および操作バー形状情報が
示す新しいコマ位置情報およびコマ形状情報を生成し,
各々を,単位コマ位置情報蓄積部9−1−1〜Nおよび
単位コマ形状情報蓄積部9−2−1〜Nに蓄積する。
第二のコマ識別番号に対応する単位コマ位置情報蓄積部
9−1−1〜Nおよび単位コマ形状情報蓄積部9−2−
1〜Nから第二のコマの位置情報およびコマ形状情報を
読み出し,操作バー位置情報および操作バー形状情報が
示す新しいコマ位置情報およびコマ形状情報を生成し,
各々を,単位コマ位置情報蓄積部9−1−1〜Nおよび
単位コマ形状情報蓄積部9−2−1〜Nに蓄積する。映
像シーケンス画像生成部1−4は,前記映像シーケンス
画像の書き換え処理を行う。そして,映像シーケンス表
示部1−2は,映像シーケンス画像蓄積部1−3に蓄積
された内容を読み出して,これを表示する。ページ画像
生成部1−7は,前記ページ画像の書き換え処理を行
う。そして,ページ画像表示部1−5は,ページ画像蓄
積部1−6に蓄積された内容を読み出してこれを表示す
る。
る二つのコマの大きさを,操作バーを介した編集操作に
よって一度に変更することが可能となる。 〔コマ変形処理〕本装置上で,ページ画像表示部1−5
上に表示されているコミック形式ムービーのコマの変形
を行う場合には,まずページ画像座標入力部6−1か
ら,ページ画像表示部1−5上で第一の変形対象コマの
位置座標を入力する。ページ画像座標アドレス変換部6
−2は,ページ画像座標入力部6−1に入力された変形
対象コマの位置座標を読み出すと,対応するコマ識別番
号に変換し,第一アドレス蓄積部6−3に蓄積する。
ら,ページ画像表示部1−5上で第二の(すなわち第一
の変形対象コマに隣接する)変形対象コマの位置座標を
入力する。ページ画像座標アドレス変換部6−2は,ペ
ージ画像座標入力部6−1に入力された変形対象コマの
位置座標を読み出すと,対応するコマ識別番号に変換
し,第二アドレス蓄積部6−4に蓄積する。
を入力する。コマ変形処理部10−4は,命令入力部5
からコマ変形開始命令を読み出すと,第一アドレス蓄積
部6−3から第一のコマ識別番号を,第二アドレス蓄積
部6−4から第二のコマ識別番号を読み出す。
のコマ識別番号に対応する単位コマ位置情報蓄積部9−
1−1〜Nおよび単位コマ形状情報蓄積部9−2−1〜
Nから第一のコマの位置情報およびコマ形状情報を読み
出し,同様に,第二のコマの位置情報およびコマ形状情
報を読み出して,両者の間に表示する操作バーの位置情
報を操作バー位置情報蓄積部10−8に蓄積し,操作バ
ーの形状情報を操作バー形状情報蓄積部10−9に蓄積
する。
位置情報蓄積部10−8から操作バー位置情報を,操作
バー形状情報蓄積部10−9から操作バー形状情報を読
み出し,操作バー位置情報と操作バー形状情報が示す操
作バー画像をページ画像蓄積部1−6に書き込む。ペー
ジ画像表示部1−5は,ページ画像蓄積部1−6の内容
を読み出して表示する。
された操作バーを観察しながら,操作バー傾斜量を命令
入力部5から入力する。コマ変形処理部10−4は,命
令入力部5から操作バー傾斜量を読み出すと,操作バー
傾斜量に従って新たな操作バー位置情報を操作バー位置
情報蓄積部10−8に,新たな操作バー形状情報を操作
バー形状情報蓄積部10−9に蓄積する。操作バー画像
生成部10−7は,操作バー位置情報蓄積部10−8か
ら操作バー位置情報を,操作バー形状情報蓄積部10−
9から操作バー形状情報を読み出し,操作バー位置情報
と操作バー形状情報が示す操作バー画像をページ画像蓄
積部1−6に書き込む。ページ画像表示部1−5は,ペ
ージ画像蓄積部1−6の内容を読み出して表示する。
された操作バーの位置が適当であると認めたならば,命
令入力部5にコマ変形終了命令を入力する。コマ変形処
理部10−4は,コマ変形終了命令を読み取ると,操作
バー位置情報蓄積部10−8から最終の操作バー位置情
報を,操作バー形状情報蓄積部10−9から最終の操作
バー形状情報を読み出す。
第一のコマ識別番号に対応する単位コマ位置情報蓄積部
9−1−1〜Nおよび単位コマ形状情報蓄積部9−2−
1〜Nから第一のコマの位置情報およびコマ形状情報を
読み出し,操作バー位置情報および操作バー形状情報が
示す新しいコマ位置情報およびコマ形状情報を生成し,
各々を,単位コマ位置情報蓄積部9−1−1〜Nおよび
単位コマ形状情報蓄積部9−2−1〜Nに蓄積する。
第二のコマ識別番号に対応する単位コマ位置情報蓄積部
9−1−1〜Nおよび単位コマ形状情報蓄積部9−2−
1〜Nから第二のコマの位置情報およびコマ形状情報を
読み出し,操作バー位置情報および操作バー形状情報が
示す新しいコマ位置情報およびコマ形状情報を生成し,
各々を,単位コマ位置情報蓄積部9−1−1〜Nおよび
単位コマ形状情報蓄積部9−2−1〜Nに蓄積する。
映像シーケンス画像の書き換え処理を行う。映像シーケ
ンス表示部1−2は,映像シーケンス画像蓄積部1−3
に蓄積された内容を読み出して,これを表示する。ペー
ジ画像生成部1−7は,前記ページ画像の書き換え処理
を行う。ページ画像表示部1−5は,ページ画像蓄積部
1−6に蓄積された内容を読み出してこれを表示する。
る二つのコマの形状を操作バーを介した編集操作によっ
て,一度に変更することが可能となる。 〔コミック形式ムービー生成処理〕制作者は,前記編集
処理の終了後に,命令入力部5にコミック形式ムービー
生成命令を入力する。コミック形式ムービー生成処理部
11は,命令入力部5からコミック形式ムービー生成命
令を読み取ると,カット点位置情報蓄積部8の単位カッ
ト点位置情報蓄積部8−1〜Nからフレーム識別番号を
先頭から順次読み出し,フレーム識別番号と次の単位カ
ット点位置情報蓄積部8−1〜Nのフレーム識別番号の
直前のフレーム識別番号の間の全てのフレーム画像を映
像シーケンス蓄積部7のフレーム画像蓄積部7−1〜M
から読み出し,単位カット点位置情報蓄積部8−1〜N
に対応するコマ識別番号を有する単位コマ位置情報蓄積
部9−1−1〜Nからコマ位置情報を,単位コマ形状情
報蓄積部9−2−1〜Nからコマ形状情報を読み出し,
コミック形式ムービーを生成し,出力部12へ出力す
る。
画像表示部1−5上でのコマ位置情報およびコマ形状情
報に対する空間方向の編集操作,および映像シーケンス
表示部1−2上でのカット点位置情報蓄積部8に蓄積さ
れたカット点位置情報(フレーム識別番号)に対する時
間軸方向の編集操作が,相互に必要な連携動作すること
が可能である。したがって,操作者は,直感的かつ容易
にコミック形式ムービーの編集作業を行うことが可能で
ある。
を,制作者に負荷を課すことなく,直感的かつ簡単に制
作可能な映像情報編集装置を実現することが可能とな
る。
る。
の例を示す図である。
す図である。
す図である。
す図である。
Claims (5)
- 【請求項1】 画面上に時間的な関連性を持つ単数また
は複数の映像情報をコミック風のページ画像として表示
するために,素材となる映像のシーケンスから映像情報
を編集する映像情報編集装置であって,素材映像シーケ
ンスを入力する映像シーケンス入力部と,該素材映像シ
ーケンスを蓄積する映像シーケンス蓄積部と,該素材映
像シーケンスのカット点位置情報を入力するカット点位
置情報入力部と,該カット点位置情報を蓄積するカット
点位置情報蓄積部と,コマ形状情報およびコマ位置情報
から構成されるコマ情報を入力するコマ情報入力部と,
該コマ情報を蓄積するコマ情報蓄積部と,前記素材映像
シーケンスと前記カット点位置情報と前記コマ情報とを
用いて,ページ画像の各コマと素材映像シーケンスのカ
ット点位置の対応関係がつくように,ページ画像および
映像シーケンスを表示する表示部と,ページ画像中のコ
マの位置座標と,映像シーケンス画像中のフレーム画像
の位置座標とを入力し,各々対応するコマ識別番号およ
びフレーム識別番号に変換する画像座標入力部と,少な
くともカット点変更命令を含む命令群からなる編集命令
を単独もしくは組み合わせて入力する命令入力部と,該
命令入力部から前記カット点変更命令が入力されると,
指定されたコマ識別番号およびフレーム識別番号に基づ
いて,前記カット点位置情報蓄積部に蓄積されたカット
点位置情報を書き換えてカット点変更処理を行う編集処
理部と,前記映像シーケンス蓄積部に蓄積された編集処
理後の映像素材の映像シーケンスと,前記カット点位置
情報蓄積部に蓄積されたカット点位置情報と,前記コマ
情報蓄積部に蓄積されたコマ情報とからコミック形式ム
ービーを生成するコミック形式ムービー生成処理部と,
生成されたコミック形式ムービーを出力する出力部とを
備えることを特徴とする映像情報編集装置。 - 【請求項2】 前記命令入力部が入力する編集命令の中
に,コマ分割命令またはコマ統合命令があり,前記編集
処理部は,前記命令入力部からコマ分割命令またはコマ
統合命令が入力されると,指定されたコマ識別番号に基
づいて,前記カット点位置情報蓄積部に蓄積されたカッ
ト点位置情報および前記コマ情報蓄積部に蓄積されたコ
マ情報を書き換えることにより,ページ画像におけるコ
マの分割処理またはコマの統合処理を行う手段を持つこ
とを特徴とする請求項1記載の映像情報編集装置。 - 【請求項3】 前記命令入力部が入力する編集命令の中
に,コマ拡縮開始命令またはコマ変形開始命令があり,
前記編集処理部は,前記命令入力部からコマ拡縮開始命
令またはコマ変形開始命令が入力されると,指定された
コマ識別番号およびコマ拡縮開始命令またはコマ変形開
始命令に応じた操作バー画像を生成して前記表示部に出
力する手段を持つことを特徴とする請求項1記載の映像
情報編集装置。 - 【請求項4】 前記命令入力部が入力する編集命令の中
に,コマ拡縮終了命令またはコマ変形終了命令があり,
前記編集処理部は,前記命令入力部からコマ拡縮終了命
令またはコマ変形終了命令が入力されると,現在の操作
バー画像の位置と形状に応じて前記コマ情報蓄積部に蓄
積されたコマ情報を書き換えてコマ拡縮処理またはコマ
変形処理を行う手段を持つことを特徴とする請求項3記
載の映像情報編集装置。 - 【請求項5】 前記命令入力部が入力する編集命令の中
に,カット点変更命令,コマ分割命令,コマ統合命令,
コマ拡縮開始命令,コマ拡縮終了命令,コマ変形開始命
令およびコマ変形終了命令があり,前記編集処理部は,
前記命令入力部からの入力に応じてカット点変更処理,
コマ分割処理,コマ統合処理,操作バー画像を生成して
表示する処理,コマ拡縮処理およびコマ変形処理を切り
換えて実行する手段を持つことを特徴とする請求項1記
載の映像情報編集装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP07600996A JP3331291B2 (ja) | 1996-03-29 | 1996-03-29 | 映像情報編集装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP07600996A JP3331291B2 (ja) | 1996-03-29 | 1996-03-29 | 映像情報編集装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH09265547A JPH09265547A (ja) | 1997-10-07 |
JP3331291B2 true JP3331291B2 (ja) | 2002-10-07 |
Family
ID=13592828
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP07600996A Expired - Fee Related JP3331291B2 (ja) | 1996-03-29 | 1996-03-29 | 映像情報編集装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3331291B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3529003B2 (ja) * | 1996-05-29 | 2004-05-24 | 日本電信電話株式会社 | 画像情報要約装置 |
JP5540376B2 (ja) * | 2009-09-15 | 2014-07-02 | 学校法人東京工芸大学 | コマ割り画像生成装置及びプログラム |
JP5817400B2 (ja) | 2011-09-30 | 2015-11-18 | ソニー株式会社 | 情報処理装置、情報処理方法及びプログラム |
JP6877105B2 (ja) * | 2016-07-29 | 2021-05-26 | キヤノン株式会社 | 画像処理装置、制御方法、及びプログラム |
JP2019185726A (ja) * | 2018-10-25 | 2019-10-24 | 株式会社ミルプラトー | 動画閲覧装置、動画閲覧装置の制御方法、およびプログラム |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3337596B2 (ja) * | 1995-09-28 | 2002-10-21 | 日本電信電話株式会社 | 映像情報表示装置 |
JP3331285B2 (ja) * | 1995-11-07 | 2002-10-07 | 日本電信電話株式会社 | 映像情報変換装置 |
-
1996
- 1996-03-29 JP JP07600996A patent/JP3331291B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JPH09265547A (ja) | 1997-10-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JPH0765201A (ja) | 形状モデリング装置及び形状モデリング方法 | |
EP0589658A2 (en) | Superimposing of graphic data with graphic parameter store | |
JP2994164B2 (ja) | シナリオ編集装置 | |
JPH08272991A (ja) | プレゼンテーションシステム | |
JP3331291B2 (ja) | 映像情報編集装置 | |
JP2000010705A (ja) | 出力イメージ変形方式および出力イメージ変形用プログラムを記録した記録媒体 | |
US5357601A (en) | Apparatus for processing superimposed image information by designating sizes of superimposed and superimposing images | |
US5237657A (en) | Apparatus for manipulating a picture represented by a video signal | |
JP3029318B2 (ja) | 画像ワ−クステ−ション | |
JP3106561B2 (ja) | 画像データ処理装置 | |
JP3381903B2 (ja) | 地図表示システム及びそれにおける画像スクロール処理方法 | |
JPS63181074A (ja) | 形状描画方法 | |
JP3321402B2 (ja) | 動画データ編集方法および装置 | |
JPH10188026A (ja) | 動画像作成方法および動画像作成用記憶媒体 | |
JP3800588B2 (ja) | 要約映像表示装置および要約映像表示方法 | |
JP3202435B2 (ja) | 画像表示方法とその装置 | |
JPS6360671A (ja) | 画像処理装置およびその方法 | |
JPH07271998A (ja) | 立体表示方法および装置 | |
JPH0764524A (ja) | 画像表示装置 | |
JPH0530453A (ja) | 画像記録媒体のインデツクス作成装置 | |
JPH08202889A (ja) | 画像データの分割管理方法及び装置 | |
JP2954587B2 (ja) | 表示画像管理装置 | |
JP2738309B2 (ja) | 画像及び図形の合成表示装置 | |
JP3536670B2 (ja) | マルチメディアデータの提示方法及びシステム及びマルチメディアデータの提示プログラムを格納した記憶媒体 | |
JPS6127587A (ja) | ウインドデ−タ制御方式 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20070719 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080719 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080719 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090719 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090719 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100719 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100719 Year of fee payment: 8 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110719 Year of fee payment: 9 |
|
LAPS | Cancellation because of no payment of annual fees |