JP5550247B2 - Image processing apparatus, control method and program thereof, and storage medium - Google Patents
Image processing apparatus, control method and program thereof, and storage medium Download PDFInfo
- Publication number
- JP5550247B2 JP5550247B2 JP2009066897A JP2009066897A JP5550247B2 JP 5550247 B2 JP5550247 B2 JP 5550247B2 JP 2009066897 A JP2009066897 A JP 2009066897A JP 2009066897 A JP2009066897 A JP 2009066897A JP 5550247 B2 JP5550247 B2 JP 5550247B2
- Authority
- JP
- Japan
- Prior art keywords
- display
- display data
- points
- moving image
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- User Interface Of Digital Computer (AREA)
Description
本発明は、動画像に文字列等の表示用データを挿入又は合成する画像処理装置、その制御方法及びプログラム並びに記憶媒体に関する。 The present invention relates to an image processing apparatus for inserting or synthesizing display data such as a character string into a moving image, a control method and program thereof, and a storage medium .
従来、パーソナルコンピュータに搭載されている動画像編集用アプリケーションソフトウエアでは、動画像に対して効果的な文字やアイコンなどの表示用データを挿入したり、表示用データに所望のエフェクト効果を付与することができる。これにより、動画像の面白さをより一層高めることができる。 Conventionally, moving image editing application software installed in a personal computer inserts display data such as characters and icons that are effective for moving images, or gives a desired effect to display data. be able to. Thereby, the interestingness of a moving image can be improved further.
ビデオカメラの普及により、一般のユーザも動画像を撮影する機会が増えてきており、動画像に対して表示用データを簡単に挿入する機能やエフェクトを付与する機能が望まれている。 Due to the widespread use of video cameras, general users are increasingly taking pictures of moving images, and a function for easily inserting display data into a moving image and a function for providing an effect are desired.
動画像の再生中に、ユーザに指定された位置を動画像の仮想座標に変換し、その座標を記憶することで動画像を確認しながら簡単にエフェクトを付加できる編集装置が知られている（特許文献１）。また、文字に対して複数のエフェクトの一つを選択可能にした技術も知られている（特許文献２）。 An editing apparatus is known that can easily add an effect while confirming a moving image by converting a position specified by a user into a virtual coordinate of the moving image and storing the coordinate during reproduction of the moving image ( Patent Document 1). There is also known a technique that enables one of a plurality of effects to be selected for a character (Patent Document 2).
従来の技術では、動画像に挿入した文字列や付与したエフェクトの効果をリアルタイムに確認できないという問題点がある。 In the prior art, there is a problem that can not see the effect of string or grant the effect was inserted into the moving image in real time.
本発明は、このような問題を解決する画像処理装置、その制御方法及びプログラム並びに記憶媒体を提示することを目的とする。 An object of the present invention is to present an image processing apparatus , a control method and program for solving such a problem, and a storage medium .
本発明に係る画像処理装置は、表示手段に対する複数点でのタッチ操作を検出可能なタッチ検出手段と、動画を再生して前記表示手段に表示するように制御する表示制御手段と、前記表示制御手段で動画を再生表示している際に前記タッチ検出手段で検出された複数点でのタッチ操作に応じて、前記動画に対して、該複数点でのタッチ操作の各入力点の位置関係に応じた効果を付して表示用データを合成するように制御する制御手段とを有し、前記制御手段は、２点でのタッチ操作を検出した場合に２つの入力点間の距離が開くように移動することに応じて、前記表示用データが表示されていない状態から、該２つの入力点間の距離が開く方向に前記表示用データが開くような効果を付して該表示用データが現れるように、かつ、該２つの入力点間の距離が開くように移動しても該表示用データに含まれる要素のサイズを変倍することなく、前記動画に該表示用データを合成するように制御することを特徴とする。
本発明に係る画像処理装置は、表示手段に対する複数点でのタッチ操作を検出可能なタッチ検出手段と、動画を再生して前記表示手段に表示するように制御する表示制御手段と、前記表示制御手段で動画を再生表示している際に前記タッチ検出手段で検出された複数点でのタッチ操作に応じて、前記動画に対して、該複数点でのタッチ操作の各入力点の位置関係に応じた効果を付して表示用データを合成するように制御する制御手段とを有し、前記制御手段は、２点でのタッチ操作を検出した場合に２つの入力点間の距離が小さくなるように移動することに応じて、前記表示用データが表示された状態から、該表示用データに含まれる要素のサイズを変倍することなく、前記表示用データが閉じるような効果を付して該表示用データを合成し、その後、該表示用データを消すように制御することを特徴とする。
本発明に係る画像処理装置の制御方法は、表示手段に対する複数点でのタッチ操作を検出可能なタッチ検出ステップと、動画を再生して前記表示手段に表示するように制御する表示制御ステップと、前記表示制御ステップで動画を再生表示している際に前記タッチ検出ステップで検出された複数点でのタッチ操作に応じて、前記動画に対して、該複数点でのタッチ操作の各入力点の位置関係に応じた効果を付して表示用データを合成するように制御する制御ステップとを有し、前記制御ステップは、２点でのタッチ操作を検出した場合に２つの入力点間の距離が開くように移動することに応じて、前記表示用データが表示されていない状態から、該２つの入力点間の距離が開く方向に前記表示用データが開くような効果を付して該表示用データが現れるように、かつ、該２つの入力点間の距離が開くように移動しても該表示用データに含まれる要素のサイズを変倍することなく、前記動画に該表示用データを合成するように制御することを特徴とする。
本発明に係る画像処理装置の制御方法は、表示手段に対する複数点でのタッチ操作を検出可能なタッチ検出ステップと、動画を再生して前記表示手段に表示するように制御する表示制御ステップと、前記表示制御ステップで動画を再生表示している際に前記タッチ検出ステップで検出された複数点でのタッチ操作に応じて、前記動画に対して、該複数点でのタッチ操作の各入力点の位置関係に応じた効果を付して表示用データを合成するように制御する制御ステップとを有し、前記制御ステップは、２点でのタッチ操作を検出した場合に２つの入力点間の距離が小さくなるように移動することに応じて、前記表示用データが表示された状態から、該表示用データに含まれる要素のサイズを変倍することなく、前記表示用データが閉じるような効果を付して該表示用データを合成し、その後、該表示用データを消すように制御することを特徴とする。
An image processing apparatus according to the present invention includes a touch detection unit capable of detecting touch operations at a plurality of points on a display unit, a display control unit that controls to reproduce a moving image and display the moving image on the display unit, and the display control In response to a touch operation at a plurality of points detected by the touch detection means when the moving image is reproduced and displayed by the means, the positional relationship between the input points of the touch operation at the plurality of points is set with respect to the video. And a control unit that controls the display data to be combined with the corresponding effect, and the control unit opens a distance between the two input points when a touch operation at two points is detected. The display data is added with the effect that the display data is opened in the direction in which the distance between the two input points is increased from the state in which the display data is not displayed. And the two Without even moving to open the distance between the points to scale the size of the elements included in the display data, and controls so as to synthesize the display data in the video.
An image processing apparatus according to the present invention includes a touch detection unit capable of detecting touch operations at a plurality of points on a display unit, a display control unit that controls to reproduce a moving image and display the moving image on the display unit, and the display control In response to a touch operation at a plurality of points detected by the touch detection means when the moving image is reproduced and displayed by the means, the positional relationship of each input point of the touch operation at the plurality of points is set with respect to the moving image. And a control means for controlling the display data to be synthesized with a corresponding effect, and the control means reduces the distance between the two input points when a touch operation at two points is detected. The display data is closed from the state where the display data is displayed without changing the size of the elements included in the display data. It synthesizes the display data Thereafter, and controlling so as to delete the display data.
The control method of the image processing apparatus according to the present invention includes a touch detection step capable of detecting a touch operation at a plurality of points on the display means, a display control step for controlling to reproduce and display a moving image on the display means, In response to the touch operation at a plurality of points detected in the touch detection step when the moving image is reproduced and displayed in the display control step, each input point of the touch operation at the plurality of points is applied to the video. A control step for controlling the display data to be combined with an effect corresponding to the positional relationship, and the control step is a distance between two input points when a touch operation at two points is detected. in response to moving to open, from said state where the display data is not displayed, the display denoted by the effects such as the display data in the direction in which distance is opened between the two input points is opened Day for As appears, and without even moving such that the distance between the two input points opens to scale the size of the elements included in the display data, synthesizes the display data on the moving It is characterized by controlling as follows.
The control method of the image processing apparatus according to the present invention includes a touch detection step capable of detecting a touch operation at a plurality of points on the display means, a display control step for controlling to reproduce and display a moving image on the display means, In response to the touch operation at a plurality of points detected in the touch detection step when the moving image is reproduced and displayed in the display control step, each input point of the touch operation at the plurality of points is applied to the video. A control step for controlling the display data to be combined with an effect corresponding to the positional relationship, and the control step is a distance between two input points when a touch operation at two points is detected. in response to the moves to be smaller, a state where the display data is displayed without scaling the size of the elements included in the display data, such as the display data is closed You are given the results by combining the data for the display, then and controls to turn off the display data.
本発明によれば、再生中の動画像に対してユーザがタッチパネルに行ったタッチ操作に応じた効果で表示用データを挿入し、動画像と合成することが可能となる。 According to the present invention, it is possible to insert display data with an effect corresponding to a touch operation performed on a touch panel by a user with respect to a moving image that is being reproduced, and synthesize it with the moving image.
以下、図面を参照して、本発明の実施例を詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
図１は、本発明に係る画像処理装置の一実施例を組み込んだ画像再生装置の概略構成ブロック図を示す。再生装置１０は、システム制御部１２、タッチパネル１４、表示用データ記憶部１６、入力部１８、動画像記憶部２０および挿入情報記憶部２２を具備する。システム制御部１２は、マイクロコンピュータからなる。
FIG. 1 shows a schematic block diagram of an image reproducing apparatus incorporating an embodiment of an image processing apparatus according to the present invention. The
システム制御部１２は、ＣＰＵ（Central Proccessing Unit）、ＲＯＭ（Read Only Memory）およびＲＡＭ（Random Access Memory）を有するマイクロコンピュータからなる。ＣＰＵは、ＲＡＭを作業エリアとしてＲＯＭに格納された制御プログラムを実行して各種制御を行う。
The
入力部１８は、ジョグダイヤルおよびダイヤルスイッチ等の操作手段を有する。ユーザは、入力部１８を介して、種々の指示をシステム制御部１２に入力できる。入力制御部２６は、入力部１８の入力操作を適切な処理制御部に伝達する。入力制御部２６から動画像制御部２８に選択指示を送ることで、動画像記憶部２０から所望の動画像を選択できる。同様に、入力制御部２６から表示用データ読出し部２４に選択指示を送ることで表示用データ記憶部１６から所望の表示用データを選択できる。
The
表示用データ読出し部２４は、入力制御部２６により指示される表示用データを表示用データ記憶部１６から読み出し、読み出した表示用データを表示用データ制御部３０に送る。表示用データ記憶部１６は、複数の表示用データを格納可能である。表示用データは、一般に、文字または文字列、アイコン、イメージデータ、若しくはこれらの組み合わせからなる。
The display
動画像記憶部２０は、ＭＰＥＧ２(Moving Picture Experts Group)等の動画像圧縮形式に基づいて圧縮された動画像データを記憶する。動画像制御部２８は、入力制御部２６により指示された圧縮動画像データを動画像記憶部２０から読み出して伸長し、伸長により復元された動画像データを動画像合成部３２に供給する。動画像制御部２８はまた、動画像合成部３２からの動画像データを圧縮（エンコード）し、圧縮動画像データを動画像記憶部２０に書き込む。
The moving image storage unit 20 stores moving image data compressed based on a moving image compression format such as MPEG2 (Moving Picture Experts Group). The moving
タッチパネル１４のタッチパネル入力部１４ａは、入力された操作位置に応じた信号を座標検出部３６に送る。座標検出部３６は、タッチパネル入力部１４ａの入力位置を座標として算出し、その算出した座標を表示用データ制御部３０に送る。また、表示制御部３８から送られる動画像データの動画像がタッチパネル１４の動画像表示部１４ｂに表示される。
The touch
表示用データ制御部３０は、表示用データ読出し部２４により読み出された表示用データと座標検出部３６により得られた入力位置座標の情報から表示用画像データを生成し、動画像合成部３２に送る。表示用画像データを生成するとき、必要に応じて表示用画像データの画面上の配置が調整される。動画像合成部３２は、動画像制御部２８からの再生動画像データと表示用データ制御部３０からの表示用画像データの一方を選択して表示制御部３８に送ることも、両者の合成画像データを表示制御部３８に送ることも可能である。動画像合成部３２はまた、表示用データ制御部３０から表示用データ画像の生成時に使用した表示用データ情報と入力位置座標を受け取り、動画像制御部２８から動画像のシーン番号と再生時間（フレーム）を受け取る。動画像合成部３２は、これらの情報を挿入情報生成部３４に送り、必要により動画像制御部２８にも送る。
The display
挿入情報生成部３４は、動画像合成部３２から送られる情報を関連付けて管理情報を生成する。この管理情報は少なくとも、動画像のシーン番号、再生時間（フレーム数）、表示用データおよび入力位置座標を含み、挿入情報記憶部２２に保存される。
The insertion
表示制御部３８は、動画像合成部３２からの動画像データを動画像表示部１４ｂに表示可能な形式に変換し、動画像表示部１４ｂに送る。
The
挿入情報解析部３９は、文字列挿入操作後の再生処理で、表示用データ挿入情報を解析する。
The insertion
動画像記憶部２０、表示用データ記憶部１６および挿入情報記憶部２２は、ＨＤＤ(Hard Disk Drive)またはフラッシュメモリなどのランダムアクセス記憶媒体からなる。
The moving image storage unit 20, the display
図２は、本実施例の表示用データ挿入処理のフローチャートを示す。ユーザが入力部１８のジョグダイヤル等により指定した所望の動画像が、動画像表示部１４ｂにより表示されているとする。ここでは、ユーザは動画像の１シーン目の１０秒から１３秒の間に、表示用データである文字列「到着しました！」を所望の位置に挿入することを希望しているとする。
FIG. 2 shows a flowchart of the display data insertion process of this embodiment. It is assumed that a desired moving image designated by the user using the jog dial or the like of the
動画像を再生できる状態で、ユーザの所定操作により、図２に示すフローが開始される。ユーザの指示に従い、表示用データ記憶部１６の表示用データが読み出され、タッチパネル１４の動画像表示部１４ｂに表示される（Ｓ１）。表示用データ記憶部１６に格納されている表示用データは、書き換え可能であり、用途によって変更できる。図３は、ステップＳ１でタッチパネル１４に表示される表示用データの一覧表示画面４０の例を示す。文字列一覧表示画面４０には、メニュー項目表示部４２、文字列スクロール部４４、および文字列表示欄４６が表示される。ユーザは、動画像に挿入したい文字列を文字列表示欄４６に表示される文字列一覧から選択できる。また、文字列一覧表示画面４０は、動画像の再生中でも、再生を開始する前でも、表示可能である。
The flow shown in FIG. 2 is started by a predetermined operation of the user in a state where the moving image can be reproduced. In accordance with a user instruction, display data in the display
次に、ユーザは、タッチパネル１４上に表示されている文字列から挿入したい文字列を入力部１８によって選択する（Ｓ２）。選択された文字列を示す表示用データは、ＲＡＭなどに一時記憶される。
Next, the user selects a character string to be inserted from the character strings displayed on the
ユーザが、ステップＳ２で選択した文字列を挿入したい動画像を入力部１８で選択すると、タッチパネル１４の動画像表示部１４ｂにその動画像が再生表示される（Ｓ３）。また、動画像を再生してから挿入したい文字列を決定する場合には、ステップＳ３をステップＳ１の前に実行するようにすればよい。
When the user selects the moving image into which the character string selected in step S2 is to be inserted using the
図４は、ステップＳ３でユーザにより選択された動画像を再生している動画像再生画面５０の例を示す。動画像再生画面５０には、動作状態表示アイコン５２、再生時間（フレーム）５４、シーン番号５６および再生動画像５８が表示される。動作状態表示アイコン５２は、再生、早送り又はスロー再生などの動作状態に応じてアイコン表示を変化させたものであってもよい。図４では、再生時間５４は、シーン番号１の１０秒経過した場面を再生していることを表している。
FIG. 4 shows an example of a moving
再生中の動画像において文字列を挿入したい場面になった時、ユーザは、文字列を挿入したい位置をタッチパネル１４上で指定する（Ｓ４）。動画像が一時停止している場合は、タッチパネル１４に位置入力を開始したと同時に、再生が始まる。この説明例では通常再生時であるとしているが、スロー再生又はコマ送り再生などでもよい。
When a scene in which a character string is desired to be inserted in the moving image being reproduced, the user designates a position on the
タッチパネル１４のタッチパネル入力部１４ａは、入力された入力開始位置を座標検出部３６に送り、座標検出部３６は入力位置を座標に変換する（Ｓ５）。
The touch
ユーザがタッチパネル１４に入力を開始すると同時に、その入力位置に文字列の先頭が位置するように、当該文字列がタッチパネル１４の動画像表示部１４ｂに表示される（Ｓ６）。入力を止めない限り、文字列は常に表示されている。このようにすることで、ユーザは、再生中の動画像に対して、リアルタイムで文字列の挿入効果を視覚的に確認できる。事後的に文字列付きで動画像を再生して確認するという作業が不要になる。
At the same time that the user starts input on the
図５は、ステップＳ６でタッチパネル１４に文字列の位置入力が開始した時の、文字列挿入開始画面６０の例を示す。タッチパネル１４に位置入力されると、タッチパネル入力部１４ａが入力位置を示すデータを座標検出部３６に送り、座標検出部３６が入力位置６４を座標に変換する。この変換動作と同時に、選択されている文字列６２が、入力開始位置６４に表示される。位置入力が終了するまでの間、先に説明したように、文字列６２が表示され続ける。ユーザは、文字列６２の挿入された動画像をその場で確認できる。
FIG. 5 shows an example of the character string
タッチパネル入力部１４ａへのユーザ入力の有無を判定する（Ｓ７）。ユーザ入力が検出される場合（Ｓ７）、座標検出部３６が、タッチパネル入力部１４ａへの入力位置を座標に変換する（Ｓ８）。動画像合成部３２が、ステップＳ８で変換された座標に相当する位置で、先に選択された表示用データを再生中の動画像に合成する（Ｓ９）。合成で得られた画像が、タッチパネル１４の動画像表示部１４ｂに表示される。挿入情報生成部３４は、ステップＳ８で得られた座標、動画像のシーン番号、再生時間（フレーム）、及び選択された文字列を示す表示用データを相互に関連付けて内蔵ＲＡＭに一時的に保存する（Ｓ１０）。ステップＳ７に戻り、タッチパネル入力部１４ａへのユーザ入力の有無を判定する。
The presence / absence of user input to the touch
タッチパネル入力部１４ａへのユーザ入力が検出されない場合（Ｓ７）、タッチパネル入力部１４ａへの位置入力が終了していることになるので、タッチパネル１４での文字列の表示を終了する（Ｓ１１）。このようにすることで、ユーザは、リアルタイムに再生中の動画像に対して文字列の挿入効果を確認できる。タッチパネル入力部１４ａは、ユーザが入力した最後の位置、すなわち入力終了位置を座標検出部３６に送り、座標検出部３６が座標に変換する（Ｓ１２）。挿入情報生成部３４が、入力終了位置の座標、動画像のシーン番号、再生時間（フレーム）及び選択された文字列と、ステップＳ１０でＲＡＭに一時保存したデータとを含めて管理情報を生成する（Ｓ１３）。挿入情報生成部３４により生成された管理情報が、挿入情報記憶部２２に格納され（Ｓ１４）、表示用データ挿入処理を終了する。
When the user input to the touch
図６は、ステップＳ１４で文字列の位置入力が終了した時の文字列挿入終了画面６６の例を示す。図６は、動画像の１シーン目の１０秒に入力が開始され（入力開始位置６４）、１３秒に入力が終了する（入力終了位置７０）ことを表している。入力開始位置から入力終了位置までの軌跡６８に沿って文字列がリアルタイムで表示される。位置が入力されている間は、動画像のシーン番号、再生時間（フレーム）及び文字列が互いに関連付けてＲＡＭなどに一時記憶される。そして、位置入力が終了すると、管理情報として挿入情報記憶部２２に記憶される。文字列の入力が終了すると、表示されていた文字列も消える。入力開始位置６４から入力終了位置７０までの軌跡６８に沿って文字列が挿入されるので、図７に示すように、入力開始位置７６から入力終了位置７８までの軌跡７４が曲線になっていたとしても、何ら問題はない。その場合、表示用データ制御部３０が、文字列を曲線に沿った形に調整する。
Figure 6 shows an example of a string
図８は、挿入情報記憶部２２に記憶される管理情報の構成と内容の一例を示す。管理情報は、動画像のシーン番号、文字列情報、再生時間情報及び位置情報から構成される。表示用データ記憶部１６には、図９に示すような、文字列番号と文字列データとを対応付ける文字列管理テーブルを記憶している。文字列情報は、この文字列管理テーブルの文字列番号からなる。再生時間情報は、動画像の再生時間を時分秒又はフレーム単位で記憶する。位置情報は、ユーザによって入力された位置を座標検出部３６により変換した座標からなる。管理情報の説明は一例であり、選択された表示用データ、入力された位置情報、および再生時の動画像情報が相互に関連付けられて記憶されていればよい。
FIG. 8 shows an example of the configuration and contents of management information stored in the insertion
この管理情報を使用し、動画像再生時にユーザの指定した箇所で文字列を表示させることができる。動画像に対してユーザの指定した箇所に文字列を合成できる。また、動画像制御部２８により圧縮（エンコード）することで、文字列を合成した動画像を作成できる。詳細は後述する。
Using this management information, it is possible to display a character string at a location designated by the user at the time of moving image reproduction. A character string can be synthesized at a location designated by the user for a moving image. In addition, by compressing (encoding) by the moving
次に、ユーザによる文字列挿入操作後の再生処理を実行する処理を説明する。挿入情報解析部３９は、入力制御部２６からの指示に従い挿入情報記憶部２２から表示用データ挿入情報を読み出す。挿入情報解析部３９はさらに、読み出した挿入情報を解析し、解析結果を表示用データ読出し部２４に送る。
Next, processing for executing reproduction processing after a character string insertion operation by the user will be described. The insertion
動画像制御部２８は、入力制御部２６から動画像読出し要求を受け取ると、挿入情報解析部３９に指示して挿入情報記憶部２２から挿入情報解析部３９に表示用データを読み出させる。
When the moving
表示用データ読出し部２４は、挿入情報解析部３９の解析結果により表示用データを表示用データ記憶部１６から読み出し、読み出した表示用データを表示用データ制御部３０に送る。表示用データ読出し部２４はまた、表示用データ挿入情報に含まれる他の情報群を表示用データ制御部３０に送り、表示用データ制御部３０はそれらの情報を使い、表示用データ画像を作成する。
The display
ユーザにより所望の位置に文字列が挿入された後の再生処理を図１０のフローチャートを参照して説明する。ここでは、表示用データは文字列であり、ユーザは動画像１シーン目の１０秒から１３秒の間に「到着しました！」という文字列を、先に説明した方法で指定した位置に挿入する場合を例に説明する。 A reproduction process after a character string is inserted at a desired position by the user will be described with reference to a flowchart of FIG. Here, the display data is a character string, and the user inserts the character string “Arrive!” Between 10 seconds and 13 seconds in the first scene of the moving image at the position specified by the method described above. An example of this will be described.
図１０に示す処理は、動画像を再生できる状態でユーザからの所定の操作によってスタートする。ユーザの入力した指示により、動画像の再生要求を入力制御部２６が受ける（Ｓ２１）。入力制御部２６が受けた指示により挿入情報解析部３９が挿入情報記憶部２２から表示用データ挿入情報（管理情報）を読み出す（Ｓ２２）。
The process shown in FIG. 10 is started by a predetermined operation from the user in a state where a moving image can be reproduced. In response to an instruction input by the user, the
挿入情報解析部３９は、挿入情報記憶部２２から読み出した表示用データ挿入情報（管理情報）を解析する（Ｓ２３）。表示用データ挿入情報を解析することで、動画像のシーン番号、文字列情報、再生時間情報および位置情報を取得でき、取得した情報はＲＡＭに一時的に記憶される。管理情報が存在しなかった場合、挿入情報解析部３９が管理情報なしと判断する。
The insertion
ＲＡＭに記憶されている管理情報の解析結果と、再生される動画像のシーン番号および再生時間が一致しているかどうかを判定する（Ｓ２４）。一致しない場合（Ｓ２４）、動画像記憶部２０から読み出された動画像を再生表示する（Ｓ２５）。このとき、管理情報が一致していないので、動画像合成部３２は表示用画像データとの合成を行わない。
It is determined whether the analysis result of the management information stored in the RAM matches the scene number and playback time of the moving image to be played back (S24). If they do not match (S24), the moving image read from the moving image storage unit 20 is reproduced and displayed (S25). At this time, since the management information does not match, the moving
一致する場合（Ｓ２４）、挿入情報解析部３９は、管理情報の解析結果を表示用データ読出し部２４、座標検出部３６及び動画像合成部３２に伝える（Ｓ２６）。挿入情報解析部３９による管理情報の解析結果を元に、表示用データ読出し部２４と座標検出部３６により文字列画像データを生成する（Ｓ２７）。ステップＳ２７で生成された文字列画像データと動画像合成部３２が受けた管理情報の解析結果を元に、文字列画像データと動画像を合成する（Ｓ２８）。ステップＳ２８で合成された動画像を表示制御部３８に送る（Ｓ２９）。表示制御部３８に送られた動画像は、タッチパネル１４の動画像表示部１４ｂに表示される。
If they match (S24), the insertion
図１１は、ステップＳ２９で合成された動画像を再生している合成動画像再生画面の一例を示す。ユーザがタッチパネル１４上のタッチパネル入力部１４ａに入力操作したときに生成された管理情報を解析することで、ユーザの希望する場面でユーザに選択された文字列を動画像と合成表示できる。
FIG. 11 shows an example of a combined video playback screen that plays back the video combined in step S29. By analyzing the management information generated when the user performs an input operation on the touch
ステップＳ２５又はＳ２９の後、ユーザによる入力部１８からの再生終了要求があったかどうか、又は、動画像の最終位置になったかどうかを判定する（Ｓ３０）。どちらかの条件に合致した場合（Ｓ３０）、表示用データ挿入後の再生処理を終了する。どちらの条件にも合致しない場合（Ｓ３０）、ステップＳ２４に戻る。
After step S25 or S29, it is determined whether or not there has been a reproduction end request from the
図１２は、タッチパネル１４上のタッチパネル入力部１４ａにより入力された文字列を取り消す文字列取り消し画面の例を示す。図１２に示す例では、動画像１シーン目の１０秒から１３秒の間に挿入された「到着しました！」という文字列を取り消したいと仮定する。
FIG. 12 shows an example of a character string cancellation screen for canceling the character string input by the touch
図１２に示す文字列取り消し画面には、画面確認ボタン８０が表示される。タッチパネル１４により文字列を挿入した後、入力部１８により画面確認ボタン８０が選択されると、少なくとも文字列が挿入された場面にまで遡って確認再生が行われる。確認再生中にタッチパネル入力部１４ａによる入力が検出されると、挿入された文字列が消去される。挿入情報記憶部２２に記憶されている管理情報の該当する部分は、挿入情報生成部３４により再構築される。
A
図１３は、エフェクトを動画像に与える本発明に係る画像処理装置の第２実施例を組みこんだ再生装置の概略構成ブロック図を示す。図１３に示す再生装置１１０は、再生装置１０とは、システム制御部１１２にエフェクト決定部１３７を具備する点が主として異なる。再生装置１１０の手段１１２〜１３６，１３８，１３９の機能は、エフェクトに関する機能が追加されていることを除いて、それぞれ、再生装置１０の手段１２，１８〜３６，３８，３９のそれと同じである。以下では、エフェクトに関する相違点を主に説明する。
FIG. 13 is a block diagram showing the schematic configuration of a playback apparatus incorporating a second embodiment of the image processing apparatus according to the present invention for applying effects to moving images. The
表示用データ記憶部１１６は、表示用データとエフェクトデータを格納する。表示用データ読出し部１２４は、表示用データ記憶部１１６に記憶される表示用データおよびエフェクトデータから希望のものを読み出すことができる。
The display
座標検出部１３６は、タッチパネル入力部１１４ａによる入力位置を示す座標を算出し、表示用データ制御部１３０とエフェクト決定部１３７に送る。エフェクト決定部１３７は、座標検出部１３６から送られる座標とその動きから、表示用データに付加すべきエフェクトを決定する。決定されたエフェクトは、表示用データ制御部１３０に通知される。
The coordinate
表示用データ制御部１３０は、表示用データ読出し部１２４により読み出された表示用データ／エフェクトデータ、座標検出部１３６からの座標情報、及びエフェクト決定部１３７からのエフェクト情報に従い、表示用画像データを生成する。生成された表示画像データは、動画像合成部１３２に送られる。表示用画像データを生成するとき、必要に応じて表示用画像データの画面上の配置が調整される。
The
動画像合成部１３２はまた、表示用データ制御部１３０から表示用データ画像の生成時に使用した表示用データ情報、入力位置座標及びエフェクト情報を受け取り、動画像制御部１２８から動画像のシーン番号と再生時間（フレーム）を受け取る。動画像合成部１３２は、これらの情報を挿入情報生成部１３４に送り、必要により動画像制御部１２８にも送る。
The moving
挿入情報生成部１３４は、動画像合成部１３２から送られる情報を関連付けて管理情報を生成する。この管理情報は少なくとも、動画像のシーン番号、再生時間（フレーム数）、表示用データ、入力位置座標及びエフェクト情報を含み、挿入情報記憶部１２２に保存される。
The insertion
図１４は、図１３に示す実施例の表示用データ挿入処理のフローチャートを示す。ユーザが入力部１１８のジョグダイヤル等により指定した所望の動画像が、動画像表示部１１４ｂにより表示されているとする。ここでは、ユーザは、動画像の１シーン目の１０秒から１３秒の間に、表示用データである文字列「到着しました！」を所望の位置に所望のエフェクトを付加して挿入することを希望しているとする。
FIG. 14 shows a flowchart of the display data insertion process of the embodiment shown in FIG. It is assumed that a desired moving image designated by the user using the jog dial or the like of the
動画像を再生できる状態で、ユーザの所定操作により、図１４に示すフローが開始される。ユーザの指示に従い、表示用データ記憶部１１６の表示用データが読み出され、タッチパネル１１４の動画像表示部１１４ｂに表示される（Ｓ４１）。表示用データ記憶部１１６に格納されている表示用データは、書き換え可能であり、用途によって変更できる。表示用データ記憶部１１６の表示用データが、選択のために、図３に示すように、一覧表示される。この文字列一覧は、動画像の再生中でも、再生を開始する前でも、表示可能である。
The flow shown in FIG. 14 is started by a predetermined operation of the user in a state where the moving image can be reproduced. In accordance with a user instruction, display data in the display
ユーザは、入力部１１８により、動画像に挿入したい文字列を文字列一覧から選択する（Ｓ４２）。選択された文字列を示す表示用データは、ＲＡＭなどに一時記憶される。
The user uses the
ユーザが、ステップＳ４２で選択した文字列を挿入したい動画像を入力部１１８で選択すると、タッチパネル１１４の動画像表示部１１４ｂにその動画像が、図４に示すように、再生表示される（Ｓ４３）。また、動画像を再生してから挿入したい文字列を決定する場合には、ステップＳ４３をステップＳ４１の前に実行するようにすればよい。
When the user selects a moving image into which the character string selected in step S42 is to be inserted using the
再生中の動画像において文字列を挿入したい場面になった時、ユーザは、文字列を挿入したい位置をタッチパネル１１４上で指定する（Ｓ４４）。動画像が一時停止している場合は、タッチパネル１１４に位置入力を開始したと同時に、再生が始まる。この説明例では通常再生時であるとしているが、スロー再生又はコマ送り再生などでもよい。
When a scene in which a character string is desired to be inserted in the moving image being reproduced, the user designates a position where the character string is to be inserted on the touch panel 114 (S44). When the moving image is paused, playback starts at the same time as position input on the
タッチパネル１１４のタッチパネル入力部１１４ａは、入力された入力開始位置を座標検出部１３６に送り、座標検出部１３６は入力位置を座標に変換する（Ｓ４５）。
The touch
表示用データ制御部１３０は、ユーザによるタッチパネル１１４への入力操作により座標検出部１３６から送られる座標の位置又は個数などから、文字列の表示位置と表示の要否を決定する（Ｓ４６）。図１５は、座標検出部１３６の出力座標値と文字列の表示・非表示との関係例を示す。図１５に示す例では、入力座標の個数と、２点入力の場合の２点間距離によって、文字列の表示・非表示を決定する。２つの入力点間の距離が閾値より大きい場合、２点間の中間に文字列の中心を表示する。また、２点間の距離が閾値より小さい場合は、文字列を表示しない。閾値はユーザが任意に設定するものでも、内部で決められた値であってもよい。１点入力または３点以上の入力の場合には、文字列を表示しない。
The display
文字列を表示する場合（Ｓ４７）、再生中の動画像に対して、選択された文字列の合成表示を開始する（Ｓ４８）。図１６は２点入力により文字列（「到着しました！」）を動画像上に合成表示している画面例を示す。親指と人差し指で２点を入力しており、文字列１６０は、両者の入力点の中間にその中央が来るように表示される。エフェクトにより文字列を表示しない場合を除き、入力を止めない限り、文字列は常に表示されている。このようにすることで、ユーザはリアルタイムに再生中の動画像に対して文字列の効果をリアルタムに確認でき、再度、再生して確認するという動作が不要になる。
When displaying a character string (S47), the composition display of the selected character string is started with respect to the moving image being reproduced (S48). FIG. 16 shows an example of a screen in which a character string (“arrived!”) Is synthesized and displayed on a moving image by inputting two points. Two points are input with the thumb and forefinger, and the
文字列を表示しない場合（Ｓ４７）には、ステップＳ４８を迂回する。 If the character string is not displayed (S47), step S48 is bypassed.
タッチパネル入力部１１４ａへのユーザ入力の有無を判定する（Ｓ４９）。ユーザ入力が検出される場合（Ｓ４９）、座標検出部１３６が、タッチパネル入力部１１４ａへの入力位置を座標に変換する（Ｓ５０）。エフェクト決定部１３７は、座標検出部１３６からの座標を元にエフェクトを決定する（Ｓ５１）。表示用データ制御部１３０は、選択された文字列に対して、エフェクト決定部１３７で決定されたエフェクトを付加した表示用画像データを作成して動画像合成部１３２に供給する。動画像合成部１３２は、当該表示用画像データを再生中の動画像に合成する（Ｓ５２）。合成で得られた画像が、タッチパネル１１４の動画像表示部１１４ｂに表示される。このようにすることで、ユーザはリアルタイムに再生中の動画像に対して文字列のエフェクトを確認でき、再度、再生して確認するという操作が不要になる。
The presence or absence of user input to the touch
挿入情報生成部１３４は、ステップＳ５０で得られた座標、動画像のシーン番号、再生時間（フレーム）、選択された文字列を示す表示用データ、及びエフェクトを示す表示用データを相互に関連付けて内蔵ＲＡＭに一時的に保存する（Ｓ５３）。ステップＳ４９に戻り、タッチパネル入力部１１４ａへのユーザ入力の有無を判定する。
The insertion
タッチパネル入力部１１４ａへのユーザ入力が検出されない場合（Ｓ４９）、タッチパネル入力部１１４ａへの位置入力が終了していることになるので、タッチパネル１１４での文字列の表示を終了する（Ｓ５４）。エフェクト処理を実行中であれば、エフェクト処理を終了してから文字列の表示を消す。すなわち、エフェクト処理の途中で文字列が消えてしまうことはない。このようにすることで、ユーザは、リアルタイムに再生中の動画像に対して文字列の挿入効果を確認できる。
When the user input to the touch
タッチパネル入力部１１４ａは、ユーザが入力した最後の位置、すなわち入力終了位置を座標検出部１３６に送り、座標検出部１３６が座標に変換する（Ｓ５５）。挿入情報生成部１３４が、入力終了位置の座標、動画像のシーン番号、再生時間（フレーム）、選択された文字列及びエフェクトと、ステップＳ５３でＲＡＭに一時保存したデータとを含めて管理情報を生成する（Ｓ５６）。挿入情報生成部１３４により生成された管理情報が、挿入情報記憶部１２２に格納され（Ｓ５７）、表示用データ挿入処理を終了する。
The touch
図１７は、タッチパネル入力部１１４ａへの入力操作とエフェクトの関係例を示す。入力後の指の動きに応じてそれぞれエフェクトが決定される。複数のエフェクトが同時に行われることはなく、指の動きによってより近いエフェクト処理が選択される。図１８は、図１７に示す例における各エフェクトの表示の変化例を示す。
FIG. 17 shows a relationship example between the input operation to the touch
１点入力の場合、文字列は表示されない。 In the case of one-point input, the character string is not displayed.
２点入力で２点間の距離が設定閾値より小さい場合、文字列は表示されない。その状態で指を開くような動きをした場合、何も表示されていない状態から幕が開くような動きで文字列が表示される。図１７に示す例では、指が左右に移動しているが、上下でも斜めでも構わない。指の移動する方向に対して文字列の表示が制御される。２点が回転するような動きをした場合、何も表示されていない状態から回転するような形で文字列が表示される。回転の向きは、指の移動する方向により決定される。図１７に示す例では、右回りの回転を行う。 If the distance between the two points is smaller than the set threshold with two points input, the character string is not displayed. If the finger moves in such a state, the character string is displayed in such a manner that the curtain opens from a state where nothing is displayed. In the example shown in FIG. 17, the finger moves left and right, but it may be up and down or diagonal. The display of the character string is controlled in the direction in which the finger moves. When the movement is such that the two points rotate, the character string is displayed in such a manner as to rotate from a state where nothing is displayed. The direction of rotation is determined by the direction in which the finger moves. In the example shown in FIG. 17, clockwise rotation is performed.
２点入力で、２点間の距離が設定閾値より大きい場合、文字列は、２点間の中間に文字列の中心が位置するように表示される。この状態で２点を同じ方向に動かした場合、表示されている文字列も、指を動かした方向に移動する。図１７に示す例では、左に移動しているが、どの方向にも移動可能である。この状態で２点間の距離を小さくするように指を動かした場合、幕が閉じるような動きで文字列が消える。図１７に示す例では、左右に移動しているが、どの方向にも移動可能である。指の移動する方向に対して文字列の表示が制御される。 If the distance between the two points is greater than the set threshold when the two points are input, the character string is displayed so that the center of the character string is located in the middle between the two points. When two points are moved in the same direction in this state, the displayed character string also moves in the direction in which the finger is moved. In the example shown in FIG. 17, it moves to the left, but it can move in any direction. In this state, if the finger is moved so as to reduce the distance between the two points, the character string disappears with a movement that closes the curtain. In the example shown in FIG. 17, it moves to the left and right, but it can move in any direction. The display of the character string is controlled in the direction in which the finger moves.
また、２点が回転するような動きをした場合、表示されている文字列が回転する。回転の向きは、指の移動する方向により指定される。図１７に示す例では、右回りの回転を行う。２点間の距離を広げる動きをした場合、文字列が表示される。幕が閉じるように文字列の表示を制御する。文字列が消えている時にこの操作を行った場合には、消え始めた文字列を再度、幕が開くような形で表示する。図１７に示す例では、左右に移動しているが、どの方向にも移動可能であり、指の移動する方向に対して文字列の表示が制御される。 In addition, when the movement is such that the two points rotate, the displayed character string rotates. The direction of rotation is specified by the direction in which the finger moves. In the example shown in FIG. 17, clockwise rotation is performed. When moving to increase the distance between two points, a character string is displayed. Controls the display of the character string so that the curtain closes. If this operation is performed when the character string has disappeared, the character string that has begun to disappear is displayed again so that the curtain opens. In the example shown in FIG. 17, it moves left and right, but it can move in any direction, and the display of the character string is controlled in the direction in which the finger moves.
３点以上の入力があった場合、文字列は表示されない。また、入力点が１点から２点になり、且つ、その２点間の距離が小さい場合にも、文字列は表示されない。 If there are three or more inputs, the character string is not displayed. Also, the character string is not displayed when the number of input points is 1 to 2 and the distance between the two points is small.
入力点が１点から２点になり、且つ、その２点間の距離が大きい場合、先に入力されていた点から後に入力された点の方向に文字列が移動する。図１７に示す例では、右から左に移動しているが、どの方向にも移動可能であり、時間的に前後する２つの入力点間の方向に対して文字列の表示が制御される。 When the number of input points changes from one point to two points and the distance between the two points is large, the character string moves in the direction from the point input earlier to the point input later. In the example shown in FIG. 17, it moves from right to left, but it can move in any direction, and the display of the character string is controlled in the direction between two input points that move back and forth in time.
入力点が２点から１点になり、かつ、１点になる前の２点間の距離が小さい場合、文字列は表示されない。入力点が２点から１点になり、１点になる前の２点間の距離が大きい場合、入力点に対して文字列が移動する。図１７に示す例では、左から右に移動しているが、どの方向にも移動可能であり、入力点の変化方向に対して文字列の表示が制御される。 When the number of input points is changed from two to one and the distance between the two points before becoming one point is small, the character string is not displayed. When the number of input points changes from two to one and the distance between the two points before the point is large, the character string moves with respect to the input point. In the example shown in FIG. 17, the movement is from left to right, but the movement is possible in any direction, and the display of the character string is controlled with respect to the changing direction of the input point.
図１９は２つの指による入力操作例を示す。親指と人差し指を矢印で示す軌跡１７０のように近づける。先に説明したように、このような操作の場合、表示されていた文字列が、幕が閉じるような動きで消えるエフェクトが選択されたことになる。
FIG. 19 shows an example of an input operation with two fingers. The thumb and index finger are brought close to each other as shown by a
図２０は、文字列の入力が終了した文字列挿入終了画面の例を示している。図１９に示すように、動画像の１シーン目の１０秒に入力が開始され、矢印で示す軌跡１７０で１３秒に入力が終了し、図２０に示す画面になる。
FIG. 20 shows an example of a character string insertion end screen after the input of the character string is completed. As shown in FIG. 19, the input is started at 10 seconds of the first scene of the moving image, and the input is completed at 13 seconds on the
図２１は、入力開始位置から入力終了位置までの軌跡１７０に沿って表示される文字列の表示内容の変化を示す。２つの入力点間の距離が徐々に近くなっていくことで、文字列が消えていくエフェクトが付加される。位置が入力されている間、動画像のシーン番号、再生時間（フレーム）、文字列及びエフェクトが互いに関連付けて内蔵ＲＡＭなどに一時的に記憶され、入力が終了すると管理情報として挿入情報記憶部１２２に記憶される。
FIG. 21 shows a change in the display content of the character string displayed along the
図２２は、挿入情報記憶部１２２に記憶される管理情報の構成と内容の一例を示す。管理情報は、動画像のシーン番号、文字列情報、エフェクト情報、再生時間情報及び位置情報からなる。文字列情報に収用される文字列番号は、図９に示すような文字列管理テーブルで文字列データが関連付けられる。同様に、エフェクト情報に収用されるエフェクオ番号は、図２３に示すようなエフェクト管理テーブルによりエフェクト処理内容と関連付けられる。表示用データ記憶部１１６は、このような文字列管理テーブルおよびエフェクト管理データルを記憶する。
FIG. 22 shows an example of the configuration and contents of management information stored in the insertion
再生時間情報は、動画像の再生時間を時間、分、秒およびフレーム単位で記憶される。位置情報は、ユーザによって入力された位置を座標検出部１３６により変換された座標として記憶する。管理情報に関する以上の説明はあくまでも一例であり、選択された表示用データ、入力位置情報、再生時の動画像情報およびエフェクト情報が互いに関連付けられていればよい。
The reproduction time information stores the reproduction time of the moving image in units of hours, minutes, seconds and frames. The position information stores the position input by the user as coordinates converted by the coordinate
この管理情報を使用し、動画像再生時に文字列を指定のエフェクトで動画像に合成して動画像制御部１２８により圧縮（エンコード）することで、文字列の効果を付加した動画像を作成できる。この動作の詳細は、以下に説明する。
Using this management information, when a moving image is played back, a character string is combined with the moving image with a specified effect and compressed (encoded) by the moving
挿入情報解析部１３９は、入力制御部１２６からの指示に従い挿入情報記憶部１２２から表示用データ挿入情報を読み出す。挿入情報解析部１３９はさらに、読み出した挿入情報を解析し、解析結果を表示用データ読出し部１２４に送る。
The insertion
動画像制御部１２８は、入力制御部１２６から動画像読出し要求を受け取ると、挿入情報解析部１３９に指示して挿入情報記憶部１２２から挿入情報解析部１３９に表示用データを読み出させる。
When the moving
表示用データ読出し部１２４は、挿入情報解析部１３９の解析結果により表示用データとエフェクト情報を表示用データ記憶部１１６から読み出し、読み出した表示用データおよびエフェクト情報を表示用データ制御部１３０に送る。表示用データ読出し部１２４はまた、表示用データ挿入情報に含まれる他の情報群を表示用データ制御部１３０に送り、表示用データ制御部１３０はそれらの情報を使い、表示用データ画像を作成する。
The display
ユーザにより所望の位置に文字列が挿入された後の再生処理を図２４のフローチャートを参照して説明する。ここでは、表示用データは文字列であり、ユーザは動画像１シーン目の１０秒から１３秒の間に「到着しました！」という文字列を先に説明した方法で指定した位置に指定したエフェクトを付加して挿入する場合を例に説明する。 A reproduction process after a character string is inserted at a desired position by the user will be described with reference to a flowchart of FIG. Here, the display data is a character string, and the user specified the character string “Arrive!” At the position specified by the method described above between 10 seconds and 13 seconds in the first scene of the moving image. A case where an effect is added and inserted will be described as an example.
図２４に示す処理は、動画像を再生できる状態でユーザからの所定の操作によってスタートする。ユーザの入力した指示により、動画像の再生要求を入力制御部１２６が受ける（Ｓ６１）。入力制御部１２６が受けた指示により挿入情報解析部１３９が挿入情報記憶部１２２から表示用データ挿入情報（管理情報）を読み出す（Ｓ６２）。
The process shown in FIG. 24 is started by a predetermined operation from the user in a state where a moving image can be reproduced. In response to an instruction input by the user, the
挿入情報解析部１３９は、挿入情報記憶部１２２から読み出した表示用データ挿入情報（管理情報）を解析する（Ｓ６３）。表示用データ挿入情報を解析することで、動画像のシーン番号、文字列情報、再生時間情報、位置情報およびエフェクト情報を取得でき、取得した情報はＲＡＭに一時的に記憶される。管理情報が存在しなかった場合、挿入情報解析部１３９が管理情報なしと判断する。
The insertion
ＲＡＭに記憶されている管理情報の解析結果と、再生される動画像のシーン番号および再生時間が一致しているかどうかを判定する（Ｓ６４）。一致しない場合（Ｓ６４）、動画像記憶部１２０から読み出された動画像を再生表示する（Ｓ６５）。このとき、管理情報が一致していないので、動画像合成部１３２は表示用画像データとの合成を行わない。
It is determined whether the analysis result of the management information stored in the RAM matches the scene number and playback time of the moving image to be played back (S64). If they do not match (S64), the moving image read from the moving
一致する場合（Ｓ６４）、挿入情報解析部１３９は、管理情報の解析結果を表示用データ読出し部１２４、座標検出部１３６及び動画像合成部１３２に伝える（Ｓ６６）。挿入情報解析部１３９による管理情報の解析結果を元に、表示用データ読出し部１２４、座標検出部１３６およびエフェクト決定部１３７が、エフェクトを付加した文字列画像データを生成する（Ｓ６７）。ステップＳ６７で生成された文字列画像データと動画像合成部１３２が受けた管理情報の解析結果を元に、文字列画像データと動画像を合成する（Ｓ６８）。ステップＳ６８で合成された動画像を表示制御部１３８に送る（Ｓ６９）。表示制御部１３８に送られた動画像は、タッチパネル１１４の動画像表示部１１４ｂに表示される。
When they match (S64), the insertion
図２５は、ステップＳ６９で合成された動画像を再生している合成動画像再生画面の一例を示す。ユーザがタッチパネル１１４上のタッチパネル入力部１１４ａに入力操作したときに生成された管理情報を解析することで、ユーザの希望する場面でユーザに選択された文字列を、指定のエフェクト付きで動画像と合成表示できる。
FIG. 25 shows an example of a combined video playback screen that plays back the video combined in step S69. By analyzing the management information generated when the user performs an input operation on the touch
ステップＳ６５又はＳ６９の後、ユーザによる入力部１１８からの再生終了要求があったかどうか、又は、動画像の最終位置になったかどうかを判定する（Ｓ７０）。どちらかの条件に合致した場合（Ｓ７０）、表示用データ挿入後の再生処理を終了する。どちらの条件にも合致しない場合（Ｓ７０）、ステップＳ６４に戻る。
After step S65 or S69, it is determined whether or not there is a reproduction end request from the
図１２を参照して説明したように、画面確認ボタン８０を有する文字列取消し画面を使用することで、上述した方法で挿入した文字列を削除又は取り消すことができる。挿入した文字列を取り消した場合、挿入情報記憶部１２２に記憶される関連する管理情報も、取消し後の内容に合致するように、挿入情報生成部１３４により更新される。
As described with reference to FIG. 12, the character string inserted by the above-described method can be deleted or canceled by using the character string cancel screen having the
動画像記憶部２０，１２０に記憶される動画像に指定の表示用データを合成する実施例を説明した。しかし、本発明は、カメラにおいて、撮像部による撮影中、即ち記録中の動画像にリアルタイムで指定の表示用データを合成する場合にも適用可能であることは明らかである。
The embodiment in which the designated display data is synthesized with the moving images stored in the moving
以上の説明はあくまでも一例であり、本発明は、上述の実施例に何ら限定されるものではない。 The above description is merely an example, and the present invention is not limited to the above-described embodiment.
１０‥‥再生装置
１２‥‥システム制御部
１４ａ‥‥タッチパネル入力部
１４ｂ‥‥動画像表示部
１６‥‥表示用データ記憶部
２０‥‥動画像記憶部
２２‥‥挿入情報記憶部
２４‥‥表示用データ読出し部
３０‥‥表示用データ制御部
３２‥‥動画像合成部
３４‥‥挿入情報生成部
３６‥‥座標検出部
３９‥‥挿入情報解析部
DESCRIPTION OF
Claims (12)
動画を再生して前記表示手段に表示するように制御する表示制御手段と、
前記表示制御手段で動画を再生表示している際に前記タッチ検出手段で検出された複数点でのタッチ操作に応じて、前記動画に対して、該複数点でのタッチ操作の各入力点の位置関係に応じた効果を付して表示用データを合成するように制御する制御手段
とを有し、
前記制御手段は、２点でのタッチ操作を検出した場合に２つの入力点間の距離が開くように移動することに応じて、前記表示用データが表示されていない状態から、該２つの入力点間の距離が開く方向に前記表示用データが開くような効果を付して該表示用データが現れるように、かつ、該２つの入力点間の距離が開くように移動しても該表示用データに含まれる要素のサイズを変倍することなく、前記動画に該表示用データを合成するように制御する
ことを特徴とする画像処理装置。 Touch detection means capable of detecting touch operations at a plurality of points on the display means;
Display control means for controlling to reproduce and display a moving image on the display means;
In response to a touch operation at a plurality of points detected by the touch detection unit while the moving image is reproduced and displayed by the display control unit, each input point of the touch operation at the plurality of points is applied to the video. Control means for controlling to synthesize display data with an effect according to the positional relationship,
When the control means detects a touch operation at two points, the control means moves the two input points from a state in which the display data is not displayed in response to movement so that the distance between the two input points is increased. Even if the display data appears so that the display data appears in the direction in which the distance between the points opens , and the distance between the two input points opens, the display An image processing apparatus that controls to combine the display data with the moving image without scaling the size of the elements included in the data .
動画を再生して前記表示手段に表示するように制御する表示制御手段と、
前記表示制御手段で動画を再生表示している際に前記タッチ検出手段で検出された複数点でのタッチ操作に応じて、前記動画に対して、該複数点でのタッチ操作の各入力点の位置関係に応じた効果を付して表示用データを合成するように制御する制御手段と
を有し、
前記制御手段は、２点でのタッチ操作を検出した場合に２つの入力点間の距離が小さくなるように移動することに応じて、前記表示用データが表示された状態から、該表示用データに含まれる要素のサイズを変倍することなく、前記表示用データが閉じるような効果を付して該表示用データを合成し、その後、該表示用データを消すように制御する
ことを特徴とする画像処理装置。 Touch detection means capable of detecting touch operations at a plurality of points on the display means;
Display control means for controlling to reproduce and display a moving image on the display means;
In response to a touch operation at a plurality of points detected by the touch detection unit while the moving image is reproduced and displayed by the display control unit, each input point of the touch operation at the plurality of points is applied to the video. Control means for controlling to synthesize display data with an effect according to the positional relationship,
When the control means detects a touch operation at two points, the control means moves the display data from a state in which the display data is displayed in response to movement so that the distance between the two input points becomes small. The display data is synthesized with the effect of closing the display data without changing the size of the elements included in the display, and then the display data is controlled to be erased. An image processing apparatus.
動画を再生して前記表示手段に表示するように制御する表示制御ステップと、
前記表示制御ステップで動画を再生表示している際に前記タッチ検出ステップで検出された複数点でのタッチ操作に応じて、前記動画に対して、該複数点でのタッチ操作の各入力点の位置関係に応じた効果を付して表示用データを合成するように制御する制御ステップ
とを有し、
前記制御ステップは、２点でのタッチ操作を検出した場合に２つの入力点間の距離が開くように移動することに応じて、前記表示用データが表示されていない状態から、該２つの入力点間の距離が開く方向に前記表示用データが開くような効果を付して該表示用データが現れるように、かつ、該２つの入力点間の距離が開くように移動しても該表示用データに含まれる要素のサイズを変倍することなく、前記動画に該表示用データを合成するように制御する
ことを特徴とする画像処理装置の制御方法。 A touch detection step capable of detecting touch operations at a plurality of points on the display means;
A display control step for controlling to reproduce and display a moving image on the display means;
In response to the touch operation at a plurality of points detected in the touch detection step when the moving image is reproduced and displayed in the display control step, each input point of the touch operation at the plurality of points is applied to the video. A control step for controlling to synthesize display data with an effect according to the positional relationship,
In the control step, when the touch operation at two points is detected, the two input points are displayed from the state where the display data is not displayed in response to the movement so that the distance between the two input points is increased. Even if the display data appears so that the display data appears in the direction in which the distance between the points opens , and the distance between the two input points opens, the display A control method for an image processing apparatus, wherein control is performed so as to synthesize the display data with the moving image without scaling the size of elements included in the data .
動画を再生して前記表示手段に表示するように制御する表示制御ステップと、
前記表示制御ステップで動画を再生表示している際に前記タッチ検出ステップで検出された複数点でのタッチ操作に応じて、前記動画に対して、該複数点でのタッチ操作の各入力点の位置関係に応じた効果を付して表示用データを合成するように制御する制御ステップ
とを有し、
前記制御ステップは、２点でのタッチ操作を検出した場合に２つの入力点間の距離が小さくなるように移動することに応じて、前記表示用データが表示された状態から、該表示用データに含まれる要素のサイズを変倍することなく、前記表示用データが閉じるような効果を付して該表示用データを合成し、その後、該表示用データを消すように制御する
ことを特徴とする画像処理装置の制御方法。 A touch detection step capable of detecting touch operations at a plurality of points on the display means;
A display control step for controlling to reproduce and display a moving image on the display means;
In response to the touch operation at a plurality of points detected in the touch detection step when the moving image is reproduced and displayed in the display control step, each input point of the touch operation at the plurality of points is applied to the video. A control step for controlling to synthesize display data with an effect according to the positional relationship,
In the control step, when the touch operation at two points is detected, the display data is displayed from the state where the display data is displayed in response to the movement so that the distance between the two input points is reduced. The display data is synthesized with the effect of closing the display data without changing the size of the elements included in the display, and then the display data is controlled to be erased. For controlling an image processing apparatus.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009066897A JP5550247B2 (en) | 2009-03-18 | 2009-03-18 | Image processing apparatus, control method and program thereof, and storage medium |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009066897A JP5550247B2 (en) | 2009-03-18 | 2009-03-18 | Image processing apparatus, control method and program thereof, and storage medium |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2010220095A JP2010220095A (en) | 2010-09-30 |
| JP2010220095A5 JP2010220095A5 (en) | 2012-05-10 |
| JP5550247B2 true JP5550247B2 (en) | 2014-07-16 |
Family
ID=42978414
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2009066897A Expired - Fee Related JP5550247B2 (en) | 2009-03-18 | 2009-03-18 | Image processing apparatus, control method and program thereof, and storage medium |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5550247B2 (en) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5594117B2 (en) * | 2010-12-16 | 2014-09-24 | カシオ計算機株式会社 | Image processing apparatus, image processing method, and program |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH07129312A (en) * | 1993-11-05 | 1995-05-19 | Oki Electric Ind Co Ltd | Picture processor |
| JP2000278635A (en) * | 1999-03-26 | 2000-10-06 | Tokyo Electric Power Co Inc:The | Device for generating and editing explanation source, device for presenting explanation source and explanation aid system |
| JP4178679B2 (en) * | 1999-08-27 | 2008-11-12 | ソニー株式会社 | Recording / reproducing apparatus and image display method |
| JP2001197366A (en) * | 2000-01-12 | 2001-07-19 | Hitachi Ltd | Picture synthesis method and recording medium recording picture synthesis program |
| JP4803883B2 (en) * | 2000-01-31 | 2011-10-26 | キヤノン株式会社 | Position information processing apparatus and method and program thereof. |
| JP4903371B2 (en) * | 2004-07-29 | 2012-03-28 | 任天堂株式会社 | Game device and game program using touch panel |
| JP4200960B2 (en) * | 2004-10-01 | 2008-12-24 | ソニー株式会社 | Editing apparatus, editing method, and program |
| WO2008111114A1 (en) * | 2007-03-09 | 2008-09-18 | Pioneer Corporation | Av editor, av processor, and program |
-
2009
- 2009-03-18 JP JP2009066897A patent/JP5550247B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2010220095A (en) | 2010-09-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8004594B2 (en) | Apparatus, method, and program for controlling display of moving and still images | |
| JP5524653B2 (en) | Display control apparatus and control method thereof | |
| JP2010288015A (en) | Information processing device, information processing method, and information processing program | |
| JP5701017B2 (en) | Movie playback apparatus, movie playback method, computer program, and storage medium | |
| KR20210082232A (en) | Real-time video special effects systems and methods | |
| JP5528008B2 (en) | Playback apparatus and playback method | |
| KR20070092419A (en) | Thumbnail recording method for providing information of video data and terminal using the same | |
| JP2003009044A (en) | Method and device for recording and reproducing | |
| JP2016119600A (en) | Editing device and editing method | |
| JP5077979B2 (en) | Display control apparatus, display control method, and program | |
| KR101323331B1 (en) | Method and apparatus of reproducing discontinuous AV data | |
| US8750685B2 (en) | Image processing apparatus | |
| CN116457067A (en) | Rendering and editing recent content in a window during execution of a content application | |
| JP5764005B2 (en) | Playback apparatus and playback method | |
| US6577805B1 (en) | Picture recording and reproducing apparatus and method | |
| JP5550247B2 (en) | Image processing apparatus, control method and program thereof, and storage medium | |
| JP4767900B2 (en) | Image reproducing apparatus, image reproducing program, recording medium, and image reproducing method | |
| JP4330968B2 (en) | REPRODUCTION DEVICE, RECORDING DEVICE, REPRODUCTION PROGRAM, AND COMPUTER-READABLE RECORDING MEDIUM CONTAINING THE REPRODUCTION PROGRAM | |
| JPH10108123A (en) | Image reproduction device | |
| JP2012191544A (en) | Reproduction apparatus, imaging apparatus, and moving image reproduction program | |
| JP5493362B2 (en) | Movie playback apparatus and program | |
| JP4698961B2 (en) | Electronic camera and electronic camera control program | |
| KR100883119B1 (en) | Method for editing of moving picture file list | |
| JP2008283708A (en) | Playback apparatus | |
| JP6117621B2 (en) | Information processing apparatus, information processing method, and information processing program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120314 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120314 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130214 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130319 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130515 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140107 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140307 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140401 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140404 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140422 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140520 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 5550247 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: R3D03 |
|
| LAPS | Cancellation because of no payment of annual fees |