JP2011176415A - 映像処理装置と映像処理方法、映像処理システムおよびプログラム - Google Patents

Abstract

【課題】多様な編集効果を容易に得ることができるようにする。
【解決手段】設定記憶部１７には、撮像装置の動作を設定する動作設定情報が記憶される。制御部１８は、撮像装置の現在の動作についての動作設定情報を操作部１４の操作レバーの一方の端点に対応する第１連動設定情報とする。また、記憶されている動作設定情報を操作レバーの他方の端点に対応する第２連動設定情報として、第１連動設定情報と第２連動設定情報から動作可変範囲を決定する。制御部１８は、操作レバーの位置に応じた映像加工処理を行う。また、制御部１８は、第１連動設定情報と第２連動設定情報に基づいた動作可変範囲内で、操作位置に応じた動作を行うように撮像装置を制御する。したがって、映像加工処理と撮像装置の動作が連動して行われることになり、多様な編集効果を容易に得ることができる。
【選択図】 図１

Description

この発明は、映像処理装置と映像処理方法、映像処理システムおよびプログラムに関する。詳しくは、複数の撮像装置で生成された映像信号を用いて編集処理を行う場合に、多様な編集効果を容易に得ることができるようにする。

従来、複数の撮像装置で得られた映像信号を用いて映像の合成や切り換え等を行うために、映像処理装置が用いられている。また、映像処理装置で例えば複数の映像を合成する場合、合成した映像に違和感を生じることがないように、特許文献１では、複数の撮像装置を共通のコントローラから送信される信号に基づいて同一動作となるように制御することが行われている。

特開２００４−２９７２８３号公報

ところで、撮像装置からの映像信号の切り換えや映像信号にエフェクトを施す映像加工処理を行う際に、撮像装置のパンニング操作、チルティング操作、ズーム操作等を行えば、撮像装置の動作が固定されている場合に比べて、多様な編集効果を得ることができる。例えば、第１撮像装置で生成された映像信号を第２撮像装置で生成された映像信号に切り換える際に、第１撮像装置ではズームアウト動作、第２の撮像装置ではズームイン動作を行えば、ズーム動作と映像信号の切り換えを連動して行うことができる。

しかし、操作レバーで映像の切り換え等を行い、他の操作レバーでパンニング操作、チルティング操作、ズーム操作等を行うと、映像加工処理と撮像装置の動作を各操作レバーで変更したとき、タイミング等を合わせることが難しい。例えば、映像の切り換えが終了したときに撮像方向やズーム倍率が所望の設定位置に達していない場合や、撮像方向やズーム倍率が所望の設定位置に達しても映像の切り換えが終了していない等の場合が生じて、高品質な編集効果を得ることができない。

そこで、この発明では、多様な編集効果を容易に得ることができる映像処理装置と映像処理方法、映像処理システムおよびプログラムを提供することを目的とする。

この発明の第１の側面は、撮像装置からの映像信号の切り換えや前記映像信号にエフェクトを施す映像加工処理を行う映像加工処理部と、前記映像加工処理に連動させて前記撮像装置の動作を制御する制御部とを有する映像処理装置にある。

この発明においては、撮像装置の動作を設定するための動作設定情報が記憶部に記憶されて、この記憶されている動作設定情報と撮像装置の現在の動作についての動作設定情報とから、動作可変範囲が決定される。例えば、現在の動作についての動作設定情報が操作部の一方の端点に対応する第１連動設定情報とされて、記憶されている動作設定情報が操作部の他方の端点に対応する第２連動設定情報とされて第１連動設定情報と第２連動設定情報から動作可変範囲が決定される。また、操作部の操作位置に応じた映像加工処理が行われて、この映像加工処理の動作の変化に対応させて、撮像装置の動作が動作可変範囲内で連動して変化される。

この発明の第２の側面は、映像加工処理部で、撮像装置からの映像信号の切り換えや前記映像信号にエフェクトを施す映像加工処理を行うステップと、制御部で、前記映像加工処理に連動させて前記撮像装置の動作を制御するステップとを具備する映像処理方法にある。

この発明の第３の側面は、撮像装置と、前記撮像装置からの映像信号の切り換えや前記映像信号にエフェクトを施す映像加工処理を行う映像加工処理部と、前記映像加工処理に連動させて前記撮像装置の動作を制御する制御部とを有する映像処理システムにある。

この発明の第４の側面は、コンピュータを、撮像装置からの映像信号の切り換えや前記映像信号にエフェクトを施す映像加工処理を行う機能手段と、前記映像加工処理に連動させて前記撮像装置の動作を制御する機能手段として機能させるためのプログラムにある。

なお、本発明のコンピュータ・プログラムは、例えば、様々なプログラム・コードを実行可能な汎用コンピュータ・システムに対して、コンピュータ可読な形式で提供する記憶媒体、通信媒体、例えば、光ディスクや磁気ディスク、半導体メモリなどの記憶媒体、あるいは、ネットワークなどの通信媒体によって提供可能なコンピュータ・プログラムである。このようなプログラムをコンピュータ可読な形式で提供することにより、コンピュータ・システム上でプログラムに応じた処理が実現される。

この発明によれば、撮像装置からの映像信号の切り換えや映像信号にエフェクトを施す映像加工処理に連動させて撮像装置の動作が制御されるので、映像加工処理と撮像装置の動作を個々に制御する必要がなく、多様な編集効果を容易に得ることができるようになる。

映像処理システムと映像処理装置の構成を示す図である。 操作部の構成を示す図である。 動作設定情報の保存処理を示すフローチャートである。 設定記憶部に記憶された動作設定情報を例示した図である。 連動動作を示すフローチャートである。 第１連動設定情報と第２連動設定情報とトランジションレバーの位置の関係を示す図である。 編集動作を示す図である。 他の編集動作を示す図である。 ハードウェアの構成例を示す図である。

以下、発明を実施するための形態について説明する。なお、説明は以下の順序で行う。
１．映像処理装置の構成
２．映像処理装置の動作
３．プログラムにより実行する場合について

＜１．映像処理装置の構成＞
図１は、本発明の映像処理システムの映像処理の構成を示している。映像処理システムは、映像処理装置１０と撮像装置を用いて構成されている。なお、図１では複数の撮像装置３０-1〜３０-nを用いた場合を図示している。

映像処理装置１０は、クロスポイントスイッチ１１、映像加工処理部１２、駆動処理部１３-1〜１３-n、操作部１４、表示部１６、設定記憶部１７、制御部１８を有している。

クロスポイントスイッチ１１は、映像処理装置１０に接続されている撮像装置、例えば撮像装置３０-1〜３０-nから供給される映像信号を選択して、映像加工処理部１２に出力する。クロスポイントスイッチ１１は、制御部１８からの制御信号に基づき、動作の設定を行う撮像装置の映像信号や映像加工処理に用いる映像信号等の選択を行う。

映像加工処理部１２は、制御部１８からの制御信号に基づき、クロスポイントスイッチ１１で選択された映像信号を用いて、映像の切り換えやエフェクトを施す処理を行う。例えば、映像のワイプ処理やミックス処理、ピクチャインピクチャ処理、クロマキー処理、ＤＳＫ(Down Stream Keyer)等を行う。なお、以下の説明ではこれらの処理をまとめて映像加工処理という。また、映像加工処理部１２は、制御部１８からの制御信号に基づき、映像加工処理が行われていない映像信号の出力も行う。

駆動処理部１３-1〜１３-nは、映像処理装置１０に接続されている撮像装置の駆動処理を行う。例えば、駆動処理部１３-1〜１３-nは、撮像装置を駆動してパンニング動作、チルティング動作、ズーム動作等を行わせる。また、駆動処理部１３-1〜１３-nは、撮像装置を駆動して、ホワイトバランス、アイリス、映像信号のゲイン、シャッター速度等の変更を行ってもよい。

操作部１４は、何れの撮像装置からの映像信号を用いてどのような映像加工処理を行うか選択するための選択操作や、撮像装置をどのように駆動するか制御するための制御操作等を行うための操作スイッチや操作レバー等で構成されている。また、操作部１４には、表示部１６が設けられており、メニュー表示や設定状態等の表示が行われる。

設定記憶部１７は、撮像装置を駆動するとき、撮像装置をどのような動作状態に設定して映像信号の生成を行わせるかを示した動作設定情報を記憶する。このように動作設定情報を記憶することで、操作部１４を操作して所望の映像が得られるように撮像装置を制御しなくとも、記憶している動作設定情報を用いることで、所望の映像が得られるように撮像装置の動作を容易に設定できるようになる。なお、設定記憶部１７は、駆動処理部１３-1〜１３-nのそれぞれに設けて、各駆動処理部では、接続されている撮像装置の動作設定情報を記憶するようにしてもよい。また、制御部１８に設けられたメモリを設定記憶部として利用して、動作設定情報を記憶するようにしてもよい。

制御部１８は、操作部１４からの操作信号に基づいて各部の動作を制御することで、ユーザ操作に応じて情報処理装置や情報処理装置に接続された撮像装置を動作させる。また、表示信号を生成して表示部１６に出力することで、メニュー表示や設定状態等の表示を表示部１６で行わせる。

撮像装置３０-1は、駆動処理部１３-1からの駆動信号に基づき、ズーム倍率や撮像方向、フォーカス状態、アイリス等の設定が変更可能とされている。撮像装置３０-1は、映像信号の生成を行いながら駆動処理部１３-1から駆動信号に基づきズーム倍率や撮像方向等の変更を行う。撮像装置３０-1は、生成した映像信号をクロスポイントスイッチ１１に出力する。さらに、撮像装置３０-2〜３０-nも撮像装置３０-1と同様に映像信号の生成を行いながら駆動処理部１３-2〜１３-nからの駆動信号に基づいて設定の変更を行い、生成した映像信号をクロスポイントスイッチ１１に出力する。

図２は、例えば２つの映像信号を用いて映像加工処理を行う場合の操作部１４の構成を例示している。操作部１４は、第１撮像装置選択ボタン１４１、第２撮像装置選択ボタン１４２、映像加工処理選択ボタン１４３、トランジションレバー１４４、操作対象選択ボタン１４５、ジョイスティック１４６、保存ボタン１４７を有している。また、操作部１４は、操作つまみ１４８、連動ボタン１４９等を有している。

第１撮像装置選択ボタン１４１は、映像加工処理に用いる第１の映像信号の生成が行われている撮像装置を選択するための選択ボタンである。

第２撮像装置選択ボタン１４２は、映像加工処理に用いる第２の映像信号の生成が行われている撮像装置を選択するための選択ボタンである。

映像加工処理選択ボタン１４３は、第１と第２の映像信号を用いてどのような映像加工処理を行うか選択するための選択ボタンである。

トランジションレバー１４４は、映像加工処理の処理状態を変化させるための操作レバーである。

操作対象選択ボタン１４５は、動作設定情報の記憶を行う撮像装置（以下「操作対象撮像装置」という）を選択するための選択ボタンである。

ジョイスティック１４６は、操作対象選択ボタン１４５で選択した操作対象撮像装置の設定を変化させるための操作レバーである。例えば操作対象撮像装置の撮像方向やズームレンズの位置（以下「ズーム位置」という）、フォーカス、ホワイトバランス等が、ジョイスティック１４６の操作に応じて変更される。

保存ボタン１４７は、操作対象撮像装置の動作設定情報を設定記憶部１７に記憶させるための操作ボタンである。例えば、ジョイスティック１４６の操作に応じてズーム位置を変更する場合、保存ボタン１４７が操作されたときは、保存ボタン１４７が操作されたときのズーム位置が、操作対象撮像装置の動作設定情報として設定記憶部１７に記憶される。

操作つまみ１４８は、設定記憶部１７に複数の動作設定情報を記憶させる場合、登録番号を指定するために用いられる。また、操作つまみ１４８は、記憶されている複数の動作設定情報から所望の動作設定情報を選択して読み出す場合、読み出す動作設定情報の登録番号を指定するために用いられる。

連動ボタン１４９は、映像加工処理に連動させて撮像装置の動作を変化させる連動モードとするか否かの操作ボタンである。

＜２．映像処理装置の動作＞
次に、映像処理装置１０の動作について説明する。映像処理装置１０は、映像加工処理に連動させて撮像装置の設定を変化させる。この場合、例えば、映像処理装置１０は、トランジションレバー１４４が一方の端点とされているとき、映像加工処理に用いる映像信号を出力する第１撮像装置と第２撮像装置を、個々に設定した第１連動設定情報に基づく動作状態として撮像を行わせる。また、映像処理装置１０は、トランジションレバー１４４が他方の端点とされているとき、第１撮像装置と第２撮像装置を、撮像装置に対して個々に設定した第２連動設定情報に基づく動作状態として撮像動作を行われる。さらに、映像処理装置１０は、トランジションレバー１４４が操作されたとき、第１連動設定情報と第２連動設定情報とに基づいた動作可変範囲内で、操作位置に応じた動作を行うように撮像装置を制御する。なお、以下の説明では、映像加工処理部で第１撮像装置と第２撮像装置を用いて映像の合成を行い、映像の合成動作に連動させて、第１撮像装置と第２撮像装置でズーム動作を行う場合を示している。

図３は、動作設定情報の保存処理を示すフローチャートである。ステップＳＴ１で映像処理装置１０の制御部１８は、操作対象の撮像装置の選択処理を行う。制御部１８は、操作対象選択ボタン１４５に対するユーザ操作によって、ユーザがジョイスティック１４６を操作して設定を変更する操作対象の撮像装置を判別する。また、制御部１８は、クロスポイントスイッチ１１を制御して、判別した撮像装置からの映像信号を選択して映像加工処理部１２に出力する。さらに、制御部１８は、映像加工処理部１２を制御して、クロスポイントスイッチ１１で選択した映像信号を出力させてステップＳＴ２に進む。

ステップＳＴ２で制御部１８は、ユーザ操作に応じて撮像装置の動作を制御する。制御部１８は、ジョイスティック１４６に対するユーザ操作を判別して、判別したユーザ操作に応じた制御信号を、ステップＳＴ１で選択した操作対象の撮像装置に対応する駆動処理部に出力する。制御信号が供給された駆動処理部は、制御信号に基づいて撮像装置を駆動する駆動信号を操作対象の撮像装置に出力することで、操作対象の撮像装置をユーザ操作に応じて制御してステップＳＴ３に進む。

ステップＳＴ３で制御部１８は、保存操作が行われたか否か判別する。制御部１８は、保存操作が行われたとき、例えば保存ボタン１４７が操作されたときステップＳＴ４に進み、保存操作が行われていないときステップＳＴ７に進む。

ステップＳＴ４で制御部１８は、登録番号の指定が行われているか否か判別する。制御部１８は、操作対象撮像装置を現在のズーム位置とする動作設定情報を設定記憶部１７に記憶させるときの登録番号が指定されているとき、例えば操作つまみ１４８が操作されて登録番号が指定されているときステップＳＴ５に進む。また、制御部１８は、登録番号が指定されているときステップＳＴ６に進む。

ステップＳＴ５で制御部１８は、動作設定情報記憶処理を行う。制御部１８は、操作対象撮像装置を現在のズーム位置とする動作設定情報を、指定されている登録番号の動作設定情報として設定記憶部１７に記憶させてステップＳＴ７に進む。

ステップＳＴ６で制御部１８は、仮動作設定情報の設定を行う。制御部１８は、操作対象撮像装置を現在のズーム位置とする動作設定情報を仮動作設定情報としてステップＳＴ７に進む。

ステップＳＴ７で制御部１８は、登録終了であるか否か判別する。制御部１８は、登録終了と判別していない場合にステップＳＴ１に戻り、登録終了と判別した場合に保存処理を終了する。例えば、保存処理を終了するためのボタン操作が行われた場合、または、映像加工処理に用いる撮像装置の選択等が行われたとき、登録終了と判別して保存処理を終了する。

図４は、設定記憶部に記憶された動作設定情報を例示している。例えば、操作対象選択ボタン１４５の操作によって、駆動処理部１３-1に接続された撮像装置３０-1が選択されており、操作つまみ１４８によって登録番号「１」が指定されたとする。この場合、制御部１８は、撮像装置３０-1を保存ボタン１４７が操作されたときのズーム位置とする動作設定情報を、図４の（Ａ）に示すように、動作設定情報ＰＳc1-E1として設定記憶部１７に記憶させる。その後、撮像装置３０-1のズーム位置がジョイスティック１４６の操作に応じて変更されて、操作つまみ１４８によって登録番号「２」が指定されたとする。この場合、制御部１８は、保存ボタン１４７が操作されたときのズーム位置とする動作設定情報を、動作設定情報ＰＳc1-E2として設定記憶部１７に記憶させる。また、操作対象選択ボタン１４５の操作によって、撮像装置３０-2が選択されて、登録番号の指定や保存ボタンの操作が行われたとき、制御部１８は保存ボタン１４７の操作が行われたときのズーム位置とする動作設定情報を設定記憶部１７に記憶させる。例えば指定された登録番号「１」の動作設定情報ＰＳc2-E1として記憶させる。さらに、撮像装置３０-3，３０-4に対しても、同様な操作を行うことで、図４の（Ａ）に示すように、各撮像装置に対して動作設定情報を登録番号毎に記憶させることができる。

また、制御部１８は、登録番号の指定が行われていない状態で保存ボタン１４７が操作されたとき、現在のズーム位置とする動作設定情報を仮動作設定情報とする。例えば、操作対象選択ボタン１４５の操作によって、駆動処理部１３-1に接続された撮像装置３０-1が選択されており、登録番号の指定が行われることなく保存ボタン１４７が操作されたとする。この場合、制御部１８は、撮像装置３０-1を保存ボタン１４７が操作されたときのズーム位置とする動作設定情報を、図４の（Ｂ）に示すように、仮動作設定情報ＰＳc1-E0とする。また、操作対象選択ボタン１４５の操作によって、他の駆動処理部に接続された撮像装置を選択して、ズーム操作や保存ボタン１４７の操作を行えば、各撮像装置を現在のズーム位置とする動作設定情報が仮動作設定情報とされる。

次に、映像の合成とズーム位置を連動させる連動動作について、図５のフローチャートを用いて説明する。なお、連動動作は、動作設定情報の保存処理に続けて行うようにしてもよく、動作設定情報の保存処理と別個に行うようにしてもよい。

ステップＳＴ１１で制御部１８は、操作対象の撮像装置の選択処理を行う。制御部１８は、ステップＳＴ１と同様に、ユーザが操作対象選択ボタン１４５で選択した撮像装置を判別して、判別した操作対象である撮像装置からの映像信号を映像加工処理部１２から出力させてステップＳＴ１２に進む。

ステップＳＴ１２で制御部１８は、ユーザ操作に応じて撮像装置の動作を制御する。制御部１８は、ステップＳＴ２と同様に、ユーザ操作に応じた駆動制御信号を、ステップＳＴ１１で選択した操作対象撮像装置に対応する駆動処理部に出力してステップＳＴ１３に進む。

ステップＳＴ１３で制御部１８は、映像加工処理に用いる撮像装置の選択が行われたか否か判別する。制御部１８は、映像加工処理に用いる映像信号の生成が行われている撮像装置の選択が行われたときステップＳＴ１４に進み、撮像装置の選択が行われていないときステップＳＴ１１に戻る。例えば、制御部１８は、第１撮像装置選択ボタン１４１と第２撮像装置選択ボタン１４２の操作によって、映像加工処理に用いる映像信号の生成が行われている第１撮像装置と第２撮像装置の選択されたときステップＳＴ１４に進む。

このように、ステップＳＴ１１からステップＳＴ１３の処理を行い、ステップＳＴ１１とステップＳＴ１２の処理を繰り返すことによって、ユーザは各撮像装置のズーム位置を設定できる。また、制御部１８は、ステップＳＴ１１からステップＳＴ１３の処理によって設定されたズーム位置を、連動動作における連動開始位置とする。なお、ズーム位置の設定は、映像加工処理に用いる撮像装置に対して行われていればよい。

ステップＳＴ１４で制御部１８は、トランジションレバー１４４は端点とされたか否か判別する。制御部１８は、トランジションレバー１４４が端点となっていないときステップＳＴ１４に戻り、トランジションレバー１４４が端点となったときステップＳＴ１５に進む。

ステップＳＴ１５で制御部１８は、第１連動設定情報の設定を行う。制御部１８は、ステップＳＴ１３で選択した撮像装置を現在のズーム位置とする動作設定情報を第１連動設定情報としてステップＳＴ１６に進む。例えば、第１撮像装置として撮像装置３０-1が選択されており、第２撮像装置として撮像装置３０-3が選択されているとする。この場合、図６の（Ａ）や図６の（Ｂ）に示すように、制御部１８は、トランジションレバー１４４が端点ＬＡとされたとき、撮像装置３０-1を現在のズーム位置とする動作設定情報ＰＳc1-Sを撮像装置３０-1の第１連動設定情報とする。また、撮像装置３０-3を現在のズーム位置とする動作設定情報ＰＳc3-Sを撮像装置３０-3の第１連動設定情報とする。

ステップＳＴ１６で制御部１８は、ユーザ操作に応じて映像加工処理の選択を行う。制御部１８は、ユーザが映像加工処理選択ボタン１４３を操作して選択した映像加工処理を判別する。また、制御部１８は、判別した映像加工処理が行われるように、映像加工処理部１２の動作を設定してステップＳＴ１７に進む。例えば、制御部１８は、映像加工処理として撮像装置３０-1，３０-3で生成された映像信号を合成する映像加工処理が選択されたとき、この２つの映像信号の合成を行うように、映像加工処理部１２の動作を設定する。

ステップＳＴ１７で制御部１８は、第２連動設定情報の設定を行う。制御部１８は、連動ボタン１４９が操作されて連動モードが選択されたとき、ステップＳＴ５で設定された仮動作設定情報を第２連動設定情報に設定してステップＳＴ１８に進む。例えば、第１撮像装置として撮像装置３０-1が選択されており、第２撮像装置として撮像装置３０-3が選択されているとする。この場合、図６の（Ａ）に示すように、第１撮像装置の第２連動設定情報は仮動作設定情報ＰＳc1-E0、第２撮像装置の第２連動設定情報は、仮動作設定情報ＰＳc3-E0となる。

ステップＳＴ１８で制御部１８は、動作設定情報の読み出し操作が行われたか否か判別する。制御部１８は、動作設定情報の読み出し操作が行われたときステップＳＴ１９に進み、読み出し操作が行われていないときステップＳＴ２１に進む。

ステップＳＴ１９で制御部１８は、動作設定情報の読み出しを行う。制御部１８は、映像加工処理に用いる撮像装置に対応して記憶されている動作設定情報からユーザ操作によって指定された登録番号の動作設定情報を読み出してステップＳＴ２０に進む。

ステップＳＴ２０で制御部１８は、第２連動設定情報の更新処理を行う。制御部１８はステップＳＴ１９で読み出した動作設定情報を用いて第２連動設定情報の更新を行ってステップＳＴ２１に進む。

例えば、第１撮像装置として撮像装置３０-1、第２撮像装置として撮像装置３０-3が選択されており、撮像装置３０-1に対する登録番号「３」と撮像装置３０-3に対する登録番号「１」の動作設定情報が読み出されたとする。この場合、図６の（Ｂ）に示すように、第１撮像装置の第２連動設定情報は動作設定情報ＰＳc1-E3、第２撮像装置の第２連動設定情報は動作設定情報ＰＳc3-E1となる。

ステップＳＴ２１で制御部１８は連動動作を行う。制御部１８は、トランジションレバー１４４の操作位置に応じて映像加工処理における処理と撮像装置の動作を変化させる。例えばトランジションレバー１４４が一方の端点ＬＡとされているとき第１撮像装置と第２撮像装置を、撮像装置に対して個々に設定した第１連動設定情報に基づくズーム位置とする。また、トランジションレバー１４４が他方の端点ＬＢとされているとき、第１撮像装置と第２撮像装置を、撮像装置に対して個々に設定した第２連動設定情報に基づくズーム位置とする。さらに、トランジションレバー１４４が端点から移動されたとき、制御部１８は、第１連動設定情報に基づくズーム位置から第２連動設定情報に基づくズーム位置に、トランジションレバー１４４の移動に伴いズーム位置を変化させる。または、制御部１８は、第２連動設定情報に基づくズーム位置から第１連動設定情報に基づくズーム位置に、トランジションレバー１４４の移動に伴いズーム位置を変化させる。さらに、トランジションレバー１４４の移動に伴い映像の合成比を変化させて、第１撮像装置と第２撮像装置のズーム動作を映像の合成動作と連動させる。その後、制御部１８は連動ボタン１４９が再度操作されて、連動モードが解除されたとき連動動作を終了する。

このような処理を行えば、第１撮像装置と第２撮像装置のそれぞれに対して、撮像装置に対応した第１連動設定情報と第２連動設定情報が個々に設定される。また、トランジションレバー１４４が操作されたときには、トランジションレバー１４４の位置に応じて映像の合成が行われる。さらに、第１連動設定情報と第２連動設定情報に基づくズーム可変範囲内で、トランジションレバー１４４の位置に応じて第１撮像装置のズーム位置と第２撮像装置のズーム位置が変化される。したがって、映像の合成と撮像装置のズーム動作が連動されて、多様で高品質な編集効果を容易に得ることができるようになる。

また、トランジションレバー１４４の一方の端点に用いる動作設定情報が記憶されており、トランジションレバー１４４が他方の端点とされて連動モードとなると、現在のズーム位置とする動作設定情報が他方の連動設定情報に設定される。したがって、トランジションレバー１４４の位置に応じたズーム可変範囲を簡単に設定できる。また、トランジションレバー１４４の端点に対応させて連動設定情報が設定されるので、トランジションレバー１４４を操作したときのズーム位置は、２つの連動設定情報で決定されるズーム可変範囲を超えてしまうこともない。

＜３．編集動作例＞
次に、映像の合成と撮像装置を連動させた編集動作について例示する。図７の（Ａ）は、第１撮像装置（例えば撮像装置３０-1）のズーム位置、図７の（Ｂ）は、映像合成部から出力される映像信号、図７の（Ｃ）は、第２撮像装置（例えば撮像装置３０-3）のズーム位置を例示している。また、図７の（Ｄ）はトランジションレバー１４４の操作位置と示している。なお、図７の（Ａ）と（Ｃ）において、「Ｔ」はテレ端、「Ｗ」はワイド端の位置を示している。

トランジションレバー１４４が端点ＬＡとされたとき、制御部１８は、第１撮像装置を現在のズーム位置とする動作設定情報ＰＳc1-Sを第１撮像装置の第１連動設定情報とする。また、制御部１８は、第２撮像装置を現在のズーム位置とする動作設定情報ＰＳc3-Sを第２撮像装置の第１連動設定情報とする。

動作設定情報の読み出し操作が行われて、第１撮像装置である撮像装置３０-1に対する登録番号「３」の動作設定情報の読み出しが行われたとき、制御部１８は、読み出した動作設定情報ＰＳc1-E3を第２連動設定情報に設定する。また、第２撮像装置である撮像装置３０-2に対する登録番号「１」の動作設定情報の読み出しが行われたとき、制御部１８は、読み出した動作設定情報ＰＳc3-E1を第２連動設定情報に設定する。

その後、制御部１８は、図７に示すようにトランジションレバー１４４の操作位置に応じて、第１撮像装置と第２撮像装置の映像信号の合成を行う。また、第１連動設定情報と第２連動設定情報に基づきズーム可変範囲を第１撮像装置と第２撮像装置のそれぞれで決定して、トランジションレバー１４４の操作位置に応じたズーム位置となるように第１撮像装置と第２撮像装置を駆動する。

このようにすれば、例えばトランジションレバー１４４を端点ＬＡから端点ＬＢに移動させたとき、第１撮像装置の映像はズームアウト、第２撮像装置の映像はズームインを行いながら、第１撮像装置の映像を第２撮像装置の映像に切り換えることができる。また、映像の合成とズーム動作が連動して行われるので、映像の合成に対してズーム動作が遅れたり速すぎたりすることがなく、高品質の編集処理を容易に行うことができる。例えば、結婚式場で撮像装置３０-1は式場全体の撮像をズームアウトして行い、撮像装置３０-3で指輪交換する手をズームインするように設定する。このような設定を行えば、トランジションレバー１４４の操作だけで、式場全体から指輪交換に切りかわるシーンを、映像合成とズーム動作を連動させて収録することができるようになる。

また、映像処理装置では、撮像装置のズーム位置をトランジションレバー１４４の操作位置に応じて変化させる場合に限らず、例えばパンニング動作やチルティング動作を行い、トランジションレバー１４４の操作位置に応じて撮像方向を変化させてもよい。また、トランジションレバー１４４の操作位置に応じて撮像装置のフォーカス状態やアイリスの開口状態、ホワイトバランス等を変化させてもよく、これらの設定を組み合わせて、トランジションレバー１４４の操作位置に応じて自動的に変化させてもよい。

トランジションレバー１４４の操作位置に応じて撮像方向を自動的に変化させる場合、例えば第１撮像装置と第２撮像装置の撮像方向を同じ方向に移動しながら、第１撮像装置の映像を第２撮像装置の映像に切り換えるという編集処理を容易に得ることができる。

トランジションレバー１４４の操作位置に応じてフォーカスを変化させる場合、例えば第１撮像装置の映像の鮮鋭度を低下させながら消去して、第２撮像装置の映像は鮮鋭度を高めながら現れるようにするという編集処理を容易に行うことができる。

トランジションレバー１４４の操作位置に応じて露光状態を変化させる場合、例えば、アイリスやシャッター速度、ゲイン調整等を行い、映像上の被写体の明るさを可変できるようにして、第１撮像装置の映像の輝度を高めながら第２撮像装置の映像に切り換える。また、第２１撮像装置の映像は輝度が高められている状態から適正な輝度の映像となるように制御する。また、輝度を低下させながら映像の切り換えを行うようにしてもよい。このようにすれば、輝度を連動させて映像の切り換えを容易に行うことができる。

また、ズーム位置や撮像方向等の複数の設定を、映像加工処理に連動させて変化させれば、さらに多様な編集処理を容易かつ品質よく行うことができる。

さらに、トランジションレバー１４４の操作位置に応じて映像加工処理と連動させて撮像装置の動作の制御を行う場合、映像加工処理の動作の変化に対応させて、撮像装置の動作を変化させるようにしてもよい。図８は、映像加工処理の動作の変化に対応させて撮像装置の動作を変化させた場合について例示している。

図８の（Ａ）は、第１撮像装置（例えば撮像装置３０-1）のズーム位置、図８の（Ｂ）は、映像加工処理部から出力される映像信号、図８の（Ｃ）は、第２撮像装置（例えば撮像装置３０-3）のズーム位置を例示している。また、図８の（Ｄ）はトランジションレバー１４４の操作位置と示している。なお、図８の（Ａ）と（Ｃ）において、「Ｔ」はテレ端、「Ｗ」はワイド端の位置を示している。

トランジションレバー１４４が端点ＬＡとされたとき、制御部１８は、第１撮像装置を現在のズーム位置とする動作設定情報ＰＳc1-Sを第１撮像装置の第１連動設定情報とする。また、制御部１８は、第２撮像装置を現在のズーム位置とする動作設定情報ＰＳc3-Sを第２撮像装置の第１連動設定情報とする。

また、動作設定情報の読み出し操作が行われて、第１撮像装置である撮像装置３０-1に対する登録番号「３」の動作設定情報の読み出しが行われたとき、制御部１８は、読み出した動作設定情報ＰＳc1-E3を第２連動設定情報とする。また、第２撮像装置である撮像装置３０-2に対する登録番号「１」の動作設定情報の読み出しが行われたとき、制御部１８は、読み出した動作設定情報ＰＳc3-E1を第２連動設定情報とする。

ここで、トランジションレバー１４４が中央位置とされたとき撮像装置３０-1，３０-2の信号レベルを「０」として映像の切り換えが行われる場合、撮像装置３０-1，３０-2の信号レベルの変化に合わせてズーム位置を変化させる。すなわち、トランジションレバー１４４が中央位置とされたとき撮像装置３０-1が動作設定情報ＰＳc1-E3に基づくズーム位置、撮像装置３０-2が動作設定情報ＰＳc3-E1に基づくズーム位置となるように変化させる。

この場合、第１連動設定情報と第２連動設定情報に基づきズーム可変範囲を設定してトランジションレバー１４４の位置に応じてズーム位置をリニアに変化させると、例えば撮像装置３０-1の信号レベルが「０」に減衰されたとき、ズーム位置はズーム可変範囲の半分の位置となる。したがって、残りのズーム可変範囲は撮像装置３０-1の映像に寄与しなくなってしまう。しかし、映像加工処理の動作の変化に対応させて、ズーム位置を図８のように変化させれば、映像加工処理に合わせたズーム動作を行うことができるようになる。なお、映像信号の変化特性が曲線状であれば、ズーム位置の変化も映像信号の変化特性に合わせて曲線状としてもよい。

また、映像加工処理として映像の合成だけでなく、映像の切り換えやピクチャインピクチャ動作等を行う場合にも、映像加工処理の処理特性に応じてズーム位置やフォーカス、ホワイトバランス等を変化させる。このようにすれば、映像加工処理に対応した撮像装置の制御を、トランジションレバー１４４の操作だけで連動して行うことが可能となり、さらに多様で高品質の編集効果を容易に得ることができる。

＜３．プログラムにより実行する場合について＞
上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータを用いる。または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどを用いて、プログラム記録媒体からソフトウェアをインストールする。

図９は、上述した一連の処理をプログラムにより実行するコンピュータのハードウェアの構成例を示す図である。

コンピュータ６０において、ＣＰＵ（Central Processing Unit）６１、ＲＯＭ（Read Only Memory）６２、ＲＡＭ（Random Access Memory）６３は、バス６４により相互に接続されている。

バス６４には、さらに、入出力インタフェース６５が接続されている。入出力インタフェース６５には、操作ボタンや操作レバー等よりなるユーザインタフェース部６６、撮像装置からの映像信号を入力するための入力部６７が接続されている。また、入出力インタフェース６５には、撮像装置に対して駆動制御信号の出力やディスプレイ装置に撮像装置からの映像信号や映像加工処理後の映像信号を出力する出力部６８、ハードディスクや不揮発性のメモリなどよりなる記録部６９が接続されている。さらに、入出力インタフェース６５には、ネットワークインタフェースなどよりなる通信部７０、磁気ディスク、光ディスク、光磁気ディスク、あるいは半導体メモリなどのリムーバブルメディア８０を駆動するドライブ７１が接続されている。

以上のように構成されるコンピュータでは、ＣＰＵ６１が、例えば、記録部６９に記録されているプログラムを、入出力インタフェース６５およびバス６４を介して、ＲＡＭ６３にロードして実行することにより、上述した一連の処理が行われる。

コンピュータ（ＣＰＵ６１）が実行するプログラムは、例えば、磁気ディスク（フレキシブルディスクを含む）、光ディスク（ＣＤ−ＲＯＭ(Compact Disc-Read Only Memory),ＤＶＤ(Digital Versatile Disc)等）、光磁気ディスク、もしくは半導体メモリなどよりなるパッケージメディアであるリムーバブルメディア８０に記録して、あるいは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供される。

そして、プログラムは、リムーバブルメディア８０をドライブ７１に装着することにより、入出力インタフェース６５を介して、記録部６９にインストールすることができる。また、プログラムは、有線または無線の伝送媒体を介して、通信部７０で受信し、記録部６９にインストールすることができる。その他、プログラムは、ＲＯＭ６２や記録部６９に、あらかじめインストールしておくことができる。

なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであってもよいし、並列にあるいは呼び出しが行われたとき等のタイミングで処理が行われるプログラムであってもよい。

また、本発明は、上述した発明の実施の形態に限定して解釈されるべきではない。発明の実施の形態では、２つの撮像装置で生成された映像信号を用いて映像の合成を行うとき、映像の合成に連動させてズーム動作を行う場合について説明したが、映像加工処理に用いる撮像装置は１台または３台以上であってもよい。また、上述のように、映像の合成だけでなく映像の切り換え、ピクチャインピクチャ処理、クロマキー処理、ＤＳＫ等と撮像装置の制御を連動させてもよい。さらに、撮像装置では、ズーム動作だけでなく、フォーカス調整やアイリス調整、ホワイトバランス調整等の何れかまたは複数の制御を映像加工処理と連動させてもよい。また、操作部の構成や操作ボタン等の配置等は、図２に示す形態に限られない。すなわち、本発明の要旨を逸脱しない範囲で当業者が実施の形態の修正や代用をなし得ることは自明であり、本発明の要旨を判断するためには、特許請求の範囲を参酌すべきである。

この発明の映像処理装置と映像処理方法、映像処理システムおよびプログラムでは、撮像装置からの映像信号を用いた映像加工処理に連動させて撮像装置の制御が行われる。このため、映像加工処理と撮像装置を個々に制御する必要がなく、多様な編集効果を容易に得ることができるようになる。したがって、映像の編集処理を行う編集装置や映像加工処理機能を有したスイッチャー等に適している。

１０・・・映像処理装置、１１・・・クロスポイントスイッチ、１２・・・映像加工処理部、１３-1〜１３-n・・・駆動処理部、１４・・・操作部、１６・・・表示部、１７・・・設定記憶部、１８・・・制御部、３０-1〜３０-n・・・撮像装置、６０・・・コンピュータ、６１・・・ＣＰＵ、６２・・・ＲＯＭ、６３・・・ＲＡＭ、６４・・・バス、６５・・・入出力インタフェース、６６・・・ユーザインタフェース部、６７・・・入力部、６８・・・出力部、６９・・・記録部、７０・・・通信部、７１・・・ドライブ、８０・・・リムーバブルメディア、１４１・・・第１撮像装置選択ボタン、１４２・・・第２撮像装置選択ボタン、１４３・・・映像加工処理選択ボタン、１４４・・・トランジションレバー、１４５・・・操作対象選択ボタン、１４６・・・ジョイスティック、１４７・・・保存ボタン、１４８・・・操作つまみ、１４９・・・連動ボタン

Claims (7)

1. 撮像装置からの映像信号の切り換えや前記映像信号にエフェクトを施す映像加工処理を行う映像加工処理部と、
   前記映像加工処理に連動させて前記撮像装置の動作を制御する制御部と
   を有する映像処理装置。
2. 前記撮像装置の動作を設定するための動作設定情報を記憶する記憶部を備え、
   前記制御部は、前記撮像装置の現在の動作についての動作設定情報と前記記憶されている動作設定情報に基づいた動作可変範囲内で前記撮像装置の動作を制御する請求項１記載の映像処理装置。
3. 前記映像加工処理の動作を可変させる操作部を有し、
   前記制御部は、前記操作部の一方の端点から他方の端点までの操作範囲内で、操作位置に応じた映像加工処理を行うように前記映像加工処理部を制御し、前記現在の動作についての動作設定情報を前記一方の端点に対応する第１連動設定情報として、前記記憶されている動作設定情報を前記他方の端点に対応する第２連動設定情報として、前記第１連動設定情報と前記第２連動設定情報に基づいた動作可変範囲内で前記操作位置に応じた動作を行うように前記撮像装置を制御する請求項２記載の映像処理装置。
4. 前記制御部は、前記映像加工処理の動作の変化に対応させて、前記撮像装置の動作を変化させる請求項３記載の映像処理装置。
5. 映像加工処理部で、撮像装置からの映像信号の切り換えや前記映像信号にエフェクトを施す映像加工処理を行うステップと、
   制御部で、前記映像加工処理に連動させて前記撮像装置の動作を制御するステップと
   を具備する映像処理方法。
6. 撮像装置と、
   前記撮像装置からの映像信号の切り換えや前記映像信号にエフェクトを施す映像加工処理を行う映像加工処理部と、
   前記映像加工処理に連動させて前記撮像装置の動作を制御する制御部と
   を有する映像処理システム。
7. コンピュータを、
   撮像装置からの映像信号の切り換えや前記映像信号にエフェクトを施す映像加工処理を行う機能手段と、
   前記映像加工処理に連動させて前記撮像装置の動作を制御する機能手段
   として機能させるためのプログラム。

Images