JP7317566B2 - 撮像装置、その制御方法及びプログラム - Google Patents

Description

本発明は、撮像装置、その制御方法及びプログラム、並びに情報処理装置に関する。

近年のデジタルカメラ等の撮像装置は、電子技術及びコンピュータ技術の発達に伴い、性能向上の一途をたどっている。特に単位時間当たりに処理可能な情報量が増加しており、より高い解像度、より高いフレームレートの動画像の撮像記録を実現している。そして、より高画質で動画像を撮像記録することが可能となっている。より高い解像度とは、例えば横方向は４０９６ピクセル、縦方向は２１６０ピクセルである。より高いフレームレートとは、例えば６０ｆｐｓ（ｆｒａｍｅ ｐｅｒ ｓｅｃｏｎｄ）、１２０ｆｐｓ、２４０ｆｐｓである。
その結果、近年では、高い解像度で動画像を撮像記録しつつ、その動画像中のフレーム画像を静止画像としても利用することが可能である。例えば、取得した動画像はインターネット配信動画として利用し、取得した静止画像は印刷して写真として利用する。

この種の技術として、特許文献１には、動画像の撮影中にズーム／ワイドボタンの操作を検出した際に、この時点を基準として決定された画像フレーム位置を静止画像の出力候補位置とするために当該画像フレーム位置に候補フラグを付加する提案がなされている。

特開２００５－２３６４８４号公報

しかしながら、動画像データの撮像記録中に所定の操作が行われたときのフレーム画像を静止画像の出力候補とする場合、そのフレーム画像でピントが合っていないことがある。
このような場合、フレーム画像を選択する作業のやり直しとなってしまい、更には静止画出力作業のやり直しとなってしまう場合があった。特に業務用途の画像編集作業においては作業時間に応じた費用が発生するため、作業手順の簡略化と効率化による作業時間の短縮は重要な課題である。

本発明は上記のような点に鑑みてなされたものであり、動画像を構成するフレーム画像のうち、ユーザの意図するタイミングを反映し、且つ好適な撮像制御状態でのフレーム画像を静止画像として利用できるようにすることを目的とする。

本発明の撮像装置は、複数のフレーム画像で構成される動画像データを記録媒体に撮像記録する撮像装置であって、所定の操作を受け付ける操作手段と、前記動画像データの撮像記録中に、前記所定の操作を受け付けると、被写体を追尾してフォーカス制御を行う被写体追尾オートフォーカス制御が実行されている状態のフレーム画像を検出する検出手段と、前記被写体追尾オートフォーカス制御が実行されている状態のフレーム画像に対応する被写体追尾オートフォーカス制御が実行された期間を示す追尾期間情報を付与して前記動画像データを記録する記録制御手段を備えたことを特徴とする。

本発明によれば、動画像を構成するフレーム画像のうち、ユーザの意図するタイミングを反映し、且つ好適な撮像制御状態でのフレーム画像を静止画像として利用することが可能になる。

第１の実施形態に係る撮像装置の構成を示すブロック図である。 第１の実施形態に係る撮像装置の外観構成の一部を模式的に示す図である。 第１の実施形態における動画像データファイルのデータ構造を説明するための図である。 第１の実施形態におけるフレーム選択ボタン操作、オートフォーカス制御及びフレーム選択メタデータ付与のタイミング関係を示す図である。 第１の実施形態に係る撮像装置が実行する動画記録処理を示すフローチャートである。 第２の実施形態におけるフレーム選択ボタン操作、オートフォーカス制御及びフレーム選択メタデータ付与のタイミング関係を示す図である。 第２の実施形態に係る撮像装置が実行する動画記録処理を示すフローチャートである。 第３の実施形態に係る撮像装置が実行する動画記録処理を示すフローチャートである。 第４の実施形態における動画像データファイルのデータ構造を説明するための図である。 第４の実施形態におけるフレーム選択ボタン操作、オートフォーカス制御及びフレーム選択メタデータ付与のタイミング関係を示す図である。 第４の実施形態に係る撮像装置が実行する動画記録処理を示すフローチャートである。 第４の実施形態に係る情報処理装置の構成を示すブロック図である。 第４の実施形態に係る情報処理装置の表示部に表示されるインターフェイス画面の例を示す図である。 第４の実施形態に係る情報処理装置が実行する処理を示すフローチャートである。

以下、添付図面を参照して、本発明の好適な実施形態について説明する。
＜第１の実施形態＞
図１は、第１の実施形態に係る撮像装置１００の構成を示すブロック図である。
レンズ１０１は、被写体から放射もしくは反射される光の光路を調整する。センサ（光電変換素子）１０２は、レンズ１０１が光路を調整した光を受光し、電気信号に変換する。信号処理部１０３は、センサ１０２が変換して出力する電気信号を入力し、増幅、ディベイヤー、その他の画質関連処理を行い、画像データを生成する。

撮像制御部１０４は、レンズ１０１、センサ１０２、信号処理部１０３を統合的に制御し、所望の撮像を行う。撮像制御部１０４は、フォーカス判定部１２１、フォーカス制御部１２２、露出判定部１２３、露出制御部１２４を含む。フォーカス判定部１２１は、レンズ１０１を通してセンサ１０２に結像される被写体像が合焦状態であるか否かを判定する。フォーカス制御部１２２は、フォーカス判定部１２１での判定結果に応じて、合焦状態となるようにレンズ１０１の位置制御を行う。露出判定部１２３は、センサ１０２に結像された被写体像の露出状態を判定する。露出制御部１２４は、露出判定部１２３での判定結果に応じて、信号処理部１０３のゲイン制御を行う。

フレームメモリ１０５は、信号処理部１０３が生成した画像データを一旦蓄積する。エンコーダ１０６は、フレームメモリ１０５に蓄積された画像データの符号化を行い、符号化データを生成する。エンコードバッファメモリ１０７は、エンコーダ１０６で生成した符号化データを一旦蓄積する。

記録媒体１１７は、撮像装置１００で撮像して記録した画像データを記録する。記録媒体用バッファメモリ１０８は、記録媒体１１７に記録された画像データを読み出し及び書込みする際に、一時的に画像データを蓄積するために用いられる。エンコードバッファメモリ１０７に蓄積された符号化データが記録媒体用バッファメモリ１０８に転送され、記録媒体１１７に転送され記録される。
再生用デコーダ１０９は、記録媒体用バッファメモリ１０８に記録されたデータのうち、再生対象となる符号化データを読み出し、デコードを行う。映像表示部１１０は、再生用デコーダ１０９でデコードされた画像データの表示を行う。これにより、ユーザは再生画像を視聴することができる。また、映像表示部１１０は、フレームメモリ１０５が生成する画像データを直接表示することも可能である。これにより、撮像記録の実行前及び実行中に、撮像され記録される画像データの内容を随時確認することができる。

記録制御部１１１は、撮像装置１００における記録の制御を行う。記録の制御を行う際、必要に応じて、エンコーダ１０６及び記録媒体用バッファメモリ１０８の動作を制御する。再生制御部１１２は、撮像装置１００における再生の制御を行う。再生の制御を行う際、必要に応じて、記録媒体用バッファメモリ１０８及び再生用デコーダ１０９の動作を制御する。
操作部１１３は、ユーザが不図示のボタンやタッチパネル等の操作入力部材を経由して、撮像装置１００に関する各種操作指示を入力する。操作部１１３での操作指示に応じた操作指示信号は、システム制御マイコン１１４に送信され、システム制御マイコン１１４の制御下で、記録制御部１１１は記録制御を実行する。また、同様に操作指示信号は、システム制御マイコン１１４に送信され、システム制御マイコン１１４の制御下で、再生制御部１１２は再生制御を実行する。

システム制御マイコン１１４は、撮像装置１００の各部の制御を実行する。操作部１１３でのユーザによる操作指示入力を検出し、撮像制御部１０４、記録制御部１１１、再生制御部１１２及びモード制御部１１５に制御要求を送る。
モード制御部１１５は、撮像装置１００のモード制御を実行する。モード制御部１１５は、記録制御部１１１及び再生制御部１１２の動作モードを制御する。

システム制御マイコン１１４は、操作部１１３でのユーザによる操作指示入力に応じて、撮像記録時のシャッタースピードを決定する。システム制御マイコン１１４は、その決定したシャッタースピードに応じて、撮像制御部１０４に制御信号を送信する。撮像制御部１０４は、システム制御マイコン１１４から受信した制御信号に応じて、センサ１０２を駆動し、露光時間と遮光時間の制御、所謂電子シャッターの制御を行う。また、システム制御マイコン１１４で決定されたシャッタースピードは、映像表示部１１０で表示することができる。これにより、ユーザは、シャッタースピードに関する制御状態を随時確認することができる。

また、システム制御マイコン１１４は、操作部１１３でのユーザによる操作指示入力に応じて、撮像記録時のフレームレートを決定する。システム制御マイコン１１４は、その決定したフレームレートに応じて、撮像制御部１０４に制御信号を送信する。撮像制御部１０４は、システム制御マイコン１１４から受信した制御信号に応じて、センサ１０２を駆動し、露光及び遮光に関するセンサ１０２の動作周期、所謂フレームレートを制御する。また、撮像制御部１０４は、システム制御マイコン１１４から受信した制御信号に応じて、信号処理部１０３を制御し、信号処理部１０３の動作周期、所謂フレームレートを制御する。このように、撮像制御部１０４は、センサ１０２と信号処理部１０３の両方の動作周期の同期をとりながら、フレームレートの制御を行う。また、システム制御マイコン１１４で決定されたフレームレートは、映像表示部１１０で表示することができる。これにより、ユーザは、フレームレートに関する制御状態を随時確認することができる。

図２は、撮像装置１００の外観構成の一部を模式的に示す図である。
撮像装置１００は、レンズユニット２０２と、ディスプレイ２０３と、操作部１１３に含まれる記録ボタン２０４及びフレーム選択ボタン２０５を備える。
レンズユニット２０２は、レンズ１０１を格納する。
ディスプレイ２０３は、映像表示部１１０に対応するものであり、映像等を表示する。
記録ボタン２０４は、動画像データの撮像記録（以下、単に動画記録と称する）の開始及び終了を指示するためのボタンであり、その押下（以下、全押しと呼称）により動画記録が開始され、再び記録ボタン２０４の押下により動画記録が終了する。また、記録ボタン２０４は、半押し状態とすることもできる。記録ボタン２０４を半押し状態とすることにより、オートフォーカス（以下、ＡＦと記す）制御が開始される。
フレーム選択ボタン２０５は、フレーム選択操作のためのボタンであり、その操作に応じて、動画像の特定のフレーム画像に対してフレーム選択メタデータを付与することができる。このようにフレーム選択ボタン２０５を設けることにより、静止画像の出力候補となるフレームを選択してフレーム選択メタデータ記録する操作が可能になる。これにより、動画像を記録しながら、静止画像の出力候補位置情報を併せて記録することができる。本実施形態では、フレーム選択ボタン２０５は、半押し状態とすることができ、フレーム選択ボタン２０５を半押し状態とすることにより、フレーム選択情報であるフレーム選択メタデータを付与するとともに、ＡＦ制御が開始される。

ここで、撮像装置１００のＡＦ制御の状態や、被写体の変化状態等に応じて、ピントの合い具合は変化する。例えば被写体の変化が比較的少ない状況で、且つＡＦ制御が被写体に追従できている状況であれば、ピントが合っている状態となる。その状態でフレーム選択ボタン２０５を操作すれば、ピントが合ったフレーム画像に対してフレーム選択メタデータを付与することができる。一方、例えば被写体の変化が比較的大きい状況で、且つＡＦ制御が被写体に追従できていない状況であれば、ピントが合っていない状態となる。その状態でフレーム選択ボタン２０５を操作すると、ピントが合っていないフレーム画像に対してフレーム選択メタデータを付与することになる。
そこで、以下に詳述するように、動画記録中に、フレーム選択ボタン２０５の操作、及びＡＦ制御の状態に応じて、第一候補とする第一フレーム選択メタデータと、第二候補とする第二フレーム選択メタデータを付与するようにしている。

図３は、記録媒体１１７に記録される動画像データファイル３０１のデータ構造を説明するための図である。
動画像データファイル３０１は、動画像データ３１１を有する。動画像データ３１１は、タイムコードデータ３２１～３２４と、動画像データを構成するフレーム画像データ３３１～３３４を含む。図示例では、タイムコードデータ３２１とフレーム画像データ３３１が対応している。具体的には、タイムコードデータ３２１はフレーム画像データ３３１が撮像記録された時刻を示す。同様に、タイムコードデータ３２２とフレーム画像データ３３２、タイムコードデータ３２３とフレーム画像データ３３３、タイムコードデータ３２４とフレーム画像データ３３４が対応していることを示す。
また、動画像データファイル３０１は、第一フレーム選択メタデータ３４１と、第二フレーム選択メタデータ３４２を有する。フレーム選択メタデータ３４１、３４２は、静止画像の出力候補となるフレーム画像データに対応するタイムコードデータが記録される。このようにフレーム選択メタデータを付与することにより、動画記録が完了した後で、フレーム選択メタデータに応じてフレーム画像を選択して静止画出力作業を行うことができる。静止画出力作業は、例えばパーソナルコンピュータ等で動作する画像編集ソフトウェアを利用して行うことができ、フレーム画像をJ ＰＥＧ形式で圧縮符号化して静止画データを生成する。なお、フレーム画像がＲＡＷデータである場合は、ＲＡＷ現像処理を実行し、画像調整が行われたデータに対して圧縮符号化処理が実行されて静止画データが生成される。

図４は、第１の実施形態におけるフレーム選択ボタン操作、ＡＦ制御及びフレーム選択メタデータ付与のタイミング関係を示す図である。
動画像データ４００は、フレーム画像データ４０１～４１７により構成される。
タイミング４２１は動画記録開始、タイミング４２２は動画記録終了を示し、その間が動画記録期間４２０になる。
動画記録開始４２１は、ユーザにより記録ボタン２０４が全押しされたタイミングを示す。記録ボタン２０４が全押しされることにより、操作部１１３から記録ボタン２０４の全押しがあったことがシステム制御マイコン１１４に通知される。システム制御マイコン１１４は、操作部１１３からの記録ボタン２０４の全押し通知に応じて、記録制御部１１１に記録開始指示を通知する。記録制御部１１１は、システム制御マイコン１１４からの通知に応じて、エンコーダ１０６と記録媒体用バッファメモリ１０８に記録処理の開始を通知する。エンコーダ１０６とエンコードバッファメモリ１０７と記録媒体用バッファメモリ１０８は記録処理を開始し、記録媒体１１７にタイムコードデータ３２１とフレーム画像データ３３１が記録される。

動画記録終了４２２は、ユーザにより記録ボタン２０４が再び全押しされたタイミングを示す。記録ボタン２０４が再び全押しされることにより、操作部１１３から記録ボタン２０４の全押しがあったことがシステム制御マイコン１１４に通知される。システム制御マイコン１１４は、操作部１１３からの記録ボタン２０４の全押し通知に応じて、記録制御部１１１に記録終了指示を通知する。記録制御部１１１は、システム制御マイコン１１４からの通知に応じて、エンコーダ１０６と記録媒体用バッファメモリ１０８に記録処理の終了を通知する。エンコーダ１０６とエンコードバッファメモリ１０７と記録媒体用バッファメモリ１０８は記録処理を終了する。その結果、記録媒体１１７に最後のタイムコードデータとフレーム画像データ（図３でいえばタイムコードデータ３２４とフレーム画像データ３３４）が記録され、記録終了となる。

動画記録期間４２０において、タイミング４３１はフレーム選択ボタン半押し時、タイミング４３２は合焦判定成立を示し、その間がＡＦ制御期間４３０になる。
フレーム選択ボタン半押し時４３１は、ユーザによりフレーム選択ボタン２０５が半押しされたタイミングを示す。フレーム選択ボタン２０５が半押しされることにより、操作部１１３からフレーム選択ボタン２０５の半押しがあったことがシステム制御マイコン１１４に通知する。システム制御マイコン１１４は、操作部１１３からのフレーム選択ボタン２０５の半押し通知に応じて、撮像制御部１０４に含まれるフォーカス制御部１２２に対してＡＦ制御開始を通知する。フォーカス制御部１２２は、システム制御マイコン１１４からの通知に応じて、フォーカス判定部１２１で合焦成立判定がなされるように、レンズ１０１を駆動する。

また、システム制御マイコン１１４は、操作部１１３からのフレーム選択ボタン２０５の半押し通知に応じて、記録制御部１１１に第二フレーム選択メタデータ３４２の記録を通知する。記録制御部１１１は、システム制御マイコン１１４からの通知に応じて、エンコーダ１０６と記録媒体用バッファメモリ１０８に記録処理の開始を通知する。エンコーダ１０６とエンコードバッファメモリ１０７と記録媒体用バッファメモリ１０８は記録処理を開始し、記録媒体１１７に第二フレーム選択メタデータ３４２が記録される。

合焦判定成立４３２は、撮像制御部１０４に含まれるフォーカス判定部１２１で合焦状態であると判定されたタイミングを示す。システム制御マイコン１１４が、フォーカス判定部１２１で合焦状態であると判定されたことを検出すると、第一フレーム選択メタデータ３４１が、合焦状態と判定されたタイミング４３２の被写体像から生成されたフレーム画像４１１に付与されて記録される。

図５は、第１の実施形態においてシステム制御マイコン１１４の制御下で実行される動画記録処理を示すフローチャートである。
ステップＳ５０１で、システム制御マイコン１１４は、記録ボタン２０４が全押し状態であるか否かを判定する。全押し状態になるまで待機し、全押し状態になった場合、ステップＳ５０２に進む。
ステップＳ５０２で、システム制御マイコン１１４は、動画記録を開始する。この動画記録開始タイミングは、図４の動画記録開始４２１に対応する。
ステップＳ５０３で、システム制御マイコン１１４は、フレーム選択ボタン２０５が半押し状態であるか否かを判定する。半押し状態である場合、ステップＳ５０４に進む。半押し状態でない場合、ステップＳ５０５に進む。

ステップＳ５０４で、システム制御マイコン１１４は、フレーム選択ボタン２０５が半押し状態であると判定されたことを検出すると、記録制御部１１１に第二フレーム選択メタデータの記録を指示する。記録制御部１１１は、システム制御マイコン１１４からの通知に応じて、エンコーダ１０６と記録媒体用バッファメモリ１０８に記録処理の開始を通知する。エンコーダ１０６とエンコードバッファメモリ１０７と記録媒体用バッファメモリ１０８は記録処理を開始し、第二フレーム選択メタデータ３４２を、フレーム選択ボタン半押し時４３１に対応するフレーム画像４０５に関連付けて、記録媒体１１７に記録する。
ステップＳ５０６で、システム制御マイコン１１４は、ＡＦ制御を開始する。フォーカス判定部１２１による合焦状態の判定と、その判定結果に応じたフォーカス制御部１２２によるレンズ１０１の位置制御を開始する。
ステップＳ５０７で、システム制御マイコン１１４は、ＡＦ制御を継続する。フォーカス制御部１２２によるレンズ１０１の位置制御結果に応じて、フォーカス判定部１２１による合焦状態の判定がどのように変化したかを検出する。その検出結果を更にフォーカス制御部１２２によるレンズ１０１の位置制御に反映させる。
ステップＳ５０８で、システム制御マイコン１１４は、合焦状態であるか否かを判定する。合焦状態でない場合、ステップＳ５０７に戻り、ＡＦ制御を継続する。合焦状態である場合、ステップＳ５０９に進む。
ステップＳ５０９で、システム制御マイコン１１４は、記録制御部１１１に第一フレーム選択メタデータ３４１の記録を指示する。記録制御部１１１は、システム制御マイコン１１４からの指示に応じて、エンコーダ１０６と記録媒体用バッファメモリ１０８に記録処理の開始を通知する。エンコーダ１０６とエンコードバッファメモリ１０７と記録媒体用バッファメモリ１０８は記録処理を開始し、第一フレーム選択メタデータを、合焦状態と判定されたタイミング４３２の被写体像から生成されたフレーム画像４１１に関連付けて記録媒体１１７に記録する。その後、ステップＳ５１０に進む。

一方、ステップＳ５０５で、システム制御マイコン１１４は、記録ボタン２０４が半押し状態であるか否かを判定する。半押し状態である場合、ステップＳ５１３に進む。半押し状態でない場合、ステップＳ５１０に進む。
ステップＳ５１３で、システム制御マイコン１１４は、ＡＦ制御を開始する。その処理内容はステップＳ５０６と同一である。
ステップＳ５１４で、システム制御マイコン１１４は、ＡＦ制御を継続する。その処理内容はステップＳ５０７と同一である。その後、ステップＳ５１０に進む。

ステップＳ５１０で、システム制御マイコン１１４は、記録ボタン２０４が全押し状態であるか否かを判定する。全押し状態でない場合、ステップＳ５０３に戻る。全押し状態である場合、ステップＳ５１１に進む。
ステップＳ５１１で、システム制御マイコン１１４は、動画記録を終了する。この動画記録を終了するタイミングは、図４の動画記録終了４２２に対応する。動画記録処理により、動画記録開始４２１のタイミングと対応するフレーム画像データ４０１から動画記録終了４２２のタイミングと対応するフレーム画像データ４１７で構成される動画像データが記録媒体１１７に記録される。
以上により、動画記録処理が終了する。

以上のように、動画像データの撮像記録中に、フレーム選択ボタン２０５を半押し状態とするフレーム選択操作があったときのフレーム画像と、合焦状態であると判定されたときのフレーム画像に対して、フレーム選択メタデータが付与される。
詳細には、ステップＳ５０６～Ｓ５０９において、ＡＦ制御を実施し、合焦判定の結果に応じてフレーム選択メタデータを付与する。これにより、ユーザ操作のタイミングに対応するフレーム画像だけでなく、その近傍のピントが合っているフレーム画像に対してもフレーム選択メタデータが付与される。よって、フレーム選択メタデータを利用した編集ソフトウェア上での静止画出力作業の作業効率を向上することができる。
また、ステップＳ５０３において、フレーム選択ボタン２０５の半押し状態判定に応じて、ＡＦ制御を開始する。これにより、同一のボタンでＡＦ制御操作とフレーム選択ボタン付与操作を行うことが可能となり、撮影操作をより簡便とすることができる。
特にステップＳ５０８、Ｓ５０９において、非合焦から合焦に変化した時点でフレーム選択メタデータを付与する。これにより、フレーム選択ボタン２０５が半押しされた後、合焦状態にあると判定されたときの、すなわち合焦までの最短のタイミングのフレーム画像に対してフレーム選択メタデータを付与することができる。したがって、ユーザの意図するタイミングを反映したフレーム選択メタデータの付与が可能となる。
また、ステップＳ５０３、Ｓ５０４において、フレーム選択ボタン２０５が半押しされたときのフレーム画像に対してもフレーム選択メタデータを付与する。これにより、合焦状態ではなくてもユーザ操作のタイミングのフレーム画像も含めて編集ソフトウェア上での静止画出力時の候補が複数提示される。よって、ユーザがタイミングを重視し、ＡＦ制御が開始されてから合焦状態になるまでの所要時間を好まない場合に、ユーザの画像表現の選択肢の幅を広げることができる。具体的には、フレーム選択ボタン２０５を半押したタイミングでのフレーム画像であるが合焦状態は不十分であるフレーム画像と、フレーム選択ボタン２０５の半押したタイミングから、フォーカス制御所要時間後であるが合焦状態が十分であるフレーム画像が静止画出力の候補として提示される。ユーザはそのような両者のフレーム画像を比較して選択することも可能となる。
これにより、ユーザの意図するタイミングを反映し、且つ合焦状態でのフレーム画像を静止画像として利用することが可能になる。

＜第２の実施形態＞
次に、第２の実施形態を説明する。なお、撮像装置１００の構成及び基本的な処理動作は第１の実施形態と同様であり、以下では、第１の実施形態との差異を中心に説明する。
第１の実施形態では、所定の操作に応じて追従制御を開始して合焦できた時点で制御を停止する、所謂ワンショットＡＦを実行する例を説明した。第２の実施形態では、連続的に追従制御を継続する、所謂コンティニュアスＡＦを実行する例を説明する。
第２の実施形態では、フレーム選択ボタン２０５を半押し状態とすることにより、フレーム選択メタデータを付与するが、ＡＦ制御の開始の起点とはならない。すなわち、第１の実施形態では、フレーム選択ボタン２０５を半押し状態とするフレーム選択操作が、ＡＦ制御を開始する操作を兼ねているが、第２の実施形態では、フレーム選択ボタン２０５を半押し状態とするフレーム選択操作が、フォーカス制御とは無関係の操作となっている。

図６は、第２の実施形態におけるフレーム選択ボタン操作、ＡＦ制御及びフレーム選択メタデータ付与のタイミング関係を示す図である。
図４に対して、図６ではＡＦ制御期間４３０が存在しない。この例では、動画記録開始４２１から合焦判定成立４３２に至る期間、非合焦状態が継続している非合焦期間６０１となっている。また、合焦判定成立４３２から動画記録終了４２２に至る期間、合焦状態が継続している合焦期間６０２となっている。

図７は、第２の実施形態においてシステム制御マイコン１１４の制御下で実行される動画記録処理を示すフローチャートである。
図５に対して、図７ではステップＳ５０５、Ｓ５０６、Ｓ５１３、Ｓ５１４の処理は実行されない。その代わり、ステップＳ５０１の前にステップＳ７０１の処理が追加される。
ステップＳ７０１で、システム制御マイコン１１４は、ＡＦ制御を実行する。第１の実施形態では、フレーム選択ボタン２０５の半押し又は記録ボタン２０４の半押しよりＡＦ制御が開始されるのに対して、第２の実施形態では、動画記録を開始する前に既にＡＦ制御が開始済である。
また、ステップＳ５０３においてフレーム選択ボタン２０５が半押し状態でないと判定されたとき、ステップＳ５１０に移行するようにしている。これは、フレーム選択ボタン２０５が半押し状態であることと、合焦状態であることとの２条件が共に成立した場合のみ、第一フレーム選択メタデータが付与されることを示す。

以上のように、ステップＳ７０１において、ＡＦが継続的に実行される場合においても、ＡＦ制御の状態に応じたフレーム選択メタデータの記録を適切に実施することができる。
そして、ステップＳ５０３、Ｓ５０４、Ｓ５０７～Ｓ５０９において、ユーザ操作によるフレーム選択ボタン２０５の半押し状態と、合焦状態の判定結果の両方を適切に反映した、フレーム選択メタデータの記録が可能となる。

＜第３の実施形態＞
次に、第３の実施形態を説明する。なお、撮像装置１００の構成及び基本的な処理動作は第１、第２の実施形態と同様であり、以下では、第１、第２の実施形態との差異を中心に説明する。
第３の実施形態では、マニュアルフォーカス（ＡＦ制御が非作動）を実行する例を説明する。
図８は、第３の実施形態においてシステム制御マイコン１１４の制御下で実行される動画記録処理を示すフローチャートである。
図７に対して、図８ではステップＳ５０７、Ｓ７０１の処理が実行されない。その代わり、マニュアルフォーカス操作が行われている。マニュアルフォーカス操作は、例えば不図示のフォーカスリング部材をユーザが操作することにより、レンズ１０１の位置を調節する操作である。
このように、撮像装置１００がマニュアルフォーカスモードで動作する場合であっても、ステップＳ５０３、Ｓ５０４、Ｓ５０８、Ｓ５０９において、ユーザ操作によるフレーム選択ボタン２０５の半押し状態と、合焦状態の判定結果の両方を適切に反映した、フレーム選択メタデータの記録が可能となる。

なお、第１～第３の実施形態では、合焦状態になることをフレーム選択メタデータ付与の条件としたが、それ以外の撮像制御状態をフレーム選択メタデータ付与の条件とするようにしてもよい。例えば適正露出状態になることをフレーム選択メタデータ付与の条件としてもよい。また、上記では、オートフォーカス制御を実行する場合について説明したが、同様にオート露出制御を実行することもできる。これにより、編集ソフトウェアで静止画出力を行うとき、ユーザが意図したタイミングの近傍で、画質の高いフレーム画像に基づく静止画出力作業を効率よく行うことが可能となる。

また、フレーム選択ボタン２０５の全押し状態を活用してもよい。例えばフレーム選択ボタン２０５が全押し状態にあるときのフレーム画像に対して、撮像制御状態に関係なくフレーム選択メタデータを付与するととともに、合焦状態よりもタイミングの優先度が高いことを示す情報も付与するようにしてもよい。これにより、フレーム選択ボタン２０５が半押しされたか、全押しされたかに応じて、ユーザがピントの合い具合を優先するのか、それともタイミングを優先するのかを識別可能になる。よって、よりユーザの趣向を反映してフレーム選択メタデータが付与されたフレーム画像を静止画出力の候補として提示することが可能となる。

また、フレーム選択ボタン２０５を半押したとき、所定の時間経過したときのフレーム画像に対してフレーム選択メタデータを付与するようにしてもよい。ＡＦ時における被写体の状況や、マニュアルフォーカス時における操作具合に応じて、合焦に至るまでの所要時間が想定よりも長くなってしまった場合でも、タイミングを逃すことなくフレーム選択メタデータを付与することができる。

＜第４の実施形態＞
次に、第４の実施形態を説明する。なお、撮像装置１００の構成及び基本的な処理動作は第１～第３の実施形態と同様であり、以下では、第１～第３の実施形態との差異を中心に説明する。
第４の実施形態では、被写体追尾オートフォーカス制御である顔追尾ＡＦ制御を実行する例を説明する。

図９は、記録媒体１１７に記録される動画像データファイル３０１のデータ構造を説明するための図である。
動画像データファイル３０１は、図３と同様、動画像データ３１１を有する。動画像データ３１１の構成は、第１の実施形態と同様である。
また、動画像データファイル３０１は、図３と同様、第一フレーム選択メタデータ３４１と、第二フレーム選択メタデータ３４２を有する。なお、第一フレーム選択メタデータ３４１及び第二フレーム選択メタデータ３４２は、それぞれ複数記録されることもある。
また、動画像データファイル３０１は、第一追尾期間始点メタデータ３５１と、第一追尾期間終点メタデータ３５２を有する。第一追尾期間始点メタデータ３５１は、第一追尾期間の始点となるフレーム画像データに対応するタイムコードデータが記録される。また、第一追尾期間終点メタデータ３５２は、第一追尾期間の終点となるフレーム画像データに対応するタイムコードデータが記録される。同様に、動画像データファイル３０１は、第二追尾期間始点メタデータ３５３と、第二追尾期間終点メタデータ３５４を有する。第二追尾期間始点メタデータ３５３は、第二追尾期間の始点となるフレーム画像データに対応するタイムコードデータが記録される。また、第二追尾期間終点メタデータ３５４は、第二追尾期間の終点となるフレーム画像データに対応するタイムコードデータが記録される。

図１０は、第４の実施形態におけるフレーム選択ボタン操作、ＡＦ制御及びフレーム選択メタデータ付与のタイミング関係を示す図である。
図４に対して、ＡＦ制御期間４３０を削除している。
動画記録期間４２０において、タイミング１００２は第一顔追尾ＡＦ制御開始、タイミング１００３は第一顔追尾ＡＦ制御終了を示し、その間が第一追尾期間１００１になる。第一顔追尾ＡＦ制御開始１００２で、第一追尾期間始点メタデータ３５１が記録される。また、第一顔追尾ＡＦ制御終了１００３で、第一追尾期間終点メタデータ３５２が記録される。これら第一追尾期間始点メタデータ３５１及び第一追尾期間終点メタデータ３５２は、顔追尾ＡＦ制御が実行された期間を示す追尾期間情報である。
フレーム選択ボタン半押し時４３１は、第一追尾期間１００１内である。これは、フレーム選択ボタン半押し時４３１の時点で、追尾対象の被写体である顔に対して合焦状態であることを示している。そのため、フレーム選択ボタン半押し時４３１で、記録媒体１１７に第一フレーム選択メタデータ３４１及び第二フレーム選択メタデータ３４２が記録される。

また、動画記録期間４２０において、タイミング１００５は第二顔追尾ＡＦ制御開始、タイミング１００６は第二顔追尾ＡＦ制御終了を示し、その間が第二追尾期間１００４になる。第二顔追尾ＡＦ制御開始１００５で、第二追尾期間始点メタデータ３５３が記録される。また、第二顔追尾ＡＦ制御終了１００６で、第二追尾期間終点メタデータ３５４が記録される。これら第二追尾期間始点メタデータ３５３及び第二追尾期間終点メタデータ３５４は、顔追尾ＡＦ制御が実行された期間を示す追尾期間情報である。
フレーム選択ボタン半押し時４３１は、第二追尾期間１００４内である。これは、フレーム選択ボタン半押し時４３１の時点で、追尾対象の被写体である顔に対して合焦状態であることを示している。そのため、フレーム選択ボタン半押し時４３１で、記録媒体１１７に第一フレーム選択メタデータ３４１及び第二フレーム選択メタデータ３４２が記録される。

図１１は、第４の実施形態においてシステム制御マイコン１１４の制御下で実行される動画記録処理を示すフローチャートである。以下、図７との相違点を中心に説明する。
ステップＳ７０１で、システム制御マイコン１１４は、ＡＦ制御を実行する。第４の実施形態では、動画記録を開始する前に既にＡＦ制御が開始済であり、ＡＦ制御として顔追尾ＡＦ制御を実行する。
ここで、顔追尾ＡＦについて説明する。顔追尾ＡＦとは、被写体の中から顔を検出した場合、その顔に合焦するようにＡＦ制御を開始する。そして、撮像記録する画角の中で顔検出位置が移動した場合であっても、その顔検出位置を追尾して、その顔に合焦するようにＡＦ制御を継続する。例えば被写体である顔が撮像する画角より外側に移動する等して、顔が検出されなくなった場合は、ＡＦ制御を終了する。その後、再び被写体の中から顔を検出した場合は、その顔に合焦するようにＡＦ制御を開始する。

また、ステップＳ５０９の後、及び、ステップＳ５０３においてフレーム選択ボタン２０５が半押し状態でないと判定された場合、ステップＳ１１０１に進む。
なお、本実施形態では、フレーム選択ボタン半押し時４３１が、追尾期間１００１、１００４内であるので、フレーム選択ボタン半押し時４３１において既に合焦が成立している。したがって、ステップＳ５０３においてフレーム選択ボタン２０５が半押し状態であると判定された場合、ステップＳ５０４と略同時にステップＳ５０９も実行される。すなわち、フレーム選択ボタン半押し時４３１で、第一フレーム選択メタデータ３４１及び第二フレーム選択メタデータ３４２が記録され、第一フレーム選択メタデータ３４１と第二フレーム選択メタデータ３４２が記録するタイムコード値は同一になる。
ステップＳ１１０１で、システム制御マイコン１１４は、追尾期間始点／終点メタデータを記録する。詳細には、第一顔追尾ＡＦ制御開始１００２で、第一追尾期間始点メタデータ３５１が記録され、第一顔追尾ＡＦ制御終了１００３で、第一追尾期間終点メタデータ３５２が記録される。また、第二顔追尾ＡＦ制御開始１００５で、第二追尾期間始点メタデータ３５３が記録され、第二顔追尾ＡＦ制御終了１００６で、第二追尾期間終点メタデータ３５４が記録される。その後、ステップＳ５１０に進む。

次に、動画像データファイル３０１を用いて静止画出力作業を行うための情報処理装置１２００について説明する。図１２は、情報処理装置１２００の構成を示すブロック図である。
システム制御マイコン１２０１は、例えばＣＰＵ（ＭＰＵ）、メモリ（ＤＲＡＭ、ＳＲＡＭ）等により構成され、各種処理（プログラム）を実行して情報処理装置１２００の各ブロックを制御したり、各ブロック間でのデータ送受信を制御したりする。また、システム制御マイコン１２０１は、ユーザからの操作を受け付ける操作部１２０２からの操作信号に応じて、情報処理装置１２００の各ブロックを制御する。
操作部１２０２は、電源ボタン、キーボード、マウス、ポインティングデバイス、タッチパネル等により構成される。ユーザによりこれらのキーボードやマウスが操作されるとシステム制御マイコン１２０１に操作信号を送信する。
バス１２０３は、各種データ、制御信号、指示信号等を情報処理装置１２００の各ブロックに送るための汎用バスである。

メモリ１２０４は、例えばＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）やフラッシュメモリであって、画像信号及び音声信号、情報処理装置１２００の設定情報等を一時的に記憶する揮発性メモリと不揮発性メモリの双方が備わる。
記録媒体１２０５は、情報処理装置１２００に内蔵される記録媒体である。記録媒体１２０５は、情報処理装置１２００で扱う各種データ等を記録することができる。記録媒体１２０５の例としては、例えばハードディスク、ＳＳＤ、光ディスク、フラッシュメモリ等がある。
外部記録媒体接続部１２０６は、情報処理装置１２００に外部記録媒体を接続するための接続部である。外部記録媒体は、情報処理装置で扱う各種データ等を記録することができる。外部記録媒体の例としては、例えばハードディスク、ＳＳＤ、光ディスク、フラッシュメモリ等がある。
通信部１２０７は、情報処理装置１２００が外部情報処理装置と通信するための通信部である。外部情報処理装置は、情報処理装置１２００と同様に、画像処理を行うことができる。外部情報処理装置の例としては、スマートフォン、タブレット型コンピュータ、パーソナルコンピュータ等がある。更には、撮像部及び画像記録部も含むデジタルビデオカメラ、デジタルスチルカメラ等もある。

表示部１２０８は、記録媒体１２０５や外部記録媒体接続部１２０６を経由して接続された外部記録媒体に記録された画像データや、各種メニュー等のＧＵＩを表示する。表示部１２０８は、例えば液晶ディスプレイ、有機ＥＬディスプレイ等を用いることができる。
音声出力部１２０９は、例えばスピーカ及びその駆動部からなり、記録媒体１２０５や外部記録媒体に記録された音声信号に基づいて音声を出力する。
映像外部出力部１２１０は、外部映像表示装置を情報処理装置１２００に接続するための出力部である。映像外部出力部１２１０は、記録媒体１２０５や外部記録媒体接続部１２０６を経由して接続された外部記録媒体に記録された画像データや、各種メニュー等のＧＵＩを外部映像表示装置に表示する。外部映像表示装置の例としては、テレビ、モニタ等がある。
音声外部出力部１２１１は、外部音声出力装置を情報処理装置１２００に接続するための出力部である。音声外部出力部１２１１は、記録媒体１２０５や外部記録媒体に記録された音声信号に基づいて音声を出力する。外部音声出力装置の例としては、スピーカやヘッドフォン等がある。

図１３は、情報処理装置１２００の表示部１２０８に表示されるインターフェイス画面１３０１の例を示す。インターフェイス画面１３０１は、表示部１２０８の全画面に表示されるが、複数ウインドウ表示可能な場合、そのうちの一つのウインドウとして表示されてもよい。なお、インターフェイス画面１３０１が表示部１２０８に表示されるとしたが、映像外部出力部１２１０を介して外部映像表示装置に表示されるようにしてもよい。
メニュー１３０２は、情報処理装置１２００が実行可能な機能を選択して実行するためのメニューである。操作部１２０２でメニュー１３０２を選択すると、所謂プルダウンメニューとして、メニューの詳細が表示される。更に、それら詳細のメニューの中から、実行したいメニューを選択することにより、所望の機能を実行することができる。メニューの項目としては、大項目として、ファイル操作に関連するファイルメニュー、編集操作に関連する編集メニュー、表示操作に関連する表示メニュー、設定等に関連するツールメニュー、使用説明書を表示等するヘルプメニュー等がある。

メディア一覧リスト１３１１は、情報処理装置１２００で認識されるメディアの一覧を示すリストである。メディアの種類としては、メディア１３１２と仮想メディア１３１４がある。メディア１３１２は、情報処理装置１２００の外部記録媒体接続部１２０６でメモリカード等の装着が認識された場合に表示される。また、メディア１３１２は、通信を介してマスストレージクラス動作状態で接続された情報処理装置１２００の外部記録媒体接続部１２０６に接続されたメモリカードの装着が認識された場合に表示される。また、それ以外の手段で外部記録媒体が認識された場合に表示されてもよい。仮想メディア１３１４は、情報処理装置１２００の記録媒体１２０５に階層構造で各種データが記録されている場合、特定の階層のフォルダを仮想的なメディアとみなして情報処理装置１２００で扱うためのものである。メディア１３１２には、メディア名１３１３を併せて表示することができる。メディア１３１２は、図１３では１つのみ表示されているが、情報処理装置１２００で複数のメディア１３１２が認識された場合、メディア１３１２を複数表示することができる。その際、それら複数のメディア１３１２は、各メディアに対応するメディア名１３１３にそれぞれ異なる名を設定することにより、それぞれを識別可能である。また、仮想メディア１３１４には、仮想メディア名１３１５を併せて表示することができる。仮想メディア１３１４は、図１３では１つのみ表示されているが、情報処理装置１２００で複数の仮想メディア１３１４が認識された場合、仮想メディア１３１４を複数表示することができる。その際、それら複数の仮想メディア１３１４は、各仮想メディアに対応する仮想メディア名１３１５にそれぞれ異なる名を設定することにより、それぞれを識別可能である。メディア選択枠１３１６は、選択されているメディア１３１２又は仮想メディア１３１４を示す。複数のメディア１３１２又は仮想メディア１３１４を選択することも可能である。メディア選択枠１３１６は、操作部１２０２で操作することができる。キーボードで操作する場合は、キーボードに含まれる矢印キーの操作により、メディア選択枠１３１６の位置を変更する。例えば図１３で、仮想メディア１３１４が選択されている状態で上向き矢印キーを操作することにより、メディア一覧リスト１３１１で１つ上側となるメディア１３１２を選択する状態に変更することができる。

仮想メディア作成ボタン１３１７は、仮想メディア１３１４を作成するためのボタンである。仮想メディア作成ボタン１３１７を押下することにより、記録媒体１２０５の予め設定した階層のフォルダ下に、仮想メディア１３１４を作成する。そのときに、不図示のサブウインドウ表示で、仮想メディア名１３１５を設定することもできる。
仮想メディア削除ボタン１３１８は、仮想メディア１３１４を削除するためのボタンである。メディア選択枠１３１６で仮想メディア１３１４が選択された状態で仮想メディア削除ボタン１３１８を押下することにより、その選択されている仮想メディア１３１４が削除される。

バックアップボタン１３１９は、ユーザの操作に基づいて画像データバックアップを実行する。メディア選択枠１３１６でメディア１３１２が選択された状態でバックアップボタン１３１９を押下することにより、以下の処理を行う。まず、仮想メディア１３１４を新たに作成する。次に、メディア１３１２に記録されている画像データを、新たに作成された仮想メディア１３１４にコピーする。バックアップボタン１３１９は、仮想メディアの作成と、画像データのコピー、以上２つの操作が必要なバックアップを、バックアップボタン１３１９の押下という１つの操作で実施することができる。これにより、ユーザの作業を効率化し、利便性を向上する。

オートバックアップ動作モード表示部１３２０は、オートバックアップ動作モードの状態を表示するための表示領域である。オートバックアップとは、メディア１３１２の接続を認識した場合に、バックアップボタン１３１９を押下しなくても、バックアップボタン１３１９を押下した場合と同様の機能を実行する機能である。
ユーザの使用状況により、オートバックアップを利用したい場合と、利用したくない場合がある。オートバックアップを利用したい場合とは、例えば撮像装置１００で撮影してメモリカードに記録した画像データに対して、効率良くバックアップ作業を実施したい場合である。効率良くとは、ユーザが実行する操作手順が簡略化されることを示す。具体的には、操作部１２０２の操作を省略できることを示す。特に業務用途の場合、複数の作業者による連携作業であり、不慣れな作業者が参加する場合も多い。また、特に業務用途の場合、作業の失敗は金銭的損失に直結するため、作業の失敗を最も避けるべきこととして扱う場合がある。そのような場合、ボタン押下のひと手間といえども、操作手順の簡略化により、作業者は作業失敗の回避という恩恵を受けることができる。更には、特に業務用途の場合、カメラを操作するカメラマン、データバックアップを担当するバックアップ作業者、バックアップ後のデータを編集等に利用する編集者等がチームを組み、連携して作業する。その中で、複数メンバが連携して実施する複数作業の流れを所謂ルーチン作業として実施する場合がある。そのような定型作業を反復する場合、ボタン押下のひと手間といえども、操作手順の簡略化により、作業者は作業失敗の回避という恩恵を受けることができる。
一方、オートバックアップを利用したくない場合がある。前述のルーチン作業が一通り終了し、メモリカードに記録された画像データの内容を単に確認したい場合等である。そのような場合に、オートバックアップ機能を停止することができる。メニュー１３０２で不図示のサブダイアログを表示し、そのサブダイアログ上で情報処理装置１２００の設定を行う。そのようにしてオートバックアップ機能を非実施に設定することにより、オートバックアップ機能を停止することができる。

クリップ一覧リスト１３３１は、メディア一覧リスト１３１１で選択したメディア１３１２又は仮想メディア１３１４に記録されている画像データの一覧を表示するリストである。ここで、画像データをクリップと呼称する。サムネイル画像１３３２は、１つのクリップに対する代表画像である。同様にサムネイル画像１３３３、サムネイル画像１３３４は、それぞれ１つのクリップに対する代表画像である。つまり、図１３は、クリップが３つ、クリップ一覧リストに表示されていることを示す。それと共に、メディア一覧リスト１３１１で選択したメディア１３１２又は仮想メディア１３１４に、クリップが３つ記録されていることを示す。また、クリップ一覧リスト１３３１は、各クリップに対応するクリップ名及びメタデータ情報を表示する。クリップ名１３３５は、サムネイル画像１３３２に対応するクリップのクリップ名を表示する。クリップ名１３３５は、クリップ名と共に、関連付けて記録されるメタデータを表示してもよい。同様に、クリップ名１３３６はサムネイル画像１３３３に対応するクリップ名及びメタデータ、クリップ名１３３７はサムネイル画像１３３４に対応するクリップ名及びメタデータを表示する。また、クリップ一覧リスト１３３１は、アイコン１３３８を表示する。アイコン１３３８は、サムネイル画像１３３２で特定するクリップに付随するメタデータをアイコン表示したものである。同様に、アイコン１３３９、アイコン１３４０は、サムネイル画像１３３３、サムネイル画像１３３４で特定するクリップに付随するメタデータをアイコン表示したものである。クリップ選択枠１３４１は、クリップ一覧リスト１３３１で１つ又は複数表示されるクリップに対して、どのクリップが選択されたかを示す選択枠である。図１３では、サムネイル画像１３３４、クリップ名１３３７、アイコン１３４０で特定されるクリップが選択されていることを示す。

クリップ一覧サムネイル大モード表示ボタン１３４２を押下することにより、クリップ一覧リスト１３３１をサムネイル大モード表示する。サムネイル大モードとは、サムネイル小モードよりも大きなサムネイル画像を表示するモードである。また、クリップ一覧サムネイル小モード表示ボタン１３４３を押下することにより、クリップ一覧リスト１３３１をサムネイル小モード表示する。図１３は、サムネイル小モード表示されている状態を示している。また、クリップ一覧情報付きサムネイルモード表示ボタン１３４４を押下することにより、クリップ一覧リスト１３３１を情報付きサムネイルモード表示する。情報付きサムネイルモードとは、サムネイル大モード及びサムネイル小モードよりも、メタデータ表示項目を増やしたモードである。また、クリップ一覧詳細表示モード表示ボタン１３４５を押下することにより、クリップ一覧リスト１３３１を詳細表示モード表示する。詳細表示モードとは、サムネイル画像を非表示とし、クリップ名及びメタデータをリスト表示するモードである。

簡易検索項目設定部１３４６、簡易検索条件設定部１３４７、全検索ボタン１３４８、絞込み検索ボタン１３４９、すべて表示ボタン１３５０は、簡易検索機能にかかわる設定部及びボタンである。簡易検索とは、クリップ一覧リスト１３３１に表示されるクリップに対して、検索条件を設定して検索を実行することにより、その検索条件に合致するクリップのみをクリップ一覧リストに表示させるようにする機能である。

簡易検索項目設定部１３４６は、簡易検索の検索条件とする項目を設定する。具体的には、クリップに付随記録されるメタデータ項目のうち、どのメタデータ項目を検索キーとするかを設定する。例えばクリップ名、撮影日時、ステータス（ＯＫマーク等）、クリップタイトル（任意の文字列）、撮影者（任意の文字列）、撮影場所（任意の文字列）、撮影内容（任意の文字列）等を設定することができる。

簡易検索条件設定部１３４７は、簡易検索項目設定部１３４６で選択し設定したメタデータ項目に応じて、そのメタデータ値がいくつの場合を検索条件とするかを更に設定する設定部である。具体的には、簡易検索項目設定部１３４６で、クリップ名、クリップタイトル、撮影者、撮影場所、撮影内容を選択した場合は、任意の文字列を検索条件として設定することができる。例えばクリップ一覧リスト１３３１で、クリップ名として“ＡＡ０００１”、“ＡＢ０００１”、“ＡＣ０００１”の３つのクリップがあるとする。簡易検索項目設定部１３４６でクリップ名を設定した場合、簡易検索条件設定部１３４７で文字列“ＡＡ”を設定することにより、簡易検索を実行した結果として、“ＡＡ０００１”のクリップのみをクリップ一覧リストに表示する。

全検索ボタン１３４８は、簡易検索未実施の状態から検索を実行するためのボタンである。つまり、クリップ一覧リスト１３３１が簡易検索実行済みの状態で表示されていた場合でも、全検索ボタン１３４８を押下することにより、それまでの簡易検索結果を非反映として新たな検索を実行できる。

絞込み検索ボタン１３４９は、クリップ一覧リスト１３３１が簡易検索実行済みの状態で、簡易検索条件に合致したクリップのみ表示されている状態から、更に絞り込み検索を行うためのボタンである。例えば簡易検索未実施の状態で、クリップ一覧リスト１３３１には、クリップ名“ＡＡ０００１”、“ＡＡ０００２”、“ＡＢ０００１”が表示されているとする。クリップ名を検索項目、“ＡＡ”を検索条件として簡易検索を実行した結果として、クリップ名“ＡＡ０００１”と“ＡＡ０００２”のクリップが表示されているとする。その状態から更に、検索条件として“０００１”を設定して絞込み検索を実施する。すると、クリップ名“ＡＢ０００１”は表示されることなく、クリップ名“ＡＡ０００１”のみ表示される。

すべて表示ボタン１３５０は、簡易検索実行結果を解除して、メディア一覧リスト１３１１で選択されているメディア１３１２又は仮想メディア１３１４に記録されているクリップを全てクリップ一覧リスト１３３１に表示するためのボタンである。

プレビュー画像１３６１は、クリップ一覧リスト１３３１に表示されたクリップの再生画像を表示する領域である。タイムコード１３６２は、プレビュー画１３７６１に表示されているフレーム画像に対応するタイムコードを表示する。例えばタイムコードが１２時間３４分５６秒１２フレームであるとき、“１２：３４：５６：１２”と表示する。デュレーション１３６３は、クリップ一覧リスト１３３１に表示されたクリップの時間長を表示する。例えばクリップの時間長が１時間２３分４５秒２１フレームであるとき、“０１：２３：４５：２１”と表示する。
スライダーバー１３６４及びスライダーバー操作部１３６５は、クリップの時間長に対する、現在の再生位置を示す。具体的には、スライダーバー１３６４に対するスライダーバー操作部１３６５の位置により、現在のクリップ再生の時間的位置を表示する。また、スライダーバー操作部１３６５を操作部１２０２で操作して移動することにより、プレビュー画像１３６１に表示されるフレーム画像を変更することができる。

再生ボタン１３６６は、トグル動作をするボタンである。操作部１２０２で再生ボタン１３６６を押下することにより、プレビュー画像１３６１に対して通常再生（正方向の１倍速再生）を行うことができる。通常再生中は、再生ボタン１３６６は不図示の停止ボタン表示となり、同ボタンを再び押下することにより、プレビュー画像１３６１に対して再生停止を行うことができる。
１フレーム戻すボタン１３６７は、再生停止状態のプレビュー画像１３６１に対して１フレームのみ再生位置を時間軸過去方向に変更する。１フレーム進めるボタン１３６８は、再生停止状態のプレビュー画像１３６１に対して１フレームのみ再生位置を時間軸将来方向に変更する。
スタートへボタン１３６９は、プレビュー画像１３６１に表示されるフレーム画像をスタートタイムコードに相当するフレーム画像に変更する。エンドへボタン１３７０は、プレビュー画像１３６１に表示されるフレーム画像をエンドタイムコードに相当するフレーム画像に変更する。
マークリストボタン１３８１を押下することにより、不図示のマークリストダイアログが表示される。マークリストダイアログには、１つ又は複数のショットマーク及びイベントマークがリスト表示される。ショットマークとは、撮像装置１００でボタン操作等により付与された特定のタイムコードに対応するフレーム画像に対するメタデータである。イベントマークとは、撮像装置１００の状態に応じて自動的に付与されるマークである。例えば撮像装置１００で撮影中に顔認識がなされた場合、その時点のタイムコードに対応するフレーム画像に対してメタデータが付与される。
ショットマークは、撮像装置１００で付与可能であると同時に、ショットマークボタン１３８８の押下によっても、押下時点のフレーム画像に対して付与可能である。

ショットマーク表示１３８２は、ショットマークが記録されている位置をスライダーバー１３６４上で示す。ショットマーク表示１３８２は、第一追尾期間１００１において第一フレーム選択メタデータ３４１に記録されたタイムコード位置で表示される。前のショットマークへボタン１３８４は、スライダーバー操作部１３６５より時間軸過去方向にショットマーク表示１３８２が存在した場合、その位置にプレビュー画像１３６１に表示するフレーム画像を変更する。次のショットマークへボタン１３８５は、スライダーバー操作部１３６５より時間軸将来方向にショットマーク表示１３８２が存在した場合、その位置にプレビュー画像１３６１に表示するフレーム画像を変更する。図１３では、次のショットマークへボタン１３８５を押下することにより、プレビュー画像１３６１を、スライダーバー操作部１３６５の現在位置に相当するフレーム画像から、ショットマーク表示１３８２の位置に相当するフレーム画像へ変更できる。

ショットマーク表示１３８３は、ショットマークが記録されている位置をスライダーバー１３６４上で示す。ショットマーク表示１３８３は、第二追尾期間１００４において第一フレーム選択メタデータ３４１に記録されたタイムコード位置で表示される。

追尾期間表示１３９４は、顔追尾ＡＦ制御がなされている期間を表示する。図１３では、ショットマーク表示１３８３が含まれる追尾期間である第二追尾期間始点メタデータ３５３と第二追尾期間終点メタデータ３５４で示される第二追尾期間を表示している。

音声スライダーバー１３７１及び音声スライダーバー操作部１３７２は、情報処理装置１２００の音声出力部１２０９又は音声外部出力部１２１１で再生する音声の音量を設定する設定部である。ミュートボタン１３７３を押下することにより、音声スライダーバー操作部１３７２の位置にかかわらず、音声を非出力とすることができる。チャンネル１ボタン１３７４を押下することにより、チャンネル１ボタンのみを音声非出力とすることができる。チャンネル２ボタン１３７５を押下することにより、チャンネル２ボタンのみを音声非出力とすることができる。
ＬＵＴボタン１３８９を押下することにより、プレビュー画像１３６１に表示する表示画像のガンマ特性に対して、予め設定されたＬＵＴ（Ｌｏｏｋｕｐ－Ｔａｂｌｅ）を適用することができる。例えばＬｏｇガンマ特性で撮影されたクリップに対して、Ｌｏｇガンマ特性からＢＴ７０９ガンマ特性へ変換するＬＵＴを適用する。これにより、プレビュー画像１３６１には、ＢＴ７０９ガンマ特性へ変換された画像を表示することができる。
また、ホワイトバランス調整スライダーバー１３９０及びホワイトバランス調整スライダーバー操作部１３９１が設けられる。また、露出調整スライダーバーである１３９２及び露出調整スライダーバー操作部１３９３が設けられる。

図１４は、情報処理装置１２００のシステム制御マイコン１２０１の制御下で実行される処理を示すフローチャートである。
ステップＳ１４０１で、システム制御マイコン１２０１は、クリップ選択操作を受け付ける。クリップ一覧リスト１３３１で１つ又は複数表示されるクリップに対して、操作部１２０２でクリップ選択枠１３４１の操作を行うことで、クリップの選択を行う。

ステップＳ１４０２で、システム制御マイコン１２０１は、フレーム画像データとタイムコードデータの読み込み処理を行う。ステップＳ１４０１において選択されたクリップの動画像データファイル３０１より、タイムコードデータ３２１とフレーム画像データ３３１を読み込む処理を行う。クリップの選択を行った当初は、動画像データ３１１の先頭となるタイムコードデータとフレーム画像データを読み込む処理を行う。

ステップＳ１４０３で、システム制御マイコン１２０１は、フレーム選択メタデータの読み込み処理を行う。ステップＳ１４０１において選択されたクリップの動画像データファイル３０１より、第一フレーム選択メタデータ３４１と、第二フレーム選択メタデータ３４２を取得する。

ステップＳ１４０４で、システム制御マイコン１２０１は、追尾期間始点メタデータ及び追尾期間終点メタデータの読み込み処理を行う。ステップＳ１４０１において選択されたクリップの動画像データファイル３０１より、第一追尾期間始点メタデータ３５１、第一追尾期間終点メタデータ３５２、第二追尾期間始点メタデータ３５３及び第二追尾期間終点メタデータ３５４を取得する。

ステップＳ１４０５で、システム制御マイコン１２０１は、先頭フレーム画像を表示する。ステップＳ１４０２において読み込み処理を行ったフレーム画像データ３３１をプレビュー画像１３６１に表示する。

ステップＳ１４０６で、システム制御マイコン１２０１は、ステップＳ１４０３において読み込んだフレーム選択メタデータ、具体的には、第一フレーム選択メタデータ３４１と第二フレーム選択メタデータ３４２を表示する。本実施形態では、第一フレーム選択メタデータ３４１は２個記録されている。また、第二フレーム選択メタデータ３４２は２個記録されている。そして、第一フレーム選択メタデータ３４１と第二フレーム選択メタデータ３４２が記録するタイムコード値は同一である。これは、フレーム選択ボタン２０５を半押しした時点で、顔追尾ＡＦ制御が実行中であり、合焦状態であったことを示している。そのため、１個目の第一フレーム選択メタデータ３４１と１個目の第二フレーム選択メタデータ３４２がショットマーク表示１３８２として表示される。また、２個目の第一フレーム選択メタデータ３４１と２個目の第二フレーム選択メタデータ３４２がショットマーク表示１３８３として表示される。

ステップＳ１４０７で、システム制御マイコン１２０１は、静止画像の出力候補となるフレーム画像の選択操作を受け付ける。操作部１２０２で操作を行い、ショットマーク表示１３８２又はショットマーク表示１３８３のいずれかを選択する。

ステップＳ１４０８で、システム制御マイコン１２０１は、ステップＳ１４０７において選択されたショットマーク表示が位置するタイムコードを含む追尾期間が存在するか否かを判定する。追尾期間が存在する場合、ステップＳ１４０９に進み、追尾期間が存在しない場合、本処理を抜ける。第一追尾期間始点メタデータ３５１及び第一追尾期間終点メタデータ３５２、第二追尾期間始点メタデータ３５３及び第二追尾期間終点メタデータ３５４を参照することにより、追尾期間の存在を判定することができる。

ステップＳ１４０９で、システム制御マイコン１２０１は、追尾期間を表示する。例えばステップＳ１４０７においてショットマーク表示１３８３が選択されたとする。この場合、ステップＳ１４０９においてショットマーク表示１３８３に対応する追尾期間は第二追尾期間始点メタデータ３５３及び第二追尾期間終点メタデータ３５４で示される第二追尾期間であることが判定される。ステップＳ１４０９では、その結果として、追尾期間表示１３９４を表示する。
追尾期間表示１３９４が表示された状態で再生ボタン１３６６を押下した場合、第二追尾期間始点メタデータ３５３及び第二追尾期間終点メタデータ３５４で示される第二追尾期間のみをスロー再生にて繰り返し再生を行う。
その他、追尾期間表示１３９４が表示されたとき、クリップ一覧リスト１３３１に、追尾期間のサムネイル画像を複数表示してもよい。

以上のように、ステップＳ１４０９において、動画像の時間軸を示す表示に、追尾期間を併せて表示することにより、静止画像の出力候補となるフレーム画像の存在位置を把握することが容易となる。
また、該当する追尾期間のみを繰り返し再生することにより、ユーザがコマ送り操作等を行う手間を省くことが可能となる。
また、その繰り返し再生はスロー再生とすることにより、ユーザが最適なフレーム画像選択することを容易とする。
更には、検出された顔を追尾対象とする顔追尾ＡＦ制御により、人物を被写体とした動画像より静止画像を出力する場合に、特に利便性を提供することが可能となる。
これにより、ユーザに対してより一層の利便性を提供する。

以上説明したように、動画像から出力する静止画像を決定するときに、追尾期間情報に基づいて、所望の被写体にピントが合い続けた追尾期間を知ることができる。これにより、フレーム選択メタデータが付与されたフレーム画像だけでなく、それ以外の、引き続き所望の被写体にピントが合い続けているフレーム画像の選択を簡易に行うことが可能となる。静止画像を決定する条件としては、所望の被写体にピントが合っているか以外に、例えば構図もある。動画像においては被写体が時々刻々と変化するため、フレーム画像毎に構図が変化する。また、静止画像を決定する条件としては、所望の被写体にピントが合っているか以外に、他の被写体のピントのボケ具合も条件となる。様々な被写体距離をとる複数の被写体が写っている場合もあり、それぞれの被写体のピントのボケ具合は異なる。
従来は、動画像から出力する静止画像を決定するときに、所望の被写体にピントが合い続けた追尾期間を知ることが困難であった。そのため、ユーザは編集ソフトウェア等を操作して、複数のフレーム画像を目視確認することにより比較検討する必要があり、ユーザの負担となっていた。そのため、所望の被写体にピントが合い、且つ、構図や他の被写体のピントのボケ具合まで含めて良好であるフレーム画像を選択することは困難であった。

以上、本発明を実施形態と共に説明したが、上記実施形態は本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。
（その他の実施形態）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１００：撮像装置、１０２：センサ、１０４：撮像制御部、１１４：システム制御マイコン、２０４：記録ボタン、２０５：フレーム選択ボタン、１２００：情報処理装置、１２０１：システム制御マイコン

Claims (4)

1. 複数のフレーム画像で構成される動画像データを記録媒体に撮像記録する撮像装置であって、
   所定の操作を受け付ける操作手段と、
   前記動画像データの撮像記録中に、前記所定の操作を受け付けると、被写体を追尾してフォーカス制御を行う被写体追尾オートフォーカス制御が実行されている状態のフレーム画像を検出する検出手段と、
   前記被写体追尾オートフォーカス制御が実行されている状態のフレーム画像に対応する被写体追尾オートフォーカス制御が実行された期間を示す追尾期間情報を付与して前記動画像データを記録する記録制御手段を備えたことを特徴とする撮像装置。
2. 前記記録制御手段は、前記動画像データの撮像記録中に、前記所定の操作があったときのフレーム画像に対して、前記追尾期間情報とは異なる特定の情報を付与して前記動画像データを記録することを特徴とする請求項１に記載の撮像装置。
3. 複数のフレーム画像で構成される動画像データを記録媒体に撮像記録する撮像装置を制御する撮像装置の制御方法であって、
   所定の操作を受け付けるステップと、
   前記動画像データの撮像記録中に、前記所定の操作を受け付けると、被写体を追尾してフォーカス制御を行う被写体追尾オートフォーカス制御が実行されている状態のフレーム画像を検出するステップと、
   前記被写体追尾オートフォーカス制御が実行されている状態のフレーム画像に対応する被写体追尾オートフォーカス制御が実行された期間を示す追尾期間情報を付与して前記動画像データを記録するステップを有することを特徴とする撮像装置の制御方法。
4. コンピュータを請求項１又は２に記載の撮像装置の各手段として機能させるプログラム。

Images