JP2023019389A - 動画再生装置、動画記録再生方法、および動画再生プログラム - Google Patents

Abstract

【課題】撮像装置で撮影された動画データを、当該撮像装置による撮影フレームレートとは異なるフレームレートで再生する場合であっても当該撮像装置とは異なる装置で撮影時に生成されたタグ情報に基づいて指定された位置から再生することが可能な動画再生装置を提供する。【解決手段】動画データ取得部３１１は、基準時刻に基づく撮影開始時刻の情報が付加されて第１フレームレートで生成された動画データを取得する。タグ情報取得部３１２は、基準時刻に基づく動画データの再生開始時刻を含むタグ情報を取得する。再生開始位置算出部３１４は、撮影開始時刻と再生開始時刻との差分、及び第２フレームレートと第１フレームレートとの比に基づいてタグ情報による動画データの再生開始位置を算出する。再生制御部３１７は、タグ情報による動画データの再生が指示されると動画再生部３１３により動画データを再生開始位置から第２フレームレートで再生させる。【選択図】図２

Description

特許法第３０条第２項適用申請有り 令和３年３月３０日、神奈川県川崎市多摩区 読売ジャイアンツ球場において販売

本発明は、動画再生装置、動画記録再生方法、および動画再生プログラムに関する。

スポーツ選手の指導などにおいて、ハイスピードカメラ装置により高いフレームレートで撮影した動画を、動画再生装置により一般的なフレームレートでスローモーション再生させて活用する機会が増加している。高いフレームレートで撮影した動画をスローモーション再生することで、肉眼では追うことができないスポーツ選手の素早い動きを把握することができる。

その際に、撮影した動画の中から、選手の特定の動きのシーンのみを視聴したい場合がある。その場合、ユーザは視聴したいシーンの位置を動画の中から探して、再生操作を行う必要がある。

動画の中から所望のシーンを探して再生させる処理を容易に行うために、動画データ中の該当する位置にタグ情報を付加しておく技術がある（特許文献１）。動画データの中にタグ情報を付加しておくことで、視聴時にユーザがタグ情報を指定する操作を行うのみで、所望のシーンから容易に再生させることができる。

特開２０２０－１０７９９１号公報

特許文献１に記載の撮像装置は、撮影時に、後から再生したいシーンのタイミングを指定することで、撮影された動画データの該当する位置にタグ情報を付加することができる。一方で、撮像装置とは離れた場所にいるユーザが所持する端末装置で、当該撮像装置で撮影された動画データを無線通信で受信してリアルタイムで視聴しながら、当該動画データに対するタグ情報の付加位置を指定する操作を行いたいという要望がある。

しかし、撮像装置と異なる端末装置で、当該撮像装置で撮影された動画データに対するタグ情報を生成するには、タグ情報を生成する端末装置と撮像装置とを通信により接続するかまたは、処理タイミングの同期をとる必要があり、システム構築が複雑になるという問題があった。

また、タグ情報を生成する装置と撮像装置との間で処理タイミングの同期をとっても、上述したように撮影時のフレームレートと再生時のフレームレートとが異なる場合、当該タグ情報によりユーザの所望の位置から再生することができないという問題があった。例えば、撮影対象に対して通常の２倍のフレームレートで撮影を開始したとする。撮影を開始してから１０分後に、ユーザが端末装置でタグ情報を生成した場合、当該タグ情報は撮影を開始してから１０分後の時刻を示す。次に、撮影した映像を通常のフレームレートで再生する際に当該タグ情報が示す時刻から再生させると、再生映像がスローモーションになっているため、実際に撮影した５分後のシーンから再生されることになる。

本発明は、撮像装置で撮影された動画データを、当該撮像装置による撮影フレームレートとは異なるフレームレートで再生する場合であっても、当該撮像装置とは異なる装置で撮影時に生成されたタグ情報に基づいて指定された位置から再生することが可能な、動画再生装置、動画記録再生方法、および動画再生プログラムを提供することを目的とする。

上記目的を達成するための本発明の動画再生装置は、基準時刻に基づく撮影開始時刻の情報が付加されて第１フレームレートで生成された動画データを取得する動画データ取得部と、前記基準時刻に基づく前記動画データの再生開始時刻を含むタグ情報を取得するタグ情報取得部と、前記第１フレームレートと異なる第２フレームレートで前記動画データを再生する動画再生部と、前記撮影開始時刻と前記再生開始時刻との差分、及び前記第２フレームレートと前記第１フレームレートとの比に基づいて、前記タグ情報による前記動画データの再生開始位置を算出する再生開始位置算出部と、前記タグ情報による前記動画データの再生が指示されると、前記動画再生部により前記動画データを、前記再生開始位置から前記第２フレームレートで再生させる再生制御部とを備えることを特徴とする。

また、本発明の動画記録再生方法は、撮像装置が、基準時刻に基づく撮影開始時刻の情報が付加された動画データを第１フレームレートで生成して記録し、タグ情報生成装置が、前記基準時刻に基づく前記動画データの再生開始時刻を含むタグ情報を記憶し、前記第１フレームレートと異なる第２フレームレートで動画データを再生する動画再生装置が、前記動画データおよび前記タグ情報を取得し、前記撮影開始時刻と前記再生開始時刻との差分、及び前記第２フレームレートと前記第１フレームレートとの比とに基づいて、前記タグ情報による前記動画データの再生開始位置を算出し、前記タグ情報による前記動画データの再生が指示されると、前記動画データを、算出した前記再生開始位置から前記第２フレームレートで再生することを特徴とする。

また、本発明の動画再生プログラムは、コンピュータに、基準時刻に基づく撮影開始時刻の情報が付加され第１フレームレートで生成された動画データを取得する機能と、前記基準時刻に基づく前記動画データの再生開始時刻を含むタグ情報を取得する機能と、前記第１フレームレートと異なる第２フレームレートで前記動画データを再生する機能と、前記撮影開始時刻と前記再生開始時刻との差分、及び前記第２フレームレートと前記第１フレームレートとの比に基づいて、前記タグ情報による前記動画データの再生開始位置を算出する機能と、前記タグ情報による前記動画データの再生が指示されると、前記動画データを、前記再生開始位置から前記第２フレームレートで再生させる機能とを実現させることを特徴とする。

本発明の動画再生装置、動画記録再生方法、および動画再生プログラムによれば、撮像装置で撮影された動画を、当該撮像装置による撮影フレームレートとは異なるフレームレートで再生する場合であっても、当該撮像装置とは異なる装置で撮影時に生成されたタグ情報に基づいて指定された位置から再生することができる。

本発明の一実施形態による動画再生装置を用いた動画処理システムの構成を示すブロック図である。 本発明の一実施形態による動画再生装置の構成を示すブロック図である。 本発明の一実施形態による動画再生装置を用いた動画処理システムで実行する処理を示すシーケンス図である。 本発明の一実施形態による動画再生装置で取得される動画データの構成を示す説明図である。 本発明の一実施形態による動画再生装置に入力するタグ情報を生成するタグ情報生成装置に表示される画面構成図の一例である。 本発明の一実施形態による動画再生装置に入力するタグ情報を生成する際に、ユーザが視聴する動画データの表示画面の一例である。 本発明の一実施形態による動画再生装置に入力するタグ情報テーブルの一例である。 本発明の一実施形態による動画再生装置で更新されたタグ情報テーブルの一例である。 本発明の他の形態による動画再生装置で更新されたタグ情報テーブルの一例である。 本発明の他の形態による動画再生装置で再生開始位置が調整されたときの動画データ内の再生部分を示す説明図である。

以下に、本発明の一実施形態による動画再生装置を用いた動画処理システム１について、図面を参照して説明する。

〈一実施形態による動画処理システム１の構成〉
本実施形態による動画処理システム１は、図１に示すように、撮像装置としてのハイスピードカメラ装置１０と、タグ情報生成装置２０と、動画再生装置３０とを備える。動画処理システム１は、通信ネットワーク２を介してＮＴＰ（Network Time Protocol）サーバ３に接続されている。ＮＴＰサーバ３は、基準時刻の情報を配信するサーバである。

ハイスピードカメラ装置１０は、撮影部１１と、第１動画データ記憶部１２と、カメラ制御部１３と、動画データ送信部１４とを有する。撮影部１１は、第１フレームレートで動画の撮影を行う。第１フレームレートとは、通常のフレームレートである60FPS（frames per second）で再生した時にスローモーションでなめらかに再生可能になるように予め通常のフレームレートよりも高く設定されたフレームレート、例えば240FPSである。第１動画データ記憶部１２は、撮影部１１で撮影された動画データを記憶するとともに、第１フレームレートに関する情報を当該動画データにメタデータとして付加する。

カメラ制御部１３は、第１時刻情報取得部１３１と、開始時刻情報付加部１３２とを有する。第１時刻情報取得部１３１は、ＮＴＰサーバ３から配信される基準時刻情報を取得する。開始時刻情報付加部１３２は、撮影部１１で撮影が開始されたときの時刻情報を第１時刻情報取得部１３１で取得された基準時刻情報に基づいて取得し、第１動画データ記憶部１２に記憶された該当する動画データにメタデータとして付加する。動画データ送信部１４は、第１動画データ記憶部１２に記憶された動画データを、動画再生装置３０に有線または無線通信、例えば有線ＬＡＮ、無線ＬＡＮ等により送信する。第１時刻情報取得部１３１は内蔵時計を有し、ＮＴＰサーバ３から所定の周期で取得した基準時刻情報に基づいて内蔵時計を更新するようにしてもよい。

タグ情報生成装置２０は、例えばスマートデバイスで構成され、ユーザインタフェース部２１と、生成装置制御部２２と、第１タグ情報記憶部２３と、タグ情報送信部２４とを有する。ユーザインタフェース部２１は、例えばタッチパネルで構成され、ユーザが行った操作の情報を生成装置制御部２２に入力するとともに、生成装置制御部２２による情報の処理結果を出力する。

生成装置制御部２２は、第２時刻情報取得部２２１と、第１操作情報取得部２２２と、タグ情報生成部２２３とを有する。第２時刻情報取得部２２１は、ＮＴＰサーバ３から配信される基準時刻情報を取得する。第１操作情報取得部２２２は、ユーザインタフェース部２１から入力されたユーザの操作情報を取得する。第２時刻情報取得部２２１は内蔵時計を有し、ＮＴＰサーバ３から所定の周期で取得した基準時刻情報に基づいて内蔵時計を更新するようにしてもよい。

タグ情報生成部２２３は、第１操作情報取得部２２２でタグ情報を生成するための操作情報が取得されると、取得されたタイミングを示す時刻情報を第２時刻情報取得部２２１で取得された基準時刻情報に基づいて取得し、当該時刻情報を再生開始時刻の情報として含むタグ情報を生成する。

第１タグ情報記憶部２３は、タグ情報生成部２２３で生成されたタグ情報を記憶する。タグ情報送信部２４は、第１タグ情報記憶部２３に記憶されたタグ情報を、動画再生装置３０に有線または無線通信、例えば有線ＬＡＮ、無線ＬＡＮ等により送信する。

図２に示すように、動画再生装置３０は、ＣＰＵ３１と、記憶部３２と、表示部３３とを有する。ＣＰＵ３１は、動画データ取得部３１１と、タグ情報取得部３１２と、動画再生部３１３と、再生開始位置算出部３１４と、第２操作情報取得部３１５と、タグ情報更新処理部３１６と、再生制御部３１７とを有する。記憶部３２は、第２動画データ記憶部３２１と、第２タグ情報記憶部３２２とを有する。

動画データ取得部３１１は、ハイスピードカメラ装置１０で撮影された動画データを取得して第２動画データ記憶部３２１に記憶させる。タグ情報取得部３１２は、タグ情報生成装置２０から送信されたタグ情報を取得して第２タグ情報記憶部３２２に記憶させる。

動画再生部３１３は、第１フレームレートと異なる第２フレームレートで動画データを再生する。動画再生部３１３において、第２フレームレートは予め通常のフレームレート（60FPS）に設定されている。第２フレームレートはユーザによって変更可能である。再生開始位置算出部３１４は、第２タグ情報記憶部３２２に記憶したタグ情報ごとに、第２動画データ記憶部３２１に記憶した動画データの撮影開始時刻と該当するタグ情報で示される再生開始時刻との差分、及び第２フレームレートと第１フレームレートとの比に基づいて、該当するタグ情報による該当する動画データの再生開始位置を算出する。再生開始位置算出部３１４は、算出した再生開始位置の情報を、第２タグ情報記憶部３２２内の該当するタグ情報に追加して記憶させる。

第２操作情報取得部３１５は、ユーザにより行われた、所定のタグ情報による動画データの再生を指示する操作情報、所定のタグ情報の再生開始位置を調整するための操作情報、または、タグ情報を追加するための操作情報等を取得する。

タグ情報更新処理部３１６は、第２操作情報取得部３１５で所定のタグ情報の再生開始位置を調整するための操作情報を取得すると、取得した情報に基づいて、第２タグ情報記憶部３２２に記憶された該当するタグ情報の再生開始位置の情報を更新する。またタグ情報更新処理部３１６は、第２操作情報取得部３１５で新たなタグ情報を追加するための操作情報を取得すると、新たなタグ情報を第２タグ情報記憶部３２２に追加して記憶させる。

再生制御部３１７は、第２操作情報取得部３１５で所定のタグ情報による動画データの再生を指示する操作情報が取得されると、該当する動画データを、該当する再生開始位置から第２フレームレートで動画再生部３１３により再生させる。表示部３３は、動画再生部３１３から送信される動画データを表示する。

〈一実施形態による動画処理システム１の動作〉
次に、本実施形態による動画処理システム１の動作について、図３～図１０を参照して説明する。本実施形態において、ハイスピードカメラ装置１０の第１時刻情報取得部１３１およびタグ情報生成装置２０の第２時刻情報取得部２２１は、通信ネットワーク２を介してＮＴＰサーバ３から基準時刻情報を取得している。これにより、ハイスピードカメラ装置１０とタグ情報生成装置２０では、時刻情報の同期がとられている。

まず、図３において、ハイスピードカメラ装置１０の撮影部１１が動画の撮影を行うと、撮影により生成された動画データＸ（図４参照）が第１動画データ記憶部１２に記憶される（Ｓ１）。その際、開始時刻情報付加部１３２が、撮影部１１で撮影が開始されたときの時刻情報を第１時刻情報取得部１３１で取得された基準時刻に基づいて取得する。そして開始時刻情報付加部１３２は、第１動画データ記憶部１２に記憶された動画データＸに、当該動画データＸの撮影開始時刻の情報をメタデータとして付加する（Ｓ２）。ここでは、撮影開始時刻の情報として、日付情報「2021/04/01」および時刻情報「13:37:09」が取得され、動画データＸにメタデータとして付加されたものとする。

ハイスピードカメラ装置１０が動画の撮影を行っているときに、ユーザが当該撮影の被写体を見ながら、または撮影している映像をリアルタイムで視聴しながら、タグ情報生成装置２０で、所定タイミングに関するタグ情報の生成を指示する操作を行う。所定タイミングとは、ハイスピードカメラ装置１０で撮影し記憶された動画データＸのうち、所望の位置から再生する際の再生開始タイミングである。

一例として、ハイスピードカメラ装置１０が撮影している野球の練習風景をユーザがテレビ装置（図示せず）等によりリアルタイムで視聴しながら、タグ情報生成装置２０としてのスマートデバイスＳ（図５参照）を用いて、ピッチャーが投球するタイミングに関するタグ情報の生成を指示する操作を行う場合について説明する。もちろん、ハイスピードカメラ装置１０が撮影している場所で、ユーザが野球の練習風景を直接見ながらスマートデバイスＳを操作するのでもよい。

図５は、ユーザインタフェース部２１としてのタッチパネル２００を備えたスマートデバイスＳの一例を示す。タッチパネル２００には、ユーザが該当タイミングに関するタグ情報の生成指示を入力する際にタッチ操作するタグ入力ボタン２０１と、タグリスト情報２０２と、再生条件情報２０３が表示されている。

ユーザは、野球の練習風景を見ながら、例えば図６に示すように、ピッチャーが振りかぶって投球動作を開始するタイミングを認識するごとに、タッチパネル２００上でタグ入力ボタン２０１をタッチ操作する。

ユーザがタグ入力ボタン２０１をタッチ操作すると、第１操作情報取得部２２２が当該タッチ操作の情報を取得する（Ｓ３）。第１操作情報取得部２２２が当該タッチ操作の情報を取得すると、タグ情報生成部２２３が、タッチ操作の情報が取得されたタイミングを示す時刻情報を、第２時刻情報取得部２２１で取得した基準時刻情報に基づいて取得する。そして、タグ情報生成部２２３は、当該タッチ操作に関し、取得した時刻情報を再生開始時刻の情報として含むタグ情報を生成する。

タグ情報生成部２２３は、動画の撮影中にユーザがピッチャーの投球動作が開始するタイミングを認識してタッチ操作を行う都度、当該タイミングに対応するタグ情報を生成する。そしてタグ情報生成部２２３は、当該撮影が終了するまでの間に生成したタグ情報を格納した、投球シーンに関するタグ情報テーブルＴ（図７参照）を生成する（Ｓ４）。タグ情報テーブルＴは、タグ情報ごとに再生開始時刻の情報などが対応付けられたテーブルであって、ＣＳＶファイルとして生成されてもよい。

また、ユーザがタッチパネル２００の再生条件情報２０３で、タグ情報に対して再生時間として「10秒」を指定する操作を行うと、当該タグ情報の再生時間の情報がタグ情報テーブルＴに格納される。

図７は、タグ情報生成部２２３が生成したタグ情報テーブルＴの一例を示す。図７のタグ情報テーブルＴには、当該動画の撮影中に実行された３回のタッチ操作それぞれに関する第１～第３タグ情報が保持されている。具体的には、１回目のタッチ操作による第１タグ情報の情報として、日付情報「2021/04/01」および再生開始時刻の情報「13:37:19」が保持されている。また、２回目のタッチ操作による第２タグ情報の情報として、日付情報「2021/04/01」および再生開始時刻の情報「13:37:43」が保持されている。また、３回目のタッチ操作による第３タグ情報の情報として、日付情報「2021/04/01」および再生開始時刻の情報「13:37:58」が保持されている。また、第１～第３タグ情報の再生時間情報として、「10秒」が保持されている。タグ情報生成部２２３で生成されたタグ情報テーブルＴは、第１タグ情報記憶部２３に記憶される。

図５に示すように、タッチパネル２００には、タグ情報テーブルＴに格納された情報が、タグリスト情報２０２および再生条件情報２０３として表示される。

動画の撮影が終了した後、ハイスピードカメラ装置１０の動画データ送信部１４が、第１動画データ記憶部１２に記憶された動画データＸを動画再生装置３０に送信する（Ｓ５）。動画再生装置３０では、ハイスピードカメラ装置１０から送信された動画データＸを動画データ取得部３１１が取得し、第２動画データ記憶部３２１に記憶する（Ｓ６）。

また、タグ情報生成装置２０のタグ情報送信部２４が、第１タグ情報記憶部２３に記憶されたタグ情報テーブルＴを動画再生装置３０に送信する（Ｓ７）。動画再生装置３０では、タグ情報生成装置２０から送信されたタグ情報テーブルＴをタグ情報取得部３１２が取得し、第２タグ情報記憶部３２２に記憶する（Ｓ８）。

次に、再生開始位置算出部３１４が、第２タグ情報記憶部３２２に記憶したタグ情報テーブルＴ内のタグ情報ごとに再生開始位置情報を算出する。具体的には、再生開始位置算出部３１４は、当該動画データＸからメタデータとして付加されている第１フレームレートの情報および動画再生部３１３に予め設定されている第２フレームレートの情報を取得し、タグ情報ごとに、当該動画データＸの撮影開始時刻と該当するタグ情報で示される再生開始時刻との差分で示される第１時間t1に、第２フレームレートに対する第１フレームレートの比率を乗算した第２時間t2を再生開始位置情報として算出する。

例えば、再生開始位置算出部３１４は、第１タグ情報に関して、撮影開始時刻「13:37:09」からタグ情報の再生開始時刻「13:37:19」までの第１時間t1「10秒」に、第２フレームレート「60FPS」に対する第１フレームレート「240FPS」の比率「4」を乗算した第２時間t2「40秒」を、再生開始位置情報として算出する。

同様にして、再生開始位置算出部３１４は、第２タグ情報に関して、撮影開始時刻「13:37:09」からタグ情報の時刻「13:37:43」までの第１時間t1「34秒」に当該比率「4」を乗算した第２時間t2「136秒」を、再生開始位置情報として算出する。また、第３タグ情報に関して、撮影開始時刻「13:37:09」からタグ情報の時刻「13:37:58」までの第１時間t1「49秒」に当該比率「4」を乗算した第２時間t2「196秒」を、再生開始位置情報として算出する。図８に示すように、再生開始位置算出部３１４は、算出した各タグ情報の第１時間t1および第２時間t2（再生開始位置情報）を、タグ情報テーブルＴに追加して更新する（Ｓ９）。

このようにしてタグ情報テーブルＴが更新された後、ユーザが所望のタグ情報に基づく再生操作を行う場合について説明する。ユーザが動画再生装置３０で動画データＸの投球シーンの第１～第３タグ情報に基づく再生を指示する操作を行うと、第２操作情報取得部３１５が当該操作の情報を取得し、再生制御部３１７に送出する。

再生制御部３１７は、第２タグ情報記憶部３２２のタグ情報テーブルＴから、投球シーンに該当する第１タグ情報の再生開始位置情報「40秒」、第２タグ情報の再生開始位置情報「136秒」、第３タグ情報の再生開始位置情報「196秒」、および第１～第３タグ情報の再生時間情報「10秒」を取得する。

そして、再生制御部３１７は、取得した情報に基づいて動画再生部３１３に対し、図４に示す動画データＸの第１タグ情報に対応する部分動画データＸ1、第２タグ情報に対応する部分動画データＸ2、および第３タグ情報に対応する部分動画データＸ3の再生を指示する。

具体的には、第１タグ情報に対応する部分動画データＸ1は、動画データＸの先頭から再生時間が40秒経過した位置から撮影時間10秒間分の動画データである。また、第２タグ情報に対応する部分動画データＸ2は、動画データＸの先頭からの再生時間が136秒経過した位置から撮影時間10秒間分の動画データである。また、第３タグ情報に対応する部分動画データＸ3は、動画データＸの先頭からの再生時間が196秒経過した位置から撮影時間10秒間分の動画データである。

動画再生部３１３は、第２動画データ記憶部３２１に記憶された動画データＸから部分動画データＸ1、部分動画データＸ2、および部分動画データＸ3を切り出し、第２フレームレートでこれらの部分動画データを連続して表示部３３に再生させる。このように処理を行うことで、動画データＸ内の投球シーンのみが抽出され、連続して再生される。

以上の実施形態によれば、ハイスピードカメラ装置で撮影された動画データを、動画再生装置で撮影時とは異なるフレームレートで再生する際に、ハイスピードカメラ装置とは異なるタグ情報生成装置で生成したタグ情報に基づいて所望の位置から再生させることができる。

上述した実施形態においては、ハイスピードカメラ装置１０から動画再生装置３０に動画データを送信する際、およびタグ情報生成装置２０から動画再生装置３０にタグ情報を送信する際に、有線または無線通信により送信する場合について説明した。しかしこれには限定されず、ハイスピードカメラ装置１０で第１動画データ記憶部１２に記憶された動画データをＳＤカードやＵＳＢメモリ等の記録媒体に保存し、この記録媒体を動画再生装置３０に装着して動画データを移行させるようにしてもよい。この場合、ハイスピードカメラ装置１０は、動画データ送信部１４を有さない構成としてもよい。

同様に、タグ情報生成装置２０で第１タグ情報記憶部２３に記憶されたタグ情報を記録媒体に保存し、この記録媒体を動画再生装置３０に装着してタグ情報を移行させるようにしてもよい。この場合、タグ情報生成装置２０は、タグ情報送信部２４を有さない構成としてもよい。

また上述した実施形態において、タグ情報に基づいて動画データを再生させる際に、ユーザがタグ情報生成装置２０でタグ情報の生成を指示する操作を行ったタイミングよりも、数秒程度前から再生を開始したい場合がある。例えば、上述した実施形態のように野球の練習風景を撮影し、ピッチャーが投球するタイミングでユーザがスマートデバイスＳでタッチ操作を行う場合、図６に示すようにピッチャーが振りかぶったときに投球動作が開始したと認識してタッチ操作を行う。

しかし、このタッチ操作により生成されたタグ情報に基づいて動画データを再生する際には、ピッチャーが振りかぶる前から視聴したい場合がある。このような場合に対応するため、動画再生装置３０の再生開始位置算出部３１４が各タグ情報の再生開始位置を算出する際に、当該動画データＸの撮影開始時刻から該当するタグ情報で示される時刻までの第１時間t1を所定の第１調整時間（例えば2秒程度）分、短く算出するようにしてもよい。

この場合、再生開始位置算出部３１４は、ユーザがタグ情報生成装置２０または動画再生装置３０に入力した第１調整時間の情報を取得する。ユーザがタグ情報生成装置２０に第１調整時間の情報を入力した場合には、タグ情報生成装置２０は、タグ情報生成テーブルＴとともに第１調整時間の情報を動画再生装置３０に送信する。

そして、再生開始位置算出部３１４が、動画データＸの撮影開始時刻から該当するタグ情報で示される時刻までの時間から当該第１調整時間を差し引いた時間を第１時間t1とし、これに基づいて第２時間t2を算出する。この処理により、例えば図６のタグ情報テーブルＴに対し、図９に示すように第１時間t1が図８の場合よりも2秒少なく算出され、これに伴って第２時間t2の値が8秒小さく算出される。

このように算出された第２時間t2でタグ情報テーブルＴが更新されると、第１調整時間を考慮せずに再生する場合よりも考慮した場合の方が、各タグ情報の再生開始位置が、撮影時のフレームレートで2秒分前にずれる。図１０に、動画データＸ内で、撮影時のフレームレートにおいて第１調整時間を考慮しない場合の再生部分（ａ）、および、第１調整時間を考慮した場合の再生部分（ｂ）を示す。図１０の下部の数字は、動画データＸ内の該当する撮影時刻の秒単位を示す。

このように再生開始位置を調整することにより、各タグ情報で示される部分動画データが再生される際に、ピッチャーが振りかぶる前から再生を開始させることができる。この処理に用いる第１調整時間の情報は、ユーザの操作により適宜変更可能である。

また、再生開始位置算出部３１４が再生開始位置情報を算出した後に、ユーザが動画再生装置３０で再生開始位置を第２調整時間（例えば1秒）分、前後にずらず指示を入力することで、再生開始位置を調整するようにしてもよい。

この場合、ユーザが入力した指示の情報をタグ情報更新処理部３１６が取得し、第２タグ情報記憶部３２２に記憶されているタグ情報テーブルＴ内のタグ情報の第２時間の値を、指示された第２調整時間分増減させる。例えば、再生開始位置を第２調整時間分前にずらす場合には、第２時間を該当する時間分減らし、再生開始位置を第２調整時間分後にずらす場合には、第２時間を該当する時間分増やす。

このとき、タグ情報更新処理部３１６は、タグ情報テーブルＴ内のすべてのタグ情報に対して、第２時間を同じ値で増減させるため、複数のタグ情報の再生開始位置が、互いに相対的な時間間隔は同じ状態を保ちつつ、所定時間分、前後いずれかにずれる。

このように処理を行うことにより、ユーザがタグ情報に基づいて再生した動画データを視聴して、再生開始位置が所望の位置からずれていると認識したときに、タグ情報による再生開始位置を所望の位置まで前後にずらして調整することができる。

またタグ情報更新処理部３１６は、第２タグ情報記憶部３２２に記憶されたタグ情報テーブルＴに対し、ユーザにより新たなタグを追加する操作が行われると、当該操作に基づく新たなタグ情報を生成して当該タグ情報テーブルＴに追加する。

この場合、ユーザは新たなタグを追加する操作として、例えば、動画データＸを第２フレームレートで表示部３３に再生させ、これを視聴しながら動画再生装置３０において所望のタイミングで、当該操作のタイミングを新たな再生開始時刻として指定したタグ情報の生成を指示する操作を行う。タグ情報更新処理部３１６は、当該操作の情報を取得すると、再生中である動画データＸの再生開始時刻から、指定された再生開始時刻までの時間である第２時間の情報を取得し、取得した第２時間に基づく動画データＸ内の位置を再生開始位置とするタグ情報を生成して第２タグ情報記憶部３２２に記憶させる。このように処理を行うことで、既に生成され動画再生装置３０に記憶されたタグ情報テーブルＴに対して、後から新たなタグ情報を追加することができる。

また、上述した実施形態においては、ユーザの操作によりタグ情報を生成する場合について説明したが、これには限定されず、被写体の動きを検知するセンサ等により自動で所定のシーン、例えば投球動作のシーンを検出し、該当するシーンが検出されたタイミングを示す時刻情報に基づいてタグ情報生成装置２０がタグ情報を自動生成するようにしてもよい。

上述した実施形態においては、ハイスピードカメラ装置１０とタグ情報生成装置２０とがＮＴＰサーバ３から配信される時刻情報を取得して、ハイスピードカメラ装置１０とタグ情報生成装置２０との時刻情報の同期をとっている。時刻情報の同期をとる方法は、ＮＴＰサーバ３から配信される時刻情報を利用することに限定されない。ハイスピードカメラ装置１０およびタグ情報生成装置２０は、全地球航法衛星システム（Global Navigation Satellite System：ＧＮＳＳ）用の衛星からの電波を受信した電波に基づく時刻情報を取得してもよい。ＧＮＳＳは、一例としてＧＰＳ（Global Positioning System）である。

また、上述した動画再生装置３０の機能構成をプログラム化してコンピュータに組み込むことにより、当該コンピュータを動画再生装置３０として機能させる動画再生プログラムを構築することも可能である。

１ 動画処理システム
２ 通信ネットワーク
３ ＮＴＰ（Ｎｅｔｗｏｒｋ Ｔｉｍｅ Ｐｒｏｔｏｃｏｌ）サーバ
１０ ハイスピードカメラ装置
１１ 撮影部
１２ 第１動画データ記憶部
１３ カメラ制御部
１４ 動画データ送信部
２０ タグ情報生成装置
２１ ユーザインタフェース部
２２ 生成装置制御部
２３ 第１タグ情報記憶部
２４ タグ情報送信部
３０ 動画再生装置
３１ ＣＰＵ
３２ 記憶部
３３ 表示部
１３１ 第１時刻情報取得部
１３２ 開始時刻情報付加部
２００ タッチパネル
２０１ タグ入力ボタン
２０２ タグリスト情報
２０３ 再生条件情報
２２１ 第２時刻情報取得部
２２２ 第１操作情報取得部
２２３ タグ情報生成部
３１１ 動画データ取得部
３１２ タグ情報取得部
３１３ 動画再生部
３１４ 再生開始位置算出部
３１５ 第２操作情報取得部
３１６ タグ情報更新処理部
３１７ 再生制御部
３２１ 第２動画データ記憶部
３２２ 第２タグ情報記憶部

Claims (5)

1. 基準時刻に基づく撮影開始時刻の情報が付加されて第１フレームレートで生成された動画データを取得する動画データ取得部と、
   前記基準時刻に基づく前記動画データの再生開始時刻を含むタグ情報を取得するタグ情報取得部と、
   前記第１フレームレートと異なる第２フレームレートで前記動画データを再生する動画再生部と、
   前記撮影開始時刻と前記再生開始時刻との差分、及び前記第２フレームレートと前記第１フレームレートとの比に基づいて、前記タグ情報による前記動画データの再生開始位置を算出する再生開始位置算出部と、
   前記タグ情報による前記動画データの再生が指示されると、前記動画再生部により前記動画データを、前記再生開始位置から前記第２フレームレートで再生させる再生制御部と
   を備えることを特徴とする動画再生装置。
2. 前記再生開始位置を調整するための情報を取得すると、取得した情報に基づいて前記再生開始位置の情報を更新するタグ情報更新処理部をさらに備える
   ことを特徴とする請求項１に記載の動画再生装置。
3. 前記タグ情報更新処理部は、前記動画データを前記第２フレームレートで再生中に、前記動画データの新たな再生開始時刻が指定されると、再生中である前記動画データの再生開始時刻から、指定された新たな再生開始時刻までの再生時間の情報を取得し、取得した前記再生時間に基づく前記動画データ内の位置を再生開始位置とするタグ情報を生成する
   ことを特徴とする請求項２に記載の動画再生装置。
4. 撮像装置が、基準時刻に基づく撮影開始時刻の情報が付加された動画データを第１フレームレートで生成して記録し、
   タグ情報生成装置が、前記基準時刻に基づく前記動画データの再生開始時刻を含むタグ情報を記憶し、
   前記第１フレームレートと異なる第２フレームレートで動画データを再生する動画再生装置が、前記動画データおよび前記タグ情報を取得し、前記撮影開始時刻と前記再生開始時刻との差分、及び前記第２フレームレートと前記第１フレームレートとの比とに基づいて、前記タグ情報による前記動画データの再生開始位置を算出し、前記タグ情報による前記動画データの再生が指示されると、前記動画データを、算出した前記再生開始位置から前記第２フレームレートで再生する
   動画記録再生方法。
5. コンピュータに、
   基準時刻に基づく撮影開始時刻の情報が付加され第１フレームレートで生成された動画データを取得する機能と、
   前記基準時刻に基づく前記動画データの再生開始時刻を含むタグ情報を取得する機能と、
   前記第１フレームレートと異なる第２フレームレートで前記動画データを再生する機能と、
   前記撮影開始時刻と前記再生開始時刻との差分、及び前記第２フレームレートと前記第１フレームレートとの比に基づいて、前記タグ情報による前記動画データの再生開始位置を算出する機能と、
   前記タグ情報による前記動画データの再生が指示されると、前記動画データを、前記再生開始位置から前記第２フレームレートで再生させる機能と
   を実現させるための動画再生プログラム。

Images