JP2016015582A - 映像品質制御システム、映像再生装置、プログラム、記録媒体及び映像品質制御方法 - Google Patents

Abstract

【課題】所定の条件を満たす場合に映像データの伝送品質の変更を要求することで、映像データの再生時のリアルタイム性を劣化させることなく遅延時間の拡大を抑制する。【解決手段】カメラ装置は、映像の撮像毎に、映像データの再生に関する時刻情報を含む映像データを生成する映像データ生成部と、映像データ生成部により生成された映像データを映像再生装置に送信する映像データ送信部と、を有する。映像再生装置は、初回の映像データに含まれる時刻情報と２回目以降の映像データに含まれる時刻情報とを用いて、映像データの再生に関する遅延時間情報を算出する遅延時間算出部と、遅延時間算出部により算出された遅延時間情報が所定の閾値を超えた場合に、映像データの伝送品質を下げる伝送品質変更要求をカメラ装置に送信する品質変更要求部と、を有する。【選択図】図１

Description

本発明は、撮像された映像の品質制御に供する映像品質制御システム、映像再生装置、プログラム、記録媒体及び映像品質制御方法に関する。

近年、ユーザに装着された状態で使用され、ユーザの周囲の状況の映像を撮像し撮像により得られた画像データを無線で外部に送信する携帯端末（ウェアラブル端末）が知られている。このようなウェアラブル端末は、プライベートユースとして使用されることもあるが、ビジネスユースとして使用されることもある。

例えば複数の作業員が通信環境（インフラ）が十分に整備されていない現場に出向き、それぞれのウェアラブル端末を個々に装着して映像を撮像して画像データを送信する。現場への移動車に残った管理者は、各ウェアラブル端末から送信された画像データを確認しながら、各作業員に対して各種の指示を出すシーンが該当する。

また、映像のリアルタイムストリーミング技術が進歩している現在、上述したウェアラブル端末においても、同端末からストリーミングされる映像の画像データは高画質化、高解像度化されている。このような高画質で高解像度な画像データを再生する際、映像再生装置の性能がロースペックであると、例えば画像データの再生時に遅延時間が徐々に拡大したり、オーバーフローにより画像データの一部が欠落したり間引かれたりすることがある。

ここで、双方向映像コミュニケーションシステムにおいて映像の品質を制御してサービスの継続を可能とする先行技術として、例えば特許文献１に示す双方向映像コミュニケーションシステムにおけるフィードバック品質制御方法が知られている。

特許文献１に示す方法では、送信側端末は、送信ビットレート、送信フレームレート、送信パケットサイズの送信パラメータを設定し、受信ビットレート、受信フレームレート、受信パケットサイズの受信パラメータを監視する。送信側端末は、受信側端末にプローブを送信し、送信パラメータとプローブの応答により得られた受信パラメータとを用いて、ネットワーク帯域、パケット損失率、パケット応答時間のうち１つ以上を算出し、これらの情報が予め設定された許容変動値を超えた場合に、送信パラメータを再設定する。これにより、特許文献１に示す方法によれば、ネットワークの状態が劣悪な状態に変化した場合には、送信側端末は、送信パラメータ、つまり映像データの設定品質を下げることで、双方向映像コミュニケーションのサービスを継続することができる。

特開２００５−２１７６９７号公報

特許文献１において、パケット損失率やパケット応答時間が低下する場合、送信側端末と受信側端末との間をつなぐネットワークの状態が劣悪になったことに起因することが考えられる。

ここで、特許文献１の構成を上述した現場の作業員が装着するウェアラブル端末と管理者が使用する端末（例えばＰＣ（Personal Computer））とに適用しても、例えば送信側端末から送信された画像データを受信側端末において再生する際に遅延時間が徐々に拡大する場合、ネットワークの状態が劣悪になっているからか、又は受信側端末の性能が低いからかを適正に識別することが困難である。

このため、特許文献１では、受信側端末の画像データの再生処理時に遅延時間が徐々に拡大する場合、送信側端末が送信パラメータ、つまり映像データの設定品質を下げてネットワークの状態が改善されたとしても、受信側端末の性能が低い場合には遅延時間の拡大を抑制することは困難であるという課題があった。

本発明は、上述した従来の課題を解決するために、所定の条件を満たす場合に画像データの伝送品質の変更を要求することで、画像データの再生時のリアルタイム性を劣化させることなく遅延時間の拡大を抑制する映像品質制御システム、映像再生装置、プログラム、記録媒体及び映像品質制御方法を提供することを目的とする。

本発明は、映像を撮像するカメラ装置と、前記カメラ装置により撮像された映像データを再生する映像再生装置とを含む映像品質制御システムであって、前記カメラ装置は、前記映像の撮像毎に、前記映像データの再生に関する時刻情報を含む前記映像データを生成する映像データ生成部と、前記映像データ生成部により生成された前記映像データを前記映像再生装置に送信する映像データ送信部と、を有し、前記映像再生装置は、初回の前記映像データに含まれる前記時刻情報と２回目以降の前記映像データに含まれる前記時刻情報とを用いて、前記映像データの再生に関する遅延時間情報を算出する遅延時間算出部と、前記遅延時間算出部により算出された前記遅延時間情報が所定の閾値を超えた場合に、前記映像データの伝送品質を下げる伝送品質変更要求を前記カメラ装置に送信する品質変更要求部と、を有する、映像品質制御システムである。

また、本発明は、カメラ装置により撮像された映像データを再生する映像再生装置であって、前記映像の撮像毎に、前記映像データの再生に関する時刻情報を含む前記映像データを受信する映像データ受信部と、初回の前記映像データに含まれる前記時刻情報と２回目以降の前記映像データに含まれる前記時刻情報とを用いて、前記映像データの再生に関する遅延時間情報を算出する遅延時間算出部と、前記遅延時間算出部により算出された前記遅延時間情報が所定の閾値を超えた場合に、前記映像データの伝送品質を下げる伝送品質変更要求を前記カメラ装置に送信する品質変更要求部と、を有する、映像再生装置である。

また、本発明は、カメラ装置により撮像された映像データを再生するコンピュータである映像再生装置に、前記映像の撮像毎に、前記映像データの再生に関する時刻情報を含む前記映像データを受信するステップと、初回の前記映像データに含まれる前記時刻情報と２回目以降の前記映像データに含まれる前記時刻情報とを用いて、前記映像データの再生に関する遅延時間情報を算出するステップと、前記遅延時間算出部により算出された前記遅延時間情報が所定の閾値を超えた場合に、前記映像データの伝送品質を下げる伝送品質変更要求を前記カメラ装置に送信するステップと、を実行させるための、プログラムである。

また、本発明は、カメラ装置により撮像された映像データを再生するコンピュータである映像再生装置に、前記映像の撮像毎に、前記映像データの再生に関する時刻情報を含む前記映像データを受信するステップと、初回の前記映像データに含まれる前記時刻情報と２回目以降の前記映像データに含まれる前記時刻情報とを用いて、前記映像データの再生に関する遅延時間情報を算出するステップと、前記遅延時間算出部により算出された前記遅延時間情報が所定の閾値を超えた場合に、前記映像データの伝送品質を下げる伝送品質変更要求を前記カメラ装置に送信するステップと、を実行させるためのプログラムを格納する、記録媒体である。

更に、本発明は、映像を撮像するカメラ装置と、前記カメラ装置により撮像された映像データを再生する映像再生装置とを含む映像品質制御システムにおける映像品質制御方法であって、前記カメラ装置は、前記映像の撮像毎に、前記映像データの再生に関する時刻情報を含む前記映像データを生成し、生成された前記映像データを前記映像再生装置に送信し、前記映像再生装置は、初回の前記映像データに含まれる前記時刻情報と２回目以降の前記映像データに含まれる前記時刻情報とを用いて、前記映像データの再生に関する遅延時間情報を算出し、算出された前記遅延時間情報が所定の閾値を超えた場合に、前記映像データの伝送品質を下げる伝送品質変更要求を前記カメラ装置に送信する、映像品質制御方法である。

本発明によれば、所定の条件を満たす場合に映像データの伝送品質の変更を要求することで、映像データの再生時のリアルタイム性を劣化させることなく遅延時間の拡大を抑制することができる。

本実施形態の映像品質制御システムのシステム構成を詳細に示すブロック図 遅延時間算出テーブルの一例を示す図 本実施形態のカメラ装置と映像再生装置との間の映像データの伝送品質変更要求の送信に関する動作手順を簡易に説明するシーケンス図 （Ａ）映像データの符号化データのパケット構成例を示す図、（Ｂ）ＩＰヘッダの構成例を示す図、（Ｃ）ＵＤＰヘッダの構成例を示す図 ＲＴＰヘッダの構成例を示す図 （Ａ）伝送品質変更要求のパケット構成例を示す図、（Ｂ）ＲＴＣＰのＡＰＰデータの構成例を示す図 （Ａ）伝送品質変更要求の他のパケット構成例を示す図、（Ｂ）ＲＴＣＰのＲＲデータの構成例を示す図 本実施形態の映像再生装置の詳細な動作手順の一例を説明するフローチャート 本実施形態のカメラ装置の詳細な動作手順の一例を説明するフローチャート （Ａ）ネットワークの外乱によって遅延時間Δｔを算出するための基準値（システム時刻）に誤差が生じる例の説明図、（Ｂ）複数のトライアルパケットの到着時刻の平均値を用いて基準値（システム時刻、タイムスタンプ）を算出する例の説明図 （Ａ）本実施形態のカメラ装置における映像データの伝送品質変更の第１のバリエーションを説明するフローチャート、（Ｂ）本実施形態のカメラ装置における映像データの伝送品質変更の第２のバリエーションを説明するフローチャート （Ａ）複数のカメラ装置から送信された映像データが表示されたモニタの表示画面における表示例を示す図、（Ｂ）本実施形態の映像再生装置における、複数のカメラ装置から送信された映像データがモニタに表示された場合の各映像データの伝送品質変更又は送信停止の要求に関する動作手順を詳細に説明するフローチャート

以下、本発明に係る映像品質制御システム、映像再生装置、プログラム、記録媒体及び映像品質制御方法の実施形態（以下、「本実施形態」という）について、図面を参照して説明する。なお、本発明に係るプログラムは、コンピュータである映像再生装置に、本発明に係る映像再生装置の行う処理を実行させるためのプログラムである。また、本発明に係る記録媒体は、コンピュータである映像再生装置に、本発明に係る映像再生装置の行う処理を実行させるためのプログラムが格納されたコンピュータ読み取り可能な記録媒体である。

本実施形態の映像品質制御システムは、後述するカメラ装置と映像再生装置とを含む構成である。カメラ装置は、例えばユーザが首に吊り下げて携帯し、電源がオンしている間に周囲の映像を記録可能なウェアラブルカメラ、又は自転車やボート等の乗り物に装着されるアクションカメラとして用いられる。また、本実施形態のカメラ装置は、移動体（例えば車両）に搭載された車載カメラとして使用されても良い。

図１は、本実施形態の映像品質制御システム５０のシステム構成を詳細に示すブロック図である。図１に示す映像品質制御システム５０は、カメラ装置１０と、映像再生装置２０とを含む構成である。カメラ装置１０と映像再生装置２０とは、ネットワークＮＷを介して相互に接続されている。

なお、ネットワークＮＷは、無線ネットワーク又は有線ネットワークである。無線ネットワークは、例えばＮＦＣ（Near Field Communication）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＩｒＤＡ、無線ＬＡＮ（Local Area Network）、３Ｇ、ＬＴＥ（Long Term Evolution）又はＷｉＧｉｇである。有線ネットワークは、例えばイントラネット又はインターネットである。

本実施形態の映像品質制御システム５０は、例えば緊急性を要する監視又は指示を必要とする作業現場（例えば消防隊員が出向く火災現場）で、作業員がカメラ装置をそれぞれ装着し、カメラ装置により撮像された映像を、監視指示者（管理者）が使用する映像再生装置２０において確認するシーンが該当する。

また、本実施形態の映像品質制御システム５０は、例えばカメラ装置１０が宅内又は宅外に設定された監視カメラであって、監視カメラの保守点検作業に出向いた作業員が画角を調整し、作業員を指示する管理者が使用する映像再生装置２０において画角の調整結果を確認するシーンが該当する。これらの各シーンでは、いずれにしてもカメラ装置１０における撮像により得られた映像データがリアルタイム、即ち低遅延で映像再生装置２０において表示（再生）される必要がある点で共通する。

（カメラ装置）
カメラ装置１０は、レンズＬＳと、画像入力部１１と、符号化品質制御部１３と、画像符号化部１５と、符号化データ送信部１７と、遅延時間受信部１９とを含む構成である。なお、本実施形態の映像品質制御システム５０において、カメラ装置１０の代わりに、映像を構成するそれぞれの画像データ（以下、単に「映像データ」という）を有し、映像再生装置２０からの伝送品質変更要求（後述参照）に応じて、映像データの伝送品質を変更処理可能な電子機器でも良い。

レンズＬＳは、カメラ装置１０の外部から入射する光（光線）を集光し、画像入力部１１の所定の撮像面に結像させる。レンズＬＳには、魚眼レンズ、又は例えば１４０度以上の画角が得られる広角レンズが用いられる。

画像入力部１１は、例えばＣＣＤ（Charged-Coupled Device）又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）の固体撮像素子であり、撮像面に結像した光学像を電気信号に変換する。また、画像入力部１１は、電気信号を用いて、人が認識可能なＲＧＢ（Red Green Blue）又はＹＵＶ（輝度・色差）等により規定される映像データのフレームを生成して符号化品質制御部１３に出力する。

符号化品質制御部１３は、画像入力部１１から出力された映像データのフレームを画像符号化部１５に出力し、更に、遅延時間受信部１９から出力された遅延時間Δｔに関する情報（以下、単に「遅延時間情報」という）を基に、映像再生装置２０に向けて送信（伝送）される映像データのフレームの映像品質（以下、「伝送品質」という）を決定する。伝送品質には、例えば符号量、映像を構成する画像の画像解像度及びフレームレートのうち少なくとも１つが含まれる。

例えば符号量を削減することで、単位時間内に処理するビットストリーム量（データ量）を削減することができ、映像再生装置２０における処理負荷を軽減できる。

また例えば画像解像度を削減することで、映像データを構成する画像データを表示（描画）するための演算量を削減することができ、映像再生装置２０における処理負荷を軽減できる。

また例えばフレームレートを削減することで、１フレームあたりの処理オーバーヘッドを削減することができ、映像再生装置２０における処理負荷を軽減できる。

符号化品質制御部１３は、遅延時間情報と伝送品質との対応関係を示すテーブル（不図示）を内部に有し、遅延時間情報に対応する伝送品質を決定する。例えば、符号化品質制御部１３は、遅延時間Δｔが５００ｍｓｅｃを超えると、直前又は現在の映像データの符号量から３／４（＝７５％）倍の符号量に削減する。また、符号化品質制御部１３は、直前の映像データの符号量を３／４（＝７５％）倍の符号量に削減しても遅延時間Δｔが５００ｍｓｅｃを超えると、例えば符号量の初期値の５０％以下である場合には、映像データを構成する画像データの解像度を１／４倍（例えばＳＸＶＧＡ（Super eXtended Video Graphics Array）→ＶＧＡ（Video Graphics Array））に削減する。

符号化品質制御部１３は、遅延時間情報に応じて決定した伝送品質に関する情報（以下、「伝送品質情報」という）を画像符号化部１５に出力し、画像入力部１１により生成された映像データのフレームの伝送品質の変更を指示する。

映像データ生成部の一例としての画像符号化部１５は、符号化品質制御部１３から出力された映像データと伝送品質情報とタイムスタンプとを用いて、映像データの保存及び送信が可能なデータフォーマット（後述参照）に変換するための符号化データを生成して符号化データ送信部１７に出力する。符号化データには、例えば９０ｋＨｚ刻みのタイムスタンプが格納される（図５参照）。本実施形態のタイムスタンプは、映像再生装置２０において実際に再生処理が行われる時刻を示す時刻情報として説明するが、例えばカメラ装置１０において映像データの撮像が行われた時刻を示す時刻情報でも良いし、映像データの符号化データが生成された時刻を示す時刻情報でも良い。

映像データ送信部の一例としての符号化データ送信部１７は、画像符号化部１５により生成された映像データの符号化データを用いて、例えば送信先である映像再生装置２０に送信するためのパケット生成処理を行い、映像データの符号化データのパケットを映像再生装置２０に送信する。

遅延時間受信部１９は、映像再生装置２０において算出された遅延時間Δｔに関する遅延時間情報を含む伝送品質変更要求（後述参照）を、ネットワークＮＷを介して映像再生装置２０から受信する。

（映像再生装置）
映像再生装置２０は、符号化データ受信部２１と、遅延時間算出部２３と、画像復号部２５と、画像表示部２７と、遅延時間送信部２９と、モニタ３１と、システム時刻カウンタＣＴとを含む構成である。時刻情報取得部の一例としてのシステム時刻カウンタＣＴは、例えば９０ｋＨｚ刻みで映像再生装置２０のシステム時刻をカウントする。

映像データ受信部の一例としての符号化データ受信部２１は、カメラ装置１０から送信された映像データの符号化データを、ネットワークＮＷを介して受信して遅延時間算出部２３に出力する。

遅延時間算出部２３は、符号化データ受信部２１から出力された映像データの符号化データに含まれるタイムスタンプと、システム時刻カウンタＣＴのカウント出力（即ち、映像再生装置２０のシステム時刻）とを用いて、映像データの再生に関する遅延時間Δｔを算出する。遅延時間Δｔは、映像再生装置２０において表示（再生）されるべき時刻（タイムスタンプに対応）と実際に映像再生装置２０において表示（再生）された時刻（システム時刻に対応）との時間差を示す。

ここで、遅延時間算出部２３における遅延時間Δｔの算出例について、図２を参照して説明する。図２は、遅延時間算出テーブルＴＢ１の一例を示す図である。図２に示す遅延時間算出テーブルＴＢ１は、例えば遅延時間算出部２３が遅延時間Δｔを算出する際に、メモリ（例えばＲＡＭ（Random Access Memory））に展開されるデータである。

図２に示す遅延時間算出テーブルＴＢ１は、映像データのフレームの番号を示すフレーム番号（フレームＮｏ）と、システム時刻（９０ｋＨｚ刻み）と、タイムスタンプ（９０ｋＨｚ刻み）と、システム時刻とタイムスタンプとの差分結果に対応するΔｔと、差分結果がミリ秒単位に換算されたΔｔとを含む構成である。なお、タイムスタンプは、例えばＲＦＣ（Request For Comment）に準拠したＲＴＰ（Real-time Transport Protocol）プロトコルのタイムスタンプに格納される値が用いられる。

遅延時間算出部２３は、映像データの符号化データを画像復号部２５に出力し、更に、例えば映像再生装置２０に最初に受信された初回の映像データの符号化データに含まれるタイムスタンプをタイムスタンプの基準値として用い、更に、初回の映像データの符号化データが実際にモニタ３１において表示されるシステム時刻をシステム時刻の基準値として用いる。遅延時間算出部２３は、タイムスタンプ及びシステム時刻の各基準値を用いて、遅延時間Δを、「｛（現在のタイムスタンプ）−（タイムスタンプの基準値）｝−｛（現在のシステム時刻）−（システム時刻の基準値）｝」と算出する。

図２では、遅延時間算出部２３は、「｛（フレーム番号２のタイムスタンプ）−（フレーム番号１のタイムスタンプ）｝−｛（フレーム番号２のシステム時刻）−（フレーム番号１のシステム時刻）｝」によって、フレーム番号２の映像データの再生に関する遅延時間Δｔを算出する。フレーム番号２の映像データの再生に関する遅延時間Δｔは、０．３３［ｍｓｅｃ］となる。

同様にして、フレーム番号１２０５の映像データの再生に関する遅延時間Δｔは、５００［ｍｓｅｃ］となり、フレーム番号１２０６の映像データの再生に関する遅延時間Δｔは、４４４［ｍｓｅｃ］となり、フレーム番号１２０７の映像データの再生に関する遅延時間Δｔは、３８９［ｍｓｅｃ］となる。

遅延時間算出部２３は、遅延時間Δｔが所定の閾値（例えば５００［ｍｓｅｃ］）を超えた場合に、映像データの再生に関する遅延時間Δｔが大きいので映像データの伝送品質を下げるための伝送品質変更要求を生成して遅延時間送信部２９に出力する。なお、伝送品質変更要求には、遅延時間算出部２３により算出された遅延時間Δｔが含まれる。

画像復号部２５は、遅延時間算出部２３から出力された映像データの符号化データを復号して符号化前の映像データを取得して画像表示部２７に出力する。

画像表示部２７は、画像復号部２５により復号された映像データをモニタ３１に表示させる。

伝送品質変更要求部の一例としての遅延時間送信部２９は、遅延時間算出部２３により算出された遅延時間Δｔを含む伝送品質変更要求を生成し、ネットワークＮＷを介してカメラ装置１０に送信する。伝送品質変更要求は、映像データの現在の伝送品質を下げるための変更要求である。後述するように、伝送品質変更要求には、遅延時間Δｔが格納される。

モニタ３１は、例えばＬＣＤ（Liquid Crystal Display）又は有機ＥＬ（Electroluminescence）を用いて構成され、画像表示部２７から出力された表示対象の映像データを表示（再生）する。なお、モニタ３１は、映像再生装置２０の内部に含まれる構成としているが、映像再生装置２０とは異なる外部装置として設けられても良い。

（映像品質制御システムの動作概要を示すシーケンス）
次に、本実施形態の映像品質制御システム５０の動作概要について、図３を参照して説明する。図３は、本実施形態のカメラ装置１０と映像再生装置２０との間の映像データの伝送品質変更要求の送信に関する動作手順を簡易に説明するシーケンス図である。

図３において、例えばユーザの入力操作が入力された場合又は予め設定された定期的なタイミングが到来した場合には、映像再生装置２０は、映像データの送信開始をカメラ装置１０に指示する（Ｓ１）。カメラ装置１０は、映像再生装置２０から映像データの送信開始の指示を受信すると、映像を撮像する度に、例えばＲＴＰプロトコルを用いて映像データの符号化データのパケット（図４（Ａ）参照）を生成して映像再生装置２０に送信する（Ｓ２）。

図４（Ａ）は、映像データの符号化データのパケット構成例を示す図である。図４（Ａ）に示す映像データの符号化データは、ＩＰ（Internet Protocol）ヘッダ（図４（Ｂ）参照）と、ＵＤＰ（User Datagram Protocol）ヘッダ（図４（Ｃ）参照）と、ＲＴＰヘッダ（図５参照）と、ペイロード（即ち映像データの符号化データ）とを含む構成である。なお、ＲＴＰヘッダとペイロードとにより、ＵＤＰヘッダに対するＵＤＰペイロードが構成される。

図４（Ｂ）は、ＩＰヘッダの構成例を示す図である。図４（Ｃ）は、ＵＤＰヘッダの構成例を示す図である。ＩＰヘッダ及びＵＤＰヘッダのパケット構成例は公知技術であるため詳細な説明は省略する。

図４（Ｂ）に示すＩＰヘッダには、映像データの符号化データのパケットの送受信に必要な送信元ＩＰアドレス、送信先（宛先）ＩＰアドレス、上位層（例えばアプリケーション層）から渡されたデータや上位のプロトコルタイプ、及びＩＰルーティング処理を実行するために必要な各種の情報が格納されている。

また、図４（Ｃ）に示すＵＤＰヘッダには、送信元ポート番号及び送信先（宛先）ポート番号が格納されており、ＵＤＰヘッダは、どの上位層のアプリケーションから送られたＵＤＰパケットであるかを識別し、正しい送信先（宛先）アプリケーションに届けるための機能を有する。

図５は、ＲＴＰヘッダの構成例を示す図である。ＲＴＰヘッダのパケット構成例は公知技術であるため詳細な説明は省略する。

図５に示すＲＴＰヘッダには、映像データの符号化データの送信（転送）をリアルタイムに行うために必要な各種の情報が格納されており、カメラ装置１０により付加されるタイムスタンプ（３２ビット）が格納される。なお、映像再生装置２０は、ＲＴＰヘッダに格納されたタイムスタンプを用いて、カメラ装置１０との間で同期を図ることができる。

図３の説明に戻って、映像再生装置２０は、ステップＳ２において送信された初回の映像データの符号化データを受信した場合に、符号化データに格納されているタイムスタンプを「タイムスタンプの基準値」として保持し、更に、符号化データを復号した映像データをモニタ３１に表示させたときのシステム時刻を「システム時刻の基準値」として保持する（Ｓ３）。

映像再生装置２０は、カメラ装置１０が送信した２回目の映像データの符号化データを受信すると（Ｓ４）、２回目の映像データの符号化データを復号して得られた映像データの再生に関する遅延時間Δｔを算出する（Ｓ５）。遅延時間Δｔの算出例については上述したのでここでは説明を省略する。同様に、映像再生装置２０は、２回目以降の映像データの符号化データを受信すると（Ｓ５，Ｓ６，Ｓ７）、同様にして各映像データの再生に関する遅延時間Δｔを算出する。

ここで、映像再生装置２０が算出した遅延時間Δｔが所定の閾値（例えば５００［ｍｓｅｃ］）を超えた場合には（Ｓ８）、映像再生装置２０は、映像データの伝送品質を下げるための伝送品質変更要求（図６（Ａ）又は図７（Ａ）参照）を生成してカメラ装置１０に送信する（Ｓ９）。

図６（Ａ）は、伝送品質変更要求のパケット構成例を示す図である。映像再生装置２０の遅延時間送信部２９は、例えばＲＦＣに準拠したＲＴＣＰのＡＰＰ（Application Defined）プロトコルを参照して、伝送品質変更要求を生成する。図６（Ａ）に示す伝送品質変更要求は、ＩＰヘッダと、ＵＤＰヘッダと、ＲＴＣＰ ＡＰＰデータとを含む構成である。ＲＴＣＰ ＡＰＰデータの元となるＲＴＣＰ ＡＰＰプロトコルは公知技術であるため、詳細な説明は省略する。

図６（Ｂ）は、ＲＴＣＰのＡＰＰデータの構成例を示す図である。ＲＴＣＰのＡＰＰプロトコルにおけるアプリケーション定義データ（３２ビット）は、ユーザが定義したフォーマットで必要なデータを格納することができるフィールドであり、サイズも３２ビットに限定されない。遅延時間送信部２９は、アプリケーション定義データ（３２ビット）のフィールドに遅延時間Δｔに関するデータを格納し、伝送品質変更要求をカメラ装置１０に送信する。また、伝送品質変更要求のパケット構成例は、ＲＴＣＰのＡＰＰプロトコルに限定されず、例えば図７（Ａ）に示すＲＴＣＰのＲＲプロトコルを用いても良い。

図７（Ａ）は、伝送品質変更要求の他のパケット構成例を示す図である。映像再生装置２０の遅延時間送信部２９は、例えばＲＦＣに準拠したＲＴＣＰのＲＲ（Receiver Report）プロトコルを参照して、伝送品質変更要求を生成する。図７（Ａ）に示す伝送品質変更要求は、ＩＰヘッダと、ＵＤＰヘッダと、ＲＴＣＰ ＲＲデータとを含む構成である。ＲＴＣＰ ＲＲデータの元となるＲＴＣＰ ＲＲプロトコルは公知技術であるため、詳細な説明は省略する。

図７（Ｂ）は、ＲＴＣＰのＲＲデータの構成例を示す図である。ＲＴＣＰのＲＲプロトコルは、パケット欠落率や累積欠落パケット数など、受信側のカメラ装置１０から送信側の映像再生装置２０への通信状態のレポートを示す各種のパラメータが格納される。遅延時間送信部２９は、ＲＴＣＰのＲＲプロトコルにおけるパケット間隔ジッタ（３２ビット）のフィールドに遅延時間Δｔに関するデータを格納し、伝送品質変更要求をカメラ装置１０に送信する。

図３の説明に戻って、カメラ装置１０は、ステップＳ９において映像再生装置２０から送信された伝送品質変更要求を受信すると、ＲＴＣＰのＲＲプロトコルにおけるパケット間隔ジッタのフィールドに格納された遅延時間Δを取得し、現在の映像データの伝送品質から、遅延時間Δｔに対応する映像データの伝送品質に変更する（Ｓ１０）。カメラ装置１０は、ステップＳ１０において変更された後の映像データの伝送品質を用いて符号化した映像データの符号化データ（伝送品質変更後映像データ）を映像再生装置２０に送信する（Ｓ１１，Ｓ１２）。

（映像再生装置の動作）
次に、本実施形態の映像品質制御システム５０を構成する映像再生装置２０の動作手順について、図８を参照して説明する。図８は、本実施形態の映像再生装置２０の詳細な動作手順の一例を説明するフローチャートである。図８では、映像再生装置２０は、ステップＳ２２〜ステップＳ２５までの処理を映像データの１フレーム毎に行う。

図８において、映像再生装置２０は、初回の映像データの符号化データの受信を開始した後、符号化データに格納されているタイムスタンプを「タイムスタンプの基準値」として保持し、更に、符号化データを復号した映像データをモニタ３１に表示させたときのシステム時刻を「システム時刻の基準値」として保持する（Ｓ２１）。

映像再生装置２０は、２回目以降の映像データの符号化データを受信し（Ｓ２２）、「タイムスタンプの基準値」及び「システム時刻の基準値」と、２回目以降の映像データの符号化データに含まれるタイムスタンプと、２回目以降の映像データの符号化データを復号した映像データをモニタ３１に表示（再生）させたときのシステム時刻とを用いて、２回目の映像データの符号化データを復号して得られた映像データの再生に関する遅延時間Δｔを算出する（Ｓ２３）。

映像再生装置２０は、ステップＳ２３において算出された遅延時間Δｔが所定の閾値（例えば５００［ｍｓｅｃ］）以上であると判定した場合には（Ｓ２４、ＹＥＳ）、映像データの伝送品質を下げるための伝送品質変更要求を生成してカメラ装置１０に送信する（Ｓ２５）。なお、映像再生装置２０は、ステップＳ２３において算出された遅延時間Δｔが所定の閾値（例えば５００［ｍｓｅｃ］）未満であると判定した場合には（Ｓ２４、ＮＯ）、現在の映像データの符号化データの再生に関する遅延時間Δｔの演算を省略する。

（カメラ装置の動作）
次に、本実施形態の映像品質制御システム５０を構成するカメラ装置１０の動作手順について、図９を参照して説明する。図９は、本実施形態のカメラ装置１０の詳細な動作手順の一例を説明するフローチャートである。図９では、カメラ装置１０は、ステップＳ３１〜ステップＳ３５までの処理を映像データの１フレーム毎に行う。

図９において、カメラ装置１０は、初回の映像データの符号化データの送信を開始した後、映像の撮像の度に、映像データの符号化データを映像再生装置２０に送信する（Ｓ３１）。カメラ装置１０は、遅延時間Δｔを含む伝送品質変更要求を受信した場合には（Ｓ３２、ＹＥＳ）、例えば直前又は現在の映像データの符号量から３／４倍（７５％）の符号量に削減（変更）する（Ｓ３３）。

更に、カメラ装置１０は、ステップＳ３３において削減（変更）された後の符号量が符号量の初期値の１／２（＝５０％）以下であるか否かを判定する（Ｓ３４）。伝送品質変更要求が受信されていない場合（Ｓ３２、ＮＯ）、又はステップＳ３３において削減（変更）された後の符号量が符号量の初期値の１／２以下ではないと判定された場合（Ｓ３４、ＮＯ）、カメラ装置１０は、映像データの伝送品質の変更を省略し、現在の伝送品質を維持して映像データを符号化する。

一方、カメラ装置１０は、ステップＳ３３において削減（変更）された後の符号量が符号量の初期値の１／２以下であると判定した場合（Ｓ３４、ＹＥＳ）、映像データを構成する画像データの解像度を１／４（＝２５％）倍に削減（変更）する（Ｓ３５）。

以上により、本実施形態の映像品質制御システム５０では、カメラ装置１０は、映像を撮像する度に、映像データの再生に関する時刻情報（タイムスタンプ）を含む映像データの符号化データを生成して映像再生装置２０に送信する。映像再生装置２０は、初回の映像データに含まれる時刻情報（タイムスタンプの基準値）と２回目以降の映像データに含まれる時刻情報（タイムスタンプ）とを用いて、映像データの再生に関する遅延時間Δｔを算出し、遅延時間Δｔが所定の閾値（例えば５００［ｍｓｅｃ］）を超えた場合に、映像データの伝送品質を下げる伝送品質変更要求をカメラ装置１０に送信する。

これにより、映像品質制御システム５０は、カメラ装置１０において映像が撮像される度に送信されて映像再生装置２０において再生される映像データの遅延時間Δｔが所定の閾値を超えると、所定の条件を満たしたとして、現在の映像データの伝送品質を下げる変更をカメラ装置１０に要求するので、映像データの再生時のリアルタイム性（即ち、カメラ装置１０の撮像により得られた映像データをリアルタイムに再生して、再生時に所定の閾値を超える大きな遅延時間を生じさせずに映像の内容を確認できること）を劣化させることなく、カメラ装置１０から送信される映像データの再生に関する遅延時間の拡大を抑制することができる。

また、本実施形態の映像品質制御システム５０は、カメラ装置１０が伝送品質変更要求を受信すると、例えば撮像により得られた映像データの符号量、解像度及びフレームレートのうち少なくとも１つを変更した伝送品質変更後映像データを生成するので、伝送品質変更後映像データが映像再生装置２０において再生される場合の遅延時間情報を低減することができる。

また、本実施形態の映像品質制御システム５０は、初回の映像データが映像再生装置２０により受信された場合に取得された映像再生装置２０のシステム時刻（基準値）と、２回目以降の映像データが映像再生装置２０により受信された場合に取得された映像再生装置２０のシステム時刻（実測値）とを用いて、映像データの再生に関する遅延時間Δｔを算出するので、適正な遅延時間Δｔが得られる。

また、本実施形態の映像品質制御システム５０は、一度伝送品質が下がるように変更された後の伝送品質変更後映像データの再生に関する遅延時間Δｔが再び所定の閾値を超えた場合には、伝送品質変更後映像データの符号量、解像度及びフレームレートのうち少なくとも１つを更に変更した第２伝送品質変更後映像データを生成するので、第２伝送品質変更後映像データが映像再生装置２０において再生される場合の遅延時間Δｔをより低減することができる。

（各種変形例）
上述した本実施形態では、遅延時間Δｔを算出するための映像再生装置２０のシステム時刻の基準値は、初回の映像データの符号化データが映像再生装置２０のモニタ３１に表示されたときのシステム時刻として説明した。しかし、ネットワーク回線の外乱により、初回の映像データの符号化データが映像再生装置２０のモニタ３１に表示されたときのシステム時刻に誤差が生じることが考えられる（図１０（Ａ）参照）。図１０（Ａ）は、ネットワークの外乱によって遅延時間Δｔを算出するための基準値（システム時刻）に誤差が生じる例の説明図である。

図１０（Ａ）に示すように、ネットワーク回線の外乱によって初回の映像データの符号化データの映像再生装置２０における到達が遅れてしまった場合には、この符号化データがモニタ３１に表示されたときのシステム時刻を基準値として用いると、遅延時間Δｔの信頼性が劣化する可能性がある。

そこで、図１０（Ｂ）に示すように、上述した本実施形態において、映像再生装置２０は、タイムスタンプ、及びシステム時刻の各基準値として、それぞれ初回の映像データの符号化データに含まれるタイムスタンプ、及び初回の映像データの符号化データがモニタ３１に表示されたときのシステム時刻を用いず、タイムスタンプ及びシステム時刻の各基準値を算出するための試行用パケット（トライアルパケット）に含まれるタイムスタンプ及び同試行用パケットの到着時刻の平均値を用いても良い。図１０（Ｂ）は、複数のトライアルパケットの到着時刻の平均値を用いて基準値（システム時刻、タイムスタンプ）を算出する例の説明図である。

具体的には、映像再生装置２０の遅延時間算出部２３は、タイムスタンプの基準値として、図１０（Ｂ）に示す後尾のトライアルパケットのタイムスタンプ（１６２８７２１０００）と先頭のトライアルパケットのタイムスタンプ（１６２８７０５８５０）との差分を「（先頭から後尾までのトライアルパケットの数）−１」で除した値として算出する。

また、遅延時間算出部２３は、システム時刻の基準値として、図１０（Ｂ）に示す後尾のトライアルパケットのシステム時刻（３７０７８１５１８）と先頭のトライアルパケットのシステム時刻（３７０７６８３９８）との差分を「（先頭から後尾までのトライアルパケットの数）−１」で除した値として算出する。

これにより、遅延時間算出部２３は、例えばネットワーク回線の外乱によって初回の映像データの符号化データの到着時刻が遅れた場合でも、タイムスタンプ及びシステム時刻の各基準値の変動（揺らぎ）を緩和することができ、適正な各基準値が得られる。なお、トライアルパケットは、映像データの符号化データが含まれたパケットでも良いし、映像データの符号化データが含まれないダミーのＲＴＰパケットでも良い。また、トライアルパケットの数は、映像再生装置２０により予め指定された数とし、多いほどタイムスタンプ及びシステム時刻の各基準値の確度を向上させることができる。

また、上述した本実施形態において、カメラ装置１０は、伝送品質変更要求を受信した場合に、伝送品質の変更項目（例えば、符号量、画像解像度、フレームレート）を、図９に示す変更項目の順に従って変更しなくても良く、例えば図１１（Ａ）又は図１１（Ｂ）に示す変更項目の順に従って変更しても良い。

図１１（Ａ）は、本実施形態のカメラ装置１０における映像データの伝送品質変更の第１のバリエーションを説明するフローチャートである。図１１（Ｂ）は、本実施形態のカメラ装置１０における映像データの伝送品質変更の第２のバリエーションを説明するフローチャートである。図１１（Ａ）又は図１１（Ｂ）の説明では、図９の説明と重複する内容については同一のステップ番号を付して説明を省略し、異なる内容について説明する。

図１１（Ａ）では、カメラ装置１０は、ステップＳ３３において削減（変更）された後の符号量が符号量の初期値の１／２以下であると判定した場合（Ｓ３４、ＹＥＳ）、現在の映像データの画像解像度が画像解像度の初期値の１／４であるか否かを判定する（Ｓ３６）。カメラ装置１０は、現在の映像データの画像解像度が画像解像度の初期値の１／４ではないと判定した場合には（Ｓ３６、ＮＯ）、映像データを構成する画像データの解像度を１／４（＝２５％）倍に削減（変更）する（Ｓ３５）。

一方、カメラ装置１０は、現在の映像データの画像解像度が画像解像度の初期値の１／４であると判定した場合には（Ｓ３６、ＹＥＳ）、現在の映像データのフレームレートを１／２（＝５０％）倍に削減（変更）する（Ｓ３７）。

また、図１１（Ｂ）では、カメラ装置１０は、遅延時間Δｔを含む伝送品質変更要求を受信した場合には（Ｓ３２、ＹＥＳ）、例えば現在の映像データのフレームレートを３／４（＝７５％）倍に削減（変更）する（Ｓ３３ａ）。

更に、カメラ装置１０は、ステップＳ３３ａにおいて削減（変更）された後のフレームレートがフレームレートの初期値の１／２（＝５０％）以下であるか否かを判定する（Ｓ３４ａ）。伝送品質変更要求が受信されていない場合（Ｓ３２、ＮＯ）、又はステップＳ３３ａにおいて削減（変更）された後のフレームレートがフレームレートの初期値の１／２以下ではないと判定された場合（Ｓ３４ａ、ＮＯ）、カメラ装置１０は、映像データの伝送品質の変更を省略し、現在の伝送品質を維持して映像データを符号化する。

一方、カメラ装置１０は、ステップＳ３３ａにおいて削減（変更）された後のフレームレートがフレームレートの初期値の１／２以下であると判定した場合（Ｓ３４ａ、ＹＥＳ）、現在の映像データの符号量が映像データの符号量の初期値の１／２（＝５０％）以下であるか否かを判定する（Ｓ３６ａ）。カメラ装置１０は、現在の映像データの符号量が符号量の初期値の１／２を超えると判定した場合には（Ｓ３６ａ、ＮＯ）、現在の映像データの符号量を１／２（＝５０％）倍に削減（変更）する（Ｓ３５ａ）。

また、カメラ装置１０は、現在の映像データの符号量が符号量の初期値の１／２以下であると判定した場合には（Ｓ３６ａ、ＹＥＳ）、映像データを構成する画像データの解像度を１／４（＝２５％）倍に削減（変更）する（Ｓ３７ａ）。

従って、映像再生装置２０にかかる処理負荷は、映像再生装置２０の画像復号部２５や画像表示部２７等の映像再生装置２０が使用されるユーザ環境により異なるので、伝送品質の変更項目のうちどの項目を優先的に設定するかは映像再生装置２０が使用されるユーザ環境に依存される。なお、伝送品質の変更項目は、例えばユーザの入力操作に応じて、カメラ装置１０の符号化品質制御部１３が変更設定可能である。これにより、映像再生装置２０は、ユーザ環境に応じて、伝送品質の変更項目を設定でき、映像再生装置２０にかかる処理負荷を一層低減することができる。

また、上述した本実施形態では、説明を簡単にするために、映像品質制御システム５０を構成するカメラ装置１０は１つとしたが複数でも良い（図１２（Ａ）参照）。図１２（Ａ）は、複数のカメラ装置１０から送信された映像データが表示されたモニタ３１の表示画面ＤＰにおける表示例を示す図である。

図１２（Ａ）では、複数のカメラ装置１０として４つのカメラ装置１０を例示し、最も優先順位が高いカメラ装置（第１優先カメラ装置）１０の映像データがメイン画面ＭＡ１に表示（再生）され、第２番目に優先順位が高いカメラ装置（第２優先カメラ装置）１０の映像データのサムネイルがサムネイル表示画面ＳＭ１に表示（再生）され、第３番目に優先順位が高いカメラ装置（第３優先カメラ装置）１０の映像データのサムネイルがサムネイル表示画面ＳＭ２に表示（再生）され、最も優先順位が高くないカメラ装置（第４優先カメラ装置）１０の映像データのサムネイルがサムネイル表示画面ＳＭ３に表示（再生）されている。以下の説明において、映像再生装置２０は、４つのカメラ装置１０の映像データをモニタ３１の表示画面に表示する場合、例えば高解像度であって遅延時間が少なくなるように表示するとする。

図１２（Ｂ）は、本実施形態の映像再生装置２０における、複数のカメラ装置１０から送信された映像データがモニタ３１に表示された場合の各映像データの伝送品質変更又は送信停止の要求に関する動作手順を詳細に説明するフローチャートである。

図１２（Ｂ）では、図１２（Ａ）に示すメイン画面ＭＡ１に表示（再生）される映像データの遅延時間が拡大している場合に、映像再生装置２０がメイン画面ＭＡ１に表示（再生）される映像データの伝送品質を優先的に維持する方法が示されている。図１２（Ｂ）では、映像再生装置２０は、ステップＳ２２ａ，Ｓ２３ａ，Ｓ４１〜Ｓ５２，Ｓ２５ａの処理をメイン画面ＭＡ１に表示される映像データの１フレーム毎に行う。

図１２（Ｂ）において、映像再生装置２０は、４つのカメラ装置１０からそれぞれ初回の映像データの符号化データを受信すると、第１優先カメラ装置から送信された映像データの符号化データに格納されているタイムスタンプを「タイムスタンプの基準値」として保持し、更に、同符号化データを復号した映像データをモニタ３１のメイン画面ＭＡ１に表示させたときのシステム時刻を「システム時刻の基準値」として保持する（Ｓ２１ａ）。

映像再生装置２０は、２回目の各映像データの符号化データを受信し（Ｓ２２ａ）、ステップＳ２１ａで保持した「タイムスタンプの基準値」及び「システム時刻の基準値」と、２回目の第１優先カメラ装置からの映像データの符号化データに含まれるタイムスタンプと、２回目の第１優先カメラ装置からの映像データの符号化データを復号した映像データをモニタ３１のメイン画面ＭＡ１に表示（再生）させたときのシステム時刻とを用いて、２回目の第１優先カメラ装置からの映像データの符号化データを復号して得られた映像データの再生に関する遅延時間Δｔを算出する（Ｓ２３ａ）。

映像再生装置２０は、ステップＳ２３ａにおいて算出された遅延時間Δｔが所定の閾値（例えば５００［ｍｓｅｃ］）以上である場合には（Ｓ２４ａ、ＹＥＳ）、サムネイル表示画面ＳＭ３に表示（再生）される映像データのサムネイルの符号量が削減済みであるか否かを判定する（Ｓ４１）。映像再生装置２０は、サムネイル表示画面ＳＭ３に表示（再生）される映像データのサムネイルの符号量が削減済みであると判定した場合には（Ｓ４１、ＹＥＳ）、サムネイル表示画面ＳＭ２に表示（再生）される映像データのサムネイルの符号量が削減済みであるか否かを判定する（Ｓ４２）。

映像再生装置２０は、サムネイル表示画面ＳＭ２に表示（再生）される映像データのサムネイルの符号量が削減済みであると判定した場合には（Ｓ４２、ＹＥＳ）、サムネイル表示画面ＳＭ１に表示（再生）される映像データのサムネイルの符号量が削減済みであるか否かを判定する（Ｓ４３）。映像再生装置２０は、サムネイル表示画面ＳＭ１に表示（再生）される映像データのサムネイルの符号量が削減済みであると判定した場合には（Ｓ４３、ＹＥＳ）、サムネイル表示画面ＳＭ３に表示（再生）される映像データの表示（再生）が停止中であるか否かを判定する（Ｓ４４）。

映像再生装置２０は、サムネイル表示画面ＳＭ３に表示（再生）される映像データの表示（再生）が停止中であると判定した場合には（Ｓ４４、ＹＥＳ）、サムネイル表示画面ＳＭ２に表示（再生）される映像データの表示（再生）が停止中であるか否かを判定する（Ｓ４５）。映像再生装置２０は、サムネイル表示画面ＳＭ２に表示（再生）される映像データの表示（再生）が停止中であると判定した場合には（Ｓ４５、ＹＥＳ）、サムネイル表示画面ＳＭ１に表示（再生）される映像データの表示（再生）が停止中であるか否かを判定する（Ｓ４６）。

映像再生装置２０は、サムネイル表示画面ＳＭ１に表示（再生）される映像データの表示（再生）が停止中であると判定した場合には（Ｓ４６、ＹＥＳ）、メイン画面ＭＡ１に表示（再生）される映像データの伝送品質を下げるための伝送品質変更要求を生成して第１優先カメラ装置に送信する（Ｓ２５ａ）。

一方、映像再生装置２０は、サムネイル表示画面ＳＭ３に表示（再生）される映像データのサムネイルの符号量が削減済みではないと判定した場合には（Ｓ４１、ＮＯ）、サムネイル表示画面ＳＭ３に表示（再生）される映像データの伝送品質を下げるための伝送品質変更要求を生成して第４優先カメラ装置に送信する（Ｓ４７）。

また、映像再生装置２０は、サムネイル表示画面ＳＭ２に表示（再生）される映像データのサムネイルの符号量が削減済みではないと判定した場合には（Ｓ４２、ＮＯ）、サムネイル表示画面ＳＭ２に表示（再生）される映像データの伝送品質を下げるための伝送品質変更要求を生成して第３優先カメラ装置に送信する（Ｓ４８）。

また、映像再生装置２０は、サムネイル表示画面ＳＭ１に表示（再生）される映像データのサムネイルの符号量が削減済みではないと判定した場合には（Ｓ４３、ＮＯ）、サムネイル表示画面ＳＭ１に表示（再生）される映像データの伝送品質を下げるための伝送品質変更要求を生成して第２優先カメラ装置に送信する（Ｓ４９）。

また、映像再生装置２０は、サムネイル表示画面ＳＭ３に表示（再生）される映像データの表示（再生）が停止中ではないと判定した場合には（Ｓ４４、ＮＯ）、サムネイル表示画面ＳＭ３に表示（再生）される映像データの送信の停止要求を生成して第４優先カメラ装置に送信する（Ｓ５０）。なお、映像データの送信の停止要求は、伝送品質変更要求と同様のパケット構成を用いれば良い。

また、映像再生装置２０は、サムネイル表示画面ＳＭ２に表示（再生）される映像データの表示（再生）が停止中ではないと判定した場合には（Ｓ４５、ＮＯ）、サムネイル表示画面ＳＭ２に表示（再生）される映像データの送信の停止要求を生成して第３優先カメラ装置に送信する（Ｓ５１）。

また、映像再生装置２０は、サムネイル表示画面ＳＭ１に表示（再生）される映像データの表示（再生）が停止中ではないと判定した場合には（Ｓ４６、ＮＯ）、サムネイル表示画面ＳＭ１に表示（再生）される映像データの送信の停止要求を生成して第２優先カメラ装置に送信する（Ｓ５２）。

これにより、本実施形態の映像品質制御システム５０は、複数のカメラ装置１０がネットワークＮＷを介して映像再生装置２０に接続されている場合でも、他のサムネイル表示画面に表示される映像データの伝送品質を変更したり表示（再生）を停止したりすることで、映像再生装置２０のモニタ３１のメイン画面ＭＡ１に表示される映像データの伝送品質を劣化させることなく、メイン画面ＭＡ１に表示される映像データの伝送品質（映像品質）を維持することができる。

なお、図１２（Ｂ）では、図１２（Ａ）に示すメイン画面ＭＡ１に表示（再生）される映像データの遅延時間が拡大している場合に、映像再生装置２０がメイン画面ＭＡ１に表示（再生）される映像データの伝送品質を優先的に維持する方法を説明したが、第２優先カメラ装置〜第４優先カメラ装置からの映像データの表示（再生）を停止する前に、第１優先カメラ装置の映像データの伝送品質を下げるように変更することで、全てのカメラ装置１０からの映像データをトータルに監視可能に構成しても良い。例えば、図１２（Ｂ）において、ステップＳ２５ａの処理をステップＳ４３とステップＳ４４との間に入れ替えても良い。

最後に、本発明に係る携帯端末、撮像装置及び設定情報複製方法の構成、作用、効果をそれぞれ説明する。

本発明の一実施形態は、映像を撮像するカメラ装置と、前記カメラ装置により撮像された映像データを再生する映像再生装置とを含む映像品質制御システムであって、前記カメラ装置は、前記映像の撮像毎に、前記映像データの再生に関する時刻情報を含む前記映像データを生成する映像データ生成部と、前記映像データ生成部により生成された前記映像データを前記映像再生装置に送信する映像データ送信部と、を有し、前記映像再生装置は、初回の前記映像データに含まれる前記時刻情報と２回目以降の前記映像データに含まれる前記時刻情報とを用いて、前記映像データの再生に関する遅延時間情報を算出する遅延時間算出部と、前記遅延時間算出部により算出された前記遅延時間情報が所定の閾値を超えた場合に、前記映像データの伝送品質を下げる伝送品質変更要求を前記カメラ装置に送信する品質変更要求部と、を有する、映像品質制御システムである。

この構成では、カメラ装置は、映像を撮像する度に、映像データの再生に関する時刻情報を含む映像データを生成して映像再生装置に送信する。映像再生装置は、初回の映像データに含まれる時刻情報と２回目以降の映像データに含まれる時刻情報とを用いて、映像データの再生に関する遅延時間情報を算出し、遅延時間情報が所定の閾値を超えた場合に、映像データの伝送品質を下げる伝送品質変更要求をカメラ装置に送信する。

これにより、映像品質制御システムは、カメラ装置において映像が撮像される度に送信されて映像再生装置において再生される映像データの遅延時間情報が所定の閾値を超えると、所定の条件を満たしたとして、現在の映像データの伝送品質を下げる変更をカメラ装置に要求するので、映像データの再生時のリアルタイム性を劣化させることなく、カメラ装置から送信される映像データの再生に関する遅延時間の拡大を抑制することができる。

また、本発明の一実施形態は、前記映像データ生成部は、前記品質変更要求部からの前記伝送品質変更要求に応じて、前記映像データの符号量、解像度及びフレームレートのうち少なくとも１つを変更した伝送品質変更後映像データを生成する、映像品質制御システムである。

この構成によれば、映像品質制御システムは、伝送品質変更要求があると、撮像により得られた映像データの符号量、解像度及びフレームレートのうち少なくとも１つを変更した伝送品質変更後映像データを生成するので、伝送品質変更後映像データが映像再生装置において再生される場合の遅延時間情報を低減することができる。

また、本発明の一実施形態は、前記映像再生装置は、前記映像再生装置の内部時刻情報を取得する時刻情報取得部、を更に有し、前記遅延時間算出部は、初回の前記映像データが前記映像再生装置により受信された場合に前記時刻情報取得部が取得した内部時刻情報と、２回目以降の前記映像データが前記映像再生装置により受信された場合に前記時刻情報取得部が取得した内部時刻情報とを用いて、前記映像データの再生に関する遅延時間情報を算出する、映像品質制御システムである。

この構成によれば、映像品質制御システムは、初回の映像データが映像再生装置により受信された場合に取得された映像再生装置の内部時刻情報と、２回目以降の映像データが映像再生装置により受信された場合に取得された映像再生装置の内部時刻情報とを用いて、映像データの再生に関する遅延時刻情報を算出するので、適正な遅延時刻情報が得られる。

また、本発明の一実施形態は、前記映像データ生成部は、前記遅延時間算出部により算出された前記伝送品質変更後映像データの再生に関する遅延時間情報が前記所定の閾値を超えた場合に、前記伝送品質変更後映像データの符号量、解像度及びフレームレートのうち少なくとも１つを更に変更した第２伝送品質変更後映像データを生成する、映像品質制御システムである。

この構成によれば、映像品質制御システムは、一度伝送品質が下がるように変更された後の伝送品質変更後映像データの再生に関する遅延時間情報が再び所定の閾値を超えた場合には、伝送品質変更後映像データの符号量、解像度及びフレームレートのうち少なくとも１つを更に変更した第２伝送品質変更後映像データを生成するので、第２伝送品質変更後映像データが映像再生装置において再生される場合の遅延時刻情報をより低減することができる。

また、本発明の一実施形態は、前記カメラ装置は、少なくとも２つあり、前記映像再生装置は、第１の前記カメラ装置から送信された第１の映像データと第２の前記カメラ装置から送信された第２の映像データとを表示する表示部、を更に有し、前記品質変更要求部は、前記第１の映像データが前記第２の映像データより広く前記表示部において表示され、前記第１の映像データの再生に関する遅延時間情報が前記所定の閾値を超える場合に、前記第２の映像データの前記伝送品質変更要求を第２の前記カメラ装置に送信する、映像品質制御システムである。

この構成によれば、映像品質制御システムは、少なくとも２つのカメラ装置から送信された映像データのうち第１の映像データが第２の映像データより広くモニタにおいて表示され、第１の映像データの再生に関する遅延時間情報が所定の閾値を超える場合には、第２の映像データの伝送品質を下げる伝送品質変更要求を第２のカメラ装置に送信するので、第１の映像データの再生に関する遅延時間情報よりも第２の映像データの再生に関する遅延時間情報を優先して低減することができ、第１の映像データの伝送品質の低下を回避した状態で第１の映像データを再生することができる。

また、本発明の一実施形態は、前記品質変更要求部は、前記第２の映像データの前記伝送品質変更要求が第２の前記カメラ装置に送信された後、前記第１の映像データの再生に関する遅延時間情報が前記所定の閾値を超える場合に、前記第２の映像データの送信停止要求を第２の前記カメラ装置に送信する、映像品質制御システムである。

この構成によれば、映像品質制御システムは、第２の映像データの伝送品質変更要求が第２のカメラ装置に送信された後でも、第１の映像データの再生に関する遅延時間情報が所定の閾値を超える場合には、第２の映像データの送信停止要求を第２のカメラ装置に送信するので、第２のカメラ装置から第２の映像データが送信されない分ネットワークのトラフィックを軽減することができ、第１のカメラ装置からの第１の映像データの伝送品質の劣化を抑制することができる。

また、本発明の一実施形態は、前記品質変更要求部は、前記第２の映像データの送信停止要求が第２の前記カメラ装置に送信された後、前記第１の映像データの再生に関する遅延時間情報が前記所定の閾値を超える場合に、前記第１の映像データの前記伝送品質変更要求を第１の前記カメラ装置に送信する、映像品質制御システムである。

この構成によれば、映像品質制御システムは、第２の映像データの送信停止要求が第２のカメラ装置に送信された後でも、第１の映像データの再生に関する遅延時間情報が所定の閾値を超える場合には、第１の映像データの伝送品質変更要求を第１のカメラ装置に送信するので、第１の映像データの伝送品質を下げることで、第１の映像データの再生時のリアルタイム性を劣化させることなく、第１の映像データの再生に関する遅延時間の拡大を抑制することができる。

また、本発明の一実施形態は、前記品質変更要求部は、前記第２の映像データの前記伝送品質変更要求が第２の前記カメラ装置に送信された後、前記第１の映像データの再生に関する遅延時間情報が前記所定の閾値を超える場合に、前記第１の映像データの前記伝送品質変更要求を第１の前記カメラ装置に送信する、映像品質制御システムである。

この構成によれば、映像品質制御システムは、第２の映像データの伝送品質変更要求が第２のカメラ装置に送信された後でも、第１の映像データの再生に関する遅延時間情報が所定の閾値を超える場合には、第１の映像データの伝送品質を下げるように伝送品質変更要求を第１のカメラ装置に送信するので、第１の映像データ及び第２の映像データの各伝送品質を総合的に下げるように伝送品質変更要求を各カメラ装置に送信することで、第１の映像データ及び第２の映像データの再生時のリアルタイム性を劣化させることなく、第１の映像データ及び第２の映像データの再生に関する各遅延時間の拡大を抑制することができる。

また、本発明の一実施形態は、前記品質変更要求部は、前記第１の映像データの前記伝送品質変更要求が第１の前記カメラ装置に送信された後、前記第１の映像データの再生に関する遅延時間情報が前記所定の閾値を超える場合に、前記第２の映像データの送信停止要求を第２の前記カメラ装置に送信する、映像品質制御システムである。

この構成によれば、映像品質制御システムは、第１の映像データの伝送品質変更要求が第１のカメラ装置に送信された後であっても、第１の映像データの再生に関する遅延時間情報が所定の閾値を超える場合には、第２の映像データの送信停止要求を第２のカメラ装置に送信するので、第２のカメラ装置から第２の映像データが送信されない分ネットワークのトラフィックを軽減することができ、第１のカメラ装置からの第１の映像データの伝送品質の劣化を抑制することができる。

また、本発明の一実施形態は、カメラ装置により撮像された映像データを再生する映像再生装置であって、映像の撮像毎に、前記映像データの再生に関する時刻情報を含む前記映像データを受信する映像データ受信部と、初回の前記映像データに含まれる前記時刻情報と２回目以降の前記映像データに含まれる前記時刻情報とを用いて、前記映像データの再生に関する遅延時間情報を算出する遅延時間算出部と、前記遅延時間算出部により算出された前記遅延時間情報が所定の閾値を超えた場合に、前記映像データの伝送品質を下げる伝送品質変更要求を前記カメラ装置に送信する伝送品質変更要求部と、を有する、映像再生装置である。

この構成では、カメラ装置は、映像を撮像する度に、映像データの再生に関する時刻情報を含む映像データを生成して映像再生装置に送信する。映像再生装置は、初回の映像データに含まれる時刻情報と２回目以降の映像データに含まれる時刻情報とを用いて、映像データの再生に関する遅延時間情報を算出し、遅延時間情報が所定の閾値を超えた場合に、映像データの伝送品質を下げる伝送品質変更要求をカメラ装置に送信する。

これにより、映像再生装置は、カメラ装置において映像が撮像される度に送信されて映像再生装置において再生される映像データの遅延時間情報が所定の閾値を超えると、所定の条件を満たしたとして、現在の映像データの伝送品質を下げる変更をカメラ装置に要求するので、映像データの再生時のリアルタイム性を劣化させることなく、カメラ装置から送信される映像データの再生に関する遅延時間の拡大を抑制することができる。

また、本発明の一実施形態は、カメラ装置により撮像された映像データを再生するコンピュータである映像再生装置に、映像の撮像毎に、前記映像データの再生に関する時刻情報を含む前記映像データを受信するステップと、初回の前記映像データに含まれる前記時刻情報と２回目以降の前記映像データに含まれる前記時刻情報とを用いて、前記映像データの再生に関する遅延時間情報を算出するステップと、算出された前記遅延時間情報が所定の閾値を超えた場合に、前記映像データの伝送品質を下げる伝送品質変更要求を前記カメラ装置に送信するステップと、を実行させるための、プログラムである。

この構成では、カメラ装置は、映像を撮像する度に、映像データの再生に関する時刻情報を含む映像データを生成して映像再生装置に送信する。映像再生装置は、初回の映像データに含まれる時刻情報と２回目以降の映像データに含まれる時刻情報とを用いて、映像データの再生に関する遅延時間情報を算出し、遅延時間情報が所定の閾値を超えた場合に、映像データの伝送品質を下げる伝送品質変更要求をカメラ装置に送信する。

これにより、映像再生装置は、カメラ装置において映像が撮像される度に送信されて映像再生装置において再生される映像データの遅延時間情報が所定の閾値を超えると、所定の条件を満たしたとして、現在の映像データの伝送品質を下げる変更をカメラ装置に要求するので、映像データの再生時のリアルタイム性を劣化させることなく、カメラ装置から送信される映像データの再生に関する遅延時間の拡大を抑制することができる。

また、本発明の一実施形態は、カメラ装置により撮像された映像データを再生するコンピュータである映像再生装置に、映像の撮像毎に、前記映像データの再生に関する時刻情報を含む前記映像データを受信するステップと、初回の前記映像データに含まれる前記時刻情報と２回目以降の前記映像データに含まれる前記時刻情報とを用いて、前記映像データの再生に関する遅延時間情報を算出するステップと、算出された前記遅延時間情報が所定の閾値を超えた場合に、前記映像データの伝送品質を下げる伝送品質変更要求を前記カメラ装置に送信するステップと、を実行させるためのプログラムを格納する、記録媒体である。

この構成では、カメラ装置は、映像を撮像する度に、映像データの再生に関する時刻情報を含む映像データを生成して映像再生装置に送信する。映像再生装置は、初回の映像データに含まれる時刻情報と２回目以降の映像データに含まれる時刻情報とを用いて、映像データの再生に関する遅延時間情報を算出し、遅延時間情報が所定の閾値を超えた場合に、映像データの伝送品質を下げる伝送品質変更要求をカメラ装置に送信する。

これにより、映像再生装置は、カメラ装置において映像が撮像される度に送信されて映像再生装置において再生される映像データの遅延時間情報が所定の閾値を超えると、所定の条件を満たしたとして、現在の映像データの伝送品質を下げる変更をカメラ装置に要求するので、映像データの再生時のリアルタイム性を劣化させることなく、カメラ装置から送信される映像データの再生に関する遅延時間の拡大を抑制することができる。

また、本発明の一実施形態は、映像を撮像するカメラ装置と、前記カメラ装置により撮像された映像データを再生する映像再生装置とを含む映像品質制御システムにおける映像品質制御方法であって、前記カメラ装置は、前記映像の撮像毎に、前記映像データの再生に関する時刻情報を含む前記映像データを生成し、生成された前記映像データを前記映像再生装置に送信し、前記映像再生装置は、初回の前記映像データに含まれる前記時刻情報と２回目以降の前記映像データに含まれる前記時刻情報とを用いて、前記映像データの再生に関する遅延時間情報を算出し、算出された前記遅延時間情報が所定の閾値を超えた場合に、前記映像データの伝送品質を下げる伝送品質変更要求を前記カメラ装置に送信する、映像品質制御方法である。

この方法では、カメラ装置は、映像を撮像する度に、映像データの再生に関する時刻情報を含む映像データを生成して映像再生装置に送信する。映像再生装置は、初回の映像データに含まれる時刻情報と２回目以降の映像データに含まれる時刻情報とを用いて、映像データの再生に関する遅延時間情報を算出し、遅延時間情報が所定の閾値を超えた場合に、映像データの伝送品質を下げる伝送品質変更要求をカメラ装置に送信する。

これにより、映像品質制御システムは、カメラ装置において映像が撮像される度に送信されて映像再生装置において再生される映像データの遅延時間情報が所定の閾値を超えると、所定の条件を満たしたとして、現在の映像データの伝送品質を下げる変更をカメラ装置に要求するので、映像データの再生時のリアルタイム性を劣化させることなく、カメラ装置から送信される映像データの再生に関する遅延時間の拡大を抑制することができる。

以上、図面を参照しながら各種の実施形態について説明したが、本発明はかかる例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。

本発明は、所定の条件を満たす場合に映像データの伝送品質の変更を要求することで、映像データの再生時のリアルタイム性を劣化させることなく遅延時間の拡大を抑制する映像品質制御システム、映像再生装置、プログラム、記録媒体及び映像品質制御方法として有用である。

１０ カメラ装置
１１ 画像入力部
１３ 符号化品質制御部
１５ 画像符号化部
１７ 符号化データ送信部
１９ 遅延時間受信部
２０ 映像再生装置
２１ 符号化データ受信部
２３ 遅延時間算出部
２５ 画像復号部
２７ 画像表示部
２９ 遅延時間送信部
３１ モニタ
ＣＴ システム時刻カウンタ
ＬＳ レンズ

Claims (13)

1. 映像を撮像するカメラ装置と、前記カメラ装置により撮像された映像データを再生する映像再生装置とを含む映像品質制御システムであって、
   前記カメラ装置は、
   前記映像の撮像毎に、前記映像データの再生に関する時刻情報を含む前記映像データを生成する映像データ生成部と、
   前記映像データ生成部により生成された前記映像データを前記映像再生装置に送信する映像データ送信部と、を有し、
   前記映像再生装置は、
   初回の前記映像データに含まれる前記時刻情報と２回目以降の前記映像データに含まれる前記時刻情報とを用いて、前記映像データの再生に関する遅延時間情報を算出する遅延時間算出部と、
   前記遅延時間算出部により算出された前記遅延時間情報が所定の閾値を超えた場合に、前記映像データの伝送品質を下げる伝送品質変更要求を前記カメラ装置に送信する品質変更要求部と、を有する、
   映像品質制御システム。
2. 請求項１に記載の映像品質制御システムであって、
   前記映像データ生成部は、
   前記品質変更要求部からの前記伝送品質変更要求に応じて、前記映像データの符号量、解像度及びフレームレートのうち少なくとも１つを変更した伝送品質変更後映像データを生成する、
   映像品質制御システム。
3. 請求項１に記載の映像品質制御システムであって、
   前記映像再生装置は、
   前記映像再生装置の内部時刻情報を取得する時刻情報取得部、を更に有し、
   前記遅延時間算出部は、
   初回の前記映像データが前記映像再生装置により受信された場合に前記時刻情報取得部が取得した内部時刻情報と、２回目以降の前記映像データが前記映像再生装置により受信された場合に前記時刻情報取得部が取得した内部時刻情報とを用いて、前記映像データの再生に関する遅延時間情報を算出する、
   映像品質制御システム。
4. 請求項２に記載の映像品質制御システムであって、
   前記映像データ生成部は、
   前記遅延時間算出部により算出された前記伝送品質変更後映像データの再生に関する遅延時間情報が前記所定の閾値を超えた場合に、前記伝送品質変更後映像データの符号量、解像度及びフレームレートのうち少なくとも１つを更に変更した第２伝送品質変更後映像データを生成する、
   映像品質制御システム。
5. 請求項１に記載の映像品質制御システムであって、
   前記カメラ装置は、少なくとも２つあり、
   前記映像再生装置は、
   第１の前記カメラ装置から送信された第１の映像データと第２の前記カメラ装置から送信された第２の映像データとを表示する表示部、を更に有し、
   前記品質変更要求部は、
   前記第１の映像データが前記第２の映像データより広く前記表示部において表示され、前記第１の映像データの再生に関する遅延時間情報が前記所定の閾値を超える場合に、前記第２の映像データの前記伝送品質変更要求を第２の前記カメラ装置に送信する、
   映像品質制御システム。
6. 請求項５に記載の映像品質制御システムであって、
   前記品質変更要求部は、
   前記第２の映像データの前記伝送品質変更要求が第２の前記カメラ装置に送信された後、前記第１の映像データの再生に関する遅延時間情報が前記所定の閾値を超える場合に、前記第２の映像データの送信停止要求を第２の前記カメラ装置に送信する、
   映像品質制御システム。
7. 請求項６に記載の映像品質制御システムであって、
   前記品質変更要求部は、
   前記第２の映像データの送信停止要求が第２の前記カメラ装置に送信された後、前記第１の映像データの再生に関する遅延時間情報が前記所定の閾値を超える場合に、前記第１の映像データの前記伝送品質変更要求を第１の前記カメラ装置に送信する、
   映像品質制御システム。
8. 請求項５に記載の映像品質制御システムであって、
   前記品質変更要求部は、
   前記第２の映像データの前記伝送品質変更要求が第２の前記カメラ装置に送信された後、前記第１の映像データの再生に関する遅延時間情報が前記所定の閾値を超える場合に、前記第１の映像データの前記伝送品質変更要求を第１の前記カメラ装置に送信する、
   映像品質制御システム。
9. 請求項８に記載の映像品質制御システムであって、
   前記品質変更要求部は、
   前記第１の映像データの前記伝送品質変更要求が第１の前記カメラ装置に送信された後、前記第１の映像データの再生に関する遅延時間情報が前記所定の閾値を超える場合に、前記第２の映像データの送信停止要求を第２の前記カメラ装置に送信する、
   映像品質制御システム。
10. カメラ装置により撮像された映像データを再生する映像再生装置であって、
    映像の撮像毎に、前記映像データの再生に関する時刻情報を含む前記映像データを受信する映像データ受信部と、
    初回の前記映像データに含まれる前記時刻情報と２回目以降の前記映像データに含まれる前記時刻情報とを用いて、前記映像データの再生に関する遅延時間情報を算出する遅延時間算出部と、
    前記遅延時間算出部により算出された前記遅延時間情報が所定の閾値を超えた場合に、前記映像データの伝送品質を下げる伝送品質変更要求を前記カメラ装置に送信する伝送品質変更要求部と、を有する、
    映像再生装置。
11. カメラ装置により撮像された映像データを再生するコンピュータである映像再生装置に、
    映像の撮像毎に、前記映像データの再生に関する時刻情報を含む前記映像データを受信するステップと、
    初回の前記映像データに含まれる前記時刻情報と２回目以降の前記映像データに含まれる前記時刻情報とを用いて、前記映像データの再生に関する遅延時間情報を算出するステップと、
    算出された前記遅延時間情報が所定の閾値を超えた場合に、前記映像データの伝送品質を下げる伝送品質変更要求を前記カメラ装置に送信するステップと、を実行させるための、
    プログラム。
12. カメラ装置により撮像された映像データを再生するコンピュータである映像再生装置に、
    映像の撮像毎に、前記映像データの再生に関する時刻情報を含む前記映像データを受信するステップと、
    初回の前記映像データに含まれる前記時刻情報と２回目以降の前記映像データに含まれる前記時刻情報とを用いて、前記映像データの再生に関する遅延時間情報を算出するステップと、
    算出された前記遅延時間情報が所定の閾値を超えた場合に、前記映像データの伝送品質を下げる伝送品質変更要求を前記カメラ装置に送信するステップと、を実行させるためのプログラムを格納する、
    記録媒体。
13. 映像を撮像するカメラ装置と、前記カメラ装置により撮像された映像データを再生する映像再生装置とを含む映像品質制御システムにおける映像品質制御方法であって、
    前記カメラ装置は、
    前記映像の撮像毎に、前記映像データの再生に関する時刻情報を含む前記映像データを生成し、
    生成された前記映像データを前記映像再生装置に送信し、
    前記映像再生装置は、
    初回の前記映像データに含まれる前記時刻情報と２回目以降の前記映像データに含まれる前記時刻情報とを用いて、前記映像データの再生に関する遅延時間情報を算出し、
    算出された前記遅延時間情報が所定の閾値を超えた場合に、前記映像データの伝送品質を下げる伝送品質変更要求を前記カメラ装置に送信する、
    映像品質制御方法。

Images