JP7466042B1 - 情報処理システム、情報処理装置及び情報処理方法 - Google Patents

Abstract

【課題】リターン映像を撮影装置側に配信する際の遅延を抑制する。【解決手段】情報処理装置２は、複数の第１撮影側装置１それぞれから、各第１撮影側装置１がエンコードした映像データであるエンコード済データを受信する受信部２３１と、複数の第１撮影側装置１それぞれから受信した複数のエンコード済データをデコードし、複数の映像データを復元するデコード部２３２と、デコード部２３２により復元された複数の映像データのうち、一つの映像データを選択する選択部２３５と、選択部２３５が選択した映像データに対応するエンコード済データであって受信部２３１が受信したエンコード済データを各第１撮影側装置１に配信する配信部２３６と、を有する。【選択図】図３

Description

本発明は、情報処理システム、情報処理装置及び情報処理方法に関する。

従来、テレビ放送の番組制作において、複数の撮影装置により撮影を行い、複数の撮影装置それぞれが撮影することにより生成した映像データのいずれかをスイッチャを用いてオンエア用の映像データとして選択することが行われている（例えば、特許文献１を参照）。

特開２００５－２９５４３１号公報

複数の撮影装置がＦＰＵ（Field Pickup Unit）やワイヤレスカメラであり、無線通信により映像データをスイッチャに伝送する場合、エンコーダを用いて映像データをエンコードして通信容量を低減させてからスイッチャに伝送し、エンコードされた映像データをデコードすることが行われている。この場合において、オンエアされている映像データをリターン映像として複数の撮影装置に配信する場合、当該映像データをエンコードして通信容量を低減させてから撮影装置側に配信していたため、遅延が生じてしまうという問題が発生する。

そこで、本発明はこれらの点に鑑みてなされたものであり、リターン映像を撮影装置側に配信する際の遅延を抑制することを目的とする。

本発明の第１の態様に係る情報処理システムは、情報処理装置と、複数の第１撮影側装置とを有する情報処理システムであって、前記複数の第１撮影側装置それぞれは、撮影を行うことにより映像データを生成する第１撮影部と、前記第１撮影部が生成した映像データをエンコードする第１エンコード部と、エンコードされた映像データであるエンコード済データを前記情報処理装置に送信する第１撮影側送信部と、前記情報処理装置から配信されたエンコード済データを受信する第１撮影側受信部と、前記第１撮影側受信部が受信したエンコード済データをデコードして映像データを復元する第１撮影側デコード部と、前記第１撮影側デコード部が復元した映像データを表示部に表示させる第１表示制御部と、を有し、前記情報処理装置は、複数の前記第１撮影側装置それぞれからエンコード済データを受信する受信部と、複数の前記第１撮影側装置それぞれから受信した複数のエンコード済データをデコードし、複数の映像データを復元するデコード部と、前記デコード部により復元された複数の映像データのうち、一つの映像データを選択する選択部と、前記選択部が選択した映像データに対応するエンコード済データを複数の前記第１撮影側装置に配信する配信部と、を有する。

前記情報処理装置は、前記第１撮影側装置と異なる第２撮影側装置と通信可能であり、前記第２撮影側装置は、撮影を行うことにより映像データを生成する第２撮影部と、前記第２撮影部が生成した映像データを前記情報処理装置に送信する第２撮影側送信部と、前記情報処理装置から配信されたエンコード済データを受信する第２撮影側受信部と、前記第２撮影側受信部が受信したエンコード済データをデコードして映像データを復元する第２撮影側デコード部と、前記第２撮影側デコード部が復元した映像データを表示部に表示させる第２表示制御部と、を有し、前記受信部は、前記第２撮影側装置から映像データを受信し、前記情報処理装置は、前記受信部が受信した映像データをエンコードするエンコード部を有し、前記選択部は、前記デコード部により復元された複数の映像データと前記第２撮影側装置から受信した映像データとのうち、一つの映像データを選択し、前記配信部は、前記選択部が選択した映像データに対応するエンコード済データを複数の前記第１撮影側装置と前記第２撮影側装置とに配信してもよい。

前記配信部は、前記エンコード済データを複数の前記第１撮影側装置に配信してから複数の前記第１撮影側装置それぞれが当該エンコード済データに対応する映像データの表示を開始するまでの時間である遅延時間を特定し、複数の前記第１撮影側装置それぞれに対して特定した遅延時間に基づいて、複数の前記第１撮影側装置それぞれが当該エンコード済データに対応する映像データの表示を開始する時刻が同じ時刻となるように前記エンコード済データを複数の前記第１撮影側装置に配信してもよい。

前記情報処理装置は、前記受信部が複数の前記第１撮影側装置それぞれから受信した複数のエンコード済データを記憶部に記憶させる記憶制御部を有し、前記配信部は、複数の前記第１撮影側装置の少なくともいずれかから前記エンコード済データの再送要求を受け付けると、前記再送要求を送信した第１撮影側装置に、前記記憶部に記憶されている当該エンコード済データを再配信してもよい。

前記記憶制御部は、現在時刻から所定時間前までのエンコード済データを前記記憶部に記憶させ、前記配信部は、複数の前記第１撮影側装置の少なくともいずれかから所定時刻に対応するエンコード済データの再配信要求を受け付けた場合に、前記所定時刻に対応するエンコード済データが前記記憶部に記憶されていない場合、当該エンコード済データの送信元の第１撮影側装置から前記所定時刻に対応するエンコード済データを取得し、取得したエンコード済データを、前記再送要求を送信した第１撮影側装置に再配信してもよい。

前記第１撮影側送信部は、前記エンコード済データを無線通信により前記情報処理装置に送信し、前記受信部は、複数の前記第１撮影側装置それぞれからエンコード済データを無線通信により受信してもよい。
前記第１撮影側送信部は、前記エンコード済データを携帯電話機の通信ネットワークを介して前記情報処理装置に送信してもよい。

前記第１撮影側装置の前記第１撮影側受信部は、自身を有する当該第１撮影側装置が生成した映像データが、前記選択部により選択された映像データに対応する撮影側装置であるか否かを示す通知信号を受信し、前記第１撮影側装置の前記第１表示制御部は、前記第１撮影側受信部が受信した通知信号に基づいて、自身を有する当該第１撮影側装置に対応する映像データが前記選択部により選択されたと判定すると、前記第１撮影部が生成した映像データを前記表示部に表示させてもよい。

前記第１撮影側受信部は、映像合成用データを受信し、前記第１表示制御部は、取得した映像合成用データと、前記情報処理装置から配信されたエンコード済データからデコードされた映像データとを合成して表示部に表示させてもよい。

本発明の第２の態様に係る情報処理装置は、複数の撮影側装置それぞれから、各撮影側装置がエンコードした映像データであるエンコード済データを受信する受信部と、複数の前記撮影側装置それぞれから受信した複数のエンコード済データをデコードし、複数の映像データを復元するデコード部と、前記デコード部により復元された複数の映像データのうち、一つの映像データを選択する選択部と、前記選択部が選択した映像データに対応するエンコード済データであって前記受信部が受信したエンコード済データを各撮影側装置に配信する配信部と、を有する。

本発明の第３の態様に係る情報処理方法は、コンピュータが実行する、複数の撮影側装置それぞれから、各撮影側装置がエンコードした映像データであるエンコード済データを受信するステップと、複数の前記撮影側装置それぞれから受信した複数のエンコード済データをデコードし、複数の映像データを復元するステップと、復元した複数の映像データのうち、一つの映像データを選択するステップと、選択した映像データに対応するエンコード済データであって、受信したエンコード済データを各撮影側装置に配信する配信部と、を有する。

本発明によれば、リターン映像を撮影装置側に配信する際の遅延を抑制することができるという効果を奏する。

第１の実施の形態に係る情報処理システムの概要を説明する図である。 第１撮影側装置の機能構成を示す図である。 第１の実施の形態に係る情報処理装置の機能構成を示す図である。 情報処理装置における処理の流れの一例を示すフローチャートである。 第２撮影側装置の機能構成を示す図である。 第２の実施の形態に係る情報処理装置の機能構成を示す図である。

＜第１の実施の形態＞
［情報処理システムＳの概要］
図１は、第１の実施の形態に係る情報処理システムＳの概要を説明する図である。情報処理システムＳは、撮影を行う複数の第１撮影側装置１と、情報処理装置２とを有する。情報処理システムＳは、複数の第１撮影側装置１において生成された映像データのいずれかを選択し、選択した映像データをテレビ放送のオンエア用の映像データである放送用映像データとして出力するシステムである。なお、図１では、複数の第１撮影側装置１として２台の第１撮影側装置１を示しているが、これに限らず、３台以上の第１撮影側装置１が設けられていてもよい。

情報処理装置２は、複数の第１撮影側装置１それぞれと、携帯電話回線等の無線通信ネットワークを介して通信可能に接続されている。情報処理装置２は、複数の第１撮影側装置１それぞれから、第１撮影側装置１が生成した映像データをエンコードしたデータであるエンコード済データを受信する。情報処理装置２は、受信した複数のエンコード済データをデコードして複数の映像データを復元する。

情報処理装置２は、復元した複数の映像データのうち、テレビ放送に用いる放送用映像データとして出力する映像データを選択する。情報処理装置２は、選択した映像データを放送用映像データとして外部装置３に出力する。

また、情報処理装置２は、選択された映像データをリターン映像として第１撮影側装置１において表示させる。従来の情報処理装置では、選択された映像データを第１撮影側装置に表示させるために、選択された映像データをエンコードしてエンコード済データを生成し、生成したエンコード済データを複数の撮影側装置に配信していた。このため、エンコード済データの生成分の遅延が生じてしまうという問題が発生していた。

これに対し、情報処理装置２は、受信した複数のエンコード済データのうち、選択された映像データに対応するエンコード済データを、情報処理装置２においてデコード処理やエンコード処理を経ることなく、複数の第１撮影側装置１に直接配信する。このようにすることで、情報処理システムＳは、リターン映像を撮影装置側に配信する際の遅延を抑制することができる。

［第１撮影側装置１の機能構成］
続いて、情報処理システムＳの機能構成について説明する。まず、第１撮影側装置１の機能構成について説明する。図２は、第１撮影側装置１の機能構成を示す図である。なお、複数の第１撮影側装置１それぞれは、図２に示す構成を有しているものとする。また図２に示す例では、第１撮影側装置１は１台の装置により実現されているが、これに限らず、複数の装置により実現されていてもよい。

図２に示すように、第１撮影側装置１は、第１撮影部１１と、第１通信部１２と、第１通知部１３と、第１表示部１４と、第１記憶部１５と、第１制御部１６とを有する。
第１撮影部１１は、周囲の撮影を行うことにより映像データを生成する。第１撮影部１１は、生成した映像データを第１制御部１６に出力する。
第１通信部１２は、情報処理装置２等と無線通信ネットワークを介してデータを送受信するための通信インターフェースである。

第１通知部１３は、例えば、タリーランプであり、自身に対応する第１撮影側装置１である自装置が生成した映像データが、テレビ放送に用いる映像データとして選択されていることを周囲に通知する。第１通知部１３は、点灯状態を変化させることにより、自装置が生成した映像データがテレビ放送に用いる放送用撮影データとして選択されているか否かを周囲に通知する。例えば、タリーランプが赤色に点灯している場合、自装置が生成した映像データが放送用データとして選択されていることを示し、緑色に点灯している場合、自装置が生成した映像データが放送用データとして選択されていないことを示す。

第１表示部１４は、情報処理装置２により選択された映像データが示す映像をリターン映像として表示するディスプレイ装置である。
第１記憶部１５は、各種のデータを記憶する記憶媒体であり、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、ハードディスク、ＳＳＤ（Solid State Drive）、及びフラッシュメモリ等を有する。第１記憶部１５は、第１制御部１６が実行するプログラムを記憶する。第１記憶部１５は、第１制御部１６を、第１エンコード部１６１、第１撮影側送信部１６２、第１撮影側受信部１６３、第１通知制御部１６４、第１撮影側デコード部１６５、及び第１表示制御部１６６として機能させるプログラムを記憶する。

第１制御部１６は、例えばＣＰＵ（Central Processing Unit）である。第１制御部１６は、第１記憶部１５に記憶されたプログラムを実行することにより、第１エンコード部１６１、第１撮影側送信部１６２、第１撮影側受信部１６３、第１通知制御部１６４、第１撮影側デコード部１６５、及び第１表示制御部１６６として機能する。

第１エンコード部１６１は、第１撮影部１１が生成した映像データをエンコードしてエンコード済データを生成する。第１エンコード部１６１は、例えば、動画圧縮規格であるＨ．２６５のエンコーダを用いて映像データをエンコードして、エンコード済データを生成する。

第１撮影側送信部１６２は、第１エンコード部１６１によりエンコードされた映像データであるエンコード済データを、第１通信部１２を介して無線通信により情報処理装置２に送信する。例えば、第１撮影側送信部１６２は、エンコード済データを、携帯電話機の通信ネットワークを介して情報処理装置２に送信する。

第１撮影側受信部１６３は、スイッチャ（不図示）が選択した映像データに対応して情報処理装置２から配信されたエンコード済データを受信する。スイッチャは、複数の第１撮影側装置１それぞれが生成した複数の映像データの中から放送用映像データを選択するための装置である。

また、第１撮影側受信部１６３は、映像データに合成するテロップや合成用のコンピュータグラフィック画像等の映像合成用データを受信する。第１撮影側受信部１６３は、例えば、スイッチャや、放送局において使用され映像合成用データを生成する外部装置３から映像合成用データを受信する。外部装置３は、放送局に設けられていてもよいし、クラウド上に設けられていてもよい。

第１撮影側受信部１６３は、スイッチャが放送用映像データを選択したことに応じて、自身が有する第１撮影側装置１が生成した映像データが、放送用映像データとして選択されたか否かを示す通知信号を受信する。通知信号は、例えば、タリーランプの点灯色を変化させるためのタリー信号である。第１撮影側受信部１６３は、タリー信号として、タリーランプを赤色に点灯させる赤色点灯指示信号、又は、タリーランプを緑色に点灯させる緑色点灯指示信号を受信する。ここで、第１撮影側受信部１６３は、タリー信号をスイッチャから受信するものとするが、これに限らず、情報処理装置２から受信してもよい。

第１通知制御部１６４は、第１撮影側受信部１６３が受信したタリー信号に基づいて、第１通知部１３としてのタリーランプを制御することにより、第１撮影部１１が撮影した映像データが放送用映像データとして選択されているか否かを周囲に通知する。例えば、第１通知制御部１６４は、第１撮影側受信部１６３がタリー信号として赤色点灯指示信号を受信すると、タリーランプを赤色に点灯させる。また、第１通知制御部１６４は、第１撮影側受信部１６３がタリー信号として緑色点灯指示信号を受信すると、タリーランプを緑色に点灯させる。

第１撮影側デコード部１６５は、第１撮影側受信部１６３が受信したエンコード済データをデコードして映像データを復元する。第１撮影側デコード部１６５は、例えば、Ｈ．２６５のデコーダを用いて受信したエンコード済データをデコードして、映像データを復元する。

第１表示制御部１６６は、第１撮影側デコード部１６５が復元した映像データが示す映像を第１表示部１４に表示させる。第１表示制御部１６６は、第１撮影側受信部１６３が取得した映像合成用データと、エンコード済データからデコードした映像データとを合成して合成映像を生成し、生成した合成映像を第１表示部１４に表示させる。第１撮影側装置１は、第１撮影側受信部１６３が別々に取得した映像用合成用データと、エンコード済データとに基づいて合成映像を生成することにより、映像用合成用データに対応するテロップ等を示す画像を第１表示部１４に表示させる。このようにすることで、映像合成用データが、エンコード及びデコードが行われることなくエンコード済データと合成されるので、映像合成用データが示すテロップ等の画像を高精細に第１表示部１４に表示させることができる。

［情報処理装置２の機能構成］
続いて、情報処理装置２の機能構成について説明する。図３は、第１の実施の形態に係る情報処理装置２の機能構成を示す図である。情報処理装置２は、通信部２１と、記憶部２２と、制御部２３とを有する。

通信部２１は、複数の第１撮影側装置１それぞれとデータを送受信するための通信インターフェースである。
記憶部２２は、各種のデータを記憶する記憶媒体であり、ＲＯＭ、ＲＡＭ、ハードディスク、ＳＳＤ、及びフラッシュメモリ等を有する。記憶部２２は、制御部２３が実行するプログラムを記憶する。記憶部２２は、制御部２３を、受信部２３１、デコード部２３２、出力部２３３、記憶制御部２３４、選択部２３５、及び配信部２３６として機能させるプログラムを記憶する。

制御部２３は、例えばＣＰＵである。制御部２３は、記憶部２２に記憶されたプログラムを実行することにより、受信部２３１、デコード部２３２、出力部２３３、記憶制御部２３４、選択部２３５、及び配信部２３６として機能する。

受信部２３１は、複数の第１撮影側装置１のそれぞれから無線通信によりエンコード済データを受信する。具体的には、受信部２３１は、複数の第１撮影側装置１のそれぞれから、各第１撮影側装置１がエンコードした映像データであるエンコード済データを、無線通信ネットワークを介して無線通信により受信する。

デコード部２３２は、受信部２３１が複数の第１撮影側装置１それぞれから受信した複数のエンコード済データをデコードして、複数の映像データを復元する。デコード部２３２は、例えば、Ｈ．２６５のデコーダを用いて受信した複数のエンコード済データをデコードして、複数の映像データを復元する。

出力部２３３は、デコード部２３２が復元した複数の映像データを出力する。例えば、出力部２３３は、デコード部２３２が復元した複数の映像データを、通信部２１を介して、一以上の表示装置（不図示）に出力することにより、複数の映像データそれぞれが示す映像を表示装置に表示させる。ここで、表示装置は、テレビ放送に用いる放送用映像データを選択する担当者が複数の映像データそれぞれが示す映像を確認するために用いられる。なお、情報処理装置２が表示部を有していてもよく、出力部２３３は、情報処理装置２が有する表示部に複数の映像データが示す映像を表示させてもよい。

記憶制御部２３４は、受信部２３１が複数の第１撮影側装置１のそれぞれから受信した複数のエンコード済データを記憶部２２に記憶させる。例えば、記憶制御部２３４は、現在時刻から所定時間前までのエンコード済データを記憶部２２に記憶させる。例えば、記憶制御部２３４は、受信部２３１が第１撮影側装置１から連続して受信する各時刻に対応する複数のエンコード済データと、当該エンコード済データを受信した時刻とを関連付けて記憶部２２に記憶させる。記憶部２２に記憶されるエンコード済データは、第１撮影側装置１に再送するために用いられる。

選択部２３５は、デコード部２３２が復元した複数の映像データのうち、一つの映像データを選択する。例えば、情報処理装置２は、放送用映像データを選択するための装置であるスイッチャと通信可能に接続されている。選択部２３５は、スイッチャから、選択された映像データを識別するための映像データ識別情報を受信することにより、複数の映像データの中から、受信した映像データ識別情報に対応する一つの映像データを選択する。

選択部２３５は、一つの映像データを選択したことに応じて、第１撮影側装置１に対して自身が撮影した映像データが放送用データとして選択されているか否かを示す通知信号としてのタリー信号を送信する。例えば、選択部２３５は、選択した映像データに対応する第１撮影側装置１に、タリー信号として、当該映像データがテレビ放送に用いる放送用映像データとして選択されたことを示す赤色点灯指示信号を送信する。また、選択部２３５は、一つの映像データを選択したことに応じて、当該映像データを選択する直前に選択されていた映像データに対応する第１撮影側装置１に、タリー信号として、当該映像データがテレビ放送に用いる放送用映像データとして選択されていないことを示す緑色点灯指示信号を送信する。

なお、選択部２３５は、特定の第１撮影側装置１からの応答がなくなった場合には、不図示のスイッチャや表示装置などを通じて、当該第１撮影側装置１に対応する映像データを選択しないように制御してもよい。この場合、選択部２３５は、応答がない第１撮影側装置１に対応する映像データを選択しないように制御してもよい。このようにすることで、テレビ放送中に、応答がない第１撮影側装置１に対応する映像データが選択されてしまうことを防止することができる。

配信部２３６は、受信部２３１が受信した複数のエンコード済データのうち、選択部２３５が選択した映像データに対応するエンコード済データを、複数の第１撮影側装置１に配信する。ここで、配信部２３６は、選択部２３５が選択した映像データに対応するエンコード済データを複数の第１撮影側装置１に配信してから複数の第１撮影側装置それぞれの第１表示制御部１６６が当該エンコード済データに対応する映像データの表示を開始するまでの時間である遅延時間を特定してもよい。

例えば、配信部２３６は、選択部２３５が選択した映像データに対応するエンコード済データを複数の第１撮影側装置１それぞれに配信した時刻である配信開始時刻を特定する。また、配信部２３６は、複数の第１撮影側装置１それぞれが当該エンコード済データをデコードして復元した映像データが示す映像を第１表示部１４に表示させた時刻である表示開始時刻を示す時刻情報を、受信部２３１を介して、複数の第１撮影側装置１それぞれから受信し、当該表示開始時刻を特定する。そして、配信部２３６は、配信開始時刻と、複数の第１撮影側装置１それぞれに対応する表示開始時刻とに基づいて、複数の第１撮影側装置１それぞれに対応する遅延時間を特定する。

配信部２３６は、複数の第１撮影側装置１それぞれに対して特定した遅延時間に基づいて複数の第１撮影側装置１それぞれに対するエンコード済データの配信時刻を調整する。これにより、配信部２３６は、複数の第１撮影側装置１それぞれの第１表示制御部１６６による当該エンコード済データに対応する映像データの表示を開始する時刻が同じ時刻となるように、エンコード済データを複数の第１撮影側装置に配信する。このようにすることで、情報処理装置２は、複数の第１撮影側装置１それぞれにおけるエンコード済データのデコードに係る遅延時間等を考慮して、第１撮影側装置１それぞれに、エンコード済データに対応する映像データを同じタイミングで表示させることができる。

また、配信部２３６は、受信部２３１を介して、複数の第１撮影側装置１の少なくともいずれかからエンコード済データの再送要求を受け付ける。配信要求には、第１撮影側装置１で再送を要求するエンコード済データに対応する撮影時刻が含まれている。配信部２３６は、エンコード済データの再送要求を受け付けると、配送要求に含まれている撮影時刻に基づいて、再送要求を送信した第１撮影側装置１に、記憶部２２に記憶されている、当該撮影時刻以降の当該エンコード済データを再配信する。

配信部２３６は、複数の第１撮影側装置１の少なくともいずれかから所定の撮影時刻に対応するエンコード済データの再配信要求を受け付けた場合に、当該撮影時刻に対応するエンコード済データが記憶部２２に記憶されていない場合、当該エンコード済データの送信元の第１撮影側装置１に、当該撮影時刻に対応するエンコード済データの取得要求を送信する。取得要求には、再送を要求するエンコード済データに対応する撮影時刻が含まれている。

第１撮影側装置１の第１撮影側送信部１６２は、エンコード済データの取得要求を取得すると、当該取得要求に含まれている撮影時刻に基づいて、情報処理装置２に、第１記憶部１５に記憶されている、当該撮影時刻以降の当該エンコード済データを再送信する。配信部２３６は、配送要求に含まれている撮影時刻に対応するエンコード済データを第１撮影側装置１から取得し、取得したエンコード済データを、再送要求を送信した第１撮影側装置１に再配信する。

再送要求を送信した第１撮影側装置１の第１表示制御部１６６は、第１撮影側デコード部１６５が復元した、再配信された映像データを第１表示部１４に表示させる。この場合、第１表示制御部１６６は、例えば、再配信された映像データが示す映像を、映像に対応するフレームの一部をスキップして第１表示部１４に表示させる。このようにすることで、第１撮影側装置１は、映像データの表示遅れを早期に解消するようにすることができる。

［動作フロー］
続いて、情報処理装置２に係る処理の流れについて説明する。図４は、情報処理装置２における処理の流れの一例を示すフローチャートである。なお、本フローチャートに係る処理を実施する前に、情報処理装置２の出力部２３３が、選択部２３５により選択されている映像データを外部装置３に出力するとともに、配信部２３６が当該映像データに対応するエンコード済データを複数の第１撮影側装置１に配信しているものとする。

まず、受信部２３１は、複数の第１撮影側装置１それぞれから無線通信によりエンコード済データを受信する（Ｓ１）。
続いて、デコード部２３２は、複数の第１撮影側装置１それぞれから受信した複数のエンコード済データをデコードして、複数の映像データを復元する（Ｓ２）。

続いて、出力部２３３は、デコード部２３２が復元した複数の映像データを表示装置に出力する（Ｓ３）。
続いて、選択部２３５は、映像データを新たに選択したか否かを判定する（Ｓ４）。選択部２３５は、映像データを新たに選択したと判定すると（Ｓ４のＹＥＳ）、Ｓ５に処理を移し、映像データを新たに選択していないと判定すると（Ｓ４のＮＯ）、Ｓ１に処理を戻す。

Ｓ５において、選択部２３５は、外部装置３に出力する映像データを新たに選択された映像データに切り換える。
続いて、配信部２３６は、複数の第１撮影側装置１に出力するエンコード済データを、新たに選択されたエンコード済データに切り換える（Ｓ６）。

続いて、配信部２３６は、第１撮影側装置１の設定を管理する管理装置（不図示）から、第１撮影側装置１に係る処理の終了指示を受け付けたか否かを判定する（Ｓ７）。配信部２３６は、終了指示を受け付けたと判定すると（Ｓ７のＹＥＳ）、本フローチャートに係る処理を終了し、終了指示を受け付けていないと判定すると（Ｓ７のＮＯ）、Ｓ１に処理を移す。

［変形例１］
上述の実施の形態において、出力部２３３は、選択部２３５が選択した映像データを、テレビ放送に用いる放送用映像データとして外部装置３に出力することとしたが、これに限らない。出力部２３３は、選択部２３５が選択した映像データを、データ配信に用いる配信用映像データとして外部装置３に出力してもよい。

［変形例２］
また、上述の実施の形態において、第１表示制御部１６６は、第１撮影側デコード部１６５が復元した映像データを第１表示部１４に表示させたが、これに限らない。第１表示制御部１６６は、第１撮影側受信部１６３が受信した通知信号に基づいて、自身が有する第１撮影側装置１に対応する映像データが選択部２３５により選択されたと判定すると、第１撮影部１１が生成した映像データを第１表示部１４に表示させるようにしてもよい。

また、配信部２３６は、複数の第１撮影側装置１のうち、選択部２３５が選択した映像データに対応する第１撮影側装置１に対して、当該映像データに対応するエンコード済データを配信しないようにしてもよい。このようにすることで、情報処理装置２は、エンコード済データの配信に必要な通信容量を削減することができる。

［情報処理装置２による効果］
以上説明したように、第１の実施の形態に係る情報処理装置２は、複数の第１撮影側装置１それぞれからエンコード済データを受信し、受信した複数のエンコード済データをデコードし、複数の映像データを復元するとともに、復元した複数の映像データのうち、一つの映像データを選択し、選択した映像データに対応するエンコード済データであって、受信したエンコード済データを各第１撮影側装置１に配信する。このようにすることで、情報処理装置２は、リターン映像を撮影装置側に配信する際の遅延を抑制することができる。

＜第２の実施の形態＞
続いて、第２の実施の形態について説明する。撮影側装置の中には、有線カメラや、アナログカメラといった、映像データをエンコードせずに情報処理装置２に送信する撮影側装置である第２撮影側装置も存在する。これに対し、第２の実施の形態に係る情報処理装置２は、第２撮影側装置から受信する映像データをエンコードする点で第１の実施の形態と異なる。以下に、第２の実施の形態に係る情報処理装置２について説明する。なお、第１の実施の形態と同じ部分については適宜説明を省略する。

［第２撮影側装置４の機能構成］
図５は、第２撮影側装置４の機能構成を示す図である。なお、第２撮影側装置４は、図５に示すように１台の装置により実現されているが、これに限らず、複数の装置により実現されていてもよい。

図５に示すように、第２撮影側装置４は、第２撮影部４１と、第２通信部４２と、第２通知部４３と、第２表示部４４と、第２記憶部４５と、第２制御部４６とを有する。第２撮影部４１、第２通信部４２、第２通知部４３、第２表示部４４、第２記憶部４５の機能は、第１撮影部１１、第１通信部１２、第１通知部１３、第１表示部１４、第１記憶部１５の機能と同様であるので説明を省略する。

第２制御部４６は、例えばＣＰＵである。第２制御部４６は、第２記憶部４５に記憶されたプログラムを実行することにより、第２撮影側送信部４６２、第２撮影側受信部４６３、第２通知制御部４６４、第２撮影側デコード部４６５、及び第２表示制御部４６６として機能する。

第２撮影側送信部４６２は、第２撮影部４１により生成された映像データを、第２通信部４２を介して情報処理装置２に送信する。例えば、第２撮影側送信部４６２は、映像データを、有線通信の通信ネットワークを介して情報処理装置２に送信する。

第２撮影側受信部４６３、第２通知制御部４６４、第２撮影側デコード部４６５、及び第２表示制御部４６６の機能は、第１撮影側受信部１６３、第１通知制御部１６４、第１撮影側デコード部１６５、及び第１表示制御部１６６の機能と同様であるので説明を省略する。

［情報処理装置２の機能構成］
続いて、第２の実施の形態に係る情報処理装置２の機能構成について説明する。図６は、第２の実施の形態に係る情報処理装置２の機能構成を示す図である。

図６に示すように、第２の実施の形態に係る情報処理装置２の制御部２３は、エンコード部２３７を有する。
エンコード部２３７は、受信部２３１が第２撮影側装置４から受信した映像データをエンコードしてエンコード済データを生成する。

配信部２３６は、選択部２３５が選択した映像データ、すなわち、テレビ放送に用いる放送用映像データに対応するエンコード済データを、複数の第１撮影側装置１及び第２撮影側装置４に配信する。

具体的には、配信部２３６は、選択部２３５が選択した映像データが、複数の第１撮影側装置１のいずれかが生成した映像データである場合には、当該映像データに対応するエンコード済データを複数の第１撮影側装置１及び第２撮影側装置４に配信する。また、配信部２３６は、選択部２３５が選択した映像データが、第２撮影側装置４が生成した映像データである場合には、エンコード部２３７が当該映像データをエンコードして生成されたエンコード済データを複数の第１撮影側装置１及び第２撮影側装置４に配信する。

このようにすることで、情報処理装置２は、エンコード機能を備えていない第２撮影側装置４から受信した映像データが選択された場合であっても、当該映像データをエンコードしたエンコード済データを複数の第１撮影側装置１及び第２撮影側装置４に配信することができる。

なお、エンコード部２３７は、受信部２３１が第２撮影側装置４から受信した映像データを無条件にエンコードしてエンコード済データを生成したが、これに限らない。エンコード部２３７は、第２撮影側装置４が生成した映像データを選択部２３５が選択したことに応じて、第２撮影側装置４から受信した映像データをエンコードするようにしてもよい。このようにすることで、情報処理装置２は、第２撮影側装置４が生成した映像データを選択部２３５が選択していない場合に、第２撮影側装置４から受信した映像データがエンコードされないので、エンコードに係る負荷を軽減することができる。

なお、本発明により、国連が主導する持続可能な開発目標（ＳＤＧｓ）の目標９「産業と技術革新の基盤をつくろう」に貢献することが可能となる。

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されず、その要旨の範囲内で種々の変形及び変更が可能である。例えば、装置の全部又は一部は、任意の単位で機能的又は物理的に分散・統合して構成することができる。また、複数の実施の形態の任意の組み合わせによって生じる新たな実施の形態も、本発明の実施の形態に含まれる。組み合わせによって生じる新たな実施の形態の効果は、もとの実施の形態の効果を併せ持つ。

１ 第１撮影側装置
２ 情報処理装置
３ 外部装置
４ 第２撮影側装置
１１ 第１撮影部
１２ 第１通信部
１３ 第１通知部
１４ 第１表示部
１５ 第１記憶部
１６ 第１制御部
２１ 通信部
２２ 記憶部
２３ 制御部
４１ 第２撮影部
４２ 第２通信部
４３ 第２通知部
４４ 第２表示部
４５ 第２記憶部
４６ 第２制御部
１６１ 第１エンコード部
１６２ 第１撮影側送信部
１６３ 第１撮影側受信部
１６４ 第１通知制御部
１６５ 第１撮影側デコード部
１６６ 第１表示制御部
２３１ 受信部
２３２ デコード部
２３３ 出力部
２３４ 記憶制御部
２３５ 選択部
２３６ 配信部
２３７ エンコード部
４６２ 第２撮影側送信部
４６３ 第２撮影側受信部
４６４ 第２通知制御部
４６５ 第２撮影側デコード部
４６６ 第２表示制御部
Ｓ 情報処理システム

Claims (14)

1. 情報処理装置と、複数の第１撮影側装置と、複数の前記第１撮影側装置と異なる第２撮影側装置とを有する情報処理システムであって、
   前記複数の第１撮影側装置それぞれは、
   撮影を行うことにより映像データを生成する第１撮影部と、
   前記第１撮影部が生成した映像データをエンコードする第１エンコード部と、
   エンコードされた映像データであるエンコード済データを前記情報処理装置に送信する第１撮影側送信部と、
   前記情報処理装置から配信されたエンコード済データを受信する第１撮影側受信部と、
   前記第１撮影側受信部が受信したエンコード済データをデコードして映像データを復元する第１撮影側デコード部と、
   前記第１撮影側デコード部が復元した映像データを表示部に表示させる第１表示制御部と、
   を有し、
   前記第２撮影側装置は、
   撮影を行うことにより映像データを生成する第２撮影部と、
   前記第２撮影部が生成した映像データを前記情報処理装置に送信する第２撮影側送信部と、
   前記情報処理装置から配信されたエンコード済データを受信する第２撮影側受信部と、
   前記第２撮影側受信部が受信したエンコード済データをデコードして映像データを復元する第２撮影側デコード部と、
   前記第２撮影側デコード部が復元した映像データを表示部に表示させる第２表示制御部と、
   を有し、
   前記情報処理装置は、
   複数の前記第１撮影側装置それぞれからエンコード済データを受信し、前記第２撮影側装置から映像データを受信する受信部と、
   前記受信部が前記第２撮影側装置から受信した映像データをエンコードするエンコード部と、
   複数の前記第１撮影側装置それぞれから受信した複数のエンコード済データをデコードし、複数の映像データを復元するデコード部と、
   前記デコード部により復元された複数の映像データと、前記第２撮影側装置から受信した映像データとのうち、一つの映像データを選択する選択部と、
   前記選択部が選択した映像データに対応するエンコード済データを複数の前記第１撮影側装置と前記第２撮影側装置とに配信する配信部と、
   を有する、
   情報処理システム。
2. 情報処理装置と、複数の第１撮影側装置とを有する情報処理システムであって、
   前記複数の第１撮影側装置それぞれは、
   撮影を行うことにより映像データを生成する第１撮影部と、
   前記第１撮影部が生成した映像データをエンコードする第１エンコード部と、
   エンコードされた映像データであるエンコード済データを前記情報処理装置に送信する第１撮影側送信部と、
   前記情報処理装置から配信されたエンコード済データを受信する第１撮影側受信部と、
   前記第１撮影側受信部が受信したエンコード済データをデコードして映像データを復元する第１撮影側デコード部と、
   前記第１撮影側デコード部が復元した映像データを表示部に表示させる第１表示制御部と、
   を有し、
   前記情報処理装置は、
   複数の前記第１撮影側装置それぞれからエンコード済データを受信する受信部と、
   複数の前記第１撮影側装置それぞれから受信した複数のエンコード済データをデコードし、複数の映像データを復元するデコード部と、
   前記デコード部により復元された複数の映像データのうち、一つの映像データを選択する選択部と、
   前記選択部が選択した映像データに対応するエンコード済データを複数の前記第１撮影側装置に配信し、前記エンコード済データを複数の前記第１撮影側装置に配信してから複数の前記第１撮影側装置それぞれが当該エンコード済データに対応する映像データの表示を開始するまでの時間である遅延時間を特定し、複数の前記第１撮影側装置それぞれに対して特定した遅延時間に基づいて、複数の前記第１撮影側装置それぞれが当該エンコード済データに対応する映像データの表示を開始する時刻が同じ時刻となるように前記エンコード済データを複数の前記第１撮影側装置に配信する配信部と、
   を有する、
   情報処理システム。
3. 情報処理装置と、複数の第１撮影側装置とを有する情報処理システムであって、
   前記複数の第１撮影側装置それぞれは、
   撮影を行うことにより映像データを生成する第１撮影部と、
   前記第１撮影部が生成した映像データをエンコードする第１エンコード部と、
   エンコードされた映像データであるエンコード済データを前記情報処理装置に送信する第１撮影側送信部と、
   前記情報処理装置から配信されたエンコード済データを受信する第１撮影側受信部と、
   前記第１撮影側受信部が受信したエンコード済データをデコードして映像データを復元する第１撮影側デコード部と、
   前記第１撮影側デコード部が復元した映像データを表示部に表示させる第１表示制御部と、
   を有し、
   前記情報処理装置は、
   複数の前記第１撮影側装置それぞれからエンコード済データを受信する受信部と、
   前記受信部が複数の前記第１撮影側装置それぞれから受信した複数のエンコード済データを記憶部に記憶させる記憶制御部と、
   複数の前記第１撮影側装置それぞれから受信した複数のエンコード済データをデコードし、複数の映像データを復元するデコード部と、
   前記デコード部により復元された複数の映像データのうち、一つの映像データを選択する選択部と、
   前記選択部が選択した映像データに対応するエンコード済データであって前記受信部が受信したエンコード済データを複数の前記第１撮影側装置に配信し、複数の前記第１撮影側装置の少なくともいずれかから前記エンコード済データの再送要求を受け付けると、前記再送要求を送信した第１撮影側装置に、前記記憶部に記憶されている当該エンコード済データを再配信する配信部と、
   を有する、
   情報処理システム。
4. 前記記憶制御部は、現在時刻から所定時間前までのエンコード済データを前記記憶部に記憶させ、
   前記配信部は、複数の前記第１撮影側装置の少なくともいずれかから所定時刻に対応するエンコード済データの再配信要求を受け付けた場合に、前記所定時刻に対応するエンコード済データが前記記憶部に記憶されていない場合、当該エンコード済データの送信元の第１撮影側装置から前記所定時刻に対応するエンコード済データを取得し、取得したエンコード済データを、前記再送要求を送信した第１撮影側装置に再配信する、
   請求項３に記載の情報処理システム。
5. 前記第１撮影側送信部は、前記エンコード済データを無線通信により前記情報処理装置に送信し、
   前記受信部は、複数の前記第１撮影側装置それぞれからエンコード済データを無線通信により受信する、
   請求項１から３のいずれか１項に記載の情報処理システム。
6. 前記第１撮影側送信部は、前記エンコード済データを携帯電話機の通信ネットワークを介して前記情報処理装置に送信する、
   請求項５に記載の情報処理システム。
7. 前記第１撮影側装置の前記第１撮影側受信部は、自身を有する当該第１撮影側装置が生成した映像データが、前記選択部により選択された映像データに対応する撮影側装置であるか否かを示す通知信号を受信し、
   前記第１撮影側装置の前記第１表示制御部は、前記第１撮影側受信部が受信した通知信号に基づいて、自身を有する当該第１撮影側装置に対応する映像データが前記選択部により選択されたと判定すると、前記第１撮影部が生成した映像データを前記表示部に表示させる、
   請求項６に記載の情報処理システム。
8. 前記第１撮影側受信部は、映像合成用データを受信し、
   前記第１表示制御部は、取得した映像合成用データと、前記情報処理装置から配信されたエンコード済データからデコードされた映像データとを合成して表示部に表示させる、
   請求項１から３のいずれか１項に記載の情報処理システム。
9. 複数の第１撮影側装置それぞれから、各第１撮影側装置がエンコードした映像データであるエンコード済データを受信し、複数の前記第１撮影側装置と異なる第２撮影側装置であって、エンコード済データを受信し、受信したエンコード済データをデコードして映像データを復元し、復元した映像データを表示部に表示する第２撮影装置から、前記第２撮影側装置が撮影して生成した映像データを受信する受信部と、
   前記受信部が前記第２撮影側装置から受信した映像データをエンコードするエンコード部と、
   複数の前記第１撮影側装置それぞれから受信した複数のエンコード済データをデコードし、複数の映像データを復元するデコード部と、
   前記デコード部により復元された複数の映像データと、前記第２撮影側装置から受信した映像データとのうち、一つの映像データを選択する選択部と、
   前記選択部が選択した映像データに対応するエンコード済データを複数の前記第１撮影側装置と前記第２撮影側装置とに配信する配信部と、
   を有する情報処理装置。
10. 複数の撮影側装置それぞれから、各撮影側装置がエンコードした映像データであるエンコード済データを受信する受信部と、
    複数の前記撮影側装置それぞれから受信した複数のエンコード済データをデコードし、複数の映像データを復元するデコード部と、
    前記デコード部により復元された複数の映像データのうち、一つの映像データを選択する選択部と、
    前記選択部が選択した映像データに対応するエンコード済データを複数の前記撮影側装置に配信し、前記エンコード済データを複数の前記撮影側装置に配信してから複数の前記撮影側装置それぞれが当該エンコード済データに対応する映像データの表示を開始するまでの時間である遅延時間を特定し、複数の前記撮影側装置それぞれに対して特定した遅延時間に基づいて、複数の前記撮影側装置それぞれが当該エンコード済データに対応する映像データの表示を開始する時刻が同じ時刻となるように前記エンコード済データを複数の前記撮影側装置に配信する配信部と、
    を有する情報処理装置。
11. 複数の撮影側装置それぞれから、各撮影側装置がエンコードした映像データであるエンコード済データを受信する受信部と、
    前記受信部が複数の前記撮影側装置それぞれから受信した複数のエンコード済データを記憶部に記憶させる記憶制御部と、
    複数の前記撮影側装置それぞれから受信した複数のエンコード済データをデコードし、複数の映像データを復元するデコード部と、
    前記デコード部により復元された複数の映像データのうち、一つの映像データを選択する選択部と、
    前記選択部が選択した映像データに対応するエンコード済データであって前記受信部が受信したエンコード済データを複数の前記撮影側装置に配信し、複数の前記撮影側装置の少なくともいずれかから前記エンコード済データの再送要求を受け付けると、前記再送要求を送信した撮影側装置に、前記記憶部に記憶されている当該エンコード済データを再配信する配信部と、
    を有する情報処理装置。
12. コンピュータが実行する、
    複数の第１撮影側装置それぞれから、各第１撮影側装置がエンコードした映像データであるエンコード済データを受信し、複数の前記第１撮影側装置と異なる第２撮影側装置であって、エンコード済データを受信し、受信したエンコード済データをデコードして映像データを復元し、復元した映像データを表示部に表示する第２撮影装置から、前記第２撮影側装置が撮影して生成した映像データを受信するステップと、
    前記第２撮影側装置から受信した映像データをエンコードするステップと、
    複数の前記第１撮影側装置それぞれから受信した複数のエンコード済データをデコードし、複数の映像データを復元するステップと、
    復元した複数の映像データと、前記第２撮影側装置から受信した映像データとのうち、一つの映像データを選択するステップと、
    選択した映像データに対応するエンコード済データを複数の前記第１撮影側装置と前記第２撮影側装置とに配信する配信部と、
    を有する情報処理方法。
13. コンピュータが実行する、
    複数の撮影側装置それぞれから、各撮影側装置がエンコードした映像データであるエンコード済データを受信するステップと、
    複数の前記撮影側装置それぞれから受信した複数のエンコード済データをデコードし、複数の映像データを復元するステップと、
    復元した複数の映像データのうち、一つの映像データを選択するステップと、
    選択した映像データに対応するエンコード済データであって、受信したエンコード済データを各撮影側装置に配信し、前記エンコード済データを複数の前記撮影側装置に配信してから複数の前記撮影側装置それぞれが当該エンコード済データに対応する映像データの表示を開始するまでの時間である遅延時間を特定し、複数の前記撮影側装置それぞれに対して特定した遅延時間に基づいて、複数の前記撮影側装置それぞれが当該エンコード済データに対応する映像データの表示を開始する時刻が同じ時刻となるように前記エンコード済データを複数の前記撮影側装置に配信する配信部と、
    を有する情報処理方法。
14. コンピュータが実行する、
    複数の撮影側装置それぞれから、各撮影側装置がエンコードした映像データであるエンコード済データを受信するステップと、
    複数の前記撮影側装置それぞれから受信した複数のエンコード済データを記憶部に記憶させるステップと、
    複数の前記撮影側装置それぞれから受信した複数のエンコード済データをデコードし、複数の映像データを復元するステップと、
    復元した複数の映像データのうち、一つの映像データを選択するステップと、
    選択した映像データに対応するエンコード済データであって、受信したエンコード済データを複数の前記撮影側装置に配信し、複数の前記撮影側装置の少なくともいずれかから前記エンコード済データの再送要求を受け付けると、前記再送要求を送信した撮影側装置に、前記記憶部に記憶されている当該エンコード済データを再配信する配信部と、
    を有する情報処理方法。

Images