JP6445660B1 - ストリーミングデータ配信サーバ及びストリーミングデータ配信方法 - Google Patents

Abstract

【課題】動画像と音声との少なくとも一方を含む複数のストリーミングデータのうちから配信するのに適したストリーミングデータを選択して配信することができるストリーミングデータ配信サーバを提供する。
【解決手段】データ記憶部２４は、複数の配信者端末から送信された、動画像と音声との少なくとも一方を含むストリーミングデータを記憶する。配信データ選択決定部２２６は、複数の配信者端末のうちのいずれかの配信者端末においてストリーミングデータの配信を希望する操作がなされたとき、配信を希望する操作がなされた配信者端末のうちで選択された配信者端末から送信されたストリーミングデータを、視聴者端末へと配信するストリーミングデータと決定する。選択データ配信部２２７は、配信データ選択決定部２２６によって決定された配信者端末から送信されたストリーミングデータを視聴者端末へと配信する。
【選択図】図２

Description

本発明は、動画像と音声との少なくとも一方を含むストリーミングデータを配信するストリーミングデータ配信サーバ及びストリーミングデータ配信方法に関する。

特許文献１及び２には、撮影対象のイベントを複数のカメラによって撮影した動画像を選択して、視聴者端末に配信する動画像配信システムが記載されている。

特開２００３−１４３５９８号公報 特開２０１４−１４７０１６号公報

撮影対象のイベントとしてサッカーの試合を例とすれば、複数のカメラのうちの１つのカメラがシュートをしようとする選手の近くでその選手を撮影しており、残りのカメラはその選手を遠方より撮影しているという場合がある。このような場合、シュートをしようとする選手の近くでその選手を撮影しているカメラによる動画像が視聴者端末へと配信されるのがよい。

テレビ局が複数のカメラを用いてイベントを撮影して放送するときには、スイッチャというシステムを用い、スイッチャのオペレータが複数の動画像の全体を見ながら放送に適した動画像を選択する。ところが、特許文献１及び２に記載のような動画像配信システムにおいては、スイッチャのオペレータは存在しないので、複数の動画像のうち放送（配信）するのに適した動画像を選択することができない。動画像の代わりに音声でも同様である。

本発明は、動画像と音声との少なくとも一方を含む複数のストリーミングデータのうちから配信するのに適したストリーミングデータを選択して配信することができるストリーミングデータ配信サーバ及びストリーミングデータ配信方法を提供することを目的とする。

本発明は、複数の配信者端末から送信された、動画像と音声との少なくとも一方を含む複数のストリーミングデータを記憶するデータ記憶部と、前記複数の配信者端末のうちのいずれかの配信者端末において、ストリーミングデータの配信を希望する配信者端末を募集する所定の期間内に、前記配信者端末に設けられた、ストリーミングデータの配信を希望するときに操作される操作部が操作されたとき、前記操作部が操作された配信者端末のうちで選択された配信者端末から送信されたストリーミングデータを、視聴者端末へと配信するストリーミングデータと決定する配信データ選択決定部と、前記配信データ選択決定部によって決定された配信者端末から送信されたストリーミングデータを前記データ記憶部より読み出して視聴者端末へと配信する選択データ配信部とを備えるストリーミングデータ配信サーバを提供する。

本発明は、複数の配信者端末から送信された、動画像と音声との少なくとも一方を含む複数のストリーミングデータをストリーミングデータ配信サーバが備えるデータ記憶部に記憶させ、前記複数の配信者端末のうちのいずれかの配信者端末において、ストリーミングデータの配信を希望する配信者端末を募集する所定の期間内に、前記配信者端末に設けられた、ストリーミングデータの配信を希望するときに操作される操作部が操作されたとき、前記ストリーミングデータ配信サーバが備える配信データ選択決定部が、前記操作部が操作された配信者端末のうちで選択された配信者端末から送信されたストリーミングデータを、視聴者端末へと配信するストリーミングデータと決定し、前記ストリーミングデータ配信サーバが備える選択データ配信部が、前記配信データ選択決定部が決定した配信者端末から送信されたストリーミングデータを前記データ記憶部より読み出して視聴者端末へと配信するストリーミングデータ配信方法を提供する。

本発明のストリーミングデータ配信サーバ及びストリーミングデータ配信方法によれば、動画像と音声との少なくとも一方を含む複数のストリーミングデータのうちから配信するのに適したストリーミングデータを選択して配信することができる。

一実施形態のストリーミングデータ配信サーバを備えるストリーミングデータ配信システムの構成例を示すブロック図である。 一実施形態のストリーミングデータ配信サーバを示すブロック図である。 配信者端末の具体的な構成例を示すブロック図である。 視聴者端末の具体的な構成例を示すブロック図である。 複数の配信者端末がイベントを撮影する例を示す図である。 配信データ選択決定部が、複数の配信者端末から送信されるストリーミングデータの中から視聴者端末に配信するストリーミングデータを選択する選択方法の第１の例を概念的に示す図である。 配信データ選択決定部が、複数の配信者端末から送信されるストリーミングデータの中から視聴者端末に配信するストリーミングデータを選択する選択方法の第２の例を概念的に示す図である。 配信者端末に表示する配信応募ボタンの一例を示す図である。 動画像を配信している配信者端末に表示するマークの一例を示す図である。 配信者端末に表示する配信応募ボタンを非アクティブにした状態を示す図である。 時間の進行に伴って、複数の配信者端末から送信されるストリーミングデータが選択されて配信される例を示す図である。 複数のカメラを備える配信者端末の具体的な構成例を示すブロック図である。 複数のカメラを備える配信者端末から送信されるストリーミングデータを受信するストリーミングデータ配信サーバの構成例を示す部分ブロック図である。 サブ動画像によるフレームに付加情報を重畳する例を示す図である。 メイン動画像のフレームにサブ動画像のフレームをピクチャ・イン・ピクチャで合成した例を示す図である。 サブ動画像のフレームにメイン動画像のフレームをピクチャ・イン・ピクチャで合成した例を示す図である。

以下、一実施形態のストリーミングデータ配信サーバ及びストリーミングデータ配信方法について、添付図面を参照して説明する。

まず、図１を用いて、ストリーミングデータ配信システムの全体的な構成例を説明する。図１において、ネットワーク１には、ストリーミングデータ配信サーバ２、複数の配信者端末３ａ〜３ｃ、複数の視聴者端末４ａ〜４ｃが接続されている。ストリーミングデータ配信サーバ２は、一実施形態のストリーミングデータ配信サーバである。ネットワーク１は、インターネットまたはその他の任意のネットワークである。

配信者端末３ａ〜３ｃ及びその他の配信者端末を配信者端末３と総称する。視聴者端末４ａ〜４ｃ及びその他の視聴者端末を視聴者端末４と総称する。図１では、配信者端末３及び視聴者端末４を３つずつとしているが、配信者端末３は２つ以上であればよく、視聴者端末４は少なくとも１つであればよい。配信者端末３は、パーソナルコンピュータ、タブレット端末、スマートフォン、通信機能を有するビデオカメラ等の任意の通信機器であり、視聴者端末４は、パーソナルコンピュータ、タブレット端末、スマートフォン等の任意の通信機器である。

配信者端末３ａ〜３ｃは、それぞれ、カメラ３６ａ〜３６ｃを内蔵している。カメラ３６ａ〜３６ｃは、配信者端末３ａ〜３ｃに対して外付けされていてもよい。カメラ３６ａ〜３６ｃ及びその他のカメラをカメラ３６と総称する。ここでは図示していないが、配信者端末３はカメラ３６に加えてマイクロホンを備えていてもよいし、カメラ３６に代えてマイクロホンを備えていてもよい。

図２は、ストリーミングデータ配信サーバ２の具体的な構成例を示している。ストリーミングデータ配信サーバ２は、通信部２１、中央処理装置２２、記憶部２３、データ記憶部２４を備える。通信部２１は、ネットワーク１を介して配信者端末３または視聴者端末４と通信する。記憶部２３は非一時的な記憶媒体であり、記憶部２３にはストリーミングデータ配信サーバ２を制御するストリーミングデータ配信サーバ制御プログラムが記憶されている。データ記憶部２４は、配信者端末３から送信されたストリーミングデータを一時的に記憶する。データ記憶部２４はＶＲＡＭによって構成することができる。

中央処理装置２２は、ストリーミングデータ配信サーバ制御プログラムを実行する。これにより、中央処理装置２２は、機能的な構成として、時計２２１、配信者募集制御部２２２、配信者端末情報保持部２２３、配信者端末指示部２２４、書き込み・読み出し制御部２２５、配信データ選択決定部２２６、選択データ配信部２２７、視聴者端末情報保持部２２８を備える。

配信者募集制御部２２２は、予め、１つのイベントに対して動画像と音声との少なくとも一方を含むストリーミングデータを配信する配信者端末３を募集する。配信者端末指示部２２４は、通信部２１及びネットワーク１を介して、複数の配信者端末３に対して、ストリーミングデータを配信する配信者端末３に応募するため処理を実行するよう指示する。配信者端末情報保持部２２３は、応募してきた配信者端末３の情報を保持する。

視聴者端末情報保持部２２８は、ストリーミングデータの配信を受ける視聴者端末４の情報を保持する。同様に、予め、図示を省略している視聴者募集制御部が１つのイベントに対してストリーミングデータの配信を受ける視聴者端末４を募集し、視聴者端末情報保持部２２８は応募してきた視聴者端末４の情報を保持する。

配信者端末３は、個々の配信者端末３（または配信者）を識別するための識別情報と、カメラ３６によって撮影した動画像とマイクロホンによって収音した音声との少なくとも一方を含むストリーミングデータを、ネットワーク１を介してストリーミングデータ配信サーバ２に送信する。書き込み・読み出し制御部２２５は、通信部２１より入力されたストリーミングデータをデータ記憶部２４に一時的に記憶する。配信者の識別情報は、配信者のユーザ属性を含んでもよい。

配信者端末指示部２２４は、配信者端末３の識別情報に基づき、配信者端末情報保持部２２３に保持された配信者端末３（または配信者）の情報を参照して、ストリーミングデータを送信した配信者端末３に対して後述する情報を表示するよう指示する。

配信データ選択決定部２２６は、複数の配信者端末３から送信されるストリーミングデータのうち、どの配信者端末３から送信されるストリーミングデータを選択して視聴者端末４へと配信するかを決定する。配信データ選択決定部２２６がどのようにストリーミングデータを選択するかについては後に詳述する。

選択データ配信部２２７は、配信データ選択決定部２２６が選択した配信者端末３からのストリーミングデータをデータ記憶部２４より読み出すよう書き込み・読み出し制御部２２５に指示する。選択データ配信部２２７は、書き込み・読み出し制御部２２５によって読み出したストリーミングデータを、通信部２１及びネットワーク１を介して視聴者端末４へと配信する。

ここでは、時計２２１〜視聴者端末情報保持部２２８をソフトウェアによって構成しているが、回路等のハードウェアによって構成してもよく、ソフトウェアとハードウェアとが混在していてもよく、両者の使い分けは任意である。例えば、時計２２１は、中央処理装置２２の外部に設けられたＲＴＣ（Real Time Clock）であってもよい。

図３は、配信者端末３の具体的な構成例を示している。配信者端末３は、通信部３１、中央処理装置３２、記憶部３３、データ記憶部３４、不揮発性メモリ３５、カメラ３６、マイクロホン３７、表示部３８、操作部３９を備える。通信部３１は、ネットワーク１を介してストリーミングデータ配信サーバ２と通信する。記憶部３３は非一時的な記憶媒体であり、記憶部３３には配信者端末３を制御する配信者端末制御プログラムが記憶されている。

データ記憶部３４はＶＲＡＭによって構成することができる。不揮発性メモリ３５は例えばEEPROM（Electrically Erasable Programmable Read Only Memory）であり、配信者端末３の識別情報を記憶している。操作部３９は一例として表示部３８の画面上に配置されたタッチパネルである。操作部３９は操作ボタンであってもよい。

中央処理装置３２は、配信者端末制御プログラムを実行する。これにより、中央処理装置３２は、機能的な構成として、操作検出部３２１、操作信号送信部３２２、指示信号受信部３２３、オンスクリーンディスプレイ（ＯＳＤ）制御部３２４、データ圧縮部３２５、データ送信制御部３２６を備える。

操作検出部３２１は、操作部３９による操作を検出する。操作信号送信部３２２は、操作検出部３２１が検出した操作部３９による操作に応答した操作信号を、通信部３１及びネットワーク１を介してストリーミングデータ配信サーバ２に送信する。配信者端末３がストリーミングデータを配信する配信者端末３としてストリーミングデータ配信サーバ２に応募するとき、操作信号送信部３２２は不揮発性メモリ３５に記憶されている配信者端末３の情報を送信する。

指示信号受信部３２３は、ストリーミングデータ配信サーバ２の配信者端末指示部２２４からの指示信号を受信する。ＯＳＤ制御部３２４は、指示信号に応じて、カメラ３６から出力される動画像にオンスクリーン情報を重畳する。オンスクリーン情報は、文字、記号または画像である。ＯＳＤ制御部３２４は、操作検出部３２１が検出した操作部３９による操作に応じて、動画像にオンスクリーン情報を重畳することがある。

カメラ３６から出力された動画像は、ＯＳＤ制御部３２４を介して表示部３８に供給されて表示される。データ圧縮部３２５は、カメラ３６から出力された動画像をデータ記憶部３４に一時的に記憶させながら、所定のフォーマットに圧縮符号化する。データ圧縮部３２５は、動画像の圧縮フォーマットとして、例えば、H.264/MPEG-4 AVC、H.265/HEVC等の任意の圧縮フォーマットを採用することができる。

また、データ圧縮部３２５は、マイクロホンから出力された音声をデータ記憶部３４に一時的に記憶させながら、所定のフォーマットに圧縮符号化する。データ圧縮部３２５は、音声の圧縮フォーマットとして、例えば、ＡＡＣ、ＭＰ３等の任意の圧縮フォーマットを採用することができる。

データ送信制御部３２６は、データ圧縮部３２５より出力された圧縮動画像及び圧縮音声に不揮発性メモリ３５に記憶されている配信者端末３の情報を付加したストリーミングデータを生成して、通信部３１によってストリーミングデータ配信サーバ２に送信するよう制御する。

ここでは、操作検出部３２１〜データ送信制御部３２６をソフトウェアによって構成しているが、回路等のハードウェアによって構成してもよく、ソフトウェアとハードウェアとが混在していてもよく、両者の使い分けは任意である。

配信者端末３は、視聴者端末４へと配信する実データとして、動画像及び音声を含むストリーミングデータを配信してもよいし、動画像のみを含むストリーミングデータを配信してもよいし、音声のみを含むストリーミングデータを配信してもよい。配信者端末３が動画像のみを含むストリーミングデータを配信する場合には、マイクロホン３７は省略可能である。配信者端末３が音声のみを含むストリーミングデータを配信する場合には、カメラ３６は省略可能である。

図４は、視聴者端末４の具体的な構成例を示している。視聴者端末４は、通信部４１、中央処理装置４２、記憶部４３、データ記憶部４４、不揮発性メモリ４５、表示部４６、操作部４７、スピーカ４８を備える。通信部４１は、ネットワーク１を介してストリーミングデータ配信サーバ２と通信する。記憶部４３は非一時的な記憶媒体であり、記憶部４３には視聴者端末４を制御する視聴者端末制御プログラムが記憶されている。

データ記憶部４４はＶＲＡＭによって構成することができる。不揮発性メモリ４５は例えばEEPROMであり、視聴者端末４の識別情報を記憶している。操作部４７は一例として表示部４６の画面上に配置されたタッチパネルである。操作部４７は操作ボタンであってもよい。表示部４６は配信された動画像を表示し、スピーカ４８は配信された音声を出力する。

中央処理装置４２が視聴者端末制御プログラムを実行することにより、中央処理装置４２は、機能的な構成として、操作検出部４２１、操作信号送信部４２２、データ伸張部４２３、オンスクリーンディスプレイ（ＯＳＤ）制御部４２４を備える。

操作検出部４２１は、操作部４７による操作を検出する。操作信号送信部４２２は、操作検出部４２１が検出した操作部４７による操作に応答した操作信号を、通信部４１及びネットワーク１を介してストリーミングデータ配信サーバ２に送信する。視聴者端末４がストリーミングデータの配信を受ける視聴者端末４としてストリーミングデータ配信サーバ２に応募するとき、操作信号送信部４２２は不揮発性メモリ４５に記憶されている視聴者端末４の情報を送信する。

データ伸張部４２３は、ストリーミングデータ配信サーバ２から配信されたストリーミングデータに含まれる圧縮動画像を、データ記憶部４４に一時的に記憶させながら伸張して、ＯＳＤ制御部４２４に供給する。また、データ伸張部４２３は、ストリーミングデータに含まれる圧縮音声を、データ記憶部４４に一時的に記憶させながら伸張して、スピーカ４８に供給する。データ伸張部４２３は、データ圧縮部３２５における圧縮フォーマットに対応して圧縮動画像及び圧縮音声を伸張する。

ＯＳＤ制御部４２４は、操作検出部４２１が検出した操作部４７による操作に応じて、動画像にオンスクリーン情報を重畳することがある。ＯＳＤ制御部４２４から出力された動画像は、表示部４６に供給されて表示される。

ここでは、操作検出部４２１〜ＯＳＤ制御部４２４をソフトウェアによって構成しているが、回路等のハードウェアによって構成してもよく、ソフトウェアとハードウェアとが混在していてもよく、両者の使い分けは任意である。

配信されるストリーミングデータが動画像のみを含む場合には、スピーカ４８は省略可能である。配信されるストリーミングデータが音声のみを含む場合には、表示部４６は省略可能である。

次に、撮影対象のイベントとしてサッカーの試合を例とし、図１に示すストリーミングデータ配信システムを用いて、サッカーの試合がどのように撮影されて視聴者端末４へと配信されるかについて説明する。ここでは動画像の配信を例として説明する。簡略化のため、配信者端末３は配信者端末３ａ〜３ｃの３つであるとする。

図５に示すように、配信者端末３ａは、スタジアム１００のメインスタンド１００Ｍの２階席に位置しており、配信者端末３ｂ及び３ｃは、バックスタンド１００Ｂの１階席に位置しているとする。配信者端末３ｂはゴール１０３ａ及び１０３ｂのほぼ中央に位置しており、配信者端末３ｃはゴール１０３ｂに比較的近い場所に位置している。配信者端末３ａ〜３ｃは、ピッチ１０２で行われる試合を撮影する。

図６は、図２に示す配信データ選択決定部２２６が、配信者端末３ａ〜３ｃから送信される動画像の中から視聴者端末４に配信する動画像を選択する選択方法の第１の例を概念的に示している。

図６の（ａ）に示すように、配信者募集制御部２２２は、時刻ｔ１〜ｔ２の募集期間に、予め登録した複数の配信者端末３に対して、動画像の配信を希望する配信者端末３を募集する。配信者端末指示部２２４は、図８に示すように、例えば「配信希望」と表記された配信応募ボタン３８１を表示するよう配信者端末３ａ〜３ｃに指示する。配信者端末３の指示信号受信部３２３は、配信者端末指示部２２４からの指示を受けて、表示部３８に配信応募ボタン３８１を表示するようＯＳＤ制御部３２４に指示する。

図６の（ｂ）に示すように、時刻ｔ１〜ｔ２の募集期間に、配信者端末３ｂと配信者端末３ａとがこの順で応募したとする。図６の（ｂ）及び後述する図７の（ｂ）に示す上向きの矢印は、配信者端末３が応募したタイミングを概念的に示している。

具体的には、配信者端末３ａ及び３ｂを所持する配信者が配信応募ボタン３８１を操作すると、操作信号送信部３２２はストリーミングデータ配信サーバ２に募集に応募したことを示す操作信号を送信する。操作信号は配信者端末３の識別情報を含む。操作信号は、配信データ選択決定部２２６に入力される。

第１の例においては、配信データ選択決定部２２６は、応募してきた配信者端末３ａ及び３ｂとで抽選して、動画像を配信するいずれか１つの配信者端末３を決定する。ここでは、抽選の結果、配信者端末３ａが選択されて、動画像を配信する配信者端末３と決定したとする。

選択データ配信部２２７は、データ記憶部２４に記憶されている配信者端末３ａ〜３ｃからの動画像のうち、配信者端末３ａからの動画像を読み出すよう書き込み・読み出し制御部２２５に指示する。図６の（ｃ）に示すように、選択データ配信部２２７は、データ記憶部２４より読み出された配信者端末３ａからの動画像を時刻ｔ３〜ｔ６の期間だけ視聴者端末４へと配信する。

図６の（ｃ）及び後述する図７の（ｃ）において、ハッチングを付している期間が視聴者端末４へと配信されている期間を示している。選択された１つの配信者端末３が動画像を配信する時間は例えば１分間または２分間のような固定時間とする。

配信者端末指示部２２４は、動画像を配信する配信者端末３と決定した配信者端末３に対して、動画像を配信する配信者端末３に選択されたことを示す表示をするよう指示する。指示を受けた配信者端末３のＯＳＤ制御部３２４は、図９に示すように、表示部３８に、配信応募ボタン３８１に代えて、例えば「配信中」と表記されたマーク３８２を表示させる。

マーク３８２を表示する代わりに、配信応募ボタン３８１の色または輝度を異ならせてもよい。配信者が自分の配信者端末３が動画像を配信する配信者端末３として選択されているか否かを認識できればよい。

図６の（ａ）に示すように、配信者募集制御部２２２は、配信者端末３ａからの動画像を配信している時刻ｔ３〜ｔ６が終了する前の時刻ｔ４〜ｔ５に再び募集期間を設定し、動画像の配信を希望する配信者端末３を募集する。このとき、配信者端末指示部２２４は、直前の抽選で選択された配信者端末３ａに対して、図１０に示すように、配信応募ボタン３８１を非アクティブの状態とするよう指示して、操作検出部３２１が配信応募ボタン３８１の操作を無効化することが好ましい。

このようにすれば、直前の抽選で選択された配信者端末３ａを所持する配信者は、自己の配信者端末３ａが動画像の配信する配信者端末３として応募できないことを認識することができる。配信応募ボタン３８１を非アクティブの状態とする代わりに、配信応募ボタン３８１を消去してもよい。動画像を配信する配信者端末３として選択された配信者端末３を、どの程度の期間（どの程度の抽選回数）、応募できないようにするかは、適宜に設定すればよい。

図６の（ｂ）に示すように、時刻ｔ４〜ｔ５の募集期間に、配信者端末３ｃと配信者端末３ｂがこの順で応募したとする。配信データ選択決定部２２６は、応募してきた配信者端末３ｂ及び３ｃで抽選して、動画像を配信するいずれか１つの配信者端末３を決定する。ここでは、抽選の結果、配信者端末３ｂが選択されて、動画像を配信する配信者端末３と決定したとする。

図６の（ｃ）に示すように、選択データ配信部２２７は、時刻ｔ６以降、データ記憶部２４より読み出された配信者端末３ｂからの動画像を視聴者端末４へと配信する。

ここでは、少なくとも直前の抽選で選択された配信者端末３を応募可能な配信者端末３から除外したが、過去に動画像を配信する配信者端末３として選択されたか否かにかかわらず応募可能として、配信データ選択決定部２２６は応募してきた全ての配信者端末３で抽選してもよい。配信者端末３の数が多い場合には、連続して同じ配信者端末３が選択される可能性は低くなるため、問題となることはほぼない。

図７は、配信データ選択決定部２２６が視聴者端末４に配信する動画像を選択する選択方法の第２の例を概念的に示している。

図７の（ａ）に示すように、配信者募集制御部２２２は、時刻ｔ１〜ｔ２の募集期間に、予め登録した複数の配信者端末３に対して、動画像の配信を希望する配信者端末３を募集する。図７の（ｂ）に示すように、時刻ｔ１〜ｔ２の募集期間に、配信者端末３ｂと配信者端末３ａとがこの順で応募したとする。

第２の例においては、配信データ選択決定部２２６は、募集する期間の開始時点である時刻ｔ１以降で最も早く応募した配信者端末３を、動画像を配信する配信者端末３として決定する。ここでは、配信者端末３ｂが選択される。図７の（ｃ）に示すように、選択データ配信部２２７は、データ記憶部２４より読み出された配信者端末３ｂからの動画像を時刻ｔ３〜ｔ６の期間だけ視聴者端末４へと配信する。

図７の（ａ）に示すように、配信者募集制御部２２２は、配信者端末３ｂからの動画像を配信している時刻ｔ３〜ｔ６が終了する前の時刻ｔ４〜ｔ５に再び募集期間を設定し、動画像の配信を希望する配信者端末３を募集する。図７の（ｂ）に示すように、時刻ｔ４〜ｔ５の募集期間に、配信者端末３ｃと配信者端末３ａがこの順で応募したとする。配信データ選択決定部２２６は、募集する期間の開始時点である時刻ｔ４以降で最も早く応募した配信者端末３ｃを、動画像を配信する配信者端末３として決定する。

図７の（ｃ）に示すように、選択データ配信部２２７は、時刻ｔ６以降、データ記憶部２４より読み出された配信者端末３ｃからの動画像を視聴者端末４へと配信する。

第２の例においても、少なくとも直前の抽選で選択された配信者端末３を応募可能な配信者端末３から除外することが好ましい。

第２の例において、募集期間の開始を配信者に知らせるために、配信者端末指示部２２４が配信者端末３に対して表示部３８にカウントダウンを表示するよう指示してもよい。第２の例においては、募集期間を第１の例における応募期間よりも短くしてもよい。

図６及び図７に示す例では、募集期間を離散的に設定しているが、募集期間を連続的に設定してもよい。動画像を配信する配信者端末３を募集して１つの配信者端末３を選択したら、できるだけ即座に選択した配信者端末３からの動画像を視聴者端末４へと配信するのがよい。

配信データ選択決定部２２６は、配信者の識別情報に含まれるユーザ属性に基づいて
配信者端末３を選択してもよい。配信者の区分としてプレミアム会員と通常会員とがあるときに、配信データ選択決定部２２６は、プレミアム会員の配信者端末３が選択される頻度を高くしてもよい。配信データ選択決定部２２６は、各配信者における会員の登録期間の長短によって配信者端末３が選択される頻度を異ならせてもよい。典型的には、会員の登録期間が長いほど、選択される頻度を高くするのがよい。但し、新規の会員が選択される頻度を特別に高くすることがあってもよい。

ストリーミングデータ配信サーバ２は、配信者端末３に対して課金して、配信者端末３が支払った金額に応じて配信者端末３が選択される頻度を異ならせてもよい。個々の配信者端末３に対応して視聴者端末４が登録されている場合には、視聴者端末４の登録数に応じて配信者端末３が選択される頻度を異ならせてもよい。視聴者端末４が配信を希望する配信者端末３を選択してストリーミングデータ配信サーバ２に料金を支払い、ストリーミングデータ配信サーバ２は視聴者端末４が支払った配信者端末３ごとの金額に応じて配信者端末３が選択される頻度を異ならせてもよい。

配信データ選択決定部２２６が、図６に示す第１の例と図７に示す第２の例とを選択できるように構成されていてもよい。いずれの配信者端末３も応募しない期間があった場合には、配信者端末情報保持部２２３に登録されている配信者端末３から任意に選択し、配信者端末３を順に切り替えればよい。

図１１は、時間の進行に伴って、配信者端末３ａ〜３ｃから送信される動画像が選択されて配信される例を示している。図１１において、ストリーミングデータ配信サーバ２は、時刻ｔ１１まで配信者端末３ａが生成したストリーミングデータＳＤ３ａを視聴者端末４に配信する。ストリーミングデータＳＤ３ａ〜ＳＤ３ｃにおける各矩形は送信される動画像の１フレームを示している。

時刻ｔ１１以前の抽選に、ピッチ１０２により近い配信者端末３ｂが応募して選択されたとする。ストリーミングデータ配信サーバ２は、時刻ｔ１１〜ｔ１２の期間に、配信者端末３ｂが生成したストリーミングデータＳＤ３ｂを視聴者端末４に配信する。時刻ｔ１１〜ｔ１２の期間内の抽選に、ゴール１０３ｂにより近い配信者端末３ｃが応募して選択されたとする。ストリーミングデータ配信サーバ２は、時刻ｔ１２以降、配信者端末３ｃが生成したストリーミングデータＳＤ３ｃを視聴者端末４に配信する。

以上説明した本実施形態のストリーミングデータ配信サーバ２及びストリーミングデータ配信方法によれば、各配信者は自己の配信者端末３が重要なシーンを撮影していて視聴者端末４に配信すべきと考えるタイミングでストリーミングデータを配信する配信者端末３に応募する。よって、本実施形態のストリーミングデータ配信サーバ２及びストリーミングデータ配信方法によれば、スイッチャを操作するオペレータが存在しなくても、撮影対象のイベントを撮影する重要なシーンを撮影した動画像を自動的に選択して配信することができる。

また、本実施形態のストリーミングデータ配信サーバ２及びストリーミングデータ配信方法によれば、複数の配信者端末３が撮影した動画像の編集権限が配信者に与えられるので、想定以上に魅力的なコンテンツが作成される可能性もある。

次に、ストリーミングデータ配信サーバ２及び配信者端末３の変形例を説明する。配信者端末３は複数のカメラ３６を備えて、複数のカメラ３６で撮影した複数の動画像をストリーミングデータ配信サーバ２に送信するように構成してもよい。

図１２は、複数のカメラ３６を備える配信者端末３の構成例を示している。図１２に示す配信者端末３は、メインカメラ３６Ｍとサブカメラ３６Ｓを備える。例えば、メインカメラ３６Ｍは高解像度の動画像を撮影することができる外付けのカメラであり、サブカメラ３６Ｓはメインカメラ３６Ｍよりも低解像度の動画像を撮影する内蔵のカメラである。なお、図１２においてはマイクロホン３７の図示を省略している。

図１２において、データ圧縮部３２５は、メインカメラ３６Ｍからのメイン動画像と、サブカメラ３６Ｓからのサブ動画像とを圧縮して圧縮動画像を生成する。データ送信制御部３２６は、メイン圧縮動画像を含むストリーミングデータと、サブ圧縮動画像を含むストリーミングデータとをストリーミングデータ配信サーバ２に送信するよう制御する。

中央処理装置３２は、機能的な構成として、カメラ選択部３２７を備える。カメラ選択部３２７は、操作部３９による操作に応じて、メイン動画像とサブ動画像とを選択的にＯＳＤ制御部３２４に供給する。これによって、表示部３８には、メイン動画像とサブ動画像とが選択的に表示される。カメラ選択部３２７は、中央処理装置３２の外部に設けられたスイッチであってもよい。

操作部３９によってメイン動画像とサブ動画像とが切り替えられると、操作検出部３２１は動画像の切り替えを検出し、操作信号送信部３２２は、動画像が切り替えられたことを示す操作信号をストリーミングデータ配信サーバ２に送信する。

メイン圧縮動画像を含むストリーミングデータと、サブ圧縮動画像を含むストリーミングデータと受信するストリーミングデータ配信サーバ２の中央処理装置２２は、図１３に示すように、動画像加工部２２９を備えることが好ましい。

図１４において、フレームＦ３６Ｍはメイン動画像によるフレームであり、フレームＦ３６Ｓはサブ動画像によるフレームである。動画像加工部２２９は、メイン圧縮動画像を含むストリーミングデータからサブ圧縮動画像を含むストリーミングデータへと切り替えられたとき、サブ動画像のフレームＦ３６Ｓに付加情報Ｓｏｓｄを重畳する。このようにすれば、視聴者は、サブ動画像であることを容易に認識することができる。

この場合の動画像加工部２２９は、サブ動画像に付加情報Ｓｏｓｄを重畳する重畳部として動作するオンスクリーン制御部によって構成することができる。図１４に示すような付加情報Ｓｏｓｄを重畳すると、サブ動画像をあたかもホームビデオで撮影しているかのような画像とすることができる。付加情報Ｓｏｓｄは文字または記号であってもよい。動画像加工部２２９は、メイン動画像に付加情報を重畳してもよく、メイン動画像とサブ動画像との少なくともいずれか一方に両者を識別するための付加情報を重畳すればよい。

図１２においては、メイン動画像とサブ動画像とが並行してデータ圧縮部３２５に供給され、配信者端末３は、メイン圧縮動画像を含むストリーミングデータと、サブ圧縮動画像を含むストリーミングデータとを同時にストリーミングデータ配信サーバ２に送信している。図１４に示すようにメイン圧縮動画像を含むストリーミングデータとサブ圧縮動画像を含むストリーミングデータとを切り替える場合には、両者のストリーミングデータが選択的にストリーミングデータ配信サーバ２に送信されてもよい。

また、動画像加工部２２９は、図１５Ａに示すように、メイン動画像のフレームＦ３６Ｍにサブ動画像のフレームＦ３６Ｓをピクチャ・イン・ピクチャで合成してもよい。この場合の動画像加工部２２９は、ピクチャ・イン・ピクチャ合成部によって構成することができる。図１５Ａにおいて、フレームＦ３６Ｍに、フレームＦ３６Ｓを縮小した縮小フレームＦ３６Ｓ１が合成されている。

動画像加工部２２９は、図１５Ｂに示すように、サブ動画像のフレームＦ３６Ｓにメイン動画像のフレームＦ３６Ｍをピクチャ・イン・ピクチャで合成してもよい。図１５Ｂにおいて、フレームＦ３６Ｓに、フレームＦ３６Ｍを縮小した縮小フレームＦ３６Ｍ１が合成されている。

動画像加工部２２９は、配信者端末３においてメインカメラ３６Ｍが選択されているときには、図１５Ａに示すように、フレームＦ３６Ｍに縮小フレームＦ３６Ｓ１を合成する。動画像加工部２２９は、配信者端末３においてサブカメラ３６Ｓが選択されたときには、図１５Ｂに示すように、フレームＦ３６Ｓに縮小フレームＦ３６Ｍ１を合成する。

本発明は以上説明した本実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々変更可能である。ストリーミングデータ配信サーバ２が複数の配信者端末３からのストリーミングデータと、図１１のように複数の配信者端末３からのストリーミングデータを選択して編集したストリーミングデータとを視聴者端末４に配信して、視聴者端末４がこれらのストリーミングデータを選択して視聴できるようにしてもよい。

ストリーミングデータ配信サーバ制御プログラム、配信者端末制御プログラム、視聴者端末制御プログラムは、ネットワーク１を介して、それぞれ、ストリーミングデータ配信サーバ２、配信者端末３、視聴者端末４に提供されてもよい。

１ ネットワーク
２ ストリーミングデータ配信サーバ
３，３ａ〜３ｃ 配信者端末
４，４ａ〜４ｃ 視聴者端末
２１ 通信部
２２ 中央処理装置
２３ 記憶部
２４ データ記憶部
２２４ 配信者端末指示部
２２６ 配信データ選択決定部
２２７ 選択データ配信部
２２９ 動画像加工部（重畳部）

Claims (10)

1. 複数の配信者端末から送信された、動画像と音声との少なくとも一方を含む複数のストリーミングデータを記憶するデータ記憶部と、
   前記複数の配信者端末のうちのいずれかの配信者端末において、ストリーミングデータの配信を希望する配信者端末を募集する所定の期間内に、前記配信者端末に設けられた、ストリーミングデータの配信を希望するときに操作される操作部が操作されたとき、前記操作部が操作された配信者端末のうちで選択された配信者端末から送信されたストリーミングデータを、視聴者端末へと配信するストリーミングデータと決定する配信データ選択決定部と、
   前記配信データ選択決定部によって決定された配信者端末から送信されたストリーミングデータを前記データ記憶部より読み出して視聴者端末へと配信する選択データ配信部と、
   を備えるストリーミングデータ配信サーバ。
2. 前記配信データ選択決定部は、前記所定の期間内に２以上の配信者端末において前記操作部が操作されたとき、抽選で配信者端末を選択して、選択された配信者端末から送信されたストリーミングデータを、視聴者端末へと配信するストリーミングデータと決定する請求項１に記載のストリーミングデータ配信サーバ。
3. 前記配信データ選択決定部は、配信を希望する配信者端末を募集する期間の開始以降で最も早く前記操作部が操作された配信者端末から送信されたストリーミングデータを、視聴者端末へと配信するストリーミングデータと決定する請求項１に記載のストリーミングデータ配信サーバ。
4. 配信者端末に備えられていて、前記配信者端末が送信するストリーミングデータに含まれる動画像を表示する表示部に、ストリーミングデータが視聴者端末へと配信されていない状態と配信されている状態とを識別するための付加情報を表示させるよう、前記配信者端末に指示する配信者端末指示部をさらに備える請求項１〜３のいずれか１項に記載のストリーミングデータ配信サーバ。
5. １つの配信者端末から、撮影対象をメインカメラで撮影したメイン動画像を含むストリーミングデータと、前記撮影対象をサブカメラで撮影したサブ動画像を含むストリーミングデータとが選択的にまたは並行して送信されるとき、視聴者が前記メイン動画像と前記サブ動画像とを識別するための付加情報を少なくともいずれか一方に重畳する重畳部をさらに備える請求項１〜４のいずれか１項に記載のストリーミングデータ配信サーバ。
6. 複数の配信者端末から送信された、動画像と音声との少なくとも一方を含む複数のストリーミングデータをストリーミングデータ配信サーバが備えるデータ記憶部に記憶させ、
   前記複数の配信者端末のうちのいずれかの配信者端末において、ストリーミングデータの配信を希望する配信者端末を募集する所定の期間内に、前記配信者端末に設けられた、ストリーミングデータの配信を希望するときに操作される操作部が操作されたとき、前記ストリーミングデータ配信サーバが備える配信データ選択決定部が、前記操作部が操作された配信者端末のうちで選択された配信者端末から送信されたストリーミングデータを、視聴者端末へと配信するストリーミングデータと決定し、
   前記ストリーミングデータ配信サーバが備える選択データ配信部が、前記配信データ選択決定部が決定した配信者端末から送信されたストリーミングデータを前記データ記憶部より読み出して視聴者端末へと配信する
   ストリーミングデータ配信方法。
7. 前記配信データ選択決定部は、前記所定の期間内に２以上の配信者端末において前記操作部が操作されたとき、抽選で配信者端末を選択して、選択された配信者端末から送信されたストリーミングデータを、視聴者端末へと配信するストリーミングデータと決定する請求項６に記載のストリーミングデータ配信方法。
8. 前記配信データ選択決定部は、配信を希望する配信者端末を募集する期間の開始以降で最も早く前記操作部が操作された配信者端末から送信されたストリーミングデータを、視聴者端末へと配信するストリーミングデータと決定する請求項６に記載のストリーミングデータ配信方法。
9. 配信者端末に備えられていて、前記配信者端末が送信するストリーミングデータに含まれる動画像を表示する表示部に、ストリーミングデータが視聴者端末へと配信されていない状態と配信されている状態とを識別するための付加情報を表示させるよう、前記ストリーミングデータ配信サーバが備える配信者端末指示部が前記配信者端末に指示する請求項６〜８のいずれか１項に記載のストリーミングデータ配信方法。
10. １つの配信者端末から、撮影対象をメインカメラで撮影したメイン動画像を含むストリーミングデータと、前記撮影対象をサブカメラで撮影したサブ動画像を含むストリーミングデータとが選択的にまたは並行して送信されるとき、前記ストリーミングデータ配信サーバが備える重畳部が、視聴者が前記メイン動画像と前記サブ動画像とを識別するための付加情報を少なくともいずれか一方に重畳する請求項６〜９のいずれか１項に記載のストリーミングデータ配信方法。

Images