JP6037354B1 - Video transmission server - Google Patents
Video transmission server Download PDFInfo
- Publication number
- JP6037354B1 JP6037354B1 JP2015113436A JP2015113436A JP6037354B1 JP 6037354 B1 JP6037354 B1 JP 6037354B1 JP 2015113436 A JP2015113436 A JP 2015113436A JP 2015113436 A JP2015113436 A JP 2015113436A JP 6037354 B1 JP6037354 B1 JP 6037354B1
- Authority
- JP
- Japan
- Prior art keywords
- moving image
- area
- image data
- video
- divided
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
【課題】動画伝送サーバからクライアント端末に伝送する原動画データの一部を切替える際に、クライアント端末で再生される動画の連続性が失われることを防止する。【解決手段】拡張分割動画データ保持部１２は、原動画データの映像領域５０ａを分割した分割領域５１ａ〜５４ａを、隣接する他の分割領域の方向に、該他の分割領域との相互の重複範囲が注視領域７０のサイズ以上となるようにして拡張した拡張分割領域６１ａ〜６４ａの動画データである拡張分割動画データ６１〜６４を保持する。動画データ送信部１３は、注視領域７０が重複範囲内に位置し、且つ注視領域７０が拡張分割動画データの映像領域の外側に変位していることを認識したときには、クライアント端末に伝送する拡張分割動画データを、注視領域７０の変位方向で重複した他の拡張分割領域に対応する拡張分割動画データに切替えて伝送する。【選択図】 図３When switching a part of original moving image data transmitted from a moving image transmission server to a client terminal, continuity of moving images reproduced on the client terminal is prevented from being lost. An extended divided moving image data holding unit 12 divides divided areas 51a to 54a obtained by dividing a video area 50a of original moving image data in the direction of another adjacent divided area and the other divided areas. Extended divided moving image data 61 to 64 that are moving image data of the extended divided regions 61 a to 64 a expanded so that the range is equal to or larger than the size of the gaze region 70 are held. When the moving image data transmission unit 13 recognizes that the gaze area 70 is located within the overlapping range and the gaze area 70 is displaced outside the video area of the extended divided moving image data, the extended division is transmitted to the client terminal. The moving image data is switched to the extended divided moving image data corresponding to another extended divided region that is overlapped in the displacement direction of the gaze region 70 and transmitted. [Selection] Figure 3
Description
本発明は、通信ネットワークを介して、クライアント端末に動画データを伝送する動画伝送サーバに関する。 The present invention relates to a moving image transmission server that transmits moving image data to a client terminal via a communication network.
サーバにアップロードされた動画ファイルを、通信ネットワークを介してクライアント端末に伝送して再生するときに、動画ファイルを全て伝送してから再生を行うようにすると、動画の再生が開始されるまでの利用者の待ち時間が長くなってしまう。そこで、動画ファイルをクライアント端末に伝送しながら動画の再生を行うようにして、利用者の待ち時間を短縮した「ストリーミング再生」方式での動画データの伝送が普及している。 When a video file uploaded to a server is transmitted to a client terminal via a communication network and played back, if the playback is performed after all the video files have been transmitted, use until the video playback starts The waiting time of the person becomes longer. Therefore, the transmission of moving image data by the “streaming reproduction” method in which the moving image is reproduced while transmitting the moving image file to the client terminal and the waiting time of the user is reduced has become widespread.
ストリーミング再生方式では、所定ビットレートで動画データが伝送されるため、１フレームのデータ量が多くなる高解像度の動画の再生には適していない。そこで、サーバにおいて、高解像度の動画データの映像領域Ａｗを多数の領域（分割領域）に分割して、各分割領域の動画データを生成し、使用者が注視している領域（注視領域）をカバーするように分割領域を組み合わせた表示領域Ａｖの動画データを生成して、クライアント端末に伝送するようにした伝送システムが提案されている（例えば、特許文献１参照）。 In the streaming reproduction method, moving image data is transmitted at a predetermined bit rate, and thus is not suitable for reproducing a high-resolution moving image in which the data amount of one frame increases. Therefore, in the server, the video area Aw of the high-resolution moving image data is divided into a number of areas (divided areas), moving image data of each divided area is generated, and the area (gazing area) in which the user is gazing. A transmission system has been proposed in which moving image data of a display area Av in which divided areas are combined so as to be covered is transmitted to a client terminal (see, for example, Patent Document 1).
特許文献１に記載された伝送システムにおいては、クライアント端末における使用者の視聴領域Ａｄが移動して、伝送中の動画データによる表示領域Ａｖから外れたときに、視聴領域Ａｄをカバーする新たな表示領域Ａｖの動画データを、分割領域を組み合わせて生成している。そのため、視聴領域Ａｄが表示領域Ａｖから外れたときに、新たな表示領域Ａｖの動画データを生成して伝送する動画データを切替える処理に伴って、クライアント端末で再生されて表示部に表示される動画の連続性が失われるおそれがあった。 In the transmission system described in Patent Document 1, when the user's viewing area Ad in the client terminal moves and deviates from the display area Av due to moving image data being transmitted, a new display that covers the viewing area Ad is displayed. The moving image data of the area Av is generated by combining the divided areas. Therefore, when the viewing area Ad deviates from the display area Av, it is reproduced on the client terminal and displayed on the display unit in accordance with the process of switching the moving image data to be generated and transmitted in the new display area Av. The continuity of the video could be lost.
本発明は、かかる背景に鑑みてなされたものであり、クライアント端末における使用者の注視領域の移動に応じて、動画伝送サーバからクライアント端末に伝送する原動画の一部の動画データを切替える際に、クライアント端末の表示部に表示される動画の連続性が失われることを防止した動画伝送サーバを提供することを目的とする。 The present invention has been made in view of such a background, and when switching a part of moving image data of an original moving image transmitted from a moving image transmission server to a client terminal according to movement of a user's gaze area in the client terminal. An object of the present invention is to provide a moving image transmission server that prevents the continuity of moving images displayed on the display unit of a client terminal from being lost.
本発明の動画伝送サーバは、
クライアント端末に対して、通信ネットワークを介して所定速度で動画データを伝送することにより、前記クライアント端末において、使用者による操作に応じて、前記動画データのストリーミング再生による映像領域から所定サイズの注視領域を抜き出して、表示部に表示することを可能にする動画伝送サーバであって、
原動画データの映像領域を分割した各分割領域を、隣接する他の分割領域の方向に、該他の分割領域との相互の重複範囲が前記所定サイズ以上となるように拡張した各拡張分割領域の動画データである複数の拡張分割動画データを保持した拡張分割動画データ保持部と、
前記複数の拡張分割動画データのいずれか一つを選択して前記クライアント端末に送信し、前記拡張分割動画データの送信中に、前記クライアント端末から、該送信中の前記拡張分割動画データの映像領域における前記注視領域の位置を示す注視領域位置データを受信して、該注視領域位置データに基づいて、前記注視領域が、該送信中の前記拡張分割動画データに対応する前記拡張分割領域の他の前記拡張分割領域との重複範囲内に位置し、且つ、前記注視領域が該送信中の前記拡張分割動画データの映像領域の外側に向かって変位していることを認識したときには、前記クライアント端末に送信する前記拡張分割動画データを、送信中の前記拡張分割動画データに対応する前記拡張分割領域と前記注視領域の変位方向で重複した他の前記拡張分割領域に対応する前記拡張分割動画データに切替えて、切替え前の前記拡張分割動画データの再生位置に対応する再生位置から送信する動画データ送信部と
を備えたことを特徴とする。
The video transmission server of the present invention is
By transmitting moving image data at a predetermined speed to the client terminal via a communication network, a gaze region having a predetermined size from a video region obtained by streaming reproduction of the moving image data in response to an operation by a user at the client terminal. Is a video transmission server that can be extracted and displayed on the display unit,
Each extended divided area obtained by expanding each divided area obtained by dividing the video area of the original moving image data in the direction of another adjacent divided area so that the overlapping range with the other divided areas is equal to or larger than the predetermined size. An extended split video data holding unit that holds a plurality of extended split video data,
One of the plurality of extended divided video data is selected and transmitted to the client terminal, and during transmission of the extended divided video data, a video area of the extended divided video data being transmitted from the client terminal Receiving the gaze area position data indicating the position of the gaze area in the area, and based on the gaze area position data, the gaze area corresponds to the other extended divided area corresponding to the extended divided moving image data being transmitted. When the client terminal recognizes that it is located within the overlapping range with the extended divided area and the gaze area is displaced toward the outside of the video area of the extended divided moving image data being transmitted, The extended divided moving image data to be transmitted is the other of the extended divided region corresponding to the extended divided moving image data being transmitted and the other overlapped in the displacement direction of the gaze region Switch to the extended moving image data segment corresponding to Zhang divided area, characterized by comprising a video data transmitting unit for transmitting from the reproduction position corresponding to the reproduction position in front of the expanded moving image data segment switching.
かかる本発明によれば、前記拡張分割動画データ保持部により、前記原動画データの映像領域をカバーして、相互に重複範囲を有する複数の前記拡張分割動画データが保持されている。そして、前記クライアント端末において、前記注視領域が前記拡張分割領域の重複範囲内に位置し、且つ、前記注視領域が前記拡張分割領域の外側に向かって変位しているときに、前記動画データ伝送部は、前記クライアント端末に伝送する前記拡張分割動画データを、前記注視領域の変位方向の他の前記拡張分割領域に対応する前記拡張分割動画データに切替える。この場合、前記拡張分割動画データを切替えるときに、新たな部分画像領域を生成する必要がなく、また、前記重複範囲によって、変更前の前記拡張分割領域から変更後の前記拡張分割領域への切替えが、前記注視領域の連続性を維持して行われる。 According to the present invention, the extended divided moving image data holding unit holds the plurality of extended divided moving image data that cover the video area of the original moving image data and have overlapping ranges. In the client terminal, when the gaze area is located within the overlapping range of the extended divided area and the gaze area is displaced toward the outside of the extended divided area, the moving image data transmission unit Switches the extended divided moving image data transmitted to the client terminal to the extended divided moving image data corresponding to the other extended divided region in the displacement direction of the gaze region. In this case, it is not necessary to generate a new partial image area when switching the extended divided moving image data, and switching from the extended divided area before the change to the extended divided area after the change is performed according to the overlapping range. Is performed while maintaining the continuity of the gaze region.
そのため、前記クライアント端末における前記注視領域の変位（移動）に応じて、前記動画伝送サーバから前記クライアント端末に伝送する原動画の一部の動画データを切替える際に、前記クライアント端末の表示部に表示される動画の連続性が失われることを防止することができる。 Therefore, when switching a part of the moving image data of the original moving image transmitted from the moving image transmission server to the client terminal according to the displacement (movement) of the gaze area in the client terminal, it is displayed on the display unit of the client terminal. It is possible to prevent the continuity of the moving image from being lost.
また、前記拡張分割動画データ保持部は、前記複数の拡張分割動画データを、前記複数の拡張分割動画データを結合して一つの動画データとしたシリアライズ動画データの形式で保持し、
前記動画データ送信部は、前記クライアント端末に伝送する前記拡張分割動画データの切替えを、前記シリアライズ動画データの再生位置を、切替え前の前記拡張分割動画データの再生位置から、切替え前の前記拡張分割動画データの再生位置に対応した切替え後の前記拡張分割動画データの再生位置にシフトさせることによって行うことを特徴とする。
The extended divided video data holding unit holds the plurality of extended divided video data in the form of serialized video data obtained by combining the plurality of extended divided video data into one video data,
The moving image data transmission unit switches the extended divided moving image data to be transmitted to the client terminal, the reproduction position of the serialized moving image data from the reproduction position of the extended divided moving image data before the switching, and the extended divided moving image data before the switching. This is performed by shifting to the playback position of the extended divided video data after switching corresponding to the playback position of the video data.
この構成によれば、前記クライアント端末に伝送する前記拡張分割動画データの切替えを、前記シリアライズ動画データの再生位置を変更するという簡易な処理によって、速やかに行うことができる。そのため、前記拡張分割動画データを切替える際の連続性を一層高めることができる。 According to this configuration, the extension divided moving image data transmitted to the client terminal can be quickly switched by a simple process of changing the reproduction position of the serialized moving image data. Therefore, the continuity when switching the extended divided moving image data can be further enhanced.
また、前記拡張分割動画データは、前記原動画データの映像領域を、含まれる映像に応じたランク付けがなされた複数のランク別領域に区画し、各ランク別領域毎に、ランクが低いほど前記分割領域のサイズ及び前記注視領域のサイズを広く設定して生成されており、
前記動画データ送信部は、前記拡張分割動画データの解像度を、生成元の前記ランク別領域のランクに応じて変更して、前記クライアント端末に送信することを特徴とする。
Further, the extended divided video data divides the video area of the original video data into a plurality of rank-by-rank areas that are ranked according to the included video, and for each rank-specific area, the lower the rank, It is generated by setting the size of the divided area and the size of the gaze area wide,
The moving image data transmitting unit changes the resolution of the extended divided moving image data in accordance with the rank of the region by rank of the generation source, and transmits the changed divided moving image data to the client terminal.
この構成によれば、前記原動画データの映像領域を前記複数のランク別領域に区画して前記拡張分割動画データが生成されており、前記動画データ送信部は、前記拡張分割動画データの解像度を、生成元の前記ランク別領域のランクに応じて変更して、前記クライアント端末に送信する。これにより、ランクが高い前記ランク別領域の映像については、狭いサイズで高い解像度を維持してクランアント端末に伝送し、ランクが低い前記ランク別領域の映像については、広いサイズで低い解像度に落として伝送することができる。そして、前記クライアント端末においては、前記注視領域に対応する前記原動画データの映像範囲を、ランクが高い範囲については高い解像度で狭くし、ランクが低い範囲については低い解像度で広くして、使用者の要望に応じた注視領域の効率の良い移動を実現することができる。 According to this configuration, the extended divided moving image data is generated by dividing the video area of the original moving image data into the plurality of rank-specific areas, and the moving image data transmission unit determines the resolution of the extended divided moving image data. , Change according to the rank of the region by rank of the generation source, and transmit to the client terminal. As a result, the image of the rank-by-rank region having a high rank is transmitted to the client terminal while maintaining a high resolution at a narrow size, and the image of the region by rank having a low rank is reduced to a low resolution at a large size. Can be transmitted. In the client terminal, the video range of the original moving image data corresponding to the gaze area is narrowed at a high resolution for a high rank range, and is widened at a low resolution for a low rank range. It is possible to realize efficient movement of the gaze area according to the demand of the user.
次に、本発明の動画伝送システムは、
動画データを伝送する動画伝送サーバと、通信ネットワークを介して前記動画伝送サーバと通信を行うクライアント端末とを含み、前記クライアント端末は、所定速度で前記動画伝送サーバから伝送される動画データを受信して、ストリーミング再生により表示部に動画を表示する動画伝送システムにおいて、
前記クライアント端末は、
前記動画伝送サーバから動画データを受信してストリーミング再生により前記表示部に動画を表示するときに、使用者による操作に応じて、前記動画データの映像領域内に所定サイズの注視領域を設定する注視領域設定部と、
前記動画データの映像領域から前記注視領域の映像部分を抜き出して、前記表示部に表示する注視領域表示部と、
前記動画データの映像領域における前記注視領域の位置を示す注視領域位置データを、前記動画伝送サーバに送信する注視領域位置データ送信部とを備え、
前記動画伝送サーバは、
原動画データの映像領域を分割した各分割領域を、隣接する他の分割領域の方向に、該他の分割領域との相互の重複範囲が前記所定サイズ以上となるように拡張した各拡張分割領域の動画データである複数の拡張分割動画データを保持した拡張分割動画データ保持部と、
前記複数の拡張分割動画データのいずれか一つを選択して前記クライアント端末に送信し、前記拡張分割動画データの送信中に受信した前記注視領域位置データに基づいて、前記クライアント端末において、前記注視領域が、該送信中の前記拡張分割動画データに対応する前記拡張分割領域の他の前記拡張分割領域との重複箇所に位置し、且つ、前記注視領域が該送信中の前記拡張分割動画データの映像領域の外側に向かって変位していることを認識したときには、前記クライアント端末に送信する前記拡張分割動画データを、送信中の前記拡張分割動画データに対応する前記拡張分割領域と、前記注視領域の変位方向で重複した他の前記拡張分割領域に対応する前記拡張分割動画データに切替えて、切替え前の前記拡張分割動画データの再生位置に対応する再生位置から送信する動画データ送信部と
を備えたことを特徴とする。
Next, the video transmission system of the present invention is
A video transmission server that transmits video data; and a client terminal that communicates with the video transmission server via a communication network. The client terminal receives video data transmitted from the video transmission server at a predetermined speed. In a video transmission system that displays video on the display unit by streaming playback,
The client terminal is
When receiving moving image data from the moving image transmission server and displaying the moving image on the display unit by streaming playback, a gaze area of a predetermined size is set in the video area of the moving image data according to a user operation An area setting section;
Extracting a video portion of the gaze area from the video area of the moving image data and displaying it on the display section;
A gaze area position data transmitting unit that transmits gaze area position data indicating a position of the gaze area in the video area of the video data to the video transmission server;
The video transmission server is
Each extended divided area obtained by expanding each divided area obtained by dividing the video area of the original moving image data in the direction of another adjacent divided area so that the overlapping range with the other divided areas is equal to or larger than the predetermined size. An extended split video data holding unit that holds a plurality of extended split video data,
One of the plurality of extended divided video data is selected and transmitted to the client terminal. Based on the gaze area position data received during transmission of the extended divided video data, the gaze at the client terminal An area is located at an overlap portion of the extended divided area corresponding to the extended divided moving picture data being transmitted with another extended divided area, and the gaze area is the extended divided moving picture data being transmitted. When recognizing that it is displaced toward the outside of the video area, the extended divided video data to be transmitted to the client terminal, the extended divided video data corresponding to the extended divided video data being transmitted, and the gaze area Is switched to the extended divided moving image data corresponding to the other extended divided region overlapped in the displacement direction of the extended divided moving image data before switching. Characterized in that from the reproduction position corresponding to the position and a moving image data transmission unit to be transmitted.
かかる本発明の動画伝送システムによれば、前記クライアント端末は、前記注視領域設定部により、使用者の操作に応じて前記動画伝送サーバから伝送される動画データの映像領域内に前記注視領域を設定する。そして、前記注視領域表示部により、前記動画データの映像領域から前記注視領域の映像部分が抜き出されて前記表示部に表示される。これにより、使用者は、前記動画データの映像領域の一部を選択して、前記表示部に表示させることができる。また、前記注視領域位置データ送信部により、前記動画データの映像領域における前記注視領域の位置を示す前記注視領域位置データが、前記動画伝送サーバに送信される。 According to the video transmission system of the present invention, the client terminal sets the gaze area in the video area of the video data transmitted from the video transmission server according to a user's operation by the gaze area setting unit. To do. Then, the gaze area display unit extracts the video portion of the gaze area from the video area of the moving image data and displays it on the display section. Accordingly, the user can select a part of the video area of the moving image data and display it on the display unit. Further, the gaze area position data transmission unit transmits the gaze area position data indicating the position of the gaze area in the video area of the moving image data to the moving image transmission server.
一方、前記動画伝送サーバにおいては、前記拡張分割動画データ保持部により、前記原動画データの映像領域を重複してカバーする前記複数の拡張分割動画データが保持されている。そして、前記動画データ送信部は、前記複数の拡張分割動画データのいずれか一つを選択して前記クライアント端末に送信しているときに、前記注視領域位置データに基づいて、前記クライアント端末において、前記注視領域が、再生中の前記拡張分割動画データに対応する前記拡張分割領域の他の前記拡張分割領域との重複箇所に位置し、且つ、前記注視領域が再生中の前記拡張分割動画データの映像領域の外側に向かって変位していることを認識したときには、前記クライアント端末に伝送する前記拡張分割動画データを、伝送中の前記拡張分割動画データに対応する前記拡張分割領域と、前記注視領域の変位方向で重複した他の前記拡張分割領域に対応する前記拡張分割動画データに切替えて、切替え前の前記拡張分割動画データの再生位置に対応する再生位置から送信する。 On the other hand, in the moving image transmission server, the extended divided moving image data holding unit holds the plurality of extended divided moving image data covering the video area of the original moving image data in an overlapping manner. And, when the moving image data transmission unit selects any one of the plurality of extended divided moving image data and transmits it to the client terminal, based on the gaze area position data, in the client terminal, The gaze area is located at an overlapping portion of the extended divided area corresponding to the extended divided moving picture data being reproduced with the other extended divided area, and the extended divided moving picture data being reproduced is the gaze area. When recognizing that it is displaced toward the outside of the video area, the extended divided video data to be transmitted to the client terminal, the extended divided video data corresponding to the extended divided video data being transmitted, and the gaze area Is switched to the extended divided moving image data corresponding to the other extended divided region overlapped in the displacement direction of the extended divided moving image data before switching. Corresponding to the position transmitted from the reproduction position.
これにより、前記クライアント端末において、前記注視領域が前記拡張分割領域の前記重複範囲内に位置し、且つ前記注視領域が前記拡張分割領域の外側に向かって変位しているときに、前記動画データ送信部により、前記クライアント端末に送信する前記拡張分割動画データが、前記注視領域の変位方向の他の前記拡張分割範囲に対応する前記拡張分割動画データに切替えられる。この場合、前記拡張分割動画データを切替えるときに、新たな部分画像領域を生成する必要がなく、また、前記重複範囲によって、切替え前の前記拡張分割領域から切替え後の前記拡張分割領域への切替えが、前記注視領域の連続性を維持して行われる。 Accordingly, in the client terminal, when the gaze area is located within the overlapping range of the extended divided area and the gaze area is displaced toward the outside of the extended divided area, the moving image data transmission is performed. The extended divided moving image data to be transmitted to the client terminal is switched to the extended divided moving image data corresponding to the other extended divided range in the displacement direction of the gaze area. In this case, it is not necessary to generate a new partial image area when switching the extended divided video data, and switching from the extended divided area before switching to the extended divided area after switching is performed according to the overlapping range. Is performed while maintaining the continuity of the gaze region.
そのため、前記クライアント端末における前記注視領域の移動に応じて、前記動画伝送サーバから前記クライアント端末に伝送する原動画の一部の動画データを切替える際に、前記クライアント端末の表示部に表示される動画の連続性が失われることを防止することができる。 Therefore, the moving image displayed on the display unit of the client terminal when switching a part of the moving image data of the original moving image transmitted from the moving image transmission server to the client terminal according to the movement of the gaze area in the client terminal It is possible to prevent loss of continuity.
次に、本発明の動画伝送方法は、
動画データを、動画伝送サーバから通信ネットワークを介してクライアント端末に所定速度で伝送することによって、前記クライアント端末において、使用者による操作に応じて、前記動画データのストリーミング再生による映像領域から所定サイズの注視領域を抜き出して、表示部に表示することを可能にする動画伝送方法であって、
前記動画伝送サーバが、原動画データの映像領域を分割した各分割領域を、隣接する他の分割領域の方向に、該他の分割領域との相互の重複範囲が前記所定サイズ以上となるように拡張した各拡張分割領域の動画データである複数の拡張分割動画データを保持した拡張分割動画データ保持ステップと、
前記動画伝送サーバが、前記複数の拡張分割動画データのいずれか一つを選択して前記クライアント端末に送信し、前記拡張分割動画データの送信中に、前記クライアント端末から、該送信中の前記拡張分割動画データの映像領域における前記注視領域の位置を示す注視領域位置データを受信して、該注視領域位置データに基づいて、前記注視領域が、該送信中の前記拡張分割動画データに対応する前記拡張分割領域の他の前記拡張分割領域との重複範囲内に位置し、且つ、前記注視領域が該送信中の前記拡張分割動画データの映像領域の外側に向かって変位していることを認識したときには、前記クライアント端末に送信する前記拡張分割動画データを、送信中の前記拡張分割動画データに対応する前記拡張分割領域と前記注視領域の変位方向で重複した他の前記拡張分割領域に対応する前記拡張分割動画データに切替えて、切替え前の前記拡張分割動画データの再生位置に対応する再生位置から送信する動画データ送信ステップと
を含むことを特徴とする。
Next, the moving image transmission method of the present invention includes:
By transmitting the moving image data from the moving image transmission server to the client terminal via the communication network at a predetermined speed, the client terminal has a predetermined size from a video area by streaming reproduction of the moving image data in accordance with a user operation. A video transmission method that enables a gaze area to be extracted and displayed on a display unit,
The moving picture transmission server divides each divided area obtained by dividing the video area of the original moving picture data in the direction of another adjacent divided area so that the overlapping range with the other divided areas is not less than the predetermined size. An extended divided video data holding step that holds a plurality of extended divided video data that is video data of each extended divided area;
The moving image transmission server selects any one of the plurality of extended divided moving image data and transmits the selected extended divided moving image data to the client terminal. During transmission of the extended divided moving image data, the client terminal transmits the extension being transmitted. Receiving gaze area position data indicating the position of the gaze area in the video area of the divided video data, and based on the gaze area position data, the gaze area corresponds to the extended divided video data being transmitted Recognized that the extended divided area is located within the overlapping range of the extended divided area with the extended divided area and that the gaze area is displaced toward the outside of the video area of the extended divided moving image data being transmitted. Sometimes, the extended divided moving image data to be transmitted to the client terminal is changed in the extended divided region and the gaze region corresponding to the extended divided moving image data being transmitted. Moving image data transmitting step of switching to the extended divided moving image data corresponding to the other extended divided region overlapped in the direction and transmitting from the reproduction position corresponding to the reproduction position of the extended divided moving image data before switching. Features.
かかる本発明の動画伝送方法によれば、前記拡張分割動画データ保持ステップにより、前記動画伝送サーバが、前記原動画データの映像領域をカバーして、相互に重複範囲を有する複数の前記拡張分割動画データを保持する。そして、前記動画送信ステップにより、前記クライアント端末において、前記注視領域が前記拡張分割領域の前記重複範囲内に位置し、且つ、前記注視領域が前記拡張分割領域の外側に向かって変位しているときに、前記動画データ伝送サーバが、前記クライアント端末に伝送する前記拡張分割動画データを、前記注視領域の変位方向の他の前記拡張分割範囲に対応する前記拡張分割動画データに切替える。この場合、前記拡張分割動画データを切替えるときに、新たな部分画像領域を生成する必要がなく、また、前記重複範囲によって、変更前の前記拡張分割領域から変更後の前記拡張分割領域への切替えが、前記注視領域の連続性を維持して行われる。 According to the moving image transmission method of the present invention, the extended divided moving image data holding step allows the moving image transmission server to cover the video area of the original moving image data and have a plurality of overlapping divided moving images. Retain data. In the moving image transmission step, when the gaze area is located within the overlapping range of the extended divided area and the gaze area is displaced toward the outside of the extended divided area in the client terminal. In addition, the moving image data transmission server switches the extended divided moving image data transmitted to the client terminal to the extended divided moving image data corresponding to the other extended divided range in the displacement direction of the gaze area. In this case, it is not necessary to generate a new partial image area when switching the extended divided moving image data, and switching from the extended divided area before the change to the extended divided area after the change is performed according to the overlapping range. Is performed while maintaining the continuity of the gaze region.
そのため、前記クライアント端末における前記注視領域の移動に応じて、前記動画伝送サーバから前記クライアント端末に伝送する原動画の一部の動画データを切替える際に、前記クライアント端末の表示部に表示される動画の連続性が失われることを防止することができる。 Therefore, the moving image displayed on the display unit of the client terminal when switching a part of the moving image data of the original moving image transmitted from the moving image transmission server to the client terminal according to the movement of the gaze area in the client terminal It is possible to prevent loss of continuity.
次に、本発明の動画伝送サーバ用プログラムは、
動画データを、動画伝送サーバから通信ネットワークを介してクライアント端末に所定速度で伝送することによって、前記クライアント端末において、使用者による操作に応じて、前記動画データのストリーミング再生による映像領域から所定サイズの注視領域を抜き出して、表示部に表示することを可能にする動画伝送サーバ用のプログラムであって、前記動画伝送サーバを構成するコンピュータを、
動画データの映像領域を分割した各分割領域を、隣接する他の分割領域の方向に、該他の分割領域との相互の重複範囲が前記所定サイズ以上となるように拡張した各拡張分割領域の動画データである複数の拡張分割動画データを保持した拡張分割動画データ保持部と、
前記複数の拡張分割動画データのいずれか一つを選択して前記クライアント端末に送信し、前記拡張分割動画データの送信中に、前記クライアント端末から、該送信中の前記拡張分割動画データの映像領域における前記注視領域の位置を示す注視領域位置データを受信して、該注視領域位置データに基づいて、前記注視領域が、該送信中の前記拡張分割動画データに対応する前記拡張分割領域の他の前記拡張分割領域との重複範囲内に位置し、且つ、前記注視領域が該送信中の前記拡張分割動画データの映像領域の外側に向かって変位していることを認識したときには、前記クライアント端末に送信する前記拡張分割動画データを、送信中の前記拡張分割動画データに対応する前記拡張分割領域と前記注視領域の変位方向で重複した他の前記拡張分割領域に対応する前記拡張分割動画データに切替えて、切替え前の前記拡張分割動画データの再生位置に対応する再生位置から送信する動画データ送信部と
して機能させることを特徴とする。
Next, the video transmission server program of the present invention is:
By transmitting the moving image data from the moving image transmission server to the client terminal via the communication network at a predetermined speed, the client terminal has a predetermined size from a video area by streaming reproduction of the moving image data in accordance with a user operation. A program for a moving image transmission server that allows a gaze area to be extracted and displayed on a display unit, the computer constituting the moving image transmission server,
Each divided area obtained by dividing the video area of the moving image data is expanded in the direction of another adjacent divided area so that the overlapping range with the other divided areas is equal to or larger than the predetermined size. An extended divided video data holding unit that holds a plurality of extended divided video data,
One of the plurality of extended divided video data is selected and transmitted to the client terminal, and during transmission of the extended divided video data, a video area of the extended divided video data being transmitted from the client terminal Receiving the gaze area position data indicating the position of the gaze area in the area, and based on the gaze area position data, the gaze area corresponds to the other extended divided area corresponding to the extended divided moving image data being transmitted. When the client terminal recognizes that it is located within the overlapping range with the extended divided area and the gaze area is displaced toward the outside of the video area of the extended divided moving image data being transmitted, The extended divided moving image data to be transmitted is the other of the extended divided region corresponding to the extended divided moving image data being transmitted and the other overlapped in the displacement direction of the gaze region Switch to the extended moving image data segment corresponding to Zhang divided areas, characterized in that function as moving image data transmission unit to be transmitted from the reproduction position corresponding to the reproduction position in front of the expanded moving image data segment switching.
かかる本発明の動画伝送サーバ用プログラムを、前記コンピュータに実行させることによって、上述した本発明の動画伝送サーバにおける前記拡張分割動画データ保持部と、前記動画データ伝送部の構成を実現することができる。 By causing the computer to execute the program for moving image transmission server of the present invention, the configuration of the extended divided moving image data holding unit and the moving image data transmission unit in the above-described moving image transmission server of the present invention can be realized. .
本発明の動画伝送サーバ及び動画伝送システムの実施形態について、図１〜図７を参照して説明する。 Embodiments of a moving image transmission server and a moving image transmission system according to the present invention will be described with reference to FIGS.
図１を参照して、本実施形態の動画伝送システムは、通信ネットワーク１を介して相互に通信可能とされている動画伝送サーバ１０とクライアント端末２０（２０ａ，２０ｂ，２０ｃ）とにより構成されている。クライアント端末２０ａ，２０ｂはスマートファン、タブレット端末等のタッチパネル表示部２１ａ、２１ｂ（本発明の表示部に相当する）を備えた通信端末であり、クライアント端末２０ｃは、パソコン等の表示ユニット２１ｃ（本発明の表示部に相当する）を備えた据置型の通信端末である。 Referring to FIG. 1, the moving picture transmission system of the present embodiment includes a moving picture transmission server 10 and client terminals 20 (20a, 20b, 20c) that can communicate with each other via a communication network 1. Yes. The client terminals 20a and 20b are communication terminals including touch panel display units 21a and 21b (corresponding to the display unit of the present invention) such as smart fans and tablet terminals, and the client terminal 20c is a display unit 21c (this book) such as a personal computer. This is a stationary communication terminal equipped with a display unit corresponding to the invention.
動画伝送サーバ１０は、各種のスポーツの映像等を記録した動画データ（本発明の原動画データに相当する）を記憶した映像データベース１１と、図示しないコンピュータ及びその周辺機器等によって構成されている。動画伝送サーバを構成するコンピュータに、動画伝送サーバ用のプログラムを実行させることによって、このコンピュータが、拡張分割動画データ保持部１２、及び動画データ送信部１３として機能する。 The moving image transmission server 10 includes a video database 11 storing moving image data (corresponding to the original moving image data of the present invention) in which various sports images are recorded, a computer (not shown), its peripheral devices, and the like. By causing a computer constituting the video transmission server to execute a program for the video transmission server, this computer functions as the extended divided video data holding unit 12 and the video data transmission unit 13.
クライアント端末２０では、動画ビュワーのアプリケーションが実行可能であり、クライアント端末２０の利用者がこの動画ビュワーを起動すると、ディスプレイ２１（２１ａ，２１ｂ，２１ｃ）に動画ビュワーの操作画面が表示される。そして、使用者が閲覧を希望する動画を選択すると、クライアント端末２０から動画伝送サーバ１０に対して、使用者が選択した動画を指定する動画選択データＶＳ-datが送信される。 On the client terminal 20, a video viewer application can be executed. When the user of the client terminal 20 activates the video viewer, an operation screen of the video viewer is displayed on the display 21 (21a, 21b, 21c). Then, when the user selects a moving image that the user wants to view, moving image selection data VS-dat designating the moving image selected by the user is transmitted from the client terminal 20 to the moving image transmission server 10.
動画伝送サーバ１０がクライアント端末２０から動画データ選択データＶＳ-datを受信すると、拡張分割動画データ保持部１２は、動画選択データＶＳ-datにより指定された動画のデータ（原動画データ）５０を、映像データベース１１から読み出す。そして、拡張分割動画データ保持部１２は、読み出した原動画データ５０の映像領域をカバーする複数（本実施形態では４つ）の拡張分割動画データ６１〜６４を生成して保持する。拡張分割動画データ６１〜６４の生成処理については後述する。 When the moving image transmission server 10 receives the moving image data selection data VS-dat from the client terminal 20, the extended divided moving image data holding unit 12 receives the moving image data (original moving image data) 50 specified by the moving image selection data VS-dat. Read from the video database 11. Then, the extended divided moving image data holding unit 12 generates and holds a plurality (four in this embodiment) of extended divided moving image data 61 to 64 that cover the video area of the read original moving image data 50. The generation processing of the extended divided moving image data 61 to 64 will be described later.
動画データ送信部１３は、拡張分割動画データ保持部１２に保持された複数の拡張分割動画データ６１〜６４のうちのいずれか一つを選択して取得し、ストリーミングデータ１５として、所定ビットレート（本発明の所定速度に相当する）でクライアント端末２０に送信する。 The moving image data transmission unit 13 selects and acquires one of the plurality of extended divided moving image data 61 to 64 held in the extended divided moving image data holding unit 12, and uses the predetermined bit rate ( (Corresponding to the predetermined speed of the present invention).
ここでは、クライアント端末２０ａにおいて拡張分割動画データ６１が選択されて、動画伝送サーバ１０からクライアント端末２０ａに動画データが伝送される場合を例にして説明する。クライアント端末２０ｂ、２０ｃ等の他のクライアント端末についても、同様にして動画データが伝送される。 Here, an example will be described in which the extended divided video data 61 is selected in the client terminal 20a and the video data is transmitted from the video transmission server 10 to the client terminal 20a. The moving image data is similarly transmitted to other client terminals such as the client terminals 20b and 20c.
ストリーミングデータ１５を受信しているクライアント端末２０ａは、図２Ａに示したように、ストリーミング再生による拡張分割動画データ６１の映像領域６１ａから、所定サイズの注視領域７０の部分を抜き出して、図２Ｂに示したように表示部２１ａに表示する。 As shown in FIG. 2A, the client terminal 20a that has received the streaming data 15 extracts a portion of the gaze area 70 of a predetermined size from the video area 61a of the extended divided video data 61 by streaming reproduction, and As shown, it is displayed on the display unit 21a.
なお、クライアント端末２０ａが注視領域７０を設定する構成は、本発明の注視領域設定部に相当する。また、クライアント端末２０ａが、拡張分割動画データ６１の映像領域６１ａから注視領域の映像部分を抜き出して、タッチパネル表示部２１ａに表示する構成は、本発明の注視領域表示部に相当する。 The configuration in which the client terminal 20a sets the gaze area 70 corresponds to the gaze area setting unit of the present invention. The configuration in which the client terminal 20a extracts the video portion of the gaze area from the video area 61a of the extended divided video data 61 and displays it on the touch panel display section 21a corresponds to the gaze area display section of the present invention.
クライアント端末２０ａは、タッチパネル表示部２１ａに触れた使用者の指Ｆによるスワイプ操作（スライド操作）に応じて、拡張分割動画データ６１の映像領域６１ａにおける注視領域７０の位置を変更する。これにより、使用者は、拡張分割動画データ６１の映像領域６１ａのうち、注視している範囲（図２Ａではボールに絡んでいる選手の映像が含まれる範囲）を選択して、タッチパネル表示部２１ａに表示させることができる。 The client terminal 20a changes the position of the gaze area 70 in the video area 61a of the expanded divided video data 61 in response to a swipe operation (slide operation) with the user's finger F touching the touch panel display unit 21a. Thereby, the user selects a range to be watched (a range including the video of the player involved in the ball in FIG. 2A) in the video area 61a of the extended divided video data 61, and the touch panel display unit 21a. Can be displayed.
なお、図２では、使用者の指による操作によって注視領域７０の位置を変更する例を示したが、マウス等のポインティングデバイスの操作によって注視領域７０の位置を変更するようにしてもよい。或は、視線入力デバイスにより使用者の視線の向きを検出し、使用者の視線の向きに応じて注視領域７０の位置を変更するようにしてもよい。 In addition, although the example which changes the position of the gaze area | region 70 by operation with a user's finger | toe was shown in FIG. 2, you may make it change the position of the gaze area | region 70 by operation of pointing devices, such as a mouse | mouth. Alternatively, the direction of the user's line of sight may be detected by a line-of-sight input device, and the position of the gaze area 70 may be changed according to the direction of the user's line of sight.
次に、図３を参照して、拡張分割動画データ保持部１２による拡張分割動画データの生成処理について説明する。図３Ａを参照して、拡張分割動画データ保持部１２は、映像データベース１１から読み出した原動画データ５０の映像領域５０ａ（原動画データの各フレームの映像領域）を、複数（本実施形態では４つ）の分割領域５１ａ〜５４ａに分ける。 Next, generation processing of extended divided video data by the extended divided video data holding unit 12 will be described with reference to FIG. Referring to FIG. 3A, the extended divided moving image data holding unit 12 includes a plurality (4 in the present embodiment) of video regions 50a (video regions of each frame of the original moving image data) of the original moving image data 50 read from the video database 11. Are divided into divided areas 51a to 54a.
そして、拡張分割動画データ保持部１２は、図３Ｂに示したように、各分割領域５１〜５４を、隣接する他の分割領域５１〜５４との間で、重複範囲が、上述したクライアント端末２０における注視領域７０のサイズ以上となるように（注視領域７０が重複範囲内に収まるように）拡張した拡張分割領域６１ａ〜６４ａを設定する。 Then, as illustrated in FIG. 3B, the extended divided moving image data holding unit 12 sets each divided region 51 to 54 between the other adjacent divided regions 51 to 54 and the client terminal 20 described above. The expanded divided areas 61a to 64a that are expanded so as to be equal to or larger than the size of the gaze area 70 in (so that the gaze area 70 falls within the overlapping range) are set.
拡張分割動画データ保持部１２は、このようにして設定した拡張分割領域６１ａ〜６４ａをフレームデータとする拡張分割動画データ６１〜６４を生成する。 The extended divided moving image data holding unit 12 generates extended divided moving image data 61 to 64 using the extended divided areas 61a to 64a set as described above as frame data.
図３Ｂでは、Ｃ１，Ｃ３，Ｃ１１，Ｃ９を結んだ拡張分割領域６１ａについて拡張分割動画データ６１が生成され、Ｃ２、Ｃ４，Ｃ１２，Ｃ１０を結んだ拡張分割領域６２ａが生成される。また、Ｃ５，Ｃ７，Ｃ１５，Ｃ１３を結んだ拡張分割領域６３ａについて拡張分割動画データ６３が生成され、Ｃ６，Ｃ８，Ｃ１６，Ｃ１４を結んだ拡張分割領域６４ａについて拡張分割動画データ６４が生成される。 In FIG. 3B, the extended divided moving image data 61 is generated for the extended divided area 61a connecting C1, C3, C11, and C9, and the extended divided area 62a connecting C2, C4, C12, and C10 is generated. Further, the extended divided moving image data 63 is generated for the extended divided region 63a connecting C5, C7, C15, and C13, and the extended divided moving image data 64 is generated for the extended divided region 64a connecting C6, C8, C16, and C14. .
この場合、拡張分割領域６１ａは、右側の拡張分割領域６２ａとの間でＣ２，Ｃ３，Ｃ１１，Ｃ１０を結んだ重複範囲を有し、下側の拡張分割領域６３ａとの間でＣ５、Ｃ７，Ｃ１１，Ｃ９を結んだ重複範囲を有している。さらに、拡張分割領域６１ａは、斜め右下の拡張分割領域６４ａとの間でＣ６，Ｃ７，Ｃ１１，Ｃ１０を結んだ重複範囲を有している。拡張分割領域６２ａ，６３ａ，６４ａも、同様にして他の拡張分割領域との間で重複範囲を有している。 In this case, the extended divided area 61a has an overlapping range connecting C2, C3, C11, and C10 with the right extended divided area 62a, and C5, C7, It has an overlapping range connecting C11 and C9. Furthermore, the extended divided area 61a has an overlapping range connecting C6, C7, C11, and C10 with the extended divided area 64a at the diagonally lower right. Similarly, the extended divided areas 62a, 63a, and 64a have overlapping ranges with other extended divided areas.
次に、図２Ａを参照して、クライアント端末２０ａは、動画伝送サーバ１０から受信している拡張分割動画データ６１の映像領域（拡張分割領域）６１ａにおける注視領域７０の重心位置ｘ（水平座標位置、ｘ＝０〜ｍ），ｙ（垂直座標位置、ｙ＝０〜ｎ）を示す注視領域位置データＧＡＰ-dat（図１参照）を、定期的に動画伝送サーバ１０に送信する。 Next, referring to FIG. 2A, the client terminal 20 a determines the center-of-gravity position x (horizontal coordinate position) of the gaze area 70 in the video area (extended divided area) 61 a of the extended divided moving picture data 61 received from the moving picture transmission server 10. , X = 0 to m), y (vertical coordinate position, y = 0 to n), gaze area position data GAP-dat (see FIG. 1) is periodically transmitted to the moving image transmission server 10.
なお、クライアント端末２０ａが、動画伝送サーバ１０に注視領域位置データＧＡＰ-datを送信する構成は、本発明の注視領域位置データ送信部に相当する。 The configuration in which the client terminal 20a transmits the gaze area position data GAP-dat to the moving image transmission server 10 corresponds to the gaze area position data transmission unit of the present invention.
動画伝送サーバ１０の動画データ送信部１３は、注視領域位置データＧＡＰ-datを受信したときに、注視領域位置データＧＡＰ-datから、送信中の拡張分割動画データの映像領域における注視領域７０の位置（ｘ，ｙ）を認識すると共に、前回受信した注視領域位置データＧＡＰ-datによって受信した注視領域７０の位置からの変位により、注視領域７０の変位方向（移動方向）を認識する。 When the moving image data transmission unit 13 of the moving image transmission server 10 receives the gaze area position data GAP-dat, the position of the gaze area 70 in the video area of the extended divided moving image data being transmitted is determined from the gaze area position data GAP-dat. While recognizing (x, y), the displacement direction (movement direction) of the gaze area 70 is recognized by the displacement from the position of the gaze area 70 received by the gaze area position data GAP-dat received last time.
そして、動画データ送信部１３は、このようにして認識したクライアント端末２０ａにおける注視領域７０の位置と変位方向に基づいて、クライアント端末２０ａに送信する拡張分割動画データを切替える処理を行う。 Then, the moving image data transmission unit 13 performs a process of switching the extended divided moving image data to be transmitted to the client terminal 20a based on the position and the displacement direction of the gaze area 70 in the client terminal 20a recognized as described above.
図４は、動画伝送サーバ１０が拡張分割動画データ６１をクライアント端末２０ａに送信しているときに、送信する動画データを拡張分割動画データ６２〜６４のいずれかに切替える条件を示している。図４では、注視領域７０を、拡張分割領域６１ａにおける位置に応じて、７０−１、７０−２、７０−３で示している。 FIG. 4 shows a condition for switching the moving image data to be transmitted to any one of the extended divided moving image data 62 to 64 when the moving image transmission server 10 is transmitting the extended divided moving image data 61 to the client terminal 20a. In FIG. 4, the gaze area 70 is indicated by 70-1, 70-2, 70-3 according to the position in the extended divided area 61a.
先ず、注視領域７０−１が拡張分割領域６１ａと拡張分割領域６２ａとの重複範囲内に位置し、且つ、注視領域７０−１の変位方向が図中Ａ１の矢印の方向（右方向、拡張分割領域６１ａの外側に拡張分割領域６２ａ内に向かって進む方向）であるときは、動画データ送信部１３は、クライアント端末２０ａに送信する動画データを、拡張分割動画データ６２に切替える。 First, the gaze area 70-1 is positioned within the overlapping range of the extended divided area 61a and the extended divided area 62a, and the displacement direction of the gaze area 70-1 is the direction indicated by the arrow A1 in the drawing (right direction, extended divided area). In the direction toward the outside of the area 61a toward the extended divided area 62a), the moving picture data transmission unit 13 switches the moving picture data to be transmitted to the client terminal 20a to the extended divided moving picture data 62.
次に、注視領域７０−２が拡張分割領域６１ａと拡張分割領域６４ａとの重複範囲内に位置し、且つ、注視領域７０−２の変位方向が図中Ａ２の矢印の方向（右下方向、拡張分割領域６１ａの外側に拡張分割領域６４ａ内に向かって進む方向）であるときは、動画データ送信部１３は、クライアント端末２０ａに送信する動画データを、拡張分割動画データ６４に切替える。 Next, the gaze area 70-2 is positioned within the overlapping range of the extended divided area 61a and the extended divided area 64a, and the displacement direction of the gaze area 70-2 is the direction indicated by the arrow A2 (lower right direction, In the direction toward the outside of the extended divided area 61a toward the extended divided area 64a), the moving picture data transmitting unit 13 switches the moving picture data to be transmitted to the client terminal 20a to the extended divided moving picture data 64.
また、注視領域７０−３が拡張分割領域６１ａと拡張分割領域６３ａとの重複範囲内に位置し、且つ、注視領域７０−３の変位方向が図中Ａ３の矢印の方向（下方向、拡張分割領域６１ａの外側に拡張分割領域６３ａ内に向かって進む方向）であるときは、動画データ送信部１３は、クライアント端末２０ａに送信する動画データを、拡張分割動画データ６３に切替える。 Also, the gaze area 70-3 is located within the overlapping range of the extended divided area 61a and the extended divided area 63a, and the displacement direction of the gaze area 70-3 is the direction indicated by the arrow A3 in the drawing (downward, extended divided area). When moving to the outside of the area 61a, the moving image data transmission unit 13 switches the moving image data to be transmitted to the client terminal 20a to the expanded divided moving image data 63.
また、拡張分割動画データ保持部１２は、図５に示したように、４つの拡張分割動画データ６１〜６４を結合して、１つの動画データ８０としたシリアライズ動画データの形式で保持している。 Further, as shown in FIG. 5, the extended divided moving image data holding unit 12 combines the four extended divided moving image data 61 to 64 into one moving image data 80 and holds it in the form of serialized moving image data. .
ここで、図５の上段に示したように、４つの拡張分割動画データ６１〜６４を、別データ（別ファイル）として保持している場合は、例えば、クライアント端末２０ａに送信する動画データを、拡張分割動画データ６１（切替え前の拡張分割動画データ）から拡張分割動画データ６２（切替え後の拡張分割動画データ）に切替えるときに、それまで行っていた拡張分割動画データ６１のストリーム送信をＰ１で中止してから、拡張分割動画データ６２を読み出してＰ２からストリーム送信を開始する必要がある。そのため、拡張分割動画データの切替えにある程度時間がかかる。 Here, as shown in the upper part of FIG. 5, when the four pieces of extended divided video data 61 to 64 are held as separate data (separate files), for example, the video data to be transmitted to the client terminal 20a is When switching from the extended divided moving image data 61 (the extended divided moving image data before the switching) to the extended divided moving image data 62 (the extended divided moving image data after the switching), the stream transmission of the extended divided moving image data 61 that has been performed so far is P1. After stopping, it is necessary to read the extended divided moving image data 62 and start stream transmission from P2. Therefore, it takes a certain amount of time to switch the extended divided moving image data.
それに対して、図５の下段に示したように、４つの拡張分割動画データ６１〜６４が結合されて、１つのシリアライズ動画データ８０となっている場合には、シリアライズ動画データ８０の再生位置をＰ１からＰ２に移動させれば済み、拡張分割動画データ６２を新たに読み出す処理は不要である。そのため、拡張分割動画データの切替え時間を短縮することができる。 On the other hand, as shown in the lower part of FIG. 5, when four pieces of extended divided moving image data 61 to 64 are combined into one serialized moving image data 80, the reproduction position of the serialized moving image data 80 is changed. It is only necessary to move from P1 to P2, and a process of newly reading the extended divided moving image data 62 is unnecessary. Therefore, it is possible to shorten the switching time of the extended divided moving image data.
次に、図６に示したフローチャートに従って、動画伝送サーバ１０における拡張分割動画データの一連の送信処理について説明する。 Next, according to the flowchart shown in FIG. 6, a series of transmission processing of the extended divided moving image data in the moving image transmission server 10 will be described.
動画伝送サーバ１０は、クライアント端末２０ａから動画選択データＶＳ-datを受信したときに、図６のフローチャートによる処理を開始し、４つの拡張分割動画データ６１〜６４のうちのいずれかを選択してクラインアント端末２０ａに送信する。 When the moving image transmission server 10 receives the moving image selection data VS-dat from the client terminal 20a, the moving image transmission server 10 starts the process according to the flowchart of FIG. It transmits to the client terminal 20a.
ＳＴＥＰ１〜ＳＴＥＰ２は、拡張分割動画データ保持部１２による処理である。拡張分割動画データ保持部１２は、ＳＴＥＰ１で、動画選択データＶＳ-datにより指定された映像の原動画データ５０を、映像データベース１１から読出し、図３Ａ，図３Ｂを参照して上述したように、４つの拡張分割動画データ６１〜６４を生成する。 STEP 1 to STEP 2 are processes performed by the extended divided moving image data holding unit 12. The extended divided moving image data holding unit 12 reads the original moving image data 50 of the video designated by the moving image selection data VS-dat in STEP 1 from the video database 11 and, as described above with reference to FIGS. 3A and 3B, Four pieces of extended divided moving image data 61 to 64 are generated.
続くＳＴＥＰ２で、拡張分割動画データ保持部１２は、図５を参照して上述したように、４つの拡張分割動画データ６１〜６４を結合してシリアライズデータ化して保持する。 In subsequent STEP 2, the extended divided moving image data holding unit 12 combines the four extended divided moving image data 61 to 64 into serialized data and holds it as described above with reference to FIG. 5.
なお、動画選択データＶＳ-datを受信してから拡張分割動画データ６１〜６４を生成するのではなく、予め生成された拡張分割動画データ６１〜６４を、拡張分割動画データ保持部１２により保持しておくようにしてもよい。この場合、シリアライズデータ化された拡張分割動画データ６１〜６４を、予め保持しておくようにしてもよい。 It should be noted that the extended divided video data 61 to 64 are not generated after the video selection data VS-dat is received, but the previously generated extended divided video data 61 to 64 are held by the extended divided video data holding unit 12. You may make it leave. In this case, the extended divided moving image data 61 to 64 converted into serialized data may be held in advance.
また、ＳＴＥＰ１〜ＳＴＥＰ２の処理は、本発明の動画伝送方法における拡張分割動画データ保持ステップに相当する。 Further, the processing of STEP1 to STEP2 corresponds to the extended divided moving image data holding step in the moving image transmission method of the present invention.
次のＳＴＥＰ３〜ＳＴＥＰ６、及びＳＴＥＰ１０〜ＳＴＥＰ１２は、動画データ送信部１３による処理である。 The next STEP 3 to STEP 6 and STEP 10 to STEP 12 are processes performed by the moving image data transmission unit 13.
ＳＴＥＰ３で、動画データ送信部１３は、拡張分割動画データ６１（初期設定として、拡張分割動画データ６１が選択されている場合）の送信を開始する。続くＳＴＥＰ４〜ＳＴＥＰ５のループにより、動画データ送信部１３は、ＳＴＥＰ４でクライアント端末２０ａからの注視領域位置データＧＡＰ-datの受信の有無を判断し、ＳＴＥＰ５でクライアント端末２０ａからの閲覧終了指示データの受信の有無を判断する。 In STEP 3, the moving image data transmission unit 13 starts transmitting the extended divided moving image data 61 (when the extended divided moving image data 61 is selected as an initial setting). Through the subsequent loop of STEP4 to STEP5, the moving image data transmission unit 13 determines whether or not the gaze area position data GAP-dat is received from the client terminal 20a in STEP4, and receives the browsing end instruction data from the client terminal 20a in STEP5. Determine the presence or absence.
ＳＴＥＰ４で、注視領域位置データＧＡＰ-datを受信したときにＳＴＥＰ１０に分岐し、動画データ送信部１３は、注視領域位置データＧＡＰ-datに基づいて、クライアント端末２０ａで再生されている拡張分割動画データの映像領域における注視領域７０の位置と変位方向を認識する。 In STEP 4, when the gaze area position data GAP-dat is received, the process branches to STEP 10, and the moving image data transmission unit 13 expands the divided divided moving image data reproduced by the client terminal 20 a based on the gaze area position data GAP-dat. The position and displacement direction of the gaze area 70 in the video area are recognized.
続くＳＴＥＰ１１で、動画データ送信部１３は、図４を参照して上述したように、注視領域７０が他の拡張分割領域との重複範囲内に位置し、且つ、注視領域７０の変位方向が送信中の拡張分割動画データの映像領域の外側に他の拡張分割領域内に向かう方向である、という要件の成否を判断する。そして、この要件が成立しているときはＳＴＥＰ１２に進み、動画データ送信部１３は、送信する拡張分割動画データを、注視領域の変位方向の拡張分割領域に対応する拡張分割動画データに切替えてＳＴＥＰ５に進む。 In subsequent STEP 11, the moving image data transmission unit 13 transmits the gaze area 70 in the overlapping range with other extended divided areas and the displacement direction of the gaze area 70 is transmitted as described above with reference to FIG. 4. It is determined whether or not the requirement that it is a direction toward the other extended divided area outside the video area of the extended divided moving image data in the middle. When this requirement is satisfied, the process proceeds to STEP 12, and the moving image data transmission unit 13 switches the extended divided moving image data to be transmitted to the extended divided moving image data corresponding to the extended divided region in the displacement direction of the gaze region, and STEP5. Proceed to
例えば、図４を参照して、クライアント端末２０ａに拡張分割動画データ６１を送信しているときに、注視領域７０が拡張分割領域６１ａと拡張分割領域６２ａとの重複範囲内に位置し、且つ、注視領域７０の変位方向が、拡張分割領域６１ａの外側に拡張分割領域６２ａ内に向かう方向であるときには、動画データ送信部１３は、クライアント端末２０ａに送信する拡張分割動画データを、拡張分割領域６２ａに対応する拡張分割動画データ６２に切替える。 For example, referring to FIG. 4, when transmitting the extended divided moving image data 61 to the client terminal 20a, the gaze area 70 is located within the overlapping range of the extended divided area 61a and the extended divided area 62a, and When the displacement direction of the gaze area 70 is a direction toward the outside of the extended divided area 61a and into the extended divided area 62a, the moving picture data transmission unit 13 transmits the extended divided moving picture data to be transmitted to the client terminal 20a to the extended divided area 62a. Is switched to the extended divided moving image data 62 corresponding to.
一方、ＳＴＥＰ１１の条件が成立していないときにはＳＴＥＰ５に分岐し、動画データ送信部１３は、クライアント端末２０ａに送信する拡張分割動画データの切替えを行わない。 On the other hand, when the condition of STEP11 is not satisfied, the process branches to STEP5, and the moving image data transmission unit 13 does not switch the extended divided moving image data to be transmitted to the client terminal 20a.
ＳＴＥＰ５で、動画データ送信部１３は、クライアント端末２０ａから動画の閲覧終了を指示する閲覧終了指示データを受信したか否かを判断する。そして、閲覧終了指示データを受信したときはＳＴＥＰ６に進み、動画データ送信部１３は、クライアント端末２０ａに対する拡張分割動画データの送信を終了する。また、閲覧終了指示データを受信していないときにはＳＴＥＰ４に戻り、動画データ送信部１３は、クライアント端末２０ａに対する拡張分割動画データの送信を継続する。 In STEP 5, the moving image data transmission unit 13 determines whether or not browsing end instruction data for instructing end of browsing of moving images has been received from the client terminal 20a. When the browsing end instruction data is received, the process proceeds to STEP 6, and the moving image data transmission unit 13 ends the transmission of the extended divided moving image data to the client terminal 20a. When the browsing end instruction data is not received, the process returns to STEP 4 and the moving image data transmission unit 13 continues to transmit the extended divided moving image data to the client terminal 20a.
なお、ＳＴＥＰ３〜ＳＴＥＰ６、及びＳＴＥＰ１０〜ＳＴＥＰ１２による処理は、本発明の動画伝送方法における動画データ送信ステップに相当する。 In addition, the process by STEP3-STEP6 and STEP10-STEP12 is corresponded to the moving image data transmission step in the moving image transmission method of this invention.
［他の実施形態］
上記実施形態では、図３Ａに示したように原動画データ５０の映像領域を四つに分割して、図３Ｂに示したように拡張分割領域を設定したが、図７Ａに示したように、原動画データの映像領域を、含まれる画像に応じたランクによって区画し、各区画ごとに、ランクが高いほど狭い拡張分割領域を設定して拡張分割動画データを生成するようにしてもよい。
[Other Embodiments]
In the above embodiment, the video area of the original moving image data 50 is divided into four as shown in FIG. 3A, and the extended divided area is set as shown in FIG. 3B. However, as shown in FIG. The video area of the original moving image data may be divided according to the rank corresponding to the included image, and the extended divided moving image data may be generated by setting an extended divided area that is narrower as the rank is higher for each section.
図７Ａの例では、サッカー競技場の全景を撮像した原画像の映像領域１００ａに対して、使用者の注目度が高いと想定されるゴール付近の領域１１０を高ランクとし、サッカーフィールドを含む領域１２０を中ランクとし、サッカーフィールドの外側を低ランクとする３段階のランク分けを行っている。なお、領域１１０，１２０，１３０は、本発明のランク別領域に相当する。 In the example of FIG. 7A, an area 110 including a soccer field is given a high rank in the area 110 near the goal, which is assumed to have a high degree of user attention, with respect to the video area 100a of the original image obtained by capturing the entire view of the soccer field. The ranking is performed in three stages, with 120 being the middle rank and the outside of the soccer field being the low rank. Note that the areas 110, 120, and 130 correspond to rank-specific areas of the present invention.
そして、図７Ｂに示したように、高ランクの領域１１０については、小サイズの注目領域１１５により狭い拡張分割領域を設定して、拡張分割動画データ生成する。また、中ランクの領域１２０については、中サイズの注目領域１２５によって、高ランクの領域１１０よりも広い拡張分割領域を設定して拡張分割動画データを生成する。また、低ランクの領域１３０については、大サイズの注目領域１３５によって、中ランクの領域１２０よりも広い拡張分割領域を設定して拡張分割動画データ生成する。 Then, as shown in FIG. 7B, for the high rank area 110, an extended divided moving image data is generated by setting a narrow extended divided area by a small-sized attention area 115. In addition, for the middle-rank region 120, the expanded divided moving image data is generated by setting an extended divided region wider than the high-rank region 110 by the medium-sized attention region 125. For the low-rank area 130, the extended divided moving image data is generated by setting an extended divided area wider than the medium-rank area 120 by the large-sized attention area 135.
そして、動画データ送信部１３は、高ランクの領域１１０から生成した拡張分割動画データについては、解像度を落とさずにそのままクライアント端末２０ａに送信する。また、中ランクの領域１２０から生成した拡張部分動画データ、及び低ランクの領域１３０から生成した拡張分割動画データについては、データ量が高ランクの領域１１０から生成した拡張分割動画データと同等となるように、解像度を低下させて（映像領域を縮小して）クライアント端末２０ａに送信する。 Then, the moving image data transmission unit 13 transmits the expanded divided moving image data generated from the high-rank area 110 to the client terminal 20a as it is without reducing the resolution. Further, the extended partial moving image data generated from the medium rank region 120 and the extended divided moving image data generated from the low rank region 130 are equivalent to the extended divided moving image data generated from the high rank region 110. As described above, the resolution is reduced (the video area is reduced) and transmitted to the client terminal 20a.
このように、ランクに応じて拡張分割動画データの解像度を低下させてクライアント端末２０ａに送信することにより、クライアント端末２０ａにおいて、使用者は、高ランクの領域１１０については、解像度が高い狭い領域を注視領域７０として、映像を閲覧することができる。また、中ランクの領域１２０については、高ランクの領域１１０よりも解像度が低く広い領域を注視領域７０として、映像を閲覧することができる。さらに、低ランクの領域１３０については、中ランクの領域１２０よりも解像度が低く広い領域を注視領域７０として、映像を閲覧することができる。 In this way, by reducing the resolution of the extended divided video data according to the rank and transmitting it to the client terminal 20a, in the client terminal 20a, the user can select a narrow area with high resolution for the high-rank area 110. An image can be viewed as the gaze area 70. In addition, in the middle rank area 120, the video can be browsed with the wide area having a resolution lower than that of the high rank area 110 as the gaze area 70. Further, with regard to the low-rank area 130, the video can be browsed with the wide area having a resolution lower than that of the medium-rank area 120 as the gaze area 70.
１…通信ネットワーク、１０…動画伝送サーバ、１１…映像データベース、１２…拡張分割動画データ保持部、１３…動画データ送信部、２０（２０ａ〜２０ｃ）…クライアント端末、２１（２１ａ〜２１ｃ）…（クライアント端末の）表示部、５０…原動画データ、５０ａ…原動画データの映像領域、５１〜５４…分割領域、６１〜６４…拡張分割領域データ、６１ａ〜６４ａ…拡張分割領域の映像領域、７０…注視領域。 DESCRIPTION OF SYMBOLS 1 ... Communication network, 10 ... Video transmission server, 11 ... Video database, 12 ... Expansion division | segmentation video data holding part, 13 ... Video data transmission part, 20 (20a-20c) ... Client terminal, 21 (21a-21c) ... ( Display unit of client terminal) 50... Original moving image data, 50 a... Video region of original moving image data, 51 to 54... Divided region, 61 to 64 ... extended divided region data, 61 a to 64 a. ... Gaze area.
Claims (6)
原動画データの映像領域を分割した各分割領域を、隣接する他の分割領域の方向に、該他の分割領域との相互の重複範囲が前記所定サイズ以上となるように拡張した各拡張分割領域の動画データである複数の拡張分割動画データを保持した拡張分割動画データ保持部と、
前記複数の拡張分割動画データのいずれか一つを選択して前記クライアント端末に送信し、前記拡張分割動画データの送信中に、前記クライアント端末から、該送信中の前記拡張分割動画データの映像領域における前記注視領域の位置を示す注視領域位置データを受信して、該注視領域位置データに基づいて、前記注視領域が、該送信中の前記拡張分割動画データに対応する前記拡張分割領域の他の前記拡張分割領域との重複範囲内に位置し、且つ、前記注視領域が該送信中の前記拡張分割動画データの映像領域の外側に向かって変位していることを認識したときには、前記クライアント端末に送信する前記拡張分割動画データを、送信中の前記拡張分割動画データに対応する前記拡張分割領域と前記注視領域の変位方向で重複した他の前記拡張分割領域に対応する前記拡張分割動画データに切替えて、切替え前の前記拡張分割動画データの再生位置に対応する再生位置から送信する動画データ送信部と
を備えたことを特徴とする動画伝送サーバ。 By transmitting moving image data at a predetermined speed to the client terminal via a communication network, a gaze region having a predetermined size from a video region obtained by streaming reproduction of the moving image data in response to an operation by a user at the client terminal. Is a video transmission server that can be extracted and displayed on the display unit,
Each extended divided area obtained by expanding each divided area obtained by dividing the video area of the original moving image data in the direction of another adjacent divided area so that the overlapping range with the other divided areas is equal to or larger than the predetermined size. An extended split video data holding unit that holds a plurality of extended split video data,
One of the plurality of extended divided video data is selected and transmitted to the client terminal, and during transmission of the extended divided video data, a video area of the extended divided video data being transmitted from the client terminal Receiving the gaze area position data indicating the position of the gaze area in the area, and based on the gaze area position data, the gaze area corresponds to the other extended divided area corresponding to the extended divided moving image data being transmitted. When the client terminal recognizes that it is located within the overlapping range with the extended divided area and the gaze area is displaced toward the outside of the video area of the extended divided moving image data being transmitted, The extended divided moving image data to be transmitted is the other of the extended divided region corresponding to the extended divided moving image data being transmitted and the other overlapped in the displacement direction of the gaze region A moving picture data transmission server comprising: a moving picture data transmitting unit that switches to the extended divided moving picture data corresponding to the extended divided area and transmits from a reproduction position corresponding to the reproduction position of the extended divided moving picture data before the switching. .
前記拡張分割動画データ保持部は、前記複数の拡張分割動画データを、前記複数の拡張分割動画データを結合して一つの動画データとしたシリアライズ動画データの形式で保持し、
前記動画データ送信部は、前記クライアント端末に伝送する前記拡張分割動画データの切替えを、前記シリアライズ動画データの再生位置を、切替え前の前記拡張分割動画データの再生位置から、切替え前の前記拡張分割動画データの再生位置に対応した切替え後の前記拡張分割動画データの再生位置にシフトさせることによって行うことを特徴とする動画伝送サーバ。 The video transmission server according to claim 1,
The extended divided video data holding unit holds the plurality of extended divided video data in the form of serialized video data obtained by combining the plurality of extended divided video data into one video data,
The moving image data transmission unit switches the extended divided moving image data to be transmitted to the client terminal, the reproduction position of the serialized moving image data from the reproduction position of the extended divided moving image data before the switching, and the extended divided moving image data before the switching. A moving image transmission server, wherein the moving image transmission server is shifted to the reproduction position of the extended divided moving image data after switching corresponding to the reproduction position of the moving image data.
前記拡張分割動画データは、前記原動画データの映像領域を、含まれる映像に応じたランク付けがなされた複数のランク別領域に区画し、各ランク別領域毎に、ランクが低いほど前記分割領域のサイズ及び前記注視領域のサイズを広く設定して生成されており、
前記動画データ送信部は、前記拡張分割動画データの解像度を、生成元の前記ランク別領域のランクに応じて変更して、前記クライアント端末に送信することを特徴とする動画伝送サーバ。 In the video transmission server according to claim 1 or 2,
The extended divided video data divides the video area of the original video data into a plurality of rank-by-rank areas that are ranked according to the included video, and for each rank-specific area, the lower the rank, the lower the divided area. And the size of the gaze area is set to be wide,
The moving image transmission server, wherein the moving image data transmission unit changes the resolution of the extended divided moving image data in accordance with the rank of the rank-specific region of the generation source, and transmits the changed divided moving image data to the client terminal.
前記クライアント端末は、
前記動画伝送サーバから動画データを受信してストリーミング再生により前記表示部に動画を表示するときに、使用者による操作に応じて、前記動画データの映像領域内に所定サイズの注視領域を設定する注視領域設定部と、
前記動画データの映像領域から前記注視領域の映像部分を抜き出して、前記表示部に表示する注視領域表示部と、
前記動画データの映像領域における前記注視領域の位置を示す注視領域位置データを、前記動画伝送サーバに送信する注視領域位置データ送信部とを備え、
前記動画伝送サーバは、
原動画データの映像領域を分割した各分割領域を、隣接する他の分割領域の方向に、該他の分割領域との相互の重複範囲が前記所定サイズ以上となるように拡張した各拡張分割領域の動画データである複数の拡張分割動画データを保持した拡張分割動画データ保持部と、
前記複数の拡張分割動画データのいずれか一つを選択して前記クライアント端末に送信し、前記拡張分割動画データの送信中に受信した前記注視領域位置データに基づいて、前記クライアント端末において、前記注視領域が、該送信中の前記拡張分割動画データに対応する前記拡張分割領域の他の前記拡張分割領域との重複箇所に位置し、且つ、前記注視領域が該送信中の前記拡張分割動画データの映像領域の外側に向かって変位していることを認識したときには、前記クライアント端末に送信する前記拡張分割動画データを、送信中の前記拡張分割動画データに対応する前記拡張分割領域と、前記注視領域の変位方向で重複した他の前記拡張分割領域に対応する前記拡張分割動画データに切替えて、切替え前の前記拡張分割動画データの再生位置に対応する再生位置から送信する動画データ送信部と
を備えたことを特徴とする動画伝送システム。 A video transmission server that transmits video data; and a client terminal that communicates with the video transmission server via a communication network. The client terminal receives video data transmitted from the video transmission server at a predetermined speed. In a video transmission system that displays video on the display unit by streaming playback,
The client terminal is
When receiving moving image data from the moving image transmission server and displaying the moving image on the display unit by streaming playback, a gaze area of a predetermined size is set in the video area of the moving image data according to a user operation An area setting section;
Extracting a video portion of the gaze area from the video area of the moving image data and displaying it on the display section;
A gaze area position data transmitting unit that transmits gaze area position data indicating a position of the gaze area in the video area of the video data to the video transmission server;
The video transmission server is
Each extended divided area obtained by expanding each divided area obtained by dividing the video area of the original moving image data in the direction of another adjacent divided area so that the overlapping range with the other divided areas is equal to or larger than the predetermined size. An extended split video data holding unit that holds a plurality of extended split video data,
One of the plurality of extended divided video data is selected and transmitted to the client terminal. Based on the gaze area position data received during transmission of the extended divided video data, the gaze at the client terminal An area is located at an overlap portion of the extended divided area corresponding to the extended divided moving picture data being transmitted with another extended divided area, and the gaze area is the extended divided moving picture data being transmitted. When recognizing that it is displaced toward the outside of the video area, the extended divided video data to be transmitted to the client terminal, the extended divided video data corresponding to the extended divided video data being transmitted, and the gaze area Is switched to the extended divided moving image data corresponding to the other extended divided region overlapped in the displacement direction of the extended divided moving image data before switching. Video transmission system is characterized in that a moving image data transmission unit to be transmitted from the reproduction position corresponding to the position.
前記動画伝送サーバが、原動画データの映像領域を分割した各分割領域を、隣接する他の分割領域の方向に、該他の分割領域との相互の重複範囲が前記所定サイズ以上となるように拡張した各拡張分割領域の動画データである複数の拡張分割動画データを保持した拡張分割動画データ保持ステップと、
前記動画伝送サーバが、前記複数の拡張分割動画データのいずれか一つを選択して前記クライアント端末に送信し、前記拡張分割動画データの送信中に、前記クライアント端末から、該送信中の前記拡張分割動画データの映像領域における前記注視領域の位置を示す注視領域位置データを受信して、該注視領域位置データに基づいて、前記注視領域が、該送信中の前記拡張分割動画データに対応する前記拡張分割領域の他の前記拡張分割領域との重複範囲内に位置し、且つ、前記注視領域が該送信中の前記拡張分割動画データの映像領域の外側に向かって変位していることを認識したときには、前記クライアント端末に送信する前記拡張分割動画データを、送信中の前記拡張分割動画データに対応する前記拡張分割領域と前記注視領域の変位方向で重複した他の前記拡張分割領域に対応する前記拡張分割動画データに切替えて、切替え前の前記拡張分割動画データの再生位置に対応する再生位置から送信する動画データ送信ステップと
を含むことを特徴とする動画伝送方法。 By transmitting the moving image data from the moving image transmission server to the client terminal via the communication network at a predetermined speed, the client terminal has a predetermined size from a video area by streaming reproduction of the moving image data in accordance with a user operation. A video transmission method that enables a gaze area to be extracted and displayed on a display unit,
The moving picture transmission server divides each divided area obtained by dividing the video area of the original moving picture data in the direction of another adjacent divided area so that the overlapping range with the other divided areas is not less than the predetermined size. An extended divided video data holding step that holds a plurality of extended divided video data that is video data of each extended divided area;
The moving image transmission server selects any one of the plurality of extended divided moving image data and transmits the selected extended divided moving image data to the client terminal. During transmission of the extended divided moving image data, the client terminal transmits the extension being transmitted. Receiving gaze area position data indicating the position of the gaze area in the video area of the divided video data, and based on the gaze area position data, the gaze area corresponds to the extended divided video data being transmitted Recognized that the extended divided area is located within the overlapping range of the extended divided area with the extended divided area and that the gaze area is displaced toward the outside of the video area of the extended divided moving image data being transmitted. Sometimes, the extended divided moving image data to be transmitted to the client terminal is changed in the extended divided region and the gaze region corresponding to the extended divided moving image data being transmitted. Moving image data transmitting step of switching to the extended divided moving image data corresponding to the other extended divided region overlapped in the direction and transmitting from the reproduction position corresponding to the reproduction position of the extended divided moving image data before switching. A featured video transmission method.
動画データの映像領域を分割した各分割領域を、隣接する他の分割領域の方向に、該他の分割領域との相互の重複範囲が前記所定サイズ以上となるように拡張した各拡張分割領域の動画データである複数の拡張分割動画データを保持した拡張分割動画データ保持部と、
前記複数の拡張分割動画データのいずれか一つを選択して前記クライアント端末に送信し、前記拡張分割動画データの送信中に、前記クライアント端末から、該送信中の前記拡張分割動画データの映像領域における前記注視領域の位置を示す注視領域位置データを受信して、該注視領域位置データに基づいて、前記注視領域が、該送信中の前記拡張分割動画データに対応する前記拡張分割領域の他の前記拡張分割領域との重複範囲内に位置し、且つ、前記注視領域が該送信中の前記拡張分割動画データの映像領域の外側に向かって変位していることを認識したときには、前記クライアント端末に送信する前記拡張分割動画データを、送信中の前記拡張分割動画データに対応する前記拡張分割領域と前記注視領域の変位方向で重複した他の前記拡張分割領域に対応する前記拡張分割動画データに切替えて、切替え前の前記拡張分割動画データの再生位置に対応する再生位置から送信する動画データ送信部と
して機能させることを特徴とする動画伝送サーバ用プログラム。 By transmitting the moving image data from the moving image transmission server to the client terminal via the communication network at a predetermined speed, the client terminal has a predetermined size from a video area by streaming reproduction of the moving image data in accordance with a user operation. A program for a moving image transmission server that allows a gaze area to be extracted and displayed on a display unit, the computer constituting the moving image transmission server,
Each divided area obtained by dividing the video area of the moving image data is expanded in the direction of another adjacent divided area so that the overlapping range with the other divided areas is equal to or larger than the predetermined size. An extended divided video data holding unit that holds a plurality of extended divided video data,
One of the plurality of extended divided video data is selected and transmitted to the client terminal, and during transmission of the extended divided video data, a video area of the extended divided video data being transmitted from the client terminal Receiving the gaze area position data indicating the position of the gaze area in the area, and based on the gaze area position data, the gaze area corresponds to the other extended divided area corresponding to the extended divided moving image data being transmitted. When the client terminal recognizes that it is located within the overlapping range with the extended divided area and the gaze area is displaced toward the outside of the video area of the extended divided moving image data being transmitted, The extended divided moving image data to be transmitted is the other of the extended divided region corresponding to the extended divided moving image data being transmitted and the other overlapped in the displacement direction of the gaze region Switching to the extended divided moving image data corresponding to the extended divided area, and functioning as a moving image data transmitting unit for transmitting from a reproduction position corresponding to the reproduction position of the extended divided moving image data before switching program.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015113436A JP6037354B1 (en) | 2015-06-03 | 2015-06-03 | Video transmission server |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015113436A JP6037354B1 (en) | 2015-06-03 | 2015-06-03 | Video transmission server |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP6037354B1 true JP6037354B1 (en) | 2016-12-07 |
| JP2016225952A JP2016225952A (en) | 2016-12-28 |
Family
ID=57483176
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015113436A Expired - Fee Related JP6037354B1 (en) | 2015-06-03 | 2015-06-03 | Video transmission server |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6037354B1 (en) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111831243A (en) | 2019-04-18 | 2020-10-27 | 三星电子株式会社 | Display device, user terminal device, and device control method |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007036339A (en) * | 2005-07-22 | 2007-02-08 | Canon Inc | Image-distributing system |
| WO2012039404A1 (en) * | 2010-09-24 | 2012-03-29 | 株式会社Gnzo | Video bit stream transmission system |
| JP2012124763A (en) * | 2010-12-09 | 2012-06-28 | Sony Corp | Video display device, video display system, video display method and program |
| JP2014155006A (en) * | 2013-02-07 | 2014-08-25 | Nippon Telegr & Teleph Corp <Ntt> | Video distribution system, and video distribution method |
-
2015
- 2015-06-03 JP JP2015113436A patent/JP6037354B1/en not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007036339A (en) * | 2005-07-22 | 2007-02-08 | Canon Inc | Image-distributing system |
| WO2012039404A1 (en) * | 2010-09-24 | 2012-03-29 | 株式会社Gnzo | Video bit stream transmission system |
| JP2012124763A (en) * | 2010-12-09 | 2012-06-28 | Sony Corp | Video display device, video display system, video display method and program |
| JP2014155006A (en) * | 2013-02-07 | 2014-08-25 | Nippon Telegr & Teleph Corp <Ntt> | Video distribution system, and video distribution method |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2016225952A (en) | 2016-12-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11562466B2 (en) | Image distribution device, image distribution system, image distribution method, and image distribution program | |
| US20110161818A1 (en) | Method and apparatus for video chapter utilization in video player ui | |
| US10212481B2 (en) | Home menu interface for displaying content viewing options | |
| KR102519592B1 (en) | Display apparatus and controlling method thereof | |
| CN105306859A (en) | Information-processing device and information-processing method | |
| EP2615564A1 (en) | Computing device for performing at least one function and method for controlling the same | |
| US10733925B2 (en) | Display control apparatus, display control method, and non-transitory computer-readable storage medium | |
| US20140380161A1 (en) | Information processing apparatus, information processing method, and program | |
| JP5887994B2 (en) | Video transmission device, terminal device, video transmission method and program | |
| JP6037354B1 (en) | Video transmission server | |
| CN113396596A (en) | Video distribution device, video distribution system, video distribution method, and video distribution program | |
| JP2008293360A (en) | Object information display device and method | |
| CN116017019A (en) | Video playing method and device, electronic equipment and computer readable medium | |
| JP6208910B1 (en) | Moving image processing apparatus, moving image processing system, moving image processing method, and moving image processing program | |
| JP6590433B2 (en) | Video playback management method, system and program | |
| JP2020108137A (en) | Video delivery device, video delivery system, video delivery method, and video delivery program | |
| JP6623905B2 (en) | Server device, information processing method and program | |
| US20240078070A1 (en) | Video distribution device, display control device, video distribution method, display control method, and non-transitory computer readable medium | |
| JP7335536B2 (en) | Computer program, information processing device and information processing method | |
| JP7332919B2 (en) | Computer program, information processing device and information processing method | |
| US10057629B2 (en) | Terminal device, video distribution device, and program | |
| JP2017063282A (en) | Server device, server program, terminal program, moving image transmission method, moving image display method, and communication system | |
| JP2021182667A (en) | Image processing apparatus and image processing method | |
| JP2013258639A (en) | Video providing system, video analysis device, video analysis method, and video analysis program | |
| KR20230095297A (en) | Method for providing multi view service and apparatus for same |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160927 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161025 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6037354 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |