JP2018180496A - Moving image processing device, moving image processing system, moving image processing method, and moving image processing program - Google Patents

Moving image processing device, moving image processing system, moving image processing method, and moving image processing program Download PDF

Info

Publication number
JP2018180496A
JP2018180496A JP2017084874A JP2017084874A JP2018180496A JP 2018180496 A JP2018180496 A JP 2018180496A JP 2017084874 A JP2017084874 A JP 2017084874A JP 2017084874 A JP2017084874 A JP 2017084874A JP 2018180496 A JP2018180496 A JP 2018180496A
Authority
JP
Japan
Prior art keywords
moving image
composite image
switching
moving
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017084874A
Other languages
Japanese (ja)
Other versions
JP6208910B1 (en
Inventor
徹平 江里口
Teppei ERIGUCHI
徹平 江里口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cuvie Co Ltd
Original Assignee
Cuvie Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cuvie Co Ltd filed Critical Cuvie Co Ltd
Priority to JP2017084874A priority Critical patent/JP6208910B1/en
Application granted granted Critical
Publication of JP6208910B1 publication Critical patent/JP6208910B1/en
Publication of JP2018180496A publication Critical patent/JP2018180496A/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Television Systems (AREA)
  • Studio Devices (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a moving image processing device capable of displaying a moving image so that a viewer can enjoy in a limited specification more.SOLUTION: A moving image processing device 10 selectively switches a moving image taken with a plurality of cameras for display on a display device 20, and is equipped with a composite image generation part 101b which generates a composite image in which the moving images are arranged not to overlap each other with at least one having a different resolution from others, a composite image output part 101c which outputs a composite image and selectively displays it on the display device 20, and a switch command input part 102 for inputting of a switch command of the moving image outputted from the display device 20, and the composite image output part 101 outputs to the display device 20 the composite image in which a moving image having been commanded for switching is set higher than other moving images in resolution, and displays the moving image having been commanded for switching on the display device 20.SELECTED DRAWING: Figure 1

Description

本発明は、動画像を処理する動画像処理装置、動画像処理システム、動画像処理方法及び動画像処理プログラムに関する。   The present invention relates to a moving image processing apparatus that processes moving images, a moving image processing system, a moving image processing method, and a moving image processing program.

近年、通信技術の発達により、動画像の送受信がより多く行われるようになっている。動画像の品質要求は年々高まってきており、より高品質な動画像の送受信が求められている。従来、このような動画像において、複数の動画像を合成して送受信することが知られている(例えば、特許文献1参照)。   In recent years, with the development of communication technology, more and more moving image transmission and reception are performed. The quality requirements for moving pictures are increasing year by year, and transmission and reception of higher quality moving pictures are required. Conventionally, it is known to combine and transmit a plurality of moving images in such moving images (see, for example, Patent Document 1).

特開2007−271908号公報Unexamined-Japanese-Patent No. 2007-271908

しかしながら、動画像を適切に処理することができるデータ量や処理量は装置のスペックによって制限があるため、制限されたデータ量や処理量のもとで複数の動画像を単に合成して送受信しようとすると、視聴者が見たい動画像をより高品質な状態で表示することが困難になるという問題がある。   However, since the amount of data and the amount of processing that can properly process moving images are limited by the specifications of the device, a plurality of moving images may simply be synthesized and transmitted under the limited amount of data and processing amount. If this is the case, there is a problem that it becomes difficult to display moving images that the viewer wants to view in a higher quality state.

以上に鑑みて、本発明は、限られたスペックの中で視聴者がより楽しめるように動画像を表示することができる動画像処理装置、動画像処理システム、動画像処理方法及び動画像処理プログラムを提供することを目的とする。   In view of the above, according to the present invention, a moving image processing apparatus, a moving image processing system, a moving image processing method, and a moving image processing program capable of displaying moving images so that viewers can enjoy more within limited specifications. Intended to provide.

本願に開示する動画像処理装置は、線上に順に配列された複数のカメラによって撮影されたそれぞれの動画像を前記線上のカメラの順に選択的に切り換えて表示装置に表示させる動画像処理装置であって、前記それぞれの動画像の少なくとも一つを他の動画像と異なる解像度にして前記それぞれの動画像が互いに重ならないように配置した合成画像を生成する合成画像生成部と、前記合成画像生成部が生成した合成画像を前記表示装置に出力し前記合成画像の一部である前記動画像を前記表示装置に選択的に表示させる合成画像出力部と、前記表示装置から出力される前記動画像の切り換え指示を入力する切り換え指示入力部とを備え、前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を入力すると、前記それぞれの動画像のうち、前記表示装置から切り換え指示された動画像が他の動画像よりも高解像度に設定された合成画像を表示装置に出力し前記切り換え指示された動画像を表示装置に表示させる。   The moving image processing apparatus disclosed in the present application is a moving image processing apparatus that selectively switches each moving image shot by a plurality of cameras sequentially arranged on a line in order of the cameras on the line and displays the image on the display device. A composite image generation unit configured to generate a composite image in which at least one of the respective moving images has a resolution different from that of the other moving images and the respective moving images are arranged so as not to overlap each other; A composite image output unit for outputting the composite image generated by the display unit to the display device and selectively displaying the moving image which is a part of the composite image on the display device; and of the moving image output from the display device A switching instruction input unit for inputting a switching instruction, and the composite image output unit, when the switching instruction input unit inputs the switching instruction, the respective moving images Of switching the designated moving image is displayed on the display device the switching instruction moving image outputted to a display device configured synthesized image at a high resolution than other video image from said display device.

本願の一観点によれば、限られたスペックの中で視聴者がより楽しめるように動画像を表示することができる。   According to one aspect of the present application, it is possible to display a moving image so that the viewer can more enjoy the limited specifications.

第1の実施形態に係る動画像処理システムおよび動画像処理装置を示す全体構成図である。BRIEF DESCRIPTION OF THE DRAWINGS It is a whole block diagram which shows the moving image processing system which concerns on 1st Embodiment, and a moving image processing apparatus. 通信速度対応テーブルを示す説明図である。It is explanatory drawing which shows a communication speed corresponding | compatible table. 複数のカメラの配列と被写体との位置関係を示す説明図である。FIG. 6 is an explanatory view showing a positional relationship between an arrangement of a plurality of cameras and an object. 表示部において動画像が切り換えられていく様子を示す説明図である。It is explanatory drawing which shows a mode that a moving image is switched in a display part. 合成画像における動画像の配置を示す説明図である。It is an explanatory view showing arrangement of a moving picture in a synthetic picture. 図5における合成画像のカメラの配列を示す説明図である。It is explanatory drawing which shows arrangement | positioning of the camera of the synthetic | combination image in FIG. 図5とは別の合成画像における動画像の配置を示す説明図である。It is explanatory drawing which shows arrangement | positioning of the moving image in the synthetic | combination image different from FIG. 図7における合成画像のカメラの配列を示す説明図である。It is explanatory drawing which shows arrangement | positioning of the camera of the synthetic | combination image in FIG. 一時点における全ての合成画像を示す説明図である。It is explanatory drawing which shows all the synthesized images in one time. 動画像処理装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of a moving image processing apparatus. 図5および図7とは別の合成画像における動画像の配置を示す説明図である。FIG. 10 is an explanatory view showing the arrangement of moving images in a synthesized image different from those in FIGS. 5 and 7; 図5、図7および図12とは別の合成画像における動画像の配置を示す説明図である。FIG. 13 is an explanatory view showing the arrangement of moving images in a synthesized image different from those in FIGS. 5, 7 and 12; 第2の実施形態に係る動画像処理装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the moving image processing apparatus which concerns on 2nd Embodiment. 合成画像における動画像の配置パターンに関する第1の変形例を示す説明図である。It is explanatory drawing which shows the 1st modification regarding the arrangement pattern of the moving image in a synthesized image. 合成画像における動画像の配置パターンに関する第2の変形例を示す説明図である。It is explanatory drawing which shows the 2nd modification regarding the arrangement pattern of the moving image in a synthesized image. 合成画像における動画像の配置パターンに関する第3の変形例を示す説明図である。It is explanatory drawing which shows the 3rd modification regarding the arrangement pattern of the moving image in a synthesized image. 合成画像における動画像の配置パターンに関する第4の変形例を示す説明図である。It is explanatory drawing which shows the 4th modification regarding the arrangement pattern of the moving image in a synthesized image. 合成画像における動画像の配置パターンに関する第5の変形例を示す説明図である。It is explanatory drawing which shows the 5th modification regarding the arrangement pattern of the moving image in a synthesized image.

[第1の実施形態]
以下、本発明の第1の実施形態における動画像処理装置、動画像処理システム、動画像処理方法及び動画像処理プログラムについて、図面を参照して説明する。
図1は、本発明の第1実施形態としての動画像処理システム1を示す全体構成図である。
動画像処理システム1は、表示装置20と動画像処理装置10とを備えている。これら表示装置20と動画像処理装置10とは、ネットワークを介して互いに接続されている。
First Embodiment
Hereinafter, a moving image processing apparatus, a moving image processing system, a moving image processing method, and a moving image processing program according to a first embodiment of the present invention will be described with reference to the drawings.
FIG. 1 is an overall configuration diagram showing a moving image processing system 1 according to a first embodiment of the present invention.
The moving image processing system 1 includes a display device 20 and a moving image processing device 10. The display device 20 and the moving image processing apparatus 10 are connected to each other via a network.

表示装置20は、制御部201と、通信部(切り換え指示出力部)202と、記憶部203と、表示部204と、操作部205とを備えている。
通信部202は、例えば、各種通信デバイスなどからなり、動画像処理装置10から送信された合成画像データを入力する。なお、合成画像データについては、後述するものとする。また、通信部202は、制御部201が出力した、後述する切り換え指示信号を動画像処理装置10に送信する。
記憶部203は、例えば、ハードディスクやメモリなどからなり、通信部202が入力した合成画像データの他、各種プログラムや作業データなどを記憶する。
The display device 20 includes a control unit 201, a communication unit (switching instruction output unit) 202, a storage unit 203, a display unit 204, and an operation unit 205.
The communication unit 202 includes, for example, various communication devices, and inputs composite image data transmitted from the moving image processing apparatus 10. The composite image data will be described later. The communication unit 202 also transmits a switching instruction signal, which will be described later, output from the control unit 201 to the moving image processing apparatus 10.
The storage unit 203 includes, for example, a hard disk and a memory, and stores various programs, work data, and the like in addition to the composite image data input by the communication unit 202.

表示部204は、例えばモニタなどからなり、記憶部203が記憶した合成画像データのうち、一つのカメラで撮影された一つの動画像領域のみを択一的に選択して動画像として表示する。
操作部205は、例えばキーボード、マウス、タッチパッドまたはボタンなどからなり、ユーザからの各種指示を受け付け、各種の指示信号を制御部201に出力する。例えば、操作部205は、表示部204が動画像を表示しているときに、ユーザが動画像の表示の切り換え操作を行うと、動画像の切り換え操作指示信号を制御部201に出力する。
The display unit 204 includes, for example, a monitor, and alternatively selects only one moving image area photographed by one camera among the composite image data stored in the storage unit 203 and selectively displays it as a moving image.
The operation unit 205 includes, for example, a keyboard, a mouse, a touch pad, and a button, receives various instructions from the user, and outputs various instruction signals to the control unit 201. For example, when the display unit 204 is displaying a moving image, the operation unit 205 outputs a moving image switching operation instruction signal to the control unit 201 when the user performs a moving image display switching operation.

制御部201は、例えばCPU等からなり、装置全体の制御を行う。また、制御部201は、記憶部203が記憶した合成画像データを読み出して、表示部204に出力する。さらに、制御部201は、操作部205が出力した切り換え操作指示信号を入力し、当該切り換え操作指示信号を通信部202に出力する。   The control unit 201 includes, for example, a CPU, and controls the entire apparatus. Further, the control unit 201 reads out the composite image data stored in the storage unit 203 and outputs the composite image data to the display unit 204. Furthermore, the control unit 201 receives the switching operation instruction signal output from the operation unit 205, and outputs the switching operation instruction signal to the communication unit 202.

動画像処理装置10は、制御部101と、通信部(切り換え指示入力部)102と、記憶部103と、表示部104と、操作部105と、動画像入力部106とを備えている。
通信部102は、例えば、各種通信デバイスなどからなり、各種の合成画像データを表示装置20に送信する。また、通信部102は、表示装置20から送信された切り換え指示を入力し、この切り換え指示を制御部101に出力する。
The moving image processing apparatus 10 includes a control unit 101, a communication unit (switching instruction input unit) 102, a storage unit 103, a display unit 104, an operation unit 105, and a moving image input unit 106.
The communication unit 102 includes, for example, various communication devices, and transmits various types of composite image data to the display device 20. The communication unit 102 also receives the switching instruction transmitted from the display device 20, and outputs the switching instruction to the control unit 101.

記憶部103は、例えば、ハードディスクやメモリなどからなり、動画像入力部106が入力した各種動画像データや、後述する合成画像生成部101bが生成した各種合成画像データの他、各種プログラムや作業データなどを記憶する。また、記憶部103は、図2に示すように、表示装置20と動画像処理装置10との間の通信速度と、切り換え速度のしきい値とが対応付けられた通信速度対応テーブルを記憶する。この通信速度対応テーブルにおいては、通信速度が遅いと切り換え速度のしきい値が大きくなり、通信速度が速くなるにつれて段階的にしきい値が小さくなるように設定されている。例えば、しきい値は以下の式に基づいて設定される。
しきい値=最小動画像単位のデータ量(Mb)/通信速度(Mbps)
具体的には、しきい値(1.5秒)=最小動画像単位のデータ量(15Mb)/通信速度(10Mbps)となる。
The storage unit 103 includes, for example, a hard disk and a memory, and in addition to various moving image data input by the moving image input unit 106 and various composite image data generated by the composite image generation unit 101b described later, various programs and operation data Remember etc. In addition, as illustrated in FIG. 2, the storage unit 103 stores a communication speed correspondence table in which the communication speed between the display device 20 and the moving image processing apparatus 10 is associated with the switching speed threshold. . In this communication speed correspondence table, when the communication speed is low, the switching speed threshold is increased, and the threshold is set to be gradually decreased as the communication speed is increased. For example, the threshold is set based on the following equation.
Threshold value = minimum moving image unit data amount (Mb) / communication speed (Mbps)
Specifically, threshold value (1.5 seconds) = minimum moving image unit data amount (15 Mb) / communication speed (10 Mbps).

表示部104は、例えばモニタなどからなり、動画像を処理するための処理画面等を表示する。
操作部105は、例えばキーボード、マウス、タッチパッドまたはボタンなどからなり、ユーザからの各種指示を受け付け、各種の指示信号を制御部101に出力する。
動画像入力部106は、例えばUSBおよびCD-ROMなどの各種記憶媒体に記憶された動画像データや通信装置から送信された動画像データを入力し、制御部101に出力する。
The display unit 104 includes, for example, a monitor and displays a processing screen and the like for processing a moving image.
The operation unit 105 includes, for example, a keyboard, a mouse, a touch pad, or a button, receives various instructions from the user, and outputs various instruction signals to the control unit 101.
The moving image input unit 106 inputs moving image data stored in various storage media such as USB and CD-ROM, and moving image data transmitted from a communication apparatus, and outputs the data to the control unit 101.

制御部101は、例えばCPU等からなり、メイン制御部101aと、合成画像生成部101bと、合成画像出力部101cとを備えている。また、制御部101は、切り換え方向検知部101dと、切り換え速度検知部101eと、通信速度検知部101fとを備えている。
メイン制御部101aは、装置全体の制御を行う。
合成画像生成部101bは、記憶部103が記憶した動画像データに基づいて、各種合成画像データを生成する。
合成画像出力部101cは、記憶部103が記憶した各種合成画像データの中から、特定の合成画像データを抽出し通信部102に出力する。
The control unit 101 includes, for example, a CPU, and includes a main control unit 101a, a composite image generation unit 101b, and a composite image output unit 101c. The control unit 101 further includes a switching direction detection unit 101d, a switching speed detection unit 101e, and a communication speed detection unit 101f.
The main control unit 101a controls the entire apparatus.
The composite image generation unit 101 b generates various composite image data based on the moving image data stored in the storage unit 103.
The composite image output unit 101 c extracts specific composite image data from the various composite image data stored in the storage unit 103, and outputs the specific composite image data to the communication unit 102.

切り換え方向検知部101dは、通信部102が順次入力した切り換え指示から、切り換え方向を検知する。
切り換え速度検知部101eは、通信部102が順次入力した切り換え指示から、切り換え速度を検知する。なお、切り換え速度とは、メイン制御部101aが直前の切り換え指示信号を入力したときから最新の切り換え指示信号を入力するまでの間の経過時間をいうものである。
通信速度検知部101fは、動画像処理装置10と表示装置20との間の通信速度を検知する。
The switching direction detection unit 101d detects the switching direction from the switching instruction sequentially input by the communication unit 102.
The switching speed detection unit 101 e detects the switching speed from the switching instruction sequentially input by the communication unit 102. The switching speed is an elapsed time from when the main control unit 101a receives the last switching instruction signal to when the latest switching instruction signal is input.
The communication speed detection unit 101 f detects the communication speed between the moving image processing device 10 and the display device 20.

次いで、動画像データを撮影するカメラの設置状況等について説明する。
図3に示すように、複数のカメラC1〜C20が、被写体Pを中心点にして、円周上に配置されている。すなわち、カメラC1〜C20は、被写体Pに対して全て径方向に同一の距離であって、かつ互いに周方向に均等間隔を空けて20台設置されている。換言すれば、カメラC1〜C20は、仮想的な円周線L上に順に配列されている。
カメラC1〜C20が撮影する動画像の解像度は、すべて1920×1080ピクセルとする。
Next, the installation situation of a camera for capturing moving image data will be described.
As shown in FIG. 3, a plurality of cameras C <b> 1 to C <b> 20 are circumferentially arranged with the subject P as a center point. That is, twenty cameras C1 to C20 are installed at the same distance in the radial direction with respect to the subject P, and at equal intervals in the circumferential direction. In other words, the cameras C1 to C20 are sequentially arranged on the virtual circumferential line L.
The resolutions of moving images captured by the cameras C1 to C20 are all 1920 × 1080 pixels.

このような構成のもと、例えばカメラC1が撮影した動画像を表示装置20が表示しているときに、カメラC1に対して円周線L上に配列されたカメラが撮影した動画像への切り換え指示操作をユーザが行うと、図4に示すように、表示装置20は、カメラC1が撮影した動画像から、円周線L上において隣り合うカメラC2が撮影した動画像へと動画像を切り換える。そして、表示装置20は、ユーザからの切り換え指示操作が円周線L上に連続的に行われると、カメラC1からカメラC2、カメラC3、カメラC4へと連続的に順次切り換える。
なお、表示装置20は、カメラC1とカメラC20との間も連続的に順次切り替えるようになっており、そのため、カメラC1〜C20は円周線L上の左右方向のいずれの方向にも循環して切り換えられるようになっている。
また、図4においては、カメラC10からカメラC19までの動画像の図示を省略しているのは言うまでもない。
Under such a configuration, for example, when a moving image captured by the camera C1 is displayed by the display device 20, a moving image captured by a camera arranged on the circumferential line L with respect to the camera C1 is displayed. When the user performs a switching instruction operation, as shown in FIG. 4, the display device 20 converts a moving image from a moving image taken by the camera C1 to a moving image taken by the adjacent camera C2 on the circumferential line L. Switch. Then, when the switching instruction operation from the user is continuously performed on the circumferential line L, the display device 20 sequentially switches from the camera C1 to the camera C2, the camera C3, and the camera C4 sequentially.
The display device 20 sequentially switches between the camera C1 and the camera C20 sequentially, so that the cameras C1 to C20 circulate in any of the left and right directions on the circumferential line L. And can be switched.
Moreover, it is needless to say that illustration of moving images from the camera C10 to the camera C19 is omitted in FIG.

次いで、合成画像生成部101bが生成する合成画像について説明する。
図5は、カメラC1が撮影した動画像D1が高解像度に設定された合成画像F1を示す説明図である。図5における動画像D1〜D20の数字が、撮影したカメラC1〜C20の数字と対応している。
図5に示すように、カメラC1〜C20が撮影した動画像D1〜D20に対して、解像度を異ならせて、かつ互いに重ならないように配置して合成したものが合成画像である。例えば、カメラC1が撮影した動画像D1が1920×1080ピクセルの高解像度に設定され、カメラC2,C3,C20,C19が撮影した動画像D2,D3,D20,D19が1440×810ピクセルの中解像度に設定され、カメラC4〜C18が撮影した動画像D4〜D18が960×540ピクセルの低解像度に設定される。これが合成画像F1となる。
なお、「重ならないように」とは、各動画像のドットが重複しないように設定することであり、各動画像が視覚的に互いに影響を及ぼさないように設定することをいう。
Next, the composite image generated by the composite image generation unit 101b will be described.
FIG. 5 is an explanatory view showing a composite image F1 in which a moving image D1 captured by a camera C1 is set to a high resolution. The numbers of the moving images D1 to D20 in FIG. 5 correspond to the numbers of the captured cameras C1 to C20.
As shown in FIG. 5, composite images are obtained by arranging the moving images D1 to D20 captured by the cameras C1 to C20 with different resolutions and not overlapping each other. For example, the medium resolution of the moving image D1 captured by the camera C1 is set to a high resolution of 1920 × 1080 pixels, and the moving images D2, D3, D20, and D19 captured by the cameras C2, C3, C20, and C19 are 1440 × 810 pixels. The moving images D4 to D18 captured by the cameras C4 to C18 are set to a low resolution of 960 × 540 pixels. This is a composite image F1.
Note that “do not overlap” is to set the dots of each moving image so as not to overlap, and to set so that the moving images do not affect each other visually.

合成画像の解像度は、あらかじめ設定された配置パターンに基づいて設定される。例えば、図6に示すように、あるカメラC1が撮影した動画像D1が高像度に設定され、このカメラC1に対して円周線L上の両方向に順に2台分隣り合うカメラC2,C3,C20,C19が撮影した動画像D2,D3,D20,D19が中解像度に設定され、これら順に2台分隣り合うカメラC2,C3,C20,C19のさらに円周線L上の両方向に順に隣り合うカメラC4〜C18が撮影した動画像D4〜D18が低解像度に設定される。   The resolution of the composite image is set based on a preset arrangement pattern. For example, as shown in FIG. 6, a moving image D1 captured by a certain camera C1 is set to a high resolution, and cameras C2 and C3 adjacent to the camera C1 by two in both directions on the circumferential line L , C20, and C19 are set to medium resolution, and the cameras C2, C3, C20, and C19 adjacent to each other by two in this order are further adjacent in both directions on the circumferential line L. Moving images D4 to D18 captured by the matching cameras C4 to C18 are set to low resolution.

図7は、カメラC2が撮影した動画像D2が高解像度に設定された合成画像F2を示す説明図である。
図7に示すように、カメラC2が撮影した動画像D2が高解像度に設定され、カメラC3,C4,C1,C20が撮影した動画像D3,D4,D1,D20が中解像度に設定され、カメラC5〜C19が撮影した動画像D5〜D19が低解像度に設定されている。
すなわち、あらかじめ設定された配置パターンにおいて、図8に示すように、あるカメラC2が撮影した動画像D2が高像度に設定され、このカメラC2に対して円周線L上の両方向に順に2台分隣り合うカメラC3,C4,C1,C20が撮影した動画像D3,D4,D1,D20が中解像度に設定され、これら順に2台分隣り合うカメラC3,C4,C1,C20のさらに円周線L上の両方向に隣り合うカメラC5〜C19が撮影した動画像D5〜D19が低解像度に設定される。
図9に示すように、合成画像生成部101bは、あらかじめ設定された配置パターンに基づいて、カメラC1〜C20が撮影した各動画像D1〜D20が高解像度に設定される20種類全ての合成画像F1〜F20を生成する。なお、図9では、ある時間t1における各合成画像F1〜F20のみが示されているが、さらに時間t2、t3・・・と時間が経過するにつれて、フレームレートに応じて新たな合成画像F1〜F20を合成画像生成部101bが生成していくことは言うまでもない。
FIG. 7 is an explanatory view showing a composite image F2 in which a moving image D2 captured by a camera C2 is set to a high resolution.
As shown in FIG. 7, the moving image D2 captured by the camera C2 is set to high resolution, and the moving images D3, D4, D1 and D20 captured by the cameras C3, C4, C1 and C20 are set to medium resolution, and the camera Moving images D5 to D19 captured by C5 to C19 are set to low resolution.
That is, in the arrangement pattern set in advance, as shown in FIG. 8, the moving image D2 captured by a certain camera C2 is set to high image quality, and the camera C2 is set to 2 in order in both directions on the circumferential line L. Moving images D3, D4, D1 and D20 captured by cameras C3, C4, C1 and C20 adjacent to each other are set to the medium resolution, and further circumferentials of cameras C3, C4, C1 and C20 adjacent to each other by two in this order Moving images D5 to D19 captured by cameras C5 to C19 adjacent in both directions on the line L are set to low resolution.
As shown in FIG. 9, the composite image generation unit 101b sets all the 20 composite images in which each of the moving images D1 to D20 captured by the cameras C1 to C20 is set to high resolution based on a preset arrangement pattern. Generate F1 to F20. Although only the composite images F1 to F20 at a certain time t1 are shown in FIG. 9, new composite images F1 to F1 are added according to the frame rate as time t2, t3. It goes without saying that the composite image generation unit 101b generates F20.

次に、動画像処理システム1の処理動作について、図10を参照して説明する。
まず、カメラC1〜C20が被写体Pを撮影し、それら動画像データを動画像処理装置10に出力する。動画像入力部106は、それら動画像データを入力し、制御部101に出力する。メイン制御部101aは、それら動画像データを入力すると、記憶部103に出力し、記憶部103がそれら動画像データを記憶する。
このような状態で、表示装置20において、ユーザの操作に基づいて操作部205が再生指示信号を制御部201に出力すると、制御部201が再生指示信号を入力し通信部202に出力する。通信部202は、その再生指示信号を入力すると、動画像処理装置10に再生指示信号を送信する。
Next, the processing operation of the moving image processing system 1 will be described with reference to FIG.
First, the cameras C <b> 1 to C <b> 20 capture an object P and output moving image data to the moving image processing apparatus 10. The moving image input unit 106 inputs the moving image data and outputs the data to the control unit 101. When the main control unit 101a receives the moving image data, the main control unit 101a outputs the moving image data to the storage unit 103, and the storage unit 103 stores the moving image data.
In such a state, in the display device 20, when the operation unit 205 outputs a reproduction instruction signal to the control unit 201 based on a user operation, the control unit 201 inputs the reproduction instruction signal and outputs the reproduction instruction signal to the communication unit 202. When the communication unit 202 receives the reproduction instruction signal, the communication unit 202 transmits the reproduction instruction signal to the moving image processing apparatus 10.

動画像処理装置10の通信部102は、表示装置20が送信した再生指示信号を入力し、制御部101に再生指示信号を出力する。メイン制御部101aは、その再生指示信号を入力すると、合成画像生成部101bに再生指示信号を出力する。合成画像生成部101bは、再生指示信号を入力すると、記憶部103からカメラC1〜C20の動画像データを読み出し、図9に示す合成画像F1〜F20を生成する(ステップS1)。このとき、合成画像生成部101bは、図5および図6に示すように、あらかじめ決められた配置パターンに基づいて、例えばカメラC1が撮影した動画像D1を高解像度に設定し、カメラC2,C3,C20,C19が撮影した動画像D2,D3,D20,D19を中解像に設定し、他のカメラC4〜C18が撮影した動画像D4〜D18を低解像度に設定して合成画像を生成する。さらに、合成画像生成部101bは、図9に示すように、すべてのカメラC1〜C20が撮影した動画像D1〜D20をそれぞれ高解像に設定した20種類の合成画像F1〜F20を生成し、記憶部103がそれら合成画像F1〜F20を記憶する。   The communication unit 102 of the moving image processing apparatus 10 receives the reproduction instruction signal transmitted by the display device 20, and outputs the reproduction instruction signal to the control unit 101. When the main control unit 101a receives the reproduction instruction signal, the main control unit 101a outputs the reproduction instruction signal to the composite image generation unit 101b. When receiving the reproduction instruction signal, the composite image generation unit 101b reads moving image data of the cameras C1 to C20 from the storage unit 103, and generates composite images F1 to F20 shown in FIG. 9 (step S1). At this time, as shown in FIGS. 5 and 6, the composite image generation unit 101b sets, for example, the moving image D1 captured by the camera C1 to high resolution based on a predetermined arrangement pattern, and the cameras C2 and C3. , C20, C19 to set moving images D2, D3, D20, D19 to medium resolution and moving images D4 to D18 taken by other cameras C4 to C18 to low resolution to generate a composite image . Furthermore, as shown in FIG. 9, the composite image generation unit 101b generates 20 types of composite images F1 to F20 in which moving images D1 to D20 captured by all the cameras C1 to C20 are set to high resolution, respectively. The storage unit 103 stores the composite images F1 to F20.

合成画像生成部101bは、それぞれの合成画像F1〜F20を生成すると、メイン制御部101aに生成信号を出力する。メイン制御部101aは、生成信号を入力すると、通信速度検知部101fに速度検知指示信号を出力する。通信速度検知部101fは、その速度検知指示信号を入力すると、表示装置20と動画像処理装置10との間の通信速度を検知する。例えば、通信速度検知部101fは、通信部102を介して通信速度検知指示信号を表示装置20に送信する。表示装置20の制御部201は、通信部202を介してその通信速度検知指示信号を入力すると、通信部202を介して通信速度検知応答を動画像処理装置10に送信する。通信速度検知部101fは、通信部102を介してその通信速度検知応答を入力して、通信速度検知指示信号の送信から通信速度検知応答の入力までの時間を通信速度として検知する。そして、通信速度検知部101fは、図2に示す通信速度対応テーブルを記憶部103から読み出し、切り換え速度のしきい値を設定する(ステップS2)。例えば、通信速度検知部101fが通信速度を5.5Mbpsであると検知すると、切り換え速度のしきい値を2秒に設定して、そのしきい値を記憶部103が記憶する。   When the composite image generation unit 101b generates the composite images F1 to F20, the composite image generation unit 101b outputs a generation signal to the main control unit 101a. When the main control unit 101a receives the generation signal, the main control unit 101a outputs a speed detection instruction signal to the communication speed detection unit 101f. When the speed detection instruction signal is input, the communication speed detection unit 101 f detects a communication speed between the display device 20 and the moving image processing apparatus 10. For example, the communication speed detection unit 101 f transmits a communication speed detection instruction signal to the display device 20 via the communication unit 102. When the control unit 201 of the display device 20 receives the communication speed detection instruction signal via the communication unit 202, the control unit 201 transmits a communication speed detection response to the moving image processing apparatus 10 via the communication unit 202. The communication speed detection unit 101f receives the communication speed detection response via the communication unit 102, and detects the time from the transmission of the communication speed detection instruction signal to the input of the communication speed detection response as the communication speed. Then, the communication speed detection unit 101f reads out the communication speed correspondence table shown in FIG. 2 from the storage unit 103, and sets the threshold value of the switching speed (step S2). For example, when the communication speed detection unit 101 f detects that the communication speed is 5.5 Mbps, the threshold value of the switching speed is set to 2 seconds, and the storage unit 103 stores the threshold value.

そして、通信速度検知部101fは、切り換え速度のしきい値を設定すると、メイン制御部101aに設定完了信号を出力する。メイン制御部101aは、設定完了信号を入力すると、合成画像出力部101cに合成画像出力指示信号を出力する。合成画像出力部101cは、合成画像出力指示信号を入力すると、カメラC1が撮影した動画像D1が高解像度に設定された図5に示す合成画像F1を記憶部103から読み出し、通信部102に出力する。通信部102は、合成画像F1を入力すると、表示装置20に合成画像F1を送信する。すなわち、合成画像出力部101cが通信部102を介して合成画像F1を表示装置20に送信する(ステップS3)。
表示装置20の通信部202が、その合成画像F1を入力すると、制御部201に出力する。制御部201は、合成画像F1を入力すると表示部204に出力する。表示部204は、その合成画像F1を入力すると、動画像単位で配置された合成画像F1の領域から、高解像度に設定された動画像D1の領域のみを択一的に選択し動画像D1のみを表示する。これにより、カメラC1が撮影した動画像D1が表示画面に表示される。
When the communication speed detection unit 101 f sets the switching speed threshold, the communication speed detection unit 101 f outputs a setting completion signal to the main control unit 101 a. When the main control unit 101a receives the setting completion signal, the main control unit 101a outputs a composite image output instruction signal to the composite image output unit 101c. When the composite image output instruction signal is input, the composite image output unit 101c reads out from the storage unit 103 the composite image F1 shown in FIG. 5 in which the moving image D1 captured by the camera C1 is set to high resolution and outputs it to the communication unit 102. Do. The communication unit 102 transmits the composite image F1 to the display device 20 when the composite image F1 is input. That is, the composite image output unit 101c transmits the composite image F1 to the display device 20 via the communication unit 102 (step S3).
When the communication unit 202 of the display device 20 receives the composite image F1, the communication unit 202 outputs the composite image F1 to the control unit 201. When the control unit 201 receives the composite image F1, the control unit 201 outputs the composite image F1 to the display unit 204. When the display unit 204 receives the composite image F1, the display unit 204 alternatively selects only the region of the moving image D1 set to high resolution from the regions of the composite image F1 arranged in moving image units, and selects only the moving image D1. Display As a result, the moving image D1 captured by the camera C1 is displayed on the display screen.

この状態で、例えばユーザが表示画面を指でタッチしながら、その指を画面上の右方向または左方向に連続的に動かす。この動作により、表示される動画像の切り換えをユーザが指示する。なお、表示される動画像の切り換えをユーザが指示することは、動画像を撮影したカメラを切り換えることである。例えば、ユーザが指を右方向の直線上に連続的に動かして、表示される動画像の切り換えを順次指示することは、表示対象となる動画像を撮影したカメラC1〜C20を図3に示す円周線L上において左回りに順次切り換えることを意味する。一方、ユーザが指を左方向の直線上に連続的に動かして、表示される動画像の切り換えを順次指示することは、表示対象となる動画像を撮影したカメラC20〜C1を円周線L上において右回りに順次切り換えることを意味する。これらカメラC1〜C20が円周線L上において同一方向に順次切り換えられるときのその同一方向が動画像の切り換え方向となる。   In this state, for example, while the user touches the display screen with a finger, the user continuously moves the finger in the right or left direction on the screen. By this operation, the user instructs to switch the displayed moving image. When the user instructs to switch the moving image to be displayed, it is to switch the camera that has captured the moving image. For example, when the user sequentially moves the finger on the straight line in the right direction and sequentially instructs switching of the displayed moving images, the cameras C1 to C20 which captured the moving images to be displayed are shown in FIG. It means to switch counterclockwise sequentially on the circumferential line L. On the other hand, when the user sequentially moves the finger on the left straight line and sequentially instructs switching of the displayed moving image, the camera C20 to C1 capturing the moving image to be displayed is taken along the circumferential line L It means to sequentially switch clockwise in the upper direction. When the cameras C1 to C20 are sequentially switched in the same direction on the circumferential line L, the same direction as the moving image switching direction.

さて、ユーザが操作部205を操作すると、操作部205は、動画像の切り換え操作指示信号を制御部201に出力する。制御部201は、その切り換え操作指示信号を入力すると、切り換え指示信号を生成する。切り換え指示信号は、切り換え操作指示と切り換え動画像識別情報とを含むものである。切り換え動画像識別情報は、表示されている動画像から切り換え指示された動画像を識別するものである。例えば、動画像D1が表示されているときに、ユーザが画面上において指を右方向に動かすと、切り換え動画像識別情報は、カメラC1に対して円周線L上において左回りに隣り合うカメラC2が撮影した動画像D2を識別するものとなる。すなわち、制御部201は、現在表示されている動画像D1に対して、切り換え指示された動画像D2を識別するための切り換え動画像識別情報を生成して、この切り換え動画像識別情報および切り換え操作指示を切り換え指示信号として通信部202に出力する。
通信部202は、切り換え指示信号を入力すると、動画像処理装置10に切り換え指示信号を送信する。
When the user operates the operation unit 205, the operation unit 205 outputs a moving image switching operation instruction signal to the control unit 201. When the control section 201 receives the switching operation instruction signal, the control section 201 generates a switching instruction signal. The switching instruction signal includes a switching operation instruction and switching moving image identification information. The switching moving image identification information identifies the moving image instructed to be switched from the displayed moving image. For example, when the user moves the finger to the right on the screen while the moving image D1 is displayed, the switching moving image identification information is a camera adjacent to the camera C1 counterclockwise on the circumferential line L The moving image D2 captured by C2 is identified. That is, the control unit 201 generates switching moving image identification information for identifying the moving image D2 instructed to be switched for the moving image D1 currently displayed, and the switching moving image identification information and the switching operation An instruction is output to the communication unit 202 as a switching instruction signal.
The communication unit 202 transmits the switching instruction signal to the moving image processing apparatus 10 when the switching instruction signal is input.

動画像処理装置10の通信部102は、切り換え指示信号を入力すると、制御部101に切り換え指示信号を出力する。メイン制御部101aは、通信部102の出力を読み出し(ステップS4)、切り換え指示があったか否かを判定する(ステップS5)。すなわち、メイン制御部101aは、通信部102から出力された切り換え指示信号を読み出して入力すると、切り換え指示があったと判定し、切り換え指示信号が読み出せなかったら切り換え指示がないと判定する。
なお、メイン制御部101aは、切り換え指示信号を入力すると、切り換え指示信号の入力タイミング時間、入力回数および切り換え動画像識別情報を記憶部103に順次記憶する。
When the switching instruction signal is input, the communication unit 102 of the moving image processing apparatus 10 outputs the switching instruction signal to the control unit 101. The main control unit 101a reads the output of the communication unit 102 (step S4), and determines whether or not there is a switching instruction (step S5). That is, when the switching control signal output from the communication unit 102 is read out and input, the main control unit 101a determines that the switching command is issued, and determines that the switching command is not issued if the switching command signal can not be read out.
When the main control unit 101a receives the switching instruction signal, the main control unit 101a sequentially stores the input timing time of the switching instruction signal, the number of inputs, and the switching moving image identification information in the storage unit 103.

メイン制御部101aは、通信部102から出力された切り換え指示信号を読み出して入力し、切り換え指示があったと判定すると(ステップS5:Yes)、切り換え速度検知部101eに切り換え速度検知指示信号を出力する。切り換え速度検知部101eは、その切り換え速度検知指示信号を入力すると、動画像の切り換え速度を検知する(ステップS6)。すなわち、切り換え速度検知部101eは、表示装置20から出力された再生指示信号に基づいて合成画像出力部101cが最初に合成画像F1を出力したときから、メイン制御部101aが最新の切り換え指示信号を入力するまでの間に、メイン制御部101aが切り換え指示信号を入力していない場合には、合成画像出力部101cが最初に合成画像F1を出力したときから、メイン制御部101aが最新の切り換え指示信号を入力するまでの経過時間を動画像の切り換え速度として算出する。一方、切り換え速度検知部101eは、合成画像出力部101cが最初に合成画像F1を出力したときから、メイン制御部101aが最新の切り換え指示信号を入力するまでの間に、メイン制御部101aが切り換え指示信号を入力していた場合には、メイン制御部101aが直前の切り換え指示信号を入力したときから最新の切り換え指示信号を入力するまでの間の経過時間を動画像の切り換え速度として算出する。そして、切り換え速度検知部101eは、算出した切り換え速度をメイン制御部101aに出力する。   The main control unit 101a reads out and inputs the switching instruction signal output from the communication unit 102, and when it is determined that there is a switching instruction (step S5: Yes), outputs the switching speed detection instruction signal to the switching speed detection unit 101e. . When the switching speed detection instruction signal is input, the switching speed detection unit 101e detects the switching speed of the moving image (step S6). That is, since the switching speed detection unit 101e first outputs the composite image F1 based on the reproduction instruction signal output from the display device 20, the main control unit 101a outputs the latest switching instruction signal. If the main control unit 101a does not input the switching instruction signal before the input, the main control unit 101a instructs the latest switching since the composite image output unit 101c first outputs the composite image F1. The elapsed time until the signal is input is calculated as the switching speed of the moving image. On the other hand, in the switching speed detection unit 101e, the main control unit 101a switches between when the composite image output unit 101c first outputs the composite image F1 and before the main control unit 101a inputs the latest switching instruction signal. When the instruction signal is input, an elapsed time from when the main control unit 101a inputs the last switching instruction signal to when the latest switching instruction signal is input is calculated as the moving image switching speed. Then, the switching speed detection unit 101e outputs the calculated switching speed to the main control unit 101a.

メイン制御部101aは、その切り換え時間を入力すると、切り換え時間が所定のしきい値よりも速いか否かを判定する(ステップS7)。ここでは、このしきい値は例えば2秒に設定されている。
メイン制御部101aは、切り換え時間がしきい値よりも速いと判定すると(ステップS7:Yes)、切り換え時間がしきい値よりも速い切り換え指示が連続して3回目以上か否かを判定する(ステップS8)。すなわち、メイン制御部101aは、表示装置20から出力された再生指示信号に基づいて合成画像出力部101cが最初に合成画像F1を出力したときから、メイン制御部101aが最新の切り換え指示信号を入力するまでの間に、メイン制御部101aが切り換え指示信号を入力したそれぞれの入力タイミング時間と入力回数とを記憶部103から読み出し,これら入力タイミング時間および入力回数に基づいて、切り換え時間がしきい値以内となっている切り換え指示が連続して3回目以上か否かを判定する。
When the switching time is input, the main control unit 101a determines whether the switching time is faster than a predetermined threshold (step S7). Here, this threshold is set to, for example, 2 seconds.
If the main control unit 101a determines that the switching time is faster than the threshold (step S7: Yes), the main control unit 101a determines whether the switching instruction whose switching time is faster than the threshold is continuously the third or more (step S7). Step S8). That is, since the main control unit 101a first outputs the composite image F1 based on the reproduction instruction signal output from the display device 20, the main control unit 101a receives the latest switching instruction signal. The main control unit 101a reads out from the storage unit 103 each input timing time and number of inputs at which the main control unit 101a inputs the switching instruction signal, and based on the input timing time and the number of inputs, the switching time is a threshold It is determined whether the switching instruction within the range is continuously the third or more.

メイン制御部101aは、切り換え指示が連続して3回目以上であると判定すると(ステップS8:Yes)、切り換え方向検知信号を切り換え方向検知部101dに出力する。切り換え方向検知部101dは、その切り換え方向検知信号を入力すると、切り換え指示の切り換え方向を検知して(ステップS9)、検知結果をメイン制御部101aに出力する。すなわち、切り換え方向検知部101dは、切り換え時間がしきい値より速い連続した切り換え指示に対して、記憶部103が記憶した切り換え動画像識別情報を読み出して、切り換え方向を検知する。
例えば、動画像D1が表示されている場合において、1回目の切り換え動画像識別情報が動画像D2であり、2回目および3回目の切り換え動画像識別情報がD3,D4と続く場合には、切り換え方向検知部101dは、動画像の切り換え方向が、図3に示す円周線L上において左回り方向であると検知する。
When the main control unit 101a determines that the switching instruction is continuously performed for the third time or more (Step S8: Yes), the main control unit 101a outputs a switching direction detection signal to the switching direction detection unit 101d. When the switching direction detection signal is input, the switching direction detection unit 101d detects the switching direction of the switching instruction (step S9), and outputs the detection result to the main control unit 101a. That is, the switching direction detection unit 101d detects the switching direction by reading out switching moving image identification information stored in the storage unit 103 in response to a continuous switching instruction in which the switching time is faster than the threshold value.
For example, when the moving image D1 is displayed, the first switching moving image identification information is the moving image D2, and the second and third switching moving image identification information continues as D3 and D4, the switching is performed. The direction detection unit 101 d detects that the switching direction of the moving image is a counterclockwise direction on the circumferential line L illustrated in FIG. 3.

そして、メイン制御部101aは、切り換え方向検知部101dが出力した検知結果を入力すると、動画像の切り換え方向がすべて同じ方向であるか否かを判定する(ステップS10)。例えば、動画像D1が表示されている場合において、1回目の切り換え動画像識別情報が動画像D2であり、2回目および3回目の切り換え動画像識別情報がD3,D4と続く場合には、メイン制御部101aは、動画像の切り換え方向が、円周線L上においてすべて左回り方向の同方向であると判定する。一方、動画像D1が表示されている場合において、1回目の切り換え動画像識別情報が動画像D2であり、2回目および3回目の切り換え動画像識別情報がD3,D2と続く場合には、メイン制御部101aは、動画像の切り換え方向が、円周線L上において同方向ではないと判定する。   When the main control unit 101a receives the detection result output from the switching direction detection unit 101d, the main control unit 101a determines whether all the switching directions of the moving image are the same (step S10). For example, when the moving image D1 is displayed, the first switching moving image identification information is the moving image D2, and the second and third switching moving image identification information continues as D3 and D4, the main The control unit 101a determines that the switching directions of the moving image are all the same in the counterclockwise direction on the circumferential line L. On the other hand, when the moving image D1 is displayed, the first switching moving image identification information is the moving image D2, and the second and third switching moving image identification information continues as D3, D2, the main The control unit 101a determines that the switching direction of the moving image is not the same on the circumferential line L.

メイン制御部101aは、切り換え方向が同方向ではないと判定した場合(ステップS10:No)、またはステップS7において切り換え時間が所定のしきい値よりも遅いと判定した場合(ステップS7:No)、またはステップS8において切り換え指示が連続して3回以上でないと判定した場合(ステップS8:No)、通常の切り換え指示信号を合成画像出力部101cに出力する。
合成画像出力部101cは、通常の切り換え指示信号を入力すると、記憶部103が記憶した最新の切り換え動画像識別情報に基づいて切り換え指示された動画像が高解像度に設定された合成画像(通常の合成画像)を記憶部103から読み出して、通信部102を介して表示装置20に送信する(ステップS11)。例えば、動画像D1が表示されている場合において、記憶部103が記憶した最新の切り換え動画像識別情報が動画像D2である場合には、合成画像出力部101cは、通信部102を介して合成画像F2を出力する。
When the main control unit 101a determines that the switching direction is not the same (step S10: No), or when determining that the switching time is later than the predetermined threshold in step S7 (step S7: No), Alternatively, when it is determined in step S8 that the switching instruction is not consecutively performed three times or more (step S8: No), a normal switching instruction signal is output to the composite image output unit 101c.
When the composite image output unit 101 c receives the normal switching instruction signal, the composite image in which the moving image instructed to be switched based on the latest switching moving image identification information stored in the storage unit 103 is set to a high resolution (normal The composite image is read out from the storage unit 103 and transmitted to the display device 20 via the communication unit 102 (step S11). For example, when the moving image D1 is displayed, when the latest switching moving image identification information stored in the storage unit 103 is the moving image D2, the composite image output unit 101c performs composition via the communication unit 102. Output the image F2.

表示装置20の制御部201は、通信部202を介してその合成画像を入力し、表示部204に出力する。表示部204は、その合成画像を入力すると、合成画像のうち高解像度に設定された動画像を択一的に選択し表示する。例えば、表示部204は、合成画像F1における動画像D1を表示しているときに、合成画像F2を入力すると、合成画像F2における動画像D2のみを表示する。
これにより、画面上において、動画像が切り換えられる。
なお、動画像処理装置10において、ステップS11の後、制御部101は、ステップS4に戻って処理を繰り返す。
The control unit 201 of the display device 20 inputs the composite image via the communication unit 202 and outputs the composite image to the display unit 204. When the display unit 204 receives the composite image, the display unit 204 alternatively selects and displays a moving image set to high resolution among the composite images. For example, when displaying the moving image D1 in the composite image F1, the display unit 204 displays only the moving image D2 in the composite image F2 when the composite image F2 is input.
Thereby, the moving image is switched on the screen.
In the moving image processing apparatus 10, after step S11, the control unit 101 returns to step S4 and repeats the processing.

また、ステップS10において、メイン制御部101aは、動画像の切り換え方向がすべて同じ方向であると判定すると(ステップS10:Yes)、通常の切り換え指示信号に代えて、緊急の切り換え指示信号を合成画像出力部101cに出力する。合成画像出力部101cは、緊急の切り換え指示信号を入力すると、記憶部103が記憶した最新の切り換え動画像識別情報を読み出し、切り換え指示された動画像が高解像度に設定された合成画像に代えて、切り換え指示された動画像が低解像度に設定された合成画像(緊急の合成画像)を記憶部103から読み出し、通信部102を介してその合成画像を表示装置20に送信する(ステップS12)。このときの合成画像は、例えば、図11に示すように、切り換え指示された動画像D4が低解像度に設定され、動画像D4を撮影したカメラC4に対して円周線L上において左回り方向に隣りに2つ分配列されたカメラC5,C6の動画像D5,D6が中解像度に設定され、これらカメラC5,C6に対して左回り方向に隣りにさらに1つ分配列されたカメラC7の動画像D7が高解像度に設定され、このカメラC7に対して左回り方向に隣りにさらに2つ分配列されたカメラC8,C9の動画像D8,D9が中解像度に設定され、このカメラC9からカメラC4の間に配列されたカメラC3〜C10の動画像D3〜D10が低解像度に設定された合成画像F7となる。   If the main control unit 101a determines in step S10 that the switching directions of the moving image are all the same (step S10: Yes), the emergency switching instruction signal is used as a composite image instead of the normal switching instruction signal. It outputs to the output part 101c. When the composite image output unit 101c receives the emergency switching instruction signal, it reads out the latest switching moving image identification information stored in the storage unit 103, and the moving image instructed to be switched is replaced with the composite image set to high resolution. The composite image (urgent composite image) in which the moving image instructed to be switched is set to low resolution is read out from the storage unit 103, and the composite image is transmitted to the display device 20 via the communication unit 102 (step S12). In this case, for example, as shown in FIG. 11, the moving image D4 instructed to be switched is set to low resolution as shown in FIG. The moving images D5 and D6 of the cameras C5 and C6 arranged next to each other are set at medium resolution, and one camera C7 arranged next to the cameras C5 and C6 in the counterclockwise direction. A moving image D7 is set to high resolution, and moving images D8 and D9 of cameras C8 and C9 arranged next to each other in the counterclockwise direction with respect to this camera C7 are set to medium resolution, and from this camera C9 Moving images D3 to D10 of the cameras C3 to C10 arranged between the cameras C4 become a composite image F7 set to low resolution.

表示装置20の表示部204は、上記と同様に、合成画像F7に基づいて、切り換え指示された動画像D4を表示する。このとき、動画像D4は低解像度に設定されているが、ユーザからの所定の速さによる切り換え指示に応じて所定の速さで動画像が切り換えられているため、低解像度による表示はユーザにとってさほど気にはならない。それよりも、動画像処理装置10から送信される合成画像では切り換え表示が間に合わない場合、すなわち通信による処理スピードが間に合わないくらいの速さでユーザからの同方向の切り換え指示操作があった場合、表示部204は、最新の合成画像F7の領域内において、表示する動画像をD4からD5,D6,D7,D8,D9へと順次切り換えていく。   The display unit 204 of the display device 20 displays the moving image D4 instructed to be switched based on the composite image F7 as described above. At this time, although the moving image D4 is set to low resolution, the moving image is switched at a predetermined speed in response to a switching instruction from the user at a predetermined speed, so the low resolution display is for the user I do not care so much. Rather, in the case where the switching display is not in time in the composite image transmitted from the moving image processing apparatus 10, that is, in the case where there is a switching instruction operation from the user in the same direction at such a speed that the processing speed by communication is not in time. The display unit 204 sequentially switches the moving image to be displayed from D4 to D5, D6, D7, D8, and D9 in the area of the latest composite image F7.

ここまでのステップS1からS12に関して、いくつかのバリエーションにより具体例を交えて説明する。
(バリエーション1)
例えば、動画像D1が1分間表示されている場合に、ユーザが画面上において指を右方向に連続的に動かして、動画像D1からD5までをそれぞれ2秒を越える切り換え時間で切り換え指示動作を行うものとする。
まず、表示装置20が、上述したように、動画像D1からD2への切り換え指示信号を送信すると、メイン制御部101aが、ステップS7において切り換え時間が所定のしきい値2秒よりも遅いと判定することにより(ステップS7:No)、合成画像出力部101cが、通信部102を介して合成画像F1に代えて合成画像F2(図7に示す)を表示装置20に送信する(ステップS11)。
表示装置20の表示部204は、合成画像F2に基づいて動画像D2のみを択一的に選択して、動画像D1から動画像D2に切り換えて表示する。
With regard to steps S1 to S12 so far, some variations will be described using a specific example.
(Variation 1)
For example, when the moving image D1 is displayed for one minute, the user continuously moves the finger in the right direction on the screen, and the switching instruction operation is performed with a switching time exceeding 2 seconds for each of the moving images D1 to D5. Assumed to be performed.
First, as described above, when the display device 20 transmits a switching instruction signal from the moving image D1 to D2, the main control unit 101a determines that the switching time is later than the predetermined threshold value 2 seconds in step S7. By doing this (step S7: No), the composite image output unit 101c transmits the composite image F2 (shown in FIG. 7) to the display device 20 via the communication unit 102 instead of the composite image F1 (step S11).
The display unit 204 of the display device 20 alternatively selects only the moving image D2 based on the composite image F2, and switches from the moving image D1 to the moving image D2 for display.

同様にして、メイン制御部101aが、ステップS7において切り換え時間が所定のしきい値2秒よりも遅いと判定することにより(ステップS7:No)、合成画像出力部101cが、通信部102を介して合成画像F2に代えて合成画像F3を表示装置20に送信し、続いて合成画像F3,F4に代えてそれぞれ合成画像F4,F5を送信していく(ステップS11)。
表示装置20の表示部204は、合成画像F3に基づいて動画像D3のみを択一的に選択して、動画像D2から動画像D3に切り換えて表示し、続いて合成画像F4,F5に基づいて動画像D4,D5へと切り換えていく。
これによって、図4に示すように、円周線L上において左方向に配列されたカメラC1からC5へと順に動画像がD1からD5へと切り換えられてそれぞれ高解像度によって表示される。
Similarly, when main control unit 101a determines that the switching time is later than predetermined threshold value 2 seconds in step S7 (step S7: No), composite image output unit 101c receives communication unit 102 via communication unit 102. Instead of the composite image F2, the composite image F3 is transmitted to the display device 20, and then the composite images F4 and F5 are transmitted instead of the composite images F3 and F4 (step S11).
The display unit 204 of the display device 20 alternatively selects only the moving image D3 based on the composite image F3, switches from the moving image D2 to the moving image D3 and displays the same, and subsequently based on the composite images F4 and F5. Then, the image is switched to moving images D4 and D5.
As a result, as shown in FIG. 4, the moving images are switched from D1 to D5 in order from the cameras C1 to C5 arranged on the circumferential line L in the left direction, and displayed with high resolution.

(バリエーション2)
次に、例えば動画像D1が1分間表示されている場合に、ユーザが画面上において指を右方向に連続的に動かして、動画像D1からD5までを2秒以下の切り換え速度で連続的に切り換え指示動作を行い、続けて動画像D5からD10までを通信による処理スピードが間に合わないくらいの速い切り換え時間で連続的に切り換え指示動作を行うものとする。
まず、表示装置20が、上述したように、動画像D1からD2への切り換え指示信号を送信すると、メイン制御部101aが、ステップS7において切り換え時間が所定のしきい値よりも遅いと判定することにより(ステップS7:No)、合成画像出力部101cは、通信部102を介して合成画像F1に代えて合成画像F2(図7に示す)を表示装置20に送信する(ステップS11)。
表示装置20の表示部204は、合成画像F2に基づいて動画像D2のみを択一的に選択して、動画像D1から動画像D2に切り換えて表示する。
(Variation 2)
Next, for example, when the moving image D1 is displayed for one minute, the user continuously moves the finger rightward on the screen to continuously change the moving images D1 to D5 at a switching speed of 2 seconds or less. It is assumed that the switching instruction operation is performed, and then the switching instruction operation is continuously performed with a fast switching time such that the processing speed of the moving images D5 to D10 can not be in time for communication.
First, as described above, when the display device 20 transmits a switching instruction signal from the moving image D1 to D2, the main control unit 101a determines that the switching time is later than the predetermined threshold in step S7. Thus (step S7: No), the composite image output unit 101c transmits the composite image F2 (shown in FIG. 7) to the display device 20 via the communication unit 102 instead of the composite image F1 (step S11).
The display unit 204 of the display device 20 alternatively selects only the moving image D2 based on the composite image F2, and switches from the moving image D1 to the moving image D2 for display.

さらに、表示装置20は、動画像D2からD3への切り換え指示信号を順次送信すると、動画像処理装置10の通信部102が切り換え指示信号を順次入力し、メイン制御部101aが、ステップS8において切り換え指示が2回目であって3回目以上でないと判定することにより(ステップS8:No)、合成画像出力部101cは、通信部102を介して合成画像F2に代えて合成画像F3を表示装置20に順次送信する(ステップS11)。
表示装置20の表示部204は、合成画像F3に基づいて動画像D3のみを択一的に選択して、動画像D2から動画像D3に順次切り換えて表示する。
Further, when the display device 20 sequentially transmits the switching instruction signal from the moving image D2 to D3, the communication unit 102 of the moving image processing apparatus 10 sequentially inputs the switching instruction signal, and the main control unit 101a switches in step S8. By determining that the instruction is the second time and not the third time or more (step S8: No), the composite image output unit 101c substitutes the composite image F2 for the composite image F3 on the display device 20 via the communication unit 102. It transmits one by one (step S11).
The display unit 204 of the display device 20 alternatively selects only the moving image D3 based on the composite image F3, sequentially switches the moving image D2 to the moving image D3, and displays the images.

そして、表示装置20は、動画像D3からD4への切り換え指示信号を順次送信すると、動画像処理装置10の通信部102が切り換え指示信号を順次入力し、メイン制御部101aが、ステップS8において切り換え指示が3回目以上であると判定し(ステップS8:Yes)、さらにステップS10において切り換え方向が同方向であると判定することにより(ステップS10:Yes)、合成画像出力部101cは、合成画像F4に代えて緊急用の合成画像F7(図11に示す)を表示装置20に通信部102を介して順次送信する(ステップS12)。
表示装置20の表示部204は、緊急用の合成画像F7に基づいて動画像D4のみを択一的に選択して、動画像D3から動画像D4に順次切り換えて表示する。このときの動画像D4は、低解像度にて表示される。
Then, when the display device 20 sequentially transmits the switching instruction signal from the moving image D3 to D4, the communication unit 102 of the moving image processing apparatus 10 sequentially inputs the switching instruction signal, and the main control unit 101a switches in step S8. If it is determined that the instruction is the third or more (step S8: Yes), and further that the switching direction is the same in step S10 (step S10: Yes), the composite image output unit 101c generates the composite image F4. Instead, the composite image F7 for emergency (shown in FIG. 11) is sequentially transmitted to the display device 20 via the communication unit 102 (step S12).
The display unit 204 of the display device 20 alternatively selects only the moving image D4 based on the composite image F7 for emergency, and sequentially switches from the moving image D3 to the moving image D4 for display. The moving image D4 at this time is displayed at low resolution.

同様にして、表示装置20は、動画像D4からD5への切り換え指示信号を順次送信すると、動画像処理装置10の通信部102が切り換え指示信号を順次入力し、メイン制御部101aが、ステップS8において切り換え指示が4回目であって3回目以上であると判定し(ステップS8:Yes)、さらにステップS10において切り換え方向が同方向であると判定することにより(ステップS10:Yes)、合成画像出力部101cは、合成画像F5に代えて緊急用の合成画像F8(図12に示す)を表示装置20に通信部102を介して順次送信する(ステップS12)。
表示装置20の表示部204は、緊急用の合成画像F8に基づいて動画像D5のみを択一的に選択して、動画像D4から動画像D5に順次切り換えて表示する。このときの動画像D5は、低解像度にて表示される。
Similarly, when the display device 20 sequentially transmits the switching instruction signal from the moving image D4 to D5, the communication unit 102 of the moving image processing apparatus 10 sequentially inputs the switching instruction signal, and the main control unit 101a performs step S8. By determining that the switching instruction is the fourth time and is the third time or more (step S8: Yes), and further determines that the switching direction is the same direction in step S10 (step S10: Yes). The unit 101c sequentially transmits a composite image F8 (shown in FIG. 12) for emergency to the display device 20 via the communication unit 102 in place of the composite image F5 (step S12).
The display unit 204 of the display device 20 alternatively selects only the moving image D5 based on the composite image F8 for emergency, and sequentially switches from the moving image D4 to the moving image D5 for display. The moving image D5 at this time is displayed at low resolution.

さらに、表示装置20の操作部205が動画像D5から動画像D6へと切り換え操作指示信号を出力すると、制御部201は、前回の切り換え操作指示信号の入力タイミング時間から最新の切り換え操作指示信号の入力タイミング時間までの経過時間が極めて短く、通信による処理スピードが間に合わないと判定し、切り換え動画像識別情報および超緊急の切り換え指示信号を表示部204に出力する。表示部204は、それら切り換え動画像識別情報および超緊急の切り換え指示信号を入力すると、現在使用している合成画像F8(図12に示す)に基づいて動画像D6を表示する。このときの動画像D6は、中解像度にて表示される。   Furthermore, when the operation unit 205 of the display device 20 outputs a switching operation instruction signal from the moving image D5 to the moving image D6, the control unit 201 generates the latest switching operation instruction signal from the input timing time of the previous switching operation instruction signal. It is determined that the elapsed time until the input timing time is extremely short and the processing speed by communication is not in time, and switching video identification information and a super urgent switching instruction signal are output to the display unit 204. When the display unit 204 receives the switching moving image identification information and the switching signal for switching to the super emergency, the display unit 204 displays the moving image D6 based on the currently used composite image F8 (shown in FIG. 12). The moving image D6 at this time is displayed at a medium resolution.

さらに、表示装置20の操作部205が動画像D6から動画像D7へと切り換え操作指示信号を出力すると、制御部201は、前回の切り換え操作指示信号の入力タイミング時間から最新の切り換え操作指示信号の入力タイミング時間までの経過時間が極めて短く、通信による処理スピードが間に合わないと判定し、切り換え動画像識別情報および超緊急の切り換え指示信号を表示部204に出力する。表示部204は、それら切り換え動画像識別情報および超緊急の切り換え指示信号を入力すると、現在使用している合成画像F8(図12に示す)に基づいて動画像D7を表示する。このときの動画像D7は、中解像度にて表示される。
上記と同様にして、表示部204は、切り換え動画像識別情報および超緊急の切り換え指示信号を順次入力すると、現在使用している合成画像F8に基づいて動画像D8〜D10へと順次切り換えて表示していく。このときの動画像D8は高解像度にて表示され、動画像D9,D10は中解像度に表示される。
Furthermore, when the operation unit 205 of the display device 20 outputs a switching operation instruction signal from the moving image D6 to the moving image D7, the control unit 201 generates the latest switching operation instruction signal from the input timing time of the previous switching operation instruction signal. It is determined that the elapsed time until the input timing time is extremely short and the processing speed by communication is not in time, and switching video identification information and a super urgent switching instruction signal are output to the display unit 204. When the display unit 204 receives the switching moving image identification information and the switching signal for super emergency, the display unit 204 displays the moving image D7 based on the currently used composite image F8 (shown in FIG. 12). The moving image D7 at this time is displayed at a medium resolution.
In the same manner as above, the display unit 204 sequentially switches to moving images D8 to D10 based on the composite image F8 currently used when the switching moving image identification information and the switching signal for super emergency are sequentially input. I will. The moving image D8 at this time is displayed at high resolution, and the moving images D9 and D10 are displayed at medium resolution.

これにより、図4に示すように、円周線L上において左方向に配列されたカメラC1からC10へと動画像がD1からD10へと一つ一つ順次切り換えられて表示される。このとき、動画像D1からD3までは高解像度によって表示され、動画像D4からD5までは低解像度によって表示され、動画像D6からD7までは中解像度によって表示され、動画像D8は高解像度によって表示され、動画像D9からD10までは中解像度によって順次表示される。このように、切り換え速度が速い場合、切り換え指示された動画像よりも、切り換え方向の先に配列されたカメラの動画像の解像度が高く設定された合成画像を、先に送っておくことにより、超緊急の切り換え指示に対して中解像度または高解像度による動画像を順次切り換えて表示することができる。   As a result, as shown in FIG. 4, the moving images are sequentially switched one by one from D1 to D10 and displayed on the cameras C1 to C10 arranged on the circumferential line L in the left direction. At this time, moving images D1 to D3 are displayed with high resolution, moving images D4 to D5 are displayed with low resolution, moving images D6 to D7 are displayed with medium resolution, and moving image D8 is displayed with high resolution. The moving images D9 to D10 are sequentially displayed with medium resolution. As described above, when the switching speed is high, the composite image in which the resolution of the moving image of the camera arranged earlier in the switching direction is set to be higher than the moving image instructed to be switched is sent earlier. A moving image with medium resolution or high resolution can be sequentially switched and displayed in response to a super urgent switching instruction.

続いて、図10に示すフローチャートのステップS13以降に関して説明する。
メイン制御部101aは、通信部102の出力を読み出し、切り換え指示がないと判定すると(ステップS5:No)、合成画像出力部101cに維持信号を出力する。合成画像出力部101cは、その維持信号を入力すると、前回送信した合成画像(現在表示している動画像が高解像度に設定された合成画像)と同じ合成画像を記憶部103から読み出して、通信部102を介してその合成画像を表示装置20に送信する(ステップS13)。
表示装置20の制御部201は、通信部202を介してその合成画像を入力すると、表示部204に出力し、現在表示している動画像と同じ動画像を表示する。これにより、時間の経過とともに例えば動画像D1が表示され続ける。
Subsequently, step S13 and subsequent steps of the flowchart shown in FIG. 10 will be described.
The main control unit 101a reads the output of the communication unit 102, and when it is determined that there is no switching instruction (step S5: No), outputs a sustain signal to the composite image output unit 101c. When the composite image output unit 101c receives the maintenance signal, the composite image output unit 101c reads out from the storage unit 103 the same composite image as the previously transmitted composite image (a composite image in which the moving image currently displayed is set to high resolution). The composite image is transmitted to the display device 20 via the unit 102 (step S13).
When the control unit 201 of the display device 20 receives the composite image via the communication unit 202, the control unit 201 outputs the composite image to the display unit 204 and displays the same moving image as the currently displayed moving image. Thus, for example, the moving image D1 continues to be displayed as time passes.

そして、メイン制御部101aは、維持信号を合成画像出力部101cに出力してから所定時間経過したか否かを判定する(ステップS14)。メイン制御部101aは、所定時間経過していないと判定すると(ステップS14:No)、ステップS4に戻って処理を繰り返す。一方、メイン制御部101aは、所定時間経過したと判定すると(ステップS4:Yes)、特定生成信号を合成画像生成部101bに出力する。合成画像生成部101bは、その特定生成信号を入力すると、特定合成画像を生成する(ステップS15)。なお、特定合成画像は、現在表示している動画像が高解像度に設定され、それ以外の動画像が低解像度に設定されたものである。例えば、合成画像生成部101bは、現在表示している動画像D1のみを高解像度に設定し、それ以外の動画像D2〜D20を低解像度に設定した特定合成画像を生成し、記憶部103に記憶する。そして、合成画像生成部101bは、生成完了信号を合成画像出力部101cに出力する。   Then, the main control unit 101a determines whether or not a predetermined time has elapsed since the output of the maintenance signal to the composite image output unit 101c (step S14). If the main control unit 101a determines that the predetermined time has not elapsed (step S14: No), the process returns to step S4 to repeat the process. On the other hand, when determining that the predetermined time has elapsed (step S4: Yes), the main control unit 101a outputs a specific generation signal to the composite image generation unit 101b. When the composite image generation unit 101b receives the specific generation signal, the composite image generation unit 101b generates a specific composite image (step S15). In the specific composite image, a moving image currently displayed is set to a high resolution, and the other moving images are set to a low resolution. For example, the composite image generation unit 101b sets a moving image D1 currently displayed at a high resolution, and generates a specific composite image in which the moving images D2 to D20 at the other resolutions are set to a low resolution. Remember. Then, the composite image generation unit 101b outputs a generation completion signal to the composite image output unit 101c.

合成画像出力部101cは、その生成完了信号を入力すると、記憶部103から特定合成画像を読み出し、通信部102を介して特定合成画像を表示装置20に送信する(ステップS16)。
表示装置20の制御部201は、通信部202を介して特定合成画像を入力し、特定合成画像を表示部204に出力する。表示部204は、その特定合成画像を入力すると、高解像度に設定された動画像のみを択一的に選択して表示する。
メイン制御部101aは、合成画像が終了したか否かを判定する(ステップS17)。すなわち、合成画像出力部101cが、記憶部103から時間順に合成画像を読み出し、読み出すべき合成画像がない場合に終了信号をメイン制御部101aに出力し、メイン制御部101aがその終了信号を入力したときに合成画像が終了したと判定する。
When the composite image output unit 101c receives the generation completion signal, the composite image output unit 101c reads the specific composite image from the storage unit 103, and transmits the specific composite image to the display device 20 via the communication unit 102 (step S16).
The control unit 201 of the display device 20 inputs a specific composite image via the communication unit 202, and outputs the specific composite image to the display unit 204. When the display unit 204 receives the specific composite image, the display unit 204 alternatively selects and displays only the moving image set to the high resolution.
The main control unit 101a determines whether the composite image has ended (step S17). That is, the composite image output unit 101c reads the composite image from the storage unit 103 in chronological order, and outputs an end signal to the main control unit 101a when there is no composite image to be read out, and the main control unit 101a inputs the end signal. When it is determined that the composite image has ended.

メイン制御部101aは、合成画像が終了していないと判定すると(ステップS17:No)、ステップS4に戻って処理を繰り返す。一方、メイン制御部101aは、合成画像が終了したと判定すると(ステップS17:Yes)、終了信号を合成画像出力部101cに出力する。合成画像出力部101cは、その終了信号を入力すると、通信部102を介して終了信号を表示装置20に送信する(ステップS18)。
表示装置20の制御部201は、通信部202を介して終了信号を入力すると、その終了信号を表示部204に出力する。表示部204は、その終了信号を入力すると、動画像の再生を停止する。
When the main control unit 101a determines that the composite image is not finished (step S17: No), the process returns to step S4 to repeat the process. On the other hand, when determining that the composite image has ended (step S17: Yes), the main control unit 101a outputs an end signal to the composite image output unit 101c. When the composite image output unit 101c receives the termination signal, the composite image output unit 101c transmits the termination signal to the display device 20 via the communication unit 102 (step S18).
When the control unit 201 of the display device 20 receives an end signal via the communication unit 202, the control unit 201 outputs the end signal to the display unit 204. When the display unit 204 receives the end signal, the display unit 204 stops the reproduction of the moving image.

以上より、本実施形態における動画像処理システム1、動画像処理装置10、動画像処理方法、および動画像処理プログラムにおいては、複数の動画像C1〜C20の少なくとも1つが異なる解像度にされて互いに重ならないように配置され、切り換え指示された動画像が他の動画像よりも高解像度に設定された合成画像を合成画像出力部101cが表示装置20に送信し、表示装置20がその合成画像の一部であり高解像度に設定された動画像を択一的に選択して表示する。
これにより、表示装置20が通常の切り換え速度で切り換え表示する動画像を高解像度によって表示することができる。また、表示装置20が、通信が間に合わないような超緊急の切り換え速度で切り換え表示するときでも、同じ合成画像の他の動画像に素早く切り換えて表示することができる。そのため、種々の装置における限られたスペックの中で視聴者がより楽しめるように動画像を表示することができる。
As described above, in the moving image processing system 1, the moving image processing apparatus 10, the moving image processing method, and the moving image processing program in the present embodiment, at least one of the plurality of moving images C1 to C20 has different resolutions and overlaps each other. The composite image output unit 101c transmits to the display device 20 a composite image in which the moving image instructed to be switched is set to have a resolution higher than that of other moving images, and the display device 20 displays one of the composite images. A moving image set to high resolution is selectively selected and displayed.
As a result, it is possible to display a moving image which is switched and displayed at the normal switching speed by the display device 20 with high resolution. Further, even when the display device 20 performs switching display at a super urgent switching speed where communication can not be made in time, it is possible to quickly switch to and display other moving images of the same composite image. Therefore, it is possible to display a moving image so that the viewer can more enjoy the limited specifications of various devices.

また、合成画像生成部101bが、切り換え指示された動画像を高解像度に設定し、この動画像を撮影したカメラに対して円周線L上において近くに配列されたカメラの動画像を中解像度に設定し、切り換え指示された動画像に対して近くに配列されたカメラより円周線L上において遠くに配列されたカメラの動画像を低解像度に設定して合成画像を生成することから、切り換え指示された動画像を表示装置20において高解像度に表示させ、表示装置20が、通信が間に合わないような超緊急の切り換え速度で切り換え表示するときでも、切り換え指示された動画像を撮影したカメラの近くに配列されたカメラの動画像を素早く切り換えて中解像度に表示させることができる。   In addition, the composite image generation unit 101b sets the moving image instructed to be switched to a high resolution, and the medium resolution of the moving image of the camera arranged on the circumferential line L close to the camera that captured the moving image. Since the moving image of the camera arranged on the circumferential line L farther than the camera arranged close to the moving image instructed to be switched is set to low resolution to generate a composite image, A camera which captures a moving image instructed to be switched even if the moving image is instructed to be displayed on the display device 20 at high resolution on the display device 20 and the display device 20 switches and displays it at a super urgent switching speed such that communication is not in time. The moving images of cameras arranged in the vicinity of can be quickly switched to be displayed at medium resolution.

また、表示装置20が切り換え指示信号を順次送信すると、動画像処理装置10の通信部102がその切り換え指示信号を順次入力し、合成画像出力部101cは、切り換え指示された動画像が他の動画像よりも高解像度に設定された合成画像に順次切り換えて表示装置20に順次送信することから、高解像度に設定された動画像をユーザの切り換え指示に応じて表示装置20が順次切り換えて表示することができる。
また、合成画像生成部101bが、解像度があらかじめ設定された配置パターンに基づいて、それぞれの動画像ごとにすべての合成画像を生成し、合成画像出力部101cが、それらすべての合成画像の中から、切り換え指示された動画像が高解像度に設定された合成画像に変更して表示装置20に順次送信することから、より簡易に合成画像を変更して表示することができる。
In addition, when the display device 20 sequentially transmits the switching instruction signal, the communication unit 102 of the moving image processing apparatus 10 sequentially inputs the switching instruction signal, and the composite image output unit 101c transmits the switching instruction to another moving image. Since the image is sequentially switched to the composite image set to a higher resolution than the image and sequentially transmitted to the display device 20, the display device 20 sequentially switches and displays the moving image set to the high resolution according to the user's switching instruction be able to.
Further, the composite image generation unit 101b generates all composite images for each moving image based on the arrangement pattern in which the resolution is previously set, and the composite image output unit 101c generates a composite image from all the composite images. Since the moving image instructed to be switched is changed to the composite image set to the high resolution and sequentially transmitted to the display device 20, it is possible to more easily change and display the composite image.

また、切り換え指示された動画像が高解像度に設定された合成画像に代えて、切り換え指示された動画像が低解像度に設定され、当該動画像を撮影したカメラに対して円周線L上において切り換え方向の先に配列されたカメラの動画像が高解像度に設定された合成画像を合成画像出力部101cが表示装置20に送信することから、表示装置20が、通信が間に合わないような超緊急の切り換え速度で切り換え表示するときでも、切り換え指示された動画像から切り換え方向に先に配列されたカメラの動画像を素早く切り換えて高解像度に表示させることができる。すなわち、切り換え方向検知部101dが切り換え方向を検知することにより、ユーザの切り換え動作の先を読むことができ、その先の切り換え指示があるはずの動画像を素早く切り換えて高解像度に表示することができる。   Also, instead of the composite image in which the moving image instructed to be switched is set to high resolution, the moving image instructed to be switched is set to low resolution, and on the circumferential line L with respect to the camera capturing the moving image. Since the composite image output unit 101c transmits to the display device 20 the composite image in which the moving image of the camera arranged in the switching direction is set to high resolution, the display device 20 does not communicate in time. Even when the switching display is performed at the switching speed, the moving image of the camera arranged earlier in the switching direction can be quickly switched from the moving image instructed to be switched to be displayed in high resolution. That is, when the switching direction detection unit 101d detects the switching direction, the user can read the destination of the switching operation, and can quickly switch the moving image that should have the switching instruction after that to display in high resolution. it can.

また、合成画像出力部101cは、切り換え速度が所定のしきい値よりも速い場合には、切り換え指示された動画像が高解像度に設定された合成画像に代えて、切り換え指示された動画像が低解像度に設定され、当該動画像を撮影したカメラに対して円周線L上において切り換え方向の先に配列されたカメラの動画像が高解像度に設定された合成画像を表示装置20に順次送信し、切り換え速度が所定のしきい値よりも遅い場合には、切り換え指示された動画像が高解像度に設定された合成画像を表示装置20に順次送信することから、切り換え速度に応じて適切な動画像を表示することができる。例えば、表示装置20が、通信が間に合わないような超緊急の切り換え速度で切り換え表示するときでも、ユーザの切り換え動作の先を読むことにより、その先の切り換え指示があるはずの動画像を素早く切り換えて高解像度に表示することができ、一方、ユーザの切り換え動作が遅い場合には、切り換え指示された動画像を切り換えて高解像度に表示することができる。   In addition, when the switching speed is faster than a predetermined threshold value, the composite image output unit 101c replaces the moving image instructed to be switched with the composite image in which the high resolution is set, and the moving image instructed to be switched A composite image, which is set to low resolution and in which the moving image of the camera arranged earlier in the switching direction on the circumferential line L with respect to the camera that captured the moving image, is sequentially transmitted to the display device 20 When the switching speed is slower than the predetermined threshold, the moving image instructed to be switched sequentially transmits the composite image in which the high resolution is set to the display device 20, which is appropriate according to the switching speed. A moving image can be displayed. For example, even when the display device 20 performs switching display at a super urgent switching speed at which communication can not be made in time, by reading the destination of the user's switching operation, moving images for which there is a switching instruction ahead will be switched quickly When the user's switching operation is slow, the moving image instructed to be switched can be switched to be displayed at high resolution.

また、合成画像出力部101cは、通信速度が所定のしきい値よりも速い場合には、切り換え指示された動画像が高解像度に設定された合成画像を表示装置20に順次送信し、通信速度が所定のしきい値よりも遅い場合には、切り換え指示された動画像が高解像度に設定された合成画像に代えて、切り換え指示された動画像が低解像度に設定され当該動画像を撮影したカメラに対して円周線L上において切り換え方向の先に配列されたカメラの動画像が高解像度に設定された合成画像を表示装置20に順次送信することから、通信速度に応じて適切な動画像を表示することができる。すなわち、通信速度が速い場合には、動画像の切り換え速度が速くてもその速さに応じて合成画像を表示装置20が順次入力することができることから、切り換え指示された動画像に順次切り換えて高解像度に表示することができる。一方、通信速度が遅い場合には、切り換え速度が速いとその速さに応じて合成画像を表示装置20が順次入力することができないことから、ユーザの切り換え動作の先を読むことにより、その先の切り換え指示があるはずの動画像に素早く切り換えて高解像度に表示することができる。   In addition, when the communication speed is faster than a predetermined threshold, the composite image output unit 101c sequentially transmits the composite image in which the moving image instructed to be switched is set to high resolution to the display device 20, and the communication speed Is slower than the predetermined threshold value, the moving image instructed to be switched is set to the low resolution and the moving image is photographed instead of the composite image in which the switching instructed is set to the high resolution. The moving image of the camera arranged earlier in the switching direction on the circumferential line L with respect to the camera sequentially transmits the composite image set to the high resolution to the display device 20, so the appropriate moving image according to the communication speed An image can be displayed. That is, when the communication speed is high, even if the switching speed of the moving image is high, the display device 20 can sequentially input the composite image according to the speed. It can be displayed in high resolution. On the other hand, when the communication speed is slow, if the switching speed is high, the display device 20 can not sequentially input the composite image according to the speed, so the destination of the switching operation of the user is read It is possible to quickly switch to a moving image that should be instructed to switch and to display in high resolution.

また、合成画像出力部101cは、切り換え指示された動画像が低解像度に設定され、この動画像を撮影したカメラに対して円周線L上において切り換え方向の隣りに2つ分配列されたカメラの動画像が中解像度に設定され、切り換え方向のさらに隣りに配列されたカメラの動画像が高解像度に設定された合成画像を表示装置20に送信することから、切り換え速度に応じて適切な動画像を表示することができる。例えば、ユーザの切り換え動作が速い場合には、ユーザの切り換え動作の先を読むことにより、その先の切り換え指示があるはずの隣りの動画像に素早く切り換えて高解像度または中解像度によって表示することができる。
また、合成画像出力部101cは、動画像の表示時間が所定のしきい値を超えると、特定合成画像を表示装置20に送信することから、動画像のデータ量を抑制しつつ動画像を高解像度によって表示することができる。
Also, in the composite image output unit 101c, a moving image instructed to be switched is set to a low resolution, and a camera arranged by two on the circumferential line L next to the switching direction with respect to the camera that captured the moving image. The moving image of is set to the medium resolution, and the moving image of the camera arranged next to the switching direction transmits the composite image set to the high resolution to the display device 20, so the appropriate moving image according to the switching speed An image can be displayed. For example, when the switching operation of the user is fast, by reading ahead of the switching operation of the user, it is possible to quickly switch to the next moving image that should have a switching instruction ahead and display it by high resolution or medium resolution. it can.
In addition, since the composite image output unit 101c transmits the specific composite image to the display device 20 when the display time of the moving image exceeds a predetermined threshold, the moving image can be reduced while suppressing the data amount of the moving image. It can be displayed by resolution.

(実施形態2)
次に、本発明の第2の実施形態について説明する。
図13は、本発明の第2の実施形態を示したものである。
図13において、図1から図12に記載の構成要素と同一部分については同一符号を付し、その説明を省略する。
この実施形態と上記第1の実施形態とは基本的構成は同一であり、ここでは主として異なる点について説明する。
本実施形態においては、切り換え速度のしきい値が、第1のしきい値として例えば2.5秒に設定され、第2のしきい値として例えば1秒に設定されて、記憶部103に記憶されている。
Second Embodiment
Next, a second embodiment of the present invention will be described.
FIG. 13 shows a second embodiment of the present invention.
In FIG. 13, the same components as those shown in FIGS. 1 to 12 are denoted by the same reference numerals, and the description thereof will be omitted.
The basic configuration of this embodiment is the same as that of the first embodiment, and only the differences will be described here.
In the present embodiment, the threshold of the switching speed is set to, for example, 2.5 seconds as the first threshold, and is set to, for example, 1 second as the second threshold, and stored in the storage unit 103. It is done.

このような構成のもと、メイン制御部101aは、切り換え時間が第1のしきい値2.5を越えるか否かを判定する(ステップS71)。
メイン制御部101aは、切り換え時間が第1のしきい値を越えていると判定すると(ステップS71:Yes)、上記と同様に、通常の切り換え指示信号を合成画像出力部101cに出力し、合成画像出力部101cが、切り換え指示された動画像が高解像度に設定された合成画像を記憶部103から読み出して、通信部102を介して表示装置20に送信する(ステップS11)。
Based on such a configuration, the main control unit 101a determines whether the switching time exceeds the first threshold 2.5 (step S71).
When determining that the switching time exceeds the first threshold (step S71: Yes), the main control unit 101a outputs a normal switching instruction signal to the composite image output unit 101c in the same manner as described above, and combines them. The image output unit 101c reads from the storage unit 103 a composite image in which the moving image instructed to be switched is set to high resolution, and transmits the composite image to the display device 20 via the communication unit 102 (step S11).

また、メイン制御部101aは、ステップS10において、動画像の切り換え方向がすべて同じ方向であると判定すると(ステップS10:Yes)、切り換え時間が第2のしきい値1秒を越えるか否かを判定する(ステップS20)。メイン制御部101aは、切り換え時間が第2のしきい値を越えると判定すると(ステップS20:Yes)、通常の切り換え指示信号に代えて、緊急の切り換え指示信号を合成画像出力部101cに出力する。合成画像出力部101cは、緊急の切り換え指示信号を入力すると、記憶部103が記憶した最新の切り換え動画像識別情報を読み出し、切り換え指示された動画像が高解像度に設定された合成画像に代えて、切り換え指示された動画像が低解像度に設定された緊急の合成画像を記憶部103から読み出し、通信部102を介してその合成画像を表示装置20に送信する(ステップS12)。このときの合成画像は、例えば、図11に示すように、切り換え指示された動画像D4が低解像度に設定され、この動画像D4を撮影したカメラC4に対して切り換え方向の隣りに2つ分配列されたカメラC5,C6の動画像D5,D6が中解像度に設定され、これら2つ分のカメラC5,C6に対して切り換え方向の隣りに1つ分配列されたカメラC7の動画像D7が高解像度に設定され、このカメラC7に対して切り換え方向の隣りに2つ分配列されたカメラC8,C9の動画像D8,D9が高解像度に設定された合成画像F7となる。   If the main control unit 101a determines that the switching directions of moving images are all the same in step S10 (step S10: Yes), whether the switching time exceeds the second threshold 1 second It determines (step S20). If the main control unit 101a determines that the switching time exceeds the second threshold (step S20: Yes), the main control unit 101a outputs an emergency switching instruction signal to the composite image output unit 101c instead of the normal switching instruction signal. . When the composite image output unit 101c receives the emergency switching instruction signal, it reads out the latest switching moving image identification information stored in the storage unit 103, and the moving image instructed to be switched is replaced with the composite image set to high resolution. The urgent composite image in which the moving image instructed to be switched is set to low resolution is read out from the storage unit 103, and the composite image is transmitted to the display device 20 through the communication unit 102 (step S12). In this case, for example, as shown in FIG. 11, the moving image D4 instructed to be switched is set to a low resolution, and two adjacent to the switching direction with respect to the camera C4 capturing the moving image D4. The moving images D5 and D6 of the arranged cameras C5 and C6 are set to the medium resolution, and the moving image D7 of the camera C7 arranged one next to the switching direction with respect to these two cameras C5 and C6. The moving images D8 and D9 of the cameras C8 and C9 which are set to high resolution and are arranged next to the camera C7 by two in the switching direction become a composite image F7 set to high resolution.

一方、メイン制御部101aは、切り換え時間が第2のしきい値を越えていないと判定すると(ステップS20:No)、通常の切り換え指示信号および緊急の切り換え指示信号に代えて、第2の緊急の切り換え指示信号を合成画像出力部101cに出力する。合成画像出力部101cは、第2の緊急の切り換え指示信号を入力すると、記憶部103が記憶した最新の切り換え動画像識別情報を読み出し、切り換え指示された動画像が高解像度に設定された合成画像および緊急の合成画像に代えて、切り換え指示された動画像を撮影したカメラが緊急の合成画像のときよりも切り換え方向の反対方向に配列された第2の緊急の合成画像を記憶部103から読み出し、通信部102を介してその第2の緊急の合成画像を表示装置20に送信する(ステップS21)。このときの合成画像は、例えば、図12に示すように、切り換え指示された動画像D4が低解像度に設定され、この動画像D4を撮影したカメラC4が、緊急の合成画像において配列された位置よりも切り換え方向の反対方向に配列され、カメラC4に対して切り換え方向の隣りに1つ分配列されたカメラC5の動画像D5が低解像度に設定され、同様にして、動画像D6,D7,D9,D10が中解像度に設定され、動画像D8が高解像度に設定された合成画像F8となる。   On the other hand, when main control unit 101a determines that the switching time does not exceed the second threshold (step S20: No), the second emergency is substituted for the normal switching instruction signal and the emergency switching instruction signal. The switching instruction signal of is output to the composite image output unit 101c. When the composite image output unit 101c receives the second urgent switching instruction signal, the composite image output unit 101c reads the latest switching moving image identification information stored in the storage unit 103, and the composite image in which the switching instruction is set to high resolution And a second emergency composite image in which the camera capturing the moving image instructed to be switched is arranged in the direction opposite to the switching direction from the storage unit 103 instead of the emergency composite image. The second urgent composite image is transmitted to the display device 20 via the communication unit 102 (step S21). The composite image at this time is, for example, as shown in FIG. 12, the moving image D4 instructed to be switched is set to a low resolution, and the position at which the camera C4 capturing the video D4 is arranged in the emergency composite image. The moving image D5 of the camera C5 which is arranged in the opposite direction of the switching direction and is arranged next to the switching direction with respect to the camera C4 is set to low resolution, and similarly, moving images D6, D7, D9 and D10 are set to medium resolution, and the moving image D8 becomes a composite image F8 set to high resolution.

これにより、切り換え速度に応じてより適切な動画像を表示することができる。例えば、ユーザの切り換え動作が遅い場合には、切り換え指示された動画像を切り換えて高解像度に表示することができ、また、ユーザの切り換え動作が速い場合には、ユーザの切り換え動作の先を読むことにより、その先の切り換え指示があるはずの動画像を素早く切り換えて高解像度または中解像度によって表示することができ、さらに、ユーザの切り換え動作がより速い場合には、ユーザの切り換え動作のより先を読むことにより、その先の切り換え指示があるはずの動画像を素早く切り換えて高解像度または中解像度によって表示することができる。   This makes it possible to display a more appropriate moving image according to the switching speed. For example, when the user's switching operation is slow, moving images instructed to be switched can be switched and displayed at high resolution, and when the user's switching operation is fast, the user's switching operation is read ahead In this way, it is possible to quickly switch moving images that should have a switch instruction ahead and display them with high resolution or medium resolution, and further, if the user's switching operation is faster, the user's switching operation is preceded By reading, it is possible to quickly switch a moving image that should have a switch instruction ahead and display it with high resolution or medium resolution.

以上、本発明の実施形態について述べたが、本発明は既述の実施形態に限定されるものではなく、各種の変形及び変更が可能である。
例えば、カメラの設置をカメラC1〜C20の20台としたが、これに限ることはなく、カメラの設置台数は、20台未満であってもよいし、20台超であってもよく、適宜変更可能である。
また、カメラの設置位置に関して、被写体Pに対して、同一距離および均等間隔としたが、これに限ることはなく、カメラの設置位置は適宜変更可能である。例えば、円周線L上において、カメラを互いに周方向に不均等な間隔に設置してもよい。
また、カメラC1〜C20を円周線L上に設置しているが、これに限ることはなく、適宜変更可能である。例えば、複数のカメラを直線上、曲線上またはランダムな線上に配置してもよい。
As mentioned above, although embodiment of this invention was described, this invention is not limited to embodiment as stated above, A various deformation | transformation and change are possible.
For example, although the installation of the cameras is set to 20 cameras C1 to C20, the present invention is not limited thereto, and the number of installed cameras may be less than 20 or more than 20, as appropriate It can be changed.
In addition, with regard to the installation position of the camera, although the same distance and an equal interval with respect to the subject P are used, the present invention is not limited thereto, and the installation position of the camera can be changed appropriately. For example, on the circumferential line L, the cameras may be installed at uneven intervals in the circumferential direction.
Moreover, although the cameras C1 to C20 are installed on the circumferential line L, the present invention is not limited to this, and can be appropriately changed. For example, a plurality of cameras may be arranged on a straight line, a curved line or a random line.

また、カメラC1〜C20が撮影する動画像の解像度を1920×1080ピクセルとしたが、これに限ることはなく、解像度は適宜変更可能である。
また、高解像度を1920×1080ピクセルとし、中解像度を1440×810ピクセルとし、低解像度を960×540ピクセルとしているが、これらに限ることはなく、各解像度は適宜変更可能である。
また、合成画像において、動画像の解像度を高解像度、中解像度および低解像度の3段階に設定したが、これに限ることはなく、適宜変更可能である。例えば、高解像度と低解像度の2段階に設定してもよいし、高解像度、中解像度および低解像度以外の解像度も設定し4段階以上に設定してもよい。
また、高解像度の動画像が1つ、中解像度の動画像が4つ、残りの動画像が低解像度に設定されるとしたが、これに限ることはなく、各解像度の設置数は適宜変更可能である。例えば、高解像度の動画像が2つ以上、中解像度の動画像が1つ以上に設定されていてもよい。この場合、動画像の配置も適宜変更可能である。例えば、図14に示すように、高解像度の動画像D1が1つ設定され、この動画像D1を挟んで線上の両方向の隣りに各3つ分配列された合計6つの動画像D2〜D4,D17〜19が中解像度に設定され、残りの動画像D5〜D16が低解像度に設定されていてもよい。
In addition, although the resolution of the moving image captured by the cameras C1 to C20 is set to 1920 × 1080 pixels, the resolution is not limited thereto, and the resolution can be appropriately changed.
The high resolution is 1920 × 1080 pixels, the middle resolution is 1440 × 810 pixels, and the low resolution is 960 × 540 pixels. However, the resolution is not limited to these, and each resolution can be appropriately changed.
Further, in the composite image, the resolution of the moving image is set to three levels of high resolution, medium resolution and low resolution, but the present invention is not limited to this, and can be appropriately changed. For example, two levels of high resolution and low resolution may be set, and resolutions other than high resolution, medium resolution and low resolution may be set and set to four or more stages.
In addition, although one high resolution moving image, four medium resolution moving images, and the remaining moving images are set to low resolution, the present invention is not limited to this, and the number of installation of each resolution is appropriately changed It is possible. For example, two or more high resolution moving images and one or more medium resolution moving images may be set. In this case, the arrangement of the moving image can also be changed as appropriate. For example, as shown in FIG. 14, a single high resolution moving image D1 is set, and a total of six moving images D2 to D4, which are arranged three by three adjacent to each other on both sides of the line across the moving image D1. D17 to D19 may be set to the medium resolution, and the remaining moving images D5 to D16 may be set to the low resolution.

また、図15に示すように、高解像度の動画像D1が1つ設定され、この動画像D1を挟んで線上の両方向の隣りに各4つ分配列された合計8つの動画像D2〜D5,D15〜18が中解像度に設定され、残りの動画像D6〜D14が低解像度に設定されていてもよい。
また、図16に示すように、高解像度の動画像D1が1つ設定され、この動画像D1以外の残りの動画像D2〜D28が低解像度に設定されていてもよい。
また、図17に示すように、高解像度の動画像D1が1つ設定され、この動画像D1を挟んで線上の両方向の隣りに各1つ分配列された合計2つの動画像D2,D16が中解像度に設定され、動画像D2から線上の隣りに3つ分配列された動画像D3〜D5および動画像D16から線上の隣りに3つ分配列された動画像D13〜D15の合計6つの動画像が低解像度に設定され、残りの動画像がさらに低い解像度に設定されていてもよい。この場合、動画像D3〜D15の解像度が複数段階に設定されているものの、これらの動画像D3〜D15をまとめて低解像度として区分けすることができる。また、必ずしも動画像が隣接して配置される必要はなく、クリアランスCが設けられていてもよい。
Further, as shown in FIG. 15, a single high resolution moving image D1 is set, and a total of eight moving images D2 to D5 are arranged by four each adjacent to both sides of the line across the moving image D1. D15 to 18 may be set to the medium resolution, and the remaining moving images D6 to D14 may be set to the low resolution.
Further, as shown in FIG. 16, one high resolution moving image D1 may be set, and the remaining moving images D2 to D28 other than the moving image D1 may be set to low resolution.
In addition, as shown in FIG. 17, one high resolution moving image D1 is set, and a total of two moving images D2 and D16 arranged one by one on both sides of the moving image D1 in both directions on both sides of the line. A total of six moving images of medium resolution D3 and D5 arranged in three lines adjacent to the line from the moving picture D2 and three D13 and D15 arranged in lines adjacent to the line from the moving picture D16 The image may be set to a lower resolution and the remaining video may be set to a lower resolution. In this case, although the resolutions of the moving images D3 to D15 are set in a plurality of stages, these moving images D3 to D15 can be collectively classified as low resolution. In addition, moving images do not necessarily have to be arranged adjacent to each other, and a clearance C may be provided.

また、図18に示すように、高解像度の動画像D1が1つ設定され、この動画像D1を挟んで線上の両方向の隣りに配列された各4つ分の合計8つの動画像D2〜D5,D18〜19が中解像度に設定され、残りの動画像D6〜D17のうちのいくつかが間引かれて低解像度に設定されていてもよい。すなわち、合成画像生成部101bは、切り換え指示された動画像に対して線上に遠い位置に配列された動画像を間引いて合成画像を生成し、合成画像出力部101cは、その合成画像を表示装置20に送信するようにしてもよい。なお、図18においては、動画像D11,D13が間引かれている。   In addition, as shown in FIG. 18, one high resolution moving image D1 is set, and a total of eight moving images D2 to D5 for each of four arranged in both directions on both sides of the line across the moving image D1. , D 18 to 19 may be set to the medium resolution, and some of the remaining moving images D 6 to D 17 may be thinned and set to the low resolution. That is, the composite image generation unit 101b thins out moving images arranged at a position far from the moving image instructed to be switched to generate a composite image, and the composite image output unit 101c displays the composite image as a display device. You may make it transmit to 20. In FIG. 18, the moving images D11 and D13 are thinned out.

また、図2に示す通信速度対応テーブルの通信速度としきい値の各数値は、適宜変更可能である。もちろん、しきい値を算出する数式も適宜変更可能である。
また、図10に示すステップS8において、切り換え指示が連続して3回目以上であるか否かをメイン制御部101aが判定しているが、これに限ることはなく、回数は適宜変更可能である。例えば、中解像度に設定される線上の一方向に連続して配列されたカメラの動画像の数+1としてステップS8における回数を設定してもよい。例えば、図14においては、中解像度に設定される線上の一方向に連続して配列されたカメラの動画像の数3(D2,D3,D4)+1=4回とし、図15においては、中解像度に設定される線上の一方向に連続して配列されたカメラの動画像の数4(D2,D3,D4,D5)+1=5回とすることができる。
Further, each value of the communication speed and the threshold value of the communication speed correspondence table shown in FIG. 2 can be appropriately changed. Of course, the formula for calculating the threshold can be changed as appropriate.
Further, in step S8 shown in FIG. 10, the main control unit 101a determines whether or not the switching instruction is continuously performed for the third time or more, but the present invention is not limited to this, and the number can be changed as appropriate. . For example, the number of times in step S8 may be set as the number of moving images of cameras continuously arranged in one direction on a line set to medium resolution + 1. For example, in FIG. 14, the number of moving images of cameras sequentially arranged in one direction on a line set to medium resolution is 3 (D2, D3, D4) + 1 = 4, and in FIG. The number 4 (D2, D3, D4, D5) of the moving images of the camera continuously arranged in one direction on the line set as the resolution can be made 1/5.

また、合成画像生成部101bがあらかじめ決められた配置パターンに基づいてすべての合成画像を生成するとしたが、これに限ることはなく、通信部102が切り換え指示信号を入力すると、メイン制御部101aの指示のもと、合成画像生成部101bが上述の必要な合成画像のみを都度ごとに生成してもよい。すなわち、合成画像生成部101bは、通信部102が切り換え指示信号を順次入力すると、必要な合成画像のみを順次生成し、合成画像出力部101cが、この順次生成された合成画像を表示装置20に順次送信してもよい。   In addition, although it has been stated that the composite image generation unit 101b generates all composite images based on a predetermined arrangement pattern, the present invention is not limited to this, and when the communication unit 102 inputs a switching instruction signal, the main control unit 101a Based on the instruction, the composite image generation unit 101b may generate only the necessary composite image described above each time. That is, when the communication unit 102 sequentially inputs the switching instruction signal, the composite image generation unit 101 b sequentially generates only the necessary composite image, and the composite image output unit 101 c causes the display device 20 to sequentially generate the composite image. It may be sent sequentially.

また、図10に示すステップS11において、合成画像出力部101cが、切り換え速度が所定のしきい値よりも遅い場合には、切り換え指示された動画像(例えばD4とする)が高解像度に設定された合成画像F4を表示装置20に順次送信するとしたが、これに限ることはなく、切り換え指示された動画像D4が高解像度に設定された合成画像F4に代えて、切り換え指示された動画像D4が中解像度(または低解像度)に設定され、この動画像D4を撮影したカメラに対して線上において切り換え方向の近くに配列されたカメラの動画像D6が高解像度に設定された合成画像F6を送信し、動画像D4から動画像D6までを順次切り換えて表示装置20が表示してもよい。このとき、切り換え速度が所定のしきい値よりも速い場合には、ステップS12において、合成画像出力部101cが、切り換え指示された動画像D4が高解像度に設定された合成画像F4に代えて、切り換え指示された動画像D4が中解像度(または低解像度)に設定され、この動画像を撮影したカメラに対して線上において切り換え方向の遠くに配列されたカメラの動画像D7が高解像度に設定された合成画像F7を送信し、動画像D4から動画像D7までを順次切り換えて表示装置20が表示してもよい。   Further, in step S11 shown in FIG. 10, when the switching speed is slower than the predetermined threshold, the composite image output unit 101c sets the moving image instructed to be switched (for example, D4) to a high resolution. The composite image F4 is sequentially transmitted to the display device 20. However, the present invention is not limited thereto, and the moving image D4 instructed to be switched is replaced with the composite image F4 set to high resolution, and the moving image D4 instructed to switch Is set to medium resolution (or low resolution), and a moving image D6 of a camera arranged close to the switching direction on the line with respect to the camera that captured this moving image D4 transmits a composite image F6 set to a high resolution Alternatively, the display device 20 may display the moving image D4 to the moving image D6 sequentially switched. At this time, if the switching speed is faster than the predetermined threshold value, in step S12, the composite image output unit 101c replaces the moving image D4 instructed to be switched with the composite image F4 set to high resolution, The moving image D4 instructed to be switched is set to the medium resolution (or low resolution), and the moving image D7 of the camera arranged far in the switching direction on the line is set to the high resolution with respect to the camera that captured the moving image. The composite image F7 may be transmitted, and the moving image D4 to the moving image D7 may be sequentially switched to be displayed by the display device 20.

また、図10に示すステップS7において、切り換え速度のしきい値を通信速度に対応させることにより、通信速度に応じて、合成画像出力部101cが表示装置20に送信する合成画像を制御している。すなわち、合成画像出力部101cは、通信速度が所定のしきい値よりも速い場合に、切り換え指示された動画像(例えばD4とする)が高解像度に設定された合成画像F4を表示装置20に順次送信するとしているが、これに限ることはなく、切り換え指示された動画像D4が高解像度に設定された合成画像F4に代えて、切り換え指示された動画像D4が中解像度(または低解像度)に設定され、この動画像D4を撮影したカメラに対して線上において切り換え方向の近くに配列されたカメラの動画像D6が高解像度に設定された合成画像を送信してもよい。   Further, in step S7 shown in FIG. 10, the composite image output unit 101c controls the composite image to be transmitted to the display device 20 according to the communication speed by making the switching speed threshold correspond to the communication speed. . That is, when the communication speed is higher than the predetermined threshold, the composite image output unit 101c causes the display device 20 to display the composite image F4 in which the moving image (for example, D4) instructed to be switched is set to high resolution. Although transmission is sequentially performed, the present invention is not limited thereto, and the moving image D4 instructed to be switched is replaced with the composite image F4 set to high resolution, and the moving image D4 instructed to be switched is medium resolution (or low resolution) The moving image D6 of the camera arranged in the vicinity of the switching direction on the line may be transmitted to the camera that has set the high-resolution image.

また、図10に示すステップS12において、合成画像出力部101cが、切り換え指示された動画像が低解像度に設定された合成画像を表示装置20に送信するとしたが、これに限ることはなく、切り換え指示された動画像が中解像度に設定され、この動画像を撮影したカメラに対して線上において切り換え方向の隣りに配列されたカメラの動画像が高解像度に設定された合成画像を送信してもよい。例えば、図5において、切り換え指示された動画像がD19であるとすると、動画像D19とカメラC19に対して円周線L上の切り換え方向の先に配列されたカメラC20の動画像D20との2つ分の動画像D19,D20が中解像度に設定され、これら2つ分のカメラC19,C20に対して円周線L上において切り換え方向の隣りに配列されたカメラC1の動画像D1が高解像度に設定された合成画像F1を合成画像出力部101cが表示装置20に送信するようにしてもよい。   Further, in step S12 shown in FIG. 10, the composite image output unit 101c transmits the composite image in which the moving image instructed to be switched is set to low resolution to the display device 20. However, the present invention is not limited thereto. Even if the specified moving image is set to medium resolution and the moving image of the camera arranged next to the switching direction on the line with the camera that captured this moving image transmits a composite image set to high resolution Good. For example, in FIG. 5, assuming that the moving image instructed to be switched is D19, the moving image D19 and the moving image D20 of the camera C20 arranged earlier in the switching direction on the circumferential line L with respect to the camera C19. Two moving images D19 and D20 are set to medium resolution, and the moving image D1 of the camera C1 arranged next to the switching direction on the circumferential line L with respect to these two cameras C19 and C20 is high. The composite image output unit 101c may transmit the composite image F1 set to the resolution to the display device 20.

また、図11に示すステップS71において第1のしきい値を2.5秒とし、第2のしきい値を1秒としたが、これらに限ることはなく、各数値は適宜変更可能である。すなわち、合成画像出力部101cは、メイン制御部101aの判定のもと、切り換え速度が速い場合には、切り換え指示された動画像が高解像度に設定された通常の合成画像を表示装置20に送信し、切り換え速度が中速度の場合には、切り換え指示された動画像を撮影したカメラに対して線上の近くに配列されたカメラの動画像が高解像度に設定された合成画像を送信し、切り換え速度が遅い場合には、切り換え指示された動画像を撮影したカメラに対して線上に遠くに配列されたカメラの動画像が高解像度に設定された合成画像を送信するようにしてもよい。   Further, although the first threshold is set to 2.5 seconds and the second threshold is set to 1 second in step S71 shown in FIG. 11, the present invention is not limited thereto, and each numerical value can be changed as appropriate. . That is, based on the determination of the main control unit 101a, when the switching speed is fast, the composite image output unit 101c transmits, to the display device 20, a normal composite image in which the moving image instructed to be switched is set to high resolution. If the switching speed is medium speed, the moving image of the camera arranged near the line with respect to the camera that captured the moving image instructed to be switched transmits a composite image in which the high resolution is set, and switching is performed. When the speed is low, a moving image of a camera arranged on a line far from the camera that has taken the moving image instructed to be switched may transmit a composite image in which the high resolution is set.

また、表示装置20が切り換え指示信号を順次送信すると、通信部102切り換え指示信号を順次入力し、合成画像出力部101cは、通信部102が切り換え指示信号を順次入力すると切り換え指示された動画像を他の動画像よりも高解像度に設定した合成画像に順次変更して表示装置20に順次送信するとしたが、これに限ることはなく、合成画像出力部101cが必要な合成画像のみを選択して適宜のタイミングで送信するようにしてもよい。
また、合成画像出力部101cが、通信速度に応じて、切り換え指示された動画像が高解像度に設定された合成画像に代えて、切り換え指示された動画像を撮影したカメラに対して線上において切り換え方向の先に配列されたカメラの動画像が高解像度に設定された合成画像を表示装置20に順次出力するとしたが、これに限ることはなく、切り換え指示された動画像が高解像度に設定された合成画像を送信するようにしてもよい。この場合、通信速度検知部101fは設けられていなくてもよい。
In addition, when the display device 20 sequentially transmits the switching instruction signal, the communication unit 102 sequentially inputs the switching instruction signal, and when the communication unit 102 sequentially inputs the switching instruction signal, the composite image output unit 101c receives the moving image instructed to be switched. The composite image set to a higher resolution than other moving images is sequentially changed and sequentially transmitted to the display device 20. However, the present invention is not limited thereto, and the composite image output unit 101c selects only the necessary composite image and It may be transmitted at an appropriate timing.
Further, the composite image output unit 101 c switches over the line to the camera that has captured the switching instructed moving image, instead of the composite image in which the switching instructed moving image is set to high resolution according to the communication speed. Although it has been stated that a composite image in which moving images of cameras arranged earlier in the direction are set to high resolution is sequentially output to the display device 20, the present invention is not limited thereto, and moving images instructed to be switched are set to high resolution The composite image may be transmitted. In this case, the communication speed detection unit 101 f may not be provided.

また、合成画像出力部101cが、切り換え方向に応じて、切り換え指示された動画像が高解像度に設定された合成画像に代えて、切り換え指示された動画像を撮影したカメラに対して線上において切り換え方向の先に配列されたカメラの動画像が高解像度に設定された合成画像を表示装置20に順次出力するとしたが、これに限ることはなく、切り換え指示された動画像が高解像度に設定された合成画像を送信するようにしてもよい。この場合、切り換え方向検知部101dは設けられていなくてもよい。
また、合成画像出力部101cが、切り換え速度に応じて、切り換え指示された動画像が高解像度に設定された合成画像に代えて、切り換え指示された動画像を撮影したカメラに対して線上において切り換え方向の先に配列されたカメラの動画像が高解像度に設定された合成画像を表示装置20に順次出力するとしたが、これに限ることはなく、切り換え指示された動画像が高解像度に設定された合成画像を送信するようにしてもよい。この場合、切り換え速度検知部101eは設けられていなくてもよい。
Further, the composite image output unit 101 c switches over the line to the camera that has captured the moving image instructed to be switched instead of the composite image in which the moving image instructed to be switched is set to high resolution according to the switching direction. Although it has been stated that a composite image in which moving images of cameras arranged earlier in the direction are set to high resolution is sequentially output to the display device 20, the present invention is not limited thereto, and moving images instructed to be switched are set to high resolution The composite image may be transmitted. In this case, the switching direction detection unit 101d may not be provided.
Further, the composite image output unit 101c switches over the line to the camera that has captured the switching instructed moving image, instead of the composite image in which the switching instructed moving image is set to high resolution according to the switching speed. Although it has been stated that a composite image in which moving images of cameras arranged earlier in the direction are set to high resolution is sequentially output to the display device 20, the present invention is not limited thereto, and moving images instructed to be switched are set to high resolution The composite image may be transmitted. In this case, the switching speed detection unit 101e may not be provided.

また、所定時間経過すると、合成画像生成部101bが特定合成画像を生成し、合成画像出力部101cが特定合成画像を表示装置20に送信するとしたが、これに限ることはなく、特定合成画像を生成したり送信したりしなくてもよい。
また、表示装置20は、デスクトップパソコンのように固定的に設置される端末であってもよいし、携帯電話、スマートフォンまたはノートパソコンなどのような携帯端末であってもよい。
In addition, although the composite image generation unit 101b generates the specific composite image and the composite image output unit 101c transmits the specific composite image to the display device 20 when the predetermined time has elapsed, the present invention is not limited thereto. It does not have to be generated or sent.
Further, the display device 20 may be a terminal fixedly installed like a desktop personal computer, or may be a portable terminal like a mobile phone, a smartphone or a notebook computer.

また、操作部205として、タッチパッドなどを例示しているが、これに限ることはなく、適宜変更可能である。例えば、キーボードやマウスなどの操作により、切り換え指示を入力してもよい。また、これらの入力操作だけでなく、切り換え操作指示出力部として、見者の移動を画像認識により検知しその移動によって切り換え操作指示信号を出力するようにしてもよい。さらに、見者から発せられる赤外線によって見者の移動を検知する赤外線検知部や、見者の携帯端末のGPS機能を利用した位置検出部などによって、見者の移動を検知してもよい。また、見者の移動を検知するものとしているが、これに限ることはなく、例えば、人でなくても、ネコや犬などのような動物であってもよい。
また、見者の身体全体の移動を検知するだけでなく、見者の身体の少なくとも一部の移動を検知するものであってもよい。例えば、指示空間座標内において、見者が手を左から右にスライド移動させたときの手の動きを動画像の切り換え指示として検知するようにしてもよい。これにより、手などの身体を動かすとその動きに合わせて動画像を連続して順次切り換えることができるため、見者が動画像の変化を見ながら、手を動かすなどの切り替え指示をリアルタイムに行うことができる。
Moreover, although the touch pad etc. are illustrated as the operation part 205, it does not restrict to this and can be changed suitably. For example, the switching instruction may be input by an operation of a keyboard, a mouse or the like. In addition to these input operations, as the switching operation instruction output unit, the movement of the viewer may be detected by image recognition, and the switching operation instruction signal may be output by the movement. Furthermore, the movement of the viewer may be detected by an infrared detection unit that detects the movement of the viewer based on infrared rays emitted from the viewer, a position detection unit using the GPS function of the portable terminal of the viewer, or the like. In addition, although the movement of the viewer is detected, the present invention is not limited thereto. For example, even if it is not human, it may be an animal such as a cat or a dog.
In addition to detecting movement of the entire body of the viewer, movement of at least a part of the body of the viewer may be detected. For example, the movement of the hand when the viewer slides the hand from the left to the right within the designated space coordinates may be detected as a moving image switching instruction. As a result, when the body such as a hand is moved, moving images can be sequentially switched sequentially according to the movement, so a viewer gives a switching instruction such as moving a hand in real time while watching the change of the moving image. be able to.

また、見者が表示部204の傾きや角度を変化させたときに、その変化に応じて、動画像を連続して順次切り替えることができるように、切り換え操作指示出力部が傾き検知部や角度検知部などであってもよい。
例えば、スマートフォンなどの携帯端末に、切り換え操作指示出力部としての傾き検知部や角度検知部を設けてもよい。すなわち、ユーザが当該携帯端末を把持して表示部204を見ている状態で、携帯端末の角度を連続して切り替えることにより、傾き検知部や角度検知部が動画像の切り換え操作指示信号を連続して順次出力し、表示部204が動画像を連続して順次切り替えて表示するようにしてもよい。これにより、ユーザが携帯端末を把持しながら角度を変えていくだけで、表示部204に映る動画像が連続して順次切り替えられる。
In addition, when the viewer changes the tilt or angle of the display unit 204, the switching operation instruction output unit includes a tilt detection unit or an angle so that the moving image can be switched sequentially and continuously according to the change. It may be a detection unit or the like.
For example, an inclination detection unit or an angle detection unit as a switching operation instruction output unit may be provided in a portable terminal such as a smartphone. That is, by continuously switching the angle of the mobile terminal while the user is holding the mobile terminal and looking at the display unit 204, the tilt detection unit and the angle detection unit continuously transmit the switching operation instruction signal of the moving image. , And the display unit 204 may sequentially switch and display moving images sequentially. As a result, moving images captured on the display unit 204 can be successively switched in sequence only by changing the angle while the user holds the portable terminal.

また、表示装置20は、メガネなどの目を覆う部分(ガラスやレンズの部分)に動画を表示することができるようなメガネ式のデバイスに、切り換え操作指示出力部としての傾き検知部や角度検知部が設けられていてもよい。すなわち、ユーザが当該メガネ式デバイスを装着したまま顔の角度を変えていくことにより、傾き検知部や角度検知部が切り換え操作指示信号を連続して出力し、表示部204としての目を覆う部分が動画像を連続して切り替えて表示するようにしてもよい。これにより、ユーザがメガネ式デバイスを装着して顔の角度を変えていくだけで、表示部204に映ったユーザの見ている動画像が連続して切り替えられる。
また、表示部104,204としては、液晶、プラズマ、有機ELなどのモニタだけでなく、ホログラムなどによる立体的な表示であってもよい。
In addition, the display device 20 is an eyeglass-type device capable of displaying a moving image on a portion (glass or lens portion) covering eyes such as glasses, and an inclination detection unit or angle detection as a switching operation instruction output unit A part may be provided. That is, by changing the angle of the face while the user wears the glasses-type device, the tilt detection unit or the angle detection unit continuously outputs the switching operation instruction signal, and covers the eyes as the display unit 204. May continuously switch and display moving images. As a result, only by the user wearing the glasses-type device and changing the angle of the face, moving images seen by the user on the display unit 204 are continuously switched.
The display units 104 and 204 may be not only monitors of liquid crystal, plasma, organic EL, etc., but also three-dimensional display by holograms or the like.

また、動画像処理システム1、動画像処理装置10および表示装置20を構成する前述の各機能部は、単体のコンピュータに備えられていてもよいし、通信ネットワークを介して通信可能な複数のコンピュータに分散して備えられていてもよい。
なお、ここでは、装置内での各種信号やデータのやり取りを出力及び入力とし、装置間でのネットワークを介した各種信号やデータのやり取りを送信および受信としているが、これらに限ることはなく、装置間でのネットワークを介したやり取りでも出力および入力としてもよい。
また、動画像処理システム1、動画像処理装置10および表示装置20の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより各種処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものとする。
また、「コンピュータシステム」は、WWWシステムを利用している場合であれば、ホームページ提供環境(あるいは表示環境)も含むものとする。
Further, the above-described respective functional units constituting the moving image processing system 1, the moving image processing apparatus 10, and the display device 20 may be provided in a single computer, or a plurality of computers which can communicate via a communication network. It may be distributed and provided.
Here, exchange of various signals and data in the device is output and input, and exchange of various signals and data via the network between the devices is transmission and reception, but the present invention is not limited thereto. It may be exchange between devices via a network or may be output and input.
Further, a program for realizing the functions of the moving image processing system 1, the moving image processing apparatus 10 and the display device 20 is recorded in a computer readable recording medium, and the program recorded in the recording medium is read into the computer system The various processes may be performed by executing the process. Here, the “computer system” includes an OS and hardware such as peripheral devices.
The "computer system" also includes a homepage providing environment (or display environment) if the WWW system is used.

また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD−ROM、DVD等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであってもよい。
また、以上の実施形態や変形例を種々組み合わせることができることは言うまでもない。
The term "computer-readable recording medium" refers to a storage medium such as a flexible disk, a magneto-optical disk, a ROM, a CD-ROM, a portable medium such as a DVD, a hard disk incorporated in a computer system. Furthermore, “computer-readable recording medium” dynamically holds a program for a short time, like a communication line in the case of transmitting a program via a network such as the Internet or a communication line such as a telephone line. In this case, the volatile memory in the computer system which is the server or the client in that case, and the one that holds the program for a certain period of time is also included. The program may be for realizing a part of the functions described above, or may be realized in combination with the program already recorded in the computer system.
Further, it goes without saying that the above embodiments and modifications can be combined in various ways.

既述の実施形態に関し、さらに以下の付記を開示する。
(付記1)
線上に順に配列された複数のカメラによって撮影されたそれぞれの動画像を前記線上のカメラの順に選択的に切り換えて表示装置に表示させる動画像処理装置であって、
前記それぞれの動画像の少なくとも一つを他の動画像と異なる解像度にして前記それぞれの動画像が互いに重ならないように配置した合成画像を生成する合成画像生成部と、
前記合成画像生成部が生成した合成画像を前記表示装置に出力し前記合成画像の一部である前記動画像を前記表示装置に選択的に表示させる合成画像出力部と、
前記表示装置から出力される前記動画像の切り換え指示を入力する切り換え指示入力部とを備え、
前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を入力すると、前記それぞれの動画像のうち、前記表示装置から切り換え指示された動画像が他の動画像よりも高解像度に設定された合成画像を表示装置に出力し前記切り換え指示された動画像を表示装置に表示させる動画像処理装置。
Further, the following appendices will be disclosed regarding the embodiment described above.
(Supplementary Note 1)
A moving image processing apparatus for selectively switching each moving image shot by a plurality of cameras sequentially arranged on a line in order of the cameras on the line and displaying the image on a display device.
A composite image generation unit configured to generate a composite image in which at least one of the respective moving images has a resolution different from that of the other moving images and the respective moving images are arranged so as not to overlap each other;
A composite image output unit that outputs the composite image generated by the composite image generation unit to the display device and causes the display device to selectively display the moving image which is a part of the composite image;
A switching instruction input unit for inputting a switching instruction of the moving image output from the display device;
When the switching instruction input unit inputs the switching instruction, the composite image output unit sets the moving image instructed to be switched from the display device to a higher resolution than the other moving images among the moving images. A moving image processing apparatus for outputting the combined image on the display device and displaying the moving image instructed to be switched on the display device.

(付記2)
前記合成画像出力部は、前記それぞれの動画像のうち、前記表示装置から切り換え指示された動画像が高解像度に設定され、当該動画像を撮影したカメラに対して前記線上において近くに配列されたカメラの動画像が中解像度に設定され、前記表示装置から切り換え指示された動画像を撮影したカメラに対して前記線上において遠くに配列されたカメラの動画像が低解像度に設定された合成画像を表示装置に出力する付記1に記載の動画像処理装置。
(Supplementary Note 2)
The composite image output unit is configured such that a moving image instructed to be switched from the display device among the moving images is set to a high resolution, and is arranged close to the camera that captured the moving image on the line The moving image of the camera is set to medium resolution, and the moving image of the camera arranged on the line far from the camera that captured the moving image instructed to be switched from the display device is set to a composite image of low resolution. The moving image processing apparatus according to appendix 1, which is output to a display device.

(付記3)
前記表示装置が前記切り換え指示を順次出力すると、前記切り換え指示入力部は前記切り換え指示を順次入力し、
前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を順次入力すると、前記切り換え指示された動画像が他の動画像よりも高解像度に設定された合成画像に順次変更して前記表示装置に順次出力する付記2に記載の動画像処理装置。
(Supplementary Note 3)
When the display device sequentially outputs the switching instruction, the switching instruction input unit sequentially inputs the switching instruction;
When the switching instruction input unit sequentially inputs the switching instruction, the composite image output unit sequentially changes the moving image instructed to be switched to a composite image set to a higher resolution than other moving images, and displays the display The moving image processing apparatus according to appendix 2, which sequentially outputs to the apparatus.

(付記4)
前記合成画像生成部は、前記それぞれの動画像の少なくとも一つがあらかじめ高解像度に設定され前記少なくとも一つの動画像に対して前記線上において近くに配列されたカメラの動画像があらかじめ中解像度に設定され前記少なくとも一つの動画像に対して前記線上において遠くに配列されたカメラの動画像があらかじめ低解像度に設定された配置パターンに基づいて、前記それぞれの動画像ごとに複数の合成画像を生成し、
前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を順次入力すると、前記合成画像生成部がそれぞれの動画像ごとに生成した複数の合成画像の中から、前記切り換え指示された動画像が高解像度に設定された合成画像に変更して前記表示装置に順次出力する付記3に記載の動画像処理装置。
(Supplementary Note 4)
In the composite image generation unit, at least one of the respective moving images is previously set to a high resolution, and a moving image of a camera arranged in the vicinity of the line on the at least one moving image is previously set to a medium resolution A plurality of composite images are generated for each of the moving images based on an arrangement pattern in which moving images of cameras arranged far away on the line with respect to the at least one moving image are previously set to low resolution;
The composite image output unit, when the switching instruction input unit sequentially inputs the switching instruction, the moving image instructed to be switched among the plurality of composite images generated for each moving image by the composite image generation unit The moving image processing apparatus according to claim 3, wherein the image is changed to a composite image set to a high resolution and sequentially output to the display device.

(付記5)
前記合成画像生成部は、前記切り換え指示入力部が前記切り換え指示を順次入力すると、前記切り換え指示された動画像を高解像度に設定し、前記切り換え指示された動画像に対して前記線上において近くに配列されたカメラの動画像を中解像度に設定し、前記切り換え指示された動画像に対して前記線上において遠くに配列されたカメラの動画像を低解像度にして合成画像を順次生成し、
前記合成画像出力部は、前記合成画像生成部が順次生成した合成画像を前記表示装置に順次出力する付記3に記載の動画像処理装置。
(Supplementary Note 5)
When the switching instruction input unit sequentially inputs the switching instruction, the composite image generation unit sets the moving image instructed to be switched to a high resolution, and the moving image instructed to be switched is close to the moving image on the line. The moving image of the arranged camera is set to the medium resolution, and the moving image of the camera arranged far on the line is made low with respect to the moving image instructed to be switched, and a composite image is sequentially generated.
The moving image processing apparatus according to claim 3, wherein the composite image output unit sequentially outputs the composite image sequentially generated by the composite image generation unit to the display device.

(付記6)
前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を順次入力すると、前記切り換え指示された動画像が高解像度に設定された合成画像に代えて、前記切り換え指示された動画像が中解像度又は低解像度に設定され当該動画像を撮影したカメラに対して前記線上において切り換え方向の先に配列されたカメラの動画像が高解像度に設定された合成画像を前記表示装置に順次出力し前記切り換え指示された動画像から前記切り換え方向の先に配列されたカメラの動画像までを順次切り換えて前記表示装置に表示させる付記3から付記5のいずれか一つに記載の動画像処理装置。
(Supplementary Note 6)
When the switching instruction input unit sequentially inputs the switching instruction, the composite image output unit changes the moving image instructed to be switched to a composite image in which the resolution is set to high resolution, and the moving image instructed to be switched is The composite image in which the moving image of the camera set earlier in the switching direction on the line is set to the resolution or low resolution and sequentially output to the display device is sequentially output to the display device. The moving image processing apparatus according to any one of appendices 3 to 5, wherein the moving image from the instructed moving image to the moving image of the camera arranged earlier in the switching direction is sequentially switched and displayed on the display device.

(付記7)
前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を順次入力すると、前記表示装置が前記動画像を切り換える切り換え速度が所定のしきい値よりも速い場合には、前記切り換え指示された動画像が高解像度に設定された合成画像に代えて、前記切り換え指示された動画像が中解像度又は低解像度に設定され当該動画像を撮影したカメラに対して前記線上において前記切り換え方向の先に配列されたカメラの動画像が高解像度に設定された合成画像を前記表示装置に順次出力し前記切り換え指示された動画像から前記切り換え方向の先に配列されたカメラの動画像までを順次切り換えて前記表示装置に表示させ、前記切り換え速度が前記所定のしきい値よりも遅い場合には、前記切り換え指示された動画像が高解像度に設定された合成画像を前記表示装置に順次出力し前記切り換え指示された動画像を前記表示装置に表示させる付記6に記載の動画像処理装置。
(Appendix 7)
The composite image output unit is instructed to switch when the switching speed at which the display device switches the moving image is faster than a predetermined threshold when the switching instruction input unit sequentially inputs the switching instruction. Instead of a composite image in which a moving image is set to a high resolution, the moving image instructed to be switched is set to a medium resolution or a low resolution and ahead of the switching direction on the line with respect to a camera that has captured the moving image. A composite image in which moving images of the arranged cameras are set to high resolution is sequentially output to the display device, and the moving images from the instructed switching are sequentially switched to moving images of the cameras arranged earlier in the switching direction. When the switching speed is lower than the predetermined threshold value, the moving image instructed to be switched is set to high resolution. Moving image processing apparatus according the display device sequentially outputs the switching instruction moving image in the combined image to Note 6 to be displayed on the display device.

(付記8)
前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を順次入力すると、前記表示装置が前記動画像を切り換える切り換え速度が所定のしきい値よりも速い場合には、前記切り換え指示された動画像が高解像度に設定された合成画像に代えて、前記切り換え指示された動画像が中解像度又は低解像度に設定され当該動画像を撮影したカメラに対して前記線上において前記切り換え方向の遠くに配列されたカメラの動画像が高解像度に設定された合成画像を前記表示装置に順次出力し前記切り換え指示された動画像から前記切り換え方向の遠くに配列されたカメラの動画像までを順次切り換えて前記表示装置に表示させ、前記切り換え速度が前記所定のしきい値よりも遅い場合には、前記切り換え指示された動画像が高解像度に設定された合成画像に代えて、前記切り換え指示された動画像が中解像度又は低解像度に設定され当該動画像を撮影したカメラに対して前記線上において前記切り換え方向の近くに配列されたカメラの動画像が高解像度に設定された合成画像を前記表示装置に順次出力し前記切り換え指示された動画像から前記切り換え方向の近くに配列されたカメラの動画像までを順次切り換えて前記表示装置に表示させる付記6に記載の動画像処理装置。
(Supplementary Note 8)
The composite image output unit is instructed to switch when the switching speed at which the display device switches the moving image is faster than a predetermined threshold when the switching instruction input unit sequentially inputs the switching instruction. Instead of a composite image in which a moving image is set to a high resolution, the moving image instructed to be switched is set to a medium resolution or a low resolution and is far from the switching direction on the line with respect to a camera that has captured the moving image. The composite image in which the moving image of the arranged camera is set to high resolution is sequentially output to the display device, and the moving image of the switching instruction is sequentially switched to the moving image of the camera arranged far in the switching direction. When the switching speed is lower than the predetermined threshold value, the moving image instructed to be switched to high resolution is displayed on the display device. A moving image of a camera in which the moving image instructed to be switched is set to medium resolution or low resolution and arranged on the line in the vicinity of the switching direction with respect to the camera that captured the moving image, instead of the fixed composite image. The composite image in which the image is set to high resolution is sequentially output to the display device, and the moving image from the instructed switching to the moving image of the camera arranged near the switching direction is sequentially switched and displayed on the display The moving image processing apparatus according to appendix 6.

(付記9)
前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を順次入力すると、前記表示装置との通信速度が所定のしきい値よりも速い場合には、前記切り換え指示された動画像が高解像度に設定された合成画像を前記表示装置に順次出力し前記切り換え指示された動画像を順次切り換えて前記表示装置に表示させ、前記通信速度が前記所定のしきい値よりも遅い場合には、前記切り換え指示された動画像が高解像度に設定された合成画像に代えて、前記切り換え指示された動画像が中解像度又は低解像度に設定され当該動画像を撮影したカメラに対して前記線上において前記切り換え方向の先に配列されたカメラの動画像が高解像度に設定された合成画像を前記表示装置に順次出力し前記切り換え指示された動画像から前記切り換え方向の遠くに配列されたカメラの動画像までを順次切り換えて前記表示装置に表示させる付記7又は付記8に記載の動画像処理装置。
(Appendix 9)
In the composite image output unit, when the switching instruction input unit sequentially inputs the switching instruction, the moving image instructed to be switched is high when the communication speed with the display device is faster than a predetermined threshold. The composite image set to the resolution is sequentially output to the display device, the moving image instructed to be switched is sequentially switched to be displayed on the display device, and the communication speed is slower than the predetermined threshold value, The moving image instructed to be switched is replaced with a composite image in which the resolution is set to high resolution, and the moving image instructed to be switched is set to medium resolution or low resolution and the camera which has captured the moving image A composite image in which a moving image of a camera arranged earlier in the switching direction is set to high resolution is sequentially output to the display device, and the switching is performed from the moving image instructed to be switched Moving image processing apparatus according to note 7 or Appendix 8 to be displayed on the display device sequentially switches to video image of a camera arranged away direction.

(付記10)
前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を順次入力すると、前記切り換え指示された動画像が低解像度に設定され、当該動画像を撮影したカメラに対して前記線上において前記切り換え方向の隣りに配列されたカメラの動画像が中解像度に設定され、前記切り換え方向のさらに隣りに配列されたカメラの動画像が高解像度に設定された合成画像を出力し前記切り換え指示された動画像、前記切り換え方向の隣りに配列されたカメラの動画像及び前記切り換え方向のさらに隣りに配列されたカメラの動画像を順次切り換えて前記表示装置に表示させる付記6から付記9のいずれか一つに記載の動画像処理装置。
(Supplementary Note 10)
When the switching instruction input unit sequentially inputs the switching instruction, the composite image output unit sets the moving image instructed to be switched to a low resolution, and the switching is performed on the line with respect to a camera that has captured the moving image. The moving image of the camera arranged adjacent to the direction is set to medium resolution, and the moving image of the camera arranged next to the switching direction outputs a composite image set to high resolution, and the switching instructed moving image An image, a moving image of a camera arranged adjacent to the switching direction, and a moving image of a camera arranged further adjacent to the switching direction are sequentially switched and displayed on the display device The moving image processing apparatus according to claim 1.

(付記11)
前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を順次入力すると、前記切り換え指示された動画像が中解像度に設定され、当該動画像を撮影したカメラに対して前記線上において前記切り換え方向の隣りに配列されたカメラの動画像が高解像度に設定された合成画像を出力し前記切り換え指示された動画像及び前記切り換え方向の隣りに配列されたカメラの動画像を順次切り換えて前記表示装置に表示させる付記6から付記10のいずれか一つに記載の動画像処理装置。
(Supplementary Note 11)
When the switching instruction input unit sequentially inputs the switching instruction, the composite image output unit sets the moving image instructed to be switched to a medium resolution, and switches the camera on the line that captured the moving image on the line. The moving image of the camera arranged adjacent to the direction outputs a composite image in which the resolution is set high, and the moving image instructed for the switching and the moving image of the camera arranged adjacent to the switching direction are sequentially switched to display the display The moving image processing device according to any one of appendices 6 to 10 to be displayed on the device.

(付記12)
前記合成画像出力部は、1つのカメラが撮影した動画像を前記表示装置が連続して表示する表示時間が所定のしきい値を超えると、前記表示装置が表示している動画像以外の他の動画像が低解像度に設定された合成画像を出力する付記2から付記11のいずれか一つに記載の動画像処理装置。
(Supplementary Note 12)
The composite image output unit is configured to continuously display a moving image captured by one camera, and the display time exceeds a predetermined threshold when the display time exceeds a predetermined threshold. The moving image processing apparatus according to any one of Appendices 2 to 11, which outputs a composite image in which the moving image of is set to a low resolution.

(付記13)
動画像を表示する表示装置と、線上に順に配列された複数のカメラによって撮影されたそれぞれの動画像を前記線上のカメラの順に選択的に切り換えて前記表示装置に表示させる動画像処理装置とを備える動画像処理システムであって、
前記動画像処理装置は、
前記それぞれの動画像の少なくとも一つを他の動画像と異なる解像度にして前記それぞれの動画像が互いに重ならないように配置した合成画像を生成する合成画像生成部と、
前記合成画像生成部が生成した合成画像を前記表示装置に出力し前記合成画像の一部である前記動画像を前記表示装置に選択的に表示させる合成画像出力部と、
前記表示装置から出力される前記動画像の切り換え指示を入力する切り換え指示入力部とを備え
前記表示装置は、
前記動画像を切り換える切り換え指示を動画像処理装置に出力する切り換え指示出力部と、
前記合成画像出力部が出力した合成画像の一部である前記動画像を選択的に表示する表示部とを備え、
前記合成画像出力部は、前記切り換え指示出力部が出力した前記切り換え指示を前記切り換え指示入力部が入力すると、前記それぞれの動画像のうち、切り換え指示された動画像が他の動画像よりも高解像度に設定された合成画像を表示装置に出力し、
前記表示部は、前記合成画像出力部が出力した合成画像のうち前記切り換え指示された動画像を選択的に表示する動画像処理システム。
(Supplementary Note 13)
A display device for displaying a moving image; and a moving image processing device for selectively switching each moving image shot by a plurality of cameras sequentially arranged on a line in the order of the cameras on the line and displaying the same on the display device. A moving image processing system comprising:
The moving image processing apparatus
A composite image generation unit configured to generate a composite image in which at least one of the respective moving images has a resolution different from that of the other moving images and the respective moving images are arranged so as not to overlap each other;
A composite image output unit that outputs the composite image generated by the composite image generation unit to the display device and causes the display device to selectively display the moving image which is a part of the composite image;
And a switching instruction input unit configured to input a switching instruction of the moving image output from the display device.
A switching instruction output unit that outputs a switching instruction to switch the moving image to the moving image processing apparatus;
And a display unit for selectively displaying the moving image which is a part of the composite image output from the composite image output unit.
When the switching instruction input unit inputs the switching instruction output from the switching instruction output unit, the composite image output unit has the moving image instructed to be switched among the moving images higher than the other moving images. Output the composite image set to the resolution to the display device,
The said display part is a moving image processing system which selectively displays the moving image to which the said switching instruction | command was displayed among the synthetic | combination images which the said synthetic | combination image output part output.

(付記14)
線上に順に配列された複数のカメラによって撮影されたそれぞれの動画像を前記線上のカメラの順に選択的に切り換えて表示装置に表示させる動画像処理方法であって、
合成画像生成部が、前記それぞれの動画像の少なくとも一つを他の動画像と異なる解像度にして前記それぞれの動画像が互いに重ならないように配置した合成画像を生成する合成画像生成ステップと、
合成画像出力部が、前記合成画像生成ステップにおいて生成された合成画像の一部である前記動画像を選択的に表示させるように前記合成画像を前記表示装置に出力する合成画像出力ステップと、
切り換え指示入力部が、前記表示装置から出力される動画像の切り換え指示を入力する切り換え指示入力ステップと、
前記切り換え指示入力ステップにおいて前記切り換え指示入力部が前記切り換え指示を入力すると、前記合成画像出力部が、前記それぞれの動画像のうち、前記表示装置から切り換え指示された動画像が他の動画像よりも高解像度に設定された合成画像を表示装置に出力し前記切り換え指示された動画像を表示装置に表示させる動画像切り換えステップとを含む動画像処理方法。
(Supplementary Note 14)
A moving image processing method for selectively switching each moving image shot by a plurality of cameras sequentially arranged on a line in order of the cameras on the line and displaying the same on a display device.
A composite image generation step of generating a composite image in which at least one of the respective moving images has a resolution different from that of the other moving images and the respective moving images are arranged so as not to overlap each other;
A composite image output step of outputting the composite image to the display device so that the composite image output unit selectively displays the moving image which is a part of the composite image generated in the composite image generation step;
A switching instruction input step in which a switching instruction input unit inputs a switching instruction of a moving image output from the display device;
When the switching instruction input unit inputs the switching instruction in the switching instruction input step, the composite image output unit, among the respective moving images, the moving image instructed to be switched from the display device is other than the moving image A moving image switching step of outputting a composite image set to high resolution to a display device and displaying the moving image instructed to be switched on the display device.

(付記15)
線上に順に配列された複数のカメラによって撮影されたそれぞれの動画像を前記線上のカメラの順に選択的に切り換えて表示装置に表示させる動画像処理装置におけるプログラムであって、
合成画像生成部が、前記それぞれの動画像の少なくとも一つを他の動画像と異なる解像度にして前記それぞれの動画像が互いに重ならないように配置した合成画像を生成する合成画像生成ステップと、
合成画像出力部が、前記合成画像生成ステップにおいて生成された合成画像の一部である前記動画像を選択的に表示させるように前記合成画像を前記表示装置に出力する合成画像出力ステップと、
切り換え指示入力部が、前記表示装置から出力される動画像の切り換え指示を入力する切り換え指示入力ステップと、
前記切り換え指示入力ステップにおいて前記切り換え指示入力部が前記切り換え指示を入力すると、前記合成画像出力部が、前記それぞれの動画像のうち、前記表示装置から切り換え指示された動画像が他の動画像よりも高解像度に設定された合成画像を表示装置に出力し前記切り換え指示された動画像を表示装置に表示させる動画像切り換えステップとを前記動画像処理装置のコンピュータに実行させる動画像処理プログラム。
(Supplementary Note 15)
A program in a moving image processing apparatus for selectively switching moving images captured by a plurality of cameras sequentially arranged on a line in order of the cameras on the line and displaying the same on a display device.
A composite image generation step of generating a composite image in which at least one of the respective moving images has a resolution different from that of the other moving images and the respective moving images are arranged so as not to overlap each other;
A composite image output step of outputting the composite image to the display device so that the composite image output unit selectively displays the moving image which is a part of the composite image generated in the composite image generation step;
A switching instruction input step in which a switching instruction input unit inputs a switching instruction of a moving image output from the display device;
When the switching instruction input unit inputs the switching instruction in the switching instruction input step, the composite image output unit, among the respective moving images, the moving image instructed to be switched from the display device is other than the moving image A moving image processing program for causing a computer of the moving image processing apparatus to execute a moving image switching step of outputting a composite image set to high resolution to a display device and displaying the moving image instructed to be switched on the display device.

1 動画像処理システム
10 動画像処理装置
20 表示装置
101b 合成画像生成部
101c 合成画像出力部
102 通信部(切り換え指示入力部)
202 切り換え指示出力部
204 表示部

1 moving image processing system 10 moving image processing apparatus 20 display device 101 b composite image generation unit 101 c composite image output unit 102 communication unit (switching instruction input unit)
202 switching instruction output unit 204 display unit

Claims (15)

線上に順に配列された複数のカメラによって撮影されたそれぞれの動画像を前記線上のカメラの順に選択的に切り換えて表示装置に表示させる動画像処理装置であって、
前記それぞれの動画像の少なくとも一つを他の動画像と異なる解像度にして前記それぞれの動画像が互いに重ならないように配置した合成画像を生成する合成画像生成部と、
前記合成画像生成部が生成した合成画像を前記表示装置に出力し前記合成画像の一部である前記動画像を前記表示装置に選択的に表示させる合成画像出力部と、
前記表示装置から出力される前記動画像の切り換え指示を入力する切り換え指示入力部とを備え、
前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を入力すると、前記それぞれの動画像のうち、前記表示装置から切り換え指示された動画像が他の動画像よりも高解像度に設定された合成画像を表示装置に出力し前記切り換え指示された動画像を表示装置に表示させる動画像処理装置。
A moving image processing apparatus for selectively switching each moving image shot by a plurality of cameras sequentially arranged on a line in order of the cameras on the line and displaying the image on a display device.
A composite image generation unit configured to generate a composite image in which at least one of the respective moving images has a resolution different from that of the other moving images and the respective moving images are arranged so as not to overlap each other;
A composite image output unit that outputs the composite image generated by the composite image generation unit to the display device and causes the display device to selectively display the moving image which is a part of the composite image;
A switching instruction input unit for inputting a switching instruction of the moving image output from the display device;
When the switching instruction input unit inputs the switching instruction, the composite image output unit sets the moving image instructed to be switched from the display device to a higher resolution than the other moving images among the moving images. A moving image processing apparatus for outputting the combined image on the display device and displaying the moving image instructed to be switched on the display device.
前記合成画像出力部は、前記それぞれの動画像のうち、前記表示装置から切り換え指示された動画像が高解像度に設定され、当該動画像を撮影したカメラに対して前記線上において近くに配列されたカメラの動画像が中解像度に設定され、前記表示装置から切り換え指示された動画像を撮影したカメラに対して前記線上において遠くに配列されたカメラの動画像が低解像度に設定された合成画像を表示装置に出力する請求項1に記載の動画像処理装置。   The composite image output unit is configured such that a moving image instructed to be switched from the display device among the moving images is set to a high resolution, and is arranged close to the camera that captured the moving image on the line The moving image of the camera is set to medium resolution, and the moving image of the camera arranged on the line far from the camera that captured the moving image instructed to be switched from the display device is set to a composite image of low resolution. The moving image processing apparatus according to claim 1, wherein the moving image processing apparatus outputs the image to a display device. 前記表示装置が前記切り換え指示を順次出力すると、前記切り換え指示入力部は前記切り換え指示を順次入力し、
前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を順次入力すると、前記切り換え指示された動画像が他の動画像よりも高解像度に設定された合成画像に順次変更して前記表示装置に順次出力する請求項2に記載の動画像処理装置。
When the display device sequentially outputs the switching instruction, the switching instruction input unit sequentially inputs the switching instruction;
When the switching instruction input unit sequentially inputs the switching instruction, the composite image output unit sequentially changes the moving image instructed to be switched to a composite image set to a higher resolution than other moving images, and displays the display The moving image processing apparatus according to claim 2, wherein the moving image is sequentially output to the apparatus.
前記合成画像生成部は、前記それぞれの動画像の少なくとも一つがあらかじめ高解像度に設定され前記少なくとも一つの動画像に対して前記線上において近くに配列されたカメラの動画像があらかじめ中解像度に設定され前記少なくとも一つの動画像に対して前記線上において遠くに配列されたカメラの動画像があらかじめ低解像度に設定された配置パターンに基づいて、前記それぞれの動画像ごとに複数の合成画像を生成し、
前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を順次入力すると、前記合成画像生成部がそれぞれの動画像ごとに生成した複数の合成画像の中から、前記切り換え指示された動画像が高解像度に設定された合成画像に変更して前記表示装置に順次出力する請求項3に記載の動画像処理装置。
In the composite image generation unit, at least one of the respective moving images is previously set to a high resolution, and a moving image of a camera arranged in the vicinity of the line on the at least one moving image is previously set to a medium resolution A plurality of composite images are generated for each of the moving images based on an arrangement pattern in which moving images of cameras arranged far away on the line with respect to the at least one moving image are previously set to low resolution;
The composite image output unit, when the switching instruction input unit sequentially inputs the switching instruction, the moving image instructed to be switched among the plurality of composite images generated for each moving image by the composite image generation unit The moving image processing apparatus according to claim 3, wherein the moving image processing apparatus is changed to a composite image set to a high resolution and sequentially output to the display device.
前記合成画像生成部は、前記切り換え指示入力部が前記切り換え指示を順次入力すると、前記切り換え指示された動画像を高解像度に設定し、前記切り換え指示された動画像に対して前記線上において近くに配列されたカメラの動画像を中解像度に設定し、前記切り換え指示された動画像に対して前記線上において遠くに配列されたカメラの動画像を低解像度にして合成画像を順次生成し、
前記合成画像出力部は、前記合成画像生成部が順次生成した合成画像を前記表示装置に順次出力する請求項3に記載の動画像処理装置。
When the switching instruction input unit sequentially inputs the switching instruction, the composite image generation unit sets the moving image instructed to be switched to a high resolution, and the moving image instructed to be switched is close to the moving image on the line. The moving image of the arranged camera is set to the medium resolution, and the moving image of the camera arranged far on the line is made low with respect to the moving image instructed to be switched, and a composite image is sequentially generated.
The moving image processing apparatus according to claim 3, wherein the composite image output unit sequentially outputs the composite image sequentially generated by the composite image generation unit to the display device.
前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を順次入力すると、前記切り換え指示された動画像が高解像度に設定された合成画像に代えて、前記切り換え指示された動画像が中解像度又は低解像度に設定され当該動画像を撮影したカメラに対して前記線上において切り換え方向の先に配列されたカメラの動画像が高解像度に設定された合成画像を前記表示装置に順次出力し前記切り換え指示された動画像から前記切り換え方向の先に配列されたカメラの動画像までを順次切り換えて前記表示装置に表示させる請求項3から請求項5のいずれか一項に記載の動画像処理装置。   When the switching instruction input unit sequentially inputs the switching instruction, the composite image output unit changes the moving image instructed to be switched to a composite image in which the resolution is set to high resolution, and the moving image instructed to be switched is The composite image in which the moving image of the camera set earlier in the switching direction on the line is set to the resolution or low resolution and sequentially output to the display device is sequentially output to the display device. The moving image processing apparatus according to any one of claims 3 to 5, wherein the moving image from the moving instruction instructed to be switched to the moving image of the camera arranged earlier in the switching direction is sequentially switched and displayed on the display device. . 前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を順次入力すると、前記表示装置が前記動画像を切り換える切り換え速度が所定のしきい値よりも速い場合には、前記切り換え指示された動画像が高解像度に設定された合成画像に代えて、前記切り換え指示された動画像が中解像度又は低解像度に設定され当該動画像を撮影したカメラに対して前記線上において前記切り換え方向の先に配列されたカメラの動画像が高解像度に設定された合成画像を前記表示装置に順次出力し前記切り換え指示された動画像から前記切り換え方向の先に配列されたカメラの動画像までを順次切り換えて前記表示装置に表示させ、前記切り換え速度が前記所定のしきい値よりも遅い場合には、前記切り換え指示された動画像が高解像度に設定された合成画像を前記表示装置に順次出力し前記切り換え指示された動画像を前記表示装置に表示させる請求項6に記載の動画像処理装置。   The composite image output unit is instructed to switch when the switching speed at which the display device switches the moving image is faster than a predetermined threshold when the switching instruction input unit sequentially inputs the switching instruction. Instead of a composite image in which a moving image is set to a high resolution, the moving image instructed to be switched is set to a medium resolution or a low resolution and ahead of the switching direction on the line with respect to a camera that has captured the moving image. A composite image in which moving images of the arranged cameras are set to high resolution is sequentially output to the display device, and the moving images from the instructed switching are sequentially switched to moving images of the cameras arranged earlier in the switching direction. When the switching speed is lower than the predetermined threshold value, the moving image instructed to be switched is set to high resolution. Moving image processing apparatus according to claim 6 sequentially outputs the combined image to the display device for displaying the switching instruction moving image on the display device. 前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を順次入力すると、前記表示装置が前記動画像を切り換える切り換え速度が所定のしきい値よりも速い場合には、前記切り換え指示された動画像が高解像度に設定された合成画像に代えて、前記切り換え指示された動画像が中解像度又は低解像度に設定され当該動画像を撮影したカメラに対して前記線上において前記切り換え方向の遠くに配列されたカメラの動画像が高解像度に設定された合成画像を前記表示装置に順次出力し前記切り換え指示された動画像から前記切り換え方向の遠くに配列されたカメラの動画像までを順次切り換えて前記表示装置に表示させ、前記切り換え速度が前記所定のしきい値よりも遅い場合には、前記切り換え指示された動画像が高解像度に設定された合成画像に代えて、前記切り換え指示された動画像が中解像度又は低解像度に設定され当該動画像を撮影したカメラに対して前記線上において前記切り換え方向の近くに配列されたカメラの動画像が高解像度に設定された合成画像を前記表示装置に順次出力し前記切り換え指示された動画像から前記切り換え方向の近くに配列されたカメラの動画像までを順次切り換えて前記表示装置に表示させる請求項6に記載の動画像処理装置。   The composite image output unit is instructed to switch when the switching speed at which the display device switches the moving image is faster than a predetermined threshold when the switching instruction input unit sequentially inputs the switching instruction. Instead of a composite image in which a moving image is set to a high resolution, the moving image instructed to be switched is set to a medium resolution or a low resolution and is far from the switching direction on the line with respect to a camera that has captured the moving image. The composite image in which the moving image of the arranged camera is set to high resolution is sequentially output to the display device, and the moving image of the switching instruction is sequentially switched to the moving image of the camera arranged far in the switching direction. When the switching speed is lower than the predetermined threshold value, the moving image instructed to be switched to high resolution is displayed on the display device. A moving image of a camera in which the moving image instructed to be switched is set to medium resolution or low resolution and arranged on the line in the vicinity of the switching direction with respect to the camera that captured the moving image, instead of the fixed composite image. The composite image in which the image is set to high resolution is sequentially output to the display device, and the moving image from the instructed switching to the moving image of the camera arranged near the switching direction is sequentially switched and displayed on the display The moving image processing apparatus according to claim 6. 前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を順次入力すると、前記表示装置との通信速度が所定のしきい値よりも速い場合には、前記切り換え指示された動画像が高解像度に設定された合成画像を前記表示装置に順次出力し前記切り換え指示された動画像を順次切り換えて前記表示装置に表示させ、前記通信速度が前記所定のしきい値よりも遅い場合には、前記切り換え指示された動画像が高解像度に設定された合成画像に代えて、前記切り換え指示された動画像が中解像度又は低解像度に設定され当該動画像を撮影したカメラに対して前記線上において前記切り換え方向の先に配列されたカメラの動画像が高解像度に設定された合成画像を前記表示装置に順次出力し前記切り換え指示された動画像から前記切り換え方向の遠くに配列されたカメラの動画像までを順次切り換えて前記表示装置に表示させる請求項7又は請求項8に記載の動画像処理装置。   In the composite image output unit, when the switching instruction input unit sequentially inputs the switching instruction, the moving image instructed to be switched is high when the communication speed with the display device is faster than a predetermined threshold. The composite image set to the resolution is sequentially output to the display device, the moving image instructed to be switched is sequentially switched to be displayed on the display device, and the communication speed is slower than the predetermined threshold value, The moving image instructed to be switched is replaced with a composite image in which the resolution is set to high resolution, and the moving image instructed to be switched is set to medium resolution or low resolution and the camera which has captured the moving image A composite image in which a moving image of a camera arranged earlier in the switching direction is set to high resolution is sequentially output to the display device, and the switching is performed from the moving image instructed to be switched Moving image processing apparatus according to claim 7 or claim 8 to be displayed on the display device sequentially switches to video image of a camera arranged away direction. 前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を順次入力すると、前記切り換え指示された動画像が低解像度に設定され、当該動画像を撮影したカメラに対して前記線上において前記切り換え方向の隣りに配列されたカメラの動画像が中解像度に設定され、前記切り換え方向のさらに隣りに配列されたカメラの動画像が高解像度に設定された合成画像を出力し前記切り換え指示された動画像、前記切り換え方向の隣りに配列されたカメラの動画像及び前記切り換え方向のさらに隣りに配列されたカメラの動画像を順次切り換えて前記表示装置に表示させる請求項6から請求項9のいずれか一項に記載の動画像処理装置。   When the switching instruction input unit sequentially inputs the switching instruction, the composite image output unit sets the moving image instructed to be switched to a low resolution, and the switching is performed on the line with respect to a camera that has captured the moving image. The moving image of the camera arranged adjacent to the direction is set to medium resolution, and the moving image of the camera arranged next to the switching direction outputs a composite image set to high resolution, and the switching instructed moving image The image, the moving image of a camera arranged adjacent to the switching direction, and the moving image of a camera arranged further adjacent to the switching direction are sequentially switched and displayed on the display device. The moving image processing device according to one item. 前記合成画像出力部は、前記切り換え指示入力部が前記切り換え指示を順次入力すると、前記切り換え指示された動画像が中解像度に設定され、当該動画像を撮影したカメラに対して前記線上において前記切り換え方向の隣りに配列されたカメラの動画像が高解像度に設定された合成画像を出力し前記切り換え指示された動画像及び前記切り換え方向の隣りに配列されたカメラの動画像を順次切り換えて前記表示装置に表示させる請求項6から請求項10のいずれか一項に記載の動画像処理装置。   When the switching instruction input unit sequentially inputs the switching instruction, the composite image output unit sets the moving image instructed to be switched to a medium resolution, and switches the camera on the line that captured the moving image on the line. The moving image of the camera arranged adjacent to the direction outputs a composite image in which the resolution is set high, and the moving image instructed for the switching and the moving image of the camera arranged adjacent to the switching direction are sequentially switched to display the display The moving image processing apparatus according to any one of claims 6 to 10, which is displayed on the apparatus. 前記合成画像出力部は、1つのカメラが撮影した動画像を前記表示装置が連続して表示する表示時間が所定のしきい値を超えると、前記表示装置が表示している動画像以外の他の動画像が低解像度に設定された合成画像を出力する請求項2から請求項11のいずれか一項に記載の動画像処理装置。   The composite image output unit is configured to continuously display a moving image captured by one camera, and the display time exceeds a predetermined threshold when the display time exceeds a predetermined threshold. The moving image processing apparatus according to any one of claims 2 to 11, which outputs a composite image in which the moving image of is set to a low resolution. 動画像を表示する表示装置と、線上に順に配列された複数のカメラによって撮影されたそれぞれの動画像を前記線上のカメラの順に選択的に切り換えて前記表示装置に表示させる動画像処理装置とを備える動画像処理システムであって、
前記動画像処理装置は、
前記それぞれの動画像の少なくとも一つを他の動画像と異なる解像度にして前記それぞれの動画像が互いに重ならないように配置した合成画像を生成する合成画像生成部と、
前記合成画像生成部が生成した合成画像を前記表示装置に出力し前記合成画像の一部である前記動画像を前記表示装置に選択的に表示させる合成画像出力部と、
前記表示装置から出力される前記動画像の切り換え指示を入力する切り換え指示入力部とを備え
前記表示装置は、
前記動画像を切り換える切り換え指示を動画像処理装置に出力する切り換え指示出力部と、
前記合成画像出力部が出力した合成画像の一部である前記動画像を選択的に表示する表示部とを備え、
前記合成画像出力部は、前記切り換え指示出力部が出力した前記切り換え指示を前記切り換え指示入力部が入力すると、前記それぞれの動画像のうち、切り換え指示された動画像が他の動画像よりも高解像度に設定された合成画像を表示装置に出力し、
前記表示部は、前記合成画像出力部が出力した合成画像のうち前記切り換え指示された動画像を選択的に表示する動画像処理システム。
A display device for displaying a moving image; and a moving image processing device for selectively switching each moving image shot by a plurality of cameras sequentially arranged on a line in the order of the cameras on the line and displaying the same on the display device. A moving image processing system comprising:
The moving image processing apparatus
A composite image generation unit configured to generate a composite image in which at least one of the respective moving images has a resolution different from that of the other moving images and the respective moving images are arranged so as not to overlap each other;
A composite image output unit that outputs the composite image generated by the composite image generation unit to the display device and causes the display device to selectively display the moving image which is a part of the composite image;
And a switching instruction input unit configured to input a switching instruction of the moving image output from the display device.
A switching instruction output unit that outputs a switching instruction to switch the moving image to the moving image processing apparatus;
And a display unit for selectively displaying the moving image which is a part of the composite image output from the composite image output unit.
When the switching instruction input unit inputs the switching instruction output from the switching instruction output unit, the composite image output unit has the moving image instructed to be switched among the moving images higher than the other moving images. Output the composite image set to the resolution to the display device,
The said display part is a moving image processing system which selectively displays the moving image to which the said switching instruction | command was displayed among the synthetic | combination images which the said synthetic | combination image output part output.
線上に順に配列された複数のカメラによって撮影されたそれぞれの動画像を前記線上のカメラの順に選択的に切り換えて表示装置に表示させる動画像処理方法であって、
合成画像生成部が、前記それぞれの動画像の少なくとも一つを他の動画像と異なる解像度にして前記それぞれの動画像が互いに重ならないように配置した合成画像を生成する合成画像生成ステップと、
合成画像出力部が、前記合成画像生成ステップにおいて生成された合成画像の一部である前記動画像を選択的に表示させるように前記合成画像を前記表示装置に出力する合成画像出力ステップと、
切り換え指示入力部が、前記表示装置から出力される動画像の切り換え指示を入力する切り換え指示入力ステップと、
前記切り換え指示入力ステップにおいて前記切り換え指示入力部が前記切り換え指示を入力すると、前記合成画像出力部が、前記それぞれの動画像のうち、前記表示装置から切り換え指示された動画像が他の動画像よりも高解像度に設定された合成画像を表示装置に出力し前記切り換え指示された動画像を表示装置に表示させる動画像切り換えステップとを含む動画像処理方法。
A moving image processing method for selectively switching each moving image shot by a plurality of cameras sequentially arranged on a line in order of the cameras on the line and displaying the same on a display device.
A composite image generation step of generating a composite image in which at least one of the respective moving images has a resolution different from that of the other moving images and the respective moving images are arranged so as not to overlap each other;
A composite image output step of outputting the composite image to the display device so that the composite image output unit selectively displays the moving image which is a part of the composite image generated in the composite image generation step;
A switching instruction input step in which a switching instruction input unit inputs a switching instruction of a moving image output from the display device;
When the switching instruction input unit inputs the switching instruction in the switching instruction input step, the composite image output unit, among the respective moving images, the moving image instructed to be switched from the display device is other than the moving image A moving image switching step of outputting a composite image set to high resolution to a display device and displaying the moving image instructed to be switched on the display device.
線上に順に配列された複数のカメラによって撮影されたそれぞれの動画像を前記線上のカメラの順に選択的に切り換えて表示装置に表示させる動画像処理装置におけるプログラムであって、
合成画像生成部が、前記それぞれの動画像の少なくとも一つを他の動画像と異なる解像度にして前記それぞれの動画像が互いに重ならないように配置した合成画像を生成する合成画像生成ステップと、
合成画像出力部が、前記合成画像生成ステップにおいて生成された合成画像の一部である前記動画像を選択的に表示させるように前記合成画像を前記表示装置に出力する合成画像出力ステップと、
切り換え指示入力部が、前記表示装置から出力される動画像の切り換え指示を入力する切り換え指示入力ステップと、
前記切り換え指示入力ステップにおいて前記切り換え指示入力部が前記切り換え指示を入力すると、前記合成画像出力部が、前記それぞれの動画像のうち、前記表示装置から切り換え指示された動画像が他の動画像よりも高解像度に設定された合成画像を表示装置に出力し前記切り換え指示された動画像を表示装置に表示させる動画像切り換えステップとを前記動画像処理装置のコンピュータに実行させる動画像処理プログラム。
A program in a moving image processing apparatus for selectively switching moving images captured by a plurality of cameras sequentially arranged on a line in order of the cameras on the line and displaying the same on a display device.
A composite image generation step of generating a composite image in which at least one of the respective moving images has a resolution different from that of the other moving images and the respective moving images are arranged so as not to overlap each other;
A composite image output step of outputting the composite image to the display device so that the composite image output unit selectively displays the moving image which is a part of the composite image generated in the composite image generation step;
A switching instruction input step in which a switching instruction input unit inputs a switching instruction of a moving image output from the display device;
When the switching instruction input unit inputs the switching instruction in the switching instruction input step, the composite image output unit, among the respective moving images, the moving image instructed to be switched from the display device is other than the moving image A moving image processing program for causing a computer of the moving image processing apparatus to execute a moving image switching step of outputting a composite image set to high resolution to a display device and displaying the moving image instructed to be switched on the display device.
JP2017084874A 2017-04-21 2017-04-21 Moving image processing apparatus, moving image processing system, moving image processing method, and moving image processing program Active JP6208910B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017084874A JP6208910B1 (en) 2017-04-21 2017-04-21 Moving image processing apparatus, moving image processing system, moving image processing method, and moving image processing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017084874A JP6208910B1 (en) 2017-04-21 2017-04-21 Moving image processing apparatus, moving image processing system, moving image processing method, and moving image processing program

Publications (2)

Publication Number Publication Date
JP6208910B1 JP6208910B1 (en) 2017-10-04
JP2018180496A true JP2018180496A (en) 2018-11-15

Family

ID=59997742

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017084874A Active JP6208910B1 (en) 2017-04-21 2017-04-21 Moving image processing apparatus, moving image processing system, moving image processing method, and moving image processing program

Country Status (1)

Country Link
JP (1) JP6208910B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022007619A (en) * 2020-06-26 2022-01-13 MasterVisions株式会社 Image distribution device and image generator and program
KR20230012727A (en) * 2021-07-16 2023-01-26 서울사이버대학교 산학협력단 System and method for producing and distributing realistic video contents

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009232319A (en) * 2008-03-25 2009-10-08 Victor Co Of Japan Ltd Moving picture encode apparatus, moving picture reproduction apparatus, recording medium, moving picture encode program, and moving picture reproduction program
JP2010016521A (en) * 2008-07-02 2010-01-21 Toshiba Corp Video image processing apparatus and video image processing method
JP2013085128A (en) * 2011-10-11 2013-05-09 Nippon Hoso Kyokai <Nhk> Video multiplex apparatus, video separation apparatus, video signal transmission system and program

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022007619A (en) * 2020-06-26 2022-01-13 MasterVisions株式会社 Image distribution device and image generator and program
JP7319228B2 (en) 2020-06-26 2023-08-01 MasterVisions株式会社 Image distribution device, image generation device and program
KR20230012727A (en) * 2021-07-16 2023-01-26 서울사이버대학교 산학협력단 System and method for producing and distributing realistic video contents
KR102595431B1 (en) * 2021-07-16 2023-10-27 서울사이버대학교 산학협력단 System and method for producing and distributing realistic video contents

Also Published As

Publication number Publication date
JP6208910B1 (en) 2017-10-04

Similar Documents

Publication Publication Date Title
US20240077724A1 (en) Sedentary virtual reality method and systems
KR102234928B1 (en) Sharing virtual reality experiences
US10095458B2 (en) Information processing apparatus, information processing method, non-transitory computer-readable storage medium, and system
US11636644B2 (en) Output of virtual content
US11024083B2 (en) Server, user terminal device, and control method therefor
CN108604175B (en) Apparatus and associated methods
US9129657B2 (en) Video image display apparatus, video image display method, non-transitory computer readable medium, and video image processing/display system for video images of an object shot from multiple angles
JP7017175B2 (en) Information processing equipment, information processing method, program
JP2016144089A (en) Image processing apparatus and control method therefor
US20150172634A1 (en) Dynamic POV Composite 3D Video System
EP3236336B1 (en) Virtual reality causal summary content
JP5348114B2 (en) Information display system, apparatus, method and program
JP2012216095A (en) Detection area magnifying device, display device, detection area magnifying method, program, and computer-readable recording medium
EP3418860A1 (en) Provision of virtual reality content
JP6208910B1 (en) Moving image processing apparatus, moving image processing system, moving image processing method, and moving image processing program
US12032754B2 (en) Information processing apparatus, information processing method, and non-transitory computer readable medium
JP6244069B1 (en) Remote work support system, remote work support method, and program
JP6224465B2 (en) Video distribution system, video distribution method, and video distribution program
KR20200144702A (en) System and method for adaptive streaming of augmented reality media content
GB2533789A (en) User interface for augmented reality
WO2021182124A1 (en) Information processing device and information processing method
WO2019138682A1 (en) Information processing device, information processing method, and program
CN116235499B (en) Media and method for delivering content
US20230388471A1 (en) Image processing apparatus, image processing method, and program
GB2541193A (en) Handling video content

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20170821

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170828

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170907

R150 Certificate of patent or registration of utility model

Ref document number: 6208910

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250