JP2014192844A - Video distribution system, video distribution method, video distribution device and video display device - Google Patents
Video distribution system, video distribution method, video distribution device and video display device Download PDFInfo
- Publication number
- JP2014192844A JP2014192844A JP2013069114A JP2013069114A JP2014192844A JP 2014192844 A JP2014192844 A JP 2014192844A JP 2013069114 A JP2013069114 A JP 2013069114A JP 2013069114 A JP2013069114 A JP 2013069114A JP 2014192844 A JP2014192844 A JP 2014192844A
- Authority
- JP
- Japan
- Prior art keywords
- video
- substream
- display
- unit
- main stream
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Train Traffic Observation, Control, And Security (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
Description
本発明は、映像送信装置が映像をネットワーク経由で監視装置に配信する映像配信システムに関する。 The present invention relates to a video distribution system in which a video transmission device distributes video to a monitoring device via a network.
監視エリアに設置された複数の監視カメラで撮像した映像を監視装置に配信し、監視装置側で集中監視を行う監視（セキュリティ）カメラシステムは、ネットワーク化が進んでいる。撮像したカメラ映像は、コーデック伝送装置により符号化（圧縮処理）され、ネットワークへ伝送される。コーデック伝送装置としては、符号化処理をカメラ内部で行うネットワークカメラや、既存のカメラ映像（アナログ）の入力を考慮し、コーデック伝送装置として独立したエンコーダがある。コーデック伝送装置で使われる符号化方式としては、ＪＰＥＧ、ＭＰＥＧ２、ＭＰＥＧ４、Ｈ．２６４等の方式が一般的である。
コーデック伝送装置としては、ネットワークインフラ環境や監視装置（ＰＣ（パソコン）等）の状況に合わせた解像度、伝送量で映像が伝送できるように、メインストリームにサブストリームも加えた複数のストリームが送出できる装置が市場に出てきている。
A monitoring (security) camera system that distributes video captured by a plurality of monitoring cameras installed in a monitoring area to a monitoring device and performs centralized monitoring on the monitoring device side has been networked. The captured camera video is encoded (compressed) by the codec transmission device and transmitted to the network. As a codec transmission device, there are a network camera that performs encoding processing inside the camera, and an encoder that is independent as a codec transmission device in consideration of input of existing camera video (analog). Examples of the encoding method used in the codec transmission apparatus include JPEG, MPEG2, MPEG4, H.264, and the like. A method such as H.264 is common.
As a codec transmission device, a plurality of streams including a substream and a substream can be transmitted so that video can be transmitted with a resolution and transmission amount according to the network infrastructure environment and the situation of a monitoring device (PC (personal computer), etc.) Devices are on the market.
特許文献１には、クライアントからの要求、状況、及び用途に対応した設定を行った映像ストリームを配信することができる映像配信システムが開示されている。また、特許文献１には、オペレータからの映像ストリーム配信要求に応じて、解像度が高い映像ストリーム（映像メインストリーム）または解像度が低い映像ストリーム（映像サブストリーム）を生成して配信することが記載されている。 Patent Document 1 discloses a video distribution system capable of distributing a video stream that has been set in accordance with a request from a client, a situation, and an application. Patent Document 1 describes that a video stream with a high resolution (video main stream) or a video stream with a low resolution (video substream) is generated and distributed in response to a video stream distribution request from an operator. ing.
しかし、特許文献１の映像サブストリームは、映像メインストリームと同じ映像を解像度、伝送レート、符号化方法等を変えて送出しているので、クライアント側で表示部に表示する際、解像度が低いために映像が見難いという問題があった。 However, since the video substream of Patent Document 1 transmits the same video as the video main stream with the resolution, transmission rate, encoding method, etc. changed, the resolution is low when displayed on the display unit on the client side. There was a problem that it was difficult to see the video.
本発明は、このような従来の事情に鑑みなされたものであり、映像送信装置から映像データを少ない伝送量で送信することができ、監視装置側で表示される映像が鮮明で、且つ監視装置の処理負荷を低減することが可能な映像配信システムを提供することを目的とする。 The present invention has been made in view of such a conventional situation, and can transmit video data from a video transmission device with a small transmission amount, and a video displayed on the monitoring device side is clear and the monitoring device. An object of the present invention is to provide a video distribution system capable of reducing the processing load.
上記目的を達成するための本発明に係る映像配信システムは、映像を受信する受信部と、前記受信した映像の所定の領域を切り出してサブストリーム映像を生成するサブストリーム映像生成部と、前記サブストリーム映像生成部で生成したサブストリーム映像を出力する出力部と、を有する映像配信装置と、前記サブストリーム映像を受信する受信部と、映像を表示する表示部と、前記受信したサブストリーム映像に基づいて前記表示部に表示する映像を生成する表示映像生成部と、を有する映像表示装置と、を備えることを特徴とする。また、さらに、前記サブストリーム映像には画質改善処理を実施することを特徴とする。
In order to achieve the above object, a video distribution system according to the present invention includes a receiving unit that receives video, a substream video generating unit that generates a substream video by cutting out a predetermined area of the received video, and the sub An output unit that outputs the substream video generated by the stream video generation unit, a receiving unit that receives the substream video, a display unit that displays the video, and the received substream video And a display image generation unit that generates an image to be displayed on the display unit. Further, the sub-stream video is subjected to image quality improvement processing.
また、上記目的を達成するための本発明に係る映像配信システムは、前記映像配信装置が複数存在する映像配信システムであるか、または前記映像配信装置から複数のサブストリーム映像が出力される映像配信システムであって、前記映像表示装置は、前記受信部において複数のサブストリーム映像を受信し、前記受信した複数のサブストリーム映像を合成して前記表示部に表示する映像を生成することを特徴とする。 In addition, a video distribution system according to the present invention for achieving the above object is a video distribution system in which a plurality of the video distribution apparatuses exist, or a video distribution in which a plurality of substream videos are output from the video distribution apparatus. In the system, the video display device receives a plurality of substream videos at the receiving unit, and synthesizes the received substream videos to generate a video to be displayed on the display unit. To do.
また、上記目的を達成するための本発明に係る映像配信システムは、前記映像配信装置は、前記受信した映像を切り出さずにメインストリーム映像を生成するメインストリーム映像生成部をさらに有し、前記出力部からはメインストリーム映像とサブストリーム映像を出力し、前記映像表示装置は、前記受信部において前記メインストリーム映像と前記サブストリーム映像を受信し、前記表示映像生成部は、前記メインストリーム映像と前記サブストリーム映像を合成して前記表示部に表示する映像を生成することを特徴とする。 In addition, in the video distribution system according to the present invention for achieving the above object, the video distribution apparatus further includes a main stream video generation unit that generates a main stream video without cutting out the received video, and the output The main stream video and the substream video are output from the unit, the video display device receives the main stream video and the substream video at the receiving unit, and the display video generation unit is configured to output the main stream video and the substream video. A substream video is synthesized to generate a video to be displayed on the display unit.
本発明によれば、映像送信装置から映像データを少ない伝送量で送信することができ、監視装置側で表示される映像が鮮明で、且つ監視装置の処理負荷を低減することが可能な映像配信システムを提供することができる。 According to the present invention, video data can be transmitted from a video transmission device with a small transmission amount, the video displayed on the monitoring device side is clear, and the processing load on the monitoring device can be reduced. A system can be provided.
＜実施の形態１＞
〔映像配信システムの制御構成〕
以下に、本発明の実施の形態１に係る映像配信システムについて、図面を参照して説明する。
図１は、本発明の実施の形態１に係る映像配信システムの構成を示す構成図である。また、図２は、本発明の実施の形態１に係る映像配信システムの適用例を説明するための図である。
本発明の実施の形態１に係る映像配信システム１００は、映像送信装置１１０−１，１１０−２，１１０−３，１１０−４（以下、これら映像送信装置１１０−１〜１１０−４を区別しない場合には、単に映像送信装置１１０という）、監視装置１２０、及びネットワーク１５０から構成されている。監視装置１２０は、映像メインストリーム及び映像サブストリームの映像を表示する映像表示処理部１２１を備えている。映像送信装置１１０については、実際には４台以上設けられているが、図１及び図２の映像配信システム１００においては、代表して４台の映像送信装置１１０を記載している。
映像配信システム１００は、図２に示すように、駅のホームに停車中の列車５００の車両５０１の乗降用ドア５０１ａ，５０１ｂ及び車両５０２の乗降用ドア５０２ａ，５０２ｂ付近をそれぞれ監視カメラ１１０ａ−１，１１０ａ−２，１１０ａ−３，１１０ａ−４（以下、これら監視カメラ１１０ａ−１〜１１０ａ−４を区別しない場合には、単に監視カメラ１１０ａという）で撮影し、撮影した映像データをネットワーク１５０を介して監視装置１２０に送信して監視装置１２０のオペレータがホーム監視を行うものである。
<Embodiment 1>
[Control structure of video distribution system]
Hereinafter, a video distribution system according to Embodiment 1 of the present invention will be described with reference to the drawings.
FIG. 1 is a configuration diagram showing a configuration of a video distribution system according to Embodiment 1 of the present invention. FIG. 2 is a diagram for explaining an application example of the video delivery system according to Embodiment 1 of the present invention.
Video distribution system 100 according to Embodiment 1 of the present invention does not distinguish video transmission devices 110-1, 110-2, 110-3, and 110-4 (hereinafter, these video transmission devices 110-1 to 110-4). In this case, it is simply referred to as a video transmission device 110), a monitoring device 120, and a network 150. The monitoring device 120 includes a video display processing unit 121 that displays video of the video main stream and the video substream. In reality, four or more video transmission devices 110 are provided, but in the video distribution system 100 of FIGS. 1 and 2, four video transmission devices 110 are described as representatives.
As shown in FIG. 2, the video distribution system 100 includes a monitoring camera 110a-1 in the vicinity of the entrance doors 501a and 501b of the vehicle 501 of the train 500 and the entrance doors 502a and 502b of the vehicle 502 that are stopped at the platform of the station. , 110a-2, 110a-3, 110a-4 (hereinafter, when these surveillance cameras 110a-1 to 110a-4 are not distinguished from each other, they are simply referred to as the surveillance camera 110a), and the captured video data is transmitted through the network 150. To the monitoring device 120 and the operator of the monitoring device 120 performs home monitoring.
映像送信装置１１０は、監視カメラ１１０ａから映像信号を入力する。また、映像送信装置１１０は、監視装置１２０から映像メインストリーム及び映像サブストリームの配信要求を受信すると、ネットワーク１５０を経由して映像メインストリーム及び映像サブストリームを配信する。監視装置１２０は、オペレータから映像の１画面表示または４画面表示の要求を受け付けると、映像メインストリーム及び映像サブストリームの配信要求をネットワーク１５０を経由して映像送信装置１１０に送信する。また、監視装置１２０は、映像送信装置１１０から映像メインストリーム及び映像サブストリームが配信されると映像表示処理部１２１により１画面表示または４画面表示する。例えば、監視装置１２０に、４台の映像送信装置１１０から４画面表示用の映像サブストリームが配信され、４画面で同時に表示する時には、図１に示すように映像表示処理部１２１が４分割された表示エリアに映像サブストリームの解像度を下げることなく、映像サブストリームの映像を表示する。例えば、監視装置１２０に、４台の映像送信装置１１０から１画面表示用の映像メインストリームが配信され、１画面で表示する時には、映像表示処理部１２１は表示エリアに映像メインストリームの映像を切り替えて表示する。 The video transmission device 110 inputs a video signal from the monitoring camera 110a. In addition, when receiving the distribution request for the video main stream and the video substream from the monitoring apparatus 120, the video transmission apparatus 110 distributes the video main stream and the video substream via the network 150. When the monitoring device 120 receives a request for one-screen display or four-screen display of video from the operator, the monitoring device 120 transmits a distribution request for the video main stream and the video substream to the video transmission device 110 via the network 150. In addition, when the video main stream and the video substream are distributed from the video transmission device 110, the monitoring device 120 causes the video display processing unit 121 to display one screen or four screens. For example, when four video display video substreams are distributed from the four video transmission devices 110 to the monitoring device 120 and simultaneously displayed on the four screens, the video display processing unit 121 is divided into four as shown in FIG. The video substream video is displayed in the display area without reducing the resolution of the video substream. For example, when a video main stream for one screen display is distributed from four video transmission devices 110 to the monitoring device 120 and displayed on one screen, the video display processing unit 121 switches the video main stream video to the display area. To display.
〔映像送信装置１１０の機能構成〕
次に、本発明の実施の形態１の映像配信システム１００における映像送信装置１１０の機能構成について、図３を参照して説明する。
図３は、本発明の実施の形態１に係る映像送信装置の構成を示すブロック図である。
映像送信装置１１０は、配信要求受信部１１１、映像入力部１１２、不揮発性メモリ１１３、メモリ１１４、制御部１１５、及び配信部１１６から構成されている。これらの部位はバスなどにより接続されている。不揮発性メモリ１１３は、映像メインストリーム設定データ１１３ａと映像サブストリーム設定データ１１３ｂを備えている。メモリ１１４は、映像メインストリームバッファ１１４ａと映像サブストリームバッファ１１４ｂを備えている。制御部１１５は、映像切出し部１１５ａ、映像メインストリーム変換処理部１１５ｂ、映像サブストリーム変換処理部１１５ｃ、映像メインストリーム配信処理部１１５ｄ、及び映像サブストリーム配信処理部１１５ｅを備えている。
[Functional Configuration of Video Transmission Device 110]
Next, the functional configuration of the video transmission apparatus 110 in the video distribution system 100 according to Embodiment 1 of the present invention will be described with reference to FIG.
FIG. 3 is a block diagram showing a configuration of the video transmission apparatus according to Embodiment 1 of the present invention.
The video transmission device 110 includes a distribution request reception unit 111, a video input unit 112, a nonvolatile memory 113, a memory 114, a control unit 115, and a distribution unit 116. These parts are connected by a bus or the like. The nonvolatile memory 113 includes video main stream setting data 113a and video substream setting data 113b. The memory 114 includes a video main stream buffer 114a and a video substream buffer 114b. The control unit 115 includes a video cutout unit 115a, a video main stream conversion processing unit 115b, a video substream conversion processing unit 115c, a video main stream distribution processing unit 115d, and a video substream distribution processing unit 115e.
配信要求受信部１１１は、監視装置１２０からの映像ストリーム配信要求をネットワーク１５０を経由して受信すると、制御部１１５に出力する。
映像入力部１１２は、映像送信装置１１０と接続されている監視カメラ１１０ａから映像信号を入力すると、映像信号を映像送信装置１１０で処理可能な映像データに変換し、制御部１１５に出力する。
不揮発性メモリ１１３は、制御部１１５が実行する処理のプログラムやデータを記憶するメモリである。不揮発性メモリ１１３の映像メインストリーム設定データ１１３ａには、映像データを映像メインストリームに変換するときの設定データである解像度、フレームレート、及びビットレートなどのデータが記憶されている。不揮発性メモリ１１３の映像サブストリーム設定データ１１３ｂには、映像データを映像サブストリームに変換するときの設定データである解像度、フレームレート、及びビットレートなどのデータが記憶されている。
メモリ１１４は、変換された映像ストリームを保存するメモリである。メモリ１１４の映像メインストリームバッファ１１４ａには、変換された映像メインストリームが一時的に保存される。メモリ１１４の映像サブストリームバッファ１１４ｂには、変換された映像サブストリームが一時的に保存される。
Upon receiving the video stream distribution request from the monitoring device 120 via the network 150, the distribution request receiving unit 111 outputs the request to the control unit 115.
When a video signal is input from the monitoring camera 110 a connected to the video transmission device 110, the video input unit 112 converts the video signal into video data that can be processed by the video transmission device 110 and outputs the video data to the control unit 115.
The non-volatile memory 113 is a memory that stores a program and data for processing executed by the control unit 115. The video main stream setting data 113a of the non-volatile memory 113 stores data such as resolution, frame rate, and bit rate, which are setting data when video data is converted into a video main stream. The video substream setting data 113b of the nonvolatile memory 113 stores data such as resolution, frame rate, and bit rate, which are setting data when video data is converted into a video substream.
The memory 114 is a memory that stores the converted video stream. The converted video main stream is temporarily stored in the video main stream buffer 114a of the memory 114. The converted video substream is temporarily stored in the video substream buffer 114b of the memory 114.
制御部１１５の映像メインストリーム変換処理部１１５ｂは、映像入力部１１２から映像データをそのまま入力する。そして、映像メインストリーム変換処理部１１５ｂは、映像メインストリーム設定データ１１３ａから解像度、フレームレート、及びビットレートなどのデータを取り出し、これらのデータに基づいて映像データを映像メインストリームに変換し、メモリ１１４の映像メインストリームバッファ１１４ａに保存する。また、制御部１１５の映像メインストリーム配信処理部１１５ｄは、配信要求受信部１１１から映像メインストリーム配信要求を入力する。そして、映像メインストリーム配信処理部１１５ｄは、メモリ１１４の映像メインストリームバッファ１１４ａから映像メインストリームを取り出し、配信部１１６に出力する。制御部１１５の映像サブストリーム変換処理部１１５ｃは、映像入力部１１２から入力された映像データを映像切出し部１１５ａで所定エリアの切り出し処理を行い、切り出した映像データを入力する。そして、映像サブストリーム変換処理部１１５ｃは、映像サブストリーム設定データ１１３ｂから解像度、フレームレート、及びビットレートなどのデータを取り出し、これらのデータに基づいて映像データを映像サブストリームに変換し、メモリ１１４の映像サブストリームバッファ１１４ｂに保存する。また、制御部１１５の映像サブストリーム配信処理部１１５ｅは、配信要求受信部１１１から映像サブストリーム配信要求を入力する。そして、映像サブストリーム配信処理部１１５ｅは、メモリ１１４の映像サブストリームバッファ１１４ｂから映像サブストリームを取り出し、配信部１１６に出力する。
配信部１１６は、制御部１１５から映像メインストリーム及び映像サブストリームを入力し、ネットワーク１５０を経由して監視装置１２０に映像メインストリーム及び映像サブストリームを配信する。
The video main stream conversion processing unit 115b of the control unit 115 inputs the video data from the video input unit 112 as it is. The video main stream conversion processing unit 115b extracts data such as resolution, frame rate, and bit rate from the video main stream setting data 113a, converts the video data into the video main stream based on these data, and the memory 114. Is stored in the video main stream buffer 114a. In addition, the video main stream distribution processing unit 115 d of the control unit 115 inputs a video main stream distribution request from the distribution request receiving unit 111. Then, the video main stream distribution processing unit 115 d extracts the video main stream from the video main stream buffer 114 a of the memory 114 and outputs it to the distribution unit 116. The video substream conversion processing unit 115c of the control unit 115 cuts out a predetermined area of the video data input from the video input unit 112 and inputs the cut-out video data. Then, the video substream conversion processing unit 115c extracts data such as resolution, frame rate, and bit rate from the video substream setting data 113b, converts the video data into a video substream based on these data, and the memory 114 Are stored in the video substream buffer 114b. In addition, the video substream distribution processing unit 115 e of the control unit 115 inputs a video substream distribution request from the distribution request receiving unit 111. Then, the video substream distribution processing unit 115 e extracts the video substream from the video substream buffer 114 b of the memory 114 and outputs it to the distribution unit 116.
The distribution unit 116 receives the video main stream and the video substream from the control unit 115, and distributes the video main stream and the video substream to the monitoring device 120 via the network 150.
次に、本発明の実施の形態１に係る映像送信装置１１０の映像メインストリーム変換処理と映像メインストリーム配信処理、及び映像サブストリーム変換処理と映像サブストリーム配信処理について、図４〜図６を参照して説明する。
図４は、本発明の実施の形態１に係る映像送信装置の映像メインストリーム変換処理と映像メインストリーム配信処理の手順を示すフローチャートである。また、図５は、本発明の実施の形態１に係る映像送信装置の映像サブストリーム変換処理と映像サブストリーム配信処理の手順を示すフローチャートである。また、図６は、映像メインストリームと映像サブストリームの一例を示す図である。
Next, the video main stream conversion process and the video main stream distribution process, and the video substream conversion process and the video substream distribution process of the video transmission apparatus 110 according to Embodiment 1 of the present invention will be described with reference to FIGS. To explain.
FIG. 4 is a flowchart showing a procedure of video main stream conversion processing and video main stream distribution processing of the video transmission device according to Embodiment 1 of the present invention. FIG. 5 is a flowchart showing procedures of video substream conversion processing and video substream distribution processing of the video transmission apparatus according to Embodiment 1 of the present invention. FIG. 6 is a diagram illustrating an example of a video main stream and a video substream.
まず、図４に示す映像メインストリーム変換処理と映像メインストリーム配信処理について説明する。映像送信装置１１０が起動されると、制御部１１５により映像メインストリーム変換処理部１１５ｂが起動される。この起動により映像メインストリーム変換処理部１１５ｂは、映像メインストリーム変換処理を開始する。また、制御部１１５が映像メインストリーム配信要求を入力すると、映像メインストリーム配信処理部１１５ｄを起動する。この起動により、映像メインストリーム配信処理部１１５ｄは映像メインストリーム配信処理を開始する。 First, the video main stream conversion process and the video main stream distribution process shown in FIG. 4 will be described. When the video transmission device 110 is activated, the video main stream conversion processing unit 115b is activated by the control unit 115. With this activation, the video main stream conversion processing unit 115b starts the video main stream conversion process. When the control unit 115 inputs a video main stream distribution request, the video main stream distribution processing unit 115d is activated. With this activation, the video main stream distribution processing unit 115d starts the video main stream distribution processing.
まず、ステップＳ１１１において、映像メインストリーム変換処理部１１５ｂは、映像入力部１１２から映像データを入力する。 First, in step S111, the video main stream conversion processing unit 115b inputs video data from the video input unit 112.
次に、ステップＳ１１２において、映像メインストリーム変換処理部１１５ｂは、映像メインストリーム設定データ１１３ａに設定されている解像度、フレームレート、及びビットレートなどのデータを取り出す。この映像メインストリーム設定データ１１３ａに設定されている解像度は、単画面表示用の高い解像度である。 Next, in step S112, the video main stream conversion processing unit 115b extracts data such as resolution, frame rate, and bit rate set in the video main stream setting data 113a. The resolution set in the video main stream setting data 113a is a high resolution for single screen display.
次に、ステップＳ１１３において、映像メインストリーム変換処理部１１５ｂは、映像データに、ステップＳ１１２で取り出した解像度、フレームレート、及びビットレートなどの設定を行う。この設定により映像データに映像メインストリーム用の高い解像度が設定される。そして映像メインストリーム変換処理部１１５ｂは、設定された映像データを映像メインストリームに変換する。例えば、変換された映像メインストリームは、図６（ａ）に示すように、解像度：１９２０（Pixel）×１０８０（Pixel）の映像である。 In step S113, the video main stream conversion processing unit 115b sets the resolution, frame rate, bit rate, and the like extracted in step S112 for the video data. With this setting, a high resolution for the video main stream is set in the video data. Then, the video main stream conversion processing unit 115b converts the set video data into a video main stream. For example, the converted video main stream is a video having a resolution of 1920 (Pixel) × 1080 (Pixel) as shown in FIG.
次に、ステップＳ１１４において、映像メインストリーム変換処理部１１５ｂは、ステップＳ１１３で変換された映像メインストリームを映像メインストリームバッファ１１４ａに保存し、終了する。以降、映像メインストリーム変換処理は、制御部１１５により繰り返し起動される。 Next, in step S114, the video main stream conversion processing unit 115b stores the video main stream converted in step S113 in the video main stream buffer 114a, and ends. Thereafter, the video main stream conversion process is repeatedly activated by the control unit 115.
また、ステップＳ１２１において、映像メインストリーム配信処理部１１５ｄは、配信要求受信部１１１から映像メインストリーム配信要求を入力する。 In step S121, the video main stream distribution processing unit 115d inputs a video main stream distribution request from the distribution request receiving unit 111.
次に、ステップＳ１２２において、映像メインストリーム配信処理部１１５ｄは、映像メインストリームバッファ１１４ａから映像メインストリームを入力する。 Next, in step S122, the video main stream distribution processing unit 115d inputs the video main stream from the video main stream buffer 114a.
次に、ステップＳ１２３において、映像メインストリーム配信処理部１１５ｄは、ステップＳ１２２で入力した映像メインストリームを配信部１１６に出力する。 Next, in step S123, the video main stream distribution processing unit 115d outputs the video main stream input in step S122 to the distribution unit 116.
配信部１１６に出力された映像メインストリームは、例えば、監視装置１２０が映像メインストリーム配信要求を送信したときには、配信部１１６により監視装置１２０に、ネットワーク１５０を介して配信される。このように、実施の形態１の映像メインストリーム変換処理部１１５ｂと映像メインストリーム配信処理部１１５ｄにより、映像メインストリーム用の解像度が設定された映像メインストリームの配信を行うことができる。 The video main stream output to the distribution unit 116 is distributed by the distribution unit 116 to the monitoring device 120 via the network 150 when the monitoring device 120 transmits a video main stream distribution request, for example. As described above, the video main stream conversion processing unit 115b and the video main stream distribution processing unit 115d according to Embodiment 1 can distribute the video main stream in which the resolution for the video main stream is set.
次に、図５に示す映像サブストリーム変換処理と映像サブストリーム配信処理について説明する。映像送信装置１１０が起動されると、制御部１１５により映像サブストリーム変換処理部１１５ｃが起動される。この起動により映像サブストリーム変換処理部１１５ｃは、映像サブストリーム変換処理を開始する。また、制御部１１５が映像サブストリーム配信要求を入力すると、映像サブストリーム配信処理部１１５ｅを起動する。この起動により、映像サブストリーム配信処理部１１５ｅは映像サブストリーム配信処理を開始する。 Next, the video substream conversion process and the video substream distribution process shown in FIG. 5 will be described. When the video transmission device 110 is activated, the control unit 115 activates the video substream conversion processing unit 115c. With this activation, the video substream conversion processing unit 115c starts the video substream conversion process. When the control unit 115 inputs a video substream distribution request, the video substream distribution processing unit 115e is activated. With this activation, the video substream distribution processing unit 115e starts the video substream distribution process.
まず、ステップＳ２１１において、映像サブストリーム変換処理部１１５ｃは、映像入力部１１２から入力された映像データを、映像切出し部１１５ａで予め設定した所定エリアで切り出し処理を行い、切り出した映像データを入力する。 First, in step S211, the video substream conversion processing unit 115c cuts out the video data input from the video input unit 112 in a predetermined area set in advance by the video cutout unit 115a, and inputs the cut out video data. .
次に、ステップＳ２１２において、映像サブストリーム変換処理部１１５ｃは、映像サブストリーム設定データ１１３ｂに設定されている解像度、フレームレート、及びビットレートなどのデータを取り出す。この映像サブストリーム設定データ１１３ｂに設定されている解像度は、映像メインストリームと同等の高い解像度である。 Next, in step S212, the video substream conversion processing unit 115c extracts data such as resolution, frame rate, and bit rate set in the video substream setting data 113b. The resolution set in the video substream setting data 113b is as high as the video main stream.
次に、ステップＳ２１３において、映像サブストリーム変換処理部１１５ｃは、映像データに、ステップＳ２１２で取り出した解像度、フレームレート、及びビットレートなどの設定を行う。この設定により映像データに映像メインストリームと同等の高い解像度が設定される。そして映像サブストリーム変換処理部１１５ｃは、設定された映像データを映像サブストリームに変換する。例えば、変換された映像サブストリームは、図６（ｂ）に示すように、解像度：４８０（Pixel）×１０８０（Pixel）の映像データである。 Next, in step S213, the video substream conversion processing unit 115c sets the resolution, frame rate, bit rate, and the like extracted in step S212 for the video data. With this setting, the same high resolution as the video main stream is set in the video data. The video substream conversion processing unit 115c converts the set video data into a video substream. For example, the converted video substream is video data having a resolution of 480 (Pixel) × 1080 (Pixel) as shown in FIG.
次に、ステップＳ２１４において、映像サブストリーム変換処理部１１５ｃは、ステップＳ２１３で変換された映像サブストリームを映像サブストリームバッファ１１４ｂに保存し、終了する。以降、映像サブストリーム変換処理は、制御部１１５により繰り返し起動される。 Next, in step S214, the video substream conversion processing unit 115c stores the video substream converted in step S213 in the video substream buffer 114b, and the process ends. Thereafter, the video substream conversion process is repeatedly activated by the control unit 115.
また、ステップＳ２２１において、映像サブストリーム配信処理部１１５ｅは、配信要求受信部１１１から映像サブストリーム配信要求を入力する。 In step S <b> 221, the video substream distribution processing unit 115 e inputs a video substream distribution request from the distribution request receiving unit 111.
次に、ステップＳ２２２において、映像サブストリーム配信処理部１１５ｅは、映像サブストリームバッファ１１４ｂから映像サブストリームを入力する。 Next, in step S222, the video substream distribution processing unit 115e inputs the video substream from the video substream buffer 114b.
次に、ステップＳ２２３において、映像サブストリーム配信処理部１１５ｅは、ステップＳ２２２で入力した映像サブストリームを配信部１１６に出力する。 Next, in step S223, the video substream distribution processing unit 115e outputs the video substream input in step S222 to the distribution unit 116.
配信部１１６に出力された映像サブストリームは、例えば、監視装置１２０が映像サブストリーム配信要求を送信したときには、配信部１１６により監視装置１２０に、ネットワーク１５０を介して配信される。このように、実施の形態１の映像サブストリーム変換処理部１１５ｃと映像サブストリーム配信処理部１１５ｅにより、映像サブストリーム用の解像度が設定された映像サブストリームの配信を行うことができる。 For example, when the monitoring device 120 transmits a video substream distribution request, the video substream output to the distribution unit 116 is distributed to the monitoring device 120 via the network 150 by the distribution unit 116. As described above, the video substream conversion processing unit 115c and the video substream distribution processing unit 115e according to the first embodiment can distribute the video substream in which the resolution for the video substream is set.
次に、本発明の実施の形態１に係る監視装置１２０の映像表示処理について、図７及び図８を参照して説明する。
図７は、本発明の実施の形態１に係る監視装置の映像表示処理の手順を示すフローチャートである。また、図８は、監視装置の表示部に「１画面表示」または「４画面表示」する際の表示例を示す図である。
まず、ステップＳ３０１において、監視装置１２０の映像表示処理部１２１は、「１画面表示」か「４画面表示」かの判定を行い、「１画面表示」の場合は、ステップＳ３０２に進み、「４画面表示」の場合は、ステップＳ３０３に進む。
Next, video display processing of the monitoring device 120 according to Embodiment 1 of the present invention will be described with reference to FIGS.
FIG. 7 is a flowchart showing a procedure of video display processing of the monitoring apparatus according to Embodiment 1 of the present invention. FIG. 8 is a diagram illustrating a display example when “one screen display” or “four screen display” is performed on the display unit of the monitoring apparatus.
First, in step S301, the video display processing unit 121 of the monitoring device 120 determines whether “one screen display” or “four screen display”. If “one screen display”, the process proceeds to step S302, and “4 screen display”. In the case of “screen display”, the process proceeds to step S303.
次に、ステップＳ３０２において、映像表示処理部１２１は、４台の映像送信装置１１０から送信された映像メインストリームの映像を入力し、ステップＳ３０７において、その映像を表示エリアに１画面表示する。 Next, in step S302, the video display processing unit 121 inputs the video of the main video stream transmitted from the four video transmission devices 110, and in step S307, displays the video in a display area on one screen.
次に、ステップＳ３０３において、映像表示処理部１２１は、４台の映像送信装置１１０から送信された映像サブストリームの映像を入力する。
次に、ステップＳ３０４において、映像表示処理部１２１は、映像サブストリームの映像の画質改善をするか否かの判定を行い、画質改善する（ＹＥＳ）場合は、ステップＳ３０５に進み、画質改善しない（ＮＯ）場合は、ステップＳ３０６に進む。
Next, in step S <b> 303, the video display processing unit 121 inputs video substreams transmitted from the four video transmission apparatuses 110.
Next, in step S304, the video display processing unit 121 determines whether or not to improve the image quality of the video substream video. If the image quality is improved (YES), the process proceeds to step S305 and the image quality is not improved ( If no, the process proceeds to step S306.
次に、ステップＳ３０５において、映像表示処理部１２１は、映像サブストリームの映像をコントラスト、エッジ強調等の画質改善処理を行う。
次に、ステップＳ３０６において、映像表示処理部１２１は、映像サブストリームの映像を４分割された表示エリアの指定された場所にそれぞれ表示する。
Next, in step S305, the video display processing unit 121 performs image quality improvement processing such as contrast and edge enhancement on the video of the video substream.
Next, in step S306, the video display processing unit 121 displays each video of the video substream at a designated location in the display area divided into four.
例えば、図示しない表示部に「１画面表示」する場合の表示例を図８（ａ）に、また、「４画面表示」する場合の表示例を図８（ｂ）に示す。 For example, FIG. 8A shows a display example when “one screen display” is performed on a display unit (not shown), and FIG. 8B shows a display example when “four screen display” is performed.
つまり、監視装置１２０では、映像送信装置１１０から配信された映像ストリームの映像を使用することによって、監視装置１２０の映像表示処理部１２１により、映像メインストリームの映像を表示部に「１画面表示」したり、または、映像サブストリームの映像を表示部に「４画面表示」したり、それぞれ切り換えて表示することができる。 That is, in the monitoring device 120, the video of the video main stream is displayed on the display unit by the video display processing unit 121 of the monitoring device 120 by using the video of the video stream distributed from the video transmission device 110. Or the video of the video sub-stream can be “displayed on four screens” on the display unit, or can be switched and displayed.
以上説明したように、本発明の実施の形態１の映像配信システムによれば、映像送信装置から映像データを少ない伝送量で送信することができ、監視装置側で表示される映像が鮮明で、且つ監視装置の処理負荷を低減することが可能な映像配信システムを提供することができる。 As described above, according to the video distribution system of Embodiment 1 of the present invention, video data can be transmitted from the video transmission device with a small transmission amount, and the video displayed on the monitoring device side is clear, In addition, it is possible to provide a video distribution system capable of reducing the processing load on the monitoring device.
＜実施の形態２＞
〔映像配信システムの制御構成〕
以下に、本発明の実施の形態２に係る映像配信システムについて、図９を参照して説明する。
図９は、本発明の実施の形態２に係る映像配信システムの構成を示す構成図である。
本発明の実施の形態２に係る映像配信システム２００は、映像送信装置２１０、監視装置２２０、及びネットワーク１５０から構成されている。監視装置２２０は、映像メインストリーム及び映像サブストリームの映像を表示する映像表示処理部２２１を備えている。映像送信装置１１０については、実際には複数設けられる場合もあるが、図９の映像配信システム２００においては、１台の映像送信装置２１０のみを記載している。
映像配信システム２００は、例えば、監視カメラで所定の監視区域を撮影し、撮影した映像データをネットワーク１５０を介して監視装置２２０に送信し、監視装置２２０のオペレータが監視を行うものである。
<Embodiment 2>
[Control structure of video distribution system]
The video distribution system according to Embodiment 2 of the present invention will be described below with reference to FIG.
FIG. 9 is a configuration diagram showing the configuration of the video distribution system according to Embodiment 2 of the present invention.
The video distribution system 200 according to the second embodiment of the present invention includes a video transmission device 210, a monitoring device 220, and a network 150. The monitoring device 220 includes a video display processing unit 221 that displays the video of the video main stream and the video substream. In practice, a plurality of video transmission apparatuses 110 may be provided. However, in the video distribution system 200 of FIG. 9, only one video transmission apparatus 210 is described.
In the video distribution system 200, for example, a predetermined monitoring area is photographed by a monitoring camera, and the photographed video data is transmitted to the monitoring device 220 via the network 150, and an operator of the monitoring device 220 performs monitoring.
映像送信装置２１０は、図示しない監視カメラから映像信号を入力する。また、映像送信装置２１０は、監視装置２２０から映像メインストリーム及び映像サブストリームの配信要求を受信すると、ネットワーク１５０を経由して映像メインストリーム及び映像サブストリームを配信する。監視装置２２０は、オペレータから映像の単独表示、並列表示またはピクチャーインピクチャー表示の要求を受け付けると、映像メインストリーム及び映像サブストリームの配信要求をネットワーク１５０を経由して映像送信装置２１０に送信する。また、監視装置２２０は、映像送信装置２１０から映像メインストリーム及び映像サブストリームが配信されると映像表示処理部２２１により映像の単独表示、並列表示またはピクチャーインピクチャー表示を行う。例えば、監視装置２２０に、映像送信装置２１０から映像メインストリーム及び映像サブストリームが配信され、並列表示する時には、図９に示すように、映像表示処理部２２１が映像メインストリーム及び映像サブストリームの映像を表示エリアに並べて表示する。例えば、監視装置２２０に、映像送信装置２１０から映像メインストリーム及び映像サブストリームが配信され、ピクチャーインピクチャー表示する時には、映像メインストリームの映像の中に映像サブストリームの映像を重畳して表示する。 The video transmission device 210 inputs a video signal from a monitoring camera (not shown). In addition, when the video transmission device 210 receives the distribution request for the video main stream and the video substream from the monitoring device 220, the video transmission device 210 distributes the video main stream and the video substream via the network 150. When receiving a request for video single display, parallel display, or picture-in-picture display from the operator, the monitoring device 220 transmits a video main stream and video substream distribution request to the video transmission device 210 via the network 150. In addition, when the video main stream and the video substream are distributed from the video transmission apparatus 210, the monitoring apparatus 220 performs single display, parallel display, or picture-in-picture display of the video by the video display processing unit 221. For example, when the video main stream and the video substream are distributed from the video transmission device 210 to the monitoring device 220 and displayed in parallel, the video display processing unit 221 displays the video of the video main stream and the video substream as shown in FIG. Are displayed side by side in the display area. For example, when a video main stream and a video substream are delivered from the video transmission device 210 to the monitoring device 220 and picture-in-picture display is performed, the video substream video is superimposed on the video main stream video and displayed.
〔映像送信装置２１０の機能構成〕
次に、本発明の実施形態２の映像配信システム２００における映像送信装置２１０の機能構成について、図１０を参照して説明する。
図１０は、本発明の実施の形態２に係る映像送信装置の構成を示すブロック図である。なお、図１０中、図３と同一の構成部分には同一の符号を付してある。
映像送信装置２１０は、配信要求受信部１１１、映像入力部１１２、不揮発性メモリ１１３、メモリ１１４、制御部２１５、及び配信部１１６から構成されている。これらの部位はバスなどにより接続されている。不揮発性メモリ１１３は、映像メインストリーム設定データ１１３ａと映像サブストリーム設定データ１１３ｂを備えている。メモリ１１４は、映像メインストリームバッファ１１４ａと映像サブストリームバッファ１１４ｂを備えている。制御部２１５は、映像処理部１１５ｆ、映像メインストリーム変換処理部１１５ｂ、映像サブストリーム変換処理部１１５ｃ、映像メインストリーム配信処理部１１５ｄ、及び映像サブストリーム配信処理部１１５ｅを備えている。
[Functional Configuration of Video Transmission Device 210]
Next, the functional configuration of the video transmission apparatus 210 in the video distribution system 200 according to the second embodiment of the present invention will be described with reference to FIG.
FIG. 10 is a block diagram showing a configuration of a video transmission apparatus according to Embodiment 2 of the present invention. In FIG. 10, the same components as those in FIG. 3 are denoted by the same reference numerals.
The video transmission apparatus 210 includes a distribution request receiving unit 111, a video input unit 112, a nonvolatile memory 113, a memory 114, a control unit 215, and a distribution unit 116. These parts are connected by a bus or the like. The nonvolatile memory 113 includes video main stream setting data 113a and video substream setting data 113b. The memory 114 includes a video main stream buffer 114a and a video substream buffer 114b. The control unit 215 includes a video processing unit 115f, a video main stream conversion processing unit 115b, a video substream conversion processing unit 115c, a video main stream distribution processing unit 115d, and a video substream distribution processing unit 115e.
配信要求受信部１１１は、監視装置２２０からの映像ストリーム配信要求をネットワーク１５０を経由して受信すると、制御部２１５に出力する。
映像入力部１１２は、映像送信装置２１０と接続されている図示しない監視カメラから映像信号を入力すると、映像信号を映像送信装置２１０で処理可能な映像データに変換し、制御部２１５に出力する。
不揮発性メモリ１１３は、制御部２１５が実行する処理のプログラムやデータを記憶するメモリである。不揮発性メモリ１１３の映像メインストリーム設定データ１１３ａには、映像データを映像メインストリームに変換するときの設定データである解像度、フレームレート、及びビットレートなどのデータが記憶されている。不揮発性メモリ１１３の映像サブストリーム設定データ１１３ｂには、映像データを映像サブストリームに変換するときの設定データである解像度、フレームレート、及びビットレートなどのデータが記憶されている。
メモリ１１４は、変換された映像ストリームを保存するメモリである。メモリ１１４の映像メインストリームバッファ１１４ａには、変換された映像メインストリームが一時的に保存される。メモリ１１４の映像サブストリームバッファ１１４ｂには、変換された映像サブストリームが一時的に保存される。
When receiving the video stream distribution request from the monitoring device 220 via the network 150, the distribution request receiving unit 111 outputs the request to the control unit 215.
When a video signal is input from a monitoring camera (not shown) connected to the video transmission device 210, the video input unit 112 converts the video signal into video data that can be processed by the video transmission device 210 and outputs the video data to the control unit 215.
The non-volatile memory 113 is a memory that stores a program and data for processing executed by the control unit 215. The video main stream setting data 113a of the non-volatile memory 113 stores data such as resolution, frame rate, and bit rate, which are setting data when video data is converted into a video main stream. The video substream setting data 113b of the nonvolatile memory 113 stores data such as resolution, frame rate, and bit rate, which are setting data when video data is converted into a video substream.
The memory 114 is a memory that stores the converted video stream. The converted video main stream is temporarily stored in the video main stream buffer 114a of the memory 114. The converted video substream is temporarily stored in the video substream buffer 114b of the memory 114.
制御部２１５の映像メインストリーム変換処理部１１５ｂは、映像入力部１１２から映像データをそのまま入力する。そして、映像メインストリーム変換処理部１１５ｂは、映像メインストリーム設定データ１１３ａから解像度、フレームレート、及びビットレートなどのデータを取り出し、これらのデータに基づいて映像データを映像メインストリームに変換し、メモリ１１４の映像メインストリームバッファ１１４ａに保存する。また、制御部２１５の映像メインストリーム配信処理部１１５ｄは、配信要求受信部１１１から映像メインストリーム配信要求を入力する。そして、映像メインストリーム配信処理部１１５ｄは、メモリ１１４の映像メインストリームバッファ１１４ａから映像メインストリームを取り出し、配信部１１６に出力する。制御部２１５の映像サブストリーム変換処理部１１５ｃは、映像入力部１１２から入力された映像データを映像処理部１１５ｆで顔画像を検出して切り出し処理を行い、切り出した映像データを入力する。そして、映像サブストリーム変換処理部１１５ｃは、映像サブストリーム設定データ１１３ｂから解像度、フレームレート、及びビットレートなどのデータを取り出し、これらのデータに基づいて映像データを映像サブストリームに変換し、メモリ１１４の映像サブストリームバッファ１１４ｂに保存する。また、制御部２１５の映像サブストリーム配信処理部１１５ｅは、配信要求受信部１１１から映像サブストリーム配信要求を入力する。そして、映像サブストリーム配信処理部１１５ｅは、メモリ１１４の映像サブストリームバッファ１１４ｂから映像サブストリームを取り出し、配信部１１６に出力する。
配信部１１６は、制御部２１５から映像メインストリーム及び映像サブストリームを入力し、ネットワーク１５０を経由して監視装置２２０に映像メインストリーム及び映像サブストリームを配信する。
The video main stream conversion processing unit 115b of the control unit 215 inputs the video data from the video input unit 112 as it is. The video main stream conversion processing unit 115b extracts data such as resolution, frame rate, and bit rate from the video main stream setting data 113a, converts the video data into the video main stream based on these data, and the memory 114. Is stored in the video main stream buffer 114a. Further, the video main stream distribution processing unit 115 d of the control unit 215 inputs a video main stream distribution request from the distribution request receiving unit 111. Then, the video main stream distribution processing unit 115 d extracts the video main stream from the video main stream buffer 114 a of the memory 114 and outputs it to the distribution unit 116. The video substream conversion processing unit 115c of the control unit 215 detects the face image of the video data input from the video input unit 112 by using the video processing unit 115f, performs a clipping process, and inputs the clipped video data. Then, the video substream conversion processing unit 115c extracts data such as resolution, frame rate, and bit rate from the video substream setting data 113b, converts the video data into a video substream based on these data, and the memory 114 Are stored in the video substream buffer 114b. In addition, the video substream distribution processing unit 115 e of the control unit 215 inputs a video substream distribution request from the distribution request receiving unit 111. Then, the video substream distribution processing unit 115 e extracts the video substream from the video substream buffer 114 b of the memory 114 and outputs it to the distribution unit 116.
The distribution unit 116 receives the video main stream and the video substream from the control unit 215, and distributes the video main stream and the video substream to the monitoring device 220 via the network 150.
次に、本発明の実施の形態２に係る映像送信装置２１０の映像サブストリーム変換処理と映像サブストリーム配信処理について、図を参照して説明する。なお、本発明の実施の形態２に係る映像送信装置２１０の映像メインストリーム変換処理と映像メインストリーム配信処理は、本発明の実施の形態１と同様（図４参照）であるため、説明は省略する。
図１１は、本発明の実施の形態２に係る映像送信装置の映像サブストリーム変換処理と映像サブストリーム配信処理の手順を示すフローチャートである。また、図１２は、映像メインストリームと映像サブストリームの一例を示す図である。
Next, video substream conversion processing and video substream distribution processing of video transmission apparatus 210 according to Embodiment 2 of the present invention will be described with reference to the drawings. Note that the video main stream conversion process and the video main stream distribution process of the video transmission apparatus 210 according to the second embodiment of the present invention are the same as in the first embodiment of the present invention (see FIG. 4), and thus description thereof is omitted. To do.
FIG. 11 is a flowchart showing procedures of video substream conversion processing and video substream distribution processing of the video transmission apparatus according to Embodiment 2 of the present invention. FIG. 12 is a diagram illustrating an example of a video main stream and a video substream.
ここで、図１１に示す映像サブストリーム変換処理と映像サブストリーム配信処理について説明する。映像送信装置２１０が起動されると、制御部２１５により映像サブストリーム変換処理部１１５ｃが起動される。この起動により映像サブストリーム変換処理部１１５ｃは、映像サブストリーム変換処理を開始する。また、制御部２１５が映像サブストリーム配信要求を入力すると、映像サブストリーム配信処理部１１５ｅを起動する。この起動により、映像サブストリーム配信処理部１１５ｅは映像サブストリーム配信処理を開始する。 Here, the video substream conversion process and the video substream distribution process shown in FIG. 11 will be described. When the video transmission device 210 is activated, the control unit 215 activates the video substream conversion processing unit 115c. With this activation, the video substream conversion processing unit 115c starts the video substream conversion process. When the control unit 215 inputs a video substream distribution request, the video substream distribution processing unit 115e is activated. With this activation, the video substream distribution processing unit 115e starts the video substream distribution process.
まず、ステップＳ４１１において、映像サブストリーム変換処理部１１５ｃは、映像入力部１１２から入力された映像データが映像処理部１１５ｆで顔画像切り出し処理が行われた後、切り出された映像データを入力する。なお、映像処理部１１５ｆで行う顔画像切り出し処理については後述する。 First, in step S411, the video substream conversion processing unit 115c inputs the video data that has been cut out after the video data input from the video input unit 112 is subjected to face image clipping processing by the video processing unit 115f. The face image cutout process performed by the video processing unit 115f will be described later.
次に、ステップＳ４１２において、映像サブストリーム変換処理部１１５ｃは、映像サブストリーム設定データ１１３ｂに設定されている解像度、フレームレート、及びビットレートなどのデータを取り出す。この映像サブストリーム設定データ１１３ｂに設定されている解像度は、映像メインストリームと同等の高い解像度である。 Next, in step S412, the video substream conversion processing unit 115c extracts data such as the resolution, frame rate, and bit rate set in the video substream setting data 113b. The resolution set in the video substream setting data 113b is as high as the video main stream.
次に、ステップＳ４１３において、映像サブストリーム変換処理部１１５ｃは、映像データに、ステップＳ４１２で取り出した解像度、フレームレート、及びビットレートなどの設定を行う。この設定により映像データに映像メインストリームと同等の高い解像度が設定される。そして映像サブストリーム変換処理部１１５ｃは、設定された映像データを映像サブストリームに変換する。例えば、変換された映像サブストリームは、図１２（ｂ）に示すように、解像度：５８４（Pixel）×２１６（Pixel）の映像データである。 Next, in step S413, the video substream conversion processing unit 115c sets the resolution, frame rate, bit rate, and the like extracted in step S412 for the video data. With this setting, the same high resolution as the video main stream is set in the video data. The video substream conversion processing unit 115c converts the set video data into a video substream. For example, the converted video substream is video data having a resolution of 584 (Pixel) × 216 (Pixel) as shown in FIG.
次に、ステップＳ４１４において、映像サブストリーム変換処理部１１５ｃは、ステップＳ４１３で変換された映像サブストリームを映像サブストリームバッファ１１４ｂに保存し、終了する。以降、映像サブストリーム変換処理は、制御部２１５により繰り返し起動される。 Next, in step S414, the video substream conversion processing unit 115c stores the video substream converted in step S413 in the video substream buffer 114b, and the process ends. Thereafter, the video substream conversion process is repeatedly activated by the control unit 215.
また、ステップＳ４２１において、映像サブストリーム配信処理部１１５ｅは、配信要求受信部１１１から映像サブストリーム配信要求を入力する。 In step S421, the video substream distribution processing unit 115e inputs a video substream distribution request from the distribution request receiving unit 111.
次に、ステップＳ４２２において、映像サブストリーム配信処理部１１５ｅは、映像サブストリームバッファ１１４ｂから映像サブストリームを入力する。 Next, in step S422, the video substream distribution processing unit 115e inputs the video substream from the video substream buffer 114b.
次に、ステップＳ４２３において、映像サブストリーム配信処理部１１５ｅは、ステップＳ４２２で入力した映像サブストリームを配信部１１６に出力する。 Next, in step S423, the video substream distribution processing unit 115e outputs the video substream input in step S422 to the distribution unit 116.
配信部１１６に出力された映像サブストリームは、例えば、監視装置２２０が映像サブストリーム配信要求を送信したときには、配信部１１６により監視装置２２０に、ネットワーク１５０を介して配信される。このように、実施の形態２の映像サブストリーム変換処理部１１５ｃと映像サブストリーム配信処理部１１５ｅにより、映像サブストリーム用の解像度が設定された映像サブストリームの配信を行うことができる。 For example, when the monitoring device 220 transmits a video substream distribution request, the video substream output to the distribution unit 116 is distributed to the monitoring device 220 via the network 150 by the distribution unit 116. As described above, the video substream conversion processing unit 115c and the video substream distribution processing unit 115e according to the second embodiment can distribute the video substream in which the resolution for the video substream is set.
次に、本発明の実施の形態２に係る映像送信装置２１０の顔画像切り出し処理について、図１３を参照して説明する。
図１３は、本発明の実施の形態２に係る映像送信装置の映像処理部の顔画像切出し処理の手順を示すフローチャートである。
まず、ステップＳ５０１において、映像処理部１１５ｆは、顔画像切出し処理を実行するために、不揮発性メモリ１１３等の初期化を行う。
次に、差分法による人物の検出処理（ステップＳ５０２〜 ステップＳ５０６） を行う。
ステップＳ５０２において、映像処理部１１５ｆは、映像入力部１１２から、例えば、横方向１９２０画素、縦方向１０８０画素の入力画像を得る。
ステップＳ５０３において、映像処理部１１５ｆは、ステップＳ５０２で得た入力画像と、予め作成し不揮発性メモリ１１３に記録しておいた人物の映っていない基準背景画像との間で、画素毎の輝度値の差分値を計算する。
ステップＳ５０４において、映像処理部１１５ｆは、ステップＳ５０３で得られた差分画像の画素値（差分値）を、例えば、１画素の画素値を８ビットで計算し、これを２５６階調で表し、所定のしきい値Ｔｈ（例えば、Ｔｈ=２０）未満の画素値を“０”、しきい値Ｔｈ以上の画素の画素値を“２５５”として二値化画像を得る。なお、しきい値Ｔｈは、上記実施例では、２０と設定したが、２０に限定されるものではなく、物体の検出条件、入力画像の状態等で実験的に定められる。
Next, face image cutout processing of the video transmission apparatus 210 according to Embodiment 2 of the present invention will be described with reference to FIG.
FIG. 13 is a flowchart showing the procedure of face image cutout processing of the video processing unit of the video transmission apparatus according to Embodiment 2 of the present invention.
First, in step S501, the video processing unit 115f initializes the nonvolatile memory 113 and the like in order to execute a face image cutout process.
Next, a person detection process (step S502 to step S506) by the difference method is performed.
In step S502, the video processing unit 115f obtains, from the video input unit 112, for example, an input image having 1920 pixels in the horizontal direction and 1080 pixels in the vertical direction.
In step S503, the video processing unit 115f obtains a luminance value for each pixel between the input image obtained in step S502 and a reference background image that is created in advance and recorded in the nonvolatile memory 113 and does not show a person. The difference value of is calculated.
In step S504, the video processing unit 115f calculates the pixel value (difference value) of the difference image obtained in step S503, for example, the pixel value of one pixel in 8 bits, and represents this in 256 gradations. A binarized image is obtained by setting a pixel value less than a threshold value Th (for example, Th = 20) to “0” and a pixel value of a pixel equal to or greater than the threshold value Th to “255”. The threshold value Th is set to 20 in the above-described embodiment, but is not limited to 20. The threshold value Th is experimentally determined based on the object detection condition, the state of the input image, and the like.
ステップＳ５０５において、映像処理部１１５ｆは、ステップＳ５０４で得られた二値化画像中の画素値“２５５”となる画素のかたまりを検出し、各々に番号を付けて区別できるようにする。
ステップＳ５０６において、映像処理部１１５ｆは、ステップＳ５０５で番号付けされた画素値“２５５”となる画素のかたまりが所定の条件（例えば、大きさが横方向２０画素以上、高さ方向２０画素以上）を満たした場合に、監視対象領域内に移動する人物が存在すると判定し、人物が存在する（ＹＥＳ）場合、ステップＳ５０７に進み、人物が存在しない（ＮＯ）場合、処理を終了する。
In step S505, the video processing unit 115f detects a block of pixels having the pixel value “255” in the binarized image obtained in step S504, and makes it possible to distinguish each by assigning a number to each.
In step S506, the video processing unit 115f determines that the group of pixels having the pixel value “255” numbered in step S505 is a predetermined condition (for example, the size is 20 pixels or more in the horizontal direction and 20 pixels or more in the height direction). Is satisfied, it is determined that there is a person who moves within the monitoring target area. If there is a person (YES), the process proceeds to step S507. If there is no person (NO), the process ends.
ステップＳ５０７において、映像処理部１１５ｆは、入力画像データに対して顔検出を行い、検出した顔画像を顔の位置情報（画素）とともに不揮発性メモリ１１３に格納する。なお、顔検出は、眼や鼻、口等の主要構成要素の配置や額と眼の濃淡差等の顔の特性を使った、公知の画像認識技術を用いて行う。 In step S507, the video processing unit 115f performs face detection on the input image data, and stores the detected face image in the nonvolatile memory 113 together with face position information (pixels). Note that face detection is performed using a known image recognition technique that uses face characteristics such as the arrangement of main components such as the eyes, nose, and mouth and the difference between the forehead and the contrast of the eyes.
ステップＳ５０８において、映像処理部１１５ｆは、ステップＳ５０７で抽出した顔検出エリアの縦方向及び横方向にそれぞれ所定の数値α（α：１００％以上）を掛けた大きさを符号化処理範囲として定め、当該符号化処理範囲で映像データの切り出しを行う。 In step S508, the video processing unit 115f determines a size obtained by multiplying the vertical direction and the horizontal direction of the face detection area extracted in step S507 by a predetermined numerical value α (α: 100% or more) as an encoding processing range, The video data is cut out within the encoding processing range.
次に、本発明の実施の形態２に係る監視装置２２０の映像表示処理について、図１４及び図１５を参照して説明する。
図１４は、本発明の実施の形態２に係る監視装置の映像表示処理の手順を示すフローチャートである。また、図１５は、監視装置の表示部に「単独表示」、「並列表示」または「ピクチャーインピクチャー表示」する際の表示例を示す図である。
まず、ステップＳ６０１において、監視装置２２０の映像表示処理部２２１は、映像メインストリームの映像及び映像サブストリームの映像を使い、「メインのみ単独表示」するのか「サブを同時表示」するかの判定を行い、「メインのみ単独表示」する場合は、ステップＳ６０２に進み、「サブを同時表示」する場合は、ステップＳ６０３に進む。
Next, video display processing of the monitoring apparatus 220 according to Embodiment 2 of the present invention will be described with reference to FIGS. 14 and 15.
FIG. 14 is a flowchart showing a procedure of video display processing of the monitoring apparatus according to Embodiment 2 of the present invention. FIG. 15 is a diagram illustrating a display example when performing “single display”, “parallel display”, or “picture-in-picture display” on the display unit of the monitoring apparatus.
First, in step S601, the video display processing unit 221 of the monitoring apparatus 220 uses the video of the video main stream and the video of the video substream to determine whether to perform “main only display alone” or “sub display simultaneously”. If “only main display is performed”, the process proceeds to step S602. If “sub display is performed simultaneously”, the process proceeds to step S603.
次に、ステップＳ６０２において、映像表示処理部２２１は、映像送信装置２１０から送信された映像メインストリームの映像を入力し、ステップＳ６０９において、その映像を表示エリアに単独表示する。 Next, in step S602, the video display processing unit 221 inputs the video of the video main stream transmitted from the video transmission device 210, and in step S609, displays the video alone in the display area.
次に、ステップＳ６０３において、映像表示処理部２２１は、映像送信装置１１０から送信された映像メインストリームの映像及び映像サブストリームの映像を入力する。
次に、ステップＳ６０４において、映像表示処理部２２１は、映像サブストリームの映像の画質改善をするか否かの判定を行い、画質改善する（ＹＥＳ）場合は、ステップＳ６０５に進み、画質改善しない（ＮＯ）場合は、ステップＳ６０６に進む。ここで、画質改善とは、例えば、明度調整や肌色補正、超解像、コントラスト補正、ダイナミックレンジ補正、ノイズ除去などの処理のことである。
Next, in step S <b> 603, the video display processing unit 221 inputs the video of the video main stream and the video of the video substream transmitted from the video transmission device 110.
In step S604, the video display processing unit 221 determines whether or not to improve the image quality of the video substream video. If the image quality is to be improved (YES), the process proceeds to step S605 and the image quality is not improved ( If NO, the process proceeds to step S606. Here, the image quality improvement is processing such as brightness adjustment, skin color correction, super-resolution, contrast correction, dynamic range correction, noise removal, and the like.
次に、ステップＳ６０５において、映像表示処理部２２１は、映像サブストリームの映像をコントラスト、エッジ強調等の画質改善処理を行う。
次に、ステップＳ６０６において、映像表示処理部２２１は、映像メインストリームの映像に映像サブストリームの映像を「並列表示」するのか「ピクチャーインピクチャー表示」するのかの判定を行い、「並列表示」の場合（ＹＥＳ）は、ステップＳ６０７に進み、「ピクチャーインピクチャー表示」の場合（ＮＯ）は、ステップＳ６０８に進む。
Next, in step S605, the video display processing unit 221 performs image quality improvement processing such as contrast and edge enhancement on the video of the video substream.
In step S606, the video display processing unit 221 determines whether to display the video substream video in “parallel display” or “picture-in-picture display” in the video main stream video. In the case (YES), the process proceeds to step S607, and in the case of “picture in picture display” (NO), the process proceeds to step S608.
次に、ステップＳ６０７において、映像表示処理部２２１は、映像メインストリームの映像に映像サブストリームの映像を並べて表示する。
なお、映像送信装置２１０から送信された映像メインストリームの映像がＳＤ（Standard Definition）映像であり、このＳＤ映像を監視装置２２０でＨＤ（High Definition）映像にアップコンバートして表示する場合には、アップコンバートした際に左右に生じるブランク領域に切り出した映像サブストリームの映像を並べて表示するようにする。また、映像送信装置２１０から送信された映像メインストリームの映像がＨＤ映像であり、このＨＤ映像を監視装置２２０でＳＤ映像にダウンコンバートして表示する場合には、ダウンコンバートした際に上下に生じるブランク領域に切り出した映像サブストリームの映像を並べて表示するようにする。また、上記の場合に、映像メインストリームの映像を中央に表示するのではなく、左右または上下のどちらかに寄せ、ブランク領域を大きくし、そこに映像サブストリームの映像を表示するようにしてもよい。
次に、ステップＳ６０８において、映像表示処理部２２１は、映像メインストリームの映像の所定の位置に映像サブストリームの映像を重畳して表示する。
Next, in step S607, the video display processing unit 221 displays the video substream video side by side with the video mainstream video.
In addition, when the video of the video main stream transmitted from the video transmission device 210 is an SD (Standard Definition) video, and when the SD video is up-converted and displayed on the monitoring device 220 as an HD (High Definition) video, The video substreams cut out in the blank areas generated on the left and right when up-converting are displayed side by side. In addition, when the video of the video main stream transmitted from the video transmission device 210 is an HD video, and this HD video is down-converted to an SD video by the monitoring device 220, it is generated up and down when the down-conversion is performed. The video substream video cut out in the blank area is displayed side by side. Also, in the above case, instead of displaying the video of the video main stream in the center, it may be shifted to the left or right or top and bottom to enlarge the blank area and display the video substream video there. Good.
Next, in step S608, the video display processing unit 221 superimposes and displays the video substream video at a predetermined position of the video mainstream video.
例えば、表示部に「単独表示」する場合の表示例を図１５（ａ）に、表示部に「並列表示」する場合の表示例を図１５（ｂ）に、また、表示部に「ピクチャーインピクチャー表示」する場合の表示例を図１５（ｃ）に示す。 For example, FIG. 15A shows a display example in the case of “single display” on the display unit, FIG. 15B shows a display example in the case of “parallel display” on the display unit, and “Picture in” on the display unit. A display example in the case of “picture display” is shown in FIG.
つまり、監視装置２２０では、映像送信装置２１０から配信された映像ストリームの映像を使用することによって、監視装置２２０の映像表示処理部２２１により、映像メインストリームの映像を表示部に「単独表示」したり、映像メインストリーム及び映像サブストリームの映像を表示部に「並列表示」または「ピクチャーインピクチャー表示」したり、それぞれ切り換えて表示することができる。 That is, in the monitoring device 220, the video of the video main stream is “single-displayed” on the display unit by the video display processing unit 221 of the monitoring device 220 by using the video of the video stream distributed from the video transmission device 210. Or the video main stream and the video sub-stream can be displayed on the display unit by “parallel display” or “picture-in-picture display”.
本実施の形態２では、人物の顔を検出して切出すようにしたが、顔に限られるものではなく、人物全体であったり、見たい対象となる物体であったり、任意の対象であってよい。
また、本実施の形態２では、映像表示処理２２１側で画質改善処理を実施するようにしているが、映像送信装置２１０側の処理としてもよく、その場合には、映像処理部１１５ｆにて入力映像から対象部分を検出し、切り出し、画質改善処理を実施した上で、映像サブストリーム変換処理部１１５ｃでサブストリーム映像に変換することで実現できる。
In the second embodiment, the face of a person is detected and cut out. However, the face is not limited to the face, but the whole person, an object to be viewed, or an arbitrary target. You can.
In the second embodiment, the image quality improvement processing is performed on the video display processing 221 side. However, the processing may be performed on the video transmission device 210 side. This can be realized by detecting the target portion from the video, cutting it out, performing image quality improvement processing, and then converting it into a substream video by the video substream conversion processing unit 115c.
以上説明したように、本発明の実施の形態２の映像配信システムによれば、映像送信装置から映像データを少ない伝送量で送信することができ、監視装置側で表示される映像が鮮明で、且つ監視装置の処理負荷を低減することが可能な映像配信システムを提供することができる。 As described above, according to the video distribution system of Embodiment 2 of the present invention, video data can be transmitted from the video transmission device with a small transmission amount, and the video displayed on the monitoring device side is clear, In addition, it is possible to provide a video distribution system capable of reducing the processing load on the monitoring device.
なお、上記実施の形態の構成及び動作は例であって、本発明の趣旨を逸脱しない範囲で適宜変更または組み合わせて実行することができることは言うまでもない。例えば、実施の形態１の予め定めた特定の場所の切り出し画像に対して画質改善処理を実施して、サブストリーム映像として出力するようにしてもよい。 It should be noted that the configuration and operation of the above-described embodiment are examples, and it is needless to say that the configuration and operation can be appropriately changed or combined without departing from the spirit of the present invention. For example, image quality improvement processing may be performed on a clipped image at a predetermined specific location in Embodiment 1 and output as a substream video.
１００：映像配信システム、１１０，１１０−１，１１０−２，１１０−３，１１０−４：映像送信装置、１１０ａ，１１０ａ−１，１１０ａ−２，１１０ａ−３，１１０ａ−４：監視カメラ、１１１：配信要求受信部、１１２：映像入力部、１１３：不揮発性メモリ、１１３ａ：映像メインストリーム設定データ、１１３ｂ：映像サブストリーム設定データ、１１４：メモリ、１１４ａ：映像メインストリームバッファ、１１４ｂ：映像サブストリームバッファ、１１５：制御部、１１５ａ：映像切出し部、１１５ｂ：映像メインストリーム変換処理部、１１５ｃ：映像サブストリーム変換処理部、１１５ｄ：映像メインストリーム配信処理部、１１５ｅ：映像サブストリーム配信処理部、１１５ｆ：映像処理部、１１６：配信部、１２０：監視装置、１２１：映像表示処理部、１５０：ネットワーク、２００：映像配信システム、２１０：映像送信装置、２１５：制御部、２２０：監視装置、２２１：映像表示処理部、５００：列車、５０１：車両、５０１ａ，５０１ｂ：乗降用ドア、５０２：車両、５０２ａ，５０２ｂ：乗降用ドア。 100: Video distribution system, 110, 110-1, 110-2, 110-3, 110-4: Video transmission device, 110a, 110a-1, 110a-2, 110a-3, 110a-4: Surveillance camera, 111 : Distribution request receiving unit, 112: video input unit, 113: nonvolatile memory, 113a: video main stream setting data, 113b: video substream setting data, 114: memory, 114a: video main stream buffer, 114b: video substream Buffer, 115: Control unit, 115a: Video cutout unit, 115b: Video main stream conversion processing unit, 115c: Video substream conversion processing unit, 115d: Video main stream distribution processing unit, 115e: Video substream distribution processing unit, 115f : Video processing unit, 116: Distribution unit, 120 Monitoring device, 121: Video display processing unit, 150: Network, 200: Video distribution system, 210: Video transmission device, 215: Control unit, 220: Monitoring device, 221: Video display processing unit, 500: Train, 501: Vehicle 501a, 501b: doors for getting on / off, 502: vehicle, 502a, 502b: doors for getting on / off.
Claims (18)
前記サブストリーム映像を受信する受信部と、映像を表示する表示部と、前記受信したサブストリーム映像に基づいて前記表示部に表示する映像を生成する表示映像生成部と、を有する映像表示装置と、
を備えることを特徴とする映像配信システム。 A receiving unit that receives video; a substream video generating unit that generates a substream video by cutting out a predetermined area of the received video; and an output unit that outputs the substream video generated by the substream video generating unit; A video distribution device having
A video display device comprising: a receiving unit that receives the substream video; a display unit that displays video; and a display video generation unit that generates video to be displayed on the display unit based on the received substream video; ,
A video distribution system comprising:
前記映像表示装置は、前記受信部において複数のサブストリーム映像を受信し、前記受信した複数のサブストリーム映像を合成して前記表示部に表示する映像を生成することを特徴とする請求項１に記載の映像配信システム。 A video distribution system in which a plurality of the video distribution devices exist, or a video distribution system in which a plurality of substream videos are output from the video distribution device,
2. The video display apparatus according to claim 1, wherein the video display device receives a plurality of substream videos at the receiving unit, and generates a video to be displayed on the display unit by combining the plurality of received substream videos. The video distribution system described.
前記サブストリーム映像は鉄道車両のドア部分を切り出した画像であることを特徴とする請求項１または請求項２に記載の映像配信システム。 The video is a video of a railway vehicle,
The video distribution system according to claim 1, wherein the sub-stream video is an image obtained by cutting out a door portion of a railway vehicle.
前記映像表示装置は、前記受信部において前記メインストリーム映像と前記サブストリーム映像を受信し、前記表示映像生成部は、前記メインストリーム映像と前記サブストリーム映像を合成して前記表示部に表示する映像を生成することを特徴とする請求項１に記載の映像配信システム。 The video distribution device further includes a main stream video generation unit that generates a main stream video without cutting out the received video, and outputs the main stream video and the substream video from the output unit,
The video display device receives the main stream video and the substream video at the reception unit, and the display video generation unit synthesizes the main stream video and the substream video and displays the video on the display unit The video distribution system according to claim 1, wherein:
映像の所定の領域を切り出してサブストリーム映像を生成して配信し、前記サブストリーム映像に基づいて映像を表示することを特徴とする映像配信方法。 In a system comprising a video distribution device for distributing video and a video display device for receiving and displaying the distributed video,
A video distribution method comprising: cutting out a predetermined area of video, generating and distributing a substream video, and displaying the video based on the substream video.
18. The video display according to claim 15, wherein a video to be displayed on the display unit is generated after image quality improvement processing is performed on the received substream video in the display video generation unit. apparatus.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013069114A JP2014192844A (en) | 2013-03-28 | 2013-03-28 | Video distribution system, video distribution method, video distribution device and video display device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013069114A JP2014192844A (en) | 2013-03-28 | 2013-03-28 | Video distribution system, video distribution method, video distribution device and video display device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2014192844A true JP2014192844A (en) | 2014-10-06 |
| JP2014192844A5 JP2014192844A5 (en) | 2016-05-19 |
Family
ID=51838708
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2013069114A Pending JP2014192844A (en) | 2013-03-28 | 2013-03-28 | Video distribution system, video distribution method, video distribution device and video display device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2014192844A (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2023181559A1 (en) * | 2022-03-24 | 2023-09-28 | 株式会社日立国際電気 | Monitoring system |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002330440A (en) * | 2001-05-01 | 2002-11-15 | Sony Corp | Image transmission method, program for the image transmission method, recording medium for recording the program for the image transmission method, and image transmitter |
| JP2004120341A (en) * | 2002-09-26 | 2004-04-15 | Riosu Corp:Kk | Video image monitoring system |
| JP2005086495A (en) * | 2003-09-09 | 2005-03-31 | Hitachi Kokusai Electric Inc | Compression image transmitter |
| JP2006033380A (en) * | 2004-07-15 | 2006-02-02 | Hitachi Kokusai Electric Inc | Monitoring system |
| US20060176951A1 (en) * | 2005-02-08 | 2006-08-10 | International Business Machines Corporation | System and method for selective image capture, transmission and reconstruction |
| JP2007081553A (en) * | 2005-09-12 | 2007-03-29 | Hitachi Kokusai Electric Inc | Camera system and display method thereof |
-
2013
- 2013-03-28 JP JP2013069114A patent/JP2014192844A/en active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002330440A (en) * | 2001-05-01 | 2002-11-15 | Sony Corp | Image transmission method, program for the image transmission method, recording medium for recording the program for the image transmission method, and image transmitter |
| JP2004120341A (en) * | 2002-09-26 | 2004-04-15 | Riosu Corp:Kk | Video image monitoring system |
| JP2005086495A (en) * | 2003-09-09 | 2005-03-31 | Hitachi Kokusai Electric Inc | Compression image transmitter |
| JP2006033380A (en) * | 2004-07-15 | 2006-02-02 | Hitachi Kokusai Electric Inc | Monitoring system |
| US20060176951A1 (en) * | 2005-02-08 | 2006-08-10 | International Business Machines Corporation | System and method for selective image capture, transmission and reconstruction |
| JP2007081553A (en) * | 2005-09-12 | 2007-03-29 | Hitachi Kokusai Electric Inc | Camera system and display method thereof |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2023181559A1 (en) * | 2022-03-24 | 2023-09-28 | 株式会社日立国際電気 | Monitoring system |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20210112289A1 (en) | Low latency wireless virtual reality systems and methods | |
| US11119319B2 (en) | Rendering device, head-mounted display, image transmission method, and image correction method | |
| US20200267384A1 (en) | Low bitrate encoding of panoramic video to support live streaming over a wireless peer-to-peer connection | |
| US9049384B2 (en) | Video processing apparatus, camera apparatus, video processing method, and program | |
| US20140098185A1 (en) | Interactive user selected video/audio views by real time stitching and selective delivery of multiple video/audio sources | |
| US20200133607A1 (en) | Method for processing display data | |
| KR101623826B1 (en) | Surveillance camera with heat map | |
| US20220353555A1 (en) | Image display system, moving image distribution server, image processing apparatus, and moving image distribution method | |
| US20150304360A1 (en) | Videoconferencing Information Presentation Method, Apparatus, and System | |
| JPWO2004056133A1 (en) | 3D image generation apparatus and 3D image distribution method | |
| US20220368945A1 (en) | Image data transfer apparatus and image data transfer method | |
| JP2010087907A (en) | Video combination and display, video display system and video display method | |
| US20160353064A1 (en) | Video monitoring system and video monitoring method | |
| US20220199120A1 (en) | Image processing device, image processing method, and image processing program | |
| JP2012019517A (en) | Method and apparatus for displaying | |
| KR101410837B1 (en) | Apparatus for managing image by monitoring video memory | |
| WO2020241269A1 (en) | Video delivery system, video transmission device, video reception device, video distribution method, video transmission method, video reception method, and computer program | |
| JP2011205383A (en) | Communication device | |
| JP2010213119A (en) | Video transmission system, imaging apparatus and monitoring device | |
| JP2014192844A (en) | Video distribution system, video distribution method, video distribution device and video display device | |
| JP2014082651A (en) | Image transmission system | |
| KR20140022670A (en) | An apparatus for transmitting simplified motion information excluding background images and displaying the information by utilizing avatar and the methods thereof | |
| JP5769468B2 (en) | Object detection system and object detection method | |
| US11972547B2 (en) | Video distribution system, video distribution method, and display terminal | |
| JP2006287731A (en) | Information processor and method, recording medium and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160324 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160324 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170125 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170302 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20170829 |