JP4501508B2 - VIDEO DISTRIBUTION METHOD, VIDEO DISTRIBUTION DEVICE, AND VIDEO DISTRIBUTION SYSTEM - Google Patents
VIDEO DISTRIBUTION METHOD, VIDEO DISTRIBUTION DEVICE, AND VIDEO DISTRIBUTION SYSTEM Download PDFInfo
- Publication number
- JP4501508B2 JP4501508B2 JP2004113564A JP2004113564A JP4501508B2 JP 4501508 B2 JP4501508 B2 JP 4501508B2 JP 2004113564 A JP2004113564 A JP 2004113564A JP 2004113564 A JP2004113564 A JP 2004113564A JP 4501508 B2 JP4501508 B2 JP 4501508B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- luminance value
- region
- area
- encoding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
本発明は、映像を配信するシステム、特に、配信される映像に対して利用者が指定した領域を強調変換することができる映像配信システムに関するものである。 The present invention relates to a video distribution system, and more particularly to a video distribution system capable of emphasizing a region designated by a user for a distributed video.
配信される映像に対して利用者が指定した領域を強調変換する映像配信システムとしては、特許文献1に記載のものがある。この特許文献1は、映像を圧縮符号化して通信するシステムである。このシステムにおいては、利用者が映像の任意の領域を指定する手段を設けている。この手段によって、利用者が指定した部分の解像度を高く、他の部分の解像度を低くした映像を送信している。このシステムの利用者は注目したい部分を指定することにより、注目したい部分を詳しく見ることができる。特に、高齢者は画像全体を大雑把に見る能力が低く、画像の細部を順に見ていく傾向があるといわれているため、興味を持った場所を強調表示し、注目しやすくすることにより大きな効果が得られると考えられる。
しかしながら、上記従来のシステムでは、同一の映像を複数の利用者に配信する場合には対応できない。即ち、上記システムのように利用者が注目したい部分を強調させる方法として、注目する部分の解像度を他の部分の解像度より高くする方法を用いると、複数の利用者の注目したい部分が異なる場合には、それぞれ別々に解像度を高くする部分を設定して符号化する必要がある。このため、注目したい部分を指定した利用者の数だけ、符号化処理を行うことになり、注目したい部分を指定する利用者の数が増えるに従って、処理負荷が非常に大きくなってしまうという問題がある。 However, the conventional system cannot cope with the case where the same video is distributed to a plurality of users. In other words, as a method of emphasizing a part that the user wants to focus on as in the above system, if the method of making the resolution of the part of interest higher than the resolution of the other part is used, the parts that the plurality of users want to focus on are different. Needs to be encoded by setting a part to increase the resolution separately. For this reason, the encoding process is performed by the number of users who have designated the part of interest, and the processing load becomes very large as the number of users who designate the part of interest increases. is there.
本発明は上記問題点に鑑みてなされたもので、注目したい部分が異なる複数の利用者に対しても少ない処理量で同一の映像を配信することができる映像配信システムを提供することを目的とする。 The present invention has been made in view of the above problems, and an object of the present invention is to provide a video distribution system capable of distributing the same video with a small amount of processing to a plurality of users having different parts of interest. To do.
上記課題を解決するために本発明は、映像データの符号化処理に必要な処理量に着目し、この符号化処理の回数を減らすことで、注目したい部分が異なる複数の利用者に対して少ない処理量で同一の映像を配信することを可能にしたものである。 In order to solve the above problems, the present invention pays attention to the processing amount necessary for the encoding process of video data, and reduces the number of encoding processes, thereby reducing the number of users who are interested in different parts. It is possible to distribute the same video with a processing amount.
具体的には、配信対象の映像データに対して、その映像データの符号化と映像中の指定領域の強調処理とを施して配信する際に、各映像受信端末毎に個別にかつ任意に指定された1または複数の映像データの強調領域をその配信先データと共に受け付け、受け付けた映像データのすべての強調領域を他の領域との依存関係を無くして符号化し、符号化した符号化データを受け取って上記映像受信端末に指定された強調領域を個別に強調変換し当該映像受信端末を配信先として送信させる処理を各映像受信端末毎に行うようにしたものである。 Specifically, when video data to be distributed is encoded and encoded with a specified area in the video and distributed individually and individually for each video receiving terminal The received emphasis area of one or a plurality of video data is received together with the distribution destination data, all the emphasis areas of the received video data are encoded without dependency on other areas, and the encoded data is received. Thus, the emphasis region designated for the video receiving terminal is individually emphasized and converted, and the processing for transmitting the video receiving terminal as a distribution destination is performed for each video receiving terminal .
映像データの符号化処理に必要な処理量に着目し、この符号化処理の回数を減らすことで、注目したい部分が異なる複数の利用者に対して少ない処理量で同一の映像を配信することを可能にしたものである。 Focusing on the amount of processing required for video data encoding processing, and reducing the number of times this encoding processing is performed, it is possible to distribute the same video with a small amount of processing to a plurality of users with different parts of interest. It is possible.
具体的には、任意に指定されたすべての領域を他の領域との依存関係を無くした状態で映像データ全体を符号化した後、個別の領域指定に対応する領域を強調変換することで、各領域指定に対応してそれぞれ行っていた映像データの符号化処理を省略する。この結果、注目したい部分が異なる複数の利用者に対して、少ない処理量で同一の映像を配信することが可能になる。 Specifically, after encoding the entire video data in a state in which all the arbitrarily specified areas have no dependency with other areas, the areas corresponding to the individual area specifications are emphasized and transformed. The encoding process of the video data that has been performed corresponding to each area designation is omitted. As a result, it is possible to distribute the same video with a small amount of processing to a plurality of users having different parts of interest.
次に、本発明の最良の実施形態について説明する。 Next, the best embodiment of the present invention will be described.
(A)第1実施形態
本実施形態に係る映像配信システムは図2に示すように構成されている。図2は本実施形態に係る映像配信システムの全体構成を示す概要図である。映像配信システム1は、映像配信装置11と、ネットワーク12を介して接続された複数の映像受信端末13−n(n=[1:N])とから構成されている。このように構成された本発明の映像配信システム1では、映像配信装置11がネットワーク12を介して複数の映像受信端末13−nに映像を配信する。
(A) First Embodiment A video distribution system according to this embodiment is configured as shown in FIG. FIG. 2 is a schematic diagram showing the overall configuration of the video distribution system according to the present embodiment. The
上記映像配信装置11は図1に示すように構成されている。なお、図1は本発明の第1の実施形態に係る映像配信装置を示す構成図を示す。この映像配信装置11は主に、通信手段101、強調領域受付手段102、複数の強調変換部103−n(n=[1:N])、映像符号化手段104、符号化制御手段105及び映像入力手段106から構成されている。
The
通信手段101は、複数の映像受信端末13−nとネットワーク12を介して通信するための手段である。この通信手段101は、各映像受信端末13−nが指定した強調領域をネットワークを介して受信する機能と、各映像受信端末13−nに配信する符号化データを送信する機能とを備えている。これにより、通信手段101は、その出力側が強調領域受付手段102に接続され、各映像受信端末13−nから指定された強調領域情報を映像受信端末13−nの配信情報と一緒に強調領域受付手段102に渡すと共に、その入力側が各強調変換部103−nにそれぞれ接続され、各強調変換部103−nで指定領域が強調変換された符号化データを受け取り、各映像受信端末13−nへ送信する。
The communication unit 101 is a unit for communicating with the plurality of video receiving terminals 13-n via the
強調領域受付手段102は、各映像受信端末13−nが指定した強調領域を含む要求を受け付けて処理するための手段である。この強調領域受付手段102は、その入力側が通信手段101に接続され、通信手段101が受信した、ある映像受信端末13−nが指定した強調領域を含む全ての領域情報を受け付けると共に、その出力側が各強調変換部103−nにそれぞれ接続され、強調領域と配信先を通知する。この場合、受信した強調領域情報と、その強調領域を指定した映像受信端末13−nである配信先情報とをセットにして、任意の強調変換部103−nに通知する。なお、強調変換部103−nと映像受信端末13−nとが1対1で対応している場合は、その対応する強調変換部103−nに通知する。映像受信端末13−nが強調領域を指定せずに、映像の配信のみを要求する場合は、配信先情報のみを強調変換部103−nに通知する。さらに、強調領域受付手段102は、その出力側が符号化制御手段105に接続され、各映像受信端末13−nが指定した各強調領域を含む全ての領域を符号化制御手段105に通知する。
The emphasis
各強調変換部103−nは、指定強調領域を強調変換した符号化データを生成して通信手段101に渡すと共に、指定配信先に送信するよう通信手段101に指示するための手段である。各強調変換部103−nは、各映像受信端末13−nと対応して同じ数だけ並列に設けられている。これは、全ての映像受信端末13−nがそれぞれ違う領域の強調を支持した場合に対応するためである。各強調変換部103−nは、映像符号化手段104から受け取った符号化データから指定強調領域(強調領域受付手段102から通知された指定強調領域)を抽出し、抽出した部分を強調変換した符号化データを生成し、強調変換後の符号化データを通信手段101に渡して、配信先に送信するように指示する。
Each emphasis conversion unit 103-n is a unit for generating encoded data obtained by emphasizing the designated emphasis region and passing it to the communication unit 101, and for instructing the communication unit 101 to transmit it to the designated distribution destination. Each emphasis conversion unit 103-n is provided in parallel in the same number corresponding to each video receiving terminal 13-n. This is to cope with the case where all the video receiving terminals 13-n support the emphasis of different areas. Each emphasis conversion unit 103-n extracts a specified emphasis area (a specified emphasis area notified from the emphasis area reception unit 102) from the encoded data received from the
図3に強調変換部103の内部構成を示す。この強調変換部103は、強調変換手段201、強調部分検索手段202及び輝度値変換テーブル203から構成されている。
FIG. 3 shows an internal configuration of the
強調変換手段201は、映像符号化手段104で符号化された符号化データを強調変換して通信手段101に渡すための手段である。強調部分検索手段202は、強調領域受付手段102から通知された指定強調領域を、映像符号化手段104からの符号化データの中から検索するための手段である。この強調部分検索手段202で検索された強調部分が、強調領域受付手段102から通知された配信先と共に強調変換手段201に通知される。輝度値変換テーブル203は、強調変換手段201が変換する強調領域の輝度値を記録したテーブルである。この輝度値変換テーブル203には、変換前の輝度値に対応付けて、変換後の輝度値が記録されている。この例を図4に示す。ここでは、輝度が高い部分はより高く、輝度が低い部分はより低く変換されるように設定されている。これにより、強調領域のコントラストが大きくなるように変換させることができる。
The
この強調変換部103での具体的な処理は次のようになっている。強調部分検索手段202が、映像符号化手段104から受け取った符号化データを解読し、解読中のデータが強調領域受付手段102から指定された強調領域内であるか、強調領域外であるかを判定して強調領域を検索し、符号化データ中の強調領域内のデータ部分を強調変換手段201に通知する。強調変換手段201は、輝度値が格納されている部分(強調部分検索手段202から通知された強調領域部分の符号化データ中の輝度値が格納されている部分)を抽出し、その輝度値を輝度値変換テーブル203に従って書き換える。即ち、強調変換手段201は、輝度値変換テーブル203に基づいて、輝度が高い部分はより高く、輝度が低い部分はより低く変換して、強調領域のコントラストを大きくする。具体的には、変換前の輝度値の範囲が0から10の整数値をとる場合、輝度値変換テーブル203によって次のように変換する。
The specific processing in this
輝度値変換テーブル203の設定によって、変換前の輝度値が5以下の領域では、図4に示すように、その輝度値が小さいほど、より小さな値に変換する。即ち、変換前の輝度値が極めて小さい0および1の時は輝度値を0に変換し、変換前の輝度値が大きくなるに従い、2のときは1/2倍、3の時は2/3倍に変換する。 Depending on the setting of the luminance value conversion table 203, in a region where the luminance value before conversion is 5 or less, as shown in FIG. 4, the smaller the luminance value is, the smaller the value is converted. That is, when the luminance value before conversion is extremely small 0 and 1, the luminance value is converted to 0, and as the luminance value before conversion increases, the luminance value before conversion is ½ times when 2 and 2/3 when it is 3. Convert to double.
逆に輝度値が5以上の領域では、大きい輝度値ほどより大きな値に変換されるようにテーブルを設定する。ここでは、変換前の輝度値6以上でその輝度値に1ポイント加算した値に変換している。 Conversely, in a region where the luminance value is 5 or more, the table is set so that a larger luminance value is converted to a larger value. Here, the luminance value is converted to a value obtained by adding one point to the luminance value of 6 or more before the conversion.
図1の映像符号化手段104は、映像入力手段106から受け取った映像情報を圧縮符号化するための手段である。映像符号化手段104は、映像入力手段106からの映像情報を、符号化制御手段105の制御に従って圧縮符号化し、各強調変換部103−nの全てに渡す。
The
符号化制御手段105は、映像符号化手段104の符号化方法を制御するための手段である。この符号化制御手段105は、映像符号化手段104を制御して、指定された全領域の映像情報のうち、強調領域受付手段102から通知された強調領域を、他の領域と依存関係が無く、かつ輝度値の絶対値を単独で圧縮変換したデータが符号化データに含まれる符号化方法で符号化する。輝度値の絶対値を単独で圧縮変換したデータが符号化データに含まれる符号化方法としては、例えば、MPEG等で採用されているイントラ符号化がある。これ以外にも、強調領域を、他の領域との依存関係を断って、かつ輝度値の絶対値を単独で圧縮変換した上で、そのデータを元の符号化データに含めることができる符号化方法すべて使用することができる。
The
映像入力手段106は、映像配信装置11が配信する映像情報を入力するための手段である。この映像入力手段106で入力された映像情報を映像符号化手段104に渡す。
The
図2中のネットワーク12は、インターネット等の通常のネットワークである。
The
映像受信端末13は図5に示すように構成されている。この映像受信端末13は、通信手段301、映像復号化手段302、映像表示手段303、領域指定手段304から構成される。
The
通信手段301は、映像配信装置11とネットワーク12を介して通信するための手段である。この通信手段301は、映像配信装置11が配信した映像符号化データを受信して映像復号化手段302に渡すと共に、領域指定手段304が通知してきた強調領域をネットワーク12を介して映像配信装置11に通知する。
The
映像復号化手段302は、通信手段301が受信した映像符号化データを復号するための手段である。この映像復号化手段302は、復号したデータを映像表示手段303に渡す。
The
映像表示手段303は、映像復号化手段302で復号した映像を表示するための手段である。
The
領域指定手段304は、映像受信端末13の利用者が、受信するデータのうち特に強調して欲しい領域を指定するための手段である。この領域指定手段304は、利用者によって指定された領域を通信手段301に通知する。領域の指定方法は、画素単位で領域を指定するようにしても良いし、映像符号化するときの画像ブロック単位で指定するようにしても良い。また、予め強調領域のパターンを設定しておき、利用者は強調領域のパターンを選択するようにしても良い。
The area specifying means 304 is a means for the user of the
次に、上述のように構成された映像配信システムの動作を説明する。以下では、本発明の特徴部分に関係がある動作として、各映像受信端末13−nが指定した強調領域を映像配信装置11に通知し、映像配信装置11が通知された強調領域を強調変換した映像データを配信する動作を説明する。以下の説明では、各映像受信端末13−nが既に映像配信装置11から所望の映像配信を受けている状況を想定している。
Next, the operation of the video distribution system configured as described above will be described. In the following, as an operation related to the characteristic part of the present invention, the
まず、各映像受信端末13−nで、端末の利用者が強調して欲しい領域を領域指定手段304を通じて指定する。領域指定手段304で指定された強調領域は、通信手段301からネットワークを介して映像配信装置11に通知される。
First, in each video receiving terminal 13-n, the area that the user of the terminal wants to emphasize is specified through the area specifying means 304. The emphasis area designated by the
映像配信装置11では、各映像受信端末13−nから通知された強調領域を通信手段101が受け、その強調領域情報及びそれを指定した映像受信端末13−nのアドレスである配信先情報を強調領域受付手段102に渡す。強調領域受付手段102は、各強調変換部103−nに対して、強調領域とその強調領域を指定した映像受信端末13−nの配信先とを通知すると共に、各映像受信端末13−nが指定した強調領域の全てを符号化制御手段105に通知する。
In the
一方、映像符号化手段104は、映像入力手段106から入力された映像を符号化制御手段105の制御に従って圧縮符号化し、全ての強調変換部103−nに符号化データを送出する。このとき、強調領域受付手段102から符号化制御手段105に強調領域が通知されると、符号化制御手段105は、映像符号化手段104を制御して、その通知された領域が、他の領域と依存関係が無く、かつ輝度値の絶対値を単独で圧縮変換したデータが符号化データに含まれる符号化方法で符号化する。
On the other hand, the
各強調変換部103−nは、映像符号化手段104から上述のように符号化された符号化データを受け取り、受け取った符号化データを強調部分検索手段202で解読する。強調部分検索手段202は解読中のデータが強調領域受付手段102から指定された強調領域内であるか、強調領域外であるかを判定して、符号化データ中の強調領域内のデータ部分を強調変換手段201に通知する。強調変換手段201は、強調部分検索手段202から通知された強調領域部分の符号化データ中の輝度値が格納されている部分を抽出し、輝度値を変換テーブル203に従って書き換える。この輝度値の書き換えで影響するのは、映像符号化手段104によって、他の領域と依存関係が無く、かつ輝度値の絶対値を単独で圧縮変換された部分だけである。この部分だけを輝度値が書き換えられたデータに置き換える。強調部分の輝度値が書き換えられた後の符号化データは通信手段101から配信先に送信される。
Each enhancement conversion unit 103-n receives the encoded data encoded as described above from the
以上のように、本実施形態の映像配信システムでは、映像受信端末から指定された全ての強調領域を、他の領域と依存関係が無く、かつ輝度値の絶対値を単独で圧縮変換したデータが符号化データに含まれる符号化方法で符号化し、強調領域を指定した映像受信端末13ごとに、強調領域の輝度が高い部分はより高く、輝度が低い部分はより低くなるように変換した後、該当する映像受信端末へ送信するようにしている。配信する符号化データ中の強調領域の輝度値は絶対値を単独で圧縮変換したデータとなっているため、その部分のみ取り出して書き換えることが可能である。従って、1つの映像に対して、一度符号化するだけで、強調領域を指定した個々の映像受信端末毎に映像符号化しなくても、個々の映像受信端末からの個別の強調要求に応じることができ、処理量を軽減することができるようになる。
As described above, in the video distribution system according to the present embodiment, all the emphasis areas designated by the video receiving terminal have no dependency relationship with other areas, and the data obtained by compressing and converting the absolute value of the luminance value independently. For each
(B)第2実施形態
次に、本発明の第2実施形態について説明する。本実施形態の映像配信システムの全体構成は、上述した第1実施形態の映像配信システムとほぼ同様であるため、同一部分には同一符号を付して、その説明を省略する。本実施形態の特徴は映像配信装置の強調変換部にあるため、この強調変換部のみを説明する。
(B) Second Embodiment Next, a second embodiment of the present invention will be described. The overall configuration of the video distribution system according to the present embodiment is substantially the same as that of the above-described video distribution system according to the first embodiment. Since the feature of this embodiment resides in the enhancement conversion unit of the video distribution apparatus, only this enhancement conversion unit will be described.
図6は本実施形態に係る強調変換部を示す構成図である。この強調変換部400は、バッファ401、強調変換手段402、強調部分検索手段403、最大輝度値検出手段404及び最小輝度値検出手段405から構成される。
FIG. 6 is a configuration diagram illustrating the enhancement conversion unit according to the present embodiment. The
バッファ401は、映像符号化手段104から受け取った符号化データを一時保存するための手段である。このバッファ401は、受け取った符号化データを一時保存し、強調変換手段402からの読み出し要求に応じて保存している符号化データを出力する。 The buffer 401 is a means for temporarily storing the encoded data received from the video encoding means 104. The buffer 401 temporarily stores the received encoded data, and outputs the encoded data stored in response to a read request from the enhancement conversion unit 402.
強調変換手段402は、映像符号化手段104で符号化された映像信号を強調変換して通信手段101に渡すための手段である。強調変換手段402は、強調部分検索手段403、最大輝度値検出手段404、最小輝度値検出手段405からの通知をそれぞれ受けて強調領域内のデータ部分の輝度値を変換する。即ち、強調変換手段402は、強調部分検索手段403から符号化データ中の強調領域内のデータ部分の通知を、最大輝度値検出手段404から強調領域中の最大輝度値の通知を、最小輝度値検出手段405から強調領域中の最小輝度値の通知をそれぞれ受けると、バッファ401から符号化データを読み出し、強調部分検索手段403から通知された強調領域内のデータ部分の輝度値を変換する。
The emphasis conversion unit 402 is a unit for emphasizing and converting the video signal encoded by the
ここで、輝度値は、最大輝度値検出手段404で検出した領域内の最大輝度値が輝度値としてとりうる最大値に、最小輝度値検出手段405で検出した領域内の最小輝度値が輝度値としてとりうる最小値になるように輝度値を変換する。例えば、輝度値の範囲が0から10で、領域内の輝度値の最大値および最小値が8と3の場合、領域内の輝度値を、その値から3を引いて10/(8−3)倍することにより変換できる。もしくは、最小輝度値は最小輝度値検出手段405で検出した領域内の最小輝度値そのままで、最大輝度値検出手段404で検出した領域内の最大輝度値が輝度値としてとりうる最大値になるように輝度値を変換しても良い。例えば、輝度値の範囲が0から10で、領域内の輝度値の最大値および最小値が8と3の場合、領域内の輝度値を、その値から3を引いた値を(10−3)/(8−3)倍してから3を足すことにより変換できる。また、強調領域内の最小輝度値を検出し坪度値の変換に利用するようにしているが、映像入力手段106もしくは映像符号化手段105で映像領域全体の最小輝度値を検出し、強調領域内の最小輝度値と同様の方法で映像領域全体の最小輝度値を利用して輝度値の変換を行っても良い。 Here, the luminance value is the maximum value that the maximum luminance value in the region detected by the maximum luminance value detecting unit 404 can take as the luminance value, and the minimum luminance value in the region detected by the minimum luminance value detecting unit 405 is the luminance value. The luminance value is converted so as to be the minimum value that can be taken as For example, when the range of the luminance value is 0 to 10 and the maximum value and the minimum value of the luminance value in the region are 8 and 3, the luminance value in the region is subtracted 3 from that value to be 10 / (8-3 ) Can be converted by multiplying. Alternatively, the minimum luminance value is the minimum luminance value in the region detected by the minimum luminance value detecting unit 405 as it is, and the maximum luminance value in the region detected by the maximum luminance value detecting unit 404 becomes the maximum value that can be taken as the luminance value. The luminance value may be converted into For example, when the luminance value range is 0 to 10 and the maximum and minimum luminance values in the region are 8 and 3, the luminance value in the region is obtained by subtracting 3 from that value (10-3 ) / (8-3) times and then adding 3 to convert. Further, the minimum luminance value in the enhancement area is detected and used to convert the basis value. However, the minimum luminance value of the entire video area is detected by the video input means 106 or the video encoding means 105, and the enhancement area is detected. The brightness value may be converted using the minimum brightness value of the entire video area in the same manner as the minimum brightness value in the image area.
強調部分検索手段403は、映像符号化手段104から受け取った符号化データを解読し、解読中のデータが強調領域受付手段102から指定された強調領域内であるか、強調領域外であるかを判定し、強調領域の符号化データを最大輝度値検出手段404および最小輝度値検出手段405に渡すと共に、符号化データ中の強調領域内のデータ部分を強調変換手段402に通知する。
The emphasized partial search unit 403 decodes the encoded data received from the
最大輝度値検出手段404は、強調部分検索手段403から受け取った符号化データ中の輝度値を読み取り、データ中の最大輝度値を検出し、強調変換手段402に通知する。 The maximum luminance value detecting unit 404 reads the luminance value in the encoded data received from the emphasized portion searching unit 403, detects the maximum luminance value in the data, and notifies the enhancement converting unit 402 of it.
最小輝度値検出手段405は、強調部分検索手段403から受け取った符号化データ中の輝度値を読み取り、データ中の最小輝度値を検出し、強調変換手段402に通知する。 The minimum luminance value detection unit 405 reads the luminance value in the encoded data received from the emphasized part search unit 403, detects the minimum luminance value in the data, and notifies the enhancement conversion unit 402 of it.
次に、上記構成の映像配信システムの動作を説明する。本実施形態は、第1実施形態と比べて、映像配信装置中の強調変換部400での動作のみ異なる。このため以下では、映像配信装置中の強調変換部の400動作のみ説明する。
Next, the operation of the video distribution system having the above configuration will be described. This embodiment is different from the first embodiment only in the operation in the
強調変換部400は、映像符号化手段104から受け取った符号化データをバッファ401に一時保存すると共に、強調部分検索手段403で解読する。強調部分検索手段403は解読中のデータが強調領域受付手段102から指定された強調領域内であるか、強調領域外であるかを判定し、強調領域の符号化データを最大輝度値検出手段404および最小輝度値検出手段405に渡すと共に、符号化データ中の強調領域内のデータ部分を強調変換手段402に通知する。
The
最大輝度値検出手段404および最小輝度値検出手段405はそれぞれ、強調部分検索手段403から受け取った符号化データ中の輝度値を読み取り、データ中の最大もしくは最小輝度値を検出し、強調処理部402に通知する。強調変換手段402は、強調部分検索手段403、最大輝度値検出手段404、最小輝度値検出手段405からそれぞれ、符号化データ中の強調領域内のデータ部分、強調領域中の最大輝度値および最小輝度値の通知を受けると、バッファ401から符号化データを読み出し、強調部分検索手段403から通知された強調領域内のデータ部分の輝度値を、領域内の最大輝度値が輝度値としてとりうる最大値に、領域内の最小輝度値が輝度値としてとりうる最小値になるように輝度値を変換する。強調部分の輝度値が書き換えられた後、符号化データは通信手段101から指定配信先に送信される。 The maximum luminance value detecting unit 404 and the minimum luminance value detecting unit 405 respectively read the luminance value in the encoded data received from the emphasized portion searching unit 403, detect the maximum or minimum luminance value in the data, and the enhancement processing unit 402 Notify The enhancement conversion unit 402 includes a data portion in the enhancement region in the encoded data, a maximum luminance value and a minimum luminance in the enhancement region, respectively, from the enhancement portion search unit 403, the maximum luminance value detection unit 404, and the minimum luminance value detection unit 405. When the notification of the value is received, the encoded data is read from the buffer 401, and the luminance value of the data portion in the enhancement region notified from the enhancement portion search means 403 is the maximum value that the maximum luminance value in the region can take as the luminance value. Further, the luminance value is converted so that the minimum luminance value in the region becomes the minimum value that can be taken as the luminance value. After the brightness value of the emphasized portion is rewritten, the encoded data is transmitted from the communication unit 101 to the designated distribution destination.
以上により、第の実施形態の効果と同一の効果を奏すると共に、強調部分の最大輝度と最小輝度の差が最大になるように変換することができるため、強調部分のコントラストをより高くすることができるようになる。 As described above, the same effect as the effect of the first embodiment can be obtained, and the conversion can be performed so that the difference between the maximum luminance and the minimum luminance of the emphasized portion is maximized, so that the contrast of the emphasized portion can be further increased. become able to.
(C)変形例
上記各実施形態では、各強調変換部103−n(400)を並列に映像受信端末13−nと同じ数だけ配設したが、各映像受信端末13−nが要求する強調領域指定に対応できる数であればよい。たとえば、各映像受信端末13−nのうち通常半分程度しか強調領域を指定しないような場合は、それに対応して強調変換部103を映像受信端末13−nの半分程度設けるようにしてもよい。強調変換しない場合は、配信先に映像符号化手段104から受け取った符号化データをそのまま送信する。
(C) Modified Example In each of the above embodiments, the same number of emphasis conversion units 103-n (400) are arranged in parallel as the video receiving terminals 13-n, but the emphasis required by each video receiving terminal 13-n. Any number can be used as long as the area can be specified. For example, if only about half of each video receiving terminal 13-n is normally designated as an emphasis region, the
また、複数の映像受信端末13−nから同じ領域を強調領域として指定された場合は、それら複数の映像受信端末13−nに対して1つの強調変換部103を割り当て、各配信先として、同じ強調領域を指定している全ての映像受信端末13−nを指定するようにしても良い。
When the same area is designated as an emphasis area from a plurality of video receiving terminals 13-n, one
さらに、上記各実施形態では、各強調変換部103−n(400)を系列に複数設けたが、同時に全ての映像受信端末13−nにデータ配信をする必要がない場合には、1つの強調変換部103−n(400)で各映像受信端末13−nが要求している強調領域を順次変換処理して送信するようにしてもよい。 Further, in each of the above-described embodiments, a plurality of enhancement conversion units 103-n (400) are provided in a series. However, when it is not necessary to distribute data to all the video reception terminals 13-n at the same time, one enhancement is performed. The emphasis area requested by each video receiving terminal 13-n may be sequentially converted and transmitted by the conversion unit 103-n (400).
これの場合も、上記各実施形態同様の作用、効果を奏することができる。 Also in this case, the same operations and effects as the above-described embodiments can be achieved.
11:映像配信装置、12:ネットワーク、13:映像受信端末、101:通信手段、102:強調領域受付手段、103:強調変換部、104:映像符号化手段、105:符号化制御手段、106:映像入力手段、201:強調変換手段、202:強調部分検索手段、203:輝度値変換テーブル、301:通信手段、302:映像復号化手段、303:映像表示手段、304:領域指定手段、401:バッファ、402:強調変換手段、403:強調部分検索手段、404:最大輝度値検出手段、405:最小輝度値検出手段。 11: Video distribution device, 12: Network, 13: Video receiving terminal, 101: Communication means, 102: Emphasis area reception means, 103: Enhancement conversion section, 104: Video encoding means, 105: Encoding control means, 106: Video input means 201: Emphasis conversion means 202: Emphasis portion search means 203: Brightness value conversion table 301: Communication means 302: Video decoding means 303: Video display means 304: Area designation means 401: Buffer 402: Emphasis conversion means 403: Emphasis portion search means 404: Maximum brightness value detection means 405: Minimum brightness value detection means
Claims (14)
各映像受信端末毎に個別に指定された1または複数の映像データの強調領域をその配信先データと共に受け付ける強調領域受付工程と、
当該強調領域受付工程で受け付けた映像データのすべての強調領域を他の領域との依存関係を無くし、当該依存関係が残る領域を強調領域以外として、これらの符号化を行う映像符号化工程と、
当該映像符号化工程で符号化した符号化データを受け取って上記映像受信端末に指定された強調領域の強調変換を各映像受信端末毎に行う強調処理工程と、
当該強調処理工程で強調変換した符号化データを各映像受信端末を配信先として送信する通信工程と
を備えて構成されたことを特徴とする映像配信方法。 A video distribution method for distributing video data to be distributed by encoding the video data and emphasizing a specified area in the video,
An emphasis area receiving step for receiving an emphasis area of one or more video data individually designated for each video receiving terminal together with the distribution destination data;
A video encoding process for performing encoding of all the emphasized areas of the video data received in the emphasized area receiving process, with no dependency relationship with other areas, and setting the area where the dependency remains as other than the emphasized area,
An enhancement processing step of receiving the encoded data encoded in the video encoding step and performing enhancement conversion of the enhancement region designated in the video receiving terminal for each video receiving terminal;
A video distribution method comprising: a communication step of transmitting the encoded data emphasized and converted in the enhancement processing step to each video reception terminal as a distribution destination .
上記映像符号化工程が、上記強調領域受付工程で受け付けた強調領域を、他の領域と依存関係がなく、かつ輝度値の絶対値を単独で圧縮変換したデータが符号化データに含まれる符号化方法で符号化し、 Encoding in which the video encoding process includes the data that is obtained by compressing and converting the absolute value of the brightness value independently from the other areas, and the enhancement area received in the enhancement area receiving process is not dependent on other areas. Encoding with method
上記強調処理工程が、上記符号化データから強調変換する領域のデータを検索する第1工程と、当該第1工程で検索したデータをその領域が強調されるように変換する第2工程とを備え、上記第1工程で検索したデータの輝度値を書き換えることによりその領域を強調させることを特徴とする映像配信方法。 The enhancement processing step includes a first step of searching for data in a region to be enhanced and converted from the encoded data, and a second step of converting the data searched in the first step so that the region is emphasized. A video distribution method characterized in that the region is emphasized by rewriting the luminance value of the data searched in the first step.
上記強調領域に対する、他の領域との依存関係を無くして行う符号化方法がイントラ符号化であることを特徴とする映像配信方法。 A video distribution method, wherein the encoding method performed without eliminating the dependency relationship with other regions with respect to the enhancement region is intra coding.
上記強調処理工程の第2工程が輝度値変換テーブルに従って輝度値を変換することを特徴とする映像配信方法。 A video distribution method characterized in that the second step of the enhancement processing step converts a luminance value according to a luminance value conversion table.
上記強調処理工程の第1工程が、 The first step of the emphasis processing step is
上記映像符号化工程で符号化された符号化データを一時保存する記憶工程と、 A storage step of temporarily storing the encoded data encoded in the video encoding step;
上記強調変換する領域内の輝度値の最大値を検出する最大輝度値検出工程と、 A maximum luminance value detecting step for detecting a maximum value of luminance values in the region to be enhanced and converted;
上記強調変換する領域内の輝度値の最小値を検出する最小輝度値検出工程とを備え、 A minimum luminance value detecting step for detecting a minimum luminance value in the region to be enhanced and converted,
上記強調処理工程の第2工程が、強調変換する領域中の最大輝度値および最小輝度値をもとに輝度値を変換することを特徴とする映像配信方法。 A video distribution method, wherein the second step of the enhancement processing step converts the luminance value based on the maximum luminance value and the minimum luminance value in the region to be emphasized.
上記強調処理工程の第2工程が、上記強調変換する領域中の最大輝度が輝度値の取りうる最大値に、最小輝度値が輝度値の取りうる最小値になる比率で領域内の輝度値を変換することを特徴とする映像変換方法。 In the second step of the enhancement processing step, the luminance value in the region is set at a ratio such that the maximum luminance in the region to be enhanced and converted is the maximum value that the luminance value can take and the minimum luminance value is the minimum value that the luminance value can take. A video conversion method characterized by converting.
上記強調処理工程の第2工程が、上記強調変換する領域中の最小輝度値は変化が無く、強調変換する領域中の最大輝度が輝度値が取りうる最大値になる比率で領域内の輝度値を変換することを特徴とする映像変換方法。 In the second step of the enhancement processing step, the minimum luminance value in the region to be enhanced and converted does not change, and the luminance value in the region is a ratio at which the maximum luminance in the region to be enhanced and converted becomes the maximum value that the luminance value can take. A video conversion method characterized by converting video.
配信する映像の特定の領域内の輝度値の最小値を検出する最小輝度値検出工程を備えると共に、上記強調処理工程が、上記符号化データを一時保存する記憶工程と、上記強調変換する領域内の輝度値の最大値を検出する最大輝度値検出工程を備え、 A minimum luminance value detecting step for detecting a minimum value of luminance values in a specific area of the video to be distributed; and the emphasis processing step temporarily stores the encoded data; A maximum luminance value detecting step for detecting the maximum luminance value of
上記強調処理工程の第2工程が、配信映像の特定の領域内の最小輝度値は変化が無く、強調変換する領域中の最大輝度値が輝度値が取りうる最大値になる比率で当該強調変換する領域内の輝度値を変換することを特徴とする映像配信方法。 In the second step of the enhancement processing step, the minimum luminance value in a specific region of the distribution video is not changed, and the enhancement conversion is performed at a ratio at which the maximum luminance value in the region to be enhanced and converted becomes the maximum value that the luminance value can take. A video distribution method characterized by converting a luminance value in an area to be played.
各映像受信端末毎に個別に指定された1または複数の映像データの強調領域をその配信先データと共に受け付ける強調領域受付手段と、
当該強調領域受付手段で受け付けた映像データのすべての強調領域を他の領域との依存関係を無くして、当該依存関係が残る領域を強調領域以外として、これらを符号化するよう上記映像符号化手段を制御する符号化制御手段と、
当該符号化制御手段の制御に従って配信対象の映像データを符号化する映像符号化手段と、
上記映像符号化手段で符号化した符号化データを受け取って上記映像受信端末に指定された強調領域の強調変換を各映像受信端末毎に行う1または複数の強調処理部と、
当該強調処理部で強調変換した符号化データを各映像受信端末を配信先として送信する通信手段と
を備えて構成されたことを特徴とする映像配信装置。 A video distribution device that distributes video data to be distributed by encoding the video data and emphasizing a specified area in the video,
Emphasis area receiving means for receiving an emphasis area of one or a plurality of video data individually designated for each video receiving terminal together with the distribution destination data;
The video encoding means for encoding all the emphasized areas of the video data received by the emphasized area receiving means so as to eliminate the dependency relation with other areas and to set the remaining area as a non-emphasized area. Encoding control means for controlling
Video encoding means for encoding video data to be distributed according to the control of the encoding control means;
One or a plurality of enhancement processing units that receive encoded data encoded by the video encoding means and perform enhancement conversion of an enhancement region designated by the video receiving terminal for each video receiving terminal ;
A video distribution apparatus comprising: a communication unit configured to transmit encoded data emphasized and converted by the enhancement processing unit to each video reception terminal as a distribution destination .
上記符号化制御手段が、上記強調領域受付手段から通知された強調領域を、他の領域と依存関係がなく、かつ輝度値の絶対値を単独で圧縮変換したデータが符号化データに含まれる符号化方法で符号化するよう映像符号化手段を制御し、
上記強調処理部が、上記符号化データから強調変換する領域のデータを検索する強調部分検索手段と、当該強調部分検索手段が検索したデータをその領域が強調されるように変換する強調変換手段とを備え、上記強調部分検索手段が検索したデータの輝度値を書き換えることによりその領域を強調させることを特徴とする映像配信装置。 The video distribution apparatus according to claim 9 , wherein
A code in which encoded data includes data obtained by compression-converting the absolute value of the luminance value independently from the other area, and the encoded area is not dependent on the emphasized area notified from the emphasized area receiving unit. Controlling the video encoding means to encode with the encoding method,
An emphasis partial search means for searching for data in a region to be emphasized from the encoded data, and an emphasis conversion means for converting the data searched by the emphasized partial search means so that the region is emphasized. A video distribution apparatus characterized in that the region is emphasized by rewriting the luminance value of the data searched by the emphasized portion search means.
上記強調領域に対する、他の領域との依存関係を無くして行う符号化方法がイントラ符号化であることを特徴とする映像配信装置。 A video distribution apparatus characterized in that an encoding method performed with no dependency on other regions with respect to the enhancement region is intra coding.
上記強調処理部が、
上記映像符号化手段で符号化された符号化データを一時保存する記憶手段と、
上記強調変換する領域内の輝度値の最大値を検出する最大輝度値検出手段と、
上記強調変換する領域内の輝度値の最小値を検出する最小輝度値検出手段とを備え、
上記強調変換手段が、強調変換する領域中の最大輝度値および最小輝度値をもとに輝度値を変換することを特徴とする映像配信装置。 The video distribution device according to claim 10 ,
The emphasis processing unit
Storage means for temporarily storing the encoded data encoded by the video encoding means;
Maximum brightness value detecting means for detecting the maximum brightness value in the region to be enhanced and converted;
A minimum luminance value detecting means for detecting a minimum luminance value in the region to be enhanced and converted,
A video distribution apparatus, wherein the enhancement conversion means converts a luminance value based on a maximum luminance value and a minimum luminance value in a region to be emphasized.
配信する映像の特定の領域内の輝度値の最小値を検出する最小輝度値検出手段を備えると共に、上記強調処理部が、上記符号化データを一時保存する記憶手段と、上記強調変換する領域内の輝度値の最大値を検出する最大輝度値検出手段を備え、
上記強調変換手段が、配信映像の特定の領域内の最小輝度値は変化が無く、強調変換する領域中の最大輝度値が輝度値が取りうる最大値になる比率で当該強調変換する領域内の輝度値を変換することを特徴とする映像配信装置。 The video distribution device according to claim 10 ,
A minimum luminance value detecting means for detecting a minimum luminance value in a specific area of the video to be distributed; and a storage means for temporarily storing the encoded data; A maximum brightness value detecting means for detecting the maximum value of the brightness value of
The enhancement conversion means does not change the minimum luminance value in the specific area of the distribution video, and the ratio of the maximum luminance value in the area to be emphasized and converted to the maximum value that can be taken by the luminance value. A video distribution apparatus for converting a luminance value.
当該映像配信装置で配信される映像中の任意の領域を指定する手段を持つ映像受信端末とを備えて構成されたことを特徴とする映像配信システム。 A video distribution device according to any one of claims 9 to 13 ,
A video distribution system comprising: a video receiving terminal having means for designating an arbitrary area in a video distributed by the video distribution apparatus.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004113564A JP4501508B2 (en) | 2004-04-07 | 2004-04-07 | VIDEO DISTRIBUTION METHOD, VIDEO DISTRIBUTION DEVICE, AND VIDEO DISTRIBUTION SYSTEM |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004113564A JP4501508B2 (en) | 2004-04-07 | 2004-04-07 | VIDEO DISTRIBUTION METHOD, VIDEO DISTRIBUTION DEVICE, AND VIDEO DISTRIBUTION SYSTEM |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005303469A JP2005303469A (en) | 2005-10-27 |
JP4501508B2 true JP4501508B2 (en) | 2010-07-14 |
Family
ID=35334511
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004113564A Expired - Fee Related JP4501508B2 (en) | 2004-04-07 | 2004-04-07 | VIDEO DISTRIBUTION METHOD, VIDEO DISTRIBUTION DEVICE, AND VIDEO DISTRIBUTION SYSTEM |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4501508B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014216831A (en) * | 2013-04-25 | 2014-11-17 | 株式会社東芝 | Encoding device and remote monitoring system |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001052145A (en) * | 1999-08-10 | 2001-02-23 | Fuji Photo Film Co Ltd | Device and method for processing image and recording medium |
JP2001054010A (en) * | 1999-08-10 | 2001-02-23 | Fuji Photo Film Co Ltd | Photographing device, photographing method and recording medium |
JP2002016920A (en) * | 1999-08-09 | 2002-01-18 | Sony Corp | Transmission device and transmission method, receiving device and receiving method, transmitting-receiving device and transmitting-receiving method, recording medium, and signal |
-
2004
- 2004-04-07 JP JP2004113564A patent/JP4501508B2/en not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002016920A (en) * | 1999-08-09 | 2002-01-18 | Sony Corp | Transmission device and transmission method, receiving device and receiving method, transmitting-receiving device and transmitting-receiving method, recording medium, and signal |
JP2001052145A (en) * | 1999-08-10 | 2001-02-23 | Fuji Photo Film Co Ltd | Device and method for processing image and recording medium |
JP2001054010A (en) * | 1999-08-10 | 2001-02-23 | Fuji Photo Film Co Ltd | Photographing device, photographing method and recording medium |
Also Published As
Publication number | Publication date |
---|---|
JP2005303469A (en) | 2005-10-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5051087B2 (en) | Lossless compression coding apparatus and lossless decoding apparatus | |
KR101781776B1 (en) | Encoder and decoder | |
JP4797009B2 (en) | Prediction mode information encoding method, prediction mode information decoding method, these devices, their programs, and computer-readable recording media | |
JP4522199B2 (en) | Image encoding apparatus, image processing apparatus, control method therefor, computer program, and computer-readable storage medium | |
TW241350B (en) | ||
US8682091B2 (en) | Real-time image compression | |
JP2005191939A (en) | Image compression apparatus and program for generating predicted difference compressed data of fixed bit length, and, image expansion apparatus, image expansion program, and electronic camera | |
WO2001022734A1 (en) | Image encoding device | |
JPH06253339A (en) | First encoder for encoding first digital signal, second encoder for encoding second digital signal, and coded digital signal decoding system comprising at least one decoder, and encoder and decoder for using in the system | |
JP2004241869A (en) | Watermark embedding and image compressing section | |
JP2010087873A (en) | Lossless compression encoding device and decoding device for image data | |
JP4501508B2 (en) | VIDEO DISTRIBUTION METHOD, VIDEO DISTRIBUTION DEVICE, AND VIDEO DISTRIBUTION SYSTEM | |
JPH0787491A (en) | Quantization device, inverse quantization device, picture processing unit and quantization method, reversed quantization method and picture processing method | |
JP2001245291A (en) | Image communication system | |
EP1641269A1 (en) | Image encoding device and image encoding method | |
JPH09205647A (en) | Image coder, image decoder and image processor | |
JP2002010265A (en) | Transmitting device and its method and receiving device and it method | |
JP2001285622A (en) | Imbedding device and imbedding method, decoder and decoding method, and recording medium | |
JP4795141B2 (en) | Video coding / synthesizing apparatus, video coding / synthesizing method, and video transmission system | |
JP3470763B2 (en) | Image encoding and decoding device | |
JPH09116759A (en) | Image decoder and image coding decoding system | |
JPH0833000A (en) | Method and device for video transmission | |
JP2008532405A (en) | Adaptive fallback system for MPEG decoder | |
JP2005027080A (en) | Data processor, data processing system, data processing method, and program | |
JP4133678B2 (en) | Image encoding device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20061212 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090915 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100105 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100308 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100330 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100412 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4501508 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130430 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130430 Year of fee payment: 3 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130430 Year of fee payment: 3 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140430 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |