JP6673424B2 - Signal processing device, signal processing method, and camera system - Google Patents
Signal processing device, signal processing method, and camera system Download PDFInfo
- Publication number
- JP6673424B2 JP6673424B2 JP2018188590A JP2018188590A JP6673424B2 JP 6673424 B2 JP6673424 B2 JP 6673424B2 JP 2018188590 A JP2018188590 A JP 2018188590A JP 2018188590 A JP2018188590 A JP 2018188590A JP 6673424 B2 JP6673424 B2 JP 6673424B2
- Authority
- JP
- Japan
- Prior art keywords
- luminance
- video signal
- value
- dynamic range
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Indication In Cameras, And Counting Of Exposures (AREA)
- Studio Devices (AREA)
Description
本技術は、信号処理装置、信号処理方法およびカメラシステムに関し、詳しくは、ハイダイナミックレンジ映像信号の輝度評価を行うための信号処理装置等に関する。
The present technology relates to a signal processing device, a signal processing method, and a camera system, and more particularly, to a signal processing device and the like for performing luminance evaluation of a high dynamic range video signal.
０％から１００％の輝度レベル範囲を持つ通常ダイナミックレンジ（ＳＤＲ：Standard Dynamic Range）の映像信号に対して、ハイダイナミックレンジ（ＨＤＲ：High Dynamic Range）の映像信号は０％から１００％＊Ｎ（Ｎは１より大きい数）の輝度レベル範囲を持っている。従来、撮像映像信号としてＨＤＲ映像信号を出力するカメラが知られている（例えば、特許文献１参照）。 For a video signal of a standard dynamic range (SDR) having a luminance level range of 0% to 100%, a video signal of a high dynamic range (HDR) is 0% to 100% * N ( N is a number greater than 1). 2. Description of the Related Art Conventionally, a camera that outputs an HDR video signal as a captured video signal has been known (for example, see Patent Document 1).
カメラのアイリス（Iris）調整は、モニターや、波形モニターを監視しながら、ＶＥ（Video Engineer）が手動で調整するのが、一般的なオペレーションである。しかし、ＨＤＲ映像信号の場合、上限に余裕がある分、輝度レベルを一定に保つための基準設定がしにくく、周囲環境等の影響を受けながら人間の感覚だけで輝度レベルを適切に調整するのは困難である。放送では、カットのつながりや、番組の互換性などを考慮して、視聴側で違和感が出ない様な輝度調整が必要となる。 It is a general operation to adjust the iris of a camera manually by a VE (Video Engineer) while monitoring a monitor or a waveform monitor. However, in the case of an HDR video signal, it is difficult to set a reference for keeping the luminance level constant because the upper limit has a margin, and it is difficult to appropriately adjust the luminance level only by human sense while being affected by the surrounding environment. It is difficult. In broadcasting, it is necessary to adjust brightness so that the viewer does not feel uncomfortable in consideration of the connection between cuts and the compatibility of programs.
本技術の目的は、ユーザがＨＤＲ映像信号の輝度評価を容易かつ適切に行い得るようにすることにある。 An object of the present technology is to enable a user to easily and appropriately evaluate the luminance of an HDR video signal.
本技術の概念は、
ハイダイナミックレンジ映像信号を処理することにより輝度評価値を算出する処理部と、
上記算出された輝度評価値を表示部に表示する制御部を備える
評価装置にある。
The concept of this technology is
A processing unit that calculates a luminance evaluation value by processing the high dynamic range video signal;
An evaluation device includes a control unit that displays the calculated luminance evaluation value on a display unit.
本技術において、処理部により、ハイダイナミックレンジ映像信号が処理されることにより輝度評価値が算出される。そして、制御部により、処理部で算出された輝度評価値が表示部に表示される。 In the present technology, the processing section calculates the luminance evaluation value by processing the high dynamic range video signal. Then, the brightness evaluation value calculated by the processing unit is displayed on the display unit by the control unit.
例えば、処理部は、リニアなハイダイナミックレンジ映像信号を用い、輝度評価値として全画面に対する輝度の平均値を算出される、ようにされてもよい。 For example, the processing unit may use a linear high dynamic range video signal and calculate an average value of luminance for the entire screen as a luminance evaluation value.
また、例えば、階調圧縮処理されたハイダイナミックレンジ映像信号を用い、輝度評価値として全画面に対する輝度の平均値を算出する、ようにされてもよい。この場合、例えば、処理部は、全画面に対する輝度の平均値を、輝度１００％相当のコード値を基準値とした比率として算出する、ようにされてもよい。また、この場合、例えば、処理部は、全画面に対する輝度の平均値を、圧縮処理がされる前の輝度値への換算値として算出する、ようにされてもよい。 Further, for example, an average value of luminance for the entire screen may be calculated as a luminance evaluation value using a high dynamic range video signal subjected to gradation compression processing. In this case, for example, the processing unit may calculate the average value of the luminance for the entire screen as a ratio using a code value equivalent to luminance 100% as a reference value. In this case, for example, the processing unit may calculate the average value of the luminance for the entire screen as a conversion value to the luminance value before the compression processing is performed.
また、例えば、処理部は、リニアな、あるいは階調圧縮処理されたハイダイナミックレンジ映像信号を用い、輝度評価値として一定の輝度レベル以上のエリアが全画面中に占める割合を算出する、ようにされてもよい。 Also, for example, the processing unit uses a high-dynamic range video signal that has been subjected to linear or gradation compression processing, and calculates the ratio of an area having a certain luminance level or higher to the entire screen as a luminance evaluation value. May be done.
また、例えば、処理部は、リニアなハイダイナミックレンジ映像信号を用い、輝度評価値として一定の輝度レベル以上のエリアに対する輝度の平均値を算出する、ようにされてもよい。また、例えば、処理部は、階調圧縮処理されたハイダイナミックレンジ映像信号を用い、輝度評価値として一定の輝度レベル以上のエリアに対する輝度の平均値を算出する、ようにされてもよい。 Further, for example, the processing unit may be configured to calculate an average luminance value for an area having a luminance level or higher as a luminance evaluation value using a linear high dynamic range video signal. Further, for example, the processing unit may calculate an average luminance value for an area having a luminance level equal to or higher than a predetermined luminance level as a luminance evaluation value, using the high dynamic range video signal subjected to the gradation compression processing.
また、例えば、処理部は、リニアなハイダイナミックレンジ映像信号を用い、輝度評価値として、一定の輝度レベル以上のエリアが全画面中に占める割合とこのエリアに対する輝度の平均値との積値を算出する、ようにされてもよい。また、例えば、処理部は、階調圧縮処理されたハイダイナミックレンジ映像信号を用い、輝度評価値として、一定の輝度レベル以上のエリアが全画面中に占める割合とこのエリアに対する輝度の平均値との積値を算出する、ようにされてもよい。 Further, for example, the processing unit uses a linear high dynamic range video signal, and as a luminance evaluation value, calculates a product value of a ratio of an area having a luminance level equal to or higher than a predetermined luminance level to the entire screen and an average luminance value for this area. It may be calculated. Further, for example, the processing unit uses a high dynamic range video signal subjected to gradation compression processing, and as a luminance evaluation value, a ratio of an area having a certain luminance level or higher to the entire screen and an average value of luminance for this area. May be calculated.
また、本技術の他の概念は、
リニアなハイダイナミックレンジ映像信号を得る撮像部と、
上記撮像部で得られたリニアなハイダイナミックレンジ映像信号および/または該リニアなハイダイナミックレンジ映像信号に階調圧縮処理を施して得られたハイダイナミックレンジ映像信号を処理することにより輝度評価値を算出する処理部と、
上記算出された輝度評価値を表示部に表示する制御部を備える
カメラシステムにある。
Another concept of the present technology is
An imaging unit for obtaining a linear high dynamic range video signal;
The luminance evaluation value is obtained by processing the linear high dynamic range video signal obtained by the imaging unit and / or the high dynamic range video signal obtained by performing the gradation compression process on the linear high dynamic range video signal. A processing unit for calculating,
The camera system includes a control unit that displays the calculated luminance evaluation value on a display unit.
本技術において、撮像部により、リニアなハイダイナミックレンジ映像信号が得られる。処理部により、このリニアなハイダイナミックレンジ映像信号および/またはこのリニアなハイダイナミックレンジ映像信号に階調圧縮処理を施して得られたハイダイナミックレンジ映像信号が処理されることにより輝度評価値が算出される。制御部により、この輝度評価値が表示部に表示される。 In the present technology, a linear high dynamic range video signal is obtained by the imaging unit. A luminance evaluation value is calculated by processing the linear high dynamic range video signal and / or the high dynamic range video signal obtained by performing a gradation compression process on the linear high dynamic range video signal. Is done. The brightness evaluation value is displayed on the display unit by the control unit.
本技術によれば、ユーザはＨＤＲ映像信号の輝度評価を容易かつ適切に行い得る。なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。 According to the present technology, a user can easily and appropriately perform luminance evaluation of an HDR video signal. It should be noted that the effects described in the present specification are merely examples and are not limited, and may have additional effects.
以下、発明を実施するための形態（以下、「実施の形態」とする）について説明する。なお、説明を以下の順序で行う。
１．第１の実施の形態
２．第２の実施の形態
３．変形例
Hereinafter, embodiments for carrying out the invention (hereinafter, referred to as “embodiments”) will be described. The description will be made in the following order.
1. 1. First embodiment Second embodiment3. Modified example
＜１．第１の実施の形態＞
［カメラシステムの構成例］
図１は、実施の形態としてのカメラシステム１０の構成例を示している。このカメラシステム１０は、カメラ１００で得られた撮像映像信号としてのリニアなハイダイナミックレンジ（ＨＤＲ）映像信号が信号処理ユニットとしてのベースバンド・プロセッサ・ユニット（ＢＰＵ：Baseband Processor Unit）２００に伝送される構成となっている。ここで、リニアとは階調圧縮処理が行われていないことを意味する。
<1. First Embodiment>
[Configuration example of camera system]
FIG. 1 shows a configuration example of a camera system 10 as an embodiment. In the camera system 10, a linear high dynamic range (HDR) video signal as an imaged video signal obtained by the camera 100 is transmitted to a baseband processor unit (BPU) 200 as a signal processing unit. Configuration. Here, linear means that the gradation compression processing is not performed.
カメラ１００は、撮像部１０１と、プリプロセス（Pre-Process）部１０２と、伝送部１０３を有している。撮像部１０１は、例えば、解像度が４ＫあるいはＨＤのイメージセンサを持ち、撮像映像信号としてＨＤＲ映像信号を出力する。プリプロセス部１０２は、例えばＦＰＧＡやＡＳＩＣ等の回路で構成されるプロセッサであり、撮像部１０１から出力されるＨＤＲ映像信号に対して、レンズなどの光学系の補正処理や、イメージセンサのばらつきなどから生じる傷補正処理などを行う。伝送部１０３は、通信インタフェースを有する回路であり、プリプロセス部１０２で処理されたＨＤＲ映像信号をＢＰＵ２００に送信する。 The camera 100 includes an imaging unit 101, a pre-process (Pre-Process) unit 102, and a transmission unit 103. The imaging unit 101 has, for example, an image sensor with a resolution of 4K or HD and outputs an HDR video signal as a captured video signal. The pre-processing unit 102 is a processor including, for example, a circuit such as an FPGA and an ASIC. And a flaw correction process resulting from the above. The transmission unit 103 is a circuit having a communication interface, and transmits the HDR video signal processed by the preprocessing unit 102 to the BPU 200.
ＢＰＵ２００は、伝送部２０１と、ＨＤＲカメラプロセス（HDR CAM Process）部２０２と、ＳＤＲカメラプロセス（SDR CAM Process）部２０３を有している。伝送部２０１は、通信インタフェースを有する回路であり、カメラ１００から送られてくるリニアなＨＤＲ映像信号を受信する。ＨＤＲカメラプロセス部２０２は、例えばＦＰＧＡやＡＳＩＣ等の回路で構成されるプロセッサであり、伝送部２０１で受信されたリニアなＨＤＲ映像信号に対して色域変換、ディテール（輪郭）補正、階調圧縮などの処理を行って出力ＨＤＲ映像信号（HDR Video）を得る。ここでの階調圧縮処理は、ＨＤＲ用の光電気伝達関数（Optical-Electro Transfer Function,OETF）を用いてリニア領域からビット長圧縮をする階調圧縮処理を意味する。ＳＤＲカメラプロセス部２０３は、例えばＦＰＧＡやＡＳＩＣ等の回路で構成されるプロセッサであり、伝送部２０１で受信されたリニアなＨＤＲ映像信号に対して色域変換、ニー補正、ディテール（輪郭）補正、階調圧縮などの処理を行って出力ＳＤＲ映像信号（SDR Video）を得る。ここでの階調圧縮処理は、ＳＤＲ用の光電気伝達関数（例えばガンマ特性）を用いてリニア領域からビット長圧縮をする階調圧縮処理を意味する。 The BPU 200 includes a transmission unit 201, an HDR CAM process unit 202, and an SDR camera process (SDR CAM Process) unit 203. The transmission unit 201 is a circuit having a communication interface, and receives a linear HDR video signal transmitted from the camera 100. The HDR camera process unit 202 is a processor including, for example, a circuit such as an FPGA or an ASIC, and performs color gamut conversion, detail (contour) correction, and gradation compression on the linear HDR video signal received by the transmission unit 201. And the like to obtain an output HDR video signal (HDR Video). Here, the gradation compression processing means a gradation compression processing of performing bit length compression from a linear area using an optical-electro transfer function (OETF) for HDR. The SDR camera process unit 203 is a processor including a circuit such as an FPGA or an ASIC, and performs color gamut conversion, knee correction, detail (contour) correction, and the like on the linear HDR video signal received by the transmission unit 201. An output SDR video signal (SDR Video) is obtained by performing processing such as gradation compression. Here, the gradation compression processing means a gradation compression processing of performing bit length compression from a linear region using a photoelectric transfer function (for example, gamma characteristic) for SDR.
この実施の形態において、ＢＰＵ２００は、ＨＤＲ映像信号を処理して、輝度評価値を算出して表示部に表示する。輝度評価値には、例えば、以下の（１）−（７）が含まれる。 In this embodiment, the BPU 200 processes the HDR video signal, calculates a luminance evaluation value, and displays the luminance evaluation value on the display unit. The luminance evaluation value includes, for example, the following (1) to (7).
（１）リニアなＨＤＲ映像信号（階調圧縮処理前のＨＤＲ映像信号）を用いて算出される、全画面に対する輝度の平均値である輝度平均値（ＡＰＬ：Average Picture Level）。
（２）階調圧縮処理されたＨＤＲ映像信号（階調圧縮処理後のＨＤＲ映像信号）を用いて算出される、全画面に対する輝度の平均値である輝度平均値（Ｖ_ＡＰＬ：Visual Average Picture Level）。この輝度平均値（Ｖ_ＡＰＬ）は、人間の感じる明るさ感に近い数値で得られる。従って、この場合、人間の感じる明るさ感に近い数値にて全画面に対する輝度の平均値を求めることが可能となる。
(1) An average luminance level (APL: Average Picture Level), which is an average luminance value over the entire screen, calculated using a linear HDR video signal (an HDR video signal before gradation compression processing).
(2) A luminance average value (V_APL: Visual Average Picture Level) which is an average luminance value over the entire screen, calculated using an HDR video signal subjected to gradation compression processing (an HDR video signal after gradation compression processing). . This luminance average value (V_APL) is obtained as a numerical value close to the feeling of brightness felt by humans. Therefore, in this case, it is possible to obtain the average value of the luminance for the entire screen with a numerical value close to the feeling of brightness felt by a human.
（３）リニアなＨＤＲ映像信号、あるいは階調圧縮処理されたＨＤＲ映像信号を用いて算出される、一定の輝度レベル以上のエリアが全画面中に占める割合である高輝度シェア率（ＨＬ_Ｒａｔｉｏ：High Light Share Ratio）。
（４）リニアなＨＤＲ映像信号を用いて算出される、一定の輝度レベル以上のエリアに対する輝度の平均値である高輝度平均値(ＨＬ_ＡＰＬ：High Light Average Picture Level)。
（５）階調圧縮処理されたＨＤＲ映像信号を用いて算出される、一定の輝度レベル以上のエリアに対する輝度の平均値である高輝度平均値(ＨＬ_Ｖ_ＡＰＬ：High Light Visual Average Picture Level)。
(3) A high luminance share ratio (HL_Ratio: High), which is a ratio calculated by using a linear HDR video signal or an HDR video signal that has been subjected to gradation compression processing, that is, a ratio of an area having a certain luminance level or more to the entire screen. Light Share Ratio).
(4) A high luminance average value (HL_APL: High Light Average Picture Level), which is an average luminance value for an area having a luminance level equal to or higher than a certain luminance level, calculated using a linear HDR video signal.
(5) A high luminance average value (HL_V_APL: High Light Visual Average Picture Level) which is an average value of luminance for an area having a certain luminance level or higher, which is calculated using the HDR video signal subjected to the gradation compression processing.
（６）リニアなＨＤＲ映像信号を用いて算出される、高輝度シェア率（ＨＬ_Ｒａｔｉｏ）と高輝度平均値(ＨＬ_ＡＰＬ)との積値（［ＨＬ_ＥＮＧ］）。
（７）階調圧縮処理されたＨＤＲ映像信号を用いて算出される、高輝度シェア率（ＨＬ_Ｒａｔｉｏ）と高輝度平均値(ＨＬ_Ｖ_ＡＰＬ)との積値（ＨＬ_ＢＬＴ）。
(6) The product value ([HL_ENG]) of the high luminance share rate (HL_Ratio) and the high luminance average value (HL_APL) calculated using the linear HDR video signal.
(7) A product value (HL_BLT) of the high luminance share ratio (HL_Ratio) and the high luminance average value (HL_V_APL), which is calculated using the HDR video signal subjected to the gradation compression processing.
図２は、ＢＰＵ２００における輝度評価値の算出および表示に係る部分の構成例を示している。ＣＰＵ２０４は、制御プログラムに基づいてＢＰＵ２００の各部を制御するものであって、輝度評価値の算出部および輝度評価値の表示制御部も構成する。 FIG. 2 illustrates a configuration example of a part related to calculation and display of a luminance evaluation value in the BPU 200. The CPU 204 controls each unit of the BPU 200 based on the control program, and also configures a luminance evaluation value calculation unit and a luminance evaluation value display control unit.
ＨＤＲカメラプロセス部２０２は、リニアマトリクス部２１１と、ディテール部２１２と、ＯＥＴＦ（Optical-Electro Transfer Function）部２１３と、ＲＧＢ/Ｙ色差変換部２１４を有している。リニアマトリクス部２１１は、伝送部２０１（図１参照）で受信されたリニアなＨＤＲ映像信号（Linear HDR Video）に色域変換の処理をする。ディテール部２１２は、リニアマトリクス部２１１から出力されるＨＤＲ映像信号にディテール（輪郭）補正の処理をする。 The HDR camera process unit 202 includes a linear matrix unit 211, a detail unit 212, an OETF (Optical-Electro Transfer Function) unit 213, and an RGB / Y color difference conversion unit 214. The linear matrix unit 211 performs a color gamut conversion process on the linear HDR video signal (Linear HDR Video) received by the transmission unit 201 (see FIG. 1). The detail unit 212 performs a detail (contour) correction process on the HDR video signal output from the linear matrix unit 211.
ＯＥＴＦ部２１３は、ディテール部２１２から出力されるＨＤＲ映像信号に階調圧縮処理、つまりＨＤＲ用の光電気伝達関数を用いて、リニア領域からビット長圧縮をする階調圧縮処理を行う。この階調圧縮処理により、ＨＤＲ映像信号は、ログカーブ特性で階調圧縮処理されたものとなる。ここでログカーブ特性とは対数関数そのものだけではなく、低域輝度の階調が密で、高域輝度の階調が疎になるような特性のカーブのことを言い、例えば、ＨＬＧ（Hybrid Log-Gamma）特性、ＰＱ（Perceptual Quantizer）カーブ特性、Ｓ−ＬＯＧ３特性などがある。ＲＧＢ/Ｙ色差変換部２１４は、ＯＥＴＦ部２１３から出力されるＨＤＲ映像信号を、ＲＧＢドメインからＹ色差ドメインに変換して出力ＨＤＲ映像信号（HDR Video）を得る。 The OETF unit 213 performs a gradation compression process on the HDR video signal output from the detail unit 212, that is, a gradation compression process of performing bit length compression from a linear region using an HDR photoelectric transfer function. By this gradation compression processing, the HDR video signal is subjected to gradation compression processing with log curve characteristics. Here, the log curve characteristic refers not only to the logarithmic function itself, but also to a curve having characteristics such that the gradation of low-frequency luminance is dense and the gradation of high-frequency luminance is sparse. For example, HLG (Hybrid Log- Gamma) characteristic, PQ (Perceptual Quantizer) curve characteristic, S-LOG3 characteristic and the like. The RGB / Y color difference conversion unit 214 converts the HDR video signal output from the OETF unit 213 from the RGB domain to the Y color difference domain to obtain an output HDR video signal (HDR Video).
マトリクスＹ（Matrix-Y）部２０５は、リニアマトリクス部２１１から出力されるＨＤＲ映像信号（ＲＧＢドメイン）をマトリクス処理して輝度信号Ｙ´を得る。ＣＰＵ２０４は、マトリクスＹ部２０５で得られる輝度信号Ｙ´を用いて、上述した輝度評価値としての、輝度平均値（ＡＰＬ）、高輝度シェア率（ＨＬ_Ｒａｔｉｏ）、高輝度平均値（ＨＬ_ＡＰＬ）および積値（ＨＬ_ＥＮＧ）を算出する。 The matrix Y (Matrix-Y) unit 205 performs a matrix process on the HDR video signal (RGB domain) output from the linear matrix unit 211 to obtain a luminance signal Y ′. The CPU 204 uses the luminance signal Y ′ obtained by the matrix Y unit 205 to obtain the above-described luminance average value (APL), high luminance share rate (HL_Ratio), high luminance average value (HL_APL), and product The value (HL_ENG) is calculated.
この場合、ＣＰＵ２０４は、以下の数式（１）に基づいて、輝度平均値（ＡＰＬ）を算出する。ここで、「Σ（Ｙ´i）」は、全画面画素の輝度信号（画素信号）の和を示す。この輝度平均値（ＡＰＬ）の表記の単位には、例えば、ダイナミックレンジの％表記が使用される。なお、ダイナミックレンジの％表記は、ＳＤＲの輝度範囲を０％〜１００％とした時の％数値による表記を意味する。
ＡＰＬ＝Σ（Ｙ´i）/全画面画素数 ・・・（１）
In this case, the CPU 204 calculates the average luminance value (APL) based on the following equation (1). Here, “Σ (Y′i)” indicates the sum of the luminance signals (pixel signals) of all the screen pixels. As a unit of the notation of the average brightness value (APL), for example, a notation of% of a dynamic range is used. The notation of% of the dynamic range means the notation of the numerical value of% when the luminance range of SDR is set to 0% to 100%.
APL = Σ (Y′i) / number of pixels on the entire screen (1)
また、この場合、ＣＰＵ２０４は、以下の数式（２）に基づいて、高輝度シェア率（ＨＬ_Ｒａｔｉｏ）を算出する。ここで、「ＣＯＵＮＴ［Ｙ´≧ａ］」は、全画面画素のうち“ａ”以上の輝度レベルを持つ画素の数を示す。
ＨＬ_Ｒａｔｉｏ＝ＣＯＵＮＴ［Ｙ´≧ａ］/全画面画素数 ・・・（２）
In this case, the CPU 204 calculates the high luminance share rate (HL_Ratio) based on the following equation (2). Here, “COUNT [Y ′ ≧ a]” indicates the number of pixels having a luminance level equal to or higher than “a” among all the screen pixels.
HL_Ratio = COUNT [Y ′ ≧ a] / number of pixels on the entire screen (2)
また、この場合、ＣＰＵ２０４は、以下の数式（３）に基づいて、高輝度平均値（ＨＬ_ＡＰＬ）を算出する。ここで、ここで、「Σ（Ｙ´HL）」は、“ａ”以上の輝度レベルを持つ画素の輝度信号（画素信号）の和を示す。この高輝度平均値（ＨＬ_ＡＰＬ）の表記の単位には、例えば、ダイナミックレンジの％表記が使用される。
ＨＬ_ＡＰＬ＝Σ（Ｙ´HL）/ＣＯＵＮＴ［Ｙ´≧ａ］ ・・・（３）
In this case, the CPU 204 calculates the high luminance average value (HL_APL) based on the following equation (3). Here, “Σ (Y′HL)” indicates the sum of luminance signals (pixel signals) of pixels having a luminance level equal to or higher than “a”. As a unit of the notation of the high luminance average value (HL_APL), for example, a notation of% of a dynamic range is used.
HL_APL = Σ (Y′HL) / COUNT [Y ′ ≧ a] (3)
また、この場合、ＣＰＵ２０４は、以下の数式（４）に基づいて、積値（ＨＬ_ＥＮＧ）を算出する。
ＨＬ_ＥＮＧ＝［ＨＬ_Ｒａｔｉｏ］＊［ＨＬ_ＡＰＬ］ ・・・（４）
In this case, the CPU 204 calculates the product value (HL_ENG) based on the following equation (4).
HL_ENG = [HL_Ratio] * [HL_APL] (4)
また、ＣＰＵ２０４は、ＲＧＢ/Ｙ色差変換部２１４から出力されるＨＤＲ映像信号（Ｙ色差ドメイン）に含まれる輝度信号Ｙ(１０bit/１２bitコード)を用いて、上述した輝度評価値としての、輝度平均値（Ｖ_ＡＰＬ）、高輝度シェア率（ＨＬ_Ｒａｔｉｏ）、高輝度平均値（ＨＬ_Ｖ_ＡＰＬ）および積値（ＨＬ_ＢＬＴ）を算出する。 Also, the CPU 204 uses the luminance signal Y (10-bit / 12-bit code) included in the HDR video signal (Y-color difference domain) output from the RGB / Y color-difference conversion unit 214 to calculate the luminance average as the above-described luminance evaluation value. A value (V_APL), a high luminance share rate (HL_Ratio), a high luminance average value (HL_V_APL), and a product value (HL_BLT) are calculated.
この場合、ＣＰＵ２０４は、以下の数式（５）に基づいて、輝度平均値（Ｖ_ＡＰＬ）を算出する。ここで、「Σ（Ｙi）」は、全画面画素の輝度信号（画素信号）の和を示す。
Ｖ_ＡＰＬ＝Σ（Ｙi）/全画面画素数 ・・・（５）
In this case, the CPU 204 calculates an average luminance value (V_APL) based on the following equation (5). Here, “Σ (Yi)” indicates the sum of luminance signals (pixel signals) of all the screen pixels.
V_APL = Σ (Yi) / number of pixels on the entire screen (5)
この輝度平均値（Ｖ_ＡＰＬ）の表記の単位は、例えば、輝度１００％相当のコード値を基準コード値にした比率とされる。この場合、ＣＰＵ２０４は、以下の数式（６）に基づいて、比率を算出する。
Ｖ_ＡＰＬ＝｛[Ｖ_ＡＰＬ]−［黒コード値]｝/［基準コード値］ ・・・（６）
The unit of the notation of the luminance average value (V_APL) is, for example, a ratio in which a code value corresponding to luminance 100% is set as a reference code value. In this case, the CPU 204 calculates the ratio based on the following equation (6).
V_APL = {[V_APL] − [black code value]} / [reference code value] (6)
例えば、ログカーブ特性がＨＬＧ特性である場合、輝度１００％相当のコード値は［１Ｆ６ｈ］であり、輝度０％相当のコード値である黒コード値は［０４０ｈ］であり、基準コード値は［１Ｆ６ｈ−０４０ｈ］である。また、例えば、ログカーブ特性がＰＱカーブ特性である場合、輝度１００％相当のコード値は［１ＦＤｈ］であり、輝度０％相当のコード値である黒コード値は［０４０ｈ］であり、基準コード値は［１ＦＤｈ−０４０ｈ］である。また、例えば、ログカーブ特性がＳ−ＬＯＧ３特性である場合、輝度１００％相当のコード値は［２５６ｈ］であり、輝度０％相当のコード値である黒コード値は［０５Ｆｈ］であり、基準コード値は［２５６ｈ−０５Ｆｈ］である。 For example, when the log curve characteristic is the HLG characteristic, the code value corresponding to 100% luminance is [1F6h], the black code value corresponding to the code value corresponding to 0% luminance is [040h], and the reference code value is [1F6h]. -040h]. For example, when the log curve characteristic is the PQ curve characteristic, the code value corresponding to 100% luminance is [1FDh], the black code value corresponding to 0% luminance is [040h], and the reference code value is Is [1FDh-040h]. For example, when the log curve characteristic is the S-LOG3 characteristic, the code value corresponding to 100% luminance is [256h], the black code value corresponding to 0% luminance is [05Fh], and the reference code is The value is [256h-05Fh].
また、この輝度平均値（Ｖ_ＡＰＬ）の表記の単位には、例えば、ダイナミックレンジの％表記が使用される。この場合、ＣＰＵ２０４は、輝度平均値（Ｖ_ＡＰＬ）のコード値を、ログカーブ特性に基づき、その特性で示される変換の逆変換を行って階調圧縮がされる前の輝度値に換算する。 As a unit of the notation of the luminance average value (V_APL), for example, a notation of% of a dynamic range is used. In this case, the CPU 204 converts the code value of the average luminance value (V_APL) into a luminance value before gradation compression by performing an inverse conversion of the conversion indicated by the characteristic based on the log curve characteristic.
また、この場合、ＣＰＵ２０４は、以下の数式（７）に基づいて、高輝度シェア率（ＨＬ_Ｒａｔｉｏ）を算出する。ここで、「ＣＯＵＮＴ［Ｙ≧ｂ］」は、全画面画素のうち“ｂ”以上のコード値を持つ画素の数を示す。
ＨＬ_Ｒａｔｉｏ＝ＣＯＵＮＴ［Ｙ≧ｂ］/全画面画素数 ・・・（７）
In this case, the CPU 204 calculates the high luminance share rate (HL_Ratio) based on the following equation ( 7 ). Here, “COUNT [Y ≧ b]” indicates the number of pixels having a code value equal to or larger than “b” among all the screen pixels.
HL_Ratio = COUNT [Y ≧ b] / number of pixels on the entire screen (7)
なお、この場合、コード値“ｂ”が、輝度レベル“ａ”相当のコード値である場合、この数式（７）で求められる高輝度シェア率（ＨＬ_Ｒａｔｉｏ）は、上述の数式（２）で求められる高輝度シェア率（ＨＬ_Ｒａｔｉｏ）と同じ値となる。従って、その場合には、数式（７）に基づく高輝度シェア率（ＨＬ_Ｒａｔｉｏ）の算出を省略できる。 Note that, in this case, when the code value “b” is a code value corresponding to the luminance level “a”, the high luminance share rate (HL_Ratio) obtained by the equation (7) is obtained by the above equation (2). The same value as the high luminance share rate (HL_Ratio) obtained. Therefore, in that case, the calculation of the high luminance share rate (HL_Ratio) based on Expression (7) can be omitted.
また、この場合、ＣＰＵ２０４は、以下の数式（８）に基づいて、高輝度平均値（ＨＬ_Ｖ_ＡＰＬ）を算出する。ここで、ここで、「Σ（ＹHL）」は、“ｂ”以上のコード値を持つ画素の輝度信号（画素信号）の和を示す。
ＨＬ_Ｖ_ＡＰＬ＝Σ（ＹHL）/ＣＯＵＮＴ［Ｙ≧ｂ］ ・・・（８）
In this case, the CPU 204 calculates the high luminance average value (HL_V_APL) based on the following equation (8). Here, “Σ (YHL)” indicates the sum of luminance signals (pixel signals) of pixels having a code value equal to or more than “b”.
HL_V_APL = Σ (YHL) / COUNT [Y ≧ b] (8)
この高輝度平均値（ＨＬ_Ｖ_ＡＰＬ）の表記の単位は、例えば、輝度１００％相当のコード値を基準コード値にした比率とされる。この場合、ＣＰＵ２０４は、以下の数式（９）に基づいて、比率を算出する。ここで、詳細説明は省略するが、数式（９）内の［黒コード値]、［基準コード値］は、上述の数式（６）内と同じであり、ログカーブ特性に応じて適宜変更される。
比率＝｛[ＨＬ_Ｖ_ＡＰＬ]−［黒コード値]｝/［基準コード値］ ・・・（９）
The unit of the notation of the high luminance average value (HL_V_APL) is, for example, a ratio in which a code value corresponding to 100% luminance is set as a reference code value. In this case, the CPU 204 calculates the ratio based on the following equation (9). Here, although detailed description is omitted, [black code value] and [reference code value] in the equation (9) are the same as in the above-described equation (6), and are appropriately changed according to the log curve characteristics. .
Ratio = {[HL_V_APL]-[black code value]} / [reference code value] (9)
また、この高輝度平均値（ＨＬ_Ｖ_ＡＰＬ）の表記の単位には、例えば、ダイナミックレンジの％表記が使用される。この場合、ＣＰＵ２０４は、高輝度平均値（ＨＬ_Ｖ_ＡＰＬ）のコード値を、ログカーブ特性に基づき、その特性で示される変換の逆変換を行って階調圧縮がされる前の輝度値に換算する。 As a unit of the notation of the high luminance average value (HL_V_APL), for example, a notation of% of a dynamic range is used. In this case, the CPU 204 converts the code value of the high luminance average value (HL_V_APL) into a luminance value before gradation compression by performing inverse conversion of the conversion indicated by the log curve characteristic based on the characteristic.
また、この場合、ＣＰＵ２０４は、以下の数式（１０）に基づいて、積値（ＨＬ_ＢＬＴ）を算出する。
ＨＬ_ＢＬＴ＝［ＨＬ_Ｒａｔｉｏ］＊［ＨＬ_Ｖ_ＡＰＬ］ ・・・（１０）
In this case, the CPU 204 calculates the product value (HL_BLT) based on the following equation (10).
HL_BLT = [HL_Ratio] * [HL_V_APL] (10)
そして、ＣＰＵ２０４は、表示部としてのディスプレイ２０６に、上述したように求めた輝度評価値の全部または一部を表示するように制御する。なお、ディスプレイ２０６は、ＢＰＵ２００が持つディスプレイに限定されるものではなく、ＢＰＵ２００の外部に存在するディスプレイ（表示パネル）であってもよい。 Then, the CPU 204 controls the display 206 as a display unit to display all or a part of the luminance evaluation value obtained as described above. The display 206 is not limited to the display of the BPU 200, but may be a display (display panel) existing outside the BPU 200.
図３は、ディスプレイ２０６における輝度評価値の表示の一例を示している。この例では、輝度平均値（ＡＰＬ）、高輝度シェア率（ＨＬ_Ｒａｔｉｏ）、高輝度平均値（ＨＬ_ＡＰＬ）および積値（ＨＬ_ＥＮＧ）が数値およびバーで表示されていると共に、全画面画素の輝度がヒストグラム表示されている。 FIG. 3 shows an example of the display of the luminance evaluation value on the display 206. In this example, the average luminance value (APL), the high luminance share rate (HL_Ratio), the high luminance average value (HL_APL), and the product value (HL_ENG) are displayed by numerical values and bars, and the luminance of all screen pixels is represented by a histogram. Is displayed.
この例では、輝度平均値（ＡＰＬ）が１１５％であることが示されている。また、この例では、２００％以上の輝度レベルが高輝度エリアに設定され、高輝度シェア率（ＨＬ_Ｒａｔｉｏ）が１５％で、高輝度平均値（ＨＬ_ＡＰＬ）が２６１％であることが示されている。また、この例では、積値（ＨＬ_ＥＮＧ）の表示により、その高輝度エリアが持つ総光量が３９として示されている。 In this example, it is shown that the average luminance value (APL) is 115%. Further, in this example, it is shown that the luminance level of 200% or more is set in the high luminance area, the high luminance share rate (HL_Ratio) is 15%, and the high luminance average value (HL_APL) is 261%. . In this example, the total light amount of the high-luminance area is indicated as 39 by displaying the product value (HL_ENG).
図４は、ディスプレイ２０６における輝度評価値の表示の他の一例を示している。この例では、輝度平均値（Ｖ_ＡＰＬ）、高輝度シェア率（ＨＬ_Ｒａｔｉｏ）、高輝度平均値（ＨＬ_Ｖ_ＡＰＬ）および積値（ＨＬ_ＢＬＴ）が数値およびバーで表示されていると共に、全画面画素の輝度がヒストグラム表示されている。この例では、輝度平均値（Ｖ_ＡＰＬ）および高輝度平均値（ＨＬ_Ｖ_ＡＰＬ）の表記の単位は、輝度１００％相当のコード値を基準コード値にした比率とされている。 FIG. 4 shows another example of the display of the luminance evaluation value on the display 206. In this example, the average luminance value (V_APL), the high luminance share rate (HL_Ratio), the high luminance average value (HL_V_APL), and the product value (HL_BLT) are displayed by numerical values and bars, and the luminance of all screen pixels is represented by a histogram. Is displayed. In this example, the unit of the notation of the average luminance value (V_APL) and the average high luminance value (HL_V_APL) is a ratio in which a code value equivalent to 100% luminance is used as a reference code value.
この例では、輝度平均値（Ｖ_ＡＰＬ）が１．０７倍であることが示されている。また、この例では、２００％以上の輝度レベルが高輝度エリアに設定され、高輝度シェア率（ＨＬ_Ｒａｔｉｏ）が１５％で、高輝度平均値（ＨＬ_Ｖ_ＡＰＬ）が１．４４倍であることが示されている。また、この例では、積値（ＨＬ_ＢＬＴ）の表示により、その高輝度エリアが持つ総光量が０．２１６として示されている。 In this example, it is shown that the average brightness value (V_APL) is 1.07 times. In this example, a luminance level of 200% or more is set in the high luminance area, the high luminance share ratio (HL_Ratio) is 15%, and the high luminance average value (HL_V_APL) is 1.44 times. ing. Further, in this example, the total light amount of the high luminance area is indicated as 0.216 by displaying the product value (HL_BLT).
図５は、ディスプレイ２０６における輝度評価値の表示の他の一例を示している。この例では、輝度平均値（Ｖ_ＡＰＬ）、高輝度シェア率（ＨＬ_Ｒａｔｉｏ）、高輝度平均値（ＨＬ_Ｖ_ＡＰＬ）および積値（ＨＬ_ＢＬＴ）が数値およびバーで表示されていると共に、全画面画素の輝度がヒストグラム表示されている。この例では、輝度平均値（Ｖ_ＡＰＬ）および高輝度平均値（ＨＬ_Ｖ_ＡＰＬ）の表記の単位には、ダイナミックレンジの％表記が使用されている。 FIG. 5 shows another example of the display of the luminance evaluation value on the display 206. In this example, the average luminance value (V_APL), the high luminance share rate (HL_Ratio), the high luminance average value (HL_V_APL), and the product value (HL_BLT) are displayed by numerical values and bars, and the luminance of all screen pixels is represented by a histogram. Is displayed. In this example, the notation of the average luminance value (V_APL) and the average high luminance value (HL_V_APL) uses the notation% of the dynamic range.
この例では、輝度平均値（Ｖ_ＡＰＬ）が１０７％であることが示されている。また、この例では、２００％以上の輝度レベルが高輝度エリアに設定され、高輝度シェア率（ＨＬ_Ｒａｔｉｏ）が１５％で、高輝度平均値（ＨＬ_Ｖ_ＡＰＬ）が２７１％であることが示されている。また、この例では、積値（ＨＬ_ＢＬＴ）の表示により、その高輝度エリアが持つ総光量が４０．７として示されている。 In this example, it is shown that the average luminance value (V_APL) is 107%. In this example, a luminance level of 200% or more is set in the high luminance area, the high luminance share ratio (HL_Ratio) is 15%, and the high luminance average value (HL_V_APL) is 271%. . Further, in this example, the total light amount of the high luminance area is indicated as 40.7 by displaying the product value (HL_BLT).
上述したように、図１に示すカメラシステム１０では、ＢＰＵ２００において、ＨＤＲ映像信号が処理されて輝度評価値が求められ、この輝度評価値がディスプレイ２０６に表示される。そのため、ユーザ、例えばＶＥは、ディスプレイ２０６に表示される輝度評価値に基づいてＨＤＲ映像信号の輝度評価を容易かつ適切に行うことができる。これにより、ＶＥは、カメラ１００のアイリス調整などを良好に行うことが可能となる。 As described above, in the camera system 10 shown in FIG. 1, the HDR video signal is processed in the BPU 200 to obtain a luminance evaluation value, and the luminance evaluation value is displayed on the display 206. Therefore, the user, for example, VE can easily and appropriately evaluate the luminance of the HDR video signal based on the luminance evaluation value displayed on the display 206. This allows the VE to perform iris adjustment of the camera 100 satisfactorily.
＜第２の実施の形態＞
［カメラシステムの構成例］
上述の第１の実施の形態においては、カメラ１００からＢＰＵ２００にリニアなＨＤＲ映像信号が送られてくるものであって、このリニアなＨＤＲ映像信号の供給のもと、ＢＰＵ２００では、各種輝度評価値を算出して表示する例を示した。しかし、階調圧縮処理が既に施されているＨＤＲ映像信号が供給される場合にあっても、同様の輝度評価値を算出して表示することは可能である。
<Second embodiment>
[Configuration example of camera system]
In the first embodiment described above, a linear HDR video signal is transmitted from the camera 100 to the BPU 200. Under the supply of the linear HDR video signal, the BPU 200 The example of calculating and displaying is shown. However, even when an HDR video signal that has been subjected to gradation compression processing is supplied, it is possible to calculate and display a similar luminance evaluation value.
図６は、第２の実施の形態としてのカメラシステム１０Ａの構成例を示している。この図６において、図１と対応する部分には同一符号を付し、適宜、その詳細説明は省略する。このカメラシステム１０Ａは、カメラ１００Ａで得られた撮像映像信号としての、階調圧縮処理が施されたＨＤＲ映像信号がカメラ・コントロール・ユニット（ＣＣＵ：Camera Control Unit）３００に伝送される構成となっている。 FIG. 6 illustrates a configuration example of a camera system 10A according to the second embodiment. 6, parts corresponding to those in FIG. 1 are denoted by the same reference numerals, and detailed description thereof will be omitted as appropriate. The camera system 10A has a configuration in which an HDR video signal subjected to gradation compression processing as an imaged video signal obtained by the camera 100A is transmitted to a camera control unit (CCU) 300. ing.
カメラ１００Ａは、撮像部１０１と、プリプロセス（Pre-Process）部１０２と、ＨＤＲカメラプロセス（HDR CAM Process）部１０４と、伝送部１０３を有している。撮像部１０１は、例えば、４ＫあるいはＨＤのイメージセンサを持ち、撮像映像信号としてＨＤＲ映像信号を出力する。プリプロセス部１０２は、例えばＦＰＧＡやＡＳＩＣ等の回路で構成されるプロセッサであり、撮像部１０１から出力されるＨＤＲ映像信号に対して、レンズなどの光学系の補正処理や、イメージセンサのばらつきなどから生じる傷補正処理などを行う。 The camera 100A has an imaging unit 101, a pre-process (Pre-Process) unit 102, an HDR camera process (HDR CAM Process) unit 104, and a transmission unit 103. The imaging unit 101 has, for example, a 4K or HD image sensor and outputs an HDR video signal as a captured video signal. The pre-processing unit 102 is a processor including, for example, a circuit such as an FPGA or an ASIC. The pre-processing unit 102 corrects an HDR video signal output from the imaging unit 101 with an optical system such as a lens, or performs a variation in an image sensor. And a flaw correction process resulting from the above.
ＨＤＲカメラプロセス部１０４は、例えばＦＰＧＡやＡＳＩＣ等の回路で構成されるプロセッサであり、プリプロセス部１０２で処理されたＨＤＲ映像信号に対して色域変換、ディテール（輪郭）補正、階調圧縮などの処理をする。このＨＤＲカメラプロセス部１０４は、詳細説明は省略するが、上述したカメラシステム１０のＢＰＵ２００におけるＨＤＲカメラプロセス部２０２と同様の構成とされている（図１、図２参照）。伝送部１０３は、通信インタフェースを有する回路であり、ＨＤＲカメラプロセス部１０４で処理されたＨＤＲ映像信号をＣＣＵ３００に送信する。 The HDR camera process unit 104 is a processor including a circuit such as an FPGA or an ASIC, and performs color gamut conversion, detail (outline) correction, gradation compression, and the like on the HDR video signal processed by the preprocess unit 102. Process. Although not described in detail, the HDR camera process unit 104 has the same configuration as the HDR camera process unit 202 in the BPU 200 of the camera system 10 described above (see FIGS. 1 and 2). The transmission unit 103 is a circuit having a communication interface, and transmits the HDR video signal processed by the HDR camera process unit 104 to the CCU 300.
ＣＣＵ３００は、伝送部３０１と、インバース・ＨＤＲカメラプロセス（Inverse HDR CAM Process）部３０２と、ＳＤＲカメラプロセス（SDR CAM Process）部３０３を有している。伝送部３０１は、通信インタフェースを有する回路であり、カメラ１００Ａから送られてくるＨＤＲ映像信号を受信する。このＨＤＲ映像信号は、そのまま、ＣＣＵ３００からの出力ＨＤＲ映像信号となる。 The CCU 300 includes a transmission unit 301, an inverse HDR CAM process unit 302, and an SDR camera process (SDR CAM Process) unit 303. The transmission unit 301 is a circuit having a communication interface, and receives an HDR video signal transmitted from the camera 100A. This HDR video signal becomes the output HDR video signal from the CCU 300 as it is.
インバース・ＨＤＲカメラプロセス部３０２は、例えばＦＰＧＡやＡＳＩＣ等の回路で構成されるプロセッサであり、伝送部３０１で受信されたＨＤＲ映像信号に対してＹ色差ドメインからＲＧＢドメインへの変換、階調圧縮の逆変換などの処理を行って、リニアなＨＤＲ映像信号を得る。ＳＤＲカメラプロセス部３０３は、例えばＦＰＧＡやＡＳＩＣ等の回路で構成されるプロセッサであり、インバース・ＨＤＲカメラプロセス部３０２で得られたリニアなＨＤＲ映像信号に対して色域変換、ニー補正、ディテール（輪郭）補正、階調圧縮などの処理を行って出力ＳＤＲ映像信号（SDR Video）を得る。 The inverse / HDR camera process unit 302 is a processor including a circuit such as an FPGA or an ASIC, and converts the HDR video signal received by the transmission unit 301 from the Y color difference domain to the RGB domain, and performs gradation compression. To obtain a linear HDR video signal. The SDR camera processing unit 303 is a processor including, for example, a circuit such as an FPGA or an ASIC. The SDR camera processing unit 303 performs color gamut conversion, knee correction, and detail processing on the linear HDR video signal obtained by the inverse HDR camera processing unit 302. An output SDR video signal (SDR Video) is obtained by performing processing such as contour) correction and gradation compression.
この実施の形態において、ＣＣＵ３００は、ＨＤＲ映像信号を処理して、輝度評価値を算出して表示部に表示する。図７は、ＣＣＵ３００における輝度評価値の算出および表示に係る部分の構成例を示している。ＣＰＵ３０４は、制御プログラムに基づいてＣＣＵ３００の各部を制御するものであって、輝度評価値の算出部および輝度評価値の表示制御部も構成する。 In this embodiment, the CCU 300 processes an HDR video signal, calculates a luminance evaluation value, and displays the luminance evaluation value on a display unit. FIG. 7 illustrates a configuration example of a part related to calculation and display of a luminance evaluation value in the CCU 300. The CPU 304 controls each unit of the CCU 300 based on the control program, and also configures a luminance evaluation value calculation unit and a luminance evaluation value display control unit.
マトリクスＹ（Matrix-Y）部３０５は、インバース・ＨＤＲカメラプロセス部３０２から出力されるリニアなＨＤＲ映像信号（ＲＧＢドメイン）をマトリクス処理して輝度信号Ｙ´を得る。ＣＰＵ３０４は、マトリクスＹ部３０５で得られる輝度信号Ｙ´を用いて、上述した輝度評価値としての、輝度平均値（ＡＰＬ）、高輝度シェア率（ＨＬ_Ｒａｔｉｏ）、高輝度平均値（ＨＬ_ＡＰＬ）および積値（ＨＬ_ＥＮＧ）を算出する。 A matrix Y (Matrix-Y) unit 305 performs a matrix process on a linear HDR video signal (RGB domain) output from the inverse HDR camera process unit 302 to obtain a luminance signal Y ′. The CPU 304 uses the luminance signal Y ′ obtained by the matrix Y section 305 to obtain the above-described luminance average value (APL), high luminance share rate (HL_Ratio), high luminance average value (HL_APL), and product The value (HL_ENG) is calculated.
また、ＣＰＵ３０４は、インバース・ＨＤＲカメラプロセス部３０２に入力されるＨＤＲ映像信号（Ｙ色差ドメイン）に含まれる輝度信号Ｙ(１０bit/１２bitコード)を用いて、上述した輝度評価値としての、輝度平均値（Ｖ_ＡＰＬ）、高輝度シェア率（ＨＬ_Ｒａｔｉｏ）、高輝度平均値（ＨＬ_Ｖ_ＡＰＬ）および積値（ＨＬ_ＢＬＴ）を算出する。 Further, the CPU 304 uses the luminance signal Y (10-bit / 12-bit code) included in the HDR video signal (Y-color difference domain) input to the inverse HDR camera process unit 302 to calculate the luminance average as the above-described luminance evaluation value. A value (V_APL), a high luminance share rate (HL_Ratio), a high luminance average value (HL_V_APL), and a product value (HL_BLT) are calculated.
そして、ＣＰＵ３０４は、表示部としてのディスプレイ３０６に、上述したように求めた輝度評価値の全部または一部を表示するように制御する（図３−５参照）。なお、ディスプレイ３０６は、ＣＣＵ３００が持つディスプレイに限定されるものではなく、ＣＣＵ３００の外部に存在するディスプレイ（表示パネル）であってもよい。 Then, the CPU 304 controls the display 306 as a display unit to display all or a part of the luminance evaluation value obtained as described above (see FIG. 3-5). The display 306 is not limited to the display of the CCU 300, and may be a display (display panel) existing outside the CCU 300.
上述したように、図６に示すカメラシステム１０Ａでは、ＣＣＵ３００において、ＨＤＲ映像信号が処理されて輝度評価値が求められ、この輝度評価値がディスプレイ３０６に表示される。そのため、ユーザ、例えばＶＥは、ディスプレイ３０６に表示される輝度評価値に基づいてＨＤＲ映像信号の輝度評価を容易かつ適切に行うことができる。これにより、ＶＥは、カメラ１００Ａのアイリス調整などを良好に行うことが可能となる。 As described above, in the camera system 10A shown in FIG. 6, the CCU 300 processes the HDR video signal to obtain a luminance evaluation value, and the luminance evaluation value is displayed on the display 306. Therefore, a user, for example, VE can easily and appropriately evaluate the luminance of the HDR video signal based on the luminance evaluation value displayed on the display 306. This allows the VE to perform iris adjustment and the like of the camera 100A satisfactorily.
＜３．変形例＞
なお、上述実施の形態においては、ＢＰＵ２００、あるいはＣＣＵ３００で輝度評価値が算出されて表示される例を示した。しかし、カメラで輝度評価値を算出して表示する構成も考えられる。例えば、図６のカメラシステム１０Ａのカメラ１００ＡのようにＨＤＲカメラプロセス部１０４を備える場合には、図２に示すような構成で、輝度評価値の算出と表示を行うことができる。
<3. Modification>
In the above-described embodiment, an example has been described in which the BPU 200 or the CCU 300 calculates and displays the luminance evaluation value. However, a configuration in which a camera calculates and displays a luminance evaluation value is also conceivable. For example, when the HDR camera process unit 104 is provided like the camera 100A of the camera system 10A in FIG. 6, the calculation and display of the luminance evaluation value can be performed with the configuration shown in FIG.
また、上述実施の形態においては、リニアなＨＤＲ映像信号に階調圧縮を行うためのログカーブ特性としてＯＥＴＦ部２１３におけるＨＤＲ用の光電気伝達関数を用いる例を示したが、これとは別個のログカーブ特性を用いる構成であってもよい。その場合には、ＯＥＴＦ部２１３とは別に、ログカーブ特性を用いてリニアなＨＤＲ映像信号に階調圧縮処理を施す圧縮部を備えるものとなる。 Also, in the above-described embodiment, an example is shown in which the photoelectric transfer function for HDR in the OETF unit 213 is used as a log curve characteristic for performing gradation compression on a linear HDR video signal. A configuration using characteristics may be used. In that case, a compression unit that performs gradation compression processing on a linear HDR video signal using log curve characteristics is provided separately from the OETF unit 213.
また、本技術は、以下のような構成を取ることもできる。
（１）ハイダイナミックレンジ映像信号を処理することにより輝度評価値を算出する処理部と、
上記算出された輝度評価値を表示部に表示する制御部を備える
評価装置。
（２）上記処理部は、
リニアな上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として全画面に対する輝度の平均値を算出する
前記（１）に記載の評価装置。
（３）上記処理部は、
階調圧縮処理された上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として全画面に対する輝度の平均値を算出する
前記（１）または（２）に記載の評価装置。
（４）上記処理部は、
上記全画面に対する輝度の平均値を、輝度１００％相当のコード値を基準値とした比率として算出する
前記（３）に記載の評価装置。
（５）上記処理部は、
上記全画面に対する輝度の平均値を、上記圧縮処理がされる前の輝度値への換算値として算出する
前記（３）に記載の評価装置。
（６）上記処理部は、
リニアな、あるいは階調圧縮処理された上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として一定の輝度レベル以上のエリアが全画面中に占める割合を算出する
前記（１）から（５）のいずれかに記載の評価装置。
（７）上記処理部は、
リニアな上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として一定の輝度レベル以上のエリアに対する輝度の平均値を算出する
前記（１）から（６）のいずれかに記載の評価装置。
（８）上記処理部は、
階調圧縮処理された上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として一定の輝度レベル以上のエリアに対する輝度の平均値を算出する
前記（１）から（７）のいずれかに記載の評価装置。
（９）上記処理部は、
上記一定の輝度レベル以上のエリアに対する輝度の平均値を、輝度１００％相当のコード値を基準値とした比率として算出する
前記（８）に記載の評価装置。
（１０）上記処理部は、
上記一定の輝度レベル以上のエリアに対する輝度の平均値を、上記圧縮処理がされる前の輝度値への換算値として算出する
前記（８）に記載の評価装置。
（１１）上記処理部は、
リニアな上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として、一定の輝度レベル以上のエリアが全画面中に占める割合と該エリアに対する輝度の平均値との積値を算出する
前記（１）から（１０）のいずれかに記載の評価装置。
（１２）上記処理部は、
階調圧縮処理された上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として、一定の輝度レベル以上のエリアが全画面中に占める割合と該エリアに対する輝度の平均値との積値を算出する
前記（１）から（１１）のいずれかに記載の評価装置。
（１３）処理部が、ハイダイナミックレンジ映像信号を処理することにより輝度評価値を算出する処理ステップと、
制御部が、上記算出された輝度評価値を表示部に表示する制御ステップを有する
評価方法。
（１４）リニアなハイダイナミックレンジ映像信号を得る撮像部と、
上記撮像部で得られたリニアなハイダイナミックレンジ映像信号および/または該リニアなハイダイナミックレンジ映像信号に階調圧縮処理を施して得られたハイダイナミックレンジ映像信号を処理することにより輝度評価値を算出する処理部と、
上記算出された輝度評価値を表示部に表示する制御部を備える
カメラシステム。
In addition, the present technology may have the following configurations.
(1) a processing unit that calculates a luminance evaluation value by processing a high dynamic range video signal;
An evaluation device comprising: a control unit that displays the calculated luminance evaluation value on a display unit.
(2) The processing unit includes:
The evaluation device according to (1), wherein an average value of luminance for the entire screen is calculated as the luminance evaluation value using the linear high dynamic range video signal.
(3) The processing unit:
The evaluation device according to (1) or (2), wherein an average value of luminance for the entire screen is calculated as the luminance evaluation value using the high dynamic range video signal subjected to the gradation compression processing.
(4) The processing unit:
The evaluation device according to (3), wherein the average value of the luminance for the entire screen is calculated as a ratio using a code value corresponding to luminance of 100% as a reference value.
(5) The processing unit includes:
The evaluation device according to (3), wherein an average value of the luminance for the entire screen is calculated as a converted value to a luminance value before the compression processing is performed.
(6) The processing unit includes:
The linear or gradation-compressed high dynamic range video signal is used to calculate, as the luminance evaluation value, a ratio of an area having a predetermined luminance level or more to the entire screen in the above (1) to (5). The evaluation device according to any one of the above.
(7) The processing unit includes:
The evaluation device according to any one of (1) to (6), wherein an average value of luminance for an area having a luminance level equal to or higher than a predetermined luminance level is calculated as the luminance evaluation value using the linear high dynamic range video signal.
(8) The processing unit includes:
The evaluation according to any one of (1) to (7), wherein an average luminance value for an area having a luminance level equal to or higher than a predetermined luminance level is calculated as the luminance evaluation value using the high dynamic range video signal subjected to the gradation compression processing. apparatus.
(9) The processing unit includes:
The evaluation device according to (8), wherein an average value of luminance for the area having the predetermined luminance level or higher is calculated as a ratio using a code value corresponding to luminance of 100% as a reference value.
(10) The processing unit includes:
The evaluation device according to (8), wherein an average value of luminance for an area having the predetermined luminance level or higher is calculated as a converted value to a luminance value before the compression processing is performed.
(11) The processing unit includes:
Using the linear high dynamic range video signal, calculate, as the luminance evaluation value, a product value of a ratio of an area having a luminance level equal to or higher than a predetermined luminance in the entire screen and an average luminance value for the area (1). The evaluation device according to any one of (1) to (10).
(12) The processing unit includes:
Using the high dynamic range video signal subjected to the gradation compression processing, a product value of a ratio of an area having a certain luminance level or higher in the entire screen and an average luminance value of the area is calculated as the luminance evaluation value. The evaluation device according to any one of (1) to (11).
(13) a processing step in which the processing unit calculates a luminance evaluation value by processing the high dynamic range video signal;
An evaluation method, wherein the control unit includes a control step of displaying the calculated luminance evaluation value on a display unit.
(14) an imaging unit for obtaining a linear high dynamic range video signal;
The luminance evaluation value is obtained by processing the linear high dynamic range video signal obtained by the imaging unit and / or the high dynamic range video signal obtained by performing the gradation compression process on the linear high dynamic range video signal. A processing unit for calculating,
A camera system comprising a control unit for displaying the calculated brightness evaluation value on a display unit.
１０，１０Ａ・・・カメラシステム
１００，１００Ａ・・・カメラ
１０１・・・撮像部
１０２・・・プリプロセス部
１０３・・・伝送部
１０４・・・ＨＤＲカメラプロセス部
２００・・・ベースバンド・プロセッサ・ユニット（ＢＰＵ）
２０１・・・伝送部
２０２・・・ＨＤＲカメラプロセス部
２０３・・・ＳＤＲカメラプロセス部
２０４・・・ＣＰＵ
２０５・・・マトリクスＹ部
２０６・・・ディスプレイ
２１１・・・リニアマトリクス部
２１２・・・ディテール部
２１３・・・ＯＥＴＦ部
２１４・・・ＲＧＢ/Ｙ色差変換部
３００・・・カメラ・コントロール・ユニット（ＣＣＵ）
３０１・・・伝送部
３０２・・・インバース・ＨＤＲカメラプロセス部
３０３・・・ＳＤＲカメラプロセス部
３０４・・・ＣＰＵ
３０５・・・マトリクスＹ部
３０６・・・ディスプレイ
10, 10A camera system 100, 100A camera 101 imaging unit 102 preprocessing unit 103 transmission unit 104 HDR camera processing unit 200 baseband processor・ Unit (BPU)
201: transmission unit 202: HDR camera process unit 203: SDR camera process unit 204: CPU
205: matrix Y unit 206: display 211: linear matrix unit 212: detail unit 213: OETF unit 214: RGB / Y color difference conversion unit 300: camera control unit (CCU)
301: transmission unit 302: inverse HDR camera process unit 303: SDR camera process unit 304: CPU
305: matrix Y section 306: display
Claims (6)
上記算出された輝度評価値を表示するための信号を出力する出力部を備え、
上記処理部は、リニアな、あるいは階調圧縮処理された上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として一定の輝度レベル以上のエリアが全画面中に占める割合を算出する
信号処理装置。 A processing unit for calculating a bright evaluation value related to the high dynamic range video signal by processing a high dynamic range video signal,
An output unit for outputting a signal for displaying the calculated bright evaluation value,
The processing unit, linear, or using the gradation compression processing has been the high dynamic range video signal, the signal processing device a predetermined luminance level or more areas as the luminance evaluation value that to calculate the percentage of the total screen .
リニアな上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として一定の輝度レベル以上のエリアに対する輝度の平均値を算出する
請求項１に記載の信号処理装置。 The processing unit is
The signal processing device according to claim 1, wherein the linear high dynamic range video signal is used to calculate an average luminance value for an area having a luminance level or higher as the luminance evaluation value.
階調圧縮処理された上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として一定の輝度レベル以上のエリアに対する輝度の平均値を算出する
請求項１または２に記載の信号処理装置。 The processing unit is
Using the high dynamic range video signal gradation compression processing, the signal processing apparatus according to claim 1 or 2 calculates an average value of luminance for a given luminance level or more areas as the luminance evaluation value.
上記一定の輝度レベル以上のエリアに対する輝度の平均値を、輝度１００％相当のコード値を基準値とした比率として算出する
請求項３に記載の信号処理装置。 The processing unit is
The signal processing device according to claim 3 , wherein an average value of luminance for the area having the predetermined luminance level or higher is calculated as a ratio using a code value corresponding to luminance of 100% as a reference value.
出力部が、上記算出された輝度評価値を表示するための信号を出力する出力ステップを有し、
上記処理ステップでは、リニアな、あるいは階調圧縮処理された上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として一定の輝度レベル以上のエリアが全画面中に占める割合を算出する
信号処理方法。 Processing unit, and a processing step of calculating a bright evaluation value related to the high dynamic range video signal by processing a high dynamic range video signal,
Output unit, have a output step of outputting a signal for displaying the calculated bright evaluation value,
In the above-mentioned processing step, a signal processing method for calculating a ratio of an area having a certain luminance level or higher in the entire screen as the luminance evaluation value using the high dynamic range video signal which has been subjected to linear or gradation compression processing .
上記撮像部で得られたリニアなハイダイナミックレンジ映像信号および/または該リニアなハイダイナミックレンジ映像信号に階調圧縮処理を施して得られたハイダイナミックレンジ映像信号を処理することにより該ハイダイナミックレンジ映像信号に関する輝度評価値を算出する処理部と、
上記算出された輝度評価値を表示するための信号を出力する出力部を備え、
上記処理部は、リニアな、あるいは階調圧縮処理された上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として一定の輝度レベル以上のエリアが全画面中に占める割合を算出する
カメラシステム。 An imaging unit for obtaining a linear high dynamic range video signal;
The high dynamic range is obtained by processing the linear high dynamic range video signal obtained by the imaging unit and / or the high dynamic range video signal obtained by performing gradation compression processing on the linear high dynamic range video signal. a processing unit for calculating a bright evaluation value about the video signals,
An output unit for outputting a signal for displaying the calculated bright evaluation value,
The processing unit includes a linear camera system or using the gradation compression processing has been the high dynamic range video signal, a certain brightness level or more areas as the luminance evaluation value that to calculate the percentage of the total screen.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018188590A JP6673424B2 (en) | 2018-10-03 | 2018-10-03 | Signal processing device, signal processing method, and camera system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018188590A JP6673424B2 (en) | 2018-10-03 | 2018-10-03 | Signal processing device, signal processing method, and camera system |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016042866A Division JP6451669B2 (en) | 2016-03-04 | 2016-03-04 | Evaluation apparatus, evaluation method, and camera system |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2019017108A JP2019017108A (en) | 2019-01-31 |
| JP2019017108A5 JP2019017108A5 (en) | 2019-03-28 |
| JP6673424B2 true JP6673424B2 (en) | 2020-03-25 |
Family
ID=65359169
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018188590A Active JP6673424B2 (en) | 2018-10-03 | 2018-10-03 | Signal processing device, signal processing method, and camera system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6673424B2 (en) |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4245699B2 (en) * | 1998-09-16 | 2009-03-25 | オリンパス株式会社 | Imaging device |
| JP2003125240A (en) * | 2001-07-18 | 2003-04-25 | Canon Inc | Image data processor and histogram display method |
| JP2006295814A (en) * | 2005-04-14 | 2006-10-26 | Canon Inc | Image processing device and method therefor, and imaging device |
| JP2007266680A (en) * | 2006-03-27 | 2007-10-11 | Victor Co Of Japan Ltd | Imaging apparatus |
| JP4900343B2 (en) * | 2008-08-21 | 2012-03-21 | 株式会社Ｊｖｃケンウッド | Video imaging apparatus and exposure guide display method |
| JP2012044480A (en) * | 2010-08-19 | 2012-03-01 | Sony Corp | Image pickup apparatus and image pickup method |
-
2018
- 2018-10-03 JP JP2018188590A patent/JP6673424B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2019017108A (en) | 2019-01-31 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11483487B2 (en) | Evaluation device, evaluation method, and camera system | |
| US11128810B2 (en) | Signal processing device, signal processing method, and camera system | |
| KR20180039053A (en) | Method and apparatus for HDR signal conversion | |
| JP7020417B2 (en) | Video signal processing device, video signal processing method and video signal processing system | |
| JP4479527B2 (en) | Image processing method, image processing apparatus, image processing program, and electronic camera | |
| JP2016195379A (en) | Video system, video processing method, program, camera system and video converter | |
| TW200917838A (en) | Digital image tone remapping method and apparatus | |
| JP2010062668A (en) | Image processing apparatus, image processing method, program, and image capturing apparatus | |
| JP6673424B2 (en) | Signal processing device, signal processing method, and camera system | |
| JP2012028937A (en) | Video signal correction apparatus and video signal correction program | |
| JP7149514B2 (en) | Imaging device and video output method | |
| US11363245B2 (en) | Image processing device, image processing method, and image processing program | |
| KR20110095556A (en) | Image projection apparatus and image correcting method thereof | |
| JP6791223B2 (en) | Signal processing equipment, signal processing methods and camera systems | |
| JP5520135B2 (en) | Image processing device | |
| JP2012208776A (en) | Image processing device, image processing method, and program | |
| KR100461018B1 (en) | Natural color reproduction method and apparatus on DTV | |
| JP2015138108A (en) | Display and image quality adjusting unit | |
| JP2020074613A (en) | Camera system, video processing method, program, video system, and video converter | |
| JP2015099980A (en) | Image processing system, image processing method, and program | |
| JP2019087901A (en) | Signal level converter and program | |
| JP2012134574A (en) | Image processing system and image processing method | |
| JP2016092486A (en) | Imaging apparatus |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190218 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190218 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20191112 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191126 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200123 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200204 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200217 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6673424 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |