JP2021153299A - Playback unit - Google Patents
Playback unit Download PDFInfo
- Publication number
- JP2021153299A JP2021153299A JP2021085151A JP2021085151A JP2021153299A JP 2021153299 A JP2021153299 A JP 2021153299A JP 2021085151 A JP2021085151 A JP 2021085151A JP 2021085151 A JP2021085151 A JP 2021085151A JP 2021153299 A JP2021153299 A JP 2021153299A
- Authority
- JP
- Japan
- Prior art keywords
- hdr
- conversion
- display
- luminance
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Picture Signal Circuits (AREA)
- Controls And Circuits For Display Device (AREA)
- Processing Of Color Television Signals (AREA)
Abstract
Description
本開示は、データ出力装置、データ出力方法及びデータ生成方法に関する。 The present disclosure relates to a data output device, a data output method, and a data generation method.
従来、表示可能な輝度レベルを改善するための画像信号処理装置が開示されている(例えば特許文献1参照)。 Conventionally, an image signal processing device for improving a displayable luminance level has been disclosed (see, for example, Patent Document 1).
本開示の一態様に係る再生装置は、表示装置と接続される再生装置であって、映像信号を取得する取得部と、前記表示装置から、前記表示装置が対応している輝度の変換方式を示す第1の情報、を受信する受信部と、前記映像信号の輝度変換を行う輝度変換部と、前記映像信号を出力する出力部と、前記第1の情報、及び当該再生装置が対応している輝度の変換方式を示す第2の情報に基づいて、輝度変換を前記表示装置又は当該再生装置のどちらで行うかを決定する制御部と、を有し、前記制御部が、輝度変換を当該再生装置で行うと決定した場合、前記出力部は前記第2の情報に基づいて前記輝度変換部で輝度変換を行った前記映像信号を出力し、前記制御部が、輝度変換を前記表示装置で行うと決定した場合、前記出力部は前記輝度変換部で変換を行わない前記映像信号を出力する。 The reproduction device according to one aspect of the present disclosure is a reproduction device connected to the display device, and the acquisition unit for acquiring a video signal and the brightness conversion method supported by the display device from the display device are used. The receiving unit that receives the first information shown, the luminance conversion unit that performs the luminance conversion of the video signal, the output unit that outputs the video signal, the first information, and the reproducing device correspond to each other. It has a control unit that determines whether the display device or the reproduction device performs the brightness conversion based on the second information indicating the brightness conversion method, and the control unit performs the brightness conversion. When it is determined to be performed by the reproduction device, the output unit outputs the video signal whose luminance is converted by the luminance conversion unit based on the second information, and the control unit performs the luminance conversion by the display device. If it is determined to do so, the output unit outputs the video signal that is not converted by the luminance conversion unit.
なお、これらの包括的または具体的な態様は、システム、方法、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能なCD−ROMなどの記録媒体で実現されてもよく、システム、方法、集積回路、コンピュータプログラムまたは記録媒体の任意な組み合わせで実現されてもよい。 It should be noted that these comprehensive or specific embodiments may be realized in a recording medium such as a system, method, integrated circuit, computer program or computer-readable CD-ROM, and the system, method, integrated circuit, computer program. Alternatively, it may be realized by any combination of recording media.
本開示の一態様に係るデータ出力装置は、データ出力装置であって、映像ストリームを復号することで第1映像信号を生成する復号部と、映像信号の輝度範囲を変換する1以上の第1変換モードに対応する1以上のメタデータを取得する取得部と、前記1以上のメタデータの一つを解釈することで、前記第1映像信号の輝度範囲を示す特性データと、前記第1映像信号の輝度範囲を変換するための変換補助データと、を取得する解釈部と、前記特性データを、所定の伝送プロトコルに従った制御情報に変換する制御情報生成部と、映像信号の輝度範囲を変換する1以上の第2変換モードに対応しており、前記変換補助データに基づいて、前記1以上の第2変換モードのいずれかにより、前記第1映像信号の輝度範囲の変換処理を行うことで前記第1映像信号の輝度範囲より狭い輝度範囲の第2映像信号を生成する変換部と、前記第2映像信号及び前記制御情報を前記伝送プロトコルで表示装置へ出力する出力部とを備える。 The data output device according to one aspect of the present disclosure is a data output device, which is a decoding unit that generates a first video signal by decoding a video stream, and one or more firsts that convert a brightness range of the video signal. By interpreting the acquisition unit that acquires one or more metadata corresponding to the conversion mode and one of the one or more metadata, the characteristic data indicating the brightness range of the first video signal and the first video An interpretation unit that acquires conversion auxiliary data for converting the brightness range of the signal, a control information generation unit that converts the characteristic data into control information according to a predetermined transmission protocol, and a brightness range of the video signal. It corresponds to one or more second conversion modes to be converted, and based on the conversion auxiliary data, the conversion processing of the brightness range of the first video signal is performed by any one of the one or more second conversion modes. It includes a conversion unit that generates a second video signal having a brightness range narrower than the brightness range of the first video signal, and an output unit that outputs the second video signal and the control information to a display device by the transmission protocol.
これによれば、当該データ出力装置は、1以上のメタデータに基づいて映像信号の輝度範囲を変更できるとともに、変換後の映像信号及び制御情報を出力できる。 According to this, the data output device can change the brightness range of the video signal based on one or more metadata, and can output the converted video signal and control information.
例えば、前記解釈部は、さらに、前記1以上の第1変換モードと、前記1以上の第2変換モードと、前記表示装置が対応している、映像信号の輝度範囲を変換する1以上の第3変換モードとに基づいて、前記データ出力装置及び前記表示装置のどちらで前記変換処理を行うかを決定してもよい。 For example, the interpreting unit further converts one or more first conversion modes, one or more second conversion modes, and one or more first conversion modes corresponding to the display device. Based on the three conversion modes, it may be determined whether the conversion process is performed by the data output device or the display device.
これによれば、当該データ出力装置は、1以上のメタデータに対応する第1変換モードと、データ出力装置が対応している第2変換モードと、表示装置が対応している第3変換モードとに基づき、データ出力装置及び表示装置のどちらで変換処理を行うかを決定できる。これにより、データ出力装置は、適切に変換処理を行う装置を決定できる。 According to this, the data output device has a first conversion mode corresponding to one or more metadata, a second conversion mode corresponding to the data output device, and a third conversion mode corresponding to the display device. Based on the above, it is possible to determine whether the conversion process is performed by the data output device or the display device. Thereby, the data output device can determine the device that appropriately performs the conversion process.
例えば、前記変換部は、前記1以上の第2変換モードを含む複数の第2変換モードに対応しており、各々が前記複数の第2変換モードの各々に対応し、対応する第2変換モードの処理を行う複数のモード処理部を備えてもよい。 For example, the conversion unit corresponds to a plurality of second conversion modes including the one or more second conversion modes, each of which corresponds to each of the plurality of second conversion modes, and corresponds to the second conversion mode. It may be provided with a plurality of mode processing units which perform the processing of.
例えば、前記変換部は、前記1以上の第2変換モードで共通の処理を行う基本処理部と、各々が前記1以上の第2変換モードの各々に対応し、対応する第2変換モードの処理を行う1以上の拡張モード処理部とを備えてもよい。 For example, the conversion unit corresponds to a basic processing unit that performs common processing in the one or more second conversion modes, and each corresponds to each of the one or more second conversion modes, and the processing of the corresponding second conversion mode. It may be provided with one or more extended mode processing units that perform the above.
例えば、前記解釈部は、さらに、前記1以上の第1変換モードに含まれ、かつ前記1以上の第2変換モードに含まれる変換モードを前記データ出力装置で行う変換処理の変換モードに決定してもよい。 For example, the interpreting unit further determines the conversion mode included in the one or more first conversion modes and included in the one or more second conversion modes as the conversion mode of the conversion process performed by the data output device. You may.
これによれば、当該データ出力装置は、1以上のメタデータに対応する第1変換モードと、データ出力装置が対応している第2変換モードとに基づき、使用する変換モードを決定できる。 According to this, the data output device can determine the conversion mode to be used based on the first conversion mode corresponding to one or more metadata and the second conversion mode corresponding to the data output device.
例えば、前記解釈部は、さらに、前記1以上の第1変換モードに含まれ、かつ前記1以上の第2変換モード及び前記第3変換モードの少なくとも一方に含まれる変換モードを前記データ出力装置又は前記表示装置で行う変換処理の変換モードに決定してもよい。 For example, the interpreting unit further includes a conversion mode included in the one or more first conversion modes and included in at least one of the one or more second conversion modes and the third conversion mode. The conversion mode of the conversion process performed by the display device may be determined.
これによれば、当該データ出力装置は、1以上のメタデータに対応する第1変換モードと、データ出力装置が対応している第2変換モードと、表示装置が対応している第3変換モードとに基づき、使用する変換モードを決定できる。 According to this, the data output device has a first conversion mode corresponding to one or more metadata, a second conversion mode corresponding to the data output device, and a third conversion mode corresponding to the display device. Based on, the conversion mode to be used can be determined.
例えば、前記取得部は、前記1以上の第1変換モードを含む複数の第1変換モードに対応する複数のメタデータを取得し、前記変換部は、前記1以上の第2変換モードを含む複数の第2変換モードに対応しており、前記解釈部は、前記複数の第1変換モードに含まれ、かつ前記複数の第2変換モード及び前記第3変換モードの少なくとも一方に含まれる複数の変換モードのうち、輝度範囲を変換することなく出力した画像であるマスター画像に対する再現性が最も高い変換モードを前記データ出力装置又は前記表示装置で行う変換処理の変換モードに決定してもよい。 For example, the acquisition unit acquires a plurality of metadata corresponding to a plurality of first conversion modes including the one or more first conversion modes, and the conversion unit acquires a plurality of metadata including the one or more second conversion modes. The interpretation unit corresponds to the second conversion mode of the above, and the interpretation unit includes a plurality of conversions included in the plurality of first conversion modes and included in at least one of the plurality of second conversion modes and the third conversion mode. Among the modes, the conversion mode having the highest reproducibility for the master image, which is an image output without converting the luminance range, may be determined as the conversion mode of the conversion process performed by the data output device or the display device.
これによれば、当該データ出力装置は、マスター画像に対する再現性が最も高い変換モードを選択できるので、表示される映像の画質を向上できる。 According to this, the data output device can select the conversion mode having the highest reproducibility for the master image, so that the image quality of the displayed image can be improved.
例えば、前記解釈部は、決定された前記変換処理の前記変換モードが、前記第2変換モードに含まれ、かつ、前記第3変換モードに含まれない場合、前記データ出力装置で前記変換処理を行うと決定してもよい。 For example, when the conversion mode of the determined conversion process is included in the second conversion mode and not included in the third conversion mode, the interpreting unit performs the conversion process in the data output device. You may decide to do so.
例えば、前記解釈部は、決定された前記変換処理の前記変換モードが、前記第3変換モードに含まれ、かつ、前記第2変換モードに含まれない場合、前記表示装置で前記変換処理を行うと決定してもよい。 For example, when the conversion mode of the determined conversion process is included in the third conversion mode and not included in the second conversion mode, the interpretation unit performs the conversion process on the display device. May be decided.
例えば、前記解釈部は、さらに、前記複数の第1変換モードの各々のためのパラメータを前記表示装置から取得できるか否かに応じて、前記データ出力装置又は前記表示装置で行う前記変換処理の変換モードを決定してもよい。 For example, the interpreter may further perform the conversion process on the data output device or the display device, depending on whether parameters for each of the plurality of first conversion modes can be obtained from the display device. The conversion mode may be determined.
これによれば、当該データ出力装置は、表示装置のパラメータを取得できるか否かに応じて使用する変換モードを決定するので、より適切な変換モードを選択できる。 According to this, since the data output device determines the conversion mode to be used depending on whether or not the parameters of the display device can be acquired, a more appropriate conversion mode can be selected.
例えば、前記解釈部は、前記複数の第1変換モードに含まれ、かつ前記複数の第2変換モード及び前記第3変換モードの少なくとも一方に含まれ、かつ、前記パラメータを前記表示装置から取得できる変換モードを前記データ出力装置又は前記表示装置で行う変換処理の変換モードに決定してもよい。 For example, the interpreting unit is included in the plurality of first conversion modes, is included in at least one of the plurality of second conversion modes and the third conversion mode, and can acquire the parameters from the display device. The conversion mode may be determined as the conversion mode of the conversion process performed by the data output device or the display device.
例えば、前記パラメータは、前記表示装置が表示可能な輝度範囲の最大値又は前記表示装置が表示可能な表示モードを示してもよい。 For example, the parameter may indicate the maximum value of the luminance range that can be displayed by the display device or the display mode that can be displayed by the display device.
例えば、前記データ出力装置は、さらに、前記第1映像信号の解像度を下げることで第3映像信号を生成するダウンコンバート部を備え、前記出力部は、さらに、前記第3映像信号を前記表示装置へ出力してもよい。 For example, the data output device further includes a down-convert unit that generates a third video signal by lowering the resolution of the first video signal, and the output unit further displays the third video signal on the display device. It may be output to.
これによれば、当該データ出力装置は、例えば、表示装置等に適した解像度に映像信号の解像度を変更できる。 According to this, the data output device can change the resolution of the video signal to a resolution suitable for, for example, a display device or the like.
例えば、前記変換部は、さらに、前記変換補助データに基づいて、前記1以上の第2変換モードのいずれかにより、前記第3映像信号の輝度範囲の変換処理を行うことで前記第3映像信号の輝度範囲より狭い輝度範囲の第4映像信号を生成し、前記出力部は、さらに、前記第4映像信号を前記表示装置へ出力してもよい。 For example, the conversion unit further performs conversion processing of the luminance range of the third video signal in any of the one or more second conversion modes based on the conversion auxiliary data, thereby performing the third video signal. A fourth video signal having a brightness range narrower than the brightness range of the above may be generated, and the output unit may further output the fourth video signal to the display device.
これによれば、当該データ出力装置は、例えば、表示装置等に適した解像度及び輝度範囲に映像信号の解像度及び輝度範囲を変更できる。 According to this, the data output device can change the resolution and luminance range of the video signal to a resolution and luminance range suitable for, for example, a display device and the like.
例えば、前記表示装置が、前記第1映像信号の解像度の映像の表示に対応していない場合、(1)前記ダウンコンバート部は、前記第3映像信号を生成し、(2)前記出力部は、前記第3映像信号を前記表示装置へ出力してもよい。 For example, when the display device does not support the display of a video having the resolution of the first video signal, (1) the down-converting unit generates the third video signal, and (2) the output unit , The third video signal may be output to the display device.
例えば、前記表示装置が、前記第1映像信号の輝度範囲の映像の表示に対応していない場合、(1)前記変換部は、前記第2映像信号を生成し、(2)前記出力部は、前記第2映像信号及び前記制御情報を前記表示装置へ出力してもよい。 For example, when the display device does not support the display of a video in the brightness range of the first video signal, (1) the conversion unit generates the second video signal, and (2) the output unit , The second video signal and the control information may be output to the display device.
また、本開示の一態様に係るデータ出力方法は、データ出力装置におけるデータ出力方法であって、映像ストリームを復号することで第1映像信号を生成する復号ステップと、映像信号の輝度範囲を変換する1以上の第1変換モードに対応する1以上のメタデータを取得する取得ステップと、前記1以上のメタデータの1つを解釈することで、前記第1映像信号の輝度範囲を示す特性データと、前記第1映像信号の輝度範囲を変換するための変換補助データと、を取得する解釈ステップと、前記特性データを、所定の伝送プロトコルに従った制御情報に変換する制御情報生成ステップと、映像信号の輝度範囲を変換する1以上の第2変換モードに対応している変換部が、前記変換補助データに基づいて、前記1以上の第2変換モードのいずれかにより、前記第1映像信号の輝度範囲の変換処理を行うことで前記第1映像信号の輝度範囲より狭い輝度範囲の第2映像信号を生成する変換ステップと、前記第2映像信号及び前記制御情報を前記伝送プロトコルで表示装置へ出力する出力ステップとを含む。 Further, the data output method according to one aspect of the present disclosure is a data output method in a data output device, which converts a decoding step of generating a first video signal by decoding a video stream and a brightness range of the video signal. Characteristic data indicating the brightness range of the first video signal by interpreting the acquisition step of acquiring one or more metadata corresponding to one or more first conversion modes and one of the one or more metadata. An interpretation step for acquiring the conversion auxiliary data for converting the brightness range of the first video signal, and a control information generation step for converting the characteristic data into control information according to a predetermined transmission protocol. Based on the conversion auxiliary data, the conversion unit corresponding to one or more second conversion modes that convert the brightness range of the video signal may perform the first video signal by any one of the one or more second conversion modes. A conversion step of generating a second video signal having a brightness range narrower than the brightness range of the first video signal by performing the conversion processing of the brightness range of the above, and displaying the second video signal and the control information by the transmission protocol. Includes an output step to output to.
これによれば、当該データ出力方法は、複数のメタデータに対応する第1変換モードと、データ出力装置が対応している第2変換モードと、表示装置が対応している第3変換モードとに基づき、データ出力装置及び表示装置のどちらで変換処理を行うかを決定できる。これにより、データ出力方法は、適切に変換処理を行う装置を決定できる。 According to this, the data output method includes a first conversion mode corresponding to a plurality of metadata, a second conversion mode corresponding to the data output device, and a third conversion mode corresponding to the display device. Based on the above, it is possible to determine whether the conversion process is performed by the data output device or the display device. As a result, the data output method can appropriately determine the device that performs the conversion process.
また、本開示の一態様に係るプログラムは、前記データ出力方法をコンピュータに実行させる。 Further, the program according to one aspect of the present disclosure causes a computer to execute the data output method.
また、本開示の一態様に係るデータ生成方法は、データ生成装置が行うデータ生成方法であって、映像信号の輝度範囲を変換する1以上の変換モードに対応する1以上のメタデータを生成する第1生成ステップと、前記映像信号と、前記1以上のメタデータと、前記1以上の変換モードの数を示す変換モード数とを含む映像ストリームを生成する第2生成ステップとを含む。 Further, the data generation method according to one aspect of the present disclosure is a data generation method performed by a data generation device, and generates one or more metadata corresponding to one or more conversion modes for converting a brightness range of a video signal. The first generation step includes a second generation step of generating a video stream including the video signal, one or more metadata, and a number of conversion modes indicating the number of one or more conversion modes.
これによれば、当該データ生成方法は、1以上の変換モードに対応するメタデータを含む映像ストリームを生成できる。これにより、当該映像ストリームを再生する再生装置等において、適切な変換モードを選択できる。 According to this, the data generation method can generate a video stream containing metadata corresponding to one or more conversion modes. As a result, an appropriate conversion mode can be selected in a playback device or the like that reproduces the video stream.
なお、これらの包括的または具体的な態様は、システム、方法、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能なCD−ROMなどの記録媒体で実現されてもよく、システム、方法、集積回路、コンピュータプログラムまたは記録媒体の任意な組み合わせで実現されてもよい。 It should be noted that these comprehensive or specific embodiments may be realized in a recording medium such as a system, method, integrated circuit, computer program or computer-readable CD-ROM, and the system, method, integrated circuit, computer program. Alternatively, it may be realized by any combination of recording media.
また、上記特徴に関しては、主に、[10.複数のHDRメタデータの格納例]〜[13.データ出力装置の構成例2]において説明する。 Regarding the above features, mainly [10. Storage example of multiple HDR metadata] to [13. A data output device configuration example 2] will be described.
また、以下で説明する実施の形態は、いずれも本開示の一具体例を示すものである。以下の実施の形態で示される数値、形状、材料、構成要素。構成要素の配置位置及び接続形態、ステップ、ステップの順序などは、一例であり、本開示を限定する主旨ではない。また、以下の実施の形態における構成要素のうち、最上位概念を示す独立請求項に記載されていない構成要素については、任意の構成要素として説明される。 In addition, all of the embodiments described below show a specific example of the present disclosure. Numerical values, shapes, materials and components shown in the following embodiments. The arrangement position and connection form of the components, the steps, the order of the steps, and the like are examples, and are not intended to limit the present disclosure. Further, among the components in the following embodiments, the components not described in the independent claims indicating the highest level concept are described as arbitrary components.
(実施の形態)
[1.背景]
従来の画像信号より輝度範囲が高い画像信号であるHDR(High Dynamic Range)信号は、HDR信号を格納したBlu−ray(登録商標、以下同様)ディスク等のパッケージメディア、放送、又はOTT(Over The Top)等の配信媒体経由で配信される。ここで、OTTとは、インターネット上で提供されるWebサイト、動画或いは音声などのコンテンツ或いはサービス、又はそれらを提供する事業者を意味する。配信されたHDR信号は、Blu−ray機器等により復号される。また、復号されたHDR信号は、HDR対応表示装置(TV、プロジェクタ、タブレット、又はスマートフォン等)に送られ、HDR対応表示装置によりHDR映像が再生される。
(Embodiment)
[1. background]
The HDR (High Dynamic Range) signal, which is an image signal having a higher luminance range than the conventional image signal, is a package media such as a Blu-ray (registered trademark, the same applies hereinafter) disk containing the HDR signal, broadcasting, or OTT (Over The). It is distributed via a distribution medium such as Top). Here, OTT means a website provided on the Internet, contents or services such as video or audio, or a business operator that provides them. The delivered HDR signal is decoded by a Blu-ray device or the like. Further, the decoded HDR signal is sent to an HDR compatible display device (TV, projector, tablet, smartphone, etc.), and the HDR image is reproduced by the HDR compatible display device.
HDR技術はまだ初期段階であり、最初に導入したHDR技術が採用された後に、新たなHDR方式が開発されることが想定される。この場合、新たに作成されたHDR方式のHDR信号(及びメタデータ)をHDR配信媒体に格納することにより新規HDR方式を採用できる。本開示では、新たなHDR信号形式(メタデータ)を格納した配信媒体に対して、元の配信媒体用に設計された復号装置(例えばBlu−ray機器)を変えることなく、元の技術でのHDR再生は保証することで互換性を保持し、新たな方式に対応したHDR復号装置(例えばBlu−ray機器)では新たなHDR方式の処理に対応することが可能にする方法及び装置を実現する。 HDR technology is still in its infancy, and it is expected that a new HDR system will be developed after the first introduced HDR technology is adopted. In this case, the new HDR system can be adopted by storing the newly created HDR signal (and metadata) of the HDR system in the HDR distribution medium. In the present disclosure, the original technology of the distribution medium storing the new HDR signal format (metadata) is used without changing the decoding device (for example, Blu-ray device) designed for the original distribution medium. HDR playback is guaranteed to maintain compatibility, and HDR decoding devices (for example, Blu-ray devices) that support the new method realize methods and devices that enable processing of the new HDR method. ..
まず、映像技術の変遷について、図1を用いて説明する。図1は、映像技術の進化について説明するための図である。 First, the transition of video technology will be described with reference to FIG. FIG. 1 is a diagram for explaining the evolution of video technology.
これまで、映像の高画質化としては、表示画素数の拡大に主眼がおかれ、Standard Definition(SD)の720×480画素の映像から、High Definition(HD)の1920×1080画素の、所謂2K映像が普及している。 Until now, the focus has been on increasing the number of display pixels in order to improve the image quality of images, from standard definition (SD) 720 x 480 pixel images to high definition (HD) 1920 x 1080 pixels, so-called 2K. Video is widespread.
近年、映像の更なる高画質化を目指して、Ultra High Definition(UHD)の3840×1920画素、あるいは、4Kの4096×1920画素の、所謂4K映像の導入が開始された。 In recent years, the introduction of so-called 4K video of Ultra High Definition (UHD) 3840 × 1920 pixels or 4K 4096 × 1920 pixels has been started with the aim of further improving the image quality.
そして、4Kの導入による映像の高解像度化を行うと共に、ダイナミックレンジ拡張や色域の拡大、あるいは、フレームレートの追加、向上などを行うことで映像を高画質化することが検討されている。 Then, it is being studied to improve the image quality by introducing 4K to increase the resolution of the image, expanding the dynamic range, expanding the color gamut, adding or improving the frame rate, and the like.
その中でも、ダイナミックレンジについては、従来の映像における暗部階調を維持しつつ、現行のTV信号では表現不能な鏡面反射光などの明るい光を、より現実に近い明るさで表現するために最大輝度値を拡大した輝度範囲に対応させた方式として、HDR(High Dynamic Range)が注目されている。具体的には、これまでのTV信号が対応している輝度範囲の方式は、SDR(Standard Dynamic Range)と呼ばれ、最大輝度値が100nitであったのに対して、HDRでは1000nit以上まで最大輝度値を拡大することが想定されている。HDRは、SMPTE(Society of Motion Picture & Television Engineers)やITU−R(International Telecommunications Union Radiocommunications Sector)などにおいて、標準化が進行中である。 Among them, regarding the dynamic range, the maximum brightness is used to express bright light such as mirror-reflected light, which cannot be expressed by the current TV signal, with a brightness closer to reality while maintaining the dark area gradation in the conventional image. HDR (High Dynamic Range) is attracting attention as a method corresponding to a brightness range in which the value is expanded. Specifically, the conventional method of the brightness range supported by the TV signal is called SDR (Standard Dynamic Range), and the maximum brightness value is 100 nits, whereas the maximum brightness value is 1000 nits or more in HDR. It is expected that the brightness value will be increased. HDR is being standardized in SMPTE (Society of Motion Picture & Television Engineers) and ITU-R (International Telecommunication Union Radiocommunication Sector).
HDRの具体的な適用先としては、HDやUHDと同様に、放送やパッケージメディア(Blu−ray Disc等)、インターネット配信などで使われることが想定されている。 As a specific application destination of HDR, it is assumed that it will be used for broadcasting, package media (Blu-ray Disc, etc.), Internet distribution, etc., as with HD and UHD.
なお、以下では、HDRに対応した映像において、当該映像の輝度は、HDRの輝度範囲の輝度値からなり、当該映像の輝度値が量子化されることで得られた輝度信号をHDR信号と呼ぶ。SDRに対応した映像において、当該映像の輝度は、SDRの輝度範囲の輝度値からなり、当該映像の輝度値が量子化されることで得られた輝度信号をSDR信号と呼ぶ。 In the following, in the video corresponding to HDR, the brightness of the video is composed of the brightness value in the brightness range of HDR, and the brightness signal obtained by quantizing the brightness value of the video is referred to as an HDR signal. .. In an image corresponding to SDR, the luminance of the image is composed of a luminance value in the luminance range of the SDR, and the luminance signal obtained by quantizing the luminance value of the image is called an SDR signal.
[2.HDR導入時のマスター、配信方式、および表示装置の関係]
図2は、SDRとHDRのホームエンターテイメント用マスターを制作するフローと、配信媒体及び表示装置の関係を示す図である。
[2. Relationship between master, distribution method, and display device when HDR is introduced]
FIG. 2 is a diagram showing a relationship between a flow for producing a master for home entertainment of SDR and HDR, a distribution medium, and a display device.
HDRのコンセプトは提案されており、HDRのコンセプトレベルでの有効性は確認されている。また、HDRの最初の実施方法が提案されている。ただし、この方法を使ってHDRコンテンツが大量に作られ、最初の実施方法の実証が行われたわけではない。このため、今後HDRコンテンツの制作が本格化した場合、現状のHDRの制作方式、特にメタデータが変わる可能性がある。 The HDR concept has been proposed and its effectiveness at the HDR concept level has been confirmed. Also, the first method of implementing HDR has been proposed. However, a large amount of HDR content was created using this method, and the first implementation method was not demonstrated. For this reason, if HDR content production begins in earnest in the future, the current HDR production method, especially metadata, may change.
[3.EOTFの使い方]
図3は、コンテンツに格納される輝度信号のコード値の決定方法、および、再生時にコード値から輝度値を復元するプロセスの説明図である。
[3. How to use EOTF]
FIG. 3 is an explanatory diagram of a method of determining the code value of the luminance signal stored in the content and a process of restoring the luminance value from the code value at the time of reproduction.
本例における輝度を示す輝度信号はHDRに対応したHDR信号である。グレーディング後の画像は、HDRの逆EOTFにより量子化され、当該画像の輝度値に対応するコード値が決定する。このコード値に基づいて画像符号化などが行われ、ビデオのストリームが生成される。再生時には、ストリームの復号結果に対して、HDRのEOTFに基づいて逆量子化することによりリニアな信号に変換され、画素毎の輝度値が復元される。以下、HDRの逆EOTFを用いた量子化を「逆HDRのEOTF変換」という。HDRのEOTFを用いた逆量子化を「HDRのEOTF変換」という。同様に、SDRの逆EOTFを用いた量子化を「逆SDRのEOTF変換」という。SDRのEOTFを用いた逆量子化を「SDRのEOTF変換」という。 The luminance signal indicating the luminance in this example is an HDR signal corresponding to HDR. The image after grading is quantized by the inverse EOTF of HDR, and the code value corresponding to the brightness value of the image is determined. Image coding or the like is performed based on this code value, and a video stream is generated. At the time of reproduction, the decoding result of the stream is dequantized based on HDR EOTF to be converted into a linear signal, and the brightness value for each pixel is restored. Hereinafter, the quantization using the inverse EOTF of HDR is referred to as "EOTF conversion of the inverse HDR". Inverse quantization using HDR EOTF is called "HDR EOTF conversion". Similarly, the quantization using the inverse EOTF of SDR is called "EOTF conversion of inverse SDR". Inverse quantization using SDR EOTF is called "SDR EOTF conversion".
この輝度値とメタデータを使って、映像変換処理部で、映像表示部で表示できる輝度値に変換することで、映像表示部でHDR映像を表示することができる。例えば、元のHDR映像のピーク輝度が2000nitであり、映像表示部のピーク輝度が800nitの場合、変換を行って輝度を下げることができる。 The HDR video can be displayed on the video display unit by converting the brightness value and the metadata into a brightness value that can be displayed on the video display unit by the video conversion processing unit. For example, when the peak brightness of the original HDR video is 2000 nits and the peak brightness of the video display unit is 800 nits, the brightness can be lowered by performing conversion.
このように、HDRマスターの方式は、EOTF及びメタデータとHDR信号との組み合わせにより実現されている。よって、より効率的なEOTF及びメタデータが開発され、そのようなEOTF及びメタデータを用いたHDR方式を採用すべき時が来る可能性がある。 As described above, the HDR master method is realized by the combination of EOTF and metadata and HDR signal. Therefore, it may be time to develop more efficient EOTFs and metadata and adopt HDR methods using such EOTFs and metadata.
但し、この新たな方式がどのようなものになるかは、現時点では解らないが、EOTFが変更される可能性とメタデータが追加される可能性とは想像できる。この場合、HDR信号自体も変わる。 However, although it is not known at this time what this new method will look like, it is possible to imagine the possibility that EOTF will be changed and that metadata will be added. In this case, the HDR signal itself also changes.
本開示は、このようにHDRの伝送フォーマットが変更された場合でも、HDR対応機器を買ったお客様が新たな機器を買いなおすリスクを下げることで、HDRの普及を図ることを目指している。 The present disclosure aims to popularize HDR by reducing the risk that a customer who has purchased an HDR-compatible device will repurchase a new device even if the HDR transmission format is changed in this way.
[4.メタデータ]
図4は、HDRメタデータの例を示す図である。HDRメタデータは、映像信号の輝度範囲の変更(DR変換)に用いられる変換補助情報と、HDR制御情報とを含む。各情報は、例えばタイトル単位で設けられる静的HDRメタデータと、例えばフレーム単位で設けられる動的HDRメタデータとのいずれかである。また、静的HDRメタデータは、必須メタデータ(基本データ)と、選択メタデータ(拡張データ)とのいずれかに分類され、動的HDRメタデータは、選択メタデータに分類される。なお、各情報の詳細は後述する。
[4. Metadata]
FIG. 4 is a diagram showing an example of HDR metadata. The HDR metadata includes conversion auxiliary information used for changing the brightness range of the video signal (DR conversion) and HDR control information. Each piece of information is, for example, either static HDR metadata provided in title units or dynamic HDR metadata provided in frame units, for example. Further, static HDR metadata is classified into either essential metadata (basic data) or selective metadata (extended data), and dynamic HDR metadata is classified into selective metadata. The details of each information will be described later.
[5.HDRメタデータ]
HDRコンテンツにおけるマスタリング時の特性を示すパラメータとしては、タイトル毎又はプレイリスト毎に固定である静的HDRメタデータと、シーン毎に可変である動的HDRメタデータとが存在する。ここで、タイトル及びプレイリストは、連続して再生される映像信号を示す情報である。以降、連続して再生される映像信号を連続再生単位と呼ぶ。
[5. HDR metadata]
As parameters indicating the characteristics at the time of mastering in the HDR content, there are static HDR metadata that is fixed for each title or playlist and dynamic HDR metadata that is variable for each scene. Here, the title and the playlist are information indicating a video signal that is continuously reproduced. Hereinafter, the video signal that is continuously reproduced is referred to as a continuous reproduction unit.
例えば、静的HDRメタデータは、EOTF関数(カーブ)の種類、18%Gray値、Diffuse White値、Knee point、及びClip pointの少なくとも一つを含む。EOTFは、複数の輝度値と複数のコード値とを関係付けた情報であり、映像信号の輝度範囲を変更するための情報である。その他の情報は、映像信号の輝度に関する属性情報であることから、静的HDRメタデータは、映像信号の輝度範囲に関する情報であり、映像信号の輝度範囲を特定するための情報と言える。 For example, static HDR metadata includes at least one of the EOTF function (curve) type, 18% Gray value, Diffuse White value, Knee point, and Clip point. The EOTF is information in which a plurality of luminance values and a plurality of code values are associated with each other, and is information for changing the luminance range of a video signal. Since the other information is attribute information related to the brightness of the video signal, the static HDR metadata is information related to the brightness range of the video signal, and can be said to be information for specifying the brightness range of the video signal.
具体的には、18%Gray値及びDiffuse White値は、予め定められた基準となる明るさの映像における輝度値(nit)を示し、言い換えると、映像における基準の明るさを示す。より具体的には、18%Gray値は、マスタリング前において18nitの明るさの物体のマスタリング後の輝度値(nit)を示す。Diffuse White値は、白色に相当する輝度値(nit)を示す。 Specifically, the 18% Gray value and the Diffuse White value indicate a brightness value (nit) in an image having a predetermined reference brightness, in other words, indicate a reference brightness in the image. More specifically, the 18% Gray value indicates the brightness value (nit) after mastering of an object having a brightness of 18 nit before mastering. The Diffuse White value indicates a brightness value (nit) corresponding to white.
また、Knee point及びClip pointは、EOTF関数のパラメータであり、EOTFにおける特性が変化する点を示す。具体的には、Knee pointは、撮影時のオリジナルの輝度値(入力輝度)の増分に対する、映像信号の輝度としてEOTFにマッピングされる輝度値(出力輝度)の増分を、1対1とは異なる値とする変化点を示す。例えば、Knee pointは、後述する図30Aにおいて、線形変化からはずれる点を特定するための情報である。また、Clip pointは、EOTF関数においてクリップが開始される点を示す。ここでクリップとは、ある値以上の入力輝度値を同一の出力輝度値に変換することである。例えば、Clip pointは、後述する図30Bにおいて、出力輝度値が変化しなくなる点を示す。 In addition, Knee point and Clip point are parameters of the EOTF function, and indicate that the characteristics in EOTF change. Specifically, Knee point differs from 1: 1 in the increment of the luminance value (output luminance) mapped to EOTF as the luminance of the video signal with respect to the increment of the original luminance value (input luminance) at the time of shooting. Indicates the change point to be the value. For example, the Knee point is information for identifying a point deviating from the linear change in FIG. 30A described later. Also, Clip point indicates the point at which the clip starts in the EOTF function. Here, the clip is to convert an input luminance value of a certain value or more into the same output luminance value. For example, Clip point indicates that the output luminance value does not change in FIG. 30B described later.
また、EOTF関数(カーブ)の種類とは、例えば、図27Aに示すHDRのEOTF及びSDRのEOTFである。 The types of EOTF functions (curves) are, for example, HDR EOTF and SDR EOTF shown in FIG. 27A.
このように、本実施の形態に係るコンテンツデータ生成方法は、コンテンツデータを生成するコンテンツデータ生成方法であって、映像信号と、映像信号の連続再生単位に含まれる複数の画像(連続再生単位を構成する映像信号)に対して共通に用いられる情報であって、映像信号の輝度範囲に関する情報を含む静的HDRメタデータ(第1メタデータ)とを生成する第1生成ステップと、連続再生単位と静的HDRメタデータとを関連付けることによりコンテンツデータを生成する第2生成ステップを含む。例えば、映像信号の輝度範囲に関する情報とは、映像信号の輝度範囲を変換するための情報である。 As described above, the content data generation method according to the present embodiment is a content data generation method for generating content data, and includes a video signal and a plurality of images (continuous playback unit) included in the continuous playback unit of the video signal. The first generation step of generating static HDR metadata (first metadata) including information on the brightness range of the video signal, which is information commonly used for the constituent video signals), and a continuous playback unit. Includes a second generation step of generating content data by associating with static HDR metadata. For example, the information regarding the luminance range of the video signal is information for converting the luminance range of the video signal.
また、静的HDRメタデータは、複数の輝度値と複数のコード値とを関係付けたEOTFを特定するための情報を含む。また、映像信号における輝度値は、コード値として符号化される。 The static HDR metadata also includes information for identifying the EOTF that associates the plurality of luminance values with the plurality of code values. Further, the luminance value in the video signal is encoded as a code value.
また、静的HDRメタデータは、さらに、予め定められた基準となる明るさの映像信号における輝度値を示す情報、又は、EOTFにおける特性が変化する点を示す情報を含む。例えば、静的HDRメタデータは、映像信号における白色に相当する輝度値を示す情報(Diffuse White値)を含む。 Further, the static HDR metadata further includes information indicating a brightness value in a video signal having a predetermined reference brightness, or information indicating a point at which the characteristics in EOTF change. For example, the static HDR metadata includes information (Diffuse White value) indicating a brightness value corresponding to white in the video signal.
また、第1生成ステップでは、連続再生単位より細かい単位に対して共通に用いられる情報であって、映像信号の輝度範囲に関する情報である動的HDRメタデータ(第2メタデータ)をさらに生成する。例えば、映像信号の輝度範囲に関する情報とは、映像信号の輝度範囲を変換するための情報である。 Further, in the first generation step, dynamic HDR metadata (second metadata), which is information commonly used for units finer than the continuous reproduction unit and is information on the brightness range of the video signal, is further generated. .. For example, the information regarding the luminance range of the video signal is information for converting the luminance range of the video signal.
動的HDRメタデータは、シーン毎に異なるマスタリング特性を示すパラメータなどである。ここでマスタリング特性とは、オリジナル(マスタリング前)の輝度と、マスタリング後の輝度との関係を示す。例えば、マスタリング特性を示すパラメータとは、上記した静的HDRメタデータと同様の情報であり、言い換えると、静的HDRメタデータに含まれる情報の少なくとも一つである。 The dynamic HDR metadata is a parameter or the like that shows different mastering characteristics for each scene. Here, the mastering characteristic indicates the relationship between the original (before mastering) brightness and the brightness after mastering. For example, the parameter indicating the mastering characteristic is the same information as the static HDR metadata described above, in other words, at least one of the information contained in the static HDR metadata.
図5は、静的HDRメタデータの格納例を示す図である。本例は、Blu−rayディスクなどのパッケージメディアにおいて、静的HDRメタデータをプレイリストに格納する例である。 FIG. 5 is a diagram showing an example of storing static HDR metadata. This example is an example of storing static HDR metadata in a playlist in a package media such as a Blu-ray disc.
プレイリストから参照されるストリーム毎のメタデータの1つとして、静的HDRメタデータが格納される。この場合、静的HDRメタデータはプレイリスト単位で固定である。つまり、静的HDRメタデータは、各プレイリストに対応付けて格納される。 Static HDR metadata is stored as one of the metadata for each stream referenced from the playlist. In this case, the static HDR metadata is fixed for each playlist. That is, the static HDR metadata is stored in association with each playlist.
また、OTTでは、ストリームの取得に先立って参照されるマニフェストファイルに静的HDRメタデータが格納されてもよい。つまり、本実施の形態に係るコンテンツデータ生成方法は、映像信号を映像ストリームとして生成し、静的HDRメタデータを、映像ストリームの取得に先立って参照されるマニフェストファイルに格納してもよい。 Further, in OTT, static HDR metadata may be stored in a manifest file that is referenced prior to the acquisition of the stream. That is, in the content data generation method according to the present embodiment, the video signal may be generated as a video stream, and the static HDR metadata may be stored in the manifest file referred to prior to the acquisition of the video stream.
また、放送では、ストリームの属性を示す記述子に静的HDRメタデータが格納されてもよい。つまり、本実施の形態に係るコンテンツデータ生成方法は、コンテンツデータを映像ストリームとして生成し、静的HDRメタデータを、映像ストリームの属性を示す識別子として当該映像ストリームとは独立に格納してもよい。例えば、静的HDRメタデータを、MPEG2−TSにおける記述子(デスクリプタ)として格納できる。 Also, in broadcasting, static HDR metadata may be stored in a descriptor indicating the attributes of the stream. That is, in the content data generation method according to the present embodiment, the content data may be generated as a video stream, and the static HDR metadata may be stored independently of the video stream as an identifier indicating the attribute of the video stream. .. For example, static HDR metadata can be stored as a descriptor in MPEG2-TS.
また、タイトル毎に静的HDRメタデータが固定である場合には、静的HDRメタデータは、タイトルの属性を示す管理情報として格納されてもよい。 When the static HDR metadata is fixed for each title, the static HDR metadata may be stored as management information indicating the attributes of the title.
図6は、動的HDRメタデータの、ビデオストリーム内への格納例を示す図である。MPEG−4 AVC又はHEVC(High Efficiency Video Coding)では、SEI(Supplemental Enhancement Information)と呼ばれるデータ構造を用いて、ストリームの再生制御に関わる情報を格納する。よって、例えば、SEIに動的HDRメタデータが格納される。 FIG. 6 is a diagram showing an example of storing dynamic HDR metadata in a video stream. In MPEG-4 AVC or HEVC (High Efficiency Video Coding), information related to stream reproduction control is stored by using a data structure called SEI (Supplemental Engineering Information). Thus, for example, dynamic HDR metadata is stored in SEI.
動的HDRメタデータは、シーン毎に更新されることが想定される。シーンの先頭は、GOP(Group Of Pictures)などのランダムアクセス単位の先頭のアクセスユニット(AU)である。従って、動的HDRメタデータは、ランダムアクセス単位における復号順で先頭のアクセスユニットに格納することにしてもよい。ランダムアクセス単位の先頭アクセスユニットは、IDRピクチャ、又は、SPS(Sequence Parameter Set)が付加されたnon−IDR Iピクチャなどとなる。よって、受信側の装置は、ランダムアクセス単位の先頭アクセスユニットを構成するNAL(Network Abstraction Layer)ユニットを検出することにより、動的HDRメタデータを取得できる。あるいは、動的HDRメタデータを格納するSEIに対して、固有のタイプが付与されてもよい。 The dynamic HDR metadata is expected to be updated on a scene-by-scene basis. The head of the scene is the head access unit (AU) of a random access unit such as GOP (Group Of Pictures). Therefore, the dynamic HDR metadata may be stored in the first access unit in the decoding order in the random access unit. The first access unit of the random access unit is an IDR picture, a non-IDR I picture to which an SPS (Sequence Parameter Set) is added, or the like. Therefore, the device on the receiving side can acquire the dynamic HDR metadata by detecting the NAL (Network Operation Layer) unit that constitutes the head access unit of the random access unit. Alternatively, a unique type may be assigned to the SEI that stores the dynamic HDR metadata.
なお、EOTF関数の種類について、SPSにおけるストリームの属性情報などとして格納されてもよい。つまり、本実施の形態に係るコンテンツデータ生成方法は、コンテンツデータをHEVCにより符号化した映像ストリームとして生成し、EOTFを特定するための情報を、映像ストリームに含まれるSPSに格納してもよい。 The type of EOTF function may be stored as stream attribute information in SPS. That is, in the content data generation method according to the present embodiment, the content data may be generated as a video stream encoded by HEVC, and the information for identifying the EOTF may be stored in the SPS included in the video stream.
[6.静的HDRメタデータの伝送方法]
図7は、静的HDRメタデータの伝送方法を示す図であり、BDプレーヤ(Blu−ray機器)又はレコーダなどの再生装置においてHDMI(登録商標、以下同様)などの伝送プロトコルを通じて、表示装置にHDR信号を伝送する際の動作例を示すフローチャートである。
[6. Static HDR metadata transmission method]
FIG. 7 is a diagram showing a method of transmitting static HDR metadata to a display device through a transmission protocol such as HDMI (registered trademark, the same applies hereinafter) in a playback device such as a BD player (Blu-ray device) or a recorder. It is a flowchart which shows the operation example at the time of transmitting an HDR signal.
静的HDRメタデータは、タイトル単位又はプレイリスト単位で固定であることを先に述べた。従って、再生装置は、静的HDRメタデータの設定が必要な場合(S401でYes)、タイトル又はプレイリストの再生開始時において、静的HDRメタデータをコンテンツの管理情報から取得して、取得した静的HDRメタデータをHDMIの制御情報として格納して伝送する。つまり、再生装置は、タイトル又はプレイリストを構成する映像信号の伝送開始に先立って、当該タイトル又はプレイリストに対応する静的HDRメタデータを取得し、取得した静的HDRメタデータをHDMIの制御情報として伝送する(S402)。より一般的には、再生装置は、当該再生装置と表示装置との間のHDMIの初期化処理を行う際に、初期化情報として静的HDRメタデータを伝送してもよい。 It was mentioned earlier that static HDR metadata is fixed on a title-by-title or playlist-by-playlist basis. Therefore, when it is necessary to set the static HDR metadata (Yes in S401), the playback device acquires the static HDR metadata from the content management information at the start of playback of the title or playlist. Static HDR metadata is stored and transmitted as HDMI control information. That is, the playback device acquires the static HDR metadata corresponding to the title or the playlist prior to the start of transmission of the video signal constituting the title or the playlist, and controls the acquired static HDR metadata with HDMI. It is transmitted as information (S402). More generally, the playback device may transmit static HDR metadata as initialization information when performing HDMI initialization processing between the playback device and the display device.
その後、再生装置は、静的HDRメタデータに対応するビデオストリームを伝送する(S403)。なお、このビデオストリームに対しては、伝送済みの静的HDRメタデータが有効となる。 The playback device then transmits the video stream corresponding to the static HDR metadata (S403). Note that the transmitted static HDR metadata is valid for this video stream.
このように、本実施の形態に係る映像ストリーム伝送方法は、映像ストリーム(ビデオストリーム)を伝送する映像ストリーム伝送方法であって、映像信号と、連続再生単位に含まれる複数の画像に対して共通に用いられる情報であって、映像信号の輝度範囲に関する静的HDRメタデータ(第1メタデータ)とを含むコンテンツデータを取得する取得ステップと、映像信号に対応する映像ストリームと、静的HDRメタデータとを伝送する伝送ステップとを含む。 As described above, the video stream transmission method according to the present embodiment is a video stream transmission method for transmitting a video stream (video stream), which is common to the video signal and a plurality of images included in the continuous playback unit. The acquisition step of acquiring the content data including the static HDR metadata (first metadata) relating to the brightness range of the video signal, the video stream corresponding to the video signal, and the static HDR meta. Includes a transmission step to transmit data.
例えば、伝送ステップでは、HDMIの通信プロトコルに従い、映像ストリームと静的HDRメタデータとを伝送する。 For example, in the transmission step, the video stream and static HDR metadata are transmitted according to the HDMI communication protocol.
また、動的HDRメタデータは、ビデオストリームの一部として伝送される。 Also, the dynamic HDR metadata is transmitted as part of the video stream.
なお、再生装置は、動的HDRメタデータを、当該動的HDRメタデータが有効となるタイミングにおいてHDMIの制御信号として伝送してもよい。このとき、再生装置は、静的HDRメタデータと動的HDRメタデータとに識別子などを設けて互いに識別できるようにして伝送する。 The playback device may transmit the dynamic HDR metadata as an HDMI control signal at the timing when the dynamic HDR metadata becomes effective. At this time, the reproduction device provides an identifier or the like in the static HDR metadata and the dynamic HDR metadata so that they can be distinguished from each other and transmitted.
また、制御信号においては、動的HDRメタデータを格納するためのコンテナのデータ構造のみ規定しておき、コンテナのペイロードデータとしてSEIの内容をそのままコピーできるようにしてもよい。これにより、SEIに含まれる動的HDRメタデータのシンタックスが更新されてもBDプレーヤ等の再生装置の実装を変更せずに対応できる。 Further, in the control signal, only the data structure of the container for storing the dynamic HDR metadata may be specified, and the contents of the SEI may be copied as it is as the payload data of the container. As a result, even if the syntax of the dynamic HDR metadata included in the SEI is updated, it can be dealt with without changing the implementation of the playback device such as a BD player.
静的HDRメタデータについても同様に、コンテンツの管理情報における静的HDRメタデータをコピーして伝送できるようにしておけば、静的HDRメタデータのシンタックスの変更に対しても、再生装置の実装を変更せずに対応可能である。つまり、静的HDRメタデータを格納するためのコンテナのデータ構造が規定されており、伝送ステップでは、コンテンツデータに含まれる静的HDRメタデータを、コンテナのペイロードにコピーし、当該コンテナを伝送してもよい。 Similarly for static HDR metadata, if the static HDR metadata in the content management information can be copied and transmitted, even if the syntax of the static HDR metadata is changed, the playback device can be used. It can be handled without changing the implementation. That is, the data structure of the container for storing the static HDR metadata is defined, and in the transmission step, the static HDR metadata contained in the content data is copied to the payload of the container and transmitted in the container. You may.
[7.HDRメタデータの処理方法]
図8は、表示装置においてHDR信号を表示する際のHDRメタデータの処理方法の例を示すフローチャートである。まず、表示装置は、HDMIの制御情報から静的HDRメタデータを取得し(S411)、取得した静的HDRメタデータに基づき、HDR信号の表示方法を決定する(S412)。
[7. HDR metadata processing method]
FIG. 8 is a flowchart showing an example of a method of processing HDR metadata when displaying an HDR signal on a display device. First, the display device acquires static HDR metadata from HDMI control information (S411), and determines a display method of the HDR signal based on the acquired static HDR metadata (S412).
なお、制御情報に静的HDRメタデータが含まれない場合には、表示装置は、アプリケーション規格において予め定められた値、又は、表示装置のデフォルト設定に基づいて、HDR信号の表示方法を決定する。つまり、本実施の形態に係る映像表示方法は、静的HDRメタデータを取得できない場合、予め定められた値又は設定に基づき、映像信号に対応する映像の表示方法を決定する。 When the control information does not include static HDR metadata, the display device determines the HDR signal display method based on the value predetermined in the application standard or the default setting of the display device. .. That is, the video display method according to the present embodiment determines the video display method corresponding to the video signal based on a predetermined value or setting when the static HDR metadata cannot be acquired.
また、表示装置は、ビデオストリーム内のSEIなどにおいて動的HDRメタデータを検出した場合(S413でYes)、動的HDRメタデータに基づいてHDR信号の表示方法を更新する(S414)。つまり、本実施の形態に係る映像表示方法は、静的HDRメタデータを取得した場合、取得した静的HDRメタデータに基づき表示方法を決定して映像を表示し、動的HDRメタデータを取得した場合、静的HDRメタデータに基づき決定した表示方法を、動的HDRメタデータに基づき決定した表示方法に更新して映像を表示する。あるいは、静的HDRメタデータと動的HDRメタデータとの両方に基づいて表示方法を決定してもよい。 Further, when the display device detects the dynamic HDR metadata in SEI or the like in the video stream (Yes in S413), the display device updates the display method of the HDR signal based on the dynamic HDR metadata (S414). That is, in the video display method according to the present embodiment, when static HDR metadata is acquired, the display method is determined based on the acquired static HDR metadata, the video is displayed, and the dynamic HDR metadata is acquired. If so, the display method determined based on the static HDR metadata is updated to the display method determined based on the dynamic HDR metadata, and the image is displayed. Alternatively, the display method may be determined based on both static HDR metadata and dynamic HDR metadata.
なお、表示装置が、動的HDRメタデータの取得に対応していない場合には、表示装置は、静的HDRメタデータのみに基づいて動作してもよい。また、表示装置が動的HDRメタデータの取得に対応している場合でも、表示装置が、メタデータが格納されたアクセスユニットの表示時刻(PTS:Presentation Time Stamp)に同期してHDR信号の表示方法を更新できないことがある。この場合には、表示装置は、メタデータを取得後、表示方法を更新可能な最も早い時刻以降に表示されるアクセスユニットから、表示方法を更新してもよい。 If the display device does not support the acquisition of dynamic HDR metadata, the display device may operate based only on the static HDR metadata. Further, even when the display device supports the acquisition of dynamic HDR metadata, the display device displays the HDR signal in synchronization with the display time (PTS: Presentation Time Stamp) of the access unit in which the metadata is stored. You may not be able to update the method. In this case, the display device may update the display method from the access unit displayed after the earliest time in which the display method can be updated after acquiring the metadata.
なお、HDRメタデータにバージョン情報などを付与することで、パラメータの更新及び追加に対応できる。これにより、表示装置は、HDRメタデータのバージョン情報に基づいて、当該メタデータが解釈可能であるかを判定できる。あるいは、HDRメタデータは、基本部と拡張部とから構成され、パラメータの更新又は追加は拡張部の変更により対応し、基本部は更新しないことにしてもよい。つまり、静的HDRメタデータ及び動的HDRメタデータの各々は、複数のバージョンを有し、複数のバーションで共通に用いられる基本部と、バージョン毎に異なる拡張部とを含んでもよい。こうすることで、基本部のHDRメタデータに基づいて、表示装置における後方互換性を確保できる。 By adding version information or the like to the HDR metadata, it is possible to update or add parameters. Thereby, the display device can determine whether or not the metadata can be interpreted based on the version information of the HDR metadata. Alternatively, the HDR metadata may be composed of a basic part and an extension part, and parameter updates or additions may be made by changing the extension part, and the basic part may not be updated. That is, each of the static HDR metadata and the dynamic HDR metadata may have a plurality of versions, and may include a basic part commonly used in a plurality of versions and an extension part different for each version. By doing so, backward compatibility in the display device can be ensured based on the HDR metadata of the basic part.
このように、本実施の形態に係る映像表示方法は、映像ストリームに基づき映像を表示する映像表示方法であって、映像信号に対応する映像ストリームと、静的HDRメタデータ(第1メタデータ)とを取得する取得ステップと、静的HDRメタデータに基づき、映像信号に対応する映像の表示方法を決定して表示する表示ステップとを含む。 As described above, the video display method according to the present embodiment is a video display method for displaying a video based on the video stream, the video stream corresponding to the video signal, and static HDR metadata (first metadata). Includes an acquisition step of acquiring and, and a display step of determining and displaying a video display method corresponding to the video signal based on static HDR metadata.
また、映像信号における輝度値は、コード値として符号化されており、静的HDRメタデータは、複数の輝度値と複数のコード値とを関係付けたEOTFを特定するための情報を含み、表示ステップでは、静的HDRメタデータで特定されるEOTFを用いて、映像信号で示されるコード値を輝度値に変換することで映像を生成する。 Further, the luminance value in the video signal is encoded as a code value, and the static HDR metadata includes and displays information for identifying the EOTF in which the plurality of luminance values and the plurality of code values are associated with each other. In the step, the video is generated by converting the code value indicated by the video signal into the luminance value using the EOTF specified by the static HDR metadata.
[8.データ出力装置]
図9は、BDプレーヤなどのHDR信号を出力するデータ出力装置400の構成を示すブロック図である。データ出力装置400に入力されるHDRメタデータは、HDR信号のマスタリング特性を示す特性データと、HDR信号をSDR信号に変換する、又は、HDR信号のダイナミックレンジを変換する際のトーンマッピング方法を示す変換補助データとを含む。これら2種類のメタデータは、図5及び図6において説明したように、静的HDRメタデータ、又は、動的HDRメタデータとして格納される。さらに、静的HDRメタデータは、コンテンツの管理情報及び、映像ストリーム内の少なくとも一方に格納される。
[8. Data output device]
FIG. 9 is a block diagram showing a configuration of a
データ出力装置400は、ビデオ復号部401と、外部メタ取得部402と、HDRメタ解釈部403と、HDR制御情報生成部404と、DR変換部405と、HDMI出力部406とを備える。
The
ビデオ復号部401は、ビデオの符号化ストリームである映像ストリームを復号することで映像信号(第1映像信号)を生成し、得られた映像信号をDR変換部405に出力する。また、ビデオ復号部401は、映像ストリーム内のHDRメタデータ(第2メタデータ)(静的HDRメタデータ又は動的HDRメタデータ)を取得する。具体的には、ビデオ復号部401は、MPEG−4 AVC又はHEVCのSEIメッセージなどに格納されたHDRメタデータをHDRメタ解釈部403に出力する。
The
外部メタ取得部402は、プレイリストなどのコンテンツの管理情報に格納された静的HDRメタデータ(第1メタデータ)を取得し、取得した静的HDRメタデータをHDRメタ解釈部403に出力する。ここで、コンテンツの管理情報に、プレイアイテムなど、ランダムアクセス可能な所定の単位において変更可能な動的HDRメタデータが格納されていてもよい。この場合、外部メタ取得部402は、コンテンツの管理情報から、動的HDRメタデータを取得し、取得した動的HDRメタデータをHDRメタ解釈部403に出力する。
The external
HDRメタ解釈部403は、ビデオ復号部401又は外部メタ取得部402から出力されたHDRメタデータの種類を判定し、特性データをHDR制御情報生成部404に出力し、変換補助データをDR変換部405に出力する。
The HDR
なお、ビデオ復号部401及び外部メタ取得部402の両方において静的HDRメタデータが取得される場合には、外部メタ取得部402から出力された静的HDRメタデータのみが有効なメタデータとして用いられてもよい。つまり、外部メタ取得部402で取得された第1メタデータ及びビデオ復号部401で取得された第2メタデータが、第1映像信号の連続再生単位に含まれる複数の画像に対して共通に用いられる静的HDRメタデータである場合において、HDRメタ解釈部403は、第1メタデータ及び第2メタデータを共に取得した場合、第1メタデータを解析することで特性データ及び変換補助データを取得する。
When static HDR metadata is acquired by both the
または、HDRメタ解釈部403は、外部メタ取得部402で静的HDRメタデータが取得された場合、当該静的HDRメタデータを有効なメタデータとして用い、さらに、ビデオ復号部401で静的HDRメタデータが取得された場合、当該静的HDRメタデータで有効なメタデータを上書きしてもよい。つまり、外部メタ取得部402で取得された第1メタデータ及びビデオ復号部401で取得された第2メタデータが、第1映像信号の連続再生単位に含まれる複数の画像に対して共通に用いられる静的HDRメタデータである場合において、HDRメタ解釈部403は、第1メタデータ及び第2メタデータのうち第1メタデータのみが取得された場合、第1メタデータを解析することで特性データ及び変換補助データを取得し、第2メタデータが取得された場合、使用するメタデータを第1メタデータから第2メタデータに切り替える。
Alternatively, when the static HDR metadata is acquired by the external
HDR制御情報生成部404は、特性データに基づいてHDMIにおけるHDR制御情報を生成し、生成したHDR制御情報をHDMI出力部406に出力する。ここで、動的HDRメタデータについては、メタデータが有効となるビデオ信号と同期して、HDR制御情報が出力できるように、HDMI出力部406におけるHDR制御情報の出力タイミングが決定される。つまり、HDMI出力部406は、メタデータが有効になるビデオ信号(映像信号)と同期してHDR制御情報を出力する。
The HDR control
DR変換部405は、変換補助データに基づいて、復号後の映像信号をSDR信号に変換したりダイナミックレンジを変換したりする。ここで、データ出力装置400と接続される表示装置がHDR信号の入力に対応している場合にはDR変換部405による変換は不要である。従って、データ出力装置400は、接続先の表示装置がHDR信号の入力に対応しているかどうかをHDMIの初期化処理などにおいて確認することで、変換処理が必要であるかどうかを判定してもよい。変換処理が不要と判定された場合には、ビデオ復号部401で得られた第1映像信号は、DR変換部405を介さずにHDMI出力部406に入力される。
The
つまり、HDMI出力部406は、データ出力装置400に接続されている表示装置がHDR信号(第1映像信号)の輝度範囲の映像出力に対応している場合、第1映像信号及びHDR制御情報を表示装置へ出力する。また、HDMI出力部406は、データ出力装置400に接続されている表示装置がHDR信号(第1映像信号)の輝度範囲の映像出力に対応していない場合、HDRをSDRに変換した第2映像信号及びHDR制御情報を表示装置へ出力する。また、HDMI出力部406は、表示装置がHDR信号(第1映像信号)の輝度範囲の映像出力に対応していか否かを、伝送プロトコル(例えばHDMI)の初期化処理において判定する。
That is, when the display device connected to the
HDMI出力部406は、DR変換部405又はビデオ復号部401から出力された映像信号、及びHDR制御情報をHDMIのプロトコルに従って出力する。
The
なお、データ出力装置400が、放送又はOTTのコンテンツを受信して出力する場合にも、同様の構成を用いることができる。また、データ出力装置400と表示装置とが単一の機器に含まれる場合には、HDMI出力部406は必要ない。
The same configuration can be used when the
また、上記説明では、データ出力装置400が管理情報等からメタデータを取得する外部メタ取得部402を備え、ビデオ復号部401が映像ストリームからメタデータを取得する機能を有しているが、データ出力装置400は、いずれか一方のみを有してもよい。
Further, in the above description, the
また、上記説明では、データ出力装置400がHDMIに従ったデータ(映像信号及びHDR制御情報)を出力する例を述べたが、データ出力装置400は任意の伝送プロトコルに従ったデータを出力すればよい。
Further, in the above description, an example in which the
このように、データ出力装置400は、映像ストリームを復号することで第1輝度範囲(HDR)の第1映像信号を生成する復号部(ビデオ復号部401)と、第1映像信号の輝度範囲に関する第1メタデータを取得する取得部(ビデオ復号部401及び外部メタ取得部402の少なくとも一方)と、第1メタデータを解釈することで、第1映像信号の輝度範囲を示す特性データを取得する解釈部(HDRメタ解釈部403)と、特性データを、所定の伝送プロトコル(例えばHDMI)に従ったHDR制御情報に変換する制御情報生成部(HDR制御情報生成部404)と、HDR制御情報を所定の伝送プロトコルで出力する出力部(HDMI出力部406)とを備える。
As described above, the
これによれば、データ出力装置400は、メタデータに含まれる特性データに基づき、制御情報を生成できる。
According to this, the
また、解釈部(HDRメタ解釈部403)は、さらに、第1メタデータを解釈することで、第1映像信号の輝度範囲を変換するための変換補助データを取得し、データ出力装置400は、さらに、変換補助データに基づいて、第1映像信号の輝度範囲を変換することで第1映像信号の輝度範囲より狭い輝度範囲の第2映像信号を生成する変換部(DR変換部405)を備え、出力部(HDMI出力部406)は、さらに、第1映像信号及び第2映像信号の少なくとも一方を所定の伝送プロトコルで出力する。
Further, the interpretation unit (HDR meta-interpretation unit 403) further interprets the first metadata to acquire conversion auxiliary data for converting the luminance range of the first video signal, and the
これによれば、データ出力装置400は、メタデータに含まれる変換補助データを用いて第1映像信号の輝度範囲を変更できる。
According to this, the
また、復号部(ビデオ復号部401)は、さらに、映像ストリームから第1映像信号の輝度範囲に関する第2メタデータ(HDRメタデータ)を取得し、解釈部(HDRメタ解釈部403)は、第1メタデータ及び第2メタデータの少なくとも一方を解析することで特性データ及び変換補助データを取得する。 Further, the decoding unit (video decoding unit 401) further acquires the second metadata (HDR metadata) regarding the brightness range of the first video signal from the video stream, and the interpretation unit (HDR meta-interpretation unit 403) is the first. Characteristic data and conversion auxiliary data are acquired by analyzing at least one of the 1st metadata and the 2nd metadata.
また、図4に示すように、静的HDRメタデータは、必須メタデータと選択メタデータとを含み、動的HDRメタデータは、選択メタデータのみを含む。つまり、静的HDRメタデータは常に用いられ、動的HDRメタデータは選択的に用いられる。このように、外部メタ取得部402で取得された第1メタデータ又はビデオ復号部401で取得された第2メタデータは、映像信号の連続再生単位に含まれる複数の画像に対して共通に用いられ、特性データを含む静的HDRメタデータ(静的メタデータ)を含む。HDR制御情報生成部404は、静的HDRメタデータに含まれる特性データを、所定の伝送プロトコルに従ったHDR制御情報に変換する。HDMI出力部406は、第1映像信号(HDR信号)を出力する場合、静的HDRメタデータに基づくHDR制御情報を出力する。
Further, as shown in FIG. 4, the static HDR metadata includes the essential metadata and the selection metadata, and the dynamic HDR metadata includes only the selection metadata. That is, static HDR metadata is always used and dynamic HDR metadata is selectively used. In this way, the first metadata acquired by the external
また、外部メタ取得部402で取得された第1メタデータ又はビデオ復号部401で取得された第2メタデータは、さらに、映像信号の連続再生単位より細かい単位に対して共通に用いられ、特性データを含む動的HDRメタデータ(動的メタデータ)を含む。HDR制御情報生成部404は、静的HDRメタデータに含まれる特性データ及び動的HDRメタデータに含まれる特定データを、所定の伝送プロトコルに従ったHDR制御情報に変換する。HDMI出力部406は、第1映像信号(HDR信号)を出力する場合、静的HDRメタデータ及び動的HDRメタデータに基づくHDR制御情報を出力する。
Further, the first metadata acquired by the external
また、本開示に係るデータ生成方法は、データ生成装置が行うデータ生成方法であって、映像信号の輝度範囲に関するメタデータを生成する第1生成ステップと、映像信号とメタデータとを含む映像ストリームを生成する第2生成ステップとを含む。メタデータは、映像信号の輝度範囲を示す特性データと、映像信号の輝度範囲を変換するための変換補助データとを含む。 Further, the data generation method according to the present disclosure is a data generation method performed by a data generation device, which includes a first generation step of generating metadata regarding a brightness range of a video signal, and a video stream including the video signal and the metadata. Includes a second generation step to generate. The metadata includes characteristic data indicating the brightness range of the video signal and conversion auxiliary data for converting the brightness range of the video signal.
[9.HDRメタデータの格納例]
図10は、HDRメタデータを格納するSEIメッセージのデータ構造例を示す図である。図10に示すように、HDRメタデータ専用のSEIメッセージが定義されてもよい。つまり、メタデータは、メタデータ専用のメッセージに格納されてもよい。
[9. HDR metadata storage example]
FIG. 10 is a diagram showing an example of a data structure of an SEI message storing HDR metadata. As shown in FIG. 10, an SEI message dedicated to HDR metadata may be defined. That is, the metadata may be stored in a message dedicated to the metadata.
または、HDRメタデータは、ユーザーデータ格納用の汎用的なSEIメッセージに格納され、当該メッセージのペイロード部分に当該メッセージにHDRメタデータが格納されることを示す情報(後述するHDR拡張識別情報)が設けられてもよい。 Alternatively, the HDR metadata is stored in a general-purpose SEI message for storing user data, and the payload portion of the message contains information (HDR extended identification information described later) indicating that the HDR metadata is stored in the message. It may be provided.
HDRメタデータは、静的HDRメタデータと動的HDRメタデータとを含む。また、静的HDRメタデータが格納されているかどうかを示すフラグ情報と、動的HDRメタデータが格納されているかどうかを示すフラグ情報とが設けられてもよい。これにより、静的HDRメタデータのみを格納する方法、動的HDRメタデータのみを格納する方法、及び、静的HDRメタデータと動的HDRメタデータとの両方を格納する方法の3通りの格納方法を用いることができる。 HDR metadata includes static HDR metadata and dynamic HDR metadata. In addition, flag information indicating whether static HDR metadata is stored and flag information indicating whether dynamic HDR metadata is stored may be provided. As a result, there are three types of storage: a method of storing only static HDR metadata, a method of storing only dynamic HDR metadata, and a method of storing both static HDR metadata and dynamic HDR metadata. The method can be used.
さらに、それぞれのメタデータに対して、解釈が必須である基本データ(基本部)と、解釈がオプションである(解釈が任意である)拡張データ(拡張部)とが定義されてもよい。例えば、メタデータのタイプ(基本データ又は拡張データ)を示すタイプ情報とサイズがヘッダ情報に含まれ、ペイロードにメタデータが格納されるコンテナのフォーマットが定義される。つまり、メタデータは、ペイロードと、ペイロードのデータが基本データであるか拡張データであるかを示す情報と、ペイロードのデータサイズを示す情報とを含む。言い換えると、メタデータはメタデータの種別を示すタイプ情報を含む。例えば、タイプ値が0であるコンテナには基本データが格納される。また、拡張データに対してはタイプ値として1以上の値が割り当てられ、その値により拡張データの種別が示される。 Further, for each metadata, basic data (basic part) whose interpretation is indispensable and extended data (extended part) whose interpretation is optional (interpretation is arbitrary) may be defined. For example, the header information contains type information and size indicating the type of metadata (basic or extended data), and defines the format of the container in which the metadata is stored in the payload. That is, the metadata includes a payload, information indicating whether the payload data is basic data or extended data, and information indicating the data size of the payload. In other words, the metadata contains type information indicating the type of metadata. For example, basic data is stored in a container whose type value is 0. Further, a value of 1 or more is assigned as a type value to the extended data, and the type of the extended data is indicated by the value.
データ出力装置及び表示装置は、タイプ値を参照して、自身が解釈可能なコンテナのデータを取得する。つまり、データ出力装置(又は表示装置)は、タイプ情報を用いて、データ出力装置(又は表示装置)がメタデータを解釈可能であるかを判定し、データ出力装置(又は表示装置)が当該メタデータを解釈可能である場合、当該メタデータを解釈することで特性データ及び変換補助データを取得する。 The data output device and the display device refer to the type value to acquire the data of the container that can be interpreted by itself. That is, the data output device (or display device) uses the type information to determine whether the data output device (or display device) can interpret the metadata, and the data output device (or display device) determines whether the metadata can be interpreted. If the data can be interpreted, the characteristic data and conversion auxiliary data are acquired by interpreting the metadata.
また、HDRメタデータの最大サイズが予め設定され、基本データと拡張データとのサイズの総和が最大サイズ以下となるようにメタデータが生成されてもよい。つまり、メタデータのデータサイズの最大値が規定されており、本開示に係るデータ生成方法は、基本データ及び拡張データの合計のデータサイズを、最大値以下になるようにメタデータを生成する。 Further, the maximum size of HDR metadata may be set in advance, and the metadata may be generated so that the total size of the basic data and the extended data is equal to or less than the maximum size. That is, the maximum value of the data size of the metadata is defined, and the data generation method according to the present disclosure generates the metadata so that the total data size of the basic data and the extended data is equal to or less than the maximum value.
データ出力装置及び表示装置が、この最大サイズ分のメモリを備えることで、HDRメタデータを全てメモリ内に格納できることを保証できる。あるいは、静的HDRメタデータ、又は動的HDRメタデータに対して固定サイズ分のデータ領域を確保しておき、基本データを格納する領域以外は将来拡張用としておくなども可能である。 By providing the memory for this maximum size in the data output device and the display device, it can be guaranteed that all the HDR metadata can be stored in the memory. Alternatively, it is also possible to reserve a data area for a fixed size for the static HDR metadata or the dynamic HDR metadata, and to use the area other than the area for storing the basic data for future expansion.
このようなデータ構造は、コンテンツの管理情報におけるHDRメタデータの格納に用いられてもよい。 Such a data structure may be used to store HDR metadata in content management information.
図11は、ユーザーデータ格納用のSEIメッセージにHDRメタデータが格納される場合のデータ構造の一例を示す図である。メッセージがHDR拡張識別情報と拡張タイプIDとを含む点以外は、図11のデータ構造と同様である。HDR拡張識別情報は、当該メッセージにHDRメタデータが含まれることを示す。拡張タイプIDは、HDRメタデータのバージョン等を示す。つまり、メタデータは、HEVCのSEIメッセージに格納され、当該SEIメッセージは、当該SEIメッセージにメタデータが含まれるか否かを示すHDR拡張識別情報を含む。 FIG. 11 is a diagram showing an example of a data structure when HDR metadata is stored in the SEI message for storing user data. It is similar to the data structure of FIG. 11 except that the message includes HDR extended identification information and extended type ID. The HDR extended identification information indicates that the message contains HDR metadata. The extended type ID indicates the version of HDR metadata and the like. That is, the metadata is stored in the HEVC SEI message, which contains HDR extended identification information indicating whether or not the SEI message contains metadata.
この場合、データ出力装置は、HDR拡張識別情報を含むユーザーデータ格納用のSEIメッセージを受信し、かつデータ出力装置に接続されている表示装置がHDR信号及びHDR制御情報の入力に対応している場合には、HDMIなどの表示装置への出力I/Fのプロトコルに従って、受信したSEIメッセージをそのままコピーして出力する。つまり、データ出力装置は、当該SEIメッセージにメタデータが含まれることを示すHDR拡張識別情報を含むSEIメッセージが取得され、かつ、データ出力先の表示装置がHDR制御情報の入力に対応している場合には、当該SEIメッセージを所定の伝送プロトコル(例えばHDMI)に従ってそのまま出力する。 In this case, the data output device receives the SEI message for storing user data including the HDR extended identification information, and the display device connected to the data output device supports the input of the HDR signal and the HDR control information. In this case, the received SEI message is copied and output as it is according to the output I / F protocol to the display device such as HDMI. That is, the data output device acquires the SEI message including the HDR extended identification information indicating that the SEI message includes metadata, and the display device of the data output destination supports the input of the HDR control information. In this case, the SEI message is output as it is according to a predetermined transmission protocol (for example, HDMI).
これにより、メタデータの内容によらずデータ出力装置は表示装置へHDRメタデータを出力することが可能となる。このような構成により、将来新たなDR変換処理が開発されて新たなHDRメタデータが定義され、この新HDRメタデータに対応する表示装置が新HDRメタデータに対応しないデータ出力装置に接続された場合でも、データ出力装置から表示装置へ新HDRメタデータを出力できる。また、表示装置において新HDRメタデータに応じたDR変換処理の実施が可能となる。 This allows the data output device to output HDR metadata to the display device regardless of the content of the metadata. With such a configuration, a new DR conversion process was developed in the future, new HDR metadata was defined, and a display device corresponding to this new HDR metadata was connected to a data output device not corresponding to the new HDR metadata. Even in this case, the new HDR metadata can be output from the data output device to the display device. In addition, the display device can perform DR conversion processing according to the new HDR metadata.
[10.複数のHDRメタデータの格納例]
図12は、一つのユーザーデータ格納用のSEIメッセージに複数のHDRメタデータを格納する際のデータ構造の一例を示す図である。本SEIメッセージには、ダイナミックレンジ(輝度範囲)の変換に係る複数の変換モード(方式)に対する複数のHDRメタデータが格納される。
[10. Storage example of multiple HDR metadata]
FIG. 12 is a diagram showing an example of a data structure when a plurality of HDR metadata is stored in one SEI message for storing user data. In this SEI message, a plurality of HDR metadata for a plurality of conversion modes (methods) related to the conversion of the dynamic range (luminance range) are stored.
図12に示すデータ構造は、図11に示すデータ構造に対して、HDRメタデータが提供される変換モードの数を示すフィールド(変換モード数)が追加されている。また、変換モード数の後に、各変換モードに対応する複数のHDRメタデータが順に格納される。 In the data structure shown in FIG. 12, a field (number of conversion modes) indicating the number of conversion modes in which HDR metadata is provided is added to the data structure shown in FIG. Further, after the number of conversion modes, a plurality of HDR metadata corresponding to each conversion mode are stored in order.
つまり、本実施の形態に係るデータ生成方法は、データ生成装置が行うデータ生成方法であって、映像信号の輝度範囲を変換する1以上の変換モードに対応する1以上のメタデータ(HDRメタデータ)を生成する第1生成ステップと、映像信号と、1以上のメタデータと、1以上の変換モードの数を示す変換モード数とを含む映像ストリームを生成する第2生成ステップとを含む。 That is, the data generation method according to the present embodiment is a data generation method performed by the data generation device, and is one or more metadata (HDR metadata) corresponding to one or more conversion modes for converting the brightness range of the video signal. ) Is included, and a second generation step of generating a video stream including a video signal, one or more metadata, and a number of conversion modes indicating the number of one or more conversion modes is included.
[11.データ出力装置及びDR変換部の構成]
図13は、本実施の形態に係るデータ出力装置500の構成例を示すブロック図である。このデータ出力装置500は、ビデオ復号部501と、外部メタ取得部502と、HDRメタ解釈部503と、HDR制御情報生成部504と、DR変換部505と、HDMI出力部506とを備える。なお、HDRメタ解釈部503及びDR変換部505の動作が、図9に示すデータ出力装置400と異なる。つまり、ビデオ復号部501、外部メタ取得部502、HDR制御情報生成部504及びHDMI出力部506の動作は、ビデオ復号部401、外部メタ取得部402及びHDR制御情報生成部404及びHDMI出力部406の動作と同様である。
[11. Configuration of data output device and DR conversion unit]
FIG. 13 is a block diagram showing a configuration example of the
また、データ出力装置500は、表示装置510(表示部)と接続されており、生成した映像信号及びHDR制御情報を、HDMI等の所定の伝送プロトコルを介して表示装置510に出力する。
Further, the
DR変換部505及び表示装置510は、それぞれ、複数のダイナミックレンジの変換モード(変換方式)に対応している。ここで、「対応している」とは、その変換モードの処理を行う機能を有することを意味する。まず、HDRメタ解釈部503は、外部メタ取得部502及びビデオ復号部501から、静的HDRメタデータ及び動的HDRメタデータを取得する。コンテンツの管理情報又は符号化映像ストリームには、複数の変換モードに対する複数のHDRメタデータが格納される。HDRメタ解釈部503は、複数のHDRメタデータが対応する複数の変換モードを、使用可能な複数の変換モードと判定する。
The
また、HDRメタ解釈部503は、表示装置510との間で通信すること、又は、別途ネットワークを経由することにより、表示装置510が対応しているHDR信号の変換モードの情報を取得する。そして、HDRメタ解釈部503は、(1)HDRメタデータが対応する変換モードと、(2)DR変換部505が対応している変換モードと、(3)表示装置510が対応している変換モードとに基づいて、(1)ダイナミックレンジの変換処理をデータ出力装置500及び表示装置510とのどちらで行うかと、(2)使用する変換モードとを決定する。
Further, the HDR meta-
変換処理をデータ出力装置500で行うと決定された場合、DR変換部505は、HDRメタ解釈部503から指示された変換モードに従って、HDR信号をSDR信号に変換する。変換処理を表示装置510で行うと決定された場合には、データ出力装置500は、映像信号(HDR信号)を表示装置510に送信するとともに、変換に必要なHDRメタデータをHDMIの制御信号(HDR制御情報)として表示装置510に送信する。
When it is determined that the conversion process is performed by the
なお、上記説明では、DR変換部505は、複数の変換モードに対応しているが、1以上の変換モードに対応していればよい。この場合、データ出力装置500は、1以上の変換モードに対応する1以上のHDRメタデータを取得すればよい。
In the above description, the
このように、データ出力装置500は、映像ストリームを復号することで第1映像信号を生成する復号部(ビデオ復号部501)と、映像信号の輝度範囲を変換する1以上の第1変換モードに対応する1以上のメタデータを取得する取得部(ビデオ復号部501及び外部メタ取得部502の少なくとも一方)と、1以上のメタデータの一つを解釈することで、第1映像信号の輝度範囲を示す特性データと、第1映像信号の輝度範囲を変換するための変換補助データと、を取得する解釈部(HDRメタ解釈部503)と、特性データを、所定の伝送プロトコル(例えばHDMI)に従ったHDR制御情報に変換する制御情報生成部(HDR制御情報生成部504)と、映像信号の輝度範囲を変換する1以上の第2変換モードに対応しており、変換補助データに基づいて、1以上の第2変換モードのいずれかにより、第1映像信号の輝度範囲の変換処理を行うことで第1映像信号の輝度範囲より狭い輝度範囲の第2映像信号を生成する変換部(DR変換部505)と、第2映像信号及びHDR制御情報を所定の伝送プロトコルで表示装置510へ出力する出力部(HDMI出力部506)とを備える。解釈部(HDRメタ解釈部503)は、さらに、1以上の第1変換モードと、1以上の第2変換モードと、表示装置510が対応している、映像信号の輝度範囲を変換する第3変換モードとに基づいて、データ出力装置500及び表示装置510のどちらで上記変換処理を行うかを決定する。
In this way, the
これによれば、データ出力装置500は、1以上のメタデータに対応する第1変換モードと、データ出力装置500が対応している第2変換モードと、表示装置510が対応している第3変換モードとに基づき、データ出力装置500及び表示装置510のどちらで変換処理を行うかを決定できる。これにより、データ出力装置500は、適切に変換処理を行う装置を決定できる。
According to this, the
なお、データ出力装置500が対応している1以上の第2変換モードは、1以上のメタデータに対応する複数の第1変換モードの少なくとも一部を含んでもよいし、1以上の第1変換モードのいずれも含まなくてもよい。同様に、表示装置510が対応している第3変換モードは、1以上の第1変換モードの少なくとも一部を含んでもよいし、1以上の第1変換モードのいずれも含まなくてもよい。また、第3変換モードは、1以上の第2変換モードの少なくとも一部を含んでもよいし、1以上の第2変換モードのいずれも含まなくてもよい。
The one or more second conversion modes supported by the
以下、DR変換部505の構成例を説明する。図14は、DR変換部505の構成例を示すブロック図である。このDR変換部505は、モード判定部511と、N個のモード処理部512と、変換結果出力部513とを備える。N個のモード処理部512は、各々がN個の変換モード(処理方式)の各々に対応し、対応する変換モードの処理を行う。モード判定部511は、HDRメタ解釈部503から指示された変換モードを取得し、変換処理を行うモード処理部512を決定する。つまり、モード判定部511は、HDRメタ解釈部503から指示された変換モードに対応するモード処理部512を選択する。決定されたモード処理部512は、HDR信号(映像信号)に変換処理を行うことでSDR信号(変換後の映像信号)を生成する。変換結果出力部513は、変換後のSDR信号を出力する。
Hereinafter, a configuration example of the
図15は、DR変換部505の別の例であるDR変換部505Aの構成例を示すブロック図である。このDR変換部505は、モード判定部521と、基本処理部522と、N個の拡張モード処理部523と、変換結果出力部524とを備える。
FIG. 15 is a block diagram showing a configuration example of the
基本処理部522は、N個の変換モードに共通の処理であるデフォルトの変換処理を行う。N個の拡張モード処理部523は、基本処理部522の処理に加え、動的HDRメタデータを用いて変換処理のパラメータを動的に制御するなどの拡張処理を行う。また、N個の拡張モード処理部523は、各々がN個の変換モードの各々に対応し、対応する変換モードの拡張処理を行う。例えば、基本処理部522は静的HDRメタデータのみを用いて動作し、拡張モード処理部523は、静的HDRメタデータに加えて、動的HDRメタデータを用いて動作する。
The
[12.HDRメタ解釈部の動作例]
図16及び図17は、HDRメタデータが提供される変換モードと、データ出力装置500における各モードのサポート有無、及び、表示装置510における各モードのサポート有無に基づく、HDRメタ解釈部503の指示内容の例を示す図である。HDRメタ解釈部503は、基本的には、選択可能な組合せの中で、マスター画像に対する再現性が最も高くなる動作を選択する。ここでマスター画像とは、輝度範囲を変更することなく出力した画像である。
[12. HDR meta-interpretation operation example]
16 and 17 are instructions of the
例えば、図16に示す例では、データ出力装置500は、モード1及びモード2に対応しており、表示装置510は、いずれの変換モードにも対応していない。なお、モード1とモード2とでは、モード2のほうがマスター画像に対する再現性が高い。また、HDRメタ解釈部503は、各モードのマスター画像に対する再現性を予め把握している。この場合、HDRメタ解釈部503は、データ出力装置500で変換処理を行うと決定するとともに、モード1及びモード2のうち再現性が高いモード2を選択する。
For example, in the example shown in FIG. 16, the
また、図17に示す例では、データ出力装置500は、モード1に対応しており、表示装置510は、モード1及びモード2に対応している。この場合、HDRメタ解釈部503は、表示装置510で変換処理を行うと決定するとともに、モード1及びモード2のうち再現性が高いモード2を選択する。また、データ出力装置500は、モード2の変換処理に対応するHDRメタデータをHDMIの制御情報(HDR制御情報)として表示装置510に出力する。表示装置510は、当該制御情報を用いてモード2の変換処理を行う。
Further, in the example shown in FIG. 17, the
このように、HDRメタ解釈部503は、さらに、1以上のメタデータにそれぞれ対応する1以上の第1変換モードに含まれ、かつデータ出力装置500が対応する1以上の第2変換モードに含まれる変換モードをデータ出力装置500で行う変換処理の変換モードに決定する。具体的には、HDRメタ解釈部503は、さらに、1以上のメタデータにそれぞれ対応する1以上の第1変換モードに含まれ、かつデータ出力装置500が対応する1以上の第2変換モード及び表示装置510が対応する第3変換モードの少なくとも一方に含まれる変換モードをデータ出力装置500又は表示装置510で行う変換処理の変換モードに決定する。
As described above, the HDR meta-
より具体的には、HDRメタ解釈部503は、複数の第1変換モードに含まれ、かつ複数の第2変換モード及び第3変換モードの少なくとも一方に含まれる複数の変換モードのうち、マスター画像に対する再現性が最も高い変換モードをデータ出力装置500又は表示装置510で行う変換処理の変換モードに決定する。
More specifically, the HDR meta-
言い換えると、データ出力装置500は、データ出力装置500及び表示装置510が対応している変換モードのうち最も再現性が高いモードを選択し、データ出力装置500及び表示装置510のうち選択したモードに対応している装置で変換処理を行うと決定する。
In other words, the
より具体的には、図16に示すように、HDRメタ解釈部503は、決定された変換処理の変換モードが、第2変換モードに含まれ、かつ、第3変換モードに含まれない場合、データ出力装置500で変換処理を行うと決定する。また、図17に示すように、HDRメタ解釈部503は、決定された変換処理の変換モードが、第3変換モードに含まれ、かつ、第2変換モードに含まれない場合、表示装置510で変換処理を行うと決定する。
More specifically, as shown in FIG. 16, the HDR meta-
これにより、データ出力装置500は、複数のメタデータに対応する第1変換モードと、データ出力装置が対応している第2変換モードと、表示装置が対応している第3変換モードとに基づき、使用する変換モードを決定できる。また、データ出力装置500は、マスター画像に対する再現性が最も高い変換モードを選択できるので、表示される映像の画質を向上できる。
As a result, the
図18は、データ出力装置500が表示装置510のパラメータを取得可能であるかどうかに応じて変換処理を決定する例を示す図である。表示装置510のパラメータとは、表示装置510のピーク輝度(表示装置510が表示可能な輝度範囲の最大値)、又は表示装置510が表示可能な表示モードなどである。具体的には、このパラメータは、表示モードとして、現在視聴中の表示モードを示す。例えば、表示モードとは、ノーマルモード、ダイナミックモード及びシネマモード等である。
FIG. 18 is a diagram showing an example in which the
図18に示す例では、データ出力装置500は、モード1、モード2及びモード3に対応しており、表示装置510は、モード1に対応している。また、データ出力装置500は、モード1及びモード2のための表示装置510のパラメータを取得可能であり、モード3のための表示装置510のパラメータを取得不可である。また、モード1よりモード2のほうが再現性が高く、モード2よりモード3のほうが再現性が高い。
In the example shown in FIG. 18, the
この場合、データ出力装置500及び表示装置510が対応しているモードのうち最も再現性が高いモードはモード3であるが、データ出力装置500においてモード3のための表示装置510のパラメータを取得できないため、モード3は除外される。そして、データ出力装置500は、モード3の次に再現性が高く、かつパラメータを取得できるモード2を使用する変換モードとして選択する。そして、データ出力装置500は、モード2に必要なパラメータを表示装置510から取得し、取得したパラメータを用いてモード2の変換処理を行う。
In this case, the mode with the highest reproducibility among the modes supported by the
このように、HDRメタ解釈部503は、さらに、複数のメタデータに対応する複数の第1変換モードの各々のためのパラメータを表示装置510から取得できるか否かに応じて、データ出力装置500又は表示装置510で行う変換処理の変換モードを決定する。具体的には、HDRメタ解釈部503は、複数の第1変換モードに含まれ、かつ複数の第2変換モード及び第3変換モードの少なくとも一方に含まれ、かつ、パラメータを表示装置510から取得できる変換モードをデータ出力装置500又は表示装置510で行う変換処理の変換モードに決定する。
As described above, the HDR meta-
つまり、データ出力装置500は、データ出力装置500及び表示装置510が対応している変換モードのうち最も再現性が高いモードを選択し、選択したモードにデータ出力装置500のみが対応している場合、当該モードのための表示装置510のパラメータを取得できるか否かを判定する。パラメータを取得できる場合は、データ出力装置500は、当該モードを選択する。一方、パラメータを取得できない場合は、データ出力装置500は、他のモード(次に再現性が高いモード)を選択する。
That is, when the
これにより、データ出力装置500は、表示装置510のパラメータを取得できるか否かに応じて、使用する変換モードを決定するので、より適切な変換モードを選択できる。
As a result, the
[13.データ出力装置の構成例2]
以下、データ出力装置の別の構成例について説明する。図19は、データ出力装置500Aの構成を示すブロック図である。このデータ出力装置500Aは、図13に示すデータ出力装置500に対して、さらに、DC部507を備える。DC部507は、ビデオ復号部501で得られた映像信号の解像度をダウンコンバートする。例えば、DC部507は、映像信号が4Kの場合、当該4Kの映像信号を2Kの映像信号にダウンコンバートする。
[13. Data output device configuration example 2]
Hereinafter, another configuration example of the data output device will be described. FIG. 19 is a block diagram showing the configuration of the
この構成により、データ出力装置500Aは、表示装置510が対応する解像度及びダイナミックレンジに応じて、(1)4KのHDR信号を2KのHDR信号に変換して出力する、(2)4KのHDR信号を2KのHDR信号に変換後、DR変換部505においてダイナミックレンジを変更してから出力する、及び(3)4KのSDR信号を2KのSDR信号に変換して出力する、などの動作を選択的に行うことができる。つまり、データ出力装置500Aは、表示装置510の解像度及びHDR信号のサポートの有無などに応じて動作を切替えることができる。
With this configuration, the
図20は、コンテンツにおけるビデオ信号の特性(解像度及びダイナミックレンジ(輝度範囲))及び表示装置510の特性と、データ出力装置500Aの出力信号との組合せ例を示す図である。データ出力装置500Aは、表示装置510の解像度とHDR信号のサポートの有無と整合するように出力信号の形式を選択し、選択した形式の出力信号を生成するようにDC部507及びDR変換部505を制御する。
FIG. 20 is a diagram showing an example of a combination of the characteristics (resolution and dynamic range (luminance range)) of the video signal in the content, the characteristics of the
例えば、コンテンツにおける映像信号が解像度4KのHDR信号であり、表示装置510が解像度4KのHDR信号の表示をサポートしておらず、かつ、解像度2KのHDR信号の表示をサポートしている場合、データ出力装置500Aは、コンテンツにおける映像信号を解像度2KのHDR信号に変換して出力する(図20の2行目に記載した組み合わせ例を参照)。このとき、映像信号の解像度の変換はDC部507において行われる。
For example, when the video signal in the content is an HDR signal having a resolution of 4K, the
また、コンテンツにおける映像信号が解像度4KのHDR信号であり、表示装置510が解像度4KのHDR信号および解像度2KのHDR信号の表示をサポートしておらず、かつ、2KのSDR信号の表示をサポートしている場合、データ出力装置500Aは、コンテンツにおける映像信号を解像度2KのSDR信号に変換して出力する(図20の3行目に記載した組み合わせ例を参照)。このとき、映像信号の解像度の変換はDC部507において行われ、輝度範囲の変換はDR変換部505において行われる。
Further, the video signal in the content is an HDR signal having a resolution of 4K, the
これにより、表示装置510において、コンテンツのビデオ信号をより忠実に再現できる。なお、データ出力装置500Aは、解像度の変換、又は、図13において説明したようなダイナミックレンジの変換を表示装置510において行うように動作してもよい。
As a result, the video signal of the content can be reproduced more faithfully on the
このように、データ出力装置500Aは、ビデオ復号部501で得られた第1映像信号の解像度を下げることで第3映像信号を生成するダウンコンバート部(DC部507)を備える。変換部(DR変換部505)は、さらに、変換補助データに基づいて、複数の第2変換モードのいずれかにより、第3映像信号の輝度範囲の変換処理を行うことで第3映像信号の輝度範囲より狭い輝度範囲の第4映像信号を生成する。出力部(HDMI出力部506)は、さらに、第3映像信号又は第4映像信号を表示装置510へ出力する。
As described above, the
これにより、データ出力装置500Aは、例えば、表示装置510等に適した解像度に、映像信号の解像度を変更できる。
As a result, the
具体的には、表示装置510が、第1映像信号の解像度の映像の表示に対応していない場合、(1)ダウンコンバート部(DC部507)は、第3映像信号を生成し、(2)出力部(HDMI出力部506)は、第3映像信号を表示装置510へ出力する。例えば、図20に示すように、ビデオ信号の解像度が4Kであり、表示装置510の解像度が2Kである場合、2Kの出力信号が出力される。
Specifically, when the
また、表示装置510が、第1映像信号の輝度範囲(HDR)の映像の表示に対応していない場合、(1)変換部(DR変換部505)は、第1映像信号の輝度範囲(HDR)より狭い輝度範囲(SDR)の第2映像信号を生成し、(2)出力部(HDMI出力部506)は、第2映像信号及びHDR制御情報を表示装置510へ出力する。例えば、図20に示すように、ビデオ信号のダイナミックレンジ(輝度範囲)がHDRであり、表示装置510がHDRをサポートしていない場合(SDRの場合)、HDRの映像信号がSDRの映像信号に変換され、SDRの映像信号(出力信号)が出力される。
Further, when the
また、表示装置510が、第1映像信号の解像度の映像の表示に対応しておらず、かつ、第1映像信号の輝度範囲(HDR)の映像の表示に対応していない場合、(1)ダウンコンバート部(DC部507)は、第3映像信号を生成し、(2)変換部(DR変換部505)は、第3映像信号の輝度範囲(HDR)より狭い輝度範囲(SDR)の第4映像信号を生成し、(3)出力部(HDMI出力部506)は、第4映像信号を表示装置510へ出力する。例えば、図20に示すように、ビデオ信号の解像度が4Kであり、ビデオ信号のダイナミックレンジ(輝度範囲)がHDRであり、表示装置510の解像度が2Kであり、表示装置510がHDRをサポートしていない場合(SDRの場合)、2KかつSDRの出力信号が出力される。
Further, when the
[14.HDR信号及び4K信号を再生する動作モデル]
図21は、4KのHDR信号、2KのHDR信号、及び4KのSDR信号を、次世代のBlu−ray再生装置において再生し、再生した信号を、HDR対応の4KTV、HDR非対応の4KTV、及びSDR対応の2KTVのいずれかに対して出力する際の動作モデル例を示す図である。
[14. Operation model for reproducing HDR signals and 4K signals]
In FIG. 21, a 4K HDR signal, a 2K HDR signal, and a 4K SDR signal are reproduced by a next-generation Blu-ray playback device, and the reproduced signals are displayed as an HDR-compatible 4KTV, an HDR-non-compatible 4KTV, and It is a figure which shows the operation model example at the time of output to any of 2KTVs corresponding to SDR.
Blu−ray再生装置は、コンテンツ管理情報に格納される静的HDRメタデータと、ビデオの符号化ストリームに格納される動的HDRメタデータとを取得する。Blu−ray再生装置は、これらのHDRメタデータを用いて、HDMIにより接続された出力先のTVの特性に応じて、ビデオのHDR信号をSDR信号に変換して出力する、又は、HDRメタデータをHDMIの制御信号として出力する。 The Blu-ray playback device acquires static HDR metadata stored in the content management information and dynamic HDR metadata stored in the video encoded stream. The Blu-ray playback device uses these HDR metadata to convert the HDR signal of the video into an SDR signal and output it according to the characteristics of the output destination TV connected by HDMI, or the HDR metadata. Is output as an HDMI control signal.
HDR信号からSDR信号への変換処理、及びHDR信号から表示装置が適合する輝度範囲の映像信号への変換処理の各々は、複数の方式から選択して実装できるものとする。実装した変換処理に対応するHDRメタデータをコンテンツ制作時にコンテンツ管理情報又はビデオの符号化ストリームに格納することで、変換処理の効果を高めることができる。コンテンツ管理情報又は符号化ストリームには、変換方式毎に複数のHDRメタデータを格納することが可能である。 Each of the conversion process from the HDR signal to the SDR signal and the conversion process from the HDR signal to the video signal in the luminance range suitable for the display device can be selected and implemented from a plurality of methods. By storing the HDR metadata corresponding to the implemented conversion process in the content management information or the video coded stream at the time of content production, the effect of the conversion process can be enhanced. A plurality of HDR metadata can be stored in the content management information or the coded stream for each conversion method.
なお、Blu−ray再生装置は、図中のオプション変換モジュールB(option conversion module B)又はオプション変換モジュールD(option conversion module D)のように、複数の変換処理部を備えてもよいし、機器のコストと性能のバランスに鑑みて一つの変換処理部のみを備えてもよいし、変換処理部を備えなくてもよい。同様に、HDR対応のTVは、複数の変換処理部を備えてもよいし、一つの変換処理部のみを備えてもよいし、変換処理部を備えなくてもよい。 The Blu-ray playback device may include a plurality of conversion processing units, such as an option conversion module B (option conversion module B) or an option conversion module D (option conversion module D) in the drawing, or an apparatus. In consideration of the balance between the cost and the performance of the above, only one conversion processing unit may be provided, or the conversion processing unit may not be provided. Similarly, an HDR-compatible TV may include a plurality of conversion processing units, may include only one conversion processing unit, or may not include a conversion processing unit.
また、図11又は図12に示すユーザーデータ格納用のSEIメッセージなどのように、予めフォーマット又は入力時の動作を定めた所定のコンテナにHDRメタデータが格納される。これにより、将来新たな変換処理が開発されて新たなHDRメタデータが定義され、この新HDRメタデータに対応する表示装置が新HDRメタデータに対応しないBlu−ray再生装置に接続された場合でも、Blu−ray再生装置から表示装置へ新HDRメタデータを出力できる。また、表示装置において新HDRメタデータに応じた変換処理の実施が可能となる。これにより新技術が開発された場合に、新HDRメタデータへIDをアサインするなどの簡単な手続きで新技術への対応が可能となる。よって、OTTなど技術進化の早いアプリケーションに対するBlu−rayなどのパッケージメディア規格の競争力を高めることができる。なお、新HDRメタデータに対応したBlu−ray再生装置は、映像データに対して、上記の新たな変換処理を当該再生装置内で施し、表示装置へ処理済の映像データを出力してもよい。 In addition, HDR metadata is stored in a predetermined container whose format or operation at the time of input is predetermined, such as the SEI message for storing user data shown in FIG. 11 or FIG. As a result, even if a new conversion process is developed in the future and new HDR metadata is defined, and a display device corresponding to this new HDR metadata is connected to a Blu-ray playback device that does not support the new HDR metadata. , New HDR metadata can be output from the Blu-ray playback device to the display device. In addition, the display device can perform conversion processing according to the new HDR metadata. As a result, when a new technology is developed, it becomes possible to respond to the new technology by a simple procedure such as assigning an ID to the new HDR metadata. Therefore, it is possible to enhance the competitiveness of package media standards such as Blu-ray for applications such as OTT whose technology is rapidly evolving. The Blu-ray playback device corresponding to the new HDR metadata may perform the above-mentioned new conversion processing on the video data in the playback device and output the processed video data to the display device. ..
また、Blu−ray再生装置、及びTVのどちらで変換処理が行われるかは、図16〜図18に示した方法などに基づいて決定される。なお、再生装置は、TVの解像度に応じて、4Kの信号を2Kの信号にダウンコンバートして出力してもよい。 Further, which of the Blu-ray playback device and the TV performs the conversion process is determined based on the methods shown in FIGS. 16 to 18. The playback device may down-convert a 4K signal into a 2K signal and output it according to the resolution of the TV.
[15.ユーザーガイダンス表示方法1]
図22は、HDRからSDRへの変換処理を実行するBlu−ray機器でのユーザーガイダンス表示方法を示す図である。
[15. User guidance display method 1]
FIG. 22 is a diagram showing a user guidance display method on a Blu-ray device that executes a conversion process from HDR to SDR.
HDRからSDRへの変換処理のアルゴリズムが確立されていないため、正確なHDRからSDRへの変換は現状困難である。また、複数のHDRからSDRへの変換処理アルゴリズムを実装することも可能である。 Since the algorithm for the conversion process from HDR to SDR has not been established, accurate conversion from HDR to SDR is currently difficult. It is also possible to implement a plurality of HDR to SDR conversion processing algorithms.
このため、ユーザがHDR対応ディスクを、HDR非対応TVに接続されたHDR対応Blu−ray機器に挿入した場合には、適切なユーザーガイドを行う必要がある。 Therefore, when the user inserts the HDR compatible disc into the HDR compatible Blu-ray device connected to the HDR non-compatible TV, it is necessary to perform an appropriate user guide.
HDR非対応TVに接続されたHDR対応Blu−ray機器が、HDRからSDRへの変換処理の開始を検知した場合は、例えば「ディスクはHDR対応ディスクです。お使いのTVはHDR非対応TVのため、HDR映像ではなく、Blu−ray機器がHDRからSDRへの変換処理を行ったSDR映像を再生します。」等のガイドメッセージを表示する。 When an HDR-compatible Blu-ray device connected to an HDR-compatible TV detects the start of HDR-to-SDR conversion processing, for example, "The disc is an HDR-compatible disc. Your TV is an HDR-compatible TV. Therefore, instead of the HDR video, the Blu-ray device will play the SDR video that has been converted from HDR to SDR. "
このように、データ出力装置(Blu−ray機器)は、表示装置が第1映像信号(HDR信号)の輝度範囲の映像出力に対応していない場合、第1輝度範囲から第2輝度範囲に変換した第2映像信号(SDR信号)及びHDR制御情報を表示装置へ出力するとともに、第1輝度範囲から第2輝度範囲に変換された第2映像信号が表示される旨を表示装置に表示させる。 In this way, the data output device (Blu-ray device) converts from the first luminance range to the second luminance range when the display device does not correspond to the video output in the luminance range of the first video signal (HDR signal). The second video signal (SDR signal) and HDR control information are output to the display device, and the display device is displayed to the effect that the second video signal converted from the first luminance range to the second luminance range is displayed.
[16.ユーザーガイダンス表示方法2]
図23は、ディスク内に格納されたHDRからSDRへの変換処理実行時のユーザーガイダンスの表示方法を示す図である。
[16. User guidance display method 2]
FIG. 23 is a diagram showing a display method of user guidance at the time of executing the conversion process from HDR to SDR stored in the disk.
HDRからSDRへの変換処理が行われる場合にBlu−ray機器が表示すべきメッセージ(メニュー)がHDRディスク、あるいは、Blu−ray機器内の不揮発メモリなどに格納される。これにより、Blu−ray機器は、HDRからSDRへの変換処理実行時に、メッセージを表示させることができる。この場合、例えば「ディスクはHDR対応ディスクです。お使いのTVはHDR非対応TVのため、HDR映像ではなく、Blu−ray機器がHDRからSDRへの変換処理を行ったSDR映像を再生します。」と表示される。 The message (menu) to be displayed by the Blu-ray device when the conversion process from HDR to SDR is performed is stored in the HDR disk, the non-volatile memory in the Blu-ray device, or the like. As a result, the Blu-ray device can display a message when the conversion process from HDR to SDR is executed. In this case, for example, "The disc is an HDR compatible disc. Since your TV is an HDR non-compatible TV, the Blu-ray device will play the SDR video that has been converted from HDR to SDR, not the HDR video. . "Is displayed.
[17.ユーザーガイダンス表示方法3]
図24は、ディスク内に格納されたHDRからSDRへの変換処理実行時のユーザーガイダンスメニューの表示方法を示す図である。
[17. User guidance display method 3]
FIG. 24 is a diagram showing a display method of the user guidance menu at the time of executing the conversion process from HDR to SDR stored in the disk.
Blu−ray機器は、Blu−rayのメニューを使うことで、「ディスクはHDR対応ディスクです。お使いのTVはHDR非対応TVのため、HDR映像ではなく、Blu−ray機器がHDRからSDRへの変換処理を行ったSDR映像を再生しますが、再生して良いですか?」等のメッセージを表示することができる。Blu−ray機器は、ユーザが「再生します」ボタンを選択した場合、変換画像の表示を開始する。また、Blu−ray機器は、ユーザが「再生しません」を選択した場合は、再生を中止し、ユーザにHDR非対応Blu−rayディスクの挿入を促すメッセージを表示する。 For Blu-ray devices, by using the Blu-ray menu, "The disc is an HDR compatible disc. Since your TV is a non-HDR compatible TV, the Blu-ray device will change from HDR to SDR instead of HDR video. You can display a message such as "I will play the SDR video that has undergone the conversion process. Is it okay to play it?" The Blu-ray device starts displaying the converted image when the user selects the "Play" button. If the user selects "Do not play", the Blu-ray device stops playback and displays a message prompting the user to insert a Blu-ray disc that does not support HDR.
このように、データ出力装置(Blu−ray機器)は、表示装置が第1映像信号(HDR信号)の輝度範囲の映像出力に対応していない場合、第1輝度範囲から第2輝度範囲に変換された第2映像信号(SDR信号)を表示させるかどうかを、ユーザが選択するためのメッセージを表示装置に表示させる。 In this way, the data output device (Blu-ray device) converts from the first luminance range to the second luminance range when the display device does not correspond to the video output in the luminance range of the first video signal (HDR signal). A message for the user to select whether to display the second video signal (SDR signal) is displayed on the display device.
[18.ユーザーガイダンス表示方法4]
図25は、ディスク内に格納されたHDRからSDRへの変換処理実行時の処理方法を選択可能なユーザーガイダンスメニューの表示方法を示す図である。
[18. User guidance display method 4]
FIG. 25 is a diagram showing a display method of a user guidance menu in which a processing method at the time of executing the conversion process from HDR to SDR stored in the disk can be selected.
Blu−ray機器は、Blu−rayにHDRからSDRへの変換処理用のメタデータが格納されている場合は、そのことを表示する。Blu−ray機器は、ユーザが指定の変換方式を選択した場合、より綺麗な変換が可能なことを促すメッセージを表示する。つまり、ディスク内のJava(登録商標)コマンド等により、Blu−ray機器に、どのようなHDRからSDRへの変換処理が実装されているかを判定する。これにより、Blu−ray機器は、「ディスクはHDR対応ディスクです。お使いのTVはHDR非対応TVのため、HDR映像ではなく、Blu−ray機器がHDRからSDRへの変換処理を行ったSDR映像を再生しますが、どの方法を選びますか?(処理1で再生)、(処理3で再生)、(再生しません)」等のHDRからSDRへの変換処理方式の選択メニューを表示することができる。なお、ここで処理1及び処理3は、HDRからSDRへの異なる変換処理である。
The Blu-ray device displays, if the Blu-ray stores the metadata for the conversion process from HDR to SDR, that fact. When the user selects a specified conversion method, the Blu-ray device displays a message prompting that a cleaner conversion is possible. That is, it is determined what kind of HDR to SDR conversion processing is implemented in the Blu-ray device by the Java (registered trademark) command or the like in the disc. As a result, the Blu-ray device says, "The disc is an HDR compatible disc. Since your TV is an HDR non-compatible TV, it is not an HDR video, but an SDR that the Blu-ray device has converted from HDR to SDR. The video will be played, but which method do you choose? (Play in process 1), (Play in process 3), (Do not play) ", etc. Display the selection menu of the conversion processing method from HDR to SDR. be able to. Here, the
このように、データ出力装置(Blu−ray機器)は、表示装置が第1映像信号(HDR信号)の輝度範囲の映像出力に対応していない場合、第1輝度範囲を第2輝度範囲に変換するための複数の変換方式のうちいずれかを、ユーザが選択するためのメッセージを表示装置に表示させる。 In this way, the data output device (Blu-ray device) converts the first luminance range into the second luminance range when the display device does not correspond to the video output of the luminance range of the first video signal (HDR signal). A message for the user to select one of a plurality of conversion methods is displayed on the display device.
[19.ユーザーガイダンス表示方法5]
なお、放送においても同様のメッセージを表示することができる。例えば、HDR信号に対応していないTV又は再生装置は、データ放送のアプリケーションなどを用いて、放送番組がHDR信号であり、で視聴した場合には正しく表示できないことがある旨を示すメッセージを表示する。また、HDR信号に対応したTV又は再生装置は、当該メッセージを表示しなくてもよい。また、メッセージの属性を示すタグ値などにより、当該メッセージがHDR信号に対する警告メッセージであることが示される。HDR信号に対応したTV又は再生装置は、タグ値を参照してメッセージの表示が不要であることを判定する。
[19. User guidance display method 5]
A similar message can be displayed in broadcasting. For example, a TV or playback device that does not support HDR signals uses a data broadcasting application or the like to display a message indicating that the broadcast program is an HDR signal and may not be displayed correctly when viewed with. do. Further, the TV or the playback device corresponding to the HDR signal does not have to display the message. Further, the tag value indicating the attribute of the message indicates that the message is a warning message for the HDR signal. The TV or the playback device corresponding to the HDR signal refers to the tag value and determines that the display of the message is unnecessary.
[20.デュアルディスクの再生動作1]
以上では、HDR信号のみが格納されたHDRディスクの再生動作について説明した。
[20. Dual disc playback operation 1]
In the above, the reproduction operation of the HDR disk in which only the HDR signal is stored has been described.
次に、HDR信号とSDR信号との両方が格納されたデュアルディスクに格納される多重化データについて図26を用いて説明する。図26は、デュアルディスクに格納される多重化データについて説明するための図である。 Next, the multiplexed data stored in the dual disk in which both the HDR signal and the SDR signal are stored will be described with reference to FIG. 26. FIG. 26 is a diagram for explaining the multiplexed data stored in the dual disk.
デュアルディスクでは、図26に示すように、HDR信号とSDR信号とがそれぞれ異なる多重化ストリームとして格納される。例えば、Blu−rayなどの光ディスクにおいては、M2TSと呼ばれるMPEG−2 TSベースの多重化方式により、ビデオやオーディオ、字幕、グラフィックスなど複数メディアのデータが1本の多重化ストリームとして格納される。これらの多重化ストリームは、プレイリストなどの再生制御用のメタデータから参照され、再生時にはプレーヤがメタデータを解析することで再生する多重化ストリーム、あるいは、多重化ストリームに格納される個別の言語のデータを選択する。本例では、HDR用とSDR用とのプレイリストを個別に格納し、それぞれのプレイリストがHDR信号、あるいは、SDR信号を参照するケースを示す。また、HDR信号とSDR信号の両方が格納されていることを示す識別情報などを別途示しても良い。 In the dual disk, as shown in FIG. 26, the HDR signal and the SDR signal are stored as different multiplexed streams. For example, in an optical disk such as Blu-ray, data of a plurality of media such as video, audio, subtitles, and graphics are stored as one multiplexing stream by an MPEG-2 TS-based multiplexing method called M2TS. These multiplexed streams are referenced from metadata for playback control such as playlists, and are played back by the player analyzing the metadata during playback, or individual languages stored in the multiplexed streams. Select the data of. In this example, a case is shown in which playlists for HDR and SDR are stored separately, and each playlist refers to an HDR signal or an SDR signal. Further, identification information or the like indicating that both the HDR signal and the SDR signal are stored may be separately shown.
同一の多重化ストリームにHDR信号とSDR信号との両方を多重化することも可能であるが、MPEG−2 TSにおいて規定されるT−STD(System Target Decoder)などのバッファモデルを満たすように多重化する必要があり、特に、予め定められたデータの読み出しレートの範囲内で、ビットレートの高いビデオを2本多重化するのは困難である。このため、多重化ストリームを分離することが望ましい。 It is possible to multiplex both the HDR signal and the SDR signal in the same multiplexing stream, but multiplex so as to satisfy a buffer model such as T-STD (System Target Recorder) specified in MPEG-2 TS. In particular, it is difficult to multiplex two videos having a high bit rate within a predetermined data read rate range. For this reason, it is desirable to separate the multiplexed streams.
オーディオ、字幕、あるいはグラフィックスなどのデータは、それぞれの多重化ストリームに対して格納する必要があり、1本に多重化する場合に比べてデータ量が増加する。ただし、データ量の増加は、圧縮率の高いビデオ符号化方式を用いてビデオのデータ量を削減することができる。例えば、従来のBlu−rayにおいて使用していたMPEG−4 AVCを、HEVC(High Efficiency Video Coding)に変えることで、1.6〜2倍の圧縮率向上が見込まれる。また、デュアルディスクに格納するのは、2KのHDRとSDRとの組み合わせ、4KのSDRと2KのHDRとの組み合わせなど、2Kを2本、あるいは、2Kと4Kとの組合せとするなど、4Kを2本格納することは禁止することにより、光ディスクの容量に収まる組合せのみを許容してもよい。 Data such as audio, subtitles, and graphics need to be stored for each multiplexing stream, and the amount of data increases as compared with the case of multiplexing into one stream. However, the increase in the amount of data can reduce the amount of video data by using a video coding method having a high compression rate. For example, by changing the MPEG-4 AVC used in the conventional Blu-ray to HEVC (High Efficiency Video Coding), it is expected that the compression rate will be improved by 1.6 to 2 times. In addition, 4K is stored in the dual disk, such as a combination of 2K HDR and SDR, a combination of 4K SDR and 2K HDR, two 2K, or a combination of 2K and 4K. By prohibiting the storage of two, only combinations that fit in the capacity of the optical disk may be allowed.
[21.デュアルディスクの再生動作2]
図27は、デュアルディスクの再生動作を示すフローチャートである。
[21. Dual disc playback operation 2]
FIG. 27 is a flowchart showing the reproduction operation of the dual disc.
まず、再生装置は、再生対象の光ディスクがデュアルディスクであるかどうかを判定する(S301)。そして、デュアルディスクであると判定した場合(S301でYes)、出力先のTVがHDRTVかSDRTVであるかを判定する(S302)。HDRTVであると判定した場合(S302でYes)にはステップS303に進み、SDRTVであると判定した場合(S302でNo)にはステップS304に進む。ステップS303では、デュアルディスク内のHDR信号を含む多重化ストリームからHDRのビデオ信号を取得して、復号し、HDRTVに対して出力する。ステップS304では、デュアルディスク内のSDR信号を含む多重化ストリームからSDRのビデオ信号を取得して、復号し、SDRTVに対して出力する。なお、ステップS301において再生対象がデュアルディスクでないと判定された場合(S301でNo)には、所定の方法により再生可否の判定を行い、判定結果に基づいて再生方法を決定する(S305)。 First, the playback device determines whether or not the optical disc to be played back is a dual disc (S301). Then, when it is determined that the dual disk is used (Yes in S301), it is determined whether the output destination TV is HDRTV or SDRTV (S302). If it is determined to be HDRTV (Yes in S302), the process proceeds to step S303, and if it is determined to be SDRTV (No in S302), the process proceeds to step S304. In step S303, the HDR video signal is acquired from the multiplexed stream including the HDR signal in the dual disk, decoded, and output to the HDRTV. In step S304, the SDR video signal is acquired from the multiplexed stream including the SDR signal in the dual disk, decoded, and output to SDRTV. If it is determined in step S301 that the reproduction target is not a dual disc (No in S301), the reproduction possibility is determined by a predetermined method, and the reproduction method is determined based on the determination result (S305).
[22.ディスクの種類]
上述のように、表示装置が高解像度化及び高輝度範囲化されることで、表示装置の仕様に合わせた複数種別のBlu−ray Disc(以下、BDと記載する)を提供する。図28は、BDの種類を示す図である。図28に示されるように、以下では、解像度が第1解像度であり、輝度範囲が第1輝度範囲である映像信号が記録されたBDは、2K_SDR対応BDと記載する。解像度が第1解像度であり、輝度範囲が第1輝度範囲である映像信号は、BDにストリームとして格納される。このストリームは、2K_SDRストリームと記載する。2K_SDR対応BDは、従来のBDはである。
[22. Disk type]
As described above, by increasing the resolution and the brightness range of the display device, a plurality of types of Blu-ray Discs (hereinafter referred to as BD) according to the specifications of the display device are provided. FIG. 28 is a diagram showing the types of BDs. As shown in FIG. 28, in the following, a BD in which a video signal having a resolution of the first resolution and a luminance range of the first luminance range is recorded is described as a 2K_SDR compatible BD. The video signal whose resolution is the first resolution and whose luminance range is the first luminance range is stored as a stream in the BD. This stream is described as a 2K_SDR stream. The 2K_SDR compatible BD is the conventional BD.
また、解像度が第2解像度であり、輝度範囲が第1輝度範囲である映像信号が記録されたBDは、4K_SDR対応BDと記載する。解像度が第2解像度であり、輝度範囲が第1輝度範囲である映像信号は、BDにストリームとして格納される。このストリームは、4K_SDRストリームと記載する。 Further, a BD in which a video signal having a resolution of the second resolution and a luminance range of the first luminance range is recorded is described as a 4K_SDR compatible BD. The video signal whose resolution is the second resolution and whose luminance range is the first luminance range is stored as a stream in the BD. This stream is described as a 4K_SDR stream.
同様に、解像度が第1解像度であり、輝度範囲が第2輝度範囲である映像信号が記録されたBDは、2K_HDR対応BDと記載する。解像度が第1解像度であり、輝度範囲が第2輝度範囲である映像信号は、BDにストリームとして格納される。このストリームは、2K_HDRストリームと記載する。 Similarly, a BD on which a video signal having a resolution of the first resolution and a luminance range of the second luminance range is recorded is described as a 2K_HDR compatible BD. The video signal whose resolution is the first resolution and whose luminance range is the second luminance range is stored as a stream in the BD. This stream is described as a 2K_HDR stream.
また、解像度が第2解像度であり、輝度範囲が第2輝度範囲である映像信号が記録されたBDは、4K_HDR対応BDと記載する。解像度が第2解像度であり、輝度範囲が第2輝度範囲である映像信号は、BDにストリームとして格納される。このストリームは、4K_HDRストリームと記載する。 Further, a BD in which a video signal having a resolution of the second resolution and a luminance range of the second luminance range is recorded is described as a 4K_HDR compatible BD. The video signal whose resolution is the second resolution and whose luminance range is the second luminance range is stored as a stream in the BD. This stream is described as a 4K_HDR stream.
なお、第1解像度は、例えば、所謂2K(1920x1080、2048x1080)の解像度であるが、このような解像度を含む任意の解像度であってよい。以下では、第1解像度を単に2Kと記載する場合がある。 The first resolution is, for example, a so-called 2K (1920x1080, 2048x1080) resolution, but may be any resolution including such a resolution. In the following, the first resolution may be simply referred to as 2K.
また、第2解像度は、所謂4K(3840x2160、4096x2160)の解像度であるが、このような解像度を含む任意の解像度であってよい。第2解像度は、第1解像度より画素数が多い解像度である。 The second resolution is a so-called 4K (3840x2160, 4096x2160) resolution, but may be any resolution including such a resolution. The second resolution is a resolution having a larger number of pixels than the first resolution.
なお、第1輝度範囲は、例えば、これまで説明したSDR(ピーク輝度が100nitの輝度範囲)である。第2輝度範囲は、例えば、これまで説明したHDR(ピーク輝度が100nitを超える輝度範囲)である。第2輝度範囲は、第1輝度範囲を全て含み、第2輝度範囲のピーク輝度は、第1輝度範囲のピーク輝度よりも大きい。 The first luminance range is, for example, the SDR (luminance range having a peak luminance of 100 nits) described so far. The second luminance range is, for example, the HDR (luminance range in which the peak luminance exceeds 100 nits) described so far. The second luminance range includes the entire first luminance range, and the peak luminance of the second luminance range is larger than the peak luminance of the first luminance range.
図29は、BDの種類をさらに詳細に示す図である。 FIG. 29 is a diagram showing the types of BDs in more detail.
図29の(c)、(f)、(g)、及び(h)に示されるように、1枚のBDで複数の映像表現に対応したデュアルストリームディスクが考えられる。デュアルストリームディスクは、同一のコンテンツを再生するための複数の映像信号であって、解像度及び輝度範囲の少なくとも一方が異なる複数の映像信号が記録されたBDである。 As shown in (c), (f), (g), and (h) of FIG. 29, a dual stream disc corresponding to a plurality of video expressions with one BD can be considered. A dual stream disc is a BD in which a plurality of video signals for reproducing the same content and a plurality of video signals having different resolutions and luminance ranges are recorded.
具体的には、図29の(c)に示されるデュアルストリームディスクは、4K_SDRストリームと、2K_SDRストリームとが記録されたBDである。図29の(f)に示されるデュアルストリームディスクは、2K_HDRストリームと、2K_SDRストリームとが記録されたBDである。 Specifically, the dual stream disc shown in FIG. 29 (c) is a BD on which a 4K_SDR stream and a 2K_SDR stream are recorded. The dual stream disc shown in FIG. 29 (f) is a BD on which a 2K_HDR stream and a 2K_SDR stream are recorded.
図29の(g)に示されるデュアルストリームディスクは、4K_HDRストリームと、4K_SDRストリームとが記録されたBDである。図29の(h)に示されるデュアルストリームディスクは、4K_HDRストリームと、2K_SDRストリームとが記録されたBDである。 The dual stream disc shown in FIG. 29 (g) is a BD on which a 4K_HDR stream and a 4K_SDR stream are recorded. The dual stream disc shown in FIG. 29 (h) is a BD on which a 4K_HDR stream and a 2K_SDR stream are recorded.
なお、図29の(c)に示されるデュアルストリームディスクは、Blu−ray機器が4Kから2Kの解像度のダウンコンバージョン(以下、ダウンコンバートとも記載する)を行うことが可能であるため、必須でない。 The dual stream disc shown in FIG. 29 (c) is not essential because the Blu-ray device can perform down conversion with a resolution of 4K to 2K (hereinafter, also referred to as down conversion).
[23.ディスク容量1]
ここで、以上説明したような各BDについて、図30及び図31を用いて補足する。図30及び図31は、BDに記録されるデータ容量を示す図である。
[23. Disk capacity 1]
Here, each BD as described above will be supplemented with reference to FIGS. 30 and 31. 30 and 31 are diagrams showing the amount of data recorded on the BD.
図30及び図31は、各BDとデュアルストリームディスクで実際に使われるストリームのデータ容量を例示する。 30 and 31 illustrate the data capacity of the stream actually used by each BD and dual stream disc.
図30は、解像度が2Kのストリーム(2K_SDRストリーム及び2K_HDRストリーム)が、MPEG−4 AVCを用いて圧縮されている場合を例示している。Movie length、lossless Audio、Compressed Audioのビットレートは、下記のようになる。なお、BDは、language個数分の音声ストリーム(Lossless AudioおよびCompressed Audio)を記録する。 FIG. 30 illustrates a case where 2K resolution streams (2K_SDR stream and 2K_HDR stream) are compressed using MPEG-4 AVC. The bit rates of Movie length, lossless Audio, and Compressed Audio are as follows. The BD records audio streams (Lossless Audio and Compressed Audio) for the number of languages.
Movie length: 150min (14 -18 mbps)
Lossless Audio: 0 -2 language (4.5mbps)
Compressed Audio: 3 -5 language (1.5mbps)
Movie length: 150min (14 -18 mbps)
Lossless Audio: 0 -2 language (4.5mbps)
Compressed Audio: 3 -5 language (1.5mbps)
この場合、必要なディスク容量の最大値(A)、中間値(B)、及び最小値(C)は、以下のようになる。 In this case, the maximum value (A), the intermediate value (B), and the minimum value (C) of the required disk capacity are as follows.
(A)(18+4.5*2+1.5*5)mbps*(150*60)s/8 = 38.8 GB
(B)(16+4.5*1+1.5*3)mbps*(150*60)s/8 = 28.1 GB
(C)(14+4.5*0+1.5*3)mbps*(150*60)s/8 = 20.8 GB
(A) (18 + 4.5 * 2 + 1.5 * 5) mbps * (150 * 60) s / 8 = 38.8 GB
(B) (16 + 4.5 * 1 + 1.5 * 3) mbps * (150 * 60) s / 8 = 28.1 GB
(C) (14 + 4.5 * 0 + 1.5 * 3) mbps * (150 * 60) s / 8 = 20.8 GB
また、解像度が4Kのストリーム(4K_SDRストリーム及び4K_HDRストリーム)が、HEVCを用いて圧縮されている場合を例示している。Movie length、lossless Audio、Compressed Audioのビットレートは、下記のようになる。 It also illustrates the case where streams with 4K resolution (4K_SDR stream and 4K_HDR stream) are compressed using HEVC. The bit rates of Movie length, lossless Audio, and Compressed Audio are as follows.
Movie length: 150min (35 -40mbps)
Lossless Audio: 0 -2 language (4.5mbps)
Compressed Audio: 3 -6 language (1.5mbps)
Movie length: 150min (35 -40mbps)
Lossless Audio: 0 -2 language (4.5mbps)
Compressed Audio: 3 -6 language (1.5mbps)
この場合、必要なディスク容量の最大値(a)、中間値(b)、及び最小値(c)は、以下のようになる。 In this case, the maximum value (a), the intermediate value (b), and the minimum value (c) of the required disk capacity are as follows.
(a)(40+4.5*2+1.5*5)mbps*(150*60)s/8 = 63.6 GB
(b)(37+4.5*0+1.5*4)mbps*(150*60)s/8 = 48.4 GB
(c)(35+4.5*0+1.5*3)mbps*(150*60)s/8 = 44.4 GB
(A) (40 + 4.5 * 2 + 1.5 * 5) mbps * (150 * 60) s / 8 = 63.6 GB
(B) (37 + 4.5 * 0 + 1.5 * 4) mbps * (150 * 60) s / 8 = 48.4 GB
(C) (35 + 4.5 * 0 + 1.5 * 3) mbps * (150 * 60) s / 8 = 44.4 GB
ここで、MPEG−4 AVCを用いて圧縮された2K_HDRストリームと、MPEG−4 AVCを用いて圧縮された2K_SDRストリームとの両方が記録されたデュアルストリームディスクに必要なディスク容量は、上記(A)+(A)、(B)+(B)、及び、(C)+(C)により求められる。具体的には、最大値77.6GB、中間値56.2GB、及び、最小値41.6GBとなる。 Here, the disk capacity required for the dual stream disk in which both the 2K_HDR stream compressed using MPEG-4 AVC and the 2K_SDR stream compressed using MPEG-4 AVC are recorded is described in (A) above. It is obtained by + (A), (B) + (B), and (C) + (C). Specifically, the maximum value is 77.6 GB, the intermediate value is 56.2 GB, and the minimum value is 41.6 GB.
従来の50GBに加えて、66GB、100GBのディスクを対象としているため、上記のようなデュアルストリームディスクも容量の面においては実現可能である。 Since 66GB and 100GB discs are targeted in addition to the conventional 50GB discs, the dual stream discs as described above can also be realized in terms of capacity.
なお、HEVCを用いて圧縮された4K_HDRストリームと、HEVCを用いて圧縮された2K_HDRストリームとの両方が記録されたデュアルストリームディスクに必要なディスク容量は、上記(b)+(b)に基づけば96.8GBであり、上記(c)+(c)に基づけば88.8GBである。このため、このようなデュアルストリームディスクは、100GBの容量のディスクにより実現可能である。 The disk capacity required for the dual stream disk in which both the 4K_HDR stream compressed using HEVC and the 2K_HDR stream compressed using HEVC are recorded is based on the above (b) + (b). It is 96.8 GB, which is 88.8 GB based on the above (c) + (c). Therefore, such a dual stream disk can be realized by a disk having a capacity of 100 GB.
同様に、HEVCを用いて圧縮された4K_HDRストリームと、MPEG−4 AVCを用いて圧縮された2K_SDRストリームとの両方が記録されたデュアルストリームディスクに必要なディスク容量は、上記(a)+(B)に基づけば91.7GBであり、上記(c)+(C)に基づけば65.2GBである。このため、このようなデュアルストリームディスクは、100GBの容量のディスクまたは66GBの容量のディスクにより実現可能である。 Similarly, the disk capacity required for a dual stream disk in which both a 4K_HDR stream compressed using HEVC and a 2K_SDR stream compressed using MPEG-4 AVC are recorded is the above (a) + (B). ) Is 91.7 GB, and based on the above (c) + (C) is 65.2 GB. Therefore, such a dual stream disk can be realized by a disk having a capacity of 100 GB or a disk having a capacity of 66 GB.
[24.ディスク容量2]
さらに、図31を用いて別の例について説明する。図31は、解像度が2Kのストリーム(2K_SDRストリーム及び2K_HDRストリーム)が、HEVCを用いて圧縮されている場合を例示している。Movie length、lossless Audio、Compressed Audioのビットレートは、下記のようになる。
[24. Disk capacity 2]
Further, another example will be described with reference to FIG. FIG. 31 illustrates a case where streams having a resolution of 2K (2K_SDR stream and 2K_HDR stream) are compressed using HEVC. The bit rates of Movie length, lossless Audio, and Compressed Audio are as follows.
Movie length: 150min (7 - 9 mbps)
Lossless Audio: 0 - 2 language (4.5mbps)
Compressed Audio: 3 - 5 language (1.5mbps)
Movie length: 150min (7-9 mbps)
Lossless Audio: 0 --2 language (4.5mbps)
Compressed Audio: 3-5 languages (1.5mbps)
この場合、必要なディスク容量の最大値(A)、中間値(B)、及び最小値(C)は、以下のようになる。 In this case, the maximum value (A), the intermediate value (B), and the minimum value (C) of the required disk capacity are as follows.
(α)(9+4.5*2+1.5*5)mbps*(150*60)s/8 = 25.3 GB
(β)(8+4.5*1+1.5*3)mbps*(150*60)s/8 = 19.1 GB
(γ)(7+4.5*0+1.5*3)mbps*(150*60)s/8 = 12.9 GB
(Α) (9 + 4.5 * 2 + 1.5 * 5) mbps * (150 * 60) s / 8 = 25.3 GB
(Β) (8 + 4.5 * 1 + 1.5 * 3) mbps * (150 * 60) s / 8 = 19.1 GB
(Γ) (7 + 4.5 * 0 + 1.5 * 3) mbps * (150 * 60) s / 8 = 12.9 GB
ここで、HEVCを用いて圧縮された2K_HDRストリームと、HEVCを用いて圧縮された2K_SDRストリームとの両方が記録されたデュアルストリームディスクに必要なディスク容量は、上記(α)+(α)、(β)+(β)、及び、(γ)+(γ)により求められる。具体的には、最大値50.6GB、typ値38.2GB、及び、最小値25.8GBとなる。 Here, the disk capacity required for the dual stream disk in which both the 2K_HDR stream compressed using HEVC and the 2K_SDR stream compressed using HEVC are recorded is the above (α) + (α), ( It is obtained by β) + (β) and (γ) + (γ). Specifically, the maximum value is 50.6 GB, the type value is 38.2 GB, and the minimum value is 25.8 GB.
従来の50GBに加えて、66GB、100GBのディスクを対象としているため、上記のようなデュアルストリームディスクも容量の面においては実現可能である。 Since 66GB and 100GB discs are targeted in addition to the conventional 50GB discs, the dual stream discs as described above can also be realized in terms of capacity.
同様に、HEVCを用いて圧縮された4K_HDRストリームと、HEVCを用いて圧縮された2K_SDRストリームとの両方が記録されたデュアルストリームディスクに必要なディスク容量は、上記(a)+(α)に基づけば88.9GBであり、上記(b)+(β)に基づけば67.5GBであり、上記(b)+(γ)に基づけば61.3GBであり、上記(c)+(γ)に基づけば57.3GBである。このため、このようなデュアルストリームディスクは、100GBの容量のディスクまたは66GBの容量のディスクにより実現可能である。 Similarly, the disk capacity required for a dual stream disk on which both a 4K_HDR stream compressed using HEVC and a 2K_SDR stream compressed using HEVC are recorded is based on (a) + (α) above. 88.9 GB, 67.5 GB based on (b) + (β) above, 61.3 GB based on (b) + (γ) above, and (c) + (γ) above. Based on it, it is 57.3 GB. Therefore, such a dual stream disk can be realized by a disk having a capacity of 100 GB or a disk having a capacity of 66 GB.
[25.ディスクの種類の詳細1]
BDには、より詳細にはビデオストリームと、グラフィックストリーム(実施の形態1のグラフィックスのストリーム)とが記録される。ここで、図32は、デュアルストリームディスクを含む各BDに対し、各ディスクに記録された、ビデオストリームとグラフィックストリームとの組み合わせの一例を示す図である。
[25. Details of disc types 1]
More specifically, a video stream and a graphic stream (a graphic stream of the first embodiment) are recorded on the BD. Here, FIG. 32 is a diagram showing an example of a combination of a video stream and a graphic stream recorded on each disc for each BD including a dual stream disc.
図32は、コンテンツ(BD)の制作の手間を考慮して、グラフィックストリームは、対応するビデオストリームの解像度によらず、解像度が2Kで記録する。2K_SDRストリームと4K_SDRストリームとで、グラフィックストリームを共有することができる。ただし、グラフィックストリームは、対応するビデオストリームの輝度範囲に合わせた輝度範囲で記録する。ビデオストリームがHDRの場合は、HDRのグラフィックスストリームを記録する。ビデオストリームがSDRの場合は、SDRのグラフィックスストリームを記録する。グラフィックストリームのSDRからHDRへの変換は、コンテンツの制作時に行う。 In FIG. 32, the graphic stream is recorded at a resolution of 2K regardless of the resolution of the corresponding video stream in consideration of the time and effort of producing the content (BD). A graphic stream can be shared between a 2K_SDR stream and a 4K_SDR stream. However, the graphic stream is recorded in a luminance range that matches the luminance range of the corresponding video stream. If the video stream is HDR, record the HDR graphics stream. If the video stream is SDR, record the SDR graphics stream. The conversion of the graphic stream from SDR to HDR is performed at the time of content production.
[26.ディスクの種類の詳細2]
図33は、デュアルストリームディスクを含む各BDに対し、各ディスクに記録された、ビデオストリームとグラフィックストリームとの組み合わせの別の例を示す図である。
[26. Details of disc types 2]
FIG. 33 is a diagram showing another example of the combination of the video stream and the graphic stream recorded on each disc for each BD including the dual stream disc.
図33では、コンテンツの制作の手間を考慮して、グラフィックストリームは、対応するビデオストリームの解像度及び輝度範囲によらず、解像度が2K、かつ、輝度範囲がSDRで記録する。2K_SDRストリーム、4K_SDRストリーム、2K_HDRストリーム、及び、4K_HDRストリーム全てで、グラフィックストリームを共有することができる。この場合は、グラフィックストリームの解像度の2Kから4Kへの変換、及び、グラフィックストリームの輝度範囲のSDRからHDRへの変換は、いずれもBlu−ray機器で実行される。 In FIG. 33, in consideration of the time and effort of producing the content, the graphic stream is recorded with a resolution of 2K and a luminance range of SDR regardless of the resolution and the luminance range of the corresponding video stream. A graphic stream can be shared by all of the 2K_SDR stream, the 4K_SDR stream, the 2K_HDR stream, and the 4K_HDR stream. In this case, the conversion of the resolution of the graphic stream from 2K to 4K and the conversion of the brightness range of the graphic stream from SDR to HDR are both performed by the Blu-ray device.
[27.ディスクの種類の詳細3]
図34は、デュアルストリームディスクを含む各BDに対し、各ディスクに記録された、ビデオストリームとグラフィックストリームとの組み合わせのさらに別の例を示す図である。
[27. Details of disc types 3]
FIG. 34 is a diagram showing still another example of the combination of the video stream and the graphic stream recorded on each disc for each BD including the dual stream disc.
図34は、Blu−ray機器においてグラフィックストリームの変換が不要となるように、コンテンツの制作時に、グラフィックストリームの解像度及び輝度範囲は、対応するビデオストリームの解像度及び輝度範囲に合わされて記録する。 In FIG. 34, the resolution and luminance range of the graphic stream are recorded in accordance with the resolution and luminance range of the corresponding video stream at the time of content production so that the conversion of the graphic stream is not required in the Blu-ray device.
[28.まとめ]
4K対応BDまたはHDR対応BDを再生するBlu−ray機器は、2K_SDR対応TV、2K_HDR対応TV、4K_SDR対応TV、及び、4K_HDR対応TVの4つのTVに対応する必要がある。具体的には、Blu−ray機器は、3組のHDMI/HDCP規格(HDMI1.4/HDCP1.4、HDMI2.0/HDCP2.1、HDMI2.1/HDCP2.2)をサポートする必要がある。
[28. summary]
A Blu-ray device that reproduces a 4K-compatible BD or an HDR-compatible BD needs to support four TVs: a 2K_SDR-compatible TV, a 2K_HDR-compatible TV, a 4K_SDR-compatible TV, and a 4K_HDR-compatible TV. Specifically, Blu-ray devices need to support three sets of HDMI / HDCP standards (HDMI1.4 / HDMI1.4, HDMI2.0 / HDMI2.1, HDMI2.1 / HDMI2.2).
さらに、Blu−ray機器は、4種類のBlu−rayディスク(2K_SDR対応BD、2K_HDR対応BD、4K_SDR対応BD、及び、4K_HDR対応BD)の再生を行う場合、そのBD(コンテンツ)毎、及び、接続されている表示装置(TV)毎に、適切な処理とHDMI/HDCPとを選択する必要がある。さらに、ビデオにグラフィックを合成する場合も、BDの種類と接続されている表示装置(TV)の種類により、処理を変える必要がある。 Further, when the Blu-ray device reproduces four types of Blu-ray discs (2K_SDR compatible BD, 2K_HDR compatible BD, 4K_SDR compatible BD, and 4K_HDR compatible BD), each BD (content) and connection It is necessary to select appropriate processing and HDMI / HDCP for each display device (TV). Further, when synthesizing a graphic with a video, it is necessary to change the processing depending on the type of BD and the type of display device (TV) connected to the video.
このため、Blu−ray機器の内部処理が非常に複雑になる。上記実施の形態3においては、Blu−ray機器内部処理を比較的簡単にするための各種手法を提供した。 Therefore, the internal processing of the Blu-ray device becomes very complicated. In the third embodiment, various methods for making the internal processing of the Blu-ray device relatively simple are provided.
[1]HDR非対応のTVにHDR信号を表示する場合は、HDRからSDRへの変換が必要になる。これに対し、上記実施の形態3では、この変換をBlu−ray機器においてオプション化するために、デュアルストリームディスク(Dual Streams Disc)というBDの構成を提案した。 [1] When displaying an HDR signal on a TV that does not support HDR, conversion from HDR to SDR is required. On the other hand, in the third embodiment, in order to make this conversion optional in the Blu-ray device, a BD configuration called a dual stream disk (Dual Streams Disc) has been proposed.
[2]また、上記実施の形態3では、グラフィックストリームに制限を加え、ビデオストリームとグラフィックストリームとの組み合わせの種類を減らした。 [2] Further, in the third embodiment, the graphic stream is limited, and the types of combinations of the video stream and the graphic stream are reduced.
[3]上記実施の形態3では、デュアルストリームディスクと、グラフィックストリームの制限とにより、Blu−ray機器内での複雑な処理の組み合わせ数を大幅に減らしている。 [3] In the third embodiment, the number of combinations of complicated processes in the Blu-ray device is significantly reduced by the dual stream disk and the limitation of the graphic stream.
[4]上記実施の形態3では、疑似HDR変換を導入した場合でも、デュアルストリームディスクの処理に対して矛盾が生じない、内部処理及びHDMI処理を提示した。 [4] In the third embodiment, the internal processing and the HDMI processing are presented so that there is no contradiction in the processing of the dual stream disk even when the pseudo HDR conversion is introduced.
本開示の変換方法では、HDR映像をSDRTVで表示する場合において、表示するSDRTVのピーク輝度が100nitを超える(通常200nit以上)ことを利用して、HDR映像を100nit以下のSDR映像に変換するのではなく、100nitを超える領域の階調をある程度保つよう変換し、元のHDRに近い疑似HDR映像に変換してSDRTVに表示させることができる「HDR→疑似HDR変換処理」を実現する。 In the conversion method of the present disclosure, when the HDR video is displayed in SDRTV, the HDR video is converted into an SDR video of 100 nit or less by utilizing the fact that the peak brightness of the displayed SDRTV exceeds 100 nit (usually 200 nit or more). Instead, it realizes "HDR → pseudo HDR conversion processing" that can be converted so as to maintain the gradation of a region exceeding 100 nits to some extent, converted into a pseudo HDR image close to the original HDR, and displayed on SDRTV.
また、変換方法では、SDRTVのディスプレイ特性(最高輝度、入出力特性、および表示モード)によって「HDR→疑似HDR変換処理」の変換方法を切り替えてもよい。 Further, in the conversion method, the conversion method of "HDR → pseudo HDR conversion processing" may be switched depending on the display characteristics (maximum brightness, input / output characteristics, and display mode) of SDRTV.
ディスプレイ特性情報の取得方法としては、(1)HDMIやネットワークを通して自動取得すること、(2)ユーザにメーカー名、品番等の情報入力させることで生成すること、および(3)メーカー名や品番等の情報を使ってクラウド等から取得することが考えられる。 Display characteristic information can be acquired by (1) automatically acquiring it through HDMI or a network, (2) generating it by having the user enter information such as the manufacturer name and product number, and (3) the manufacturer name and product number, etc. It is conceivable to acquire from the cloud etc. using the information of.
また、変換装置100のディスプレイ特性情報の取得タイミングとしては、(1)疑似HDR変換する直前に取得すること、および(2)表示装置200(SDRTV等)と初めて接続する時(接続が確立した時)に取得することが考えられる。
The timing of acquiring the display characteristic information of the
また、変換方法では、HDR映像の輝度情報(CAL、CPL)によって変換方法を切り替えてもよい。 Further, in the conversion method, the conversion method may be switched according to the luminance information (CAL, CPL) of the HDR video.
例えば、変換装置100のHDR映像の輝度情報の取得方法としては、(1)HDR映像に付随したメタ情報として取得すること、(2)ユーザにコンテンツのタイトル情報を入力させることで取得すること、および(3)ユーザに有力させた入力情報を使ってクラウド等から取得すること等が考えられる。
For example, as a method of acquiring the brightness information of the HDR video of the
また、変換方法の詳細としては、(1)DPLを超えないように変換し、(2)CPLがDPLになるように変換し、(3)CALおよびその周辺以下の輝度は変更せず、(4)自然対数を用いて変換し、(5)DPLでクリップ処理をする。 Further, as details of the conversion method, (1) conversion is performed so as not to exceed DPL, (2) conversion is performed so that CPL becomes DPL, and (3) brightness below CAL and its periphery is not changed. 4) Convert using the natural logarithm, and (5) Clip with DPL.
また、変換方法では、疑似HDRの効果を高めるために、SDRTVの表示モード、表示パラメータなどの表示設定を、表示装置200に送信して切り替えることも可能であり、例えば、ユーザに表示設定を促すメッセージを画面に表示してもよい。
Further, in the conversion method, in order to enhance the effect of pseudo HDR, it is possible to transmit the display settings such as the display mode and display parameters of SDRTV to the
[29.疑似HDRの必要性1]
次に、疑似HDRの必要性について図35A〜図35Cを用いて説明する。
[29. Necessity of pseudo HDR 1]
Next, the necessity of pseudo HDR will be described with reference to FIGS. 35A to 35C.
図35Aは、HDRTV内で、HDR信号を変換してHDR表示を行う表示処理の一例を示す図である。 FIG. 35A is a diagram showing an example of display processing in which an HDR signal is converted and HDR display is performed in HDRTV.
図35Aに示すように、HDR映像を表示する場合、表示装置がHDRTVであっても、HDRの輝度範囲の最大値(ピーク輝度(HPL(HDR Peak Luminance):例1500nit))をそのまま表示することができない場合がある。この場合、HDRのEOTFを用いた逆量子化を行った後のリニアな信号を、その表示装置の輝度範囲の最大値(ピーク輝度(DPL(Display Peak Iuminance):例750nit))に合わせるための輝度変換を行う。そして、輝度変換を行うことで得られた映像信号を表示装置に入力することで、その表示装置の限界である最大値の輝度範囲に合わせたHDR映像を表示することができる。 As shown in FIG. 35A, when displaying an HDR image, even if the display device is HDRTV, the maximum value of the HDR brightness range (peak brightness (HPL (HDR Peak Luminance): Example 1500 nit)) is displayed as it is. May not be possible. In this case, in order to match the linear signal after dequantization using HDR EOTF to the maximum value (peak brightness (DPL (Display Peak Iminance): Example 750 nit)) of the brightness range of the display device. Perform brightness conversion. Then, by inputting the video signal obtained by performing the luminance conversion to the display device, it is possible to display the HDR video that matches the luminance range of the maximum value which is the limit of the display device.
図35Bは、HDR対応の再生装置とSDRTVとを用いて、HDR表示を行う表示処理の一例を示す図である。 FIG. 35B is a diagram showing an example of display processing for performing HDR display using an HDR compatible playback device and SDRTV.
図35Bに示すように、HDR映像を表示する場合、表示装置がSDRTVであれば、表示するSDRTVの輝度範囲の最大値(ピーク輝度(DPL:例300nit))が100nitを超えることを利用して、図35BのHDR対応の再生装置(Blu−ray機器)内の「HDR→疑似HDR変換処理」で、HDRTV内で行っている、「HDRのEOTF変換」とSDRTVの輝度範囲の最大値であるDPL(例:300nit)を使った「輝度変換」を行い、「輝度変換」を行うことで得られた信号をSDRTVの「表示装置」に直接入力できれば、SDRTVを使っても、HDRTVと同じ効果を実現することができる。 As shown in FIG. 35B, when displaying an HDR image, if the display device is SDRTV, the maximum value (peak brightness (DPL: 300 nit)) of the luminance range of SDRTV to be displayed exceeds 100 nit. , The maximum value of the "HDR EOTF conversion" and the SDRTV luminance range performed in the HDRTV by the "HDR → pseudo HDR conversion process" in the HDR compatible playback device (Blu-ray device) of FIG. 35B. If the signal obtained by performing "luminance conversion" using DPL (example: 300 nits) and performing "luminance conversion" can be directly input to the "display device" of SDRTV, the same effect as HDRTV can be obtained even if SDRTV is used. Can be realized.
しかしながら、SDRTVには、このような信号を、外部から直接入力するための手段が無いため、実現できない。 However, SDRTV cannot be realized because there is no means for directly inputting such a signal from the outside.
図35Cは、標準インターフェースを介して互いに接続したHDR対応の再生装置とSDRTVと用いて、HDR表示を行う表示処理の一例を示す図である。 FIG. 35C is a diagram showing an example of display processing for performing HDR display by using an HDR compatible playback device and SDRTV connected to each other via a standard interface.
図35Cに示すように、通常、SDRTVが備える入力インターフェース(HDMI等)を使って、図35Bの効果を得られるような信号をSDRTVに入力する必要がある。SDRTVでは、入力インターフェースを介して入力した信号は、「SDRのEOTF変換」と「モード毎の輝度変換」と「表示装置」を順に通過し、その表示装置の最大値の輝度範囲に合わせた映像を表示する。このため、HDR対応のBlu−ray機器内で、SDRTVで入力インターフェースの直後に通過する、「SDRのEOTF変換」と「モード毎の輝度変換」とをキャンセルできるような信号(疑似HDR信号)を生成する。つまり、HDR対応のBlu−ray機器内で、「HDRのEOTF変換」とSDRTVのピーク輝度(DPL)を使った「輝度変換」との直後に、「モード毎の逆輝度変換」と「逆SDRのEOTF変換」とを行うことで、「輝度変換」直後の信号を「表示装置」に入力した場合(図35Cの破線矢印)と同じ効果を疑似的実現する。 As shown in FIG. 35C, it is usually necessary to input a signal to the SDRTV so as to obtain the effect of FIG. 35B by using an input interface (HDMI or the like) provided in the SDRTV. In SDRTV, the signal input via the input interface passes through "SDR EOTF conversion", "luminance conversion for each mode", and "display device" in order, and the image is adjusted to the maximum brightness range of the display device. Is displayed. Therefore, in an HDR-compatible Blu-ray device, a signal (pseudo-HDR signal) that can cancel "SDR EOTF conversion" and "mode-by-mode brightness conversion" that passes immediately after the input interface in SDRTV is transmitted. Generate. That is, in an HDR-compatible Blu-ray device, immediately after "HDR EOTF conversion" and "brightness conversion" using SDRTV peak brightness (DPL), "reverse brightness conversion for each mode" and "reverse SDR" By performing "EOTF conversion", the same effect as when the signal immediately after "luminance conversion" is input to the "display device" (broken line arrow in FIG. 35C) is realized in a pseudo manner.
[30.疑似HDRの必要性2]
通常のSDRTVは入力信号が100nitであるが、視聴環境(暗い室:シネマモード、明るい部屋:ダイナミックモード等)に合わせて200nit以上の映像表現が可能な能力を持つ。しかし、SDRTVへの入力信号の輝度上限が100nitに決められていたため、その能力を直接つかうことはできなかった。
[30. Necessity of pseudo HDR 2]
A normal SDRTV has an input signal of 100 nits, but has the ability to express an image of 200 nits or more according to the viewing environment (dark room: cinema mode, bright room: dynamic mode, etc.). However, since the upper limit of the brightness of the input signal to the SDRTV was set to 100 nits, that ability could not be used directly.
HDR映像をSDRTVで表示する場合において、表示するSDRTVのピーク輝度が100nitを超える(通常200nit以上)ことを利用して、HDR映像を100nit以下のSDR映像に変換するのではなく、100nitを超える輝度範囲の階調をある程度保つように、「HDR→疑似HDR変換処理」を行っている。このため、元のHDRに近い疑似HDR映像としてSDRTVに表示させることができる。 When displaying HDR video in SDRTV, the peak brightness of SDRTV to be displayed exceeds 100 nits (usually 200 nits or more), and the HDR video is not converted to SDR video of 100 nits or less, but the brightness exceeds 100 nits. “HDR → pseudo HDR conversion processing” is performed so as to maintain the gradation of the range to some extent. Therefore, it can be displayed on the SDRTV as a pseudo HDR image close to the original HDR.
この「HDR→疑似HDR変換処理」技術をBlu−rayに応用した場合は、図36に示すように、HDRディスクにはHDR信号のみを格納し、Blu−ray機器にSDRTVを接続した場合、Blu−ray機器が、「HDR→疑似HDR変換処理」を行い、HDR信号を疑似HDR信号に変換してSDRTVに送る。これにより、SDRTVは、受信した疑似HDR信号から輝度値に変換することで、疑似的なHDR効果を持った映像を表示させることができる。このように、HDR対応TVが無い場合でも、HDR対応のBDとHDR対応のBlu−ray機器を用意すれば、SDRTVであっても、SDR映像よりも高画質な疑似HDR映像を表示させることができる。 When this "HDR → pseudo HDR conversion processing" technology is applied to Blu-ray, as shown in FIG. 36, only the HDR signal is stored in the HDR disk, and when the SDRTV is connected to the Blu-ray device, Blu The -ray device performs "HDR → pseudo HDR conversion processing", converts the HDR signal into a pseudo HDR signal, and sends it to SDRTV. As a result, the SDRTV can display an image having a pseudo HDR effect by converting the received pseudo HDR signal into a luminance value. In this way, even if there is no HDR compatible TV, if an HDR compatible BD and an HDR compatible Blu-ray device are prepared, even with SDRTV, it is possible to display a pseudo HDR image with higher image quality than the SDR image. can.
従って、HDR映像を見るためにはHDR対応TVが必要と考えられていたが、HDR的な効果を実感できる疑似HDR映像を、既存のSDRTVで見ることができる。これにより、HDR対応Blu−rayの普及が期待できる。 Therefore, it was thought that an HDR-compatible TV was necessary to view the HDR image, but a pseudo HDR image in which the HDR-like effect can be realized can be viewed with the existing SDRTV. As a result, the spread of HDR-compatible Blu-ray can be expected.
[31.効果等]
放送、Blu−ray等のパッケージメディア、OTT等のインターネット配信により送られてきたHDR信号を、HDR−疑似HDR変換処理を行うことで、疑似HDR信号に変換する。これにより、HDR信号を疑似HDR映像として既存のSDRTVで表示することが可能となる。
[31. Effect, etc.]
The HDR signal sent by broadcasting, package media such as Blu-ray, and Internet distribution such as OTT is converted into a pseudo HDR signal by performing HDR-pseudo HDR conversion processing. This makes it possible to display the HDR signal as a pseudo HDR image on the existing SDRTV.
[32.EOTFについて]
ここで、EOTFについて、図37Aおよび図37Bを用いて説明する。
[32. About EOTF]
Here, EOTF will be described with reference to FIGS. 37A and 37B.
図37Aは、HDRおよびSDRのそれぞれに対応したEOTF(Electro−Optical Transfer Function)の例について示す図である。 FIG. 37A is a diagram showing an example of EOTF (Electro-Optical Transfer Function) corresponding to each of HDR and SDR.
EOTFは、一般的にガンマカーブと呼ばれるものであり、コード値と輝度値との対応を示し、コード値を輝度値に変換するものである。つまり、EOTFは、複数のコード値と輝度値との対応関係を示す関係情報である。 The EOTF is generally called a gamma curve, shows the correspondence between the code value and the luminance value, and converts the code value into the luminance value. That is, the EOTF is the relational information indicating the correspondence between the plurality of code values and the luminance values.
また、図37Bは、HDRおよびSDRのそれぞれに対応した逆EOTFの例について示す図である。 Further, FIG. 37B is a diagram showing an example of reverse EOTF corresponding to HDR and SDR, respectively.
逆EOTFは、輝度値とコード値との対応を示し、EOTFとは逆に輝度値を量子化してコード値に変換するものである。つまり、逆EOTFは、輝度値と複数のコード値との対応関係を示す関係情報である。例えば、HDRに対応した映像の輝度値を10ビットの階調のコード値で表現する場合、10,000nitまでのHDRの輝度範囲における輝度値は、量子化されて、0〜1023までの1024個の整数値にマッピングされる。つまり、逆EOTFに基づいて量子化することで、10,000nitまでの輝度範囲の輝度値(HDRに対応した映像の輝度値)を、10ビットのコード値であるHDR信号に変換する。HDRに対応したEOTF(以下、「HDRのEOTF」という。)またはHDRに対応した逆EOTF(以下、「HDRの逆EOTF」という。)においては、SDRに対応したEOTF(以下、「SDRのEOTF」という。)またはSDRに対応した逆EOTF(以下、「SDRの逆EOTF」という。)よりも高い輝度値を表現することが可能であり、例えば、図37Aおよび図37Bにおいては、輝度の最大値(ピーク輝度)は、10,000nitである。つまり、HDRの輝度範囲は、SDRの輝度範囲を全て含み、HDRのピーク輝度は、SDRのピーク輝度より大きい。HDRの輝度範囲は、SDRの輝度範囲の最大値である100nitから、10,000nitまで、最大値を拡大した輝度範囲である。 The inverse EOTF indicates the correspondence between the luminance value and the code value, and contrary to the EOTF, the luminance value is quantized and converted into a code value. That is, the inverse EOTF is the relational information indicating the correspondence between the luminance value and the plurality of code values. For example, when the brightness value of the image corresponding to HDR is expressed by the code value of the gradation of 10 bits, the brightness value in the brightness range of HDR up to 10,000 nits is quantized and 1024 pieces from 0 to 1023. Maps to an integer value of. That is, by quantization based on the inverse EOTF, the luminance value in the luminance range up to 10,000 nits (the luminance value of the image corresponding to HDR) is converted into the HDR signal which is a 10-bit code value. In the HDR-compatible EOTF (hereinafter referred to as "HDR EOTF") or the HDR-compatible reverse EOTF (hereinafter referred to as "HDR reverse EOTF"), the SDR-compatible EOTF (hereinafter, "SDR EOTF") It is possible to express a higher brightness value than the inverse EOTF corresponding to SDR (hereinafter, referred to as “inverse EOTF of SDR”). For example, in FIGS. 37A and 37B, the maximum brightness is obtained. The value (peak brightness) is 10,000 nits. That is, the luminance range of HDR includes the entire luminance range of SDR, and the peak luminance of HDR is larger than the peak luminance of SDR. The HDR luminance range is a luminance range in which the maximum value is expanded from 100 nits, which is the maximum value of the SDR luminance range, to 10,000 nits.
例えば、HDRのEOTFおよびHDRの逆EOTFは、一例として、米国映画テレビ技術者協会(SMPTE)で規格化されたSMPTE 2084がある。 For example, HDR EOTFs and HDR reverse EOTFs include, for example, SMPTE 2084 standardized by the Society of Motion Picture and Television Engineers (SMPTE).
なお、以降の明細書中において、図37A及び図37Bに記載されている0nitからピーク輝度である100nitまでの輝度範囲は、第1輝度範囲と記載される場合がある。同様に、図37A及び図37Bに記載されている、0nitからピーク輝度である10,000nitまでの輝度範囲は、第2輝度範囲と記載される場合がある。 In the following specifications, the luminance range from 0 nit to 100 nit, which is the peak luminance, shown in FIGS. 37A and 37B may be described as the first luminance range. Similarly, the luminance range from 0 nit to the peak luminance of 10,000 nit, which is shown in FIGS. 37A and 37B, may be described as the second luminance range.
[33.変換装置および表示装置]
図38は、実施の形態の変換装置および表示装置の構成を示すブロック図である。図39は、実施の形態の変換装置および表示装置により行われる変換方法および表示方法を示すフローチャートである。
[33. Converter and display device]
FIG. 38 is a block diagram showing the configuration of the conversion device and the display device of the embodiment. FIG. 39 is a flowchart showing a conversion method and a display method performed by the conversion device and the display device of the embodiment.
図38に示すように、変換装置100は、HDRのEOTF変換部101、輝度変換部102、逆輝度変換部103、および逆SDRのEOTF変換部104を備える。また、表示装置200は、表示設定部201、SDRのEOTF変換部202、輝度変換部203、および表示部204を備える。
As shown in FIG. 38, the
変換装置100および表示装置200の各構成要素についての詳細な説明は、変換方法および表示方法の説明において行う。
A detailed description of each component of the
[34.変換方法および表示方法]
変換装置100が行う変換方法について、図39を用いて説明する。なお、変換方法は、以下で説明するステップS101〜ステップS104を含む。
[34. Conversion method and display method]
The conversion method performed by the
まず、変換装置100のHDRのEOTF変換部101は、逆HDRのEOTF変換が行われたHDR映像を取得する。変換装置100のHDRのEOTF変換部101は、取得したHDR映像のHDR信号に対して、HDRのEOTF変換を実施する(S101)。これにより、HDRのEOTF変換部101は、取得したHDR信号を、輝度値を示すリニアな信号に変換する。HDRのEOTFは、例えばSMPTE 2084がある。
First, the HDR
次に、変換装置100の輝度変換部102は、HDRのEOTF変換部101により変換されたリニアな信号を、ディスプレイ特性情報とコンテンツ輝度情報とを用いて変換する第1輝度変換を行う(S102)。第1輝度変換において、HDRの輝度範囲に対応した輝度値(以下、「HDRの輝度値」という。)を、ディスプレイの輝度範囲に対応した輝度値(以下、「ディスプレイ輝度値」という。)に変換する。詳細は後述する。
Next, the
上記のことから、HDRのEOTF変換部101は、映像の輝度値が量子化されることで得られたコード値を示す第1輝度信号としてのHDR信号を取得する取得部として機能する。また、HDRのEOTF変換部101および輝度変換部102は、取得部により取得されたHDR信号が示すコード値を、ディスプレイ(表示装置200)の輝度範囲に基づいて決定する、HDRの輝度範囲の最大値(HPL)よりも小さく、かつ、100nitよりも大きい最大値(DPL)であるディスプレイの輝度範囲に対応するディスプレイ輝度値へ変換する変換部として機能する。
From the above, the HDR
より具体的には、HDRのEOTF変換部101は、ステップS101において、取得したHDR信号と、HDRのEOTFとを用いて、取得したHDR信号が示す第1コード値としてのHDRのコード値について、HDRのコード値にHDRのEOTFにおいて関係付けられたHDRの輝度値を決定する。なお、HDR信号は、HDRの輝度範囲における輝度値と、複数のHDRのコード値とを関係付けたHDRの逆EOTFを用いて、映像(コンテンツ)の輝度値が量子化されることで得られたHDRのコード値を示す。
More specifically, the HDR
また、輝度変換部102は、ステップS102において、ステップS101で決定したHDRの輝度値について、当該HDRの輝度値に予め関係付けられた、ディスプレイの輝度範囲に対応するディスプレイ輝度値を決定し、HDRの輝度範囲に対応するHDRの輝度値を、ディスプレイの輝度範囲に対応するディスプレイ輝度値へ変換する第1輝度変換を行う。
Further, in step S102, the
また、変換装置100は、ステップS102の前に、映像(コンテンツ)の輝度の最大値(CPL:Content Peak luminance)および映像の平均輝度値(CAL:Content Average luminance)の少なくとも一方を含むコンテンツ輝度情報をHDR信号に関する情報として取得している。CPL(第1最大輝度値)は、例えば、HDR映像を構成する複数の画像に対する輝度値のうちの最大値である。また、CALは、例えば、HDR映像を構成する複数の画像に対する輝度値の平均である平均輝度値である。
Further, before step S102, the
また、変換装置100は、ステップS102の前に、表示装置200から表示装置200のディスプレイ特性情報を取得している。なお、ディスプレイ特性情報とは、表示装置200が表示できる輝度の最大値(DPL)、表示装置200の表示モード(後述参照)、入出力特性(表示装置が対応するEOTF)などの表示装置200の表示特性を示す情報である。
Further, the
また、変換装置100は、推奨表示設定情報(後述参照、以下、「設定情報」ともいう。)を表示装置200に送信してもよい。
Further, the
次に、変換装置100の逆輝度変換部103は、表示装置200の表示モードに応じた逆輝度変換を行う。これにより、逆輝度変換部103は、ディスプレイの輝度範囲に対応した輝度値を、SDRの輝度範囲(0〜100〔nit〕)に対応する輝度値に変換する第2輝度変換を行う(S103)。詳細は後述する。つまり、逆輝度変換部103は、ステップS102で得られたディスプレイ輝度値について、当該ディスプレイ輝度値に予め関係付けられた、100nitを最大値とするSDRの輝度範囲に対応する第3輝度値としてのSDRに対応した輝度値(以下、「SDRの輝度値」という。)SDRの輝度値を決定し、ディスプレイの輝度範囲に対応するディスプレイ輝度値を、SDRの輝度範囲に対応するSDRの輝度値へ変換する第2輝度変換を行う。
Next, the reverse
そして、変換装置100の逆SDRのEOTF変換部104は、逆SDRのEOTF変換を行うことで、疑似HDR映像を生成する(S104)。つまり、逆SDRのEOTF変換部104は、HDRの輝度範囲における輝度値と、複数の第3コード値とを関係付けた第3関係情報であるSDR(Standard Dynamic Range)の逆EOTF(Electro−Optical Transfer Function)を用いて、決定したSDRの輝度値を量子化し、量子化により得られた第3コード値を決定し、SDRの輝度範囲に対応するSDRの輝度値を、第3コード値を示す第3輝度信号としてのSDR信号へ変換することで、疑似HDR信号を生成する。なお、第3コード値は、SDRに対応したコード値であり、以下では、「SDRのコード値」という。つまり、SDR信号は、SDRの輝度範囲における輝度値と、複数のSDRのコード値とを関係付けたSDRの逆EOTFを用いて、映像の輝度値が量子化されることで得られたSDRのコード値で表される。そして、変換装置100は、ステップS104で生成した疑似HDR信号(SDR信号)を表示装置200へ出力する。
Then, the
変換装置100は、HDR信号を逆量子化することで得られたHDRの輝度値に対して、第1輝度変換および第2輝度変換を行うことで、疑似HDRに対応したSDRの輝度値を生成し、SDRの輝度値をSDRのEOTFを用いて量子化することで、疑似HDRに対応したSDR信号を生成する。なお、SDRの輝度値は、SDRに対応した0〜100nitの輝度範囲内の数値であるが、ディスプレイの輝度範囲に基づく変換を行っているため、HDRの輝度値に対してHDRのEOTFおよびSDRのEOTFを用いた輝度変換を行うことで得られたSDRに対応した0〜100nitの輝度範囲内の輝度値とは異なる数値である。
The
次に、表示装置200が行う表示方法について、図39を用いて説明する。なお、表示方法は、以下で説明するステップS105〜ステップS108を含む。
Next, the display method performed by the
まず、表示装置200の表示設定部201は、変換装置100から取得した設定情報を用いて、表示装置200の表示設定を設定する(S105)。ここで、表示装置200は、SDRTVである。設定情報は、表示装置に対して推奨する表示設定を示す情報であり、疑似HDR映像をどのようにEOTFし、どの設定で表示すれば美しい映像を表示することができるかを示す情報(つまり、表示装置200の表示設定を最適な表示設定に切り替えるための情報)である。設定情報は、例えば、表示装置における出力時のガンマカーブ特性や、リビングモード(ノーマルモード)やダイナミックモード等の表示モード、バックライト(明るさ)の数値などを含む。また、ユーザに、表示装置200の表示設定をマニュアル操作で変更することを促すようなメッセージを、表示装置200(以下、「SDRディスプレイ」ともいう)に表示してもよい。詳細は後述する。
First, the
なお、表示装置200は、ステップS105の前に、SDR信号(疑似HDR信号)と、映像の表示にあたって表示装置200に対して推奨する表示設定を示す設定情報とを取得する。
Prior to step S105, the
また、表示装置200は、SDR信号(疑似HDR信号)の取得を、ステップS106の前に行えばよく、ステップS105の後に行ってもよい。
Further, the
次に、表示装置200のSDRのEOTF変換部202は、取得した疑似HDR信号に対し、SDRのEOTF変換を行う(S106)。つまり、SDRのEOTF変換部202は、SDR信号(疑似HDR信号)を、SDRのEOTFを用いて逆量子化を行う。これにより、SDRのEOTF変換部202は、SDR信号が示すSDRのコード値を、SDRの輝度値に変換する。
Next, the
そして、表示装置200の輝度変換部203は、表示装置200に設定された表示モードに応じた輝度変換を行う。これにより、輝度変換部203は、SDRの輝度範囲(0〜100〔nit〕)に対応したSDRの輝度値を、ディスプレイの輝度範囲(0〜DPL〔nit〕)に対応したディスプレイ輝度値に変換する第3輝度変換を行う(S107)。詳細は後述する。
Then, the
上記のことから、表示装置200は、ステップS106およびステップS107において、取得したSDR信号(疑似HDR信号)が示す第3コード値を、ステップS105で取得した設定情報を用いて、ディスプレイの輝度範囲(0〜DPL〔nit〕)に対応するディスプレイ輝度値へ変換する。
From the above, the
より具体的には、SDR信号(疑似HDR信号)からディスプレイ輝度値への変換では、ステップS106において、SDRの輝度範囲における輝度値と、複数の第3コード値とを関係付けたEOTFを用いて、取得したSDR信号が示すSDRのコード値について、SDRのコード値にSDRのEOTFで関係付けられたSDRの輝度値を決定する。 More specifically, in the conversion from the SDR signal (pseudo-HDR signal) to the display luminance value, in step S106, the EOTF in which the luminance value in the luminance range of the SDR and the plurality of third code values are related is used. For the SDR code value indicated by the acquired SDR signal, the luminance value of the SDR associated with the SDR code value by the SDR EOTF is determined.
そして、ディスプレイ輝度値への変換では、ステップS107において、決定したSDRの輝度値に予め関係付けられた、ディスプレイの輝度範囲に対応するディスプレイ輝度値を決定し、SDRの輝度範囲に対応するSDRの輝度値を、ディスプレイの輝度範囲に対応するディスプレイ輝度値へ変換する第3輝度変換を行う。 Then, in the conversion to the display luminance value, in step S107, the display luminance value corresponding to the luminance range of the display, which is previously related to the determined luminance value of the SDR, is determined, and the SDR corresponding to the luminance range of the SDR A third luminance conversion is performed to convert the luminance value into a display luminance value corresponding to the luminance range of the display.
最後に、表示装置200の表示部204は、変換したディスプレイ輝度値に基づいて、疑似HDR映像を表示装置200に表示する(S108)。
Finally, the
[35.第1輝度変換]
次に、ステップS102の第1輝度変換(HPL→DPL)の詳細について、図40Aを用いて説明する。図40Aは、第1輝度変換の一例について説明するための図である。
[35. 1st brightness conversion]
Next, the details of the first luminance conversion (HPL → DPL) in step S102 will be described with reference to FIG. 40A. FIG. 40A is a diagram for explaining an example of the first luminance conversion.
変換装置100の輝度変換部102は、ステップS101で得られたリニアな信号(HDRの輝度値)を、ディスプレイ特性情報と、HDR映像のコンテンツ輝度情報とを用いて変換する第1輝度変換を行う。第1輝度変換は、HDRの輝度値(入力輝度値)を、ディスプレイピーク輝度(DPL)を超えないディスプレイ輝度値(出力輝度値)に変換する。DPLは、ディスプレイ特性情報であるSDRディスプレイの最大輝度および表示モードを用いて決定する。表示モードは、例えば、SDRディスプレイに暗めに表示するシアターモードや、明るめに表示するダイナミックモード等のモード情報である。表示モードが、例えば、SDRディスプレイの最大輝度が1,500nitであり、かつ、表示モードが最大輝度の50%の明るさにするモードである場合、DPLは、750nitとなる。ここで、DPL(第2最大輝度値)とは、SDRディスプレイが現在設定されている表示モードにおいて表示できる輝度の最大値である。つまり、第1輝度変換では、SDRディスプレイの表示特性を示す情報であるディスプレイ特性情報を用いて、第2最大輝度値としてのDPLを決定する。
The
また、第1輝度変換では、コンテンツ輝度情報のうちのCALとCPLとを用い、CAL付近以下の輝度値は、変換の前後で同一とし、CPL付近以上の輝度値に対してのみ輝度値を変更する。つまり、図40Aに示すように、第1輝度変換では、当該HDRの輝度値がCAL以下の場合、当該HDRの輝度値を変換せず、当該HDRの輝度値を、ディスプレイ輝度値として決定し、当該HDRの輝度値がCPL以上の場合、第2最大輝度値としてのDPLを、ディスプレイ輝度値として決定する。 Further, in the first luminance conversion, CAL and CPL of the content luminance information are used, the luminance values below the CAL are made the same before and after the conversion, and the luminance values are changed only for the luminance values near the CPL and above. do. That is, as shown in FIG. 40A, in the first luminance conversion, when the luminance value of the HDR is CAL or less, the luminance value of the HDR is not converted, and the luminance value of the HDR is determined as the display luminance value. When the luminance value of the HDR is CPL or more, the DPL as the second maximum luminance value is determined as the display luminance value.
また、第1輝度変換では、輝度情報のうちのHDR映像のピーク輝度(CPL)を用い、HDRの輝度値がCPLの場合、DPLを、ディスプレイ輝度値として決定する。 Further, in the first luminance conversion, the peak luminance (CPL) of the HDR image in the luminance information is used, and when the luminance value of HDR is CPL, the DPL is determined as the display luminance value.
なお、第1輝度変換では、図40Bのように、ステップS101で得られたリニアな信号(HDRの輝度値)を、DPLを超えない値にクリップするように変換してもよい。このような輝度変換を行うことで、変換装置100での処理を簡素化することができ、装置の縮小化、低電力化、処理の高速化が図れる。なお、図40Bは、第1輝度変換の他の一例について説明するための図である。
In the first luminance conversion, as shown in FIG. 40B, the linear signal (HDR luminance value) obtained in step S101 may be converted so as to clip to a value not exceeding the DPL. By performing such luminance conversion, the processing in the
[36−1.第2輝度変換]
次に、ステップS103の第2輝度変換(DPL→100〔nit〕)の詳細について、図41を用いて説明する。図41は、第2輝度変換について説明するための図である。
[36-1. Second brightness conversion]
Next, the details of the second luminance conversion (DPL → 100 [nit]) in step S103 will be described with reference to FIG. 41. FIG. 41 is a diagram for explaining the second luminance conversion.
変換装置100の逆輝度変換部103は、ステップS102の第1輝度変換で変換されたディスプレイの輝度範囲(0〜DPL〔nit〕)のディスプレイ輝度値に対し、表示モードに応じた逆輝度変換を施す。逆輝度変換は、SDRディスプレイによる表示モードに応じた輝度変換処理(ステップS107)が行われた場合に、ステップS102処理後のディスプレイの輝度範囲(0〜DPL〔nit〕)のディスプレイ輝度値を取得できるようにするための処理である。つまり、第2輝度変換は、第3輝度変換の逆輝度変換である。
The reverse
上記の処理により、第2輝度変換は、ディスプレイの輝度範囲のディスプレイ輝度値(入力輝度値)を、SDRの輝度範囲のSDRの輝度値(出力輝度値)に変換する。 By the above processing, the second luminance conversion converts the display luminance value (input luminance value) in the luminance range of the display into the luminance value (output luminance value) of SDR in the luminance range of SDR.
第2輝度変換では、SDRディスプレイの表示モードによって変換式を切り替える。例えば、SDRディスプレイの表示モードがノーマルモードの場合、ディスプレイ輝度値に正比例する正比例値に輝度変換する。また、第2輝度変換では、SDRディスプレイの表示モードがノーマルモードよりも高輝度画素をより明るく、かつ、低輝度画素をより暗くするダイナミックモードの場合、その逆関数を用いることで、低輝度画素のSDRの輝度値は、ディスプレイ輝度値に正比例する正比例値より高い値に、高輝度画素のSDRの輝度値は、ディスプレイ輝度値に正比例する正比例値より低い値に輝度変換する。つまり、第2輝度変換では、ステップS102において決定したディスプレイ輝度値について、SDRディスプレイの表示特性を示す情報であるディスプレイ特性情報に応じた輝度関係情報を用いて、当該ディスプレイ輝度値に関係付けられた輝度値をSDRの輝度値として決定し、ディスプレイ特性情報に応じて輝度変換処理を切り替える。ここで、ディスプレイ特性情報に応じた輝度関係情報とは、例えば図41に示すような、SDRディスプレイの表示パラメータ(表示モード)毎に定められた、ディスプレイ輝度値(入力輝度値)と、SDRの輝度値(出力輝度値)とを関係付けた情報である。 In the second luminance conversion, the conversion formula is switched depending on the display mode of the SDR display. For example, when the display mode of the SDR display is the normal mode, the brightness is converted into a direct proportional value that is directly proportional to the display brightness value. Further, in the second luminance conversion, when the display mode of the SDR display is the dynamic mode in which the high-luminance pixels are brighter and the low-luminance pixels are darker than in the normal mode, the low-luminance pixels are used by using the inverse function. The brightness value of the SDR is converted to a value higher than the direct proportional value that is directly proportional to the display luminance value, and the luminance value of the SDR of the high-luminance pixel is converted to a value lower than the direct proportional value that is directly proportional to the display luminance value. That is, in the second luminance conversion, the display luminance value determined in step S102 is related to the display luminance value by using the luminance-related information corresponding to the display characteristic information which is the information indicating the display characteristic of the SDR display. The brightness value is determined as the brightness value of the SDR, and the brightness conversion process is switched according to the display characteristic information. Here, the luminance-related information according to the display characteristic information includes the display luminance value (input luminance value) defined for each display parameter (display mode) of the SDR display and the SDR, as shown in FIG. 41, for example. This is information related to the luminance value (output luminance value).
[36−2.第3輝度変換]
次に、ステップS107の第3輝度変換(100→DPL〔nit〕)の詳細について、図42を用いて説明する。図42は、第3輝度変換について説明するための図である。
[36-2. Third brightness conversion]
Next, the details of the third luminance conversion (100 → DPL [nit]) in step S107 will be described with reference to FIG. 42. FIG. 42 is a diagram for explaining the third luminance conversion.
表示装置200の輝度変換部203は、SDRの輝度範囲(0〜100〔nit〕)のSDRの輝度値をステップS105で設定された表示モードに応じて(0〜DPL〔nit〕)に変換する。本処理はS103のモード毎の逆輝度変換の逆関数となるように処理する。
The
第3輝度変換では、SDRディスプレイの表示モードによって変換式を切り替える。例えば、SDRディスプレイの表示モードがノーマルモードの場合(つまり、設定された表示パラメータがノーマルモードに対応したパラメータである場合)、ディスプレイ輝度値は、SDRの輝度値に正比例する正比例値に輝度変換する。また、第3輝度変換では、SDRディスプレイの表示モードがノーマルモードよりも高輝度画素をより明るく、かつ、低輝度画素をより暗くするダイナミックモードの場合、低輝度画素のディスプレイ輝度値は、SDRの輝度値に正比例する正比例値より低い値に、高輝度画素のディスプレイ輝度値は、SDRの輝度値に正比例する正比例値より高い値に輝度変換する。つまり、第3輝度変換では、ステップS106において決定したSDRの輝度値について、SDRディスプレイの表示設定を示す表示パラメータに応じた輝度関係情報を用いて、当該SDRの輝度値に予め関係付けられた輝度値をディスプレイ輝度値として決定し、表示パラメータに応じて輝度変換処理を切り替える。ここで、表示パラメータに応じた輝度関係情報とは、例えば図42に示すような、SDRディスプレイの表示パラメータ(表示モード)毎に定められた、SDRの輝度値(入力輝度値)と、ディスプレイ輝度値(出力輝度値)とを関係付けた情報である。 In the third luminance conversion, the conversion formula is switched depending on the display mode of the SDR display. For example, when the display mode of the SDR display is the normal mode (that is, when the set display parameter is a parameter corresponding to the normal mode), the display luminance value is converted into a direct proportional value which is directly proportional to the luminance value of the SDR. .. Further, in the third luminance conversion, when the display mode of the SDR display is the dynamic mode in which the high-luminance pixels are brighter and the low-luminance pixels are darker than in the normal mode, the display brightness value of the low-luminance pixels is the SDR. The display luminance value of the high-luminance pixel is converted to a value lower than the direct-proportional value that is directly proportional to the luminance value, and the display luminance value of the high-luminance pixel is converted to a value higher than the direct-proportional value that is directly proportional to the luminance value of SDR. That is, in the third luminance conversion, the luminance value of the SDR determined in step S106 is previously associated with the luminance value of the SDR by using the luminance-related information corresponding to the display parameter indicating the display setting of the SDR display. The value is determined as the display brightness value, and the brightness conversion process is switched according to the display parameters. Here, the luminance-related information according to the display parameters is the luminance value (input luminance value) of the SDR and the display luminance defined for each display parameter (display mode) of the SDR display, as shown in FIG. 42, for example. This is information related to the value (output luminance value).
[37.表示設定]
次に、ステップS105の表示設定の詳細について、図43を用いて説明する。図43は、表示設定の詳細な処理を示すフローチャートである。
[37. Display settings]
Next, the details of the display setting in step S105 will be described with reference to FIG. 43. FIG. 43 is a flowchart showing detailed processing of the display setting.
SDRディスプレイの表示設定部201は、ステップS105において、下記のステップS201〜ステップS208の処理を行う。
In step S105, the
まず、表示設定部201は、設定情報を用いて、SDRディスプレイに設定されているEOTF(SDRディスプレイ用EOTF)が、疑似HDR映像(SDR信号)の生成時に想定したEOTFと整合しているかどうかを判定する(S201)。
First, the
表示設定部201は、SDRディスプレイに設定されているEOTFが、設定情報が示すEOTF(疑似HDR映像に整合するEOTF)と異なっていると判定した場合(S201でYes)、SDRディスプレイ用EOTFをシステム側で切り替え可能かを判定する(S202)。
When the
表示設定部201は、切り替え可能であると判定した場合、設定情報を用いて、SDRディスプレイ用EOTFを適切なEOTFに切り替える(S203)。
When the
ステップS201〜ステップS203から、表示設定の設定(S105)では、SDRディスプレイに設定されているEOTFを、取得した設定情報に応じた推奨EOTFに設定する。また、これにより、ステップS105の後に行われるステップS106では、推奨EOTFを用いて、SDRの輝度値を決定することができる。 From steps S201 to S203, in the display setting setting (S105), the EOTF set in the SDR display is set to the recommended EOTF according to the acquired setting information. Further, as a result, in step S106 performed after step S105, the brightness value of SDR can be determined using the recommended EOTF.
システム側で切り替え可能でないと判定した場合(S202でNo)、EOTFをユーザがマニュアル操作で変更することを促すメッセージを画面に表示する(S204)。例えば、「表示ガンマを2.4に設定して下さい」というメッセージを画面に表示する。つまり、表示設定部201は、表示設定の設定(S105)において、SDRディスプレイに設定されているEOTFを切り替えできない場合、SDRディスプレイに設定されているEOTF(SDRディスプレイ用EOTF)を、推奨EOTFに切り替えることをユーザに促すためのメッセージを、SDRディスプレイに表示する。
When it is determined that the switching is not possible on the system side (No in S202), a message prompting the user to manually change the EOTF is displayed on the screen (S204). For example, the message "Please set the display gamma to 2.4" is displayed on the screen. That is, when the
次に、SDRディスプレイでは、疑似HDR映像(SDR信号)を表示するが、表示の前に設定情報を用いてSDRディスプレイの表示パラメータが設定情報に合っているかを判定する(S205)。 Next, the SDR display displays a pseudo HDR image (SDR signal), and before the display, it is determined whether or not the display parameters of the SDR display match the setting information by using the setting information (S205).
表示設定部201は、SDRディスプレイに設定されている表示パラメータが、設定情報とは異なっていると判定した場合(S205でYes)、SDRディスプレイの表示パラメータを、切り替え可能かを判定する(S206)。
When the
表示設定部201は、SDRディスプレイの表示パラメータを切り替え可能であると判定した場合(S206でYes)、設定情報に合わせて、SDRディスプレイの表示パラメータを切り替える(S207)。
When the
ステップS204〜ステップS207から、表示設定の設定(S105)では、SDRディスプレイに設定されている表示パラメータを、取得した設定情報に応じた推奨表示パラメータに設定する。 From step S204 to step S207, in the display setting setting (S105), the display parameter set in the SDR display is set to the recommended display parameter according to the acquired setting information.
システム側で切り替え可能でないと判定した場合(S206でNo)、SDRディスプレイに設定されている表示パラメータをユーザがマニュアル操作で変更することを促すメッセージを画面に表示する(S208)。例えば、「表示モードをダイナミックモードにし、バックライトを最大にして下さい」というメッセージを画面に表示する。つまり、設定(S105)では、SDRディスプレイに設定されている表示パラメータを切り替えできない場合、SDRディスプレイに設定されている表示パラメータを、推奨表示パラメータに切り替えることをユーザに促すためのメッセージを、SDRディスプレイに表示する。 When it is determined that the switching is not possible on the system side (No in S206), a message prompting the user to manually change the display parameters set in the SDR display is displayed on the screen (S208). For example, display the message "Set the display mode to dynamic mode and maximize the backlight" on the screen. That is, in the setting (S105), when the display parameter set in the SDR display cannot be switched, a message for prompting the user to switch the display parameter set in the SDR display to the recommended display parameter is sent to the SDR display. Display on.
[38.変形例1]
以上のように、本出願において開示する技術の例示として、実施の形態を説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施の形態1にも適用可能である。また、上記実施の形態で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。
[38. Modification 1]
As described above, embodiments have been described as an example of the techniques disclosed in this application. However, the technique in the present disclosure is not limited to this, and can be applied to the first embodiment in which changes, replacements, additions, omissions, etc. are made as appropriate. It is also possible to combine the components described in the above embodiment to form a new embodiment.
そこで、以下では、他の実施の形態を例示する。 Therefore, in the following, other embodiments will be illustrated.
HDR映像は、例えばBlu−ray Disc、DVD、インターネットの動画配信サイト、放送、HDD内の映像である。 The HDR video is, for example, a Blu-ray Disc, a DVD, a video distribution site on the Internet, a broadcast, or a video in an HDD.
変換装置100(HDR→疑似HDR変換処理部)は、ディスクプレイヤー、ディスクレコーダ、セットトップボックス、テレビ、パソコン、スマートフォンの内部に存在していてもよい。変換装置100は、インターネット内のサーバ装置の内部に存在していてもよい。
The conversion device 100 (HDR → pseudo HDR conversion processing unit) may exist inside a disc player, a disc recorder, a set-top box, a television, a personal computer, or a smartphone. The
表示装置200(SDR表示部)は、例えばテレビ、パソコン、スマートフォンである。 The display device 200 (SDR display unit) is, for example, a television, a personal computer, or a smartphone.
変換装置100が取得するディスプレイ特性情報は、表示装置200からHDMIや他の通信プロトコルを用いてHDMIケーブルやLANケーブルを介して取得してもよい。変換装置100が取得するディスプレイ特性情報は、インターネットを介して表示装置200の機種情報等に含まれるディスプレイ特性情報を取得してもよい。また、ユーザがマニュアル操作を行い、ディスプレイ特性情報を、変換装置100に設定してもよい。また、変換装置100のディスプレイ特性情報の取得は、疑似HDR映像生成(ステップS101〜S104)時の直前でもよいし、機器の初期設定時やディスプレイ接続時のタイミングでもよい。例えば、ディスプレイ特性情報の取得は、ディスプレイ輝度値への変換の直前に行ってもよいし、変換装置100がHDMIケーブルで最初に表示装置200に接続したタイミングで行ってもよい。
The display characteristic information acquired by the
また、HDR映像のCPLやCALは、コンテンツ1つに対して1つでもよいし、シーン毎に存在していてもよい。つまり、変換方法では、映像の複数のシーンのそれぞれに対応した輝度情報であって、当該シーン毎に、当該シーンを構成する複数の画像に対する輝度値のうちの最大値である第1最大輝度値と、当該シーンを構成する複数の画像に対する輝度値の平均である平均輝度値との少なくとも一方を含む輝度情報(CPL、CAL)を取得し、第1輝度変換では、複数のシーンのそれぞれについて、当該シーンに対応した輝度情報に応じてディスプレイ輝度値を決定してもよい。 Further, the CPL and CAL of the HDR video may be one for each content, or may exist for each scene. That is, in the conversion method, the first maximum luminance value which is the luminance information corresponding to each of the plurality of scenes of the video and is the maximum value among the luminance values for the plurality of images constituting the scene for each scene. And the luminance information (CPL, CAL) including at least one of the average luminance value which is the average of the luminance values for the plurality of images constituting the scene is acquired, and in the first luminance conversion, for each of the plurality of scenes, The display luminance value may be determined according to the luminance information corresponding to the scene.
また、CPLおよびCALは、HDR映像と同じ媒体(Blu−ray Disc、DVD等)に同梱していてもよいし、変換装置100がインターネットから取得する等、HDR映像とは別の場所から取得してもよい。つまり、CPLおよびCALの少なくとも一方を含む輝度情報を映像のメタ情報として取得してもよいし、ネットワーク経由で取得してもよい。
Further, the CPL and CAL may be bundled in the same medium (Blu-ray Disc, DVD, etc.) as the HDR video, or acquired from a place different from the HDR video, such as the
また、変換装置100の第1輝度変換(HPL→DPL)において、CPL、CAL、およびディスプレイピーク輝度(DPL)は使用せずに、固定値を用いてもよい。また、その固定値を外部から変更可能にしてもよい。また、CPL、CAL、およびDPLは、数種類で切り替えるようにしてもよく、例えば、DPLは200nit、400nit、800nitの3種類のみとするようにしてもよいし、ディスプレイ特性情報に最も近い値を使用するようにしてもよい。
Further, in the first luminance conversion (HPL → DPL) of the
また、HDRのEOTFはSMPTE 2084でなくてもよく、他の種類のHDRのEOTFを用いてもよい。また、HDR映像の最大輝度(HPL)は10,000nitでなくてもよく、例えば4,000nitや1,000nitでもよい。 Further, the HDR EOTF does not have to be SMPTE 2084, and other types of HDR EOTF may be used. Further, the maximum luminance (HPL) of the HDR image does not have to be 10,000 nits, and may be, for example, 4,000 nits or 1,000 nits.
また、コード値のビット幅は、例えば16,14,12,10,8bitでもよい。 The bit width of the code value may be, for example, 16, 14, 12, 10, or 8 bits.
また、逆SDRのEOTF変換は、ディスプレイ特性情報から決定するが、(外部からも変更可能な)固定の変換関数を用いてもよい。逆SDRのEOTF変換は、例えばRec. ITU−R BT.1886で規定されている関数を用いてもよい。また、逆SDRのEOTF変換の種類を数種類に絞り、表示装置200の入出力特性に最も近いものを選択して使用するようにしてもよい。
Further, the EOTF conversion of the inverse SDR is determined from the display characteristic information, but a fixed conversion function (which can be changed from the outside) may be used. The EOTF conversion of the inverse SDR can be performed by, for example, Rec. ITU-R BT. The functions specified in 1886 may be used. Further, the types of EOTF conversion of the inverse SDR may be narrowed down to several types, and the one closest to the input / output characteristics of the
また、表示モードは、固定のモードを使うようにしてもよく、ディスプレイ特性情報の中に含めなくてもよい。 Further, the display mode may be a fixed mode and may not be included in the display characteristic information.
また、変換装置100は、設定情報を送信しなくてもよく、表示装置200では固定の表示設定としてもよいし、表示設定を変更しなくてもよい。この場合、表示設定部201は不要となる。また、設定情報は、疑似HDR映像かどうかのフラグ情報でもよく、例えば、疑似HDR映像である場合は最も明るく表示する設定に変更するようにしてもよい。つまり、表示設定の設定(S105)では、取得した設定情報が、DPLを用いて変換された疑似HDR映像を示す信号であることを示す場合、表示装置200の明るさ設定を最も明るく表示する設定に切り替えてもよい。
Further, the
[39.変形例2]
また、変換装置100の第1輝度変換(HPL→DPL)は例えば次の算式で変換する。
[39. Modification 2]
Further, the first luminance conversion (HPL → DPL) of the
ここで、Lは、0〜1に正規化された輝度値を示し、S1、S2、a、b、MはCAL、CPL、およびDPLに基づいて設定する値である。lnは自然対数である。Vは0〜1に正規化された変換後の輝度値である。図40Aの例のように、CALを300nitとし、CPLを2,000nitとし、DPLを750nitとし、CAL + 50nitまでは変換しないとし、350nit以上に対して変換する場合、それぞれの値は例えば次のような値となる。 Here, L indicates a luminance value normalized to 0 to 1, and S1, S2, a, b, and M are values set based on CAL, CPL, and DPL. ln is the natural logarithm. V is the converted luminance value normalized to 0 to 1. As in the example of FIG. 40A, when CAL is 300 nits, CPL is 2,000 nits, DPL is 750 nits, CAL + 50 nits are not converted, and conversion is performed for 350 nits or more, the respective values are, for example, as follows. It becomes a value like.
S1 = 350/10000
S2 = 2000/10000
M = 750/10000
a = 0.023
b = S1 − a*ln(S1) = 0.112105
S1 = 350/10000
S2 = 2000/10000
M = 750/10000
a = 0.023
b = S1-a * ln (S1) = 0.112105
つまり、第1輝度変換では、SDRの輝度値が、平均輝度値(CAL)と第1最大輝度値(CPL)との間である場合、自然対数を用いて、当該HDRの輝度値に対応するディスプレイ輝度値を決定する。 That is, in the first luminance conversion, when the luminance value of the SDR is between the average luminance value (CAL) and the first maximum luminance value (CPL), the natural logarithm is used to correspond to the luminance value of the HDR. Determine the display brightness value.
[40.効果等]
HDR映像のコンテンツピーク輝度やコンテンツ平均輝度等の情報を用いてHDR映像を変換することにより、コンテンツに応じて変換式を変えることができ、HDRの階調をなるべく保つように変換することが可能となる。また、暗すぎる、明るすぎるといった悪影響を抑制することができる。具体的には、HDR映像のコンテンツピーク輝度をディスプレイピーク輝度にマッピングすることにより、階調をなるべく保つようにしている。また、平均輝度付近以下の画素値を変えないことにより、全体的な明るさが変わらないようにしている。
[40. Effect, etc.]
By converting the HDR video using information such as the content peak brightness and content average brightness of the HDR video, the conversion formula can be changed according to the content, and it is possible to convert so as to maintain the HDR gradation as much as possible. It becomes. In addition, adverse effects such as being too dark and being too bright can be suppressed. Specifically, the gradation is maintained as much as possible by mapping the content peak brightness of the HDR video to the display peak brightness. In addition, the overall brightness is kept unchanged by not changing the pixel values below the average brightness.
また、SDRディスプレイのピーク輝度値および表示モードを用いてHDR映像を変換することにより、SDRディスプレイの表示環境に応じて変換式を変えることができ、SDRディスプレイの性能に合わせて、HDR感のある映像(疑似HDR映像)を、元のHDR映像と同様の階調や明るさで表示することができる。具体的には、SDRディスプレイの最大輝度および表示モードによってディスプレイピーク輝度を決定し、そのピーク輝度値を超えないようにHDR映像を変換することにより、SDRディスプレイで表示可能な明るさまではHDR映像の階調をほとんど減らさずに表示し、表示不可能な明るさは表示可能な明るさまで輝度値を下げている。 Further, by converting the HDR image using the peak brightness value and the display mode of the SDR display, the conversion formula can be changed according to the display environment of the SDR display, and there is a feeling of HDR according to the performance of the SDR display. An image (pseudo HDR image) can be displayed with the same gradation and brightness as the original HDR image. Specifically, the display peak brightness is determined by the maximum brightness and display mode of the SDR display, and the HDR image is converted so as not to exceed the peak brightness value. The gradation is displayed with almost no reduction, and the brightness value that cannot be displayed is lowered to the brightness that can be displayed.
以上により、表示不可能な明るさ情報を削減し、表示可能な明るさの階調を落とさず、元のHDR映像に近い形で表示することが可能となる。例えば、ピーク輝度1,000nitのディスプレイ用には、ピーク輝度1,000nitに抑えた疑似HDR映像に変換することにより、全体的な明るさを維持し、ディスプレイの表示モードによって輝度値は変わる。このため、ディスプレイの表示モードに応じて、輝度の変換式を変更するようにしている。もし、ディスプレイのピーク輝度よりも大きな輝度を疑似HDR映像で許容すると、その大きな輝度をディスプレイ側でのピーク輝度に置き換えて表示する場合があり、その場合は元のHDR映像よりも全体的に暗くなる。逆にディスプレイのピーク輝度よりも小さな輝度を最大輝度として変換すると、その小さな輝度をディスプレイ側でのピーク輝度に置き換え、元のHDR映像よりも全体的に明るくなる。しかもディスプレイ側のピーク輝度よりも小さいためにディスプレイの階調に関する性能を最大限使っていないことになる。 As described above, it is possible to reduce the brightness information that cannot be displayed, and to display the image in a form close to the original HDR image without reducing the gradation of the brightness that can be displayed. For example, for a display having a peak brightness of 1,000 nits, the overall brightness is maintained by converting to a pseudo HDR image having a peak brightness of 1,000 nits, and the brightness value changes depending on the display mode of the display. Therefore, the brightness conversion formula is changed according to the display mode of the display. If a brightness larger than the peak brightness of the display is allowed in the pseudo HDR image, the large brightness may be replaced with the peak brightness on the display side and displayed, in which case the overall brightness is darker than the original HDR image. Become. On the contrary, when the brightness smaller than the peak brightness of the display is converted as the maximum brightness, the small brightness is replaced with the peak brightness on the display side, and the image becomes brighter as a whole than the original HDR image. Moreover, since it is smaller than the peak brightness on the display side, the performance related to the gradation of the display is not used to the maximum.
また、ディスプレイ側では、設定情報を用いて表示設定を切り替えることにより、疑似HDR映像をよりよく表示することが可能となる。例えば、明るさを暗く設定している場合には高輝度表示ができないため、HDR感が損なわれる。その場合には表示設定を変更するもしくは、変更してもらうよう促すメッセージを表示することにより、ディスプレイの性能を最大限引出し、高階調な映像を表示できるようにする。 Further, on the display side, by switching the display setting using the setting information, it is possible to better display the pseudo HDR image. For example, when the brightness is set to be dark, high-luminance display cannot be performed, so that the HDR feeling is impaired. In that case, the display settings are changed or a message prompting the user to change the display is displayed to maximize the performance of the display so that a high-gradation image can be displayed.
(全体のまとめ)
以上、本開示の一つまたは複数の態様に係る再生方法および再生装置について、実施の形態に基づいて説明したが、本開示は、この実施の形態に限定されるものではない。本開示の趣旨を逸脱しない限り、当業者が思いつく各種変形を本実施の形態に施したもの、異なる実施の形態における構成要素を組み合わせて構築される形態なども、本開示の一つまたは複数の態様の範囲内に含まれてもよい。
(Overall summary)
The reproduction method and the reproduction apparatus according to one or more aspects of the present disclosure have been described above based on the embodiment, but the present disclosure is not limited to this embodiment. As long as it does not deviate from the gist of the present disclosure, one or more of the present embodiments may be modified by those skilled in the art, or may be constructed by combining components in different embodiments. It may be included within the scope of the embodiment.
例えば、上記各実施の形態において、各構成要素は、回路などの専用のハードウェアで構成されるか、各構成要素に適したソフトウェアプログラムを実行することによって実現されてもよい。各構成要素は、CPUまたはプロセッサなどのプログラム実行部が、ハードディスクまたは半導体メモリなどの記録媒体に記録されたソフトウェアプログラムを読み出して実行することによって実現されてもよい。 For example, in each of the above embodiments, each component may be configured by dedicated hardware such as a circuit, or may be realized by executing a software program suitable for each component. Each component may be realized by a program execution unit such as a CPU or a processor reading and executing a software program recorded on a recording medium such as a hard disk or a semiconductor memory.
本開示は、コンテンツデータ生成装置、Blu−ray機器等の映像ストリーム伝送装置、又はテレビ等の映像表示装置に適用できる。 The present disclosure can be applied to a content data generation device, a video stream transmission device such as a Blu-ray device, or a video display device such as a television.
100 変換装置
101 EOTF変換部
102 輝度変換部
103 逆輝度変換部
104 逆SDRのEOTF変換部
200,510 表示装置
201 表示設定部
202 SDRのEOTF変換部
203 輝度変換部
204 表示部
400,500,500A データ出力装置
401,501 ビデオ復号部
402,502 外部メタ取得部
403,503 HDRメタ解釈部
404,504 HDR制御情報生成部
405,505,505A DR変換部
406,506 HDMI出力部
507 DC部
100
Claims (2)
映像信号を取得する取得部と、
前記表示装置から、前記表示装置が対応している輝度の変換方式を示す第1の情報、を受信する受信部と、
前記映像信号の輝度変換を行う輝度変換部と、
前記映像信号を出力する出力部と、
前記第1の情報、及び当該再生装置が対応している輝度の変換方式を示す第2の情報に基づいて、輝度変換を前記表示装置又は当該再生装置のどちらで行うかを決定する制御部と、
を有し、
前記制御部が、輝度変換を当該再生装置で行うと決定した場合、前記出力部は前記第2の情報に基づいて前記輝度変換部で輝度変換を行った前記映像信号を出力し、
前記制御部が、輝度変換を前記表示装置で行うと決定した場合、前記出力部は前記輝度変換部で変換を行わない前記映像信号を出力する、
再生装置。 A playback device connected to a display device
The acquisition unit that acquires the video signal and
A receiving unit that receives from the display device the first information indicating the brightness conversion method supported by the display device.
A luminance conversion unit that converts the luminance of the video signal and
An output unit that outputs the video signal and
Based on the first information and the second information indicating the brightness conversion method supported by the reproduction device, a control unit that determines whether the brightness conversion is performed by the display device or the reproduction device. ,
Have,
When the control unit determines that the luminance conversion is performed by the reproduction device, the output unit outputs the video signal whose luminance conversion is performed by the luminance conversion unit based on the second information.
When the control unit determines that the luminance conversion is performed by the display device, the output unit outputs the video signal that is not converted by the luminance conversion unit.
Playback device.
請求項1記載の再生装置。 When the control unit determines that the brightness conversion is performed by the display device, the output unit uses the brightness conversion method shown in the first information together with the video signal that is not converted by the brightness conversion unit. Output the metadata required to perform luminance conversion,
The reproduction device according to claim 1.
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201462018010P | 2014-06-27 | 2014-06-27 | |
US62/018,010 | 2014-06-27 | ||
JP2015114300 | 2015-06-04 | ||
JP2015114300 | 2015-06-04 | ||
JP2019133084A JP2019216431A (en) | 2014-06-27 | 2019-07-18 | Display |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019133084A Division JP2019216431A (en) | 2014-06-27 | 2019-07-18 | Display |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021153299A true JP2021153299A (en) | 2021-09-30 |
JP7170236B2 JP7170236B2 (en) | 2022-11-14 |
Family
ID=68807437
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019133084A Pending JP2019216431A (en) | 2014-06-27 | 2019-07-18 | Display |
JP2021085151A Active JP7170236B2 (en) | 2014-06-27 | 2021-05-20 | playback device |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019133084A Pending JP2019216431A (en) | 2014-06-27 | 2019-07-18 | Display |
Country Status (2)
Country | Link |
---|---|
JP (2) | JP2019216431A (en) |
MX (1) | MX2019005231A (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021136492A (en) * | 2020-02-25 | 2021-09-13 | セイコーエプソン株式会社 | Operating method for electronic apparatus, and electronic apparatus |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011119828A (en) * | 2009-12-01 | 2011-06-16 | Renesas Electronics Corp | Video conversion device, recording medium reader, video playback device, and video playback information transmission method |
WO2012172460A1 (en) * | 2011-06-14 | 2012-12-20 | Koninklijke Philips Electronics N.V. | Graphics processing for high dynamic range video |
WO2013046095A1 (en) * | 2011-09-27 | 2013-04-04 | Koninklijke Philips Electronics N.V. | Apparatus and method for dynamic range transforming of images |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8194997B2 (en) * | 2006-03-24 | 2012-06-05 | Sharp Laboratories Of America, Inc. | Methods and systems for tone mapping messaging |
-
2016
- 2016-12-14 MX MX2019005231A patent/MX2019005231A/en unknown
-
2019
- 2019-07-18 JP JP2019133084A patent/JP2019216431A/en active Pending
-
2021
- 2021-05-20 JP JP2021085151A patent/JP7170236B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011119828A (en) * | 2009-12-01 | 2011-06-16 | Renesas Electronics Corp | Video conversion device, recording medium reader, video playback device, and video playback information transmission method |
WO2012172460A1 (en) * | 2011-06-14 | 2012-12-20 | Koninklijke Philips Electronics N.V. | Graphics processing for high dynamic range video |
WO2013046095A1 (en) * | 2011-09-27 | 2013-04-04 | Koninklijke Philips Electronics N.V. | Apparatus and method for dynamic range transforming of images |
Also Published As
Publication number | Publication date |
---|---|
JP2019216431A (en) | 2019-12-19 |
MX2019005231A (en) | 2019-09-10 |
JP7170236B2 (en) | 2022-11-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6671022B2 (en) | Display device, display method, and computer program | |
JP6566320B2 (en) | Data output device and data output method | |
JP6573238B2 (en) | Display device, conversion device, display method, and computer program | |
JP6566271B2 (en) | Transmission method and playback apparatus | |
JP6512458B2 (en) | Data reproduction method and reproduction apparatus | |
WO2015198552A1 (en) | Content data generating method, video stream transmission method and video display method | |
JP6731627B2 (en) | Method Performed on Playback Device and Playback Device | |
JP7170236B2 (en) | playback device | |
JP2017139511A (en) | Content data generation method, image stream transmission method, and image display method | |
JP6928885B2 (en) | Display device, display method and computer program | |
JP6751893B2 (en) | Reproduction method, reproduction device, display method and display device | |
JP6643669B2 (en) | Display device and display method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210520 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220512 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220524 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220707 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220927 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221020 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7170236 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |