JP2021153299A - Playback unit - Google Patents
Playback unit Download PDFInfo
- Publication number
- JP2021153299A JP2021153299A JP2021085151A JP2021085151A JP2021153299A JP 2021153299 A JP2021153299 A JP 2021153299A JP 2021085151 A JP2021085151 A JP 2021085151A JP 2021085151 A JP2021085151 A JP 2021085151A JP 2021153299 A JP2021153299 A JP 2021153299A
- Authority
- JP
- Japan
- Prior art keywords
- hdr
- conversion
- display
- luminance
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Picture Signal Circuits (AREA)
- Controls And Circuits For Display Device (AREA)
- Processing Of Color Television Signals (AREA)
Abstract
Description
本開示は、データ出力装置、データ出力方法及びデータ生成方法に関する。 The present disclosure relates to a data output device, a data output method, and a data generation method.
従来、表示可能な輝度レベルを改善するための画像信号処理装置が開示されている（例えば特許文献１参照）。 Conventionally, an image signal processing device for improving a displayable luminance level has been disclosed (see, for example, Patent Document 1).
本開示の一態様に係る再生装置は、表示装置と接続される再生装置であって、映像信号を取得する取得部と、前記表示装置から、前記表示装置が対応している輝度の変換方式を示す第１の情報、を受信する受信部と、前記映像信号の輝度変換を行う輝度変換部と、前記映像信号を出力する出力部と、前記第１の情報、及び当該再生装置が対応している輝度の変換方式を示す第２の情報に基づいて、輝度変換を前記表示装置又は当該再生装置のどちらで行うかを決定する制御部と、を有し、前記制御部が、輝度変換を当該再生装置で行うと決定した場合、前記出力部は前記第２の情報に基づいて前記輝度変換部で輝度変換を行った前記映像信号を出力し、前記制御部が、輝度変換を前記表示装置で行うと決定した場合、前記出力部は前記輝度変換部で変換を行わない前記映像信号を出力する。 The reproduction device according to one aspect of the present disclosure is a reproduction device connected to the display device, and the acquisition unit for acquiring a video signal and the brightness conversion method supported by the display device from the display device are used. The receiving unit that receives the first information shown, the luminance conversion unit that performs the luminance conversion of the video signal, the output unit that outputs the video signal, the first information, and the reproducing device correspond to each other. It has a control unit that determines whether the display device or the reproduction device performs the brightness conversion based on the second information indicating the brightness conversion method, and the control unit performs the brightness conversion. When it is determined to be performed by the reproduction device, the output unit outputs the video signal whose luminance is converted by the luminance conversion unit based on the second information, and the control unit performs the luminance conversion by the display device. If it is determined to do so, the output unit outputs the video signal that is not converted by the luminance conversion unit.
なお、これらの包括的または具体的な態様は、システム、方法、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能なＣＤ−ＲＯＭなどの記録媒体で実現されてもよく、システム、方法、集積回路、コンピュータプログラムまたは記録媒体の任意な組み合わせで実現されてもよい。 It should be noted that these comprehensive or specific embodiments may be realized in a recording medium such as a system, method, integrated circuit, computer program or computer-readable CD-ROM, and the system, method, integrated circuit, computer program. Alternatively, it may be realized by any combination of recording media.
本開示の一態様に係るデータ出力装置は、データ出力装置であって、映像ストリームを復号することで第１映像信号を生成する復号部と、映像信号の輝度範囲を変換する１以上の第１変換モードに対応する１以上のメタデータを取得する取得部と、前記１以上のメタデータの一つを解釈することで、前記第１映像信号の輝度範囲を示す特性データと、前記第１映像信号の輝度範囲を変換するための変換補助データと、を取得する解釈部と、前記特性データを、所定の伝送プロトコルに従った制御情報に変換する制御情報生成部と、映像信号の輝度範囲を変換する１以上の第２変換モードに対応しており、前記変換補助データに基づいて、前記１以上の第２変換モードのいずれかにより、前記第１映像信号の輝度範囲の変換処理を行うことで前記第１映像信号の輝度範囲より狭い輝度範囲の第２映像信号を生成する変換部と、前記第２映像信号及び前記制御情報を前記伝送プロトコルで表示装置へ出力する出力部とを備える。 The data output device according to one aspect of the present disclosure is a data output device, which is a decoding unit that generates a first video signal by decoding a video stream, and one or more firsts that convert a brightness range of the video signal. By interpreting the acquisition unit that acquires one or more metadata corresponding to the conversion mode and one of the one or more metadata, the characteristic data indicating the brightness range of the first video signal and the first video An interpretation unit that acquires conversion auxiliary data for converting the brightness range of the signal, a control information generation unit that converts the characteristic data into control information according to a predetermined transmission protocol, and a brightness range of the video signal. It corresponds to one or more second conversion modes to be converted, and based on the conversion auxiliary data, the conversion processing of the brightness range of the first video signal is performed by any one of the one or more second conversion modes. It includes a conversion unit that generates a second video signal having a brightness range narrower than the brightness range of the first video signal, and an output unit that outputs the second video signal and the control information to a display device by the transmission protocol.
これによれば、当該データ出力装置は、１以上のメタデータに基づいて映像信号の輝度範囲を変更できるとともに、変換後の映像信号及び制御情報を出力できる。 According to this, the data output device can change the brightness range of the video signal based on one or more metadata, and can output the converted video signal and control information.
例えば、前記解釈部は、さらに、前記１以上の第１変換モードと、前記１以上の第２変換モードと、前記表示装置が対応している、映像信号の輝度範囲を変換する１以上の第３変換モードとに基づいて、前記データ出力装置及び前記表示装置のどちらで前記変換処理を行うかを決定してもよい。 For example, the interpreting unit further converts one or more first conversion modes, one or more second conversion modes, and one or more first conversion modes corresponding to the display device. Based on the three conversion modes, it may be determined whether the conversion process is performed by the data output device or the display device.
これによれば、当該データ出力装置は、１以上のメタデータに対応する第１変換モードと、データ出力装置が対応している第２変換モードと、表示装置が対応している第３変換モードとに基づき、データ出力装置及び表示装置のどちらで変換処理を行うかを決定できる。これにより、データ出力装置は、適切に変換処理を行う装置を決定できる。 According to this, the data output device has a first conversion mode corresponding to one or more metadata, a second conversion mode corresponding to the data output device, and a third conversion mode corresponding to the display device. Based on the above, it is possible to determine whether the conversion process is performed by the data output device or the display device. Thereby, the data output device can determine the device that appropriately performs the conversion process.
例えば、前記変換部は、前記１以上の第２変換モードを含む複数の第２変換モードに対応しており、各々が前記複数の第２変換モードの各々に対応し、対応する第２変換モードの処理を行う複数のモード処理部を備えてもよい。 For example, the conversion unit corresponds to a plurality of second conversion modes including the one or more second conversion modes, each of which corresponds to each of the plurality of second conversion modes, and corresponds to the second conversion mode. It may be provided with a plurality of mode processing units which perform the processing of.
例えば、前記変換部は、前記１以上の第２変換モードで共通の処理を行う基本処理部と、各々が前記１以上の第２変換モードの各々に対応し、対応する第２変換モードの処理を行う１以上の拡張モード処理部とを備えてもよい。 For example, the conversion unit corresponds to a basic processing unit that performs common processing in the one or more second conversion modes, and each corresponds to each of the one or more second conversion modes, and the processing of the corresponding second conversion mode. It may be provided with one or more extended mode processing units that perform the above.
例えば、前記解釈部は、さらに、前記１以上の第１変換モードに含まれ、かつ前記１以上の第２変換モードに含まれる変換モードを前記データ出力装置で行う変換処理の変換モードに決定してもよい。 For example, the interpreting unit further determines the conversion mode included in the one or more first conversion modes and included in the one or more second conversion modes as the conversion mode of the conversion process performed by the data output device. You may.
これによれば、当該データ出力装置は、１以上のメタデータに対応する第１変換モードと、データ出力装置が対応している第２変換モードとに基づき、使用する変換モードを決定できる。 According to this, the data output device can determine the conversion mode to be used based on the first conversion mode corresponding to one or more metadata and the second conversion mode corresponding to the data output device.
例えば、前記解釈部は、さらに、前記１以上の第１変換モードに含まれ、かつ前記１以上の第２変換モード及び前記第３変換モードの少なくとも一方に含まれる変換モードを前記データ出力装置又は前記表示装置で行う変換処理の変換モードに決定してもよい。 For example, the interpreting unit further includes a conversion mode included in the one or more first conversion modes and included in at least one of the one or more second conversion modes and the third conversion mode. The conversion mode of the conversion process performed by the display device may be determined.
これによれば、当該データ出力装置は、１以上のメタデータに対応する第１変換モードと、データ出力装置が対応している第２変換モードと、表示装置が対応している第３変換モードとに基づき、使用する変換モードを決定できる。 According to this, the data output device has a first conversion mode corresponding to one or more metadata, a second conversion mode corresponding to the data output device, and a third conversion mode corresponding to the display device. Based on, the conversion mode to be used can be determined.
例えば、前記取得部は、前記１以上の第１変換モードを含む複数の第１変換モードに対応する複数のメタデータを取得し、前記変換部は、前記１以上の第２変換モードを含む複数の第２変換モードに対応しており、前記解釈部は、前記複数の第１変換モードに含まれ、かつ前記複数の第２変換モード及び前記第３変換モードの少なくとも一方に含まれる複数の変換モードのうち、輝度範囲を変換することなく出力した画像であるマスター画像に対する再現性が最も高い変換モードを前記データ出力装置又は前記表示装置で行う変換処理の変換モードに決定してもよい。 For example, the acquisition unit acquires a plurality of metadata corresponding to a plurality of first conversion modes including the one or more first conversion modes, and the conversion unit acquires a plurality of metadata including the one or more second conversion modes. The interpretation unit corresponds to the second conversion mode of the above, and the interpretation unit includes a plurality of conversions included in the plurality of first conversion modes and included in at least one of the plurality of second conversion modes and the third conversion mode. Among the modes, the conversion mode having the highest reproducibility for the master image, which is an image output without converting the luminance range, may be determined as the conversion mode of the conversion process performed by the data output device or the display device.
これによれば、当該データ出力装置は、マスター画像に対する再現性が最も高い変換モードを選択できるので、表示される映像の画質を向上できる。 According to this, the data output device can select the conversion mode having the highest reproducibility for the master image, so that the image quality of the displayed image can be improved.
例えば、前記解釈部は、決定された前記変換処理の前記変換モードが、前記第２変換モードに含まれ、かつ、前記第３変換モードに含まれない場合、前記データ出力装置で前記変換処理を行うと決定してもよい。 For example, when the conversion mode of the determined conversion process is included in the second conversion mode and not included in the third conversion mode, the interpreting unit performs the conversion process in the data output device. You may decide to do so.
例えば、前記解釈部は、決定された前記変換処理の前記変換モードが、前記第３変換モードに含まれ、かつ、前記第２変換モードに含まれない場合、前記表示装置で前記変換処理を行うと決定してもよい。 For example, when the conversion mode of the determined conversion process is included in the third conversion mode and not included in the second conversion mode, the interpretation unit performs the conversion process on the display device. May be decided.
例えば、前記解釈部は、さらに、前記複数の第１変換モードの各々のためのパラメータを前記表示装置から取得できるか否かに応じて、前記データ出力装置又は前記表示装置で行う前記変換処理の変換モードを決定してもよい。 For example, the interpreter may further perform the conversion process on the data output device or the display device, depending on whether parameters for each of the plurality of first conversion modes can be obtained from the display device. The conversion mode may be determined.
これによれば、当該データ出力装置は、表示装置のパラメータを取得できるか否かに応じて使用する変換モードを決定するので、より適切な変換モードを選択できる。 According to this, since the data output device determines the conversion mode to be used depending on whether or not the parameters of the display device can be acquired, a more appropriate conversion mode can be selected.
例えば、前記解釈部は、前記複数の第１変換モードに含まれ、かつ前記複数の第２変換モード及び前記第３変換モードの少なくとも一方に含まれ、かつ、前記パラメータを前記表示装置から取得できる変換モードを前記データ出力装置又は前記表示装置で行う変換処理の変換モードに決定してもよい。 For example, the interpreting unit is included in the plurality of first conversion modes, is included in at least one of the plurality of second conversion modes and the third conversion mode, and can acquire the parameters from the display device. The conversion mode may be determined as the conversion mode of the conversion process performed by the data output device or the display device.
例えば、前記パラメータは、前記表示装置が表示可能な輝度範囲の最大値又は前記表示装置が表示可能な表示モードを示してもよい。 For example, the parameter may indicate the maximum value of the luminance range that can be displayed by the display device or the display mode that can be displayed by the display device.
例えば、前記データ出力装置は、さらに、前記第１映像信号の解像度を下げることで第３映像信号を生成するダウンコンバート部を備え、前記出力部は、さらに、前記第３映像信号を前記表示装置へ出力してもよい。 For example, the data output device further includes a down-convert unit that generates a third video signal by lowering the resolution of the first video signal, and the output unit further displays the third video signal on the display device. It may be output to.
これによれば、当該データ出力装置は、例えば、表示装置等に適した解像度に映像信号の解像度を変更できる。 According to this, the data output device can change the resolution of the video signal to a resolution suitable for, for example, a display device or the like.
例えば、前記変換部は、さらに、前記変換補助データに基づいて、前記１以上の第２変換モードのいずれかにより、前記第３映像信号の輝度範囲の変換処理を行うことで前記第３映像信号の輝度範囲より狭い輝度範囲の第４映像信号を生成し、前記出力部は、さらに、前記第４映像信号を前記表示装置へ出力してもよい。 For example, the conversion unit further performs conversion processing of the luminance range of the third video signal in any of the one or more second conversion modes based on the conversion auxiliary data, thereby performing the third video signal. A fourth video signal having a brightness range narrower than the brightness range of the above may be generated, and the output unit may further output the fourth video signal to the display device.
これによれば、当該データ出力装置は、例えば、表示装置等に適した解像度及び輝度範囲に映像信号の解像度及び輝度範囲を変更できる。 According to this, the data output device can change the resolution and luminance range of the video signal to a resolution and luminance range suitable for, for example, a display device and the like.
例えば、前記表示装置が、前記第１映像信号の解像度の映像の表示に対応していない場合、（１）前記ダウンコンバート部は、前記第３映像信号を生成し、（２）前記出力部は、前記第３映像信号を前記表示装置へ出力してもよい。 For example, when the display device does not support the display of a video having the resolution of the first video signal, (1) the down-converting unit generates the third video signal, and (2) the output unit , The third video signal may be output to the display device.
例えば、前記表示装置が、前記第１映像信号の輝度範囲の映像の表示に対応していない場合、（１）前記変換部は、前記第２映像信号を生成し、（２）前記出力部は、前記第２映像信号及び前記制御情報を前記表示装置へ出力してもよい。 For example, when the display device does not support the display of a video in the brightness range of the first video signal, (1) the conversion unit generates the second video signal, and (2) the output unit , The second video signal and the control information may be output to the display device.
また、本開示の一態様に係るデータ出力方法は、データ出力装置におけるデータ出力方法であって、映像ストリームを復号することで第１映像信号を生成する復号ステップと、映像信号の輝度範囲を変換する１以上の第１変換モードに対応する１以上のメタデータを取得する取得ステップと、前記１以上のメタデータの１つを解釈することで、前記第１映像信号の輝度範囲を示す特性データと、前記第１映像信号の輝度範囲を変換するための変換補助データと、を取得する解釈ステップと、前記特性データを、所定の伝送プロトコルに従った制御情報に変換する制御情報生成ステップと、映像信号の輝度範囲を変換する１以上の第２変換モードに対応している変換部が、前記変換補助データに基づいて、前記１以上の第２変換モードのいずれかにより、前記第１映像信号の輝度範囲の変換処理を行うことで前記第１映像信号の輝度範囲より狭い輝度範囲の第２映像信号を生成する変換ステップと、前記第２映像信号及び前記制御情報を前記伝送プロトコルで表示装置へ出力する出力ステップとを含む。 Further, the data output method according to one aspect of the present disclosure is a data output method in a data output device, which converts a decoding step of generating a first video signal by decoding a video stream and a brightness range of the video signal. Characteristic data indicating the brightness range of the first video signal by interpreting the acquisition step of acquiring one or more metadata corresponding to one or more first conversion modes and one of the one or more metadata. An interpretation step for acquiring the conversion auxiliary data for converting the brightness range of the first video signal, and a control information generation step for converting the characteristic data into control information according to a predetermined transmission protocol. Based on the conversion auxiliary data, the conversion unit corresponding to one or more second conversion modes that convert the brightness range of the video signal may perform the first video signal by any one of the one or more second conversion modes. A conversion step of generating a second video signal having a brightness range narrower than the brightness range of the first video signal by performing the conversion processing of the brightness range of the above, and displaying the second video signal and the control information by the transmission protocol. Includes an output step to output to.
これによれば、当該データ出力方法は、複数のメタデータに対応する第１変換モードと、データ出力装置が対応している第２変換モードと、表示装置が対応している第３変換モードとに基づき、データ出力装置及び表示装置のどちらで変換処理を行うかを決定できる。これにより、データ出力方法は、適切に変換処理を行う装置を決定できる。 According to this, the data output method includes a first conversion mode corresponding to a plurality of metadata, a second conversion mode corresponding to the data output device, and a third conversion mode corresponding to the display device. Based on the above, it is possible to determine whether the conversion process is performed by the data output device or the display device. As a result, the data output method can appropriately determine the device that performs the conversion process.
また、本開示の一態様に係るプログラムは、前記データ出力方法をコンピュータに実行させる。 Further, the program according to one aspect of the present disclosure causes a computer to execute the data output method.
また、本開示の一態様に係るデータ生成方法は、データ生成装置が行うデータ生成方法であって、映像信号の輝度範囲を変換する１以上の変換モードに対応する１以上のメタデータを生成する第１生成ステップと、前記映像信号と、前記１以上のメタデータと、前記１以上の変換モードの数を示す変換モード数とを含む映像ストリームを生成する第２生成ステップとを含む。 Further, the data generation method according to one aspect of the present disclosure is a data generation method performed by a data generation device, and generates one or more metadata corresponding to one or more conversion modes for converting a brightness range of a video signal. The first generation step includes a second generation step of generating a video stream including the video signal, one or more metadata, and a number of conversion modes indicating the number of one or more conversion modes.
これによれば、当該データ生成方法は、１以上の変換モードに対応するメタデータを含む映像ストリームを生成できる。これにより、当該映像ストリームを再生する再生装置等において、適切な変換モードを選択できる。 According to this, the data generation method can generate a video stream containing metadata corresponding to one or more conversion modes. As a result, an appropriate conversion mode can be selected in a playback device or the like that reproduces the video stream.
なお、これらの包括的または具体的な態様は、システム、方法、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能なＣＤ−ＲＯＭなどの記録媒体で実現されてもよく、システム、方法、集積回路、コンピュータプログラムまたは記録媒体の任意な組み合わせで実現されてもよい。 It should be noted that these comprehensive or specific embodiments may be realized in a recording medium such as a system, method, integrated circuit, computer program or computer-readable CD-ROM, and the system, method, integrated circuit, computer program. Alternatively, it may be realized by any combination of recording media.
また、上記特徴に関しては、主に、［１０．複数のＨＤＲメタデータの格納例］〜［１３．データ出力装置の構成例２］において説明する。 Regarding the above features, mainly [10. Storage example of multiple HDR metadata] to [13. A data output device configuration example 2] will be described.
また、以下で説明する実施の形態は、いずれも本開示の一具体例を示すものである。以下の実施の形態で示される数値、形状、材料、構成要素。構成要素の配置位置及び接続形態、ステップ、ステップの順序などは、一例であり、本開示を限定する主旨ではない。また、以下の実施の形態における構成要素のうち、最上位概念を示す独立請求項に記載されていない構成要素については、任意の構成要素として説明される。 In addition, all of the embodiments described below show a specific example of the present disclosure. Numerical values, shapes, materials and components shown in the following embodiments. The arrangement position and connection form of the components, the steps, the order of the steps, and the like are examples, and are not intended to limit the present disclosure. Further, among the components in the following embodiments, the components not described in the independent claims indicating the highest level concept are described as arbitrary components.
（実施の形態）
［１．背景］
従来の画像信号より輝度範囲が高い画像信号であるＨＤＲ（Ｈｉｇｈ Ｄｙｎａｍｉｃ Ｒａｎｇｅ）信号は、ＨＤＲ信号を格納したＢｌｕ−ｒａｙ（登録商標、以下同様）ディスク等のパッケージメディア、放送、又はＯＴＴ（Ｏｖｅｒ Ｔｈｅ Ｔｏｐ）等の配信媒体経由で配信される。ここで、ＯＴＴとは、インターネット上で提供されるＷｅｂサイト、動画或いは音声などのコンテンツ或いはサービス、又はそれらを提供する事業者を意味する。配信されたＨＤＲ信号は、Ｂｌｕ−ｒａｙ機器等により復号される。また、復号されたＨＤＲ信号は、ＨＤＲ対応表示装置（ＴＶ、プロジェクタ、タブレット、又はスマートフォン等）に送られ、ＨＤＲ対応表示装置によりＨＤＲ映像が再生される。
(Embodiment)
[1. background]
The HDR (High Dynamic Range) signal, which is an image signal having a higher luminance range than the conventional image signal, is a package media such as a Blu-ray (registered trademark, the same applies hereinafter) disk containing the HDR signal, broadcasting, or OTT (Over The). It is distributed via a distribution medium such as Top). Here, OTT means a website provided on the Internet, contents or services such as video or audio, or a business operator that provides them. The delivered HDR signal is decoded by a Blu-ray device or the like. Further, the decoded HDR signal is sent to an HDR compatible display device (TV, projector, tablet, smartphone, etc.), and the HDR image is reproduced by the HDR compatible display device.
ＨＤＲ技術はまだ初期段階であり、最初に導入したＨＤＲ技術が採用された後に、新たなＨＤＲ方式が開発されることが想定される。この場合、新たに作成されたＨＤＲ方式のＨＤＲ信号（及びメタデータ）をＨＤＲ配信媒体に格納することにより新規ＨＤＲ方式を採用できる。本開示では、新たなＨＤＲ信号形式（メタデータ）を格納した配信媒体に対して、元の配信媒体用に設計された復号装置（例えばＢｌｕ−ｒａｙ機器）を変えることなく、元の技術でのＨＤＲ再生は保証することで互換性を保持し、新たな方式に対応したＨＤＲ復号装置（例えばＢｌｕ−ｒａｙ機器）では新たなＨＤＲ方式の処理に対応することが可能にする方法及び装置を実現する。 HDR technology is still in its infancy, and it is expected that a new HDR system will be developed after the first introduced HDR technology is adopted. In this case, the new HDR system can be adopted by storing the newly created HDR signal (and metadata) of the HDR system in the HDR distribution medium. In the present disclosure, the original technology of the distribution medium storing the new HDR signal format (metadata) is used without changing the decoding device (for example, Blu-ray device) designed for the original distribution medium. HDR playback is guaranteed to maintain compatibility, and HDR decoding devices (for example, Blu-ray devices) that support the new method realize methods and devices that enable processing of the new HDR method. ..
まず、映像技術の変遷について、図１を用いて説明する。図１は、映像技術の進化について説明するための図である。 First, the transition of video technology will be described with reference to FIG. FIG. 1 is a diagram for explaining the evolution of video technology.
これまで、映像の高画質化としては、表示画素数の拡大に主眼がおかれ、Ｓｔａｎｄａｒｄ Ｄｅｆｉｎｉｔｉｏｎ（ＳＤ）の７２０×４８０画素の映像から、Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ（ＨＤ）の１９２０×１０８０画素の、所謂２Ｋ映像が普及している。 Until now, the focus has been on increasing the number of display pixels in order to improve the image quality of images, from standard definition (SD) 720 x 480 pixel images to high definition (HD) 1920 x 1080 pixels, so-called 2K. Video is widespread.
近年、映像の更なる高画質化を目指して、Ｕｌｔｒａ Ｈｉｇｈ Ｄｅｆｉｎｉｔｉｏｎ（ＵＨＤ）の３８４０×１９２０画素、あるいは、４Ｋの４０９６×１９２０画素の、所謂４Ｋ映像の導入が開始された。 In recent years, the introduction of so-called 4K video of Ultra High Definition (UHD) 3840 × 1920 pixels or 4K 4096 × 1920 pixels has been started with the aim of further improving the image quality.
そして、４Ｋの導入による映像の高解像度化を行うと共に、ダイナミックレンジ拡張や色域の拡大、あるいは、フレームレートの追加、向上などを行うことで映像を高画質化することが検討されている。 Then, it is being studied to improve the image quality by introducing 4K to increase the resolution of the image, expanding the dynamic range, expanding the color gamut, adding or improving the frame rate, and the like.
その中でも、ダイナミックレンジについては、従来の映像における暗部階調を維持しつつ、現行のＴＶ信号では表現不能な鏡面反射光などの明るい光を、より現実に近い明るさで表現するために最大輝度値を拡大した輝度範囲に対応させた方式として、ＨＤＲ（Ｈｉｇｈ Ｄｙｎａｍｉｃ Ｒａｎｇｅ）が注目されている。具体的には、これまでのＴＶ信号が対応している輝度範囲の方式は、ＳＤＲ（Ｓｔａｎｄａｒｄ Ｄｙｎａｍｉｃ Ｒａｎｇｅ）と呼ばれ、最大輝度値が１００ｎｉｔであったのに対して、ＨＤＲでは１０００ｎｉｔ以上まで最大輝度値を拡大することが想定されている。ＨＤＲは、ＳＭＰＴＥ（Ｓｏｃｉｅｔｙ ｏｆ Ｍｏｔｉｏｎ Ｐｉｃｔｕｒｅ ＆ Ｔｅｌｅｖｉｓｉｏｎ Ｅｎｇｉｎｅｅｒｓ）やＩＴＵ−Ｒ（Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎｓ Ｕｎｉｏｎ Ｒａｄｉｏｃｏｍｍｕｎｉｃａｔｉｏｎｓ Ｓｅｃｔｏｒ）などにおいて、標準化が進行中である。 Among them, regarding the dynamic range, the maximum brightness is used to express bright light such as mirror-reflected light, which cannot be expressed by the current TV signal, with a brightness closer to reality while maintaining the dark area gradation in the conventional image. HDR (High Dynamic Range) is attracting attention as a method corresponding to a brightness range in which the value is expanded. Specifically, the conventional method of the brightness range supported by the TV signal is called SDR (Standard Dynamic Range), and the maximum brightness value is 100 nits, whereas the maximum brightness value is 1000 nits or more in HDR. It is expected that the brightness value will be increased. HDR is being standardized in SMPTE (Society of Motion Picture & Television Engineers) and ITU-R (International Telecommunication Union Radiocommunication Sector).
ＨＤＲの具体的な適用先としては、ＨＤやＵＨＤと同様に、放送やパッケージメディア（Ｂｌｕ−ｒａｙ Ｄｉｓｃ等）、インターネット配信などで使われることが想定されている。 As a specific application destination of HDR, it is assumed that it will be used for broadcasting, package media (Blu-ray Disc, etc.), Internet distribution, etc., as with HD and UHD.
なお、以下では、ＨＤＲに対応した映像において、当該映像の輝度は、ＨＤＲの輝度範囲の輝度値からなり、当該映像の輝度値が量子化されることで得られた輝度信号をＨＤＲ信号と呼ぶ。ＳＤＲに対応した映像において、当該映像の輝度は、ＳＤＲの輝度範囲の輝度値からなり、当該映像の輝度値が量子化されることで得られた輝度信号をＳＤＲ信号と呼ぶ。 In the following, in the video corresponding to HDR, the brightness of the video is composed of the brightness value in the brightness range of HDR, and the brightness signal obtained by quantizing the brightness value of the video is referred to as an HDR signal. .. In an image corresponding to SDR, the luminance of the image is composed of a luminance value in the luminance range of the SDR, and the luminance signal obtained by quantizing the luminance value of the image is called an SDR signal.
［２．ＨＤＲ導入時のマスター、配信方式、および表示装置の関係］
図２は、ＳＤＲとＨＤＲのホームエンターテイメント用マスターを制作するフローと、配信媒体及び表示装置の関係を示す図である。
[2. Relationship between master, distribution method, and display device when HDR is introduced]
FIG. 2 is a diagram showing a relationship between a flow for producing a master for home entertainment of SDR and HDR, a distribution medium, and a display device.
ＨＤＲのコンセプトは提案されており、ＨＤＲのコンセプトレベルでの有効性は確認されている。また、ＨＤＲの最初の実施方法が提案されている。ただし、この方法を使ってＨＤＲコンテンツが大量に作られ、最初の実施方法の実証が行われたわけではない。このため、今後ＨＤＲコンテンツの制作が本格化した場合、現状のＨＤＲの制作方式、特にメタデータが変わる可能性がある。 The HDR concept has been proposed and its effectiveness at the HDR concept level has been confirmed. Also, the first method of implementing HDR has been proposed. However, a large amount of HDR content was created using this method, and the first implementation method was not demonstrated. For this reason, if HDR content production begins in earnest in the future, the current HDR production method, especially metadata, may change.
［３．ＥＯＴＦの使い方］
図３は、コンテンツに格納される輝度信号のコード値の決定方法、および、再生時にコード値から輝度値を復元するプロセスの説明図である。
[3. How to use EOTF]
FIG. 3 is an explanatory diagram of a method of determining the code value of the luminance signal stored in the content and a process of restoring the luminance value from the code value at the time of reproduction.
本例における輝度を示す輝度信号はＨＤＲに対応したＨＤＲ信号である。グレーディング後の画像は、ＨＤＲの逆ＥＯＴＦにより量子化され、当該画像の輝度値に対応するコード値が決定する。このコード値に基づいて画像符号化などが行われ、ビデオのストリームが生成される。再生時には、ストリームの復号結果に対して、ＨＤＲのＥＯＴＦに基づいて逆量子化することによりリニアな信号に変換され、画素毎の輝度値が復元される。以下、ＨＤＲの逆ＥＯＴＦを用いた量子化を「逆ＨＤＲのＥＯＴＦ変換」という。ＨＤＲのＥＯＴＦを用いた逆量子化を「ＨＤＲのＥＯＴＦ変換」という。同様に、ＳＤＲの逆ＥＯＴＦを用いた量子化を「逆ＳＤＲのＥＯＴＦ変換」という。ＳＤＲのＥＯＴＦを用いた逆量子化を「ＳＤＲのＥＯＴＦ変換」という。 The luminance signal indicating the luminance in this example is an HDR signal corresponding to HDR. The image after grading is quantized by the inverse EOTF of HDR, and the code value corresponding to the brightness value of the image is determined. Image coding or the like is performed based on this code value, and a video stream is generated. At the time of reproduction, the decoding result of the stream is dequantized based on HDR EOTF to be converted into a linear signal, and the brightness value for each pixel is restored. Hereinafter, the quantization using the inverse EOTF of HDR is referred to as "EOTF conversion of the inverse HDR". Inverse quantization using HDR EOTF is called "HDR EOTF conversion". Similarly, the quantization using the inverse EOTF of SDR is called "EOTF conversion of inverse SDR". Inverse quantization using SDR EOTF is called "SDR EOTF conversion".
この輝度値とメタデータを使って、映像変換処理部で、映像表示部で表示できる輝度値に変換することで、映像表示部でＨＤＲ映像を表示することができる。例えば、元のＨＤＲ映像のピーク輝度が２０００ｎｉｔであり、映像表示部のピーク輝度が８００ｎｉｔの場合、変換を行って輝度を下げることができる。 The HDR video can be displayed on the video display unit by converting the brightness value and the metadata into a brightness value that can be displayed on the video display unit by the video conversion processing unit. For example, when the peak brightness of the original HDR video is 2000 nits and the peak brightness of the video display unit is 800 nits, the brightness can be lowered by performing conversion.
このように、ＨＤＲマスターの方式は、ＥＯＴＦ及びメタデータとＨＤＲ信号との組み合わせにより実現されている。よって、より効率的なＥＯＴＦ及びメタデータが開発され、そのようなＥＯＴＦ及びメタデータを用いたＨＤＲ方式を採用すべき時が来る可能性がある。 As described above, the HDR master method is realized by the combination of EOTF and metadata and HDR signal. Therefore, it may be time to develop more efficient EOTFs and metadata and adopt HDR methods using such EOTFs and metadata.
但し、この新たな方式がどのようなものになるかは、現時点では解らないが、ＥＯＴＦが変更される可能性とメタデータが追加される可能性とは想像できる。この場合、ＨＤＲ信号自体も変わる。 However, although it is not known at this time what this new method will look like, it is possible to imagine the possibility that EOTF will be changed and that metadata will be added. In this case, the HDR signal itself also changes.
本開示は、このようにＨＤＲの伝送フォーマットが変更された場合でも、ＨＤＲ対応機器を買ったお客様が新たな機器を買いなおすリスクを下げることで、ＨＤＲの普及を図ることを目指している。 The present disclosure aims to popularize HDR by reducing the risk that a customer who has purchased an HDR-compatible device will repurchase a new device even if the HDR transmission format is changed in this way.
［４．メタデータ］
図４は、ＨＤＲメタデータの例を示す図である。ＨＤＲメタデータは、映像信号の輝度範囲の変更（ＤＲ変換）に用いられる変換補助情報と、ＨＤＲ制御情報とを含む。各情報は、例えばタイトル単位で設けられる静的ＨＤＲメタデータと、例えばフレーム単位で設けられる動的ＨＤＲメタデータとのいずれかである。また、静的ＨＤＲメタデータは、必須メタデータ（基本データ）と、選択メタデータ（拡張データ）とのいずれかに分類され、動的ＨＤＲメタデータは、選択メタデータに分類される。なお、各情報の詳細は後述する。
[4. Metadata]
FIG. 4 is a diagram showing an example of HDR metadata. The HDR metadata includes conversion auxiliary information used for changing the brightness range of the video signal (DR conversion) and HDR control information. Each piece of information is, for example, either static HDR metadata provided in title units or dynamic HDR metadata provided in frame units, for example. Further, static HDR metadata is classified into either essential metadata (basic data) or selective metadata (extended data), and dynamic HDR metadata is classified into selective metadata. The details of each information will be described later.
［５．ＨＤＲメタデータ］
ＨＤＲコンテンツにおけるマスタリング時の特性を示すパラメータとしては、タイトル毎又はプレイリスト毎に固定である静的ＨＤＲメタデータと、シーン毎に可変である動的ＨＤＲメタデータとが存在する。ここで、タイトル及びプレイリストは、連続して再生される映像信号を示す情報である。以降、連続して再生される映像信号を連続再生単位と呼ぶ。
[5. HDR metadata]
As parameters indicating the characteristics at the time of mastering in the HDR content, there are static HDR metadata that is fixed for each title or playlist and dynamic HDR metadata that is variable for each scene. Here, the title and the playlist are information indicating a video signal that is continuously reproduced. Hereinafter, the video signal that is continuously reproduced is referred to as a continuous reproduction unit.
例えば、静的ＨＤＲメタデータは、ＥＯＴＦ関数（カーブ）の種類、１８％Ｇｒａｙ値、Ｄｉｆｆｕｓｅ Ｗｈｉｔｅ値、Ｋｎｅｅ ｐｏｉｎｔ、及びＣｌｉｐ ｐｏｉｎｔの少なくとも一つを含む。ＥＯＴＦは、複数の輝度値と複数のコード値とを関係付けた情報であり、映像信号の輝度範囲を変更するための情報である。その他の情報は、映像信号の輝度に関する属性情報であることから、静的ＨＤＲメタデータは、映像信号の輝度範囲に関する情報であり、映像信号の輝度範囲を特定するための情報と言える。 For example, static HDR metadata includes at least one of the EOTF function (curve) type, 18% Gray value, Diffuse White value, Knee point, and Clip point. The EOTF is information in which a plurality of luminance values and a plurality of code values are associated with each other, and is information for changing the luminance range of a video signal. Since the other information is attribute information related to the brightness of the video signal, the static HDR metadata is information related to the brightness range of the video signal, and can be said to be information for specifying the brightness range of the video signal.
具体的には、１８％Ｇｒａｙ値及びＤｉｆｆｕｓｅ Ｗｈｉｔｅ値は、予め定められた基準となる明るさの映像における輝度値（ｎｉｔ）を示し、言い換えると、映像における基準の明るさを示す。より具体的には、１８％Ｇｒａｙ値は、マスタリング前において１８ｎｉｔの明るさの物体のマスタリング後の輝度値（ｎｉｔ）を示す。Ｄｉｆｆｕｓｅ Ｗｈｉｔｅ値は、白色に相当する輝度値（ｎｉｔ）を示す。 Specifically, the 18% Gray value and the Diffuse White value indicate a brightness value (nit) in an image having a predetermined reference brightness, in other words, indicate a reference brightness in the image. More specifically, the 18% Gray value indicates the brightness value (nit) after mastering of an object having a brightness of 18 nit before mastering. The Diffuse White value indicates a brightness value (nit) corresponding to white.
また、Ｋｎｅｅ ｐｏｉｎｔ及びＣｌｉｐ ｐｏｉｎｔは、ＥＯＴＦ関数のパラメータであり、ＥＯＴＦにおける特性が変化する点を示す。具体的には、Ｋｎｅｅ ｐｏｉｎｔは、撮影時のオリジナルの輝度値（入力輝度）の増分に対する、映像信号の輝度としてＥＯＴＦにマッピングされる輝度値（出力輝度）の増分を、１対１とは異なる値とする変化点を示す。例えば、Ｋｎｅｅ ｐｏｉｎｔは、後述する図３０Ａにおいて、線形変化からはずれる点を特定するための情報である。また、Ｃｌｉｐ ｐｏｉｎｔは、ＥＯＴＦ関数においてクリップが開始される点を示す。ここでクリップとは、ある値以上の入力輝度値を同一の出力輝度値に変換することである。例えば、Ｃｌｉｐ ｐｏｉｎｔは、後述する図３０Ｂにおいて、出力輝度値が変化しなくなる点を示す。 In addition, Knee point and Clip point are parameters of the EOTF function, and indicate that the characteristics in EOTF change. Specifically, Knee point differs from 1: 1 in the increment of the luminance value (output luminance) mapped to EOTF as the luminance of the video signal with respect to the increment of the original luminance value (input luminance) at the time of shooting. Indicates the change point to be the value. For example, the Knee point is information for identifying a point deviating from the linear change in FIG. 30A described later. Also, Clip point indicates the point at which the clip starts in the EOTF function. Here, the clip is to convert an input luminance value of a certain value or more into the same output luminance value. For example, Clip point indicates that the output luminance value does not change in FIG. 30B described later.
また、ＥＯＴＦ関数（カーブ）の種類とは、例えば、図２７Ａに示すＨＤＲのＥＯＴＦ及びＳＤＲのＥＯＴＦである。 The types of EOTF functions (curves) are, for example, HDR EOTF and SDR EOTF shown in FIG. 27A.
このように、本実施の形態に係るコンテンツデータ生成方法は、コンテンツデータを生成するコンテンツデータ生成方法であって、映像信号と、映像信号の連続再生単位に含まれる複数の画像（連続再生単位を構成する映像信号）に対して共通に用いられる情報であって、映像信号の輝度範囲に関する情報を含む静的ＨＤＲメタデータ（第１メタデータ）とを生成する第１生成ステップと、連続再生単位と静的ＨＤＲメタデータとを関連付けることによりコンテンツデータを生成する第２生成ステップを含む。例えば、映像信号の輝度範囲に関する情報とは、映像信号の輝度範囲を変換するための情報である。 As described above, the content data generation method according to the present embodiment is a content data generation method for generating content data, and includes a video signal and a plurality of images (continuous playback unit) included in the continuous playback unit of the video signal. The first generation step of generating static HDR metadata (first metadata) including information on the brightness range of the video signal, which is information commonly used for the constituent video signals), and a continuous playback unit. Includes a second generation step of generating content data by associating with static HDR metadata. For example, the information regarding the luminance range of the video signal is information for converting the luminance range of the video signal.
また、静的ＨＤＲメタデータは、複数の輝度値と複数のコード値とを関係付けたＥＯＴＦを特定するための情報を含む。また、映像信号における輝度値は、コード値として符号化される。 The static HDR metadata also includes information for identifying the EOTF that associates the plurality of luminance values with the plurality of code values. Further, the luminance value in the video signal is encoded as a code value.
また、静的ＨＤＲメタデータは、さらに、予め定められた基準となる明るさの映像信号における輝度値を示す情報、又は、ＥＯＴＦにおける特性が変化する点を示す情報を含む。例えば、静的ＨＤＲメタデータは、映像信号における白色に相当する輝度値を示す情報（Ｄｉｆｆｕｓｅ Ｗｈｉｔｅ値）を含む。 Further, the static HDR metadata further includes information indicating a brightness value in a video signal having a predetermined reference brightness, or information indicating a point at which the characteristics in EOTF change. For example, the static HDR metadata includes information (Diffuse White value) indicating a brightness value corresponding to white in the video signal.
また、第１生成ステップでは、連続再生単位より細かい単位に対して共通に用いられる情報であって、映像信号の輝度範囲に関する情報である動的ＨＤＲメタデータ（第２メタデータ）をさらに生成する。例えば、映像信号の輝度範囲に関する情報とは、映像信号の輝度範囲を変換するための情報である。 Further, in the first generation step, dynamic HDR metadata (second metadata), which is information commonly used for units finer than the continuous reproduction unit and is information on the brightness range of the video signal, is further generated. .. For example, the information regarding the luminance range of the video signal is information for converting the luminance range of the video signal.
動的ＨＤＲメタデータは、シーン毎に異なるマスタリング特性を示すパラメータなどである。ここでマスタリング特性とは、オリジナル（マスタリング前）の輝度と、マスタリング後の輝度との関係を示す。例えば、マスタリング特性を示すパラメータとは、上記した静的ＨＤＲメタデータと同様の情報であり、言い換えると、静的ＨＤＲメタデータに含まれる情報の少なくとも一つである。 The dynamic HDR metadata is a parameter or the like that shows different mastering characteristics for each scene. Here, the mastering characteristic indicates the relationship between the original (before mastering) brightness and the brightness after mastering. For example, the parameter indicating the mastering characteristic is the same information as the static HDR metadata described above, in other words, at least one of the information contained in the static HDR metadata.
図５は、静的ＨＤＲメタデータの格納例を示す図である。本例は、Ｂｌｕ−ｒａｙディスクなどのパッケージメディアにおいて、静的ＨＤＲメタデータをプレイリストに格納する例である。 FIG. 5 is a diagram showing an example of storing static HDR metadata. This example is an example of storing static HDR metadata in a playlist in a package media such as a Blu-ray disc.
プレイリストから参照されるストリーム毎のメタデータの１つとして、静的ＨＤＲメタデータが格納される。この場合、静的ＨＤＲメタデータはプレイリスト単位で固定である。つまり、静的ＨＤＲメタデータは、各プレイリストに対応付けて格納される。 Static HDR metadata is stored as one of the metadata for each stream referenced from the playlist. In this case, the static HDR metadata is fixed for each playlist. That is, the static HDR metadata is stored in association with each playlist.
また、ＯＴＴでは、ストリームの取得に先立って参照されるマニフェストファイルに静的ＨＤＲメタデータが格納されてもよい。つまり、本実施の形態に係るコンテンツデータ生成方法は、映像信号を映像ストリームとして生成し、静的ＨＤＲメタデータを、映像ストリームの取得に先立って参照されるマニフェストファイルに格納してもよい。 Further, in OTT, static HDR metadata may be stored in a manifest file that is referenced prior to the acquisition of the stream. That is, in the content data generation method according to the present embodiment, the video signal may be generated as a video stream, and the static HDR metadata may be stored in the manifest file referred to prior to the acquisition of the video stream.
また、放送では、ストリームの属性を示す記述子に静的ＨＤＲメタデータが格納されてもよい。つまり、本実施の形態に係るコンテンツデータ生成方法は、コンテンツデータを映像ストリームとして生成し、静的ＨＤＲメタデータを、映像ストリームの属性を示す識別子として当該映像ストリームとは独立に格納してもよい。例えば、静的ＨＤＲメタデータを、ＭＰＥＧ２−ＴＳにおける記述子（デスクリプタ）として格納できる。 Also, in broadcasting, static HDR metadata may be stored in a descriptor indicating the attributes of the stream. That is, in the content data generation method according to the present embodiment, the content data may be generated as a video stream, and the static HDR metadata may be stored independently of the video stream as an identifier indicating the attribute of the video stream. .. For example, static HDR metadata can be stored as a descriptor in MPEG2-TS.
また、タイトル毎に静的ＨＤＲメタデータが固定である場合には、静的ＨＤＲメタデータは、タイトルの属性を示す管理情報として格納されてもよい。 When the static HDR metadata is fixed for each title, the static HDR metadata may be stored as management information indicating the attributes of the title.
図６は、動的ＨＤＲメタデータの、ビデオストリーム内への格納例を示す図である。ＭＰＥＧ−４ ＡＶＣ又はＨＥＶＣ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）では、ＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｌ Ｅｎｈａｎｃｅｍｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ）と呼ばれるデータ構造を用いて、ストリームの再生制御に関わる情報を格納する。よって、例えば、ＳＥＩに動的ＨＤＲメタデータが格納される。 FIG. 6 is a diagram showing an example of storing dynamic HDR metadata in a video stream. In MPEG-4 AVC or HEVC (High Efficiency Video Coding), information related to stream reproduction control is stored by using a data structure called SEI (Supplemental Engineering Information). Thus, for example, dynamic HDR metadata is stored in SEI.
動的ＨＤＲメタデータは、シーン毎に更新されることが想定される。シーンの先頭は、ＧＯＰ（Ｇｒｏｕｐ Ｏｆ Ｐｉｃｔｕｒｅｓ）などのランダムアクセス単位の先頭のアクセスユニット（ＡＵ）である。従って、動的ＨＤＲメタデータは、ランダムアクセス単位における復号順で先頭のアクセスユニットに格納することにしてもよい。ランダムアクセス単位の先頭アクセスユニットは、ＩＤＲピクチャ、又は、ＳＰＳ（Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）が付加されたｎｏｎ−ＩＤＲ Ｉピクチャなどとなる。よって、受信側の装置は、ランダムアクセス単位の先頭アクセスユニットを構成するＮＡＬ（Ｎｅｔｗｏｒｋ Ａｂｓｔｒａｃｔｉｏｎ Ｌａｙｅｒ）ユニットを検出することにより、動的ＨＤＲメタデータを取得できる。あるいは、動的ＨＤＲメタデータを格納するＳＥＩに対して、固有のタイプが付与されてもよい。 The dynamic HDR metadata is expected to be updated on a scene-by-scene basis. The head of the scene is the head access unit (AU) of a random access unit such as GOP (Group Of Pictures). Therefore, the dynamic HDR metadata may be stored in the first access unit in the decoding order in the random access unit. The first access unit of the random access unit is an IDR picture, a non-IDR I picture to which an SPS (Sequence Parameter Set) is added, or the like. Therefore, the device on the receiving side can acquire the dynamic HDR metadata by detecting the NAL (Network Operation Layer) unit that constitutes the head access unit of the random access unit. Alternatively, a unique type may be assigned to the SEI that stores the dynamic HDR metadata.
なお、ＥＯＴＦ関数の種類について、ＳＰＳにおけるストリームの属性情報などとして格納されてもよい。つまり、本実施の形態に係るコンテンツデータ生成方法は、コンテンツデータをＨＥＶＣにより符号化した映像ストリームとして生成し、ＥＯＴＦを特定するための情報を、映像ストリームに含まれるＳＰＳに格納してもよい。 The type of EOTF function may be stored as stream attribute information in SPS. That is, in the content data generation method according to the present embodiment, the content data may be generated as a video stream encoded by HEVC, and the information for identifying the EOTF may be stored in the SPS included in the video stream.
［６．静的ＨＤＲメタデータの伝送方法］
図７は、静的ＨＤＲメタデータの伝送方法を示す図であり、ＢＤプレーヤ（Ｂｌｕ−ｒａｙ機器）又はレコーダなどの再生装置においてＨＤＭＩ（登録商標、以下同様）などの伝送プロトコルを通じて、表示装置にＨＤＲ信号を伝送する際の動作例を示すフローチャートである。
[6. Static HDR metadata transmission method]
FIG. 7 is a diagram showing a method of transmitting static HDR metadata to a display device through a transmission protocol such as HDMI (registered trademark, the same applies hereinafter) in a playback device such as a BD player (Blu-ray device) or a recorder. It is a flowchart which shows the operation example at the time of transmitting an HDR signal.
静的ＨＤＲメタデータは、タイトル単位又はプレイリスト単位で固定であることを先に述べた。従って、再生装置は、静的ＨＤＲメタデータの設定が必要な場合（Ｓ４０１でＹｅｓ）、タイトル又はプレイリストの再生開始時において、静的ＨＤＲメタデータをコンテンツの管理情報から取得して、取得した静的ＨＤＲメタデータをＨＤＭＩの制御情報として格納して伝送する。つまり、再生装置は、タイトル又はプレイリストを構成する映像信号の伝送開始に先立って、当該タイトル又はプレイリストに対応する静的ＨＤＲメタデータを取得し、取得した静的ＨＤＲメタデータをＨＤＭＩの制御情報として伝送する（Ｓ４０２）。より一般的には、再生装置は、当該再生装置と表示装置との間のＨＤＭＩの初期化処理を行う際に、初期化情報として静的ＨＤＲメタデータを伝送してもよい。 It was mentioned earlier that static HDR metadata is fixed on a title-by-title or playlist-by-playlist basis. Therefore, when it is necessary to set the static HDR metadata (Yes in S401), the playback device acquires the static HDR metadata from the content management information at the start of playback of the title or playlist. Static HDR metadata is stored and transmitted as HDMI control information. That is, the playback device acquires the static HDR metadata corresponding to the title or the playlist prior to the start of transmission of the video signal constituting the title or the playlist, and controls the acquired static HDR metadata with HDMI. It is transmitted as information (S402). More generally, the playback device may transmit static HDR metadata as initialization information when performing HDMI initialization processing between the playback device and the display device.
その後、再生装置は、静的ＨＤＲメタデータに対応するビデオストリームを伝送する（Ｓ４０３）。なお、このビデオストリームに対しては、伝送済みの静的ＨＤＲメタデータが有効となる。 The playback device then transmits the video stream corresponding to the static HDR metadata (S403). Note that the transmitted static HDR metadata is valid for this video stream.
このように、本実施の形態に係る映像ストリーム伝送方法は、映像ストリーム（ビデオストリーム）を伝送する映像ストリーム伝送方法であって、映像信号と、連続再生単位に含まれる複数の画像に対して共通に用いられる情報であって、映像信号の輝度範囲に関する静的ＨＤＲメタデータ（第１メタデータ）とを含むコンテンツデータを取得する取得ステップと、映像信号に対応する映像ストリームと、静的ＨＤＲメタデータとを伝送する伝送ステップとを含む。 As described above, the video stream transmission method according to the present embodiment is a video stream transmission method for transmitting a video stream (video stream), which is common to the video signal and a plurality of images included in the continuous playback unit. The acquisition step of acquiring the content data including the static HDR metadata (first metadata) relating to the brightness range of the video signal, the video stream corresponding to the video signal, and the static HDR meta. Includes a transmission step to transmit data.
例えば、伝送ステップでは、ＨＤＭＩの通信プロトコルに従い、映像ストリームと静的ＨＤＲメタデータとを伝送する。 For example, in the transmission step, the video stream and static HDR metadata are transmitted according to the HDMI communication protocol.
また、動的ＨＤＲメタデータは、ビデオストリームの一部として伝送される。 Also, the dynamic HDR metadata is transmitted as part of the video stream.
なお、再生装置は、動的ＨＤＲメタデータを、当該動的ＨＤＲメタデータが有効となるタイミングにおいてＨＤＭＩの制御信号として伝送してもよい。このとき、再生装置は、静的ＨＤＲメタデータと動的ＨＤＲメタデータとに識別子などを設けて互いに識別できるようにして伝送する。 The playback device may transmit the dynamic HDR metadata as an HDMI control signal at the timing when the dynamic HDR metadata becomes effective. At this time, the reproduction device provides an identifier or the like in the static HDR metadata and the dynamic HDR metadata so that they can be distinguished from each other and transmitted.
また、制御信号においては、動的ＨＤＲメタデータを格納するためのコンテナのデータ構造のみ規定しておき、コンテナのペイロードデータとしてＳＥＩの内容をそのままコピーできるようにしてもよい。これにより、ＳＥＩに含まれる動的ＨＤＲメタデータのシンタックスが更新されてもＢＤプレーヤ等の再生装置の実装を変更せずに対応できる。 Further, in the control signal, only the data structure of the container for storing the dynamic HDR metadata may be specified, and the contents of the SEI may be copied as it is as the payload data of the container. As a result, even if the syntax of the dynamic HDR metadata included in the SEI is updated, it can be dealt with without changing the implementation of the playback device such as a BD player.
静的ＨＤＲメタデータについても同様に、コンテンツの管理情報における静的ＨＤＲメタデータをコピーして伝送できるようにしておけば、静的ＨＤＲメタデータのシンタックスの変更に対しても、再生装置の実装を変更せずに対応可能である。つまり、静的ＨＤＲメタデータを格納するためのコンテナのデータ構造が規定されており、伝送ステップでは、コンテンツデータに含まれる静的ＨＤＲメタデータを、コンテナのペイロードにコピーし、当該コンテナを伝送してもよい。 Similarly for static HDR metadata, if the static HDR metadata in the content management information can be copied and transmitted, even if the syntax of the static HDR metadata is changed, the playback device can be used. It can be handled without changing the implementation. That is, the data structure of the container for storing the static HDR metadata is defined, and in the transmission step, the static HDR metadata contained in the content data is copied to the payload of the container and transmitted in the container. You may.
［７．ＨＤＲメタデータの処理方法］
図８は、表示装置においてＨＤＲ信号を表示する際のＨＤＲメタデータの処理方法の例を示すフローチャートである。まず、表示装置は、ＨＤＭＩの制御情報から静的ＨＤＲメタデータを取得し（Ｓ４１１）、取得した静的ＨＤＲメタデータに基づき、ＨＤＲ信号の表示方法を決定する（Ｓ４１２）。
[7. HDR metadata processing method]
FIG. 8 is a flowchart showing an example of a method of processing HDR metadata when displaying an HDR signal on a display device. First, the display device acquires static HDR metadata from HDMI control information (S411), and determines a display method of the HDR signal based on the acquired static HDR metadata (S412).
なお、制御情報に静的ＨＤＲメタデータが含まれない場合には、表示装置は、アプリケーション規格において予め定められた値、又は、表示装置のデフォルト設定に基づいて、ＨＤＲ信号の表示方法を決定する。つまり、本実施の形態に係る映像表示方法は、静的ＨＤＲメタデータを取得できない場合、予め定められた値又は設定に基づき、映像信号に対応する映像の表示方法を決定する。 When the control information does not include static HDR metadata, the display device determines the HDR signal display method based on the value predetermined in the application standard or the default setting of the display device. .. That is, the video display method according to the present embodiment determines the video display method corresponding to the video signal based on a predetermined value or setting when the static HDR metadata cannot be acquired.
また、表示装置は、ビデオストリーム内のＳＥＩなどにおいて動的ＨＤＲメタデータを検出した場合（Ｓ４１３でＹｅｓ）、動的ＨＤＲメタデータに基づいてＨＤＲ信号の表示方法を更新する（Ｓ４１４）。つまり、本実施の形態に係る映像表示方法は、静的ＨＤＲメタデータを取得した場合、取得した静的ＨＤＲメタデータに基づき表示方法を決定して映像を表示し、動的ＨＤＲメタデータを取得した場合、静的ＨＤＲメタデータに基づき決定した表示方法を、動的ＨＤＲメタデータに基づき決定した表示方法に更新して映像を表示する。あるいは、静的ＨＤＲメタデータと動的ＨＤＲメタデータとの両方に基づいて表示方法を決定してもよい。 Further, when the display device detects the dynamic HDR metadata in SEI or the like in the video stream (Yes in S413), the display device updates the display method of the HDR signal based on the dynamic HDR metadata (S414). That is, in the video display method according to the present embodiment, when static HDR metadata is acquired, the display method is determined based on the acquired static HDR metadata, the video is displayed, and the dynamic HDR metadata is acquired. If so, the display method determined based on the static HDR metadata is updated to the display method determined based on the dynamic HDR metadata, and the image is displayed. Alternatively, the display method may be determined based on both static HDR metadata and dynamic HDR metadata.
なお、表示装置が、動的ＨＤＲメタデータの取得に対応していない場合には、表示装置は、静的ＨＤＲメタデータのみに基づいて動作してもよい。また、表示装置が動的ＨＤＲメタデータの取得に対応している場合でも、表示装置が、メタデータが格納されたアクセスユニットの表示時刻（ＰＴＳ：Ｐｒｅｓｅｎｔａｔｉｏｎ Ｔｉｍｅ Ｓｔａｍｐ）に同期してＨＤＲ信号の表示方法を更新できないことがある。この場合には、表示装置は、メタデータを取得後、表示方法を更新可能な最も早い時刻以降に表示されるアクセスユニットから、表示方法を更新してもよい。 If the display device does not support the acquisition of dynamic HDR metadata, the display device may operate based only on the static HDR metadata. Further, even when the display device supports the acquisition of dynamic HDR metadata, the display device displays the HDR signal in synchronization with the display time (PTS: Presentation Time Stamp) of the access unit in which the metadata is stored. You may not be able to update the method. In this case, the display device may update the display method from the access unit displayed after the earliest time in which the display method can be updated after acquiring the metadata.
なお、ＨＤＲメタデータにバージョン情報などを付与することで、パラメータの更新及び追加に対応できる。これにより、表示装置は、ＨＤＲメタデータのバージョン情報に基づいて、当該メタデータが解釈可能であるかを判定できる。あるいは、ＨＤＲメタデータは、基本部と拡張部とから構成され、パラメータの更新又は追加は拡張部の変更により対応し、基本部は更新しないことにしてもよい。つまり、静的ＨＤＲメタデータ及び動的ＨＤＲメタデータの各々は、複数のバージョンを有し、複数のバーションで共通に用いられる基本部と、バージョン毎に異なる拡張部とを含んでもよい。こうすることで、基本部のＨＤＲメタデータに基づいて、表示装置における後方互換性を確保できる。 By adding version information or the like to the HDR metadata, it is possible to update or add parameters. Thereby, the display device can determine whether or not the metadata can be interpreted based on the version information of the HDR metadata. Alternatively, the HDR metadata may be composed of a basic part and an extension part, and parameter updates or additions may be made by changing the extension part, and the basic part may not be updated. That is, each of the static HDR metadata and the dynamic HDR metadata may have a plurality of versions, and may include a basic part commonly used in a plurality of versions and an extension part different for each version. By doing so, backward compatibility in the display device can be ensured based on the HDR metadata of the basic part.
このように、本実施の形態に係る映像表示方法は、映像ストリームに基づき映像を表示する映像表示方法であって、映像信号に対応する映像ストリームと、静的ＨＤＲメタデータ（第１メタデータ）とを取得する取得ステップと、静的ＨＤＲメタデータに基づき、映像信号に対応する映像の表示方法を決定して表示する表示ステップとを含む。 As described above, the video display method according to the present embodiment is a video display method for displaying a video based on the video stream, the video stream corresponding to the video signal, and static HDR metadata (first metadata). Includes an acquisition step of acquiring and, and a display step of determining and displaying a video display method corresponding to the video signal based on static HDR metadata.
また、映像信号における輝度値は、コード値として符号化されており、静的ＨＤＲメタデータは、複数の輝度値と複数のコード値とを関係付けたＥＯＴＦを特定するための情報を含み、表示ステップでは、静的ＨＤＲメタデータで特定されるＥＯＴＦを用いて、映像信号で示されるコード値を輝度値に変換することで映像を生成する。 Further, the luminance value in the video signal is encoded as a code value, and the static HDR metadata includes and displays information for identifying the EOTF in which the plurality of luminance values and the plurality of code values are associated with each other. In the step, the video is generated by converting the code value indicated by the video signal into the luminance value using the EOTF specified by the static HDR metadata.
［８．データ出力装置］
図９は、ＢＤプレーヤなどのＨＤＲ信号を出力するデータ出力装置４００の構成を示すブロック図である。データ出力装置４００に入力されるＨＤＲメタデータは、ＨＤＲ信号のマスタリング特性を示す特性データと、ＨＤＲ信号をＳＤＲ信号に変換する、又は、ＨＤＲ信号のダイナミックレンジを変換する際のトーンマッピング方法を示す変換補助データとを含む。これら２種類のメタデータは、図５及び図６において説明したように、静的ＨＤＲメタデータ、又は、動的ＨＤＲメタデータとして格納される。さらに、静的ＨＤＲメタデータは、コンテンツの管理情報及び、映像ストリーム内の少なくとも一方に格納される。
[8. Data output device]
FIG. 9 is a block diagram showing a configuration of a
データ出力装置４００は、ビデオ復号部４０１と、外部メタ取得部４０２と、ＨＤＲメタ解釈部４０３と、ＨＤＲ制御情報生成部４０４と、ＤＲ変換部４０５と、ＨＤＭＩ出力部４０６とを備える。
The
ビデオ復号部４０１は、ビデオの符号化ストリームである映像ストリームを復号することで映像信号（第１映像信号）を生成し、得られた映像信号をＤＲ変換部４０５に出力する。また、ビデオ復号部４０１は、映像ストリーム内のＨＤＲメタデータ（第２メタデータ）（静的ＨＤＲメタデータ又は動的ＨＤＲメタデータ）を取得する。具体的には、ビデオ復号部４０１は、ＭＰＥＧ−４ ＡＶＣ又はＨＥＶＣのＳＥＩメッセージなどに格納されたＨＤＲメタデータをＨＤＲメタ解釈部４０３に出力する。
The
外部メタ取得部４０２は、プレイリストなどのコンテンツの管理情報に格納された静的ＨＤＲメタデータ（第１メタデータ）を取得し、取得した静的ＨＤＲメタデータをＨＤＲメタ解釈部４０３に出力する。ここで、コンテンツの管理情報に、プレイアイテムなど、ランダムアクセス可能な所定の単位において変更可能な動的ＨＤＲメタデータが格納されていてもよい。この場合、外部メタ取得部４０２は、コンテンツの管理情報から、動的ＨＤＲメタデータを取得し、取得した動的ＨＤＲメタデータをＨＤＲメタ解釈部４０３に出力する。
The external
ＨＤＲメタ解釈部４０３は、ビデオ復号部４０１又は外部メタ取得部４０２から出力されたＨＤＲメタデータの種類を判定し、特性データをＨＤＲ制御情報生成部４０４に出力し、変換補助データをＤＲ変換部４０５に出力する。
The HDR
なお、ビデオ復号部４０１及び外部メタ取得部４０２の両方において静的ＨＤＲメタデータが取得される場合には、外部メタ取得部４０２から出力された静的ＨＤＲメタデータのみが有効なメタデータとして用いられてもよい。つまり、外部メタ取得部４０２で取得された第１メタデータ及びビデオ復号部４０１で取得された第２メタデータが、第１映像信号の連続再生単位に含まれる複数の画像に対して共通に用いられる静的ＨＤＲメタデータである場合において、ＨＤＲメタ解釈部４０３は、第１メタデータ及び第２メタデータを共に取得した場合、第１メタデータを解析することで特性データ及び変換補助データを取得する。
When static HDR metadata is acquired by both the
または、ＨＤＲメタ解釈部４０３は、外部メタ取得部４０２で静的ＨＤＲメタデータが取得された場合、当該静的ＨＤＲメタデータを有効なメタデータとして用い、さらに、ビデオ復号部４０１で静的ＨＤＲメタデータが取得された場合、当該静的ＨＤＲメタデータで有効なメタデータを上書きしてもよい。つまり、外部メタ取得部４０２で取得された第１メタデータ及びビデオ復号部４０１で取得された第２メタデータが、第１映像信号の連続再生単位に含まれる複数の画像に対して共通に用いられる静的ＨＤＲメタデータである場合において、ＨＤＲメタ解釈部４０３は、第１メタデータ及び第２メタデータのうち第１メタデータのみが取得された場合、第１メタデータを解析することで特性データ及び変換補助データを取得し、第２メタデータが取得された場合、使用するメタデータを第１メタデータから第２メタデータに切り替える。
Alternatively, when the static HDR metadata is acquired by the external
ＨＤＲ制御情報生成部４０４は、特性データに基づいてＨＤＭＩにおけるＨＤＲ制御情報を生成し、生成したＨＤＲ制御情報をＨＤＭＩ出力部４０６に出力する。ここで、動的ＨＤＲメタデータについては、メタデータが有効となるビデオ信号と同期して、ＨＤＲ制御情報が出力できるように、ＨＤＭＩ出力部４０６におけるＨＤＲ制御情報の出力タイミングが決定される。つまり、ＨＤＭＩ出力部４０６は、メタデータが有効になるビデオ信号（映像信号）と同期してＨＤＲ制御情報を出力する。
The HDR control
ＤＲ変換部４０５は、変換補助データに基づいて、復号後の映像信号をＳＤＲ信号に変換したりダイナミックレンジを変換したりする。ここで、データ出力装置４００と接続される表示装置がＨＤＲ信号の入力に対応している場合にはＤＲ変換部４０５による変換は不要である。従って、データ出力装置４００は、接続先の表示装置がＨＤＲ信号の入力に対応しているかどうかをＨＤＭＩの初期化処理などにおいて確認することで、変換処理が必要であるかどうかを判定してもよい。変換処理が不要と判定された場合には、ビデオ復号部４０１で得られた第１映像信号は、ＤＲ変換部４０５を介さずにＨＤＭＩ出力部４０６に入力される。
The
つまり、ＨＤＭＩ出力部４０６は、データ出力装置４００に接続されている表示装置がＨＤＲ信号（第１映像信号）の輝度範囲の映像出力に対応している場合、第１映像信号及びＨＤＲ制御情報を表示装置へ出力する。また、ＨＤＭＩ出力部４０６は、データ出力装置４００に接続されている表示装置がＨＤＲ信号（第１映像信号）の輝度範囲の映像出力に対応していない場合、ＨＤＲをＳＤＲに変換した第２映像信号及びＨＤＲ制御情報を表示装置へ出力する。また、ＨＤＭＩ出力部４０６は、表示装置がＨＤＲ信号（第１映像信号）の輝度範囲の映像出力に対応していか否かを、伝送プロトコル（例えばＨＤＭＩ）の初期化処理において判定する。
That is, when the display device connected to the
ＨＤＭＩ出力部４０６は、ＤＲ変換部４０５又はビデオ復号部４０１から出力された映像信号、及びＨＤＲ制御情報をＨＤＭＩのプロトコルに従って出力する。
The
なお、データ出力装置４００が、放送又はＯＴＴのコンテンツを受信して出力する場合にも、同様の構成を用いることができる。また、データ出力装置４００と表示装置とが単一の機器に含まれる場合には、ＨＤＭＩ出力部４０６は必要ない。
The same configuration can be used when the
また、上記説明では、データ出力装置４００が管理情報等からメタデータを取得する外部メタ取得部４０２を備え、ビデオ復号部４０１が映像ストリームからメタデータを取得する機能を有しているが、データ出力装置４００は、いずれか一方のみを有してもよい。
Further, in the above description, the
また、上記説明では、データ出力装置４００がＨＤＭＩに従ったデータ（映像信号及びＨＤＲ制御情報）を出力する例を述べたが、データ出力装置４００は任意の伝送プロトコルに従ったデータを出力すればよい。
Further, in the above description, an example in which the
このように、データ出力装置４００は、映像ストリームを復号することで第１輝度範囲（ＨＤＲ）の第１映像信号を生成する復号部（ビデオ復号部４０１）と、第１映像信号の輝度範囲に関する第１メタデータを取得する取得部（ビデオ復号部４０１及び外部メタ取得部４０２の少なくとも一方）と、第１メタデータを解釈することで、第１映像信号の輝度範囲を示す特性データを取得する解釈部（ＨＤＲメタ解釈部４０３）と、特性データを、所定の伝送プロトコル（例えばＨＤＭＩ）に従ったＨＤＲ制御情報に変換する制御情報生成部（ＨＤＲ制御情報生成部４０４）と、ＨＤＲ制御情報を所定の伝送プロトコルで出力する出力部（ＨＤＭＩ出力部４０６）とを備える。
As described above, the
これによれば、データ出力装置４００は、メタデータに含まれる特性データに基づき、制御情報を生成できる。
According to this, the
また、解釈部（ＨＤＲメタ解釈部４０３）は、さらに、第１メタデータを解釈することで、第１映像信号の輝度範囲を変換するための変換補助データを取得し、データ出力装置４００は、さらに、変換補助データに基づいて、第１映像信号の輝度範囲を変換することで第１映像信号の輝度範囲より狭い輝度範囲の第２映像信号を生成する変換部（ＤＲ変換部４０５）を備え、出力部（ＨＤＭＩ出力部４０６）は、さらに、第１映像信号及び第２映像信号の少なくとも一方を所定の伝送プロトコルで出力する。
Further, the interpretation unit (HDR meta-interpretation unit 403) further interprets the first metadata to acquire conversion auxiliary data for converting the luminance range of the first video signal, and the
これによれば、データ出力装置４００は、メタデータに含まれる変換補助データを用いて第１映像信号の輝度範囲を変更できる。
According to this, the
また、復号部（ビデオ復号部４０１）は、さらに、映像ストリームから第１映像信号の輝度範囲に関する第２メタデータ（ＨＤＲメタデータ）を取得し、解釈部（ＨＤＲメタ解釈部４０３）は、第１メタデータ及び第２メタデータの少なくとも一方を解析することで特性データ及び変換補助データを取得する。 Further, the decoding unit (video decoding unit 401) further acquires the second metadata (HDR metadata) regarding the brightness range of the first video signal from the video stream, and the interpretation unit (HDR meta-interpretation unit 403) is the first. Characteristic data and conversion auxiliary data are acquired by analyzing at least one of the 1st metadata and the 2nd metadata.
また、図４に示すように、静的ＨＤＲメタデータは、必須メタデータと選択メタデータとを含み、動的ＨＤＲメタデータは、選択メタデータのみを含む。つまり、静的ＨＤＲメタデータは常に用いられ、動的ＨＤＲメタデータは選択的に用いられる。このように、外部メタ取得部４０２で取得された第１メタデータ又はビデオ復号部４０１で取得された第２メタデータは、映像信号の連続再生単位に含まれる複数の画像に対して共通に用いられ、特性データを含む静的ＨＤＲメタデータ（静的メタデータ）を含む。ＨＤＲ制御情報生成部４０４は、静的ＨＤＲメタデータに含まれる特性データを、所定の伝送プロトコルに従ったＨＤＲ制御情報に変換する。ＨＤＭＩ出力部４０６は、第１映像信号（ＨＤＲ信号）を出力する場合、静的ＨＤＲメタデータに基づくＨＤＲ制御情報を出力する。
Further, as shown in FIG. 4, the static HDR metadata includes the essential metadata and the selection metadata, and the dynamic HDR metadata includes only the selection metadata. That is, static HDR metadata is always used and dynamic HDR metadata is selectively used. In this way, the first metadata acquired by the external
また、外部メタ取得部４０２で取得された第１メタデータ又はビデオ復号部４０１で取得された第２メタデータは、さらに、映像信号の連続再生単位より細かい単位に対して共通に用いられ、特性データを含む動的ＨＤＲメタデータ（動的メタデータ）を含む。ＨＤＲ制御情報生成部４０４は、静的ＨＤＲメタデータに含まれる特性データ及び動的ＨＤＲメタデータに含まれる特定データを、所定の伝送プロトコルに従ったＨＤＲ制御情報に変換する。ＨＤＭＩ出力部４０６は、第１映像信号（ＨＤＲ信号）を出力する場合、静的ＨＤＲメタデータ及び動的ＨＤＲメタデータに基づくＨＤＲ制御情報を出力する。
Further, the first metadata acquired by the external
また、本開示に係るデータ生成方法は、データ生成装置が行うデータ生成方法であって、映像信号の輝度範囲に関するメタデータを生成する第１生成ステップと、映像信号とメタデータとを含む映像ストリームを生成する第２生成ステップとを含む。メタデータは、映像信号の輝度範囲を示す特性データと、映像信号の輝度範囲を変換するための変換補助データとを含む。 Further, the data generation method according to the present disclosure is a data generation method performed by a data generation device, which includes a first generation step of generating metadata regarding a brightness range of a video signal, and a video stream including the video signal and the metadata. Includes a second generation step to generate. The metadata includes characteristic data indicating the brightness range of the video signal and conversion auxiliary data for converting the brightness range of the video signal.
［９．ＨＤＲメタデータの格納例］
図１０は、ＨＤＲメタデータを格納するＳＥＩメッセージのデータ構造例を示す図である。図１０に示すように、ＨＤＲメタデータ専用のＳＥＩメッセージが定義されてもよい。つまり、メタデータは、メタデータ専用のメッセージに格納されてもよい。
[9. HDR metadata storage example]
FIG. 10 is a diagram showing an example of a data structure of an SEI message storing HDR metadata. As shown in FIG. 10, an SEI message dedicated to HDR metadata may be defined. That is, the metadata may be stored in a message dedicated to the metadata.
または、ＨＤＲメタデータは、ユーザーデータ格納用の汎用的なＳＥＩメッセージに格納され、当該メッセージのペイロード部分に当該メッセージにＨＤＲメタデータが格納されることを示す情報（後述するＨＤＲ拡張識別情報）が設けられてもよい。 Alternatively, the HDR metadata is stored in a general-purpose SEI message for storing user data, and the payload portion of the message contains information (HDR extended identification information described later) indicating that the HDR metadata is stored in the message. It may be provided.
ＨＤＲメタデータは、静的ＨＤＲメタデータと動的ＨＤＲメタデータとを含む。また、静的ＨＤＲメタデータが格納されているかどうかを示すフラグ情報と、動的ＨＤＲメタデータが格納されているかどうかを示すフラグ情報とが設けられてもよい。これにより、静的ＨＤＲメタデータのみを格納する方法、動的ＨＤＲメタデータのみを格納する方法、及び、静的ＨＤＲメタデータと動的ＨＤＲメタデータとの両方を格納する方法の３通りの格納方法を用いることができる。 HDR metadata includes static HDR metadata and dynamic HDR metadata. In addition, flag information indicating whether static HDR metadata is stored and flag information indicating whether dynamic HDR metadata is stored may be provided. As a result, there are three types of storage: a method of storing only static HDR metadata, a method of storing only dynamic HDR metadata, and a method of storing both static HDR metadata and dynamic HDR metadata. The method can be used.
さらに、それぞれのメタデータに対して、解釈が必須である基本データ（基本部）と、解釈がオプションである（解釈が任意である）拡張データ（拡張部）とが定義されてもよい。例えば、メタデータのタイプ（基本データ又は拡張データ）を示すタイプ情報とサイズがヘッダ情報に含まれ、ペイロードにメタデータが格納されるコンテナのフォーマットが定義される。つまり、メタデータは、ペイロードと、ペイロードのデータが基本データであるか拡張データであるかを示す情報と、ペイロードのデータサイズを示す情報とを含む。言い換えると、メタデータはメタデータの種別を示すタイプ情報を含む。例えば、タイプ値が０であるコンテナには基本データが格納される。また、拡張データに対してはタイプ値として１以上の値が割り当てられ、その値により拡張データの種別が示される。 Further, for each metadata, basic data (basic part) whose interpretation is indispensable and extended data (extended part) whose interpretation is optional (interpretation is arbitrary) may be defined. For example, the header information contains type information and size indicating the type of metadata (basic or extended data), and defines the format of the container in which the metadata is stored in the payload. That is, the metadata includes a payload, information indicating whether the payload data is basic data or extended data, and information indicating the data size of the payload. In other words, the metadata contains type information indicating the type of metadata. For example, basic data is stored in a container whose type value is 0. Further, a value of 1 or more is assigned as a type value to the extended data, and the type of the extended data is indicated by the value.
データ出力装置及び表示装置は、タイプ値を参照して、自身が解釈可能なコンテナのデータを取得する。つまり、データ出力装置（又は表示装置）は、タイプ情報を用いて、データ出力装置（又は表示装置）がメタデータを解釈可能であるかを判定し、データ出力装置（又は表示装置）が当該メタデータを解釈可能である場合、当該メタデータを解釈することで特性データ及び変換補助データを取得する。 The data output device and the display device refer to the type value to acquire the data of the container that can be interpreted by itself. That is, the data output device (or display device) uses the type information to determine whether the data output device (or display device) can interpret the metadata, and the data output device (or display device) determines whether the metadata can be interpreted. If the data can be interpreted, the characteristic data and conversion auxiliary data are acquired by interpreting the metadata.
また、ＨＤＲメタデータの最大サイズが予め設定され、基本データと拡張データとのサイズの総和が最大サイズ以下となるようにメタデータが生成されてもよい。つまり、メタデータのデータサイズの最大値が規定されており、本開示に係るデータ生成方法は、基本データ及び拡張データの合計のデータサイズを、最大値以下になるようにメタデータを生成する。 Further, the maximum size of HDR metadata may be set in advance, and the metadata may be generated so that the total size of the basic data and the extended data is equal to or less than the maximum size. That is, the maximum value of the data size of the metadata is defined, and the data generation method according to the present disclosure generates the metadata so that the total data size of the basic data and the extended data is equal to or less than the maximum value.
データ出力装置及び表示装置が、この最大サイズ分のメモリを備えることで、ＨＤＲメタデータを全てメモリ内に格納できることを保証できる。あるいは、静的ＨＤＲメタデータ、又は動的ＨＤＲメタデータに対して固定サイズ分のデータ領域を確保しておき、基本データを格納する領域以外は将来拡張用としておくなども可能である。 By providing the memory for this maximum size in the data output device and the display device, it can be guaranteed that all the HDR metadata can be stored in the memory. Alternatively, it is also possible to reserve a data area for a fixed size for the static HDR metadata or the dynamic HDR metadata, and to use the area other than the area for storing the basic data for future expansion.
このようなデータ構造は、コンテンツの管理情報におけるＨＤＲメタデータの格納に用いられてもよい。 Such a data structure may be used to store HDR metadata in content management information.
図１１は、ユーザーデータ格納用のＳＥＩメッセージにＨＤＲメタデータが格納される場合のデータ構造の一例を示す図である。メッセージがＨＤＲ拡張識別情報と拡張タイプＩＤとを含む点以外は、図１１のデータ構造と同様である。ＨＤＲ拡張識別情報は、当該メッセージにＨＤＲメタデータが含まれることを示す。拡張タイプＩＤは、ＨＤＲメタデータのバージョン等を示す。つまり、メタデータは、ＨＥＶＣのＳＥＩメッセージに格納され、当該ＳＥＩメッセージは、当該ＳＥＩメッセージにメタデータが含まれるか否かを示すＨＤＲ拡張識別情報を含む。 FIG. 11 is a diagram showing an example of a data structure when HDR metadata is stored in the SEI message for storing user data. It is similar to the data structure of FIG. 11 except that the message includes HDR extended identification information and extended type ID. The HDR extended identification information indicates that the message contains HDR metadata. The extended type ID indicates the version of HDR metadata and the like. That is, the metadata is stored in the HEVC SEI message, which contains HDR extended identification information indicating whether or not the SEI message contains metadata.
この場合、データ出力装置は、ＨＤＲ拡張識別情報を含むユーザーデータ格納用のＳＥＩメッセージを受信し、かつデータ出力装置に接続されている表示装置がＨＤＲ信号及びＨＤＲ制御情報の入力に対応している場合には、ＨＤＭＩなどの表示装置への出力Ｉ／Ｆのプロトコルに従って、受信したＳＥＩメッセージをそのままコピーして出力する。つまり、データ出力装置は、当該ＳＥＩメッセージにメタデータが含まれることを示すＨＤＲ拡張識別情報を含むＳＥＩメッセージが取得され、かつ、データ出力先の表示装置がＨＤＲ制御情報の入力に対応している場合には、当該ＳＥＩメッセージを所定の伝送プロトコル（例えばＨＤＭＩ）に従ってそのまま出力する。 In this case, the data output device receives the SEI message for storing user data including the HDR extended identification information, and the display device connected to the data output device supports the input of the HDR signal and the HDR control information. In this case, the received SEI message is copied and output as it is according to the output I / F protocol to the display device such as HDMI. That is, the data output device acquires the SEI message including the HDR extended identification information indicating that the SEI message includes metadata, and the display device of the data output destination supports the input of the HDR control information. In this case, the SEI message is output as it is according to a predetermined transmission protocol (for example, HDMI).
これにより、メタデータの内容によらずデータ出力装置は表示装置へＨＤＲメタデータを出力することが可能となる。このような構成により、将来新たなＤＲ変換処理が開発されて新たなＨＤＲメタデータが定義され、この新ＨＤＲメタデータに対応する表示装置が新ＨＤＲメタデータに対応しないデータ出力装置に接続された場合でも、データ出力装置から表示装置へ新ＨＤＲメタデータを出力できる。また、表示装置において新ＨＤＲメタデータに応じたＤＲ変換処理の実施が可能となる。 This allows the data output device to output HDR metadata to the display device regardless of the content of the metadata. With such a configuration, a new DR conversion process was developed in the future, new HDR metadata was defined, and a display device corresponding to this new HDR metadata was connected to a data output device not corresponding to the new HDR metadata. Even in this case, the new HDR metadata can be output from the data output device to the display device. In addition, the display device can perform DR conversion processing according to the new HDR metadata.
［１０．複数のＨＤＲメタデータの格納例］
図１２は、一つのユーザーデータ格納用のＳＥＩメッセージに複数のＨＤＲメタデータを格納する際のデータ構造の一例を示す図である。本ＳＥＩメッセージには、ダイナミックレンジ（輝度範囲）の変換に係る複数の変換モード（方式）に対する複数のＨＤＲメタデータが格納される。
[10. Storage example of multiple HDR metadata]
FIG. 12 is a diagram showing an example of a data structure when a plurality of HDR metadata is stored in one SEI message for storing user data. In this SEI message, a plurality of HDR metadata for a plurality of conversion modes (methods) related to the conversion of the dynamic range (luminance range) are stored.
図１２に示すデータ構造は、図１１に示すデータ構造に対して、ＨＤＲメタデータが提供される変換モードの数を示すフィールド（変換モード数）が追加されている。また、変換モード数の後に、各変換モードに対応する複数のＨＤＲメタデータが順に格納される。 In the data structure shown in FIG. 12, a field (number of conversion modes) indicating the number of conversion modes in which HDR metadata is provided is added to the data structure shown in FIG. Further, after the number of conversion modes, a plurality of HDR metadata corresponding to each conversion mode are stored in order.
つまり、本実施の形態に係るデータ生成方法は、データ生成装置が行うデータ生成方法であって、映像信号の輝度範囲を変換する１以上の変換モードに対応する１以上のメタデータ（ＨＤＲメタデータ）を生成する第１生成ステップと、映像信号と、１以上のメタデータと、１以上の変換モードの数を示す変換モード数とを含む映像ストリームを生成する第２生成ステップとを含む。 That is, the data generation method according to the present embodiment is a data generation method performed by the data generation device, and is one or more metadata (HDR metadata) corresponding to one or more conversion modes for converting the brightness range of the video signal. ) Is included, and a second generation step of generating a video stream including a video signal, one or more metadata, and a number of conversion modes indicating the number of one or more conversion modes is included.
［１１．データ出力装置及びＤＲ変換部の構成］
図１３は、本実施の形態に係るデータ出力装置５００の構成例を示すブロック図である。このデータ出力装置５００は、ビデオ復号部５０１と、外部メタ取得部５０２と、ＨＤＲメタ解釈部５０３と、ＨＤＲ制御情報生成部５０４と、ＤＲ変換部５０５と、ＨＤＭＩ出力部５０６とを備える。なお、ＨＤＲメタ解釈部５０３及びＤＲ変換部５０５の動作が、図９に示すデータ出力装置４００と異なる。つまり、ビデオ復号部５０１、外部メタ取得部５０２、ＨＤＲ制御情報生成部５０４及びＨＤＭＩ出力部５０６の動作は、ビデオ復号部４０１、外部メタ取得部４０２及びＨＤＲ制御情報生成部４０４及びＨＤＭＩ出力部４０６の動作と同様である。
[11. Configuration of data output device and DR conversion unit]
FIG. 13 is a block diagram showing a configuration example of the
また、データ出力装置５００は、表示装置５１０（表示部）と接続されており、生成した映像信号及びＨＤＲ制御情報を、ＨＤＭＩ等の所定の伝送プロトコルを介して表示装置５１０に出力する。
Further, the
ＤＲ変換部５０５及び表示装置５１０は、それぞれ、複数のダイナミックレンジの変換モード（変換方式）に対応している。ここで、「対応している」とは、その変換モードの処理を行う機能を有することを意味する。まず、ＨＤＲメタ解釈部５０３は、外部メタ取得部５０２及びビデオ復号部５０１から、静的ＨＤＲメタデータ及び動的ＨＤＲメタデータを取得する。コンテンツの管理情報又は符号化映像ストリームには、複数の変換モードに対する複数のＨＤＲメタデータが格納される。ＨＤＲメタ解釈部５０３は、複数のＨＤＲメタデータが対応する複数の変換モードを、使用可能な複数の変換モードと判定する。
The
また、ＨＤＲメタ解釈部５０３は、表示装置５１０との間で通信すること、又は、別途ネットワークを経由することにより、表示装置５１０が対応しているＨＤＲ信号の変換モードの情報を取得する。そして、ＨＤＲメタ解釈部５０３は、（１）ＨＤＲメタデータが対応する変換モードと、（２）ＤＲ変換部５０５が対応している変換モードと、（３）表示装置５１０が対応している変換モードとに基づいて、（１）ダイナミックレンジの変換処理をデータ出力装置５００及び表示装置５１０とのどちらで行うかと、（２）使用する変換モードとを決定する。
Further, the HDR meta-
変換処理をデータ出力装置５００で行うと決定された場合、ＤＲ変換部５０５は、ＨＤＲメタ解釈部５０３から指示された変換モードに従って、ＨＤＲ信号をＳＤＲ信号に変換する。変換処理を表示装置５１０で行うと決定された場合には、データ出力装置５００は、映像信号（ＨＤＲ信号）を表示装置５１０に送信するとともに、変換に必要なＨＤＲメタデータをＨＤＭＩの制御信号（ＨＤＲ制御情報）として表示装置５１０に送信する。
When it is determined that the conversion process is performed by the
なお、上記説明では、ＤＲ変換部５０５は、複数の変換モードに対応しているが、１以上の変換モードに対応していればよい。この場合、データ出力装置５００は、１以上の変換モードに対応する１以上のＨＤＲメタデータを取得すればよい。
In the above description, the
このように、データ出力装置５００は、映像ストリームを復号することで第１映像信号を生成する復号部（ビデオ復号部５０１）と、映像信号の輝度範囲を変換する１以上の第１変換モードに対応する１以上のメタデータを取得する取得部（ビデオ復号部５０１及び外部メタ取得部５０２の少なくとも一方）と、１以上のメタデータの一つを解釈することで、第１映像信号の輝度範囲を示す特性データと、第１映像信号の輝度範囲を変換するための変換補助データと、を取得する解釈部（ＨＤＲメタ解釈部５０３）と、特性データを、所定の伝送プロトコル（例えばＨＤＭＩ）に従ったＨＤＲ制御情報に変換する制御情報生成部（ＨＤＲ制御情報生成部５０４）と、映像信号の輝度範囲を変換する１以上の第２変換モードに対応しており、変換補助データに基づいて、１以上の第２変換モードのいずれかにより、第１映像信号の輝度範囲の変換処理を行うことで第１映像信号の輝度範囲より狭い輝度範囲の第２映像信号を生成する変換部（ＤＲ変換部５０５）と、第２映像信号及びＨＤＲ制御情報を所定の伝送プロトコルで表示装置５１０へ出力する出力部（ＨＤＭＩ出力部５０６）とを備える。解釈部（ＨＤＲメタ解釈部５０３）は、さらに、１以上の第１変換モードと、１以上の第２変換モードと、表示装置５１０が対応している、映像信号の輝度範囲を変換する第３変換モードとに基づいて、データ出力装置５００及び表示装置５１０のどちらで上記変換処理を行うかを決定する。
In this way, the
これによれば、データ出力装置５００は、１以上のメタデータに対応する第１変換モードと、データ出力装置５００が対応している第２変換モードと、表示装置５１０が対応している第３変換モードとに基づき、データ出力装置５００及び表示装置５１０のどちらで変換処理を行うかを決定できる。これにより、データ出力装置５００は、適切に変換処理を行う装置を決定できる。
According to this, the
なお、データ出力装置５００が対応している１以上の第２変換モードは、１以上のメタデータに対応する複数の第１変換モードの少なくとも一部を含んでもよいし、１以上の第１変換モードのいずれも含まなくてもよい。同様に、表示装置５１０が対応している第３変換モードは、１以上の第１変換モードの少なくとも一部を含んでもよいし、１以上の第１変換モードのいずれも含まなくてもよい。また、第３変換モードは、１以上の第２変換モードの少なくとも一部を含んでもよいし、１以上の第２変換モードのいずれも含まなくてもよい。
The one or more second conversion modes supported by the
以下、ＤＲ変換部５０５の構成例を説明する。図１４は、ＤＲ変換部５０５の構成例を示すブロック図である。このＤＲ変換部５０５は、モード判定部５１１と、Ｎ個のモード処理部５１２と、変換結果出力部５１３とを備える。Ｎ個のモード処理部５１２は、各々がＮ個の変換モード（処理方式）の各々に対応し、対応する変換モードの処理を行う。モード判定部５１１は、ＨＤＲメタ解釈部５０３から指示された変換モードを取得し、変換処理を行うモード処理部５１２を決定する。つまり、モード判定部５１１は、ＨＤＲメタ解釈部５０３から指示された変換モードに対応するモード処理部５１２を選択する。決定されたモード処理部５１２は、ＨＤＲ信号（映像信号）に変換処理を行うことでＳＤＲ信号（変換後の映像信号）を生成する。変換結果出力部５１３は、変換後のＳＤＲ信号を出力する。
Hereinafter, a configuration example of the
図１５は、ＤＲ変換部５０５の別の例であるＤＲ変換部５０５Ａの構成例を示すブロック図である。このＤＲ変換部５０５は、モード判定部５２１と、基本処理部５２２と、Ｎ個の拡張モード処理部５２３と、変換結果出力部５２４とを備える。
FIG. 15 is a block diagram showing a configuration example of the
基本処理部５２２は、Ｎ個の変換モードに共通の処理であるデフォルトの変換処理を行う。Ｎ個の拡張モード処理部５２３は、基本処理部５２２の処理に加え、動的ＨＤＲメタデータを用いて変換処理のパラメータを動的に制御するなどの拡張処理を行う。また、Ｎ個の拡張モード処理部５２３は、各々がＮ個の変換モードの各々に対応し、対応する変換モードの拡張処理を行う。例えば、基本処理部５２２は静的ＨＤＲメタデータのみを用いて動作し、拡張モード処理部５２３は、静的ＨＤＲメタデータに加えて、動的ＨＤＲメタデータを用いて動作する。
The
［１２．ＨＤＲメタ解釈部の動作例］
図１６及び図１７は、ＨＤＲメタデータが提供される変換モードと、データ出力装置５００における各モードのサポート有無、及び、表示装置５１０における各モードのサポート有無に基づく、ＨＤＲメタ解釈部５０３の指示内容の例を示す図である。ＨＤＲメタ解釈部５０３は、基本的には、選択可能な組合せの中で、マスター画像に対する再現性が最も高くなる動作を選択する。ここでマスター画像とは、輝度範囲を変更することなく出力した画像である。
[12. HDR meta-interpretation operation example]
16 and 17 are instructions of the
例えば、図１６に示す例では、データ出力装置５００は、モード１及びモード２に対応しており、表示装置５１０は、いずれの変換モードにも対応していない。なお、モード１とモード２とでは、モード２のほうがマスター画像に対する再現性が高い。また、ＨＤＲメタ解釈部５０３は、各モードのマスター画像に対する再現性を予め把握している。この場合、ＨＤＲメタ解釈部５０３は、データ出力装置５００で変換処理を行うと決定するとともに、モード１及びモード２のうち再現性が高いモード２を選択する。
For example, in the example shown in FIG. 16, the
また、図１７に示す例では、データ出力装置５００は、モード１に対応しており、表示装置５１０は、モード１及びモード２に対応している。この場合、ＨＤＲメタ解釈部５０３は、表示装置５１０で変換処理を行うと決定するとともに、モード１及びモード２のうち再現性が高いモード２を選択する。また、データ出力装置５００は、モード２の変換処理に対応するＨＤＲメタデータをＨＤＭＩの制御情報（ＨＤＲ制御情報）として表示装置５１０に出力する。表示装置５１０は、当該制御情報を用いてモード２の変換処理を行う。
Further, in the example shown in FIG. 17, the
このように、ＨＤＲメタ解釈部５０３は、さらに、１以上のメタデータにそれぞれ対応する１以上の第１変換モードに含まれ、かつデータ出力装置５００が対応する１以上の第２変換モードに含まれる変換モードをデータ出力装置５００で行う変換処理の変換モードに決定する。具体的には、ＨＤＲメタ解釈部５０３は、さらに、１以上のメタデータにそれぞれ対応する１以上の第１変換モードに含まれ、かつデータ出力装置５００が対応する１以上の第２変換モード及び表示装置５１０が対応する第３変換モードの少なくとも一方に含まれる変換モードをデータ出力装置５００又は表示装置５１０で行う変換処理の変換モードに決定する。
As described above, the HDR meta-
より具体的には、ＨＤＲメタ解釈部５０３は、複数の第１変換モードに含まれ、かつ複数の第２変換モード及び第３変換モードの少なくとも一方に含まれる複数の変換モードのうち、マスター画像に対する再現性が最も高い変換モードをデータ出力装置５００又は表示装置５１０で行う変換処理の変換モードに決定する。
More specifically, the HDR meta-
言い換えると、データ出力装置５００は、データ出力装置５００及び表示装置５１０が対応している変換モードのうち最も再現性が高いモードを選択し、データ出力装置５００及び表示装置５１０のうち選択したモードに対応している装置で変換処理を行うと決定する。
In other words, the
より具体的には、図１６に示すように、ＨＤＲメタ解釈部５０３は、決定された変換処理の変換モードが、第２変換モードに含まれ、かつ、第３変換モードに含まれない場合、データ出力装置５００で変換処理を行うと決定する。また、図１７に示すように、ＨＤＲメタ解釈部５０３は、決定された変換処理の変換モードが、第３変換モードに含まれ、かつ、第２変換モードに含まれない場合、表示装置５１０で変換処理を行うと決定する。
More specifically, as shown in FIG. 16, the HDR meta-
これにより、データ出力装置５００は、複数のメタデータに対応する第１変換モードと、データ出力装置が対応している第２変換モードと、表示装置が対応している第３変換モードとに基づき、使用する変換モードを決定できる。また、データ出力装置５００は、マスター画像に対する再現性が最も高い変換モードを選択できるので、表示される映像の画質を向上できる。
As a result, the
図１８は、データ出力装置５００が表示装置５１０のパラメータを取得可能であるかどうかに応じて変換処理を決定する例を示す図である。表示装置５１０のパラメータとは、表示装置５１０のピーク輝度（表示装置５１０が表示可能な輝度範囲の最大値）、又は表示装置５１０が表示可能な表示モードなどである。具体的には、このパラメータは、表示モードとして、現在視聴中の表示モードを示す。例えば、表示モードとは、ノーマルモード、ダイナミックモード及びシネマモード等である。
FIG. 18 is a diagram showing an example in which the
図１８に示す例では、データ出力装置５００は、モード１、モード２及びモード３に対応しており、表示装置５１０は、モード１に対応している。また、データ出力装置５００は、モード１及びモード２のための表示装置５１０のパラメータを取得可能であり、モード３のための表示装置５１０のパラメータを取得不可である。また、モード１よりモード２のほうが再現性が高く、モード２よりモード３のほうが再現性が高い。
In the example shown in FIG. 18, the
この場合、データ出力装置５００及び表示装置５１０が対応しているモードのうち最も再現性が高いモードはモード３であるが、データ出力装置５００においてモード３のための表示装置５１０のパラメータを取得できないため、モード３は除外される。そして、データ出力装置５００は、モード３の次に再現性が高く、かつパラメータを取得できるモード２を使用する変換モードとして選択する。そして、データ出力装置５００は、モード２に必要なパラメータを表示装置５１０から取得し、取得したパラメータを用いてモード２の変換処理を行う。
In this case, the mode with the highest reproducibility among the modes supported by the
このように、ＨＤＲメタ解釈部５０３は、さらに、複数のメタデータに対応する複数の第１変換モードの各々のためのパラメータを表示装置５１０から取得できるか否かに応じて、データ出力装置５００又は表示装置５１０で行う変換処理の変換モードを決定する。具体的には、ＨＤＲメタ解釈部５０３は、複数の第１変換モードに含まれ、かつ複数の第２変換モード及び第３変換モードの少なくとも一方に含まれ、かつ、パラメータを表示装置５１０から取得できる変換モードをデータ出力装置５００又は表示装置５１０で行う変換処理の変換モードに決定する。
As described above, the HDR meta-
つまり、データ出力装置５００は、データ出力装置５００及び表示装置５１０が対応している変換モードのうち最も再現性が高いモードを選択し、選択したモードにデータ出力装置５００のみが対応している場合、当該モードのための表示装置５１０のパラメータを取得できるか否かを判定する。パラメータを取得できる場合は、データ出力装置５００は、当該モードを選択する。一方、パラメータを取得できない場合は、データ出力装置５００は、他のモード（次に再現性が高いモード）を選択する。
That is, when the
これにより、データ出力装置５００は、表示装置５１０のパラメータを取得できるか否かに応じて、使用する変換モードを決定するので、より適切な変換モードを選択できる。
As a result, the
［１３．データ出力装置の構成例２］
以下、データ出力装置の別の構成例について説明する。図１９は、データ出力装置５００Ａの構成を示すブロック図である。このデータ出力装置５００Ａは、図１３に示すデータ出力装置５００に対して、さらに、ＤＣ部５０７を備える。ＤＣ部５０７は、ビデオ復号部５０１で得られた映像信号の解像度をダウンコンバートする。例えば、ＤＣ部５０７は、映像信号が４Ｋの場合、当該４Ｋの映像信号を２Ｋの映像信号にダウンコンバートする。
[13. Data output device configuration example 2]
Hereinafter, another configuration example of the data output device will be described. FIG. 19 is a block diagram showing the configuration of the
この構成により、データ出力装置５００Ａは、表示装置５１０が対応する解像度及びダイナミックレンジに応じて、（１）４ＫのＨＤＲ信号を２ＫのＨＤＲ信号に変換して出力する、（２）４ＫのＨＤＲ信号を２ＫのＨＤＲ信号に変換後、ＤＲ変換部５０５においてダイナミックレンジを変更してから出力する、及び（３）４ＫのＳＤＲ信号を２ＫのＳＤＲ信号に変換して出力する、などの動作を選択的に行うことができる。つまり、データ出力装置５００Ａは、表示装置５１０の解像度及びＨＤＲ信号のサポートの有無などに応じて動作を切替えることができる。
With this configuration, the
図２０は、コンテンツにおけるビデオ信号の特性（解像度及びダイナミックレンジ（輝度範囲））及び表示装置５１０の特性と、データ出力装置５００Ａの出力信号との組合せ例を示す図である。データ出力装置５００Ａは、表示装置５１０の解像度とＨＤＲ信号のサポートの有無と整合するように出力信号の形式を選択し、選択した形式の出力信号を生成するようにＤＣ部５０７及びＤＲ変換部５０５を制御する。
FIG. 20 is a diagram showing an example of a combination of the characteristics (resolution and dynamic range (luminance range)) of the video signal in the content, the characteristics of the
例えば、コンテンツにおける映像信号が解像度４ＫのＨＤＲ信号であり、表示装置５１０が解像度４ＫのＨＤＲ信号の表示をサポートしておらず、かつ、解像度２ＫのＨＤＲ信号の表示をサポートしている場合、データ出力装置５００Ａは、コンテンツにおける映像信号を解像度２ＫのＨＤＲ信号に変換して出力する（図２０の２行目に記載した組み合わせ例を参照）。このとき、映像信号の解像度の変換はＤＣ部５０７において行われる。
For example, when the video signal in the content is an HDR signal having a resolution of 4K, the
また、コンテンツにおける映像信号が解像度４ＫのＨＤＲ信号であり、表示装置５１０が解像度４ＫのＨＤＲ信号および解像度２ＫのＨＤＲ信号の表示をサポートしておらず、かつ、２ＫのＳＤＲ信号の表示をサポートしている場合、データ出力装置５００Ａは、コンテンツにおける映像信号を解像度２ＫのＳＤＲ信号に変換して出力する（図２０の３行目に記載した組み合わせ例を参照）。このとき、映像信号の解像度の変換はＤＣ部５０７において行われ、輝度範囲の変換はＤＲ変換部５０５において行われる。
Further, the video signal in the content is an HDR signal having a resolution of 4K, the
これにより、表示装置５１０において、コンテンツのビデオ信号をより忠実に再現できる。なお、データ出力装置５００Ａは、解像度の変換、又は、図１３において説明したようなダイナミックレンジの変換を表示装置５１０において行うように動作してもよい。
As a result, the video signal of the content can be reproduced more faithfully on the
このように、データ出力装置５００Ａは、ビデオ復号部５０１で得られた第１映像信号の解像度を下げることで第３映像信号を生成するダウンコンバート部（ＤＣ部５０７）を備える。変換部（ＤＲ変換部５０５）は、さらに、変換補助データに基づいて、複数の第２変換モードのいずれかにより、第３映像信号の輝度範囲の変換処理を行うことで第３映像信号の輝度範囲より狭い輝度範囲の第４映像信号を生成する。出力部（ＨＤＭＩ出力部５０６）は、さらに、第３映像信号又は第４映像信号を表示装置５１０へ出力する。
As described above, the
これにより、データ出力装置５００Ａは、例えば、表示装置５１０等に適した解像度に、映像信号の解像度を変更できる。
As a result, the
具体的には、表示装置５１０が、第１映像信号の解像度の映像の表示に対応していない場合、（１）ダウンコンバート部（ＤＣ部５０７）は、第３映像信号を生成し、（２）出力部（ＨＤＭＩ出力部５０６）は、第３映像信号を表示装置５１０へ出力する。例えば、図２０に示すように、ビデオ信号の解像度が４Ｋであり、表示装置５１０の解像度が２Ｋである場合、２Ｋの出力信号が出力される。
Specifically, when the
また、表示装置５１０が、第１映像信号の輝度範囲（ＨＤＲ）の映像の表示に対応していない場合、（１）変換部（ＤＲ変換部５０５）は、第１映像信号の輝度範囲（ＨＤＲ）より狭い輝度範囲（ＳＤＲ）の第２映像信号を生成し、（２）出力部（ＨＤＭＩ出力部５０６）は、第２映像信号及びＨＤＲ制御情報を表示装置５１０へ出力する。例えば、図２０に示すように、ビデオ信号のダイナミックレンジ（輝度範囲）がＨＤＲであり、表示装置５１０がＨＤＲをサポートしていない場合（ＳＤＲの場合）、ＨＤＲの映像信号がＳＤＲの映像信号に変換され、ＳＤＲの映像信号（出力信号）が出力される。
Further, when the
また、表示装置５１０が、第１映像信号の解像度の映像の表示に対応しておらず、かつ、第１映像信号の輝度範囲（ＨＤＲ）の映像の表示に対応していない場合、（１）ダウンコンバート部（ＤＣ部５０７）は、第３映像信号を生成し、（２）変換部（ＤＲ変換部５０５）は、第３映像信号の輝度範囲（ＨＤＲ）より狭い輝度範囲（ＳＤＲ）の第４映像信号を生成し、（３）出力部（ＨＤＭＩ出力部５０６）は、第４映像信号を表示装置５１０へ出力する。例えば、図２０に示すように、ビデオ信号の解像度が４Ｋであり、ビデオ信号のダイナミックレンジ（輝度範囲）がＨＤＲであり、表示装置５１０の解像度が２Ｋであり、表示装置５１０がＨＤＲをサポートしていない場合（ＳＤＲの場合）、２ＫかつＳＤＲの出力信号が出力される。
Further, when the
［１４．ＨＤＲ信号及び４Ｋ信号を再生する動作モデル］
図２１は、４ＫのＨＤＲ信号、２ＫのＨＤＲ信号、及び４ＫのＳＤＲ信号を、次世代のＢｌｕ−ｒａｙ再生装置において再生し、再生した信号を、ＨＤＲ対応の４ＫＴＶ、ＨＤＲ非対応の４ＫＴＶ、及びＳＤＲ対応の２ＫＴＶのいずれかに対して出力する際の動作モデル例を示す図である。
[14. Operation model for reproducing HDR signals and 4K signals]
In FIG. 21, a 4K HDR signal, a 2K HDR signal, and a 4K SDR signal are reproduced by a next-generation Blu-ray playback device, and the reproduced signals are displayed as an HDR-compatible 4KTV, an HDR-non-compatible 4KTV, and It is a figure which shows the operation model example at the time of output to any of 2KTVs corresponding to SDR.
Ｂｌｕ−ｒａｙ再生装置は、コンテンツ管理情報に格納される静的ＨＤＲメタデータと、ビデオの符号化ストリームに格納される動的ＨＤＲメタデータとを取得する。Ｂｌｕ−ｒａｙ再生装置は、これらのＨＤＲメタデータを用いて、ＨＤＭＩにより接続された出力先のＴＶの特性に応じて、ビデオのＨＤＲ信号をＳＤＲ信号に変換して出力する、又は、ＨＤＲメタデータをＨＤＭＩの制御信号として出力する。 The Blu-ray playback device acquires static HDR metadata stored in the content management information and dynamic HDR metadata stored in the video encoded stream. The Blu-ray playback device uses these HDR metadata to convert the HDR signal of the video into an SDR signal and output it according to the characteristics of the output destination TV connected by HDMI, or the HDR metadata. Is output as an HDMI control signal.
ＨＤＲ信号からＳＤＲ信号への変換処理、及びＨＤＲ信号から表示装置が適合する輝度範囲の映像信号への変換処理の各々は、複数の方式から選択して実装できるものとする。実装した変換処理に対応するＨＤＲメタデータをコンテンツ制作時にコンテンツ管理情報又はビデオの符号化ストリームに格納することで、変換処理の効果を高めることができる。コンテンツ管理情報又は符号化ストリームには、変換方式毎に複数のＨＤＲメタデータを格納することが可能である。 Each of the conversion process from the HDR signal to the SDR signal and the conversion process from the HDR signal to the video signal in the luminance range suitable for the display device can be selected and implemented from a plurality of methods. By storing the HDR metadata corresponding to the implemented conversion process in the content management information or the video coded stream at the time of content production, the effect of the conversion process can be enhanced. A plurality of HDR metadata can be stored in the content management information or the coded stream for each conversion method.
なお、Ｂｌｕ−ｒａｙ再生装置は、図中のオプション変換モジュールＢ（ｏｐｔｉｏｎ ｃｏｎｖｅｒｓｉｏｎ ｍｏｄｕｌｅ Ｂ）又はオプション変換モジュールＤ（ｏｐｔｉｏｎ ｃｏｎｖｅｒｓｉｏｎ ｍｏｄｕｌｅ Ｄ）のように、複数の変換処理部を備えてもよいし、機器のコストと性能のバランスに鑑みて一つの変換処理部のみを備えてもよいし、変換処理部を備えなくてもよい。同様に、ＨＤＲ対応のＴＶは、複数の変換処理部を備えてもよいし、一つの変換処理部のみを備えてもよいし、変換処理部を備えなくてもよい。 The Blu-ray playback device may include a plurality of conversion processing units, such as an option conversion module B (option conversion module B) or an option conversion module D (option conversion module D) in the drawing, or an apparatus. In consideration of the balance between the cost and the performance of the above, only one conversion processing unit may be provided, or the conversion processing unit may not be provided. Similarly, an HDR-compatible TV may include a plurality of conversion processing units, may include only one conversion processing unit, or may not include a conversion processing unit.
また、図１１又は図１２に示すユーザーデータ格納用のＳＥＩメッセージなどのように、予めフォーマット又は入力時の動作を定めた所定のコンテナにＨＤＲメタデータが格納される。これにより、将来新たな変換処理が開発されて新たなＨＤＲメタデータが定義され、この新ＨＤＲメタデータに対応する表示装置が新ＨＤＲメタデータに対応しないＢｌｕ−ｒａｙ再生装置に接続された場合でも、Ｂｌｕ−ｒａｙ再生装置から表示装置へ新ＨＤＲメタデータを出力できる。また、表示装置において新ＨＤＲメタデータに応じた変換処理の実施が可能となる。これにより新技術が開発された場合に、新ＨＤＲメタデータへＩＤをアサインするなどの簡単な手続きで新技術への対応が可能となる。よって、ＯＴＴなど技術進化の早いアプリケーションに対するＢｌｕ−ｒａｙなどのパッケージメディア規格の競争力を高めることができる。なお、新ＨＤＲメタデータに対応したＢｌｕ−ｒａｙ再生装置は、映像データに対して、上記の新たな変換処理を当該再生装置内で施し、表示装置へ処理済の映像データを出力してもよい。 In addition, HDR metadata is stored in a predetermined container whose format or operation at the time of input is predetermined, such as the SEI message for storing user data shown in FIG. 11 or FIG. As a result, even if a new conversion process is developed in the future and new HDR metadata is defined, and a display device corresponding to this new HDR metadata is connected to a Blu-ray playback device that does not support the new HDR metadata. , New HDR metadata can be output from the Blu-ray playback device to the display device. In addition, the display device can perform conversion processing according to the new HDR metadata. As a result, when a new technology is developed, it becomes possible to respond to the new technology by a simple procedure such as assigning an ID to the new HDR metadata. Therefore, it is possible to enhance the competitiveness of package media standards such as Blu-ray for applications such as OTT whose technology is rapidly evolving. The Blu-ray playback device corresponding to the new HDR metadata may perform the above-mentioned new conversion processing on the video data in the playback device and output the processed video data to the display device. ..
また、Ｂｌｕ−ｒａｙ再生装置、及びＴＶのどちらで変換処理が行われるかは、図１６〜図１８に示した方法などに基づいて決定される。なお、再生装置は、ＴＶの解像度に応じて、４Ｋの信号を２Ｋの信号にダウンコンバートして出力してもよい。 Further, which of the Blu-ray playback device and the TV performs the conversion process is determined based on the methods shown in FIGS. 16 to 18. The playback device may down-convert a 4K signal into a 2K signal and output it according to the resolution of the TV.
［１５．ユーザーガイダンス表示方法１］
図２２は、ＨＤＲからＳＤＲへの変換処理を実行するＢｌｕ−ｒａｙ機器でのユーザーガイダンス表示方法を示す図である。
[15. User guidance display method 1]
FIG. 22 is a diagram showing a user guidance display method on a Blu-ray device that executes a conversion process from HDR to SDR.
ＨＤＲからＳＤＲへの変換処理のアルゴリズムが確立されていないため、正確なＨＤＲからＳＤＲへの変換は現状困難である。また、複数のＨＤＲからＳＤＲへの変換処理アルゴリズムを実装することも可能である。 Since the algorithm for the conversion process from HDR to SDR has not been established, accurate conversion from HDR to SDR is currently difficult. It is also possible to implement a plurality of HDR to SDR conversion processing algorithms.
このため、ユーザがＨＤＲ対応ディスクを、ＨＤＲ非対応ＴＶに接続されたＨＤＲ対応Ｂｌｕ−ｒａｙ機器に挿入した場合には、適切なユーザーガイドを行う必要がある。 Therefore, when the user inserts the HDR compatible disc into the HDR compatible Blu-ray device connected to the HDR non-compatible TV, it is necessary to perform an appropriate user guide.
ＨＤＲ非対応ＴＶに接続されたＨＤＲ対応Ｂｌｕ−ｒａｙ機器が、ＨＤＲからＳＤＲへの変換処理の開始を検知した場合は、例えば「ディスクはＨＤＲ対応ディスクです。お使いのＴＶはＨＤＲ非対応ＴＶのため、ＨＤＲ映像ではなく、Ｂｌｕ−ｒａｙ機器がＨＤＲからＳＤＲへの変換処理を行ったＳＤＲ映像を再生します。」等のガイドメッセージを表示する。 When an HDR-compatible Blu-ray device connected to an HDR-compatible TV detects the start of HDR-to-SDR conversion processing, for example, "The disc is an HDR-compatible disc. Your TV is an HDR-compatible TV. Therefore, instead of the HDR video, the Blu-ray device will play the SDR video that has been converted from HDR to SDR. "
このように、データ出力装置（Ｂｌｕ−ｒａｙ機器）は、表示装置が第１映像信号（ＨＤＲ信号）の輝度範囲の映像出力に対応していない場合、第１輝度範囲から第２輝度範囲に変換した第２映像信号（ＳＤＲ信号）及びＨＤＲ制御情報を表示装置へ出力するとともに、第１輝度範囲から第２輝度範囲に変換された第２映像信号が表示される旨を表示装置に表示させる。 In this way, the data output device (Blu-ray device) converts from the first luminance range to the second luminance range when the display device does not correspond to the video output in the luminance range of the first video signal (HDR signal). The second video signal (SDR signal) and HDR control information are output to the display device, and the display device is displayed to the effect that the second video signal converted from the first luminance range to the second luminance range is displayed.
［１６．ユーザーガイダンス表示方法２］
図２３は、ディスク内に格納されたＨＤＲからＳＤＲへの変換処理実行時のユーザーガイダンスの表示方法を示す図である。
[16. User guidance display method 2]
FIG. 23 is a diagram showing a display method of user guidance at the time of executing the conversion process from HDR to SDR stored in the disk.
ＨＤＲからＳＤＲへの変換処理が行われる場合にＢｌｕ−ｒａｙ機器が表示すべきメッセージ（メニュー）がＨＤＲディスク、あるいは、Ｂｌｕ−ｒａｙ機器内の不揮発メモリなどに格納される。これにより、Ｂｌｕ−ｒａｙ機器は、ＨＤＲからＳＤＲへの変換処理実行時に、メッセージを表示させることができる。この場合、例えば「ディスクはＨＤＲ対応ディスクです。お使いのＴＶはＨＤＲ非対応ＴＶのため、ＨＤＲ映像ではなく、Ｂｌｕ−ｒａｙ機器がＨＤＲからＳＤＲへの変換処理を行ったＳＤＲ映像を再生します。」と表示される。 The message (menu) to be displayed by the Blu-ray device when the conversion process from HDR to SDR is performed is stored in the HDR disk, the non-volatile memory in the Blu-ray device, or the like. As a result, the Blu-ray device can display a message when the conversion process from HDR to SDR is executed. In this case, for example, "The disc is an HDR compatible disc. Since your TV is an HDR non-compatible TV, the Blu-ray device will play the SDR video that has been converted from HDR to SDR, not the HDR video. . "Is displayed.
［１７．ユーザーガイダンス表示方法３］
図２４は、ディスク内に格納されたＨＤＲからＳＤＲへの変換処理実行時のユーザーガイダンスメニューの表示方法を示す図である。
[17. User guidance display method 3]
FIG. 24 is a diagram showing a display method of the user guidance menu at the time of executing the conversion process from HDR to SDR stored in the disk.
Ｂｌｕ−ｒａｙ機器は、Ｂｌｕ−ｒａｙのメニューを使うことで、「ディスクはＨＤＲ対応ディスクです。お使いのＴＶはＨＤＲ非対応ＴＶのため、ＨＤＲ映像ではなく、Ｂｌｕ−ｒａｙ機器がＨＤＲからＳＤＲへの変換処理を行ったＳＤＲ映像を再生しますが、再生して良いですか？」等のメッセージを表示することができる。Ｂｌｕ−ｒａｙ機器は、ユーザが「再生します」ボタンを選択した場合、変換画像の表示を開始する。また、Ｂｌｕ−ｒａｙ機器は、ユーザが「再生しません」を選択した場合は、再生を中止し、ユーザにＨＤＲ非対応Ｂｌｕ−ｒａｙディスクの挿入を促すメッセージを表示する。 For Blu-ray devices, by using the Blu-ray menu, "The disc is an HDR compatible disc. Since your TV is a non-HDR compatible TV, the Blu-ray device will change from HDR to SDR instead of HDR video. You can display a message such as "I will play the SDR video that has undergone the conversion process. Is it okay to play it?" The Blu-ray device starts displaying the converted image when the user selects the "Play" button. If the user selects "Do not play", the Blu-ray device stops playback and displays a message prompting the user to insert a Blu-ray disc that does not support HDR.
このように、データ出力装置（Ｂｌｕ−ｒａｙ機器）は、表示装置が第１映像信号（ＨＤＲ信号）の輝度範囲の映像出力に対応していない場合、第１輝度範囲から第２輝度範囲に変換された第２映像信号（ＳＤＲ信号）を表示させるかどうかを、ユーザが選択するためのメッセージを表示装置に表示させる。 In this way, the data output device (Blu-ray device) converts from the first luminance range to the second luminance range when the display device does not correspond to the video output in the luminance range of the first video signal (HDR signal). A message for the user to select whether to display the second video signal (SDR signal) is displayed on the display device.
［１８．ユーザーガイダンス表示方法４］
図２５は、ディスク内に格納されたＨＤＲからＳＤＲへの変換処理実行時の処理方法を選択可能なユーザーガイダンスメニューの表示方法を示す図である。
[18. User guidance display method 4]
FIG. 25 is a diagram showing a display method of a user guidance menu in which a processing method at the time of executing the conversion process from HDR to SDR stored in the disk can be selected.
Ｂｌｕ−ｒａｙ機器は、Ｂｌｕ−ｒａｙにＨＤＲからＳＤＲへの変換処理用のメタデータが格納されている場合は、そのことを表示する。Ｂｌｕ−ｒａｙ機器は、ユーザが指定の変換方式を選択した場合、より綺麗な変換が可能なことを促すメッセージを表示する。つまり、ディスク内のＪａｖａ（登録商標）コマンド等により、Ｂｌｕ−ｒａｙ機器に、どのようなＨＤＲからＳＤＲへの変換処理が実装されているかを判定する。これにより、Ｂｌｕ−ｒａｙ機器は、「ディスクはＨＤＲ対応ディスクです。お使いのＴＶはＨＤＲ非対応ＴＶのため、ＨＤＲ映像ではなく、Ｂｌｕ−ｒａｙ機器がＨＤＲからＳＤＲへの変換処理を行ったＳＤＲ映像を再生しますが、どの方法を選びますか？（処理１で再生）、（処理３で再生）、（再生しません）」等のＨＤＲからＳＤＲへの変換処理方式の選択メニューを表示することができる。なお、ここで処理１及び処理３は、ＨＤＲからＳＤＲへの異なる変換処理である。
The Blu-ray device displays, if the Blu-ray stores the metadata for the conversion process from HDR to SDR, that fact. When the user selects a specified conversion method, the Blu-ray device displays a message prompting that a cleaner conversion is possible. That is, it is determined what kind of HDR to SDR conversion processing is implemented in the Blu-ray device by the Java (registered trademark) command or the like in the disc. As a result, the Blu-ray device says, "The disc is an HDR compatible disc. Since your TV is an HDR non-compatible TV, it is not an HDR video, but an SDR that the Blu-ray device has converted from HDR to SDR. The video will be played, but which method do you choose? (Play in process 1), (Play in process 3), (Do not play) ", etc. Display the selection menu of the conversion processing method from HDR to SDR. be able to. Here, the
このように、データ出力装置（Ｂｌｕ−ｒａｙ機器）は、表示装置が第１映像信号（ＨＤＲ信号）の輝度範囲の映像出力に対応していない場合、第１輝度範囲を第２輝度範囲に変換するための複数の変換方式のうちいずれかを、ユーザが選択するためのメッセージを表示装置に表示させる。 In this way, the data output device (Blu-ray device) converts the first luminance range into the second luminance range when the display device does not correspond to the video output of the luminance range of the first video signal (HDR signal). A message for the user to select one of a plurality of conversion methods is displayed on the display device.
［１９．ユーザーガイダンス表示方法５］
なお、放送においても同様のメッセージを表示することができる。例えば、ＨＤＲ信号に対応していないＴＶ又は再生装置は、データ放送のアプリケーションなどを用いて、放送番組がＨＤＲ信号であり、で視聴した場合には正しく表示できないことがある旨を示すメッセージを表示する。また、ＨＤＲ信号に対応したＴＶ又は再生装置は、当該メッセージを表示しなくてもよい。また、メッセージの属性を示すタグ値などにより、当該メッセージがＨＤＲ信号に対する警告メッセージであることが示される。ＨＤＲ信号に対応したＴＶ又は再生装置は、タグ値を参照してメッセージの表示が不要であることを判定する。
[19. User guidance display method 5]
A similar message can be displayed in broadcasting. For example, a TV or playback device that does not support HDR signals uses a data broadcasting application or the like to display a message indicating that the broadcast program is an HDR signal and may not be displayed correctly when viewed with. do. Further, the TV or the playback device corresponding to the HDR signal does not have to display the message. Further, the tag value indicating the attribute of the message indicates that the message is a warning message for the HDR signal. The TV or the playback device corresponding to the HDR signal refers to the tag value and determines that the display of the message is unnecessary.
［２０．デュアルディスクの再生動作１］
以上では、ＨＤＲ信号のみが格納されたＨＤＲディスクの再生動作について説明した。
[20. Dual disc playback operation 1]
In the above, the reproduction operation of the HDR disk in which only the HDR signal is stored has been described.
次に、ＨＤＲ信号とＳＤＲ信号との両方が格納されたデュアルディスクに格納される多重化データについて図２６を用いて説明する。図２６は、デュアルディスクに格納される多重化データについて説明するための図である。 Next, the multiplexed data stored in the dual disk in which both the HDR signal and the SDR signal are stored will be described with reference to FIG. 26. FIG. 26 is a diagram for explaining the multiplexed data stored in the dual disk.
デュアルディスクでは、図２６に示すように、ＨＤＲ信号とＳＤＲ信号とがそれぞれ異なる多重化ストリームとして格納される。例えば、Ｂｌｕ−ｒａｙなどの光ディスクにおいては、Ｍ２ＴＳと呼ばれるＭＰＥＧ−２ ＴＳベースの多重化方式により、ビデオやオーディオ、字幕、グラフィックスなど複数メディアのデータが１本の多重化ストリームとして格納される。これらの多重化ストリームは、プレイリストなどの再生制御用のメタデータから参照され、再生時にはプレーヤがメタデータを解析することで再生する多重化ストリーム、あるいは、多重化ストリームに格納される個別の言語のデータを選択する。本例では、ＨＤＲ用とＳＤＲ用とのプレイリストを個別に格納し、それぞれのプレイリストがＨＤＲ信号、あるいは、ＳＤＲ信号を参照するケースを示す。また、ＨＤＲ信号とＳＤＲ信号の両方が格納されていることを示す識別情報などを別途示しても良い。 In the dual disk, as shown in FIG. 26, the HDR signal and the SDR signal are stored as different multiplexed streams. For example, in an optical disk such as Blu-ray, data of a plurality of media such as video, audio, subtitles, and graphics are stored as one multiplexing stream by an MPEG-2 TS-based multiplexing method called M2TS. These multiplexed streams are referenced from metadata for playback control such as playlists, and are played back by the player analyzing the metadata during playback, or individual languages stored in the multiplexed streams. Select the data of. In this example, a case is shown in which playlists for HDR and SDR are stored separately, and each playlist refers to an HDR signal or an SDR signal. Further, identification information or the like indicating that both the HDR signal and the SDR signal are stored may be separately shown.
同一の多重化ストリームにＨＤＲ信号とＳＤＲ信号との両方を多重化することも可能であるが、ＭＰＥＧ−２ ＴＳにおいて規定されるＴ−ＳＴＤ（Ｓｙｓｔｅｍ Ｔａｒｇｅｔ Ｄｅｃｏｄｅｒ）などのバッファモデルを満たすように多重化する必要があり、特に、予め定められたデータの読み出しレートの範囲内で、ビットレートの高いビデオを２本多重化するのは困難である。このため、多重化ストリームを分離することが望ましい。 It is possible to multiplex both the HDR signal and the SDR signal in the same multiplexing stream, but multiplex so as to satisfy a buffer model such as T-STD (System Target Recorder) specified in MPEG-2 TS. In particular, it is difficult to multiplex two videos having a high bit rate within a predetermined data read rate range. For this reason, it is desirable to separate the multiplexed streams.
オーディオ、字幕、あるいはグラフィックスなどのデータは、それぞれの多重化ストリームに対して格納する必要があり、１本に多重化する場合に比べてデータ量が増加する。ただし、データ量の増加は、圧縮率の高いビデオ符号化方式を用いてビデオのデータ量を削減することができる。例えば、従来のＢｌｕ−ｒａｙにおいて使用していたＭＰＥＧ−４ ＡＶＣを、ＨＥＶＣ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）に変えることで、１．６〜２倍の圧縮率向上が見込まれる。また、デュアルディスクに格納するのは、２ＫのＨＤＲとＳＤＲとの組み合わせ、４ＫのＳＤＲと２ＫのＨＤＲとの組み合わせなど、２Ｋを２本、あるいは、２Ｋと４Ｋとの組合せとするなど、４Ｋを２本格納することは禁止することにより、光ディスクの容量に収まる組合せのみを許容してもよい。 Data such as audio, subtitles, and graphics need to be stored for each multiplexing stream, and the amount of data increases as compared with the case of multiplexing into one stream. However, the increase in the amount of data can reduce the amount of video data by using a video coding method having a high compression rate. For example, by changing the MPEG-4 AVC used in the conventional Blu-ray to HEVC (High Efficiency Video Coding), it is expected that the compression rate will be improved by 1.6 to 2 times. In addition, 4K is stored in the dual disk, such as a combination of 2K HDR and SDR, a combination of 4K SDR and 2K HDR, two 2K, or a combination of 2K and 4K. By prohibiting the storage of two, only combinations that fit in the capacity of the optical disk may be allowed.
［２１．デュアルディスクの再生動作２］
図２７は、デュアルディスクの再生動作を示すフローチャートである。
[21. Dual disc playback operation 2]
FIG. 27 is a flowchart showing the reproduction operation of the dual disc.
まず、再生装置は、再生対象の光ディスクがデュアルディスクであるかどうかを判定する（Ｓ３０１）。そして、デュアルディスクであると判定した場合（Ｓ３０１でＹｅｓ）、出力先のＴＶがＨＤＲＴＶかＳＤＲＴＶであるかを判定する（Ｓ３０２）。ＨＤＲＴＶであると判定した場合（Ｓ３０２でＹｅｓ）にはステップＳ３０３に進み、ＳＤＲＴＶであると判定した場合（Ｓ３０２でＮｏ）にはステップＳ３０４に進む。ステップＳ３０３では、デュアルディスク内のＨＤＲ信号を含む多重化ストリームからＨＤＲのビデオ信号を取得して、復号し、ＨＤＲＴＶに対して出力する。ステップＳ３０４では、デュアルディスク内のＳＤＲ信号を含む多重化ストリームからＳＤＲのビデオ信号を取得して、復号し、ＳＤＲＴＶに対して出力する。なお、ステップＳ３０１において再生対象がデュアルディスクでないと判定された場合（Ｓ３０１でＮｏ）には、所定の方法により再生可否の判定を行い、判定結果に基づいて再生方法を決定する（Ｓ３０５）。 First, the playback device determines whether or not the optical disc to be played back is a dual disc (S301). Then, when it is determined that the dual disk is used (Yes in S301), it is determined whether the output destination TV is HDRTV or SDRTV (S302). If it is determined to be HDRTV (Yes in S302), the process proceeds to step S303, and if it is determined to be SDRTV (No in S302), the process proceeds to step S304. In step S303, the HDR video signal is acquired from the multiplexed stream including the HDR signal in the dual disk, decoded, and output to the HDRTV. In step S304, the SDR video signal is acquired from the multiplexed stream including the SDR signal in the dual disk, decoded, and output to SDRTV. If it is determined in step S301 that the reproduction target is not a dual disc (No in S301), the reproduction possibility is determined by a predetermined method, and the reproduction method is determined based on the determination result (S305).
［２２．ディスクの種類］
上述のように、表示装置が高解像度化及び高輝度範囲化されることで、表示装置の仕様に合わせた複数種別のＢｌｕ−ｒａｙ Ｄｉｓｃ（以下、ＢＤと記載する）を提供する。図２８は、ＢＤの種類を示す図である。図２８に示されるように、以下では、解像度が第１解像度であり、輝度範囲が第１輝度範囲である映像信号が記録されたＢＤは、２Ｋ＿ＳＤＲ対応ＢＤと記載する。解像度が第１解像度であり、輝度範囲が第１輝度範囲である映像信号は、ＢＤにストリームとして格納される。このストリームは、２Ｋ＿ＳＤＲストリームと記載する。２Ｋ＿ＳＤＲ対応ＢＤは、従来のＢＤはである。
[22. Disk type]
As described above, by increasing the resolution and the brightness range of the display device, a plurality of types of Blu-ray Discs (hereinafter referred to as BD) according to the specifications of the display device are provided. FIG. 28 is a diagram showing the types of BDs. As shown in FIG. 28, in the following, a BD in which a video signal having a resolution of the first resolution and a luminance range of the first luminance range is recorded is described as a 2K_SDR compatible BD. The video signal whose resolution is the first resolution and whose luminance range is the first luminance range is stored as a stream in the BD. This stream is described as a 2K_SDR stream. The 2K_SDR compatible BD is the conventional BD.
また、解像度が第２解像度であり、輝度範囲が第１輝度範囲である映像信号が記録されたＢＤは、４Ｋ＿ＳＤＲ対応ＢＤと記載する。解像度が第２解像度であり、輝度範囲が第１輝度範囲である映像信号は、ＢＤにストリームとして格納される。このストリームは、４Ｋ＿ＳＤＲストリームと記載する。 Further, a BD in which a video signal having a resolution of the second resolution and a luminance range of the first luminance range is recorded is described as a 4K_SDR compatible BD. The video signal whose resolution is the second resolution and whose luminance range is the first luminance range is stored as a stream in the BD. This stream is described as a 4K_SDR stream.
同様に、解像度が第１解像度であり、輝度範囲が第２輝度範囲である映像信号が記録されたＢＤは、２Ｋ＿ＨＤＲ対応ＢＤと記載する。解像度が第１解像度であり、輝度範囲が第２輝度範囲である映像信号は、ＢＤにストリームとして格納される。このストリームは、２Ｋ＿ＨＤＲストリームと記載する。 Similarly, a BD on which a video signal having a resolution of the first resolution and a luminance range of the second luminance range is recorded is described as a 2K_HDR compatible BD. The video signal whose resolution is the first resolution and whose luminance range is the second luminance range is stored as a stream in the BD. This stream is described as a 2K_HDR stream.
また、解像度が第２解像度であり、輝度範囲が第２輝度範囲である映像信号が記録されたＢＤは、４Ｋ＿ＨＤＲ対応ＢＤと記載する。解像度が第２解像度であり、輝度範囲が第２輝度範囲である映像信号は、ＢＤにストリームとして格納される。このストリームは、４Ｋ＿ＨＤＲストリームと記載する。 Further, a BD in which a video signal having a resolution of the second resolution and a luminance range of the second luminance range is recorded is described as a 4K_HDR compatible BD. The video signal whose resolution is the second resolution and whose luminance range is the second luminance range is stored as a stream in the BD. This stream is described as a 4K_HDR stream.
なお、第１解像度は、例えば、所謂２Ｋ（１９２０ｘ１０８０、２０４８ｘ１０８０）の解像度であるが、このような解像度を含む任意の解像度であってよい。以下では、第１解像度を単に２Ｋと記載する場合がある。 The first resolution is, for example, a so-called 2K (1920x1080, 2048x1080) resolution, but may be any resolution including such a resolution. In the following, the first resolution may be simply referred to as 2K.
また、第２解像度は、所謂４Ｋ（３８４０ｘ２１６０、４０９６ｘ２１６０）の解像度であるが、このような解像度を含む任意の解像度であってよい。第２解像度は、第１解像度より画素数が多い解像度である。 The second resolution is a so-called 4K (3840x2160, 4096x2160) resolution, but may be any resolution including such a resolution. The second resolution is a resolution having a larger number of pixels than the first resolution.
なお、第１輝度範囲は、例えば、これまで説明したＳＤＲ（ピーク輝度が１００ｎｉｔの輝度範囲）である。第２輝度範囲は、例えば、これまで説明したＨＤＲ（ピーク輝度が１００ｎｉｔを超える輝度範囲）である。第２輝度範囲は、第１輝度範囲を全て含み、第２輝度範囲のピーク輝度は、第１輝度範囲のピーク輝度よりも大きい。 The first luminance range is, for example, the SDR (luminance range having a peak luminance of 100 nits) described so far. The second luminance range is, for example, the HDR (luminance range in which the peak luminance exceeds 100 nits) described so far. The second luminance range includes the entire first luminance range, and the peak luminance of the second luminance range is larger than the peak luminance of the first luminance range.
図２９は、ＢＤの種類をさらに詳細に示す図である。 FIG. 29 is a diagram showing the types of BDs in more detail.
図２９の（ｃ）、（ｆ）、（ｇ）、及び（ｈ）に示されるように、１枚のＢＤで複数の映像表現に対応したデュアルストリームディスクが考えられる。デュアルストリームディスクは、同一のコンテンツを再生するための複数の映像信号であって、解像度及び輝度範囲の少なくとも一方が異なる複数の映像信号が記録されたＢＤである。 As shown in (c), (f), (g), and (h) of FIG. 29, a dual stream disc corresponding to a plurality of video expressions with one BD can be considered. A dual stream disc is a BD in which a plurality of video signals for reproducing the same content and a plurality of video signals having different resolutions and luminance ranges are recorded.
具体的には、図２９の（ｃ）に示されるデュアルストリームディスクは、４Ｋ＿ＳＤＲストリームと、２Ｋ＿ＳＤＲストリームとが記録されたＢＤである。図２９の（ｆ）に示されるデュアルストリームディスクは、２Ｋ＿ＨＤＲストリームと、２Ｋ＿ＳＤＲストリームとが記録されたＢＤである。 Specifically, the dual stream disc shown in FIG. 29 (c) is a BD on which a 4K_SDR stream and a 2K_SDR stream are recorded. The dual stream disc shown in FIG. 29 (f) is a BD on which a 2K_HDR stream and a 2K_SDR stream are recorded.
図２９の（ｇ）に示されるデュアルストリームディスクは、４Ｋ＿ＨＤＲストリームと、４Ｋ＿ＳＤＲストリームとが記録されたＢＤである。図２９の（ｈ）に示されるデュアルストリームディスクは、４Ｋ＿ＨＤＲストリームと、２Ｋ＿ＳＤＲストリームとが記録されたＢＤである。 The dual stream disc shown in FIG. 29 (g) is a BD on which a 4K_HDR stream and a 4K_SDR stream are recorded. The dual stream disc shown in FIG. 29 (h) is a BD on which a 4K_HDR stream and a 2K_SDR stream are recorded.
なお、図２９の（ｃ）に示されるデュアルストリームディスクは、Ｂｌｕ−ｒａｙ機器が４Ｋから２Ｋの解像度のダウンコンバージョン（以下、ダウンコンバートとも記載する）を行うことが可能であるため、必須でない。 The dual stream disc shown in FIG. 29 (c) is not essential because the Blu-ray device can perform down conversion with a resolution of 4K to 2K (hereinafter, also referred to as down conversion).
［２３．ディスク容量１］
ここで、以上説明したような各ＢＤについて、図３０及び図３１を用いて補足する。図３０及び図３１は、ＢＤに記録されるデータ容量を示す図である。
[23. Disk capacity 1]
Here, each BD as described above will be supplemented with reference to FIGS. 30 and 31. 30 and 31 are diagrams showing the amount of data recorded on the BD.
図３０及び図３１は、各ＢＤとデュアルストリームディスクで実際に使われるストリームのデータ容量を例示する。 30 and 31 illustrate the data capacity of the stream actually used by each BD and dual stream disc.
図３０は、解像度が２Ｋのストリーム（２Ｋ＿ＳＤＲストリーム及び２Ｋ＿ＨＤＲストリーム）が、ＭＰＥＧ−４ ＡＶＣを用いて圧縮されている場合を例示している。Movie length、lossless Audio、Compressed Audioのビットレートは、下記のようになる。なお、ＢＤは、language個数分の音声ストリーム（Lossless AudioおよびCompressed Audio）を記録する。 FIG. 30 illustrates a case where 2K resolution streams (2K_SDR stream and 2K_HDR stream) are compressed using MPEG-4 AVC. The bit rates of Movie length, lossless Audio, and Compressed Audio are as follows. The BD records audio streams (Lossless Audio and Compressed Audio) for the number of languages.
Movie length: 150min (14 -18 mbps)
Lossless Audio: 0 -2 language (4.5mbps)
Compressed Audio: 3 -5 language (1.5mbps)
Movie length: 150min (14 -18 mbps)
Lossless Audio: 0 -2 language (4.5mbps)
Compressed Audio: 3 -5 language (1.5mbps)
この場合、必要なディスク容量の最大値（Ａ）、中間値（Ｂ）、及び最小値（Ｃ）は、以下のようになる。 In this case, the maximum value (A), the intermediate value (B), and the minimum value (C) of the required disk capacity are as follows.
（Ａ）(18+4.5*2+1.5*5)mbps*(150*60)s/8 = 38.8 GB
（Ｂ）(16+4.5*1+1.5*3)mbps*(150*60)s/8 = 28.1 GB
（Ｃ）(14+4.5*0+1.5*3)mbps*(150*60)s/8 = 20.8 GB
(A) (18 + 4.5 * 2 + 1.5 * 5) mbps * (150 * 60) s / 8 = 38.8 GB
(B) (16 + 4.5 * 1 + 1.5 * 3) mbps * (150 * 60) s / 8 = 28.1 GB
(C) (14 + 4.5 * 0 + 1.5 * 3) mbps * (150 * 60) s / 8 = 20.8 GB
また、解像度が４Ｋのストリーム（４Ｋ＿ＳＤＲストリーム及び４Ｋ＿ＨＤＲストリーム）が、ＨＥＶＣを用いて圧縮されている場合を例示している。Movie length、lossless Audio、Compressed Audioのビットレートは、下記のようになる。 It also illustrates the case where streams with 4K resolution (4K_SDR stream and 4K_HDR stream) are compressed using HEVC. The bit rates of Movie length, lossless Audio, and Compressed Audio are as follows.
Movie length: 150min (35 -40mbps)
Lossless Audio: 0 -2 language (4.5mbps)
Compressed Audio: 3 -6 language (1.5mbps)
Movie length: 150min (35 -40mbps)
Lossless Audio: 0 -2 language (4.5mbps)
Compressed Audio: 3 -6 language (1.5mbps)
この場合、必要なディスク容量の最大値（ａ）、中間値（ｂ）、及び最小値（ｃ）は、以下のようになる。 In this case, the maximum value (a), the intermediate value (b), and the minimum value (c) of the required disk capacity are as follows.
（ａ）(40+4.5*2+1.5*5)mbps*(150*60)s/8 = 63.6 GB
（ｂ）(37+4.5*0+1.5*4)mbps*(150*60)s/8 = 48.4 GB
（ｃ）(35+4.5*0+1.5*3)mbps*(150*60)s/8 = 44.4 GB
(A) (40 + 4.5 * 2 + 1.5 * 5) mbps * (150 * 60) s / 8 = 63.6 GB
(B) (37 + 4.5 * 0 + 1.5 * 4) mbps * (150 * 60) s / 8 = 48.4 GB
(C) (35 + 4.5 * 0 + 1.5 * 3) mbps * (150 * 60) s / 8 = 44.4 GB
ここで、ＭＰＥＧ−４ ＡＶＣを用いて圧縮された２Ｋ＿ＨＤＲストリームと、ＭＰＥＧ−４ ＡＶＣを用いて圧縮された２Ｋ＿ＳＤＲストリームとの両方が記録されたデュアルストリームディスクに必要なディスク容量は、上記（Ａ）＋（Ａ）、（Ｂ）＋（Ｂ）、及び、（Ｃ）＋（Ｃ）により求められる。具体的には、最大値７７．６ＧＢ、中間値５６．２ＧＢ、及び、最小値４１．６ＧＢとなる。 Here, the disk capacity required for the dual stream disk in which both the 2K_HDR stream compressed using MPEG-4 AVC and the 2K_SDR stream compressed using MPEG-4 AVC are recorded is described in (A) above. It is obtained by + (A), (B) + (B), and (C) + (C). Specifically, the maximum value is 77.6 GB, the intermediate value is 56.2 GB, and the minimum value is 41.6 GB.
従来の５０ＧＢに加えて、６６ＧＢ、１００ＧＢのディスクを対象としているため、上記のようなデュアルストリームディスクも容量の面においては実現可能である。 Since 66GB and 100GB discs are targeted in addition to the conventional 50GB discs, the dual stream discs as described above can also be realized in terms of capacity.
なお、ＨＥＶＣを用いて圧縮された４Ｋ＿ＨＤＲストリームと、ＨＥＶＣを用いて圧縮された２Ｋ＿ＨＤＲストリームとの両方が記録されたデュアルストリームディスクに必要なディスク容量は、上記（ｂ）＋（ｂ）に基づけば９６．８ＧＢであり、上記（ｃ）＋（ｃ）に基づけば８８．８ＧＢである。このため、このようなデュアルストリームディスクは、１００ＧＢの容量のディスクにより実現可能である。 The disk capacity required for the dual stream disk in which both the 4K_HDR stream compressed using HEVC and the 2K_HDR stream compressed using HEVC are recorded is based on the above (b) + (b). It is 96.8 GB, which is 88.8 GB based on the above (c) + (c). Therefore, such a dual stream disk can be realized by a disk having a capacity of 100 GB.
同様に、ＨＥＶＣを用いて圧縮された４Ｋ＿ＨＤＲストリームと、ＭＰＥＧ−４ ＡＶＣを用いて圧縮された２Ｋ＿ＳＤＲストリームとの両方が記録されたデュアルストリームディスクに必要なディスク容量は、上記（ａ）＋（Ｂ）に基づけば９１．７ＧＢであり、上記（ｃ）＋（Ｃ）に基づけば６５．２ＧＢである。このため、このようなデュアルストリームディスクは、１００ＧＢの容量のディスクまたは６６ＧＢの容量のディスクにより実現可能である。 Similarly, the disk capacity required for a dual stream disk in which both a 4K_HDR stream compressed using HEVC and a 2K_SDR stream compressed using MPEG-4 AVC are recorded is the above (a) + (B). ) Is 91.7 GB, and based on the above (c) + (C) is 65.2 GB. Therefore, such a dual stream disk can be realized by a disk having a capacity of 100 GB or a disk having a capacity of 66 GB.
［２４．ディスク容量２］
さらに、図３１を用いて別の例について説明する。図３１は、解像度が２Ｋのストリーム（２Ｋ＿ＳＤＲストリーム及び２Ｋ＿ＨＤＲストリーム）が、ＨＥＶＣを用いて圧縮されている場合を例示している。Movie length、lossless Audio、Compressed Audioのビットレートは、下記のようになる。
[24. Disk capacity 2]
Further, another example will be described with reference to FIG. FIG. 31 illustrates a case where streams having a resolution of 2K (2K_SDR stream and 2K_HDR stream) are compressed using HEVC. The bit rates of Movie length, lossless Audio, and Compressed Audio are as follows.
Movie length: 150min (7 - 9 mbps)
Lossless Audio: 0 - 2 language (4.5mbps)
Compressed Audio: 3 - 5 language (1.5mbps)
Movie length: 150min (7-9 mbps)
Lossless Audio: 0 --2 language (4.5mbps)
Compressed Audio: 3-5 languages (1.5mbps)
この場合、必要なディスク容量の最大値（Ａ）、中間値（Ｂ）、及び最小値（Ｃ）は、以下のようになる。 In this case, the maximum value (A), the intermediate value (B), and the minimum value (C) of the required disk capacity are as follows.
（α）(9+4.5*2+1.5*5)mbps*(150*60)s/8 = 25.3 GB
（β）(8+4.5*1+1.5*3)mbps*(150*60)s/8 = 19.1 GB
（γ）(7+4.5*0+1.5*3)mbps*(150*60)s/8 = 12.9 GB
(Α) (9 + 4.5 * 2 + 1.5 * 5) mbps * (150 * 60) s / 8 = 25.3 GB
(Β) (8 + 4.5 * 1 + 1.5 * 3) mbps * (150 * 60) s / 8 = 19.1 GB
(Γ) (7 + 4.5 * 0 + 1.5 * 3) mbps * (150 * 60) s / 8 = 12.9 GB
ここで、ＨＥＶＣを用いて圧縮された２Ｋ＿ＨＤＲストリームと、ＨＥＶＣを用いて圧縮された２Ｋ＿ＳＤＲストリームとの両方が記録されたデュアルストリームディスクに必要なディスク容量は、上記（α）＋（α）、（β）＋（β）、及び、（γ）＋（γ）により求められる。具体的には、最大値５０．６ＧＢ、ｔｙｐ値３８．２ＧＢ、及び、最小値２５．８ＧＢとなる。 Here, the disk capacity required for the dual stream disk in which both the 2K_HDR stream compressed using HEVC and the 2K_SDR stream compressed using HEVC are recorded is the above (α) + (α), ( It is obtained by β) + (β) and (γ) + (γ). Specifically, the maximum value is 50.6 GB, the type value is 38.2 GB, and the minimum value is 25.8 GB.
従来の５０ＧＢに加えて、６６ＧＢ、１００ＧＢのディスクを対象としているため、上記のようなデュアルストリームディスクも容量の面においては実現可能である。 Since 66GB and 100GB discs are targeted in addition to the conventional 50GB discs, the dual stream discs as described above can also be realized in terms of capacity.
同様に、ＨＥＶＣを用いて圧縮された４Ｋ＿ＨＤＲストリームと、ＨＥＶＣを用いて圧縮された２Ｋ＿ＳＤＲストリームとの両方が記録されたデュアルストリームディスクに必要なディスク容量は、上記（ａ）＋（α）に基づけば８８．９ＧＢであり、上記（ｂ）＋（β）に基づけば６７．５ＧＢであり、上記（ｂ）＋（γ）に基づけば６１．３ＧＢであり、上記（ｃ）＋（γ）に基づけば５７．３ＧＢである。このため、このようなデュアルストリームディスクは、１００ＧＢの容量のディスクまたは６６ＧＢの容量のディスクにより実現可能である。 Similarly, the disk capacity required for a dual stream disk on which both a 4K_HDR stream compressed using HEVC and a 2K_SDR stream compressed using HEVC are recorded is based on (a) + (α) above. 88.9 GB, 67.5 GB based on (b) + (β) above, 61.3 GB based on (b) + (γ) above, and (c) + (γ) above. Based on it, it is 57.3 GB. Therefore, such a dual stream disk can be realized by a disk having a capacity of 100 GB or a disk having a capacity of 66 GB.
［２５．ディスクの種類の詳細１］
ＢＤには、より詳細にはビデオストリームと、グラフィックストリーム（実施の形態１のグラフィックスのストリーム）とが記録される。ここで、図３２は、デュアルストリームディスクを含む各ＢＤに対し、各ディスクに記録された、ビデオストリームとグラフィックストリームとの組み合わせの一例を示す図である。
[25. Details of disc types 1]
More specifically, a video stream and a graphic stream (a graphic stream of the first embodiment) are recorded on the BD. Here, FIG. 32 is a diagram showing an example of a combination of a video stream and a graphic stream recorded on each disc for each BD including a dual stream disc.
図３２は、コンテンツ（ＢＤ）の制作の手間を考慮して、グラフィックストリームは、対応するビデオストリームの解像度によらず、解像度が２Ｋで記録する。２Ｋ＿ＳＤＲストリームと４Ｋ＿ＳＤＲストリームとで、グラフィックストリームを共有することができる。ただし、グラフィックストリームは、対応するビデオストリームの輝度範囲に合わせた輝度範囲で記録する。ビデオストリームがＨＤＲの場合は、ＨＤＲのグラフィックスストリームを記録する。ビデオストリームがＳＤＲの場合は、ＳＤＲのグラフィックスストリームを記録する。グラフィックストリームのＳＤＲからＨＤＲへの変換は、コンテンツの制作時に行う。 In FIG. 32, the graphic stream is recorded at a resolution of 2K regardless of the resolution of the corresponding video stream in consideration of the time and effort of producing the content (BD). A graphic stream can be shared between a 2K_SDR stream and a 4K_SDR stream. However, the graphic stream is recorded in a luminance range that matches the luminance range of the corresponding video stream. If the video stream is HDR, record the HDR graphics stream. If the video stream is SDR, record the SDR graphics stream. The conversion of the graphic stream from SDR to HDR is performed at the time of content production.
［２６．ディスクの種類の詳細２］
図３３は、デュアルストリームディスクを含む各ＢＤに対し、各ディスクに記録された、ビデオストリームとグラフィックストリームとの組み合わせの別の例を示す図である。
[26. Details of disc types 2]
FIG. 33 is a diagram showing another example of the combination of the video stream and the graphic stream recorded on each disc for each BD including the dual stream disc.
図３３では、コンテンツの制作の手間を考慮して、グラフィックストリームは、対応するビデオストリームの解像度及び輝度範囲によらず、解像度が２Ｋ、かつ、輝度範囲がＳＤＲで記録する。２Ｋ＿ＳＤＲストリーム、４Ｋ＿ＳＤＲストリーム、２Ｋ＿ＨＤＲストリーム、及び、４Ｋ＿ＨＤＲストリーム全てで、グラフィックストリームを共有することができる。この場合は、グラフィックストリームの解像度の２Ｋから４Ｋへの変換、及び、グラフィックストリームの輝度範囲のＳＤＲからＨＤＲへの変換は、いずれもＢｌｕ−ｒａｙ機器で実行される。 In FIG. 33, in consideration of the time and effort of producing the content, the graphic stream is recorded with a resolution of 2K and a luminance range of SDR regardless of the resolution and the luminance range of the corresponding video stream. A graphic stream can be shared by all of the 2K_SDR stream, the 4K_SDR stream, the 2K_HDR stream, and the 4K_HDR stream. In this case, the conversion of the resolution of the graphic stream from 2K to 4K and the conversion of the brightness range of the graphic stream from SDR to HDR are both performed by the Blu-ray device.
［２７．ディスクの種類の詳細３］
図３４は、デュアルストリームディスクを含む各ＢＤに対し、各ディスクに記録された、ビデオストリームとグラフィックストリームとの組み合わせのさらに別の例を示す図である。
[27. Details of disc types 3]
FIG. 34 is a diagram showing still another example of the combination of the video stream and the graphic stream recorded on each disc for each BD including the dual stream disc.
図３４は、Ｂｌｕ−ｒａｙ機器においてグラフィックストリームの変換が不要となるように、コンテンツの制作時に、グラフィックストリームの解像度及び輝度範囲は、対応するビデオストリームの解像度及び輝度範囲に合わされて記録する。 In FIG. 34, the resolution and luminance range of the graphic stream are recorded in accordance with the resolution and luminance range of the corresponding video stream at the time of content production so that the conversion of the graphic stream is not required in the Blu-ray device.
［２８．まとめ］
４Ｋ対応ＢＤまたはＨＤＲ対応ＢＤを再生するＢｌｕ−ｒａｙ機器は、２Ｋ＿ＳＤＲ対応ＴＶ、２Ｋ＿ＨＤＲ対応ＴＶ、４Ｋ＿ＳＤＲ対応ＴＶ、及び、４Ｋ＿ＨＤＲ対応ＴＶの４つのＴＶに対応する必要がある。具体的には、Ｂｌｕ−ｒａｙ機器は、３組のＨＤＭＩ／ＨＤＣＰ規格（ＨＤＭＩ１．４／ＨＤＣＰ１．４、ＨＤＭＩ２．０／ＨＤＣＰ２．１、ＨＤＭＩ２．１／ＨＤＣＰ２．２）をサポートする必要がある。
[28. summary]
A Blu-ray device that reproduces a 4K-compatible BD or an HDR-compatible BD needs to support four TVs: a 2K_SDR-compatible TV, a 2K_HDR-compatible TV, a 4K_SDR-compatible TV, and a 4K_HDR-compatible TV. Specifically, Blu-ray devices need to support three sets of HDMI / HDCP standards (HDMI1.4 / HDMI1.4, HDMI2.0 / HDMI2.1, HDMI2.1 / HDMI2.2).
さらに、Ｂｌｕ−ｒａｙ機器は、４種類のＢｌｕ−ｒａｙディスク（２Ｋ＿ＳＤＲ対応ＢＤ、２Ｋ＿ＨＤＲ対応ＢＤ、４Ｋ＿ＳＤＲ対応ＢＤ、及び、４Ｋ＿ＨＤＲ対応ＢＤ）の再生を行う場合、そのＢＤ（コンテンツ）毎、及び、接続されている表示装置（ＴＶ）毎に、適切な処理とＨＤＭＩ／ＨＤＣＰとを選択する必要がある。さらに、ビデオにグラフィックを合成する場合も、ＢＤの種類と接続されている表示装置（ＴＶ）の種類により、処理を変える必要がある。 Further, when the Blu-ray device reproduces four types of Blu-ray discs (2K_SDR compatible BD, 2K_HDR compatible BD, 4K_SDR compatible BD, and 4K_HDR compatible BD), each BD (content) and connection It is necessary to select appropriate processing and HDMI / HDCP for each display device (TV). Further, when synthesizing a graphic with a video, it is necessary to change the processing depending on the type of BD and the type of display device (TV) connected to the video.
このため、Ｂｌｕ−ｒａｙ機器の内部処理が非常に複雑になる。上記実施の形態３においては、Ｂｌｕ−ｒａｙ機器内部処理を比較的簡単にするための各種手法を提供した。 Therefore, the internal processing of the Blu-ray device becomes very complicated. In the third embodiment, various methods for making the internal processing of the Blu-ray device relatively simple are provided.
［１］ＨＤＲ非対応のＴＶにＨＤＲ信号を表示する場合は、ＨＤＲからＳＤＲへの変換が必要になる。これに対し、上記実施の形態３では、この変換をＢｌｕ−ｒａｙ機器においてオプション化するために、デュアルストリームディスク（Ｄｕａｌ Ｓｔｒｅａｍｓ Ｄｉｓｃ）というＢＤの構成を提案した。 [1] When displaying an HDR signal on a TV that does not support HDR, conversion from HDR to SDR is required. On the other hand, in the third embodiment, in order to make this conversion optional in the Blu-ray device, a BD configuration called a dual stream disk (Dual Streams Disc) has been proposed.
［２］また、上記実施の形態３では、グラフィックストリームに制限を加え、ビデオストリームとグラフィックストリームとの組み合わせの種類を減らした。 [2] Further, in the third embodiment, the graphic stream is limited, and the types of combinations of the video stream and the graphic stream are reduced.
［３］上記実施の形態３では、デュアルストリームディスクと、グラフィックストリームの制限とにより、Ｂｌｕ−ｒａｙ機器内での複雑な処理の組み合わせ数を大幅に減らしている。 [3] In the third embodiment, the number of combinations of complicated processes in the Blu-ray device is significantly reduced by the dual stream disk and the limitation of the graphic stream.
［４］上記実施の形態３では、疑似ＨＤＲ変換を導入した場合でも、デュアルストリームディスクの処理に対して矛盾が生じない、内部処理及びＨＤＭＩ処理を提示した。 [4] In the third embodiment, the internal processing and the HDMI processing are presented so that there is no contradiction in the processing of the dual stream disk even when the pseudo HDR conversion is introduced.
本開示の変換方法では、ＨＤＲ映像をＳＤＲＴＶで表示する場合において、表示するＳＤＲＴＶのピーク輝度が１００ｎｉｔを超える（通常２００ｎｉｔ以上）ことを利用して、ＨＤＲ映像を１００ｎｉｔ以下のＳＤＲ映像に変換するのではなく、１００ｎｉｔを超える領域の階調をある程度保つよう変換し、元のＨＤＲに近い疑似ＨＤＲ映像に変換してＳＤＲＴＶに表示させることができる「ＨＤＲ→疑似ＨＤＲ変換処理」を実現する。 In the conversion method of the present disclosure, when the HDR video is displayed in SDRTV, the HDR video is converted into an SDR video of 100 nit or less by utilizing the fact that the peak brightness of the displayed SDRTV exceeds 100 nit (usually 200 nit or more). Instead, it realizes "HDR → pseudo HDR conversion processing" that can be converted so as to maintain the gradation of a region exceeding 100 nits to some extent, converted into a pseudo HDR image close to the original HDR, and displayed on SDRTV.
また、変換方法では、ＳＤＲＴＶのディスプレイ特性（最高輝度、入出力特性、および表示モード）によって「ＨＤＲ→疑似ＨＤＲ変換処理」の変換方法を切り替えてもよい。 Further, in the conversion method, the conversion method of "HDR → pseudo HDR conversion processing" may be switched depending on the display characteristics (maximum brightness, input / output characteristics, and display mode) of SDRTV.
ディスプレイ特性情報の取得方法としては、（１）ＨＤＭＩやネットワークを通して自動取得すること、（２）ユーザにメーカー名、品番等の情報入力させることで生成すること、および（３）メーカー名や品番等の情報を使ってクラウド等から取得することが考えられる。 Display characteristic information can be acquired by (1) automatically acquiring it through HDMI or a network, (2) generating it by having the user enter information such as the manufacturer name and product number, and (3) the manufacturer name and product number, etc. It is conceivable to acquire from the cloud etc. using the information of.
また、変換装置１００のディスプレイ特性情報の取得タイミングとしては、（１）疑似ＨＤＲ変換する直前に取得すること、および（２）表示装置２００（ＳＤＲＴＶ等）と初めて接続する時（接続が確立した時）に取得することが考えられる。
The timing of acquiring the display characteristic information of the
また、変換方法では、ＨＤＲ映像の輝度情報（ＣＡＬ、ＣＰＬ）によって変換方法を切り替えてもよい。 Further, in the conversion method, the conversion method may be switched according to the luminance information (CAL, CPL) of the HDR video.
例えば、変換装置１００のＨＤＲ映像の輝度情報の取得方法としては、（１）ＨＤＲ映像に付随したメタ情報として取得すること、（２）ユーザにコンテンツのタイトル情報を入力させることで取得すること、および（３）ユーザに有力させた入力情報を使ってクラウド等から取得すること等が考えられる。
For example, as a method of acquiring the brightness information of the HDR video of the
また、変換方法の詳細としては、（１）ＤＰＬを超えないように変換し、（２）ＣＰＬがＤＰＬになるように変換し、（３）ＣＡＬおよびその周辺以下の輝度は変更せず、（４）自然対数を用いて変換し、（５）ＤＰＬでクリップ処理をする。 Further, as details of the conversion method, (1) conversion is performed so as not to exceed DPL, (2) conversion is performed so that CPL becomes DPL, and (3) brightness below CAL and its periphery is not changed. 4) Convert using the natural logarithm, and (5) Clip with DPL.
また、変換方法では、疑似ＨＤＲの効果を高めるために、ＳＤＲＴＶの表示モード、表示パラメータなどの表示設定を、表示装置２００に送信して切り替えることも可能であり、例えば、ユーザに表示設定を促すメッセージを画面に表示してもよい。
Further, in the conversion method, in order to enhance the effect of pseudo HDR, it is possible to transmit the display settings such as the display mode and display parameters of SDRTV to the
［２９．疑似ＨＤＲの必要性１］
次に、疑似ＨＤＲの必要性について図３５Ａ〜図３５Ｃを用いて説明する。
[29. Necessity of pseudo HDR 1]
Next, the necessity of pseudo HDR will be described with reference to FIGS. 35A to 35C.
図３５Ａは、ＨＤＲＴＶ内で、ＨＤＲ信号を変換してＨＤＲ表示を行う表示処理の一例を示す図である。 FIG. 35A is a diagram showing an example of display processing in which an HDR signal is converted and HDR display is performed in HDRTV.
図３５Ａに示すように、ＨＤＲ映像を表示する場合、表示装置がＨＤＲＴＶであっても、ＨＤＲの輝度範囲の最大値（ピーク輝度（ＨＰＬ（ＨＤＲ Ｐｅａｋ Ｌｕｍｉｎａｎｃｅ）：例１５００ｎｉｔ））をそのまま表示することができない場合がある。この場合、ＨＤＲのＥＯＴＦを用いた逆量子化を行った後のリニアな信号を、その表示装置の輝度範囲の最大値（ピーク輝度（ＤＰＬ（Ｄｉｓｐｌａｙ Ｐｅａｋ Ｉｕｍｉｎａｎｃｅ）：例７５０ｎｉｔ））に合わせるための輝度変換を行う。そして、輝度変換を行うことで得られた映像信号を表示装置に入力することで、その表示装置の限界である最大値の輝度範囲に合わせたＨＤＲ映像を表示することができる。 As shown in FIG. 35A, when displaying an HDR image, even if the display device is HDRTV, the maximum value of the HDR brightness range (peak brightness (HPL (HDR Peak Luminance): Example 1500 nit)) is displayed as it is. May not be possible. In this case, in order to match the linear signal after dequantization using HDR EOTF to the maximum value (peak brightness (DPL (Display Peak Iminance): Example 750 nit)) of the brightness range of the display device. Perform brightness conversion. Then, by inputting the video signal obtained by performing the luminance conversion to the display device, it is possible to display the HDR video that matches the luminance range of the maximum value which is the limit of the display device.
図３５Ｂは、ＨＤＲ対応の再生装置とＳＤＲＴＶとを用いて、ＨＤＲ表示を行う表示処理の一例を示す図である。 FIG. 35B is a diagram showing an example of display processing for performing HDR display using an HDR compatible playback device and SDRTV.
図３５Ｂに示すように、ＨＤＲ映像を表示する場合、表示装置がＳＤＲＴＶであれば、表示するＳＤＲＴＶの輝度範囲の最大値（ピーク輝度（ＤＰＬ：例３００ｎｉｔ））が１００ｎｉｔを超えることを利用して、図３５ＢのＨＤＲ対応の再生装置（Ｂｌｕ−ｒａｙ機器）内の「ＨＤＲ→疑似ＨＤＲ変換処理」で、ＨＤＲＴＶ内で行っている、「ＨＤＲのＥＯＴＦ変換」とＳＤＲＴＶの輝度範囲の最大値であるＤＰＬ（例：３００ｎｉｔ）を使った「輝度変換」を行い、「輝度変換」を行うことで得られた信号をＳＤＲＴＶの「表示装置」に直接入力できれば、ＳＤＲＴＶを使っても、ＨＤＲＴＶと同じ効果を実現することができる。 As shown in FIG. 35B, when displaying an HDR image, if the display device is SDRTV, the maximum value (peak brightness (DPL: 300 nit)) of the luminance range of SDRTV to be displayed exceeds 100 nit. , The maximum value of the "HDR EOTF conversion" and the SDRTV luminance range performed in the HDRTV by the "HDR → pseudo HDR conversion process" in the HDR compatible playback device (Blu-ray device) of FIG. 35B. If the signal obtained by performing "luminance conversion" using DPL (example: 300 nits) and performing "luminance conversion" can be directly input to the "display device" of SDRTV, the same effect as HDRTV can be obtained even if SDRTV is used. Can be realized.
しかしながら、ＳＤＲＴＶには、このような信号を、外部から直接入力するための手段が無いため、実現できない。 However, SDRTV cannot be realized because there is no means for directly inputting such a signal from the outside.
図３５Ｃは、標準インターフェースを介して互いに接続したＨＤＲ対応の再生装置とＳＤＲＴＶと用いて、ＨＤＲ表示を行う表示処理の一例を示す図である。 FIG. 35C is a diagram showing an example of display processing for performing HDR display by using an HDR compatible playback device and SDRTV connected to each other via a standard interface.
図３５Ｃに示すように、通常、ＳＤＲＴＶが備える入力インターフェース（ＨＤＭＩ等）を使って、図３５Ｂの効果を得られるような信号をＳＤＲＴＶに入力する必要がある。ＳＤＲＴＶでは、入力インターフェースを介して入力した信号は、「ＳＤＲのＥＯＴＦ変換」と「モード毎の輝度変換」と「表示装置」を順に通過し、その表示装置の最大値の輝度範囲に合わせた映像を表示する。このため、ＨＤＲ対応のＢｌｕ−ｒａｙ機器内で、ＳＤＲＴＶで入力インターフェースの直後に通過する、「ＳＤＲのＥＯＴＦ変換」と「モード毎の輝度変換」とをキャンセルできるような信号（疑似ＨＤＲ信号）を生成する。つまり、ＨＤＲ対応のＢｌｕ−ｒａｙ機器内で、「ＨＤＲのＥＯＴＦ変換」とＳＤＲＴＶのピーク輝度（ＤＰＬ）を使った「輝度変換」との直後に、「モード毎の逆輝度変換」と「逆ＳＤＲのＥＯＴＦ変換」とを行うことで、「輝度変換」直後の信号を「表示装置」に入力した場合（図３５Ｃの破線矢印）と同じ効果を疑似的実現する。 As shown in FIG. 35C, it is usually necessary to input a signal to the SDRTV so as to obtain the effect of FIG. 35B by using an input interface (HDMI or the like) provided in the SDRTV. In SDRTV, the signal input via the input interface passes through "SDR EOTF conversion", "luminance conversion for each mode", and "display device" in order, and the image is adjusted to the maximum brightness range of the display device. Is displayed. Therefore, in an HDR-compatible Blu-ray device, a signal (pseudo-HDR signal) that can cancel "SDR EOTF conversion" and "mode-by-mode brightness conversion" that passes immediately after the input interface in SDRTV is transmitted. Generate. That is, in an HDR-compatible Blu-ray device, immediately after "HDR EOTF conversion" and "brightness conversion" using SDRTV peak brightness (DPL), "reverse brightness conversion for each mode" and "reverse SDR" By performing "EOTF conversion", the same effect as when the signal immediately after "luminance conversion" is input to the "display device" (broken line arrow in FIG. 35C) is realized in a pseudo manner.
［３０．疑似ＨＤＲの必要性２］
通常のＳＤＲＴＶは入力信号が１００ｎｉｔであるが、視聴環境（暗い室：シネマモード、明るい部屋：ダイナミックモード等）に合わせて２００ｎｉｔ以上の映像表現が可能な能力を持つ。しかし、ＳＤＲＴＶへの入力信号の輝度上限が１００ｎｉｔに決められていたため、その能力を直接つかうことはできなかった。
[30. Necessity of pseudo HDR 2]
A normal SDRTV has an input signal of 100 nits, but has the ability to express an image of 200 nits or more according to the viewing environment (dark room: cinema mode, bright room: dynamic mode, etc.). However, since the upper limit of the brightness of the input signal to the SDRTV was set to 100 nits, that ability could not be used directly.
ＨＤＲ映像をＳＤＲＴＶで表示する場合において、表示するＳＤＲＴＶのピーク輝度が１００ｎｉｔを超える（通常２００ｎｉｔ以上）ことを利用して、ＨＤＲ映像を１００ｎｉｔ以下のＳＤＲ映像に変換するのではなく、１００ｎｉｔを超える輝度範囲の階調をある程度保つように、「ＨＤＲ→疑似ＨＤＲ変換処理」を行っている。このため、元のＨＤＲに近い疑似ＨＤＲ映像としてＳＤＲＴＶに表示させることができる。 When displaying HDR video in SDRTV, the peak brightness of SDRTV to be displayed exceeds 100 nits (usually 200 nits or more), and the HDR video is not converted to SDR video of 100 nits or less, but the brightness exceeds 100 nits. “HDR → pseudo HDR conversion processing” is performed so as to maintain the gradation of the range to some extent. Therefore, it can be displayed on the SDRTV as a pseudo HDR image close to the original HDR.
この「ＨＤＲ→疑似ＨＤＲ変換処理」技術をＢｌｕ−ｒａｙに応用した場合は、図３６に示すように、ＨＤＲディスクにはＨＤＲ信号のみを格納し、Ｂｌｕ−ｒａｙ機器にＳＤＲＴＶを接続した場合、Ｂｌｕ−ｒａｙ機器が、「ＨＤＲ→疑似ＨＤＲ変換処理」を行い、ＨＤＲ信号を疑似ＨＤＲ信号に変換してＳＤＲＴＶに送る。これにより、ＳＤＲＴＶは、受信した疑似ＨＤＲ信号から輝度値に変換することで、疑似的なＨＤＲ効果を持った映像を表示させることができる。このように、ＨＤＲ対応ＴＶが無い場合でも、ＨＤＲ対応のＢＤとＨＤＲ対応のＢｌｕ−ｒａｙ機器を用意すれば、ＳＤＲＴＶであっても、ＳＤＲ映像よりも高画質な疑似ＨＤＲ映像を表示させることができる。 When this "HDR → pseudo HDR conversion processing" technology is applied to Blu-ray, as shown in FIG. 36, only the HDR signal is stored in the HDR disk, and when the SDRTV is connected to the Blu-ray device, Blu The -ray device performs "HDR → pseudo HDR conversion processing", converts the HDR signal into a pseudo HDR signal, and sends it to SDRTV. As a result, the SDRTV can display an image having a pseudo HDR effect by converting the received pseudo HDR signal into a luminance value. In this way, even if there is no HDR compatible TV, if an HDR compatible BD and an HDR compatible Blu-ray device are prepared, even with SDRTV, it is possible to display a pseudo HDR image with higher image quality than the SDR image. can.
従って、ＨＤＲ映像を見るためにはＨＤＲ対応ＴＶが必要と考えられていたが、ＨＤＲ的な効果を実感できる疑似ＨＤＲ映像を、既存のＳＤＲＴＶで見ることができる。これにより、ＨＤＲ対応Ｂｌｕ−ｒａｙの普及が期待できる。 Therefore, it was thought that an HDR-compatible TV was necessary to view the HDR image, but a pseudo HDR image in which the HDR-like effect can be realized can be viewed with the existing SDRTV. As a result, the spread of HDR-compatible Blu-ray can be expected.
［３１．効果等］
放送、Ｂｌｕ−ｒａｙ等のパッケージメディア、ＯＴＴ等のインターネット配信により送られてきたＨＤＲ信号を、ＨＤＲ−疑似ＨＤＲ変換処理を行うことで、疑似ＨＤＲ信号に変換する。これにより、ＨＤＲ信号を疑似ＨＤＲ映像として既存のＳＤＲＴＶで表示することが可能となる。
[31. Effect, etc.]
The HDR signal sent by broadcasting, package media such as Blu-ray, and Internet distribution such as OTT is converted into a pseudo HDR signal by performing HDR-pseudo HDR conversion processing. This makes it possible to display the HDR signal as a pseudo HDR image on the existing SDRTV.
［３２．ＥＯＴＦについて］
ここで、ＥＯＴＦについて、図３７Ａおよび図３７Ｂを用いて説明する。
[32. About EOTF]
Here, EOTF will be described with reference to FIGS. 37A and 37B.
図３７Ａは、ＨＤＲおよびＳＤＲのそれぞれに対応したＥＯＴＦ（Ｅｌｅｃｔｒｏ−Ｏｐｔｉｃａｌ Ｔｒａｎｓｆｅｒ Ｆｕｎｃｔｉｏｎ）の例について示す図である。 FIG. 37A is a diagram showing an example of EOTF (Electro-Optical Transfer Function) corresponding to each of HDR and SDR.
ＥＯＴＦは、一般的にガンマカーブと呼ばれるものであり、コード値と輝度値との対応を示し、コード値を輝度値に変換するものである。つまり、ＥＯＴＦは、複数のコード値と輝度値との対応関係を示す関係情報である。 The EOTF is generally called a gamma curve, shows the correspondence between the code value and the luminance value, and converts the code value into the luminance value. That is, the EOTF is the relational information indicating the correspondence between the plurality of code values and the luminance values.
また、図３７Ｂは、ＨＤＲおよびＳＤＲのそれぞれに対応した逆ＥＯＴＦの例について示す図である。 Further, FIG. 37B is a diagram showing an example of reverse EOTF corresponding to HDR and SDR, respectively.
逆ＥＯＴＦは、輝度値とコード値との対応を示し、ＥＯＴＦとは逆に輝度値を量子化してコード値に変換するものである。つまり、逆ＥＯＴＦは、輝度値と複数のコード値との対応関係を示す関係情報である。例えば、ＨＤＲに対応した映像の輝度値を１０ビットの階調のコード値で表現する場合、１０，０００ｎｉｔまでのＨＤＲの輝度範囲における輝度値は、量子化されて、０〜１０２３までの１０２４個の整数値にマッピングされる。つまり、逆ＥＯＴＦに基づいて量子化することで、１０，０００ｎｉｔまでの輝度範囲の輝度値（ＨＤＲに対応した映像の輝度値）を、１０ビットのコード値であるＨＤＲ信号に変換する。ＨＤＲに対応したＥＯＴＦ（以下、「ＨＤＲのＥＯＴＦ」という。）またはＨＤＲに対応した逆ＥＯＴＦ（以下、「ＨＤＲの逆ＥＯＴＦ」という。）においては、ＳＤＲに対応したＥＯＴＦ（以下、「ＳＤＲのＥＯＴＦ」という。）またはＳＤＲに対応した逆ＥＯＴＦ（以下、「ＳＤＲの逆ＥＯＴＦ」という。）よりも高い輝度値を表現することが可能であり、例えば、図３７Ａおよび図３７Ｂにおいては、輝度の最大値（ピーク輝度）は、１０，０００ｎｉｔである。つまり、ＨＤＲの輝度範囲は、ＳＤＲの輝度範囲を全て含み、ＨＤＲのピーク輝度は、ＳＤＲのピーク輝度より大きい。ＨＤＲの輝度範囲は、ＳＤＲの輝度範囲の最大値である１００ｎｉｔから、１０，０００ｎｉｔまで、最大値を拡大した輝度範囲である。 The inverse EOTF indicates the correspondence between the luminance value and the code value, and contrary to the EOTF, the luminance value is quantized and converted into a code value. That is, the inverse EOTF is the relational information indicating the correspondence between the luminance value and the plurality of code values. For example, when the brightness value of the image corresponding to HDR is expressed by the code value of the gradation of 10 bits, the brightness value in the brightness range of HDR up to 10,000 nits is quantized and 1024 pieces from 0 to 1023. Maps to an integer value of. That is, by quantization based on the inverse EOTF, the luminance value in the luminance range up to 10,000 nits (the luminance value of the image corresponding to HDR) is converted into the HDR signal which is a 10-bit code value. In the HDR-compatible EOTF (hereinafter referred to as "HDR EOTF") or the HDR-compatible reverse EOTF (hereinafter referred to as "HDR reverse EOTF"), the SDR-compatible EOTF (hereinafter, "SDR EOTF") It is possible to express a higher brightness value than the inverse EOTF corresponding to SDR (hereinafter, referred to as “inverse EOTF of SDR”). For example, in FIGS. 37A and 37B, the maximum brightness is obtained. The value (peak brightness) is 10,000 nits. That is, the luminance range of HDR includes the entire luminance range of SDR, and the peak luminance of HDR is larger than the peak luminance of SDR. The HDR luminance range is a luminance range in which the maximum value is expanded from 100 nits, which is the maximum value of the SDR luminance range, to 10,000 nits.
例えば、ＨＤＲのＥＯＴＦおよびＨＤＲの逆ＥＯＴＦは、一例として、米国映画テレビ技術者協会（ＳＭＰＴＥ）で規格化されたＳＭＰＴＥ ２０８４がある。 For example, HDR EOTFs and HDR reverse EOTFs include, for example, SMPTE 2084 standardized by the Society of Motion Picture and Television Engineers (SMPTE).
なお、以降の明細書中において、図３７Ａ及び図３７Ｂに記載されている０ｎｉｔからピーク輝度である１００ｎｉｔまでの輝度範囲は、第１輝度範囲と記載される場合がある。同様に、図３７Ａ及び図３７Ｂに記載されている、０ｎｉｔからピーク輝度である１０，０００ｎｉｔまでの輝度範囲は、第２輝度範囲と記載される場合がある。 In the following specifications, the luminance range from 0 nit to 100 nit, which is the peak luminance, shown in FIGS. 37A and 37B may be described as the first luminance range. Similarly, the luminance range from 0 nit to the peak luminance of 10,000 nit, which is shown in FIGS. 37A and 37B, may be described as the second luminance range.
［３３．変換装置および表示装置］
図３８は、実施の形態の変換装置および表示装置の構成を示すブロック図である。図３９は、実施の形態の変換装置および表示装置により行われる変換方法および表示方法を示すフローチャートである。
[33. Converter and display device]
FIG. 38 is a block diagram showing the configuration of the conversion device and the display device of the embodiment. FIG. 39 is a flowchart showing a conversion method and a display method performed by the conversion device and the display device of the embodiment.
図３８に示すように、変換装置１００は、ＨＤＲのＥＯＴＦ変換部１０１、輝度変換部１０２、逆輝度変換部１０３、および逆ＳＤＲのＥＯＴＦ変換部１０４を備える。また、表示装置２００は、表示設定部２０１、ＳＤＲのＥＯＴＦ変換部２０２、輝度変換部２０３、および表示部２０４を備える。
As shown in FIG. 38, the
変換装置１００および表示装置２００の各構成要素についての詳細な説明は、変換方法および表示方法の説明において行う。
A detailed description of each component of the
［３４．変換方法および表示方法］
変換装置１００が行う変換方法について、図３９を用いて説明する。なお、変換方法は、以下で説明するステップＳ１０１〜ステップＳ１０４を含む。
[34. Conversion method and display method]
The conversion method performed by the
まず、変換装置１００のＨＤＲのＥＯＴＦ変換部１０１は、逆ＨＤＲのＥＯＴＦ変換が行われたＨＤＲ映像を取得する。変換装置１００のＨＤＲのＥＯＴＦ変換部１０１は、取得したＨＤＲ映像のＨＤＲ信号に対して、ＨＤＲのＥＯＴＦ変換を実施する（Ｓ１０１）。これにより、ＨＤＲのＥＯＴＦ変換部１０１は、取得したＨＤＲ信号を、輝度値を示すリニアな信号に変換する。ＨＤＲのＥＯＴＦは、例えばＳＭＰＴＥ ２０８４がある。
First, the HDR
次に、変換装置１００の輝度変換部１０２は、ＨＤＲのＥＯＴＦ変換部１０１により変換されたリニアな信号を、ディスプレイ特性情報とコンテンツ輝度情報とを用いて変換する第１輝度変換を行う（Ｓ１０２）。第１輝度変換において、ＨＤＲの輝度範囲に対応した輝度値（以下、「ＨＤＲの輝度値」という。）を、ディスプレイの輝度範囲に対応した輝度値（以下、「ディスプレイ輝度値」という。）に変換する。詳細は後述する。
Next, the
上記のことから、ＨＤＲのＥＯＴＦ変換部１０１は、映像の輝度値が量子化されることで得られたコード値を示す第１輝度信号としてのＨＤＲ信号を取得する取得部として機能する。また、ＨＤＲのＥＯＴＦ変換部１０１および輝度変換部１０２は、取得部により取得されたＨＤＲ信号が示すコード値を、ディスプレイ（表示装置２００）の輝度範囲に基づいて決定する、ＨＤＲの輝度範囲の最大値（ＨＰＬ）よりも小さく、かつ、１００ｎｉｔよりも大きい最大値（ＤＰＬ）であるディスプレイの輝度範囲に対応するディスプレイ輝度値へ変換する変換部として機能する。
From the above, the HDR
より具体的には、ＨＤＲのＥＯＴＦ変換部１０１は、ステップＳ１０１において、取得したＨＤＲ信号と、ＨＤＲのＥＯＴＦとを用いて、取得したＨＤＲ信号が示す第１コード値としてのＨＤＲのコード値について、ＨＤＲのコード値にＨＤＲのＥＯＴＦにおいて関係付けられたＨＤＲの輝度値を決定する。なお、ＨＤＲ信号は、ＨＤＲの輝度範囲における輝度値と、複数のＨＤＲのコード値とを関係付けたＨＤＲの逆ＥＯＴＦを用いて、映像（コンテンツ）の輝度値が量子化されることで得られたＨＤＲのコード値を示す。
More specifically, the HDR
また、輝度変換部１０２は、ステップＳ１０２において、ステップＳ１０１で決定したＨＤＲの輝度値について、当該ＨＤＲの輝度値に予め関係付けられた、ディスプレイの輝度範囲に対応するディスプレイ輝度値を決定し、ＨＤＲの輝度範囲に対応するＨＤＲの輝度値を、ディスプレイの輝度範囲に対応するディスプレイ輝度値へ変換する第１輝度変換を行う。
Further, in step S102, the
また、変換装置１００は、ステップＳ１０２の前に、映像（コンテンツ）の輝度の最大値（ＣＰＬ：Ｃｏｎｔｅｎｔ Ｐｅａｋ ｌｕｍｉｎａｎｃｅ）および映像の平均輝度値（ＣＡＬ：Ｃｏｎｔｅｎｔ Ａｖｅｒａｇｅ ｌｕｍｉｎａｎｃｅ）の少なくとも一方を含むコンテンツ輝度情報をＨＤＲ信号に関する情報として取得している。ＣＰＬ（第１最大輝度値）は、例えば、ＨＤＲ映像を構成する複数の画像に対する輝度値のうちの最大値である。また、ＣＡＬは、例えば、ＨＤＲ映像を構成する複数の画像に対する輝度値の平均である平均輝度値である。
Further, before step S102, the
また、変換装置１００は、ステップＳ１０２の前に、表示装置２００から表示装置２００のディスプレイ特性情報を取得している。なお、ディスプレイ特性情報とは、表示装置２００が表示できる輝度の最大値（ＤＰＬ）、表示装置２００の表示モード（後述参照）、入出力特性（表示装置が対応するＥＯＴＦ）などの表示装置２００の表示特性を示す情報である。
Further, the
また、変換装置１００は、推奨表示設定情報（後述参照、以下、「設定情報」ともいう。）を表示装置２００に送信してもよい。
Further, the
次に、変換装置１００の逆輝度変換部１０３は、表示装置２００の表示モードに応じた逆輝度変換を行う。これにより、逆輝度変換部１０３は、ディスプレイの輝度範囲に対応した輝度値を、ＳＤＲの輝度範囲（０〜１００〔ｎｉｔ〕）に対応する輝度値に変換する第２輝度変換を行う（Ｓ１０３）。詳細は後述する。つまり、逆輝度変換部１０３は、ステップＳ１０２で得られたディスプレイ輝度値について、当該ディスプレイ輝度値に予め関係付けられた、１００ｎｉｔを最大値とするＳＤＲの輝度範囲に対応する第３輝度値としてのＳＤＲに対応した輝度値（以下、「ＳＤＲの輝度値」という。）ＳＤＲの輝度値を決定し、ディスプレイの輝度範囲に対応するディスプレイ輝度値を、ＳＤＲの輝度範囲に対応するＳＤＲの輝度値へ変換する第２輝度変換を行う。
Next, the reverse
そして、変換装置１００の逆ＳＤＲのＥＯＴＦ変換部１０４は、逆ＳＤＲのＥＯＴＦ変換を行うことで、疑似ＨＤＲ映像を生成する（Ｓ１０４）。つまり、逆ＳＤＲのＥＯＴＦ変換部１０４は、ＨＤＲの輝度範囲における輝度値と、複数の第３コード値とを関係付けた第３関係情報であるＳＤＲ（Ｓｔａｎｄａｒｄ Ｄｙｎａｍｉｃ Ｒａｎｇｅ）の逆ＥＯＴＦ（Ｅｌｅｃｔｒｏ−Ｏｐｔｉｃａｌ Ｔｒａｎｓｆｅｒ Ｆｕｎｃｔｉｏｎ）を用いて、決定したＳＤＲの輝度値を量子化し、量子化により得られた第３コード値を決定し、ＳＤＲの輝度範囲に対応するＳＤＲの輝度値を、第３コード値を示す第３輝度信号としてのＳＤＲ信号へ変換することで、疑似ＨＤＲ信号を生成する。なお、第３コード値は、ＳＤＲに対応したコード値であり、以下では、「ＳＤＲのコード値」という。つまり、ＳＤＲ信号は、ＳＤＲの輝度範囲における輝度値と、複数のＳＤＲのコード値とを関係付けたＳＤＲの逆ＥＯＴＦを用いて、映像の輝度値が量子化されることで得られたＳＤＲのコード値で表される。そして、変換装置１００は、ステップＳ１０４で生成した疑似ＨＤＲ信号（ＳＤＲ信号）を表示装置２００へ出力する。
Then, the
変換装置１００は、ＨＤＲ信号を逆量子化することで得られたＨＤＲの輝度値に対して、第１輝度変換および第２輝度変換を行うことで、疑似ＨＤＲに対応したＳＤＲの輝度値を生成し、ＳＤＲの輝度値をＳＤＲのＥＯＴＦを用いて量子化することで、疑似ＨＤＲに対応したＳＤＲ信号を生成する。なお、ＳＤＲの輝度値は、ＳＤＲに対応した０〜１００ｎｉｔの輝度範囲内の数値であるが、ディスプレイの輝度範囲に基づく変換を行っているため、ＨＤＲの輝度値に対してＨＤＲのＥＯＴＦおよびＳＤＲのＥＯＴＦを用いた輝度変換を行うことで得られたＳＤＲに対応した０〜１００ｎｉｔの輝度範囲内の輝度値とは異なる数値である。
The
次に、表示装置２００が行う表示方法について、図３９を用いて説明する。なお、表示方法は、以下で説明するステップＳ１０５〜ステップＳ１０８を含む。
Next, the display method performed by the
まず、表示装置２００の表示設定部２０１は、変換装置１００から取得した設定情報を用いて、表示装置２００の表示設定を設定する（Ｓ１０５）。ここで、表示装置２００は、ＳＤＲＴＶである。設定情報は、表示装置に対して推奨する表示設定を示す情報であり、疑似ＨＤＲ映像をどのようにＥＯＴＦし、どの設定で表示すれば美しい映像を表示することができるかを示す情報（つまり、表示装置２００の表示設定を最適な表示設定に切り替えるための情報）である。設定情報は、例えば、表示装置における出力時のガンマカーブ特性や、リビングモード（ノーマルモード）やダイナミックモード等の表示モード、バックライト（明るさ）の数値などを含む。また、ユーザに、表示装置２００の表示設定をマニュアル操作で変更することを促すようなメッセージを、表示装置２００（以下、「ＳＤＲディスプレイ」ともいう）に表示してもよい。詳細は後述する。
First, the
なお、表示装置２００は、ステップＳ１０５の前に、ＳＤＲ信号（疑似ＨＤＲ信号）と、映像の表示にあたって表示装置２００に対して推奨する表示設定を示す設定情報とを取得する。
Prior to step S105, the
また、表示装置２００は、ＳＤＲ信号（疑似ＨＤＲ信号）の取得を、ステップＳ１０６の前に行えばよく、ステップＳ１０５の後に行ってもよい。
Further, the
次に、表示装置２００のＳＤＲのＥＯＴＦ変換部２０２は、取得した疑似ＨＤＲ信号に対し、ＳＤＲのＥＯＴＦ変換を行う（Ｓ１０６）。つまり、ＳＤＲのＥＯＴＦ変換部２０２は、ＳＤＲ信号（疑似ＨＤＲ信号）を、ＳＤＲのＥＯＴＦを用いて逆量子化を行う。これにより、ＳＤＲのＥＯＴＦ変換部２０２は、ＳＤＲ信号が示すＳＤＲのコード値を、ＳＤＲの輝度値に変換する。
Next, the
そして、表示装置２００の輝度変換部２０３は、表示装置２００に設定された表示モードに応じた輝度変換を行う。これにより、輝度変換部２０３は、ＳＤＲの輝度範囲（０〜１００〔ｎｉｔ〕）に対応したＳＤＲの輝度値を、ディスプレイの輝度範囲（０〜ＤＰＬ〔ｎｉｔ〕）に対応したディスプレイ輝度値に変換する第３輝度変換を行う（Ｓ１０７）。詳細は後述する。
Then, the
上記のことから、表示装置２００は、ステップＳ１０６およびステップＳ１０７において、取得したＳＤＲ信号（疑似ＨＤＲ信号）が示す第３コード値を、ステップＳ１０５で取得した設定情報を用いて、ディスプレイの輝度範囲（０〜ＤＰＬ〔ｎｉｔ〕）に対応するディスプレイ輝度値へ変換する。
From the above, the
より具体的には、ＳＤＲ信号（疑似ＨＤＲ信号）からディスプレイ輝度値への変換では、ステップＳ１０６において、ＳＤＲの輝度範囲における輝度値と、複数の第３コード値とを関係付けたＥＯＴＦを用いて、取得したＳＤＲ信号が示すＳＤＲのコード値について、ＳＤＲのコード値にＳＤＲのＥＯＴＦで関係付けられたＳＤＲの輝度値を決定する。 More specifically, in the conversion from the SDR signal (pseudo-HDR signal) to the display luminance value, in step S106, the EOTF in which the luminance value in the luminance range of the SDR and the plurality of third code values are related is used. For the SDR code value indicated by the acquired SDR signal, the luminance value of the SDR associated with the SDR code value by the SDR EOTF is determined.
そして、ディスプレイ輝度値への変換では、ステップＳ１０７において、決定したＳＤＲの輝度値に予め関係付けられた、ディスプレイの輝度範囲に対応するディスプレイ輝度値を決定し、ＳＤＲの輝度範囲に対応するＳＤＲの輝度値を、ディスプレイの輝度範囲に対応するディスプレイ輝度値へ変換する第３輝度変換を行う。 Then, in the conversion to the display luminance value, in step S107, the display luminance value corresponding to the luminance range of the display, which is previously related to the determined luminance value of the SDR, is determined, and the SDR corresponding to the luminance range of the SDR A third luminance conversion is performed to convert the luminance value into a display luminance value corresponding to the luminance range of the display.
最後に、表示装置２００の表示部２０４は、変換したディスプレイ輝度値に基づいて、疑似ＨＤＲ映像を表示装置２００に表示する（Ｓ１０８）。
Finally, the
［３５．第１輝度変換］
次に、ステップＳ１０２の第１輝度変換（ＨＰＬ→ＤＰＬ）の詳細について、図４０Ａを用いて説明する。図４０Ａは、第１輝度変換の一例について説明するための図である。
[35. 1st brightness conversion]
Next, the details of the first luminance conversion (HPL → DPL) in step S102 will be described with reference to FIG. 40A. FIG. 40A is a diagram for explaining an example of the first luminance conversion.
変換装置１００の輝度変換部１０２は、ステップＳ１０１で得られたリニアな信号（ＨＤＲの輝度値）を、ディスプレイ特性情報と、ＨＤＲ映像のコンテンツ輝度情報とを用いて変換する第１輝度変換を行う。第１輝度変換は、ＨＤＲの輝度値（入力輝度値）を、ディスプレイピーク輝度（ＤＰＬ）を超えないディスプレイ輝度値（出力輝度値）に変換する。ＤＰＬは、ディスプレイ特性情報であるＳＤＲディスプレイの最大輝度および表示モードを用いて決定する。表示モードは、例えば、ＳＤＲディスプレイに暗めに表示するシアターモードや、明るめに表示するダイナミックモード等のモード情報である。表示モードが、例えば、ＳＤＲディスプレイの最大輝度が１，５００ｎｉｔであり、かつ、表示モードが最大輝度の５０％の明るさにするモードである場合、ＤＰＬは、７５０ｎｉｔとなる。ここで、ＤＰＬ（第２最大輝度値）とは、ＳＤＲディスプレイが現在設定されている表示モードにおいて表示できる輝度の最大値である。つまり、第１輝度変換では、ＳＤＲディスプレイの表示特性を示す情報であるディスプレイ特性情報を用いて、第２最大輝度値としてのＤＰＬを決定する。
The
また、第１輝度変換では、コンテンツ輝度情報のうちのＣＡＬとＣＰＬとを用い、ＣＡＬ付近以下の輝度値は、変換の前後で同一とし、ＣＰＬ付近以上の輝度値に対してのみ輝度値を変更する。つまり、図４０Ａに示すように、第１輝度変換では、当該ＨＤＲの輝度値がＣＡＬ以下の場合、当該ＨＤＲの輝度値を変換せず、当該ＨＤＲの輝度値を、ディスプレイ輝度値として決定し、当該ＨＤＲの輝度値がＣＰＬ以上の場合、第２最大輝度値としてのＤＰＬを、ディスプレイ輝度値として決定する。 Further, in the first luminance conversion, CAL and CPL of the content luminance information are used, the luminance values below the CAL are made the same before and after the conversion, and the luminance values are changed only for the luminance values near the CPL and above. do. That is, as shown in FIG. 40A, in the first luminance conversion, when the luminance value of the HDR is CAL or less, the luminance value of the HDR is not converted, and the luminance value of the HDR is determined as the display luminance value. When the luminance value of the HDR is CPL or more, the DPL as the second maximum luminance value is determined as the display luminance value.
また、第１輝度変換では、輝度情報のうちのＨＤＲ映像のピーク輝度（ＣＰＬ）を用い、ＨＤＲの輝度値がＣＰＬの場合、ＤＰＬを、ディスプレイ輝度値として決定する。 Further, in the first luminance conversion, the peak luminance (CPL) of the HDR image in the luminance information is used, and when the luminance value of HDR is CPL, the DPL is determined as the display luminance value.
なお、第１輝度変換では、図４０Ｂのように、ステップＳ１０１で得られたリニアな信号（ＨＤＲの輝度値）を、ＤＰＬを超えない値にクリップするように変換してもよい。このような輝度変換を行うことで、変換装置１００での処理を簡素化することができ、装置の縮小化、低電力化、処理の高速化が図れる。なお、図４０Ｂは、第１輝度変換の他の一例について説明するための図である。
In the first luminance conversion, as shown in FIG. 40B, the linear signal (HDR luminance value) obtained in step S101 may be converted so as to clip to a value not exceeding the DPL. By performing such luminance conversion, the processing in the
［３６−１．第２輝度変換］
次に、ステップＳ１０３の第２輝度変換（ＤＰＬ→１００〔ｎｉｔ〕）の詳細について、図４１を用いて説明する。図４１は、第２輝度変換について説明するための図である。
[36-1. Second brightness conversion]
Next, the details of the second luminance conversion (DPL → 100 [nit]) in step S103 will be described with reference to FIG. 41. FIG. 41 is a diagram for explaining the second luminance conversion.
変換装置１００の逆輝度変換部１０３は、ステップＳ１０２の第１輝度変換で変換されたディスプレイの輝度範囲（０〜ＤＰＬ〔ｎｉｔ〕）のディスプレイ輝度値に対し、表示モードに応じた逆輝度変換を施す。逆輝度変換は、ＳＤＲディスプレイによる表示モードに応じた輝度変換処理（ステップＳ１０７）が行われた場合に、ステップＳ１０２処理後のディスプレイの輝度範囲（０〜ＤＰＬ〔ｎｉｔ〕）のディスプレイ輝度値を取得できるようにするための処理である。つまり、第２輝度変換は、第３輝度変換の逆輝度変換である。
The reverse
上記の処理により、第２輝度変換は、ディスプレイの輝度範囲のディスプレイ輝度値（入力輝度値）を、ＳＤＲの輝度範囲のＳＤＲの輝度値（出力輝度値）に変換する。 By the above processing, the second luminance conversion converts the display luminance value (input luminance value) in the luminance range of the display into the luminance value (output luminance value) of SDR in the luminance range of SDR.
第２輝度変換では、ＳＤＲディスプレイの表示モードによって変換式を切り替える。例えば、ＳＤＲディスプレイの表示モードがノーマルモードの場合、ディスプレイ輝度値に正比例する正比例値に輝度変換する。また、第２輝度変換では、ＳＤＲディスプレイの表示モードがノーマルモードよりも高輝度画素をより明るく、かつ、低輝度画素をより暗くするダイナミックモードの場合、その逆関数を用いることで、低輝度画素のＳＤＲの輝度値は、ディスプレイ輝度値に正比例する正比例値より高い値に、高輝度画素のＳＤＲの輝度値は、ディスプレイ輝度値に正比例する正比例値より低い値に輝度変換する。つまり、第２輝度変換では、ステップＳ１０２において決定したディスプレイ輝度値について、ＳＤＲディスプレイの表示特性を示す情報であるディスプレイ特性情報に応じた輝度関係情報を用いて、当該ディスプレイ輝度値に関係付けられた輝度値をＳＤＲの輝度値として決定し、ディスプレイ特性情報に応じて輝度変換処理を切り替える。ここで、ディスプレイ特性情報に応じた輝度関係情報とは、例えば図４１に示すような、ＳＤＲディスプレイの表示パラメータ（表示モード）毎に定められた、ディスプレイ輝度値（入力輝度値）と、ＳＤＲの輝度値（出力輝度値）とを関係付けた情報である。 In the second luminance conversion, the conversion formula is switched depending on the display mode of the SDR display. For example, when the display mode of the SDR display is the normal mode, the brightness is converted into a direct proportional value that is directly proportional to the display brightness value. Further, in the second luminance conversion, when the display mode of the SDR display is the dynamic mode in which the high-luminance pixels are brighter and the low-luminance pixels are darker than in the normal mode, the low-luminance pixels are used by using the inverse function. The brightness value of the SDR is converted to a value higher than the direct proportional value that is directly proportional to the display luminance value, and the luminance value of the SDR of the high-luminance pixel is converted to a value lower than the direct proportional value that is directly proportional to the display luminance value. That is, in the second luminance conversion, the display luminance value determined in step S102 is related to the display luminance value by using the luminance-related information corresponding to the display characteristic information which is the information indicating the display characteristic of the SDR display. The brightness value is determined as the brightness value of the SDR, and the brightness conversion process is switched according to the display characteristic information. Here, the luminance-related information according to the display characteristic information includes the display luminance value (input luminance value) defined for each display parameter (display mode) of the SDR display and the SDR, as shown in FIG. 41, for example. This is information related to the luminance value (output luminance value).
［３６−２．第３輝度変換］
次に、ステップＳ１０７の第３輝度変換（１００→ＤＰＬ〔ｎｉｔ〕）の詳細について、図４２を用いて説明する。図４２は、第３輝度変換について説明するための図である。
[36-2. Third brightness conversion]
Next, the details of the third luminance conversion (100 → DPL [nit]) in step S107 will be described with reference to FIG. 42. FIG. 42 is a diagram for explaining the third luminance conversion.
表示装置２００の輝度変換部２０３は、ＳＤＲの輝度範囲（０〜１００〔ｎｉｔ〕）のＳＤＲの輝度値をステップＳ１０５で設定された表示モードに応じて（０〜ＤＰＬ〔ｎｉｔ〕）に変換する。本処理はＳ１０３のモード毎の逆輝度変換の逆関数となるように処理する。
The
第３輝度変換では、ＳＤＲディスプレイの表示モードによって変換式を切り替える。例えば、ＳＤＲディスプレイの表示モードがノーマルモードの場合（つまり、設定された表示パラメータがノーマルモードに対応したパラメータである場合）、ディスプレイ輝度値は、ＳＤＲの輝度値に正比例する正比例値に輝度変換する。また、第３輝度変換では、ＳＤＲディスプレイの表示モードがノーマルモードよりも高輝度画素をより明るく、かつ、低輝度画素をより暗くするダイナミックモードの場合、低輝度画素のディスプレイ輝度値は、ＳＤＲの輝度値に正比例する正比例値より低い値に、高輝度画素のディスプレイ輝度値は、ＳＤＲの輝度値に正比例する正比例値より高い値に輝度変換する。つまり、第３輝度変換では、ステップＳ１０６において決定したＳＤＲの輝度値について、ＳＤＲディスプレイの表示設定を示す表示パラメータに応じた輝度関係情報を用いて、当該ＳＤＲの輝度値に予め関係付けられた輝度値をディスプレイ輝度値として決定し、表示パラメータに応じて輝度変換処理を切り替える。ここで、表示パラメータに応じた輝度関係情報とは、例えば図４２に示すような、ＳＤＲディスプレイの表示パラメータ（表示モード）毎に定められた、ＳＤＲの輝度値（入力輝度値）と、ディスプレイ輝度値（出力輝度値）とを関係付けた情報である。 In the third luminance conversion, the conversion formula is switched depending on the display mode of the SDR display. For example, when the display mode of the SDR display is the normal mode (that is, when the set display parameter is a parameter corresponding to the normal mode), the display luminance value is converted into a direct proportional value which is directly proportional to the luminance value of the SDR. .. Further, in the third luminance conversion, when the display mode of the SDR display is the dynamic mode in which the high-luminance pixels are brighter and the low-luminance pixels are darker than in the normal mode, the display brightness value of the low-luminance pixels is the SDR. The display luminance value of the high-luminance pixel is converted to a value lower than the direct-proportional value that is directly proportional to the luminance value, and the display luminance value of the high-luminance pixel is converted to a value higher than the direct-proportional value that is directly proportional to the luminance value of SDR. That is, in the third luminance conversion, the luminance value of the SDR determined in step S106 is previously associated with the luminance value of the SDR by using the luminance-related information corresponding to the display parameter indicating the display setting of the SDR display. The value is determined as the display brightness value, and the brightness conversion process is switched according to the display parameters. Here, the luminance-related information according to the display parameters is the luminance value (input luminance value) of the SDR and the display luminance defined for each display parameter (display mode) of the SDR display, as shown in FIG. 42, for example. This is information related to the value (output luminance value).
［３７．表示設定］
次に、ステップＳ１０５の表示設定の詳細について、図４３を用いて説明する。図４３は、表示設定の詳細な処理を示すフローチャートである。
[37. Display settings]
Next, the details of the display setting in step S105 will be described with reference to FIG. 43. FIG. 43 is a flowchart showing detailed processing of the display setting.
ＳＤＲディスプレイの表示設定部２０１は、ステップＳ１０５において、下記のステップＳ２０１〜ステップＳ２０８の処理を行う。
In step S105, the
まず、表示設定部２０１は、設定情報を用いて、ＳＤＲディスプレイに設定されているＥＯＴＦ（ＳＤＲディスプレイ用ＥＯＴＦ）が、疑似ＨＤＲ映像（ＳＤＲ信号）の生成時に想定したＥＯＴＦと整合しているかどうかを判定する（Ｓ２０１）。
First, the
表示設定部２０１は、ＳＤＲディスプレイに設定されているＥＯＴＦが、設定情報が示すＥＯＴＦ（疑似ＨＤＲ映像に整合するＥＯＴＦ）と異なっていると判定した場合（Ｓ２０１でＹｅｓ）、ＳＤＲディスプレイ用ＥＯＴＦをシステム側で切り替え可能かを判定する（Ｓ２０２）。
When the
表示設定部２０１は、切り替え可能であると判定した場合、設定情報を用いて、ＳＤＲディスプレイ用ＥＯＴＦを適切なＥＯＴＦに切り替える（Ｓ２０３）。
When the
ステップＳ２０１〜ステップＳ２０３から、表示設定の設定（Ｓ１０５）では、ＳＤＲディスプレイに設定されているＥＯＴＦを、取得した設定情報に応じた推奨ＥＯＴＦに設定する。また、これにより、ステップＳ１０５の後に行われるステップＳ１０６では、推奨ＥＯＴＦを用いて、ＳＤＲの輝度値を決定することができる。 From steps S201 to S203, in the display setting setting (S105), the EOTF set in the SDR display is set to the recommended EOTF according to the acquired setting information. Further, as a result, in step S106 performed after step S105, the brightness value of SDR can be determined using the recommended EOTF.
システム側で切り替え可能でないと判定した場合（Ｓ２０２でＮｏ）、ＥＯＴＦをユーザがマニュアル操作で変更することを促すメッセージを画面に表示する（Ｓ２０４）。例えば、「表示ガンマを２．４に設定して下さい」というメッセージを画面に表示する。つまり、表示設定部２０１は、表示設定の設定（Ｓ１０５）において、ＳＤＲディスプレイに設定されているＥＯＴＦを切り替えできない場合、ＳＤＲディスプレイに設定されているＥＯＴＦ（ＳＤＲディスプレイ用ＥＯＴＦ）を、推奨ＥＯＴＦに切り替えることをユーザに促すためのメッセージを、ＳＤＲディスプレイに表示する。
When it is determined that the switching is not possible on the system side (No in S202), a message prompting the user to manually change the EOTF is displayed on the screen (S204). For example, the message "Please set the display gamma to 2.4" is displayed on the screen. That is, when the
次に、ＳＤＲディスプレイでは、疑似ＨＤＲ映像（ＳＤＲ信号）を表示するが、表示の前に設定情報を用いてＳＤＲディスプレイの表示パラメータが設定情報に合っているかを判定する（Ｓ２０５）。 Next, the SDR display displays a pseudo HDR image (SDR signal), and before the display, it is determined whether or not the display parameters of the SDR display match the setting information by using the setting information (S205).
表示設定部２０１は、ＳＤＲディスプレイに設定されている表示パラメータが、設定情報とは異なっていると判定した場合（Ｓ２０５でＹｅｓ）、ＳＤＲディスプレイの表示パラメータを、切り替え可能かを判定する（Ｓ２０６）。
When the
表示設定部２０１は、ＳＤＲディスプレイの表示パラメータを切り替え可能であると判定した場合（Ｓ２０６でＹｅｓ）、設定情報に合わせて、ＳＤＲディスプレイの表示パラメータを切り替える（Ｓ２０７）。
When the
ステップＳ２０４〜ステップＳ２０７から、表示設定の設定（Ｓ１０５）では、ＳＤＲディスプレイに設定されている表示パラメータを、取得した設定情報に応じた推奨表示パラメータに設定する。 From step S204 to step S207, in the display setting setting (S105), the display parameter set in the SDR display is set to the recommended display parameter according to the acquired setting information.
システム側で切り替え可能でないと判定した場合（Ｓ２０６でＮｏ）、ＳＤＲディスプレイに設定されている表示パラメータをユーザがマニュアル操作で変更することを促すメッセージを画面に表示する（Ｓ２０８）。例えば、「表示モードをダイナミックモードにし、バックライトを最大にして下さい」というメッセージを画面に表示する。つまり、設定（Ｓ１０５）では、ＳＤＲディスプレイに設定されている表示パラメータを切り替えできない場合、ＳＤＲディスプレイに設定されている表示パラメータを、推奨表示パラメータに切り替えることをユーザに促すためのメッセージを、ＳＤＲディスプレイに表示する。 When it is determined that the switching is not possible on the system side (No in S206), a message prompting the user to manually change the display parameters set in the SDR display is displayed on the screen (S208). For example, display the message "Set the display mode to dynamic mode and maximize the backlight" on the screen. That is, in the setting (S105), when the display parameter set in the SDR display cannot be switched, a message for prompting the user to switch the display parameter set in the SDR display to the recommended display parameter is sent to the SDR display. Display on.
［３８．変形例１］
以上のように、本出願において開示する技術の例示として、実施の形態を説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施の形態１にも適用可能である。また、上記実施の形態で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。
[38. Modification 1]
As described above, embodiments have been described as an example of the techniques disclosed in this application. However, the technique in the present disclosure is not limited to this, and can be applied to the first embodiment in which changes, replacements, additions, omissions, etc. are made as appropriate. It is also possible to combine the components described in the above embodiment to form a new embodiment.
そこで、以下では、他の実施の形態を例示する。 Therefore, in the following, other embodiments will be illustrated.
ＨＤＲ映像は、例えばＢｌｕ−ｒａｙ Ｄｉｓｃ、ＤＶＤ、インターネットの動画配信サイト、放送、ＨＤＤ内の映像である。 The HDR video is, for example, a Blu-ray Disc, a DVD, a video distribution site on the Internet, a broadcast, or a video in an HDD.
変換装置１００（ＨＤＲ→疑似ＨＤＲ変換処理部）は、ディスクプレイヤー、ディスクレコーダ、セットトップボックス、テレビ、パソコン、スマートフォンの内部に存在していてもよい。変換装置１００は、インターネット内のサーバ装置の内部に存在していてもよい。
The conversion device 100 (HDR → pseudo HDR conversion processing unit) may exist inside a disc player, a disc recorder, a set-top box, a television, a personal computer, or a smartphone. The
表示装置２００（ＳＤＲ表示部）は、例えばテレビ、パソコン、スマートフォンである。 The display device 200 (SDR display unit) is, for example, a television, a personal computer, or a smartphone.
変換装置１００が取得するディスプレイ特性情報は、表示装置２００からＨＤＭＩや他の通信プロトコルを用いてＨＤＭＩケーブルやＬＡＮケーブルを介して取得してもよい。変換装置１００が取得するディスプレイ特性情報は、インターネットを介して表示装置２００の機種情報等に含まれるディスプレイ特性情報を取得してもよい。また、ユーザがマニュアル操作を行い、ディスプレイ特性情報を、変換装置１００に設定してもよい。また、変換装置１００のディスプレイ特性情報の取得は、疑似ＨＤＲ映像生成（ステップＳ１０１〜Ｓ１０４）時の直前でもよいし、機器の初期設定時やディスプレイ接続時のタイミングでもよい。例えば、ディスプレイ特性情報の取得は、ディスプレイ輝度値への変換の直前に行ってもよいし、変換装置１００がＨＤＭＩケーブルで最初に表示装置２００に接続したタイミングで行ってもよい。
The display characteristic information acquired by the
また、ＨＤＲ映像のＣＰＬやＣＡＬは、コンテンツ１つに対して１つでもよいし、シーン毎に存在していてもよい。つまり、変換方法では、映像の複数のシーンのそれぞれに対応した輝度情報であって、当該シーン毎に、当該シーンを構成する複数の画像に対する輝度値のうちの最大値である第１最大輝度値と、当該シーンを構成する複数の画像に対する輝度値の平均である平均輝度値との少なくとも一方を含む輝度情報（ＣＰＬ、ＣＡＬ）を取得し、第１輝度変換では、複数のシーンのそれぞれについて、当該シーンに対応した輝度情報に応じてディスプレイ輝度値を決定してもよい。 Further, the CPL and CAL of the HDR video may be one for each content, or may exist for each scene. That is, in the conversion method, the first maximum luminance value which is the luminance information corresponding to each of the plurality of scenes of the video and is the maximum value among the luminance values for the plurality of images constituting the scene for each scene. And the luminance information (CPL, CAL) including at least one of the average luminance value which is the average of the luminance values for the plurality of images constituting the scene is acquired, and in the first luminance conversion, for each of the plurality of scenes, The display luminance value may be determined according to the luminance information corresponding to the scene.
また、ＣＰＬおよびＣＡＬは、ＨＤＲ映像と同じ媒体（Ｂｌｕ−ｒａｙ Ｄｉｓｃ、ＤＶＤ等）に同梱していてもよいし、変換装置１００がインターネットから取得する等、ＨＤＲ映像とは別の場所から取得してもよい。つまり、ＣＰＬおよびＣＡＬの少なくとも一方を含む輝度情報を映像のメタ情報として取得してもよいし、ネットワーク経由で取得してもよい。
Further, the CPL and CAL may be bundled in the same medium (Blu-ray Disc, DVD, etc.) as the HDR video, or acquired from a place different from the HDR video, such as the
また、変換装置１００の第１輝度変換（ＨＰＬ→ＤＰＬ）において、ＣＰＬ、ＣＡＬ、およびディスプレイピーク輝度（ＤＰＬ）は使用せずに、固定値を用いてもよい。また、その固定値を外部から変更可能にしてもよい。また、ＣＰＬ、ＣＡＬ、およびＤＰＬは、数種類で切り替えるようにしてもよく、例えば、ＤＰＬは２００ｎｉｔ、４００ｎｉｔ、８００ｎｉｔの３種類のみとするようにしてもよいし、ディスプレイ特性情報に最も近い値を使用するようにしてもよい。
Further, in the first luminance conversion (HPL → DPL) of the
また、ＨＤＲのＥＯＴＦはＳＭＰＴＥ ２０８４でなくてもよく、他の種類のＨＤＲのＥＯＴＦを用いてもよい。また、ＨＤＲ映像の最大輝度（ＨＰＬ）は１０，０００ｎｉｔでなくてもよく、例えば４，０００ｎｉｔや１，０００ｎｉｔでもよい。 Further, the HDR EOTF does not have to be SMPTE 2084, and other types of HDR EOTF may be used. Further, the maximum luminance (HPL) of the HDR image does not have to be 10,000 nits, and may be, for example, 4,000 nits or 1,000 nits.
また、コード値のビット幅は、例えば１６，１４，１２，１０，８ｂｉｔでもよい。 The bit width of the code value may be, for example, 16, 14, 12, 10, or 8 bits.
また、逆ＳＤＲのＥＯＴＦ変換は、ディスプレイ特性情報から決定するが、（外部からも変更可能な）固定の変換関数を用いてもよい。逆ＳＤＲのＥＯＴＦ変換は、例えばＲｅｃ． ＩＴＵ−Ｒ ＢＴ．１８８６で規定されている関数を用いてもよい。また、逆ＳＤＲのＥＯＴＦ変換の種類を数種類に絞り、表示装置２００の入出力特性に最も近いものを選択して使用するようにしてもよい。
Further, the EOTF conversion of the inverse SDR is determined from the display characteristic information, but a fixed conversion function (which can be changed from the outside) may be used. The EOTF conversion of the inverse SDR can be performed by, for example, Rec. ITU-R BT. The functions specified in 1886 may be used. Further, the types of EOTF conversion of the inverse SDR may be narrowed down to several types, and the one closest to the input / output characteristics of the
また、表示モードは、固定のモードを使うようにしてもよく、ディスプレイ特性情報の中に含めなくてもよい。 Further, the display mode may be a fixed mode and may not be included in the display characteristic information.
また、変換装置１００は、設定情報を送信しなくてもよく、表示装置２００では固定の表示設定としてもよいし、表示設定を変更しなくてもよい。この場合、表示設定部２０１は不要となる。また、設定情報は、疑似ＨＤＲ映像かどうかのフラグ情報でもよく、例えば、疑似ＨＤＲ映像である場合は最も明るく表示する設定に変更するようにしてもよい。つまり、表示設定の設定（Ｓ１０５）では、取得した設定情報が、ＤＰＬを用いて変換された疑似ＨＤＲ映像を示す信号であることを示す場合、表示装置２００の明るさ設定を最も明るく表示する設定に切り替えてもよい。
Further, the
［３９．変形例２］
また、変換装置１００の第１輝度変換（ＨＰＬ→ＤＰＬ）は例えば次の算式で変換する。
[39. Modification 2]
Further, the first luminance conversion (HPL → DPL) of the
ここで、Ｌは、０〜１に正規化された輝度値を示し、Ｓ１、Ｓ２、ａ、ｂ、ＭはＣＡＬ、ＣＰＬ、およびＤＰＬに基づいて設定する値である。ｌｎは自然対数である。Ｖは０〜１に正規化された変換後の輝度値である。図４０Ａの例のように、ＣＡＬを３００ｎｉｔとし、ＣＰＬを２，０００ｎｉｔとし、ＤＰＬを７５０ｎｉｔとし、ＣＡＬ ＋ ５０ｎｉｔまでは変換しないとし、３５０ｎｉｔ以上に対して変換する場合、それぞれの値は例えば次のような値となる。 Here, L indicates a luminance value normalized to 0 to 1, and S1, S2, a, b, and M are values set based on CAL, CPL, and DPL. ln is the natural logarithm. V is the converted luminance value normalized to 0 to 1. As in the example of FIG. 40A, when CAL is 300 nits, CPL is 2,000 nits, DPL is 750 nits, CAL + 50 nits are not converted, and conversion is performed for 350 nits or more, the respective values are, for example, as follows. It becomes a value like.
Ｓ１ ＝ ３５０／１００００
Ｓ２ ＝ ２０００／１００００
Ｍ ＝ ７５０／１００００
ａ ＝ ０．０２３
ｂ ＝ Ｓ１ − ａ＊ｌｎ（Ｓ１） ＝ ０．１１２１０５
S1 = 350/10000
S2 = 2000/10000
M = 750/10000
a = 0.023
b = S1-a * ln (S1) = 0.112105
つまり、第１輝度変換では、ＳＤＲの輝度値が、平均輝度値（ＣＡＬ）と第１最大輝度値（ＣＰＬ）との間である場合、自然対数を用いて、当該ＨＤＲの輝度値に対応するディスプレイ輝度値を決定する。 That is, in the first luminance conversion, when the luminance value of the SDR is between the average luminance value (CAL) and the first maximum luminance value (CPL), the natural logarithm is used to correspond to the luminance value of the HDR. Determine the display brightness value.
［４０．効果等］
ＨＤＲ映像のコンテンツピーク輝度やコンテンツ平均輝度等の情報を用いてＨＤＲ映像を変換することにより、コンテンツに応じて変換式を変えることができ、ＨＤＲの階調をなるべく保つように変換することが可能となる。また、暗すぎる、明るすぎるといった悪影響を抑制することができる。具体的には、ＨＤＲ映像のコンテンツピーク輝度をディスプレイピーク輝度にマッピングすることにより、階調をなるべく保つようにしている。また、平均輝度付近以下の画素値を変えないことにより、全体的な明るさが変わらないようにしている。
[40. Effect, etc.]
By converting the HDR video using information such as the content peak brightness and content average brightness of the HDR video, the conversion formula can be changed according to the content, and it is possible to convert so as to maintain the HDR gradation as much as possible. It becomes. In addition, adverse effects such as being too dark and being too bright can be suppressed. Specifically, the gradation is maintained as much as possible by mapping the content peak brightness of the HDR video to the display peak brightness. In addition, the overall brightness is kept unchanged by not changing the pixel values below the average brightness.
また、ＳＤＲディスプレイのピーク輝度値および表示モードを用いてＨＤＲ映像を変換することにより、ＳＤＲディスプレイの表示環境に応じて変換式を変えることができ、ＳＤＲディスプレイの性能に合わせて、ＨＤＲ感のある映像（疑似ＨＤＲ映像）を、元のＨＤＲ映像と同様の階調や明るさで表示することができる。具体的には、ＳＤＲディスプレイの最大輝度および表示モードによってディスプレイピーク輝度を決定し、そのピーク輝度値を超えないようにＨＤＲ映像を変換することにより、ＳＤＲディスプレイで表示可能な明るさまではＨＤＲ映像の階調をほとんど減らさずに表示し、表示不可能な明るさは表示可能な明るさまで輝度値を下げている。 Further, by converting the HDR image using the peak brightness value and the display mode of the SDR display, the conversion formula can be changed according to the display environment of the SDR display, and there is a feeling of HDR according to the performance of the SDR display. An image (pseudo HDR image) can be displayed with the same gradation and brightness as the original HDR image. Specifically, the display peak brightness is determined by the maximum brightness and display mode of the SDR display, and the HDR image is converted so as not to exceed the peak brightness value. The gradation is displayed with almost no reduction, and the brightness value that cannot be displayed is lowered to the brightness that can be displayed.
以上により、表示不可能な明るさ情報を削減し、表示可能な明るさの階調を落とさず、元のＨＤＲ映像に近い形で表示することが可能となる。例えば、ピーク輝度１，０００ｎｉｔのディスプレイ用には、ピーク輝度１，０００ｎｉｔに抑えた疑似ＨＤＲ映像に変換することにより、全体的な明るさを維持し、ディスプレイの表示モードによって輝度値は変わる。このため、ディスプレイの表示モードに応じて、輝度の変換式を変更するようにしている。もし、ディスプレイのピーク輝度よりも大きな輝度を疑似ＨＤＲ映像で許容すると、その大きな輝度をディスプレイ側でのピーク輝度に置き換えて表示する場合があり、その場合は元のＨＤＲ映像よりも全体的に暗くなる。逆にディスプレイのピーク輝度よりも小さな輝度を最大輝度として変換すると、その小さな輝度をディスプレイ側でのピーク輝度に置き換え、元のＨＤＲ映像よりも全体的に明るくなる。しかもディスプレイ側のピーク輝度よりも小さいためにディスプレイの階調に関する性能を最大限使っていないことになる。 As described above, it is possible to reduce the brightness information that cannot be displayed, and to display the image in a form close to the original HDR image without reducing the gradation of the brightness that can be displayed. For example, for a display having a peak brightness of 1,000 nits, the overall brightness is maintained by converting to a pseudo HDR image having a peak brightness of 1,000 nits, and the brightness value changes depending on the display mode of the display. Therefore, the brightness conversion formula is changed according to the display mode of the display. If a brightness larger than the peak brightness of the display is allowed in the pseudo HDR image, the large brightness may be replaced with the peak brightness on the display side and displayed, in which case the overall brightness is darker than the original HDR image. Become. On the contrary, when the brightness smaller than the peak brightness of the display is converted as the maximum brightness, the small brightness is replaced with the peak brightness on the display side, and the image becomes brighter as a whole than the original HDR image. Moreover, since it is smaller than the peak brightness on the display side, the performance related to the gradation of the display is not used to the maximum.
また、ディスプレイ側では、設定情報を用いて表示設定を切り替えることにより、疑似ＨＤＲ映像をよりよく表示することが可能となる。例えば、明るさを暗く設定している場合には高輝度表示ができないため、ＨＤＲ感が損なわれる。その場合には表示設定を変更するもしくは、変更してもらうよう促すメッセージを表示することにより、ディスプレイの性能を最大限引出し、高階調な映像を表示できるようにする。 Further, on the display side, by switching the display setting using the setting information, it is possible to better display the pseudo HDR image. For example, when the brightness is set to be dark, high-luminance display cannot be performed, so that the HDR feeling is impaired. In that case, the display settings are changed or a message prompting the user to change the display is displayed to maximize the performance of the display so that a high-gradation image can be displayed.
（全体のまとめ）
以上、本開示の一つまたは複数の態様に係る再生方法および再生装置について、実施の形態に基づいて説明したが、本開示は、この実施の形態に限定されるものではない。本開示の趣旨を逸脱しない限り、当業者が思いつく各種変形を本実施の形態に施したもの、異なる実施の形態における構成要素を組み合わせて構築される形態なども、本開示の一つまたは複数の態様の範囲内に含まれてもよい。
(Overall summary)
The reproduction method and the reproduction apparatus according to one or more aspects of the present disclosure have been described above based on the embodiment, but the present disclosure is not limited to this embodiment. As long as it does not deviate from the gist of the present disclosure, one or more of the present embodiments may be modified by those skilled in the art, or may be constructed by combining components in different embodiments. It may be included within the scope of the embodiment.
例えば、上記各実施の形態において、各構成要素は、回路などの専用のハードウェアで構成されるか、各構成要素に適したソフトウェアプログラムを実行することによって実現されてもよい。各構成要素は、ＣＰＵまたはプロセッサなどのプログラム実行部が、ハードディスクまたは半導体メモリなどの記録媒体に記録されたソフトウェアプログラムを読み出して実行することによって実現されてもよい。 For example, in each of the above embodiments, each component may be configured by dedicated hardware such as a circuit, or may be realized by executing a software program suitable for each component. Each component may be realized by a program execution unit such as a CPU or a processor reading and executing a software program recorded on a recording medium such as a hard disk or a semiconductor memory.
本開示は、コンテンツデータ生成装置、Ｂｌｕ−ｒａｙ機器等の映像ストリーム伝送装置、又はテレビ等の映像表示装置に適用できる。 The present disclosure can be applied to a content data generation device, a video stream transmission device such as a Blu-ray device, or a video display device such as a television.
１００ 変換装置
１０１ ＥＯＴＦ変換部
１０２ 輝度変換部
１０３ 逆輝度変換部
１０４ 逆ＳＤＲのＥＯＴＦ変換部
２００，５１０ 表示装置
２０１ 表示設定部
２０２ ＳＤＲのＥＯＴＦ変換部
２０３ 輝度変換部
２０４ 表示部
４００，５００，５００Ａ データ出力装置
４０１，５０１ ビデオ復号部
４０２，５０２ 外部メタ取得部
４０３，５０３ ＨＤＲメタ解釈部
４０４，５０４ ＨＤＲ制御情報生成部
４０５，５０５，５０５Ａ ＤＲ変換部
４０６，５０６ ＨＤＭＩ出力部
５０７ ＤＣ部
100
Claims (2)
映像信号を取得する取得部と、
前記表示装置から、前記表示装置が対応している輝度の変換方式を示す第１の情報、を受信する受信部と、
前記映像信号の輝度変換を行う輝度変換部と、
前記映像信号を出力する出力部と、
前記第１の情報、及び当該再生装置が対応している輝度の変換方式を示す第２の情報に基づいて、輝度変換を前記表示装置又は当該再生装置のどちらで行うかを決定する制御部と、
を有し、
前記制御部が、輝度変換を当該再生装置で行うと決定した場合、前記出力部は前記第２の情報に基づいて前記輝度変換部で輝度変換を行った前記映像信号を出力し、
前記制御部が、輝度変換を前記表示装置で行うと決定した場合、前記出力部は前記輝度変換部で変換を行わない前記映像信号を出力する、
再生装置。 A playback device connected to a display device
The acquisition unit that acquires the video signal and
A receiving unit that receives from the display device the first information indicating the brightness conversion method supported by the display device.
A luminance conversion unit that converts the luminance of the video signal and
An output unit that outputs the video signal and
Based on the first information and the second information indicating the brightness conversion method supported by the reproduction device, a control unit that determines whether the brightness conversion is performed by the display device or the reproduction device. ,
Have,
When the control unit determines that the luminance conversion is performed by the reproduction device, the output unit outputs the video signal whose luminance conversion is performed by the luminance conversion unit based on the second information.
When the control unit determines that the luminance conversion is performed by the display device, the output unit outputs the video signal that is not converted by the luminance conversion unit.
Playback device.
請求項１記載の再生装置。 When the control unit determines that the brightness conversion is performed by the display device, the output unit uses the brightness conversion method shown in the first information together with the video signal that is not converted by the brightness conversion unit. Output the metadata required to perform luminance conversion,
The reproduction device according to claim 1.
Applications Claiming Priority (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US201462018010P | 2014-06-27 | 2014-06-27 | |
| US62/018,010 | 2014-06-27 | ||
| JP2015114300 | 2015-06-04 | ||
| JP2015114300 | 2015-06-04 | ||
| JP2019133084A JP2019216431A (en) | 2014-06-27 | 2019-07-18 | Display |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019133084A Division JP2019216431A (en) | 2014-06-27 | 2019-07-18 | Display |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2021153299A true JP2021153299A (en) | 2021-09-30 |
| JP7170236B2 JP7170236B2 (en) | 2022-11-14 |
Family
ID=68807437
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019133084A Pending JP2019216431A (en) | 2014-06-27 | 2019-07-18 | Display |
| JP2021085151A Active JP7170236B2 (en) | 2014-06-27 | 2021-05-20 | playback device |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019133084A Pending JP2019216431A (en) | 2014-06-27 | 2019-07-18 | Display |
Country Status (2)
| Country | Link |
|---|---|
| JP (2) | JP2019216431A (en) |
| MX (1) | MX2019005231A (en) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2021136492A (en) * | 2020-02-25 | 2021-09-13 | セイコーエプソン株式会社 | Operating method for electronic apparatus, and electronic apparatus |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011119828A (en) * | 2009-12-01 | 2011-06-16 | Renesas Electronics Corp | Video conversion device, recording medium reader, video playback device, and video playback information transmission method |
| WO2012172460A1 (en) * | 2011-06-14 | 2012-12-20 | Koninklijke Philips Electronics N.V. | Graphics processing for high dynamic range video |
| WO2013046095A1 (en) * | 2011-09-27 | 2013-04-04 | Koninklijke Philips Electronics N.V. | Apparatus and method for dynamic range transforming of images |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8194997B2 (en) * | 2006-03-24 | 2012-06-05 | Sharp Laboratories Of America, Inc. | Methods and systems for tone mapping messaging |
-
2016
- 2016-12-14 MX MX2019005231A patent/MX2019005231A/en unknown
-
2019
- 2019-07-18 JP JP2019133084A patent/JP2019216431A/en active Pending
-
2021
- 2021-05-20 JP JP2021085151A patent/JP7170236B2/en active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011119828A (en) * | 2009-12-01 | 2011-06-16 | Renesas Electronics Corp | Video conversion device, recording medium reader, video playback device, and video playback information transmission method |
| WO2012172460A1 (en) * | 2011-06-14 | 2012-12-20 | Koninklijke Philips Electronics N.V. | Graphics processing for high dynamic range video |
| WO2013046095A1 (en) * | 2011-09-27 | 2013-04-04 | Koninklijke Philips Electronics N.V. | Apparatus and method for dynamic range transforming of images |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2019216431A (en) | 2019-12-19 |
| MX2019005231A (en) | 2019-09-10 |
| JP7170236B2 (en) | 2022-11-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6671022B2 (en) | Display device, display method, and computer program | |
| JP6566320B2 (en) | Data output device and data output method | |
| JP6573238B2 (en) | Display device, conversion device, display method, and computer program | |
| JP6566271B2 (en) | Transmission method and playback apparatus | |
| JP6512458B2 (en) | Data reproduction method and reproduction apparatus | |
| WO2015198552A1 (en) | Content data generating method, video stream transmission method and video display method | |
| JP6731627B2 (en) | Method Performed on Playback Device and Playback Device | |
| JP7170236B2 (en) | playback device | |
| JP2017139511A (en) | Content data generation method, image stream transmission method, and image display method | |
| JP6928885B2 (en) | Display device, display method and computer program | |
| JP6751893B2 (en) | Reproduction method, reproduction device, display method and display device | |
| JP6643669B2 (en) | Display device and display method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210520 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220512 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220524 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220707 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220927 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221020 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 7170236 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |