CN108432236B - 图像拍摄***和图像拍摄方法 - Google Patents

图像拍摄***和图像拍摄方法 Download PDF

Info

Publication number
CN108432236B
CN108432236B CN201680076713.3A CN201680076713A CN108432236B CN 108432236 B CN108432236 B CN 108432236B CN 201680076713 A CN201680076713 A CN 201680076713A CN 108432236 B CN108432236 B CN 108432236B
Authority
CN
China
Prior art keywords
dynamic range
video
image capturing
sdr
hdr
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680076713.3A
Other languages
English (en)
Other versions
CN108432236A (zh
Inventor
神谷浩二
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN108432236A publication Critical patent/CN108432236A/zh
Application granted granted Critical
Publication of CN108432236B publication Critical patent/CN108432236B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/76—Circuitry for compensating brightness variation in the scene by influencing the image signals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/90—Dynamic range modification of images or parts thereof
    • G06T5/92—Dynamic range modification of images or parts thereof based on global image properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/40—Picture signal circuits
    • H04N1/407—Control or modification of tonal gradation or of extreme levels, e.g. background level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/20—Circuitry for controlling amplitude response
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20172—Image enhancement details
    • G06T2207/20208—High dynamic range [HDR] image processing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)
  • Television Systems (AREA)
  • Facsimile Image Signal Circuits (AREA)

Abstract

一种图像拍摄***，包括：图像拍摄单元，该图像拍摄单元通过捕获被摄体的图像来获得像素信号；以及处理电路，该处理电路根据由所述图像拍摄单元生成的所述像素信号来生成第一动态范围中的第一视频信号，并且生成与所述第一动态范围有相关性的第二动态范围中的第二视频信号。

Description

图像拍摄***和图像拍摄方法
技术领域
本技术涉及图像拍摄***、图像拍摄方法和程序，利用该图像拍摄***、图像拍摄方法和程序，可以根据通过由图像拍摄设备的图像拍摄而获得的像素信号来生成具有不同动态范围的两种类型的视频。
背景技术
在高动态范围(HDR)成像中，可以表达具有宽动态范围的视频并且实现高亮度表达和具有高亮度的颜色的表达，这些表达已经无法通过具有可在正常监视器上显示的标准动态范围的标准动态范围(SDR)视频信号来充分表达。
专利文献1公开了一种对HDR视频和LDR视频一起进行编码的方法。
引用列表
专利文献
专利文献1：日本专利申请特开No.2015-506623
发明内容
技术问题
本技术旨在解决在根据通过由图像拍摄单元的图像拍摄而获得的像素信号来同时生成具有不同动态范围的多个视频(诸如HDR视频和SDR视频)的情况下的各种问题。
问题的解决方案
为了解决上述问题，根据本技术的一个实施例的图像拍摄***包括处理电路，该处理电路根据由图像拍摄单元生成的像素信号来生成具有第一动态范围的第一视频信号，并且生成具有与第一动态范围相关的第二动态范围的第二视频信号，该图像拍摄单元捕获被摄体以获得像素信号。
在该图像拍摄***中，该处理电路可以根据由图像拍摄单元获得的像素信号同时生成HDR视频和SDR视频。另外，在该图像拍摄***中，由于该处理电路根据像素信号生成具有与第一视频信号的第一动态范围相关的第二动态范围的第二视频信号，因此在第一视频信号的视在亮度通过光圈调整而被改变的情况下，可以对与第一视频信号同时创建的第二视频信号的视在亮度进行等效改变。
该处理电路可被配置为基于用于设置第一动态范围与第二动态范围之间的相关性的信息，在使用第一动态范围作为基准时设置第二动态范围。
该处理电路可被配置为基于用于设置相关性的信息来设置用于生成第一视频信号的像素信号的第一增益与用于生成第二视频信号的像素信号的第二增益之间的比例。
该处理电路可被配置为根据通过对像素信号执行伽马信号处理而获得的信号来生成具有第一动态范围的第一视频信号。
第一视频信号可以是标准动态范围(SDR)视频，而第二视频信号可以是高动态范围(HDR)视频。
根据本技术的图像拍摄***还可以包括显示器，该显示器显示由该处理电路生成的第一视频信号。
该显示器可以是取景器。
该处理电路可以基于用于设置相关性的信息来执行在该显示器上显示第一动态范围与第二动态范围之间的相关性的处理。
在根据本技术的图像拍摄***中，在该显示器上显示第一视频信号时，基于光圈调整输入来执行光圈调整处理。
根据本技术的另一方面的图像拍摄方法包括：
由图像拍摄单元捕获被摄体以生成像素信号；以及
由处理电路根据由该图像拍摄单元生成的像素信号来生成具有第一动态范围的第一视频信号，并且生成具有与第一动态范围相关的第二动态范围的第二视频信号。
根据本技术的另一方面的程序是使计算机用作处理电路的程序，该处理电路根据由图像拍摄单元生成的像素信号来生成具有第一动态范围的第一视频信号，并且生成具有与第一动态范围相关的第二动态范围的第二视频信号，该图像拍摄单元捕获被摄体以获得像素信号。
根据本技术的另一方面的图像拍摄装置包括：
图像拍摄单元，该图像拍摄单元捕获被摄体以获得像素信号；以及
处理电路，该处理电路根据由该图像拍摄单元生成的像素信号来生成具有第一动态范围的第一视频信号，并且生成具有与第一动态范围相关的第二动态范围的第二视频信号。
发明的有利效果
如上所述，根据本技术，可以解决在根据通过由图像拍摄单元的图像拍摄而获得的像素信号来同时生成具有不同动态范围的多个视频(诸如HDR视频和SDR视频)的情况下的各种问题。
附图说明
[图1]示出根据本技术的第一实施例的图像拍摄***1的整体硬件配置的框图。
[图2]示出图1所示的图像拍摄***1中的HDR处理单元22和SDR处理单元23的功能配置的框图。
[图3]示出在1：1设定下的SDR视频和HDR视频的动态范围之间的关系的示图。
[图4]示出在HDR对比度双倍设定下的SDR视频和HDR视频的动态范围之间的关系的示图。
[图5]示出在SDR-D-Range-Gamma 350％设定下的SDR视频和HDR视频的动态范围之间的关系的示图。
[图6]示出在HDR对比度双倍且SDR-D-Range-Gamma 220％设定下的SDR视频和HDR视频的动态范围之间的关系的示图。
[图7]示出根据本技术的图像拍摄***的修改示例1的框图。
[图8]示出根据本技术的图像拍摄***的修改示例2的框图。
[图9]示出根据本技术的图像拍摄***的修改示例3的框图。
[图10]示出根据本技术的图像拍摄***的修改示例4的框图。
具体实施方式
在下文中，将描述本技术的实施例。
<第一实施例>
[图像拍摄***的硬件配置]
图1是示出根据本技术的第一实施例的图像拍摄***的整体硬件配置的框图。
如图所示，该图像拍摄***1包括图像拍摄装置10和相机控制单元20。图像拍摄装置10和相机控制单元20经由诸如光纤之类的相机电缆13而连接。
图像拍摄装置10包括包含用于图像拍摄的透镜组的光学***11、图像拍摄设备12、预处理器13、发送单元14和CPU 15。
图像拍摄设备12是诸如互补金属氧化物半导体(CMOS)器件和电荷耦合器件(CCD)之类的图像传感器，并且将经由光学***(未示出)获取的光转换为与光强度相对应的电力像素信号。
应当注意的是，在根据本技术的图像拍摄***1的配置中，“图像拍摄单元”对应于上述的图像拍摄装置10。
预处理器13执行诸如对由图像拍摄设备12获得的像素信号的缺陷校正和透镜像差校正之类的信号校正处理。
发送单元14执行将从预处理器13输出的像素信号经由相机电缆13发送到相机控制单元20的处理。具体而言，由发送单元14发送到相机控制单元20的像素信号是尚未经受与增益或动态范围有关的处理、解拜耳(debayer)处理、伽马信号处理等的原始(RAW)图像信号。
同时，相机控制单元20包括发送单元21、HDR处理单元22、SDR处理单元23和CPU24。
发送单元21经由相机电缆13接收从图像拍摄装置10发送的像素信号，并且将像素信号供应给HDR处理单元22和SDR处理单元23。
HDR处理单元22执行根据从发送单元21供应的像素信号来生成HDR视频的处理。
SDR处理单元23执行根据从发送单元21供应的像素信号来生成SDR视频的处理。
HDR处理单元22和SDR处理单元23由一个或多个集成电路等构成，并且对应于本技术的配置中的处理电路。
CPU 24是控制相机控制单元20的各个部分的控制器。CPU 24能够与经由诸如局域网(LAN)之类的通信信道50连接的操作装置40进行通信。操作装置40包括显示器41、操作输入单元42和控制单元43。操作装置40可以例如由诸如个人计算机之类的信息处理装置、用于相机控制的专用控制面板等构成。操作输入单元42可以由例如操作键、鼠标、轨迹球、刻度盘、控制杆、触摸传感器面板、遥控器等构成。操作装置40的控制单元43由诸如CPU之类的电路构成，接收来自诸如视频工程师(VE)之类的创作者的各种控制命令和设定信息，并且经由通信信道50与相机控制单元20的CPU 24进行通信。
接下来，将描述相机控制单元20的HDR处理单元22和SDR处理单元23的配置。
[HDR处理单元22和SDR处理单元23的配置]
图2是示出HDR处理单元22和SDR处理单元23的功能配置的框图。
HDR处理单元22包括HDR增益调整单元221、矩阵处理单元223、黑电平校正单元225、细节处理单元227、OETF单元228和格式化器229。
除了控制主增益之外，HDR增益调整单元221还控制用于白平衡调整的RGB增益。
矩阵处理单元223对已经经过HDR增益调整单元221的像素信号执行解拜耳处理、线性矩阵处理等，并且获得彩色图像数据。
黑电平校正单元225执行对彩色图像数据的黑电平校正。
细节处理单元227执行对彩色图像数据的细节处理。
OETF单元228通过利用用于HDR的光电转换功能(OETF)对彩色图像数据执行灰度压缩来执行伽马信号处理。
格式化器229将已经经过OETF单元228的彩色图像数据转换为HDR视频传输格式。
接下来，将描述SDR处理单元23的配置。
SDR处理单元23包括分辨率转换单元230、SDR增益调整单元231、矩阵处理单元233、黑电平校正单元235、拐点/细节处理单元237、伽马处理单元238和格式化器239。
分辨率转换单元230将从图像拍摄装置10发送的像素信号的分辨率(例如，4K分辨率)转换为HD的分辨率等。
SDR增益调整单元231基于相对增益来控制主增益，并且还控制用于白平衡调整的RGB增益。这里，相对增益是用于设置SDR视频的动态范围(第一动态范围)与HDR视频的动态范围(第二动态范围)之间的相关性的信息。基于该相对增益，SDR增益调整单元231调整SDR增益调整单元231的主增益与HDR增益调整单元221的主增益的比例。CPU 24针对SDR增益调整单元231来设置相对增益。
矩阵处理单元233对已经经过SDR增益调整单元231的像素信号执行解拜耳处理、线性矩阵处理等，以获得彩色图像数据。
黑电平校正单元235执行对彩色图像数据的黑电平校正。
拐点/细节处理单元237对彩色图像数据执行拐点(KNEE)校正和细节处理。
伽马处理单元238针对由SDR增益调整单元231设置的SDR动态范围执行伽马处理和针对显示的伽马处理。
格式化器239将彩色图像数据转换成SDR视频传输格式。
[本实施例的图像拍摄***1所要解决的问题]
在HDR视频中，由于宽动态范围，视频由于超出范围而发生破损很难，即使拍摄的亮度基准被改变，视频也很好地表现为视频表达。但是，相反，视频变得比创作者想要的水平更亮，或者亮度表达倾向于因场景而异。
在典型的HDR视频创作领域中，以宽动态范围尽可能线性地记录由图像拍摄装置获得的像素信号，并且在后期制作中执行较小的视频信号调整以便适于观看，从而获得具有创作者想要的亮度的HDR视频。然而，在运动广播等中的HDR实况广播中，例如，需要实时创建HDR视频。在这方面，HDR拍摄需要某种亮度基准，但这种基准尚不存在。
另外，尽管HDR成像预计会成为未来视频拍摄领域的主流，但是HDR视频和SDR视频共存的状态预计未来会持续一段时间。因此，需要一种适用于HDR视频和SDR视频共存的状态的图像拍摄***。本实施例的图像拍摄***至少可以解决上述各个问题。
应当注意的是，HDR视频的亮度动态范围比SDR视频的亮度动态范围更宽。例如，假定SDR视频的亮度动态范围是0至100％，则HDR视频的亮度动态范围例如是100％至1300％、100％至10000％，等等。图像拍摄装置10的输出亮度范围是0至600％等。
在该实施例的图像拍摄***1中，可以通过设置在相机控制单元20中的HDR处理单元22和SDR处理单元23，根据从图像拍摄装置10发送的像素信号来同时生成HDR视频和SDR视频。具体而言，将从图像拍摄装置10经由相机电缆30发送到相机控制单元20的像素信号分别供应给设置在相机控制单元20中的HDR处理单元22和SDR处理单元23。结果，在HDR处理单元22中生成HDR视频，并且在SDR处理单元23中生成SDR视频。
另外，相机控制单元20的SDR增益调整单元231包括基于从CPU 24给予的相对范围来改变SDR处理侧的主增益与HDR处理侧的主增益的比例的功能。该相对范围是用于设置SDR视频的动态范围与HDR视频的动态范围之间的相关性的信息。例如，相对范围是定义HDR视频的动态范围将被设置为多少倍的SDR视频的动态范围的信息。通过该相对范围，例如，可以将SDR处理侧的主增益与HDR处理侧的主增益的比例设置为任意比例，诸如1和1/2。
如果以这种方式设置SDR处理侧的主增益与HDR处理侧的主增益的比例，则可以获得与SDR视频的动态范围相关的HDR视频的动态范围。
更具体而言，SDR视频的动态范围的上限基准由创作者所选择的基准白色(漫反射—白色)给出。在根据本实施例的图像拍摄***1中，通过选择SDR视频的该基准白色(漫反射—白色)，也根据基于相对范围的相关性来确定HDR视频的动态范围的上限基准(HDR视频的基准白色(漫反射—白色))。
应当根据诸如白天、夜间、室内、室外、演播室内、晴朗天气和有雨天气之类的拍摄环境视情况选择相对范围。因此，准备了与各种拍摄环境相关联的多种类型的相对范围。作为准备与拍摄环境相关联的多种类型的相对范围的方法，存在通过人眼来比较从相机控制单元20同时输出的SDR视频和HDR视频的视在亮度的方法。仅需要改变相对范围的值，并且每当该值被改变时比较SDR视频和HDR视频，并且将SDR视频的视在亮度接近于HDR视频的视在亮度的相对范围确定作为拍摄环境的最佳相对范围。
如果设置了拍摄环境的最佳相对范围，则当通过光圈调整来改变SDR视频的亮度时，可以在HDR视频的外观上反映HDR视频的创作者所想要的亮度的变化。
接下来，将描述相对范围设定示例。
[1：1设定]
图3是示出当设置为1：1时SDR视频和HDR视频的动态范围之间的关系的示图。
应当注意的是，在包括当前图在内的用作相对范围设置示例的以下图中，示出了在应用HDR视频侧的OETF伽马和SDR视频侧的显示伽马之前的关系，以帮助理解SDR视频的动态范围与HDR视频的动态范围之间的关系。
假定从图像拍摄装置10向相机控制单元20发送4K分辨率像素信号(线性普通视频)的情况。假定SDR视频的动态范围为100％，则图像拍摄设备的动态范围例如为1300％。
在1：1设定中，HDR视频的动态范围和SDR视频的动态范围变得相同。换句话说，HDR视频的动态范围被调整为SDR视频的动态范围。
应当注意的是，在SDR视频中，像素信号中的超过SDR视频的动态范围的高亮度分量通过拐点功能和裁剪功能而被挤进SDR视频的动态范围中的几个％的高亮度部分内。
[HDR对比度双倍设定]
图4是示出当HDR对比度加倍时SDR视频和HDR视频的动态范围之间的关系的示图。
在该设定中，按照相对范围将SDR增益调整单元231的主增益设置为HDR增益调整单元221的主增益的1/2。结果，HDR视频的动态范围变为SDR视频的动态范围的两倍，并且HDR视频的对比度相对于SDR视频增加一倍。
[SDR-D-Range-Gamma 350％设定]
在该图像拍摄***1中，SDR处理单元23还能够根据通过对像素信号应用伽马而获得的信号来生成SDR视频。在这种情况下，由于像素信号的动态范围被部分压缩到SDR动态范围，因此作为HDR视频的动态范围的上限的基准白色(漫反射—白色)可以被设置为变得更高。
图5是示出SDR-D-Range-Gamma 350％设定下的SDR视频和HDR视频的动态范围之间的关系作为其示例的示图。
通过对输入到SDR处理单元23的像素信号应用伽马，将高达像素信号的动态范围的350％的部分压缩到SDR动态范围。结果，HDR动态范围被设置为SDR动态范围的350％。
[HDR对比度双倍且SDR-D-Range-Gamma 220％设定]
图6是示出HDR对比度双倍且SDR-D-Range-Gamma 220％设定下的SDR视频和HDR视频的动态范围之间的关系的示图。
这样，通过将HDR对比度双倍与SDR-D-range-Gamma 220％相结合，HDR动态范围被设置为SDR动态范围的440％。
[关于设置相对范围的方法]
相机控制单元20例如经由诸如局域网(LAN)之类的通信信道50而连接到创作者的操作装置40。操作装置40包括显示器41、操作输入单元42和控制单元43。控制单元43能够使显示器41显示相对范围选择GUI。通过由操作输入单元42的操作输入来选择任意相对范围，创作者可以使用在显示器41上显示的GUI来选择任意相对范围。操作装置40的控制单元43接收由创作者使用操作输入单元42选择的相对范围的信息，并且经由通信信道50将相对范围设定信息发送到相机控制单元20的CPU 24。相机控制单元20的CPU 24基于该相对范围设定信息在SDR处理单元23的SDR增益调整单元231中设置相对范围。
另外，由相机控制单元20生成的SDR视频被显示在操作装置40的显示器41上。创作者可以在显示器41上检查SDR视频的亮度和颜色的表达。此时，基于所设置的相对范围，操作装置40的控制单元43使得SDR视频的动态范围(或其上限基准)与HDR视频的动态范围(或其上限基准)之间的相关性以例如“SDR：HDR＝100％：200％”的形式被显示在显示器41上。因此，创作者可以检查SDR视频的亮度和颜色的表达与相对范围之间的关系。
替代地，可以以如图3至图6所示的图形的形式来显示SDR视频的动态范围(或其上限基准)与HDR视频的动态范围(或其上限基准)之间的相关性。
[关于光圈调整]
在该图像拍摄***1中，可以使用在显示器41上显示的GUI来执行用于光圈调节的操作输入。基于由操作输入单元42接收到的用于光圈调整的操作输入，操作装置40的控制单元43将用于光圈调整的控制信息经由通信信道50发送到相机控制单元20的CPU 24。相机控制单元20的CPU 24能够经由相机电缆30与图像拍摄装置10的CPU 15相互通信。在从操作装置40接收到用于光圈调整的控制信息之后，相机控制单元20的CPU 24经由相机电缆30向图像拍摄装置10的CPU 15通知该控制信息。图像拍摄装置10的CPU 15根据该控制信息来控制光学***11的光圈。
如上所述，在本实施例的图像拍摄***1中，可以由相机控制单元20中的HDR处理单元22和SDR处理单元23根据由图像拍摄装置10获得的像素信号同时生成HDR视频和SDR视频。
此外，在本实施例的图像拍摄***1中，当通过光圈调整改变SDR视频的视在亮度时，可以对与SDR视频同时创建的HDR视频的视在亮度做出等效改变。因此，即使在实时创建HDR视频的情况下，例如，也可以创建具有适合观看的亮度的HDR视频。
<修改示例1>
图7是示出根据本技术的图像拍摄***的修改示例1的框图。
该图像拍摄***1A被配置为使图像拍摄装置10的取景器16显示由相机控制单元20生成的SDR视频。
由发送单元21将由相机控制单元20的SDR处理单元23生成的SDR视频经由相机电缆30发送到图像拍摄装置10。图像拍摄装置10的发送单元14将从相机控制单元20发送的SDR视频输出到取景器16。通过对SDR视频执行适当亮度的光圈调节，可以在取景器16上显示具有适当亮度的视频，并且可以在与之前相同地观看视频的同时执行拍摄。
<修改示例2>
图8是示出根据本技术的图像拍摄***的修改示例2的框图。
在该图像拍摄***1B中，除了上述的取景器16之外，图像拍摄装置10还包括具有与相机控制单元20的SDR处理单元23的配置类似的配置的SDR处理单元18。
在该图像拍摄***1B中，SDR视频由图像拍摄装置10的SDR处理单元18生成，并且该SDR视频被输出到取景器16以供显示。因此，拍摄人可以在没有从相机控制单元20发送SDR视频的情况下观看SDR视频。
在该图像拍摄***1B中，相机控制单元20的CPU 24和图像拍摄装置10的CPU 15经由相机电缆30彼此通信，以设置包括在相机控制单元20的SDR处理单元23的各个单元以及图像拍摄装置10的SDR处理单元18的各个单元中设置的相对增益在内的各个参数值。因此，可以在取景器16上显示在外观上与修改示例1的SDR视频无异的SDR视频。
<修改示例3>
图9是示出根据本技术的图像拍摄***的修改示例3的框图。
该图像拍摄***1C包括图像拍摄装置10中的HDR处理单元19。由图像拍摄装置10的HDR处理单元19生成的HDR视频被发送到相机控制单元20并且被照原样输出作为主线***的HDR视频。另外，发送给相机控制单元20的HDR视频也被供应给设置在相机控制单元20中的HDR逆变换单元25。HDR逆变换单元25将HDR视频逆变换为原始像素信号，并将这些像素信号输出到相机控制单元20的SDR处理单元23。由SDR处理单元23生成的SDR视频被供应给主线***，并且经由发送单元21而被发送回到图像拍摄装置10，并被输出到图像拍摄装置10的取景器16以供显示。
<修改示例4>
图10是示出根据本技术的图像拍摄***的修改示例4的框图。
通过将SDR处理单元18添加到根据上面的修改示例3的图像拍摄***1C的图像拍摄装置10来配置该图像拍摄***1D。换句话说，图像拍摄装置10中的SDR处理单元18生成并将其显示在取景器16上。因此，在图像拍摄装置10中不需要用于从相机控制单元20接收SDR视频的***。
<修改示例5>
尽管上面已经描述了将本技术应用于由图像拍摄装置10和相机控制单元20构成的图像拍摄***的情况，但是也可以通过合并图1所示的图像拍摄装置10中的相机控制单元20的HDR处理单元22和SDR处理单元23的配置而将本技术配置为单个图像拍摄装置。在这种情况下，图像拍摄装置10中的图像拍摄设备11对应于根据本技术的图像拍摄装置的配置中的“图像拍摄单元”。
<修改示例6>
另外，也可以使用计算机来配置相机控制单元20。具体而言，通过在计算机中安装用于使计算机作为相机控制单元20进行操作的程序并且将其与图像拍摄装置10连接，可以实现与第一实施例的图像拍摄***等效的图像拍摄***。
<修改示例7>
在上述修改示例中，基于相对范围，相机控制单元20的CPU 24或图像拍摄装置10的CPU 15可以以例如“SDR：HDR＝100％：200％”的形式在取景器16上显示SDR视频的动态范围与HDR视频的动态范围之间的相关性。
应当注意到，本技术也可以采用以下配置。
(1)一种图像拍摄***，包括：
处理电路，该处理电路根据由图像拍摄单元生成的像素信号来生成具有第一动态范围的第一视频信号，并且生成具有与第一动态范围相关的第二动态范围的第二视频信号，所述图像拍摄单元捕获被摄体以获得像素信号。
(2)根据(1)所述的图像拍摄***，其中
所述处理电路被配置为基于用于设置第一动态范围与第二动态范围之间的相关性的信息，在使用第一动态范围作为基准时设置第二动态范围。
(3)根据(1)或(2)所述的图像拍摄***，其中
所述处理电路被配置为基于用于设置相关性的信息来设置用于生成第一视频信号的像素信号的第一增益与用于生成第二视频信号的像素信号的第二增益之间的比例。
(4)根据(1)至(3)中任一项所述的图像拍摄***，其中
所述处理电路被配置为根据通过对所述像素信号执行伽马信号处理而获得的信号来生成具有第一动态范围的第一视频信号。
(5)根据(1)至(4)中任一项所述的图像拍摄***，其中
第一视频信号是标准动态范围(SDR)视频，并且
第二视频信号是高动态范围(HDR)视频。
(6)根据(1)至(5)中任一项所述的图像拍摄***，还包括显示器，该显示器显示由所述处理电路生成的第一视频信号。
(7)根据(6)所述的图像拍摄***，其中
所述显示器是取景器。
(8)根据(6)或(7)所述的图像拍摄***，其中
所述处理电路基于用于设置相关性的信息来执行在所述显示器上显示第一动态范围与第二动态范围之间的相关性的处理。
(9)根据(1)至(8)中任一项所述的图像拍摄***，其中
在所述显示器上显示第一视频信号时，基于光圈调整输入来执行光圈调整处理。
(10)一种图像拍摄方法，包括：
由图像拍摄单元捕获被摄体以生成像素信号；以及
由处理电路根据由所述图像拍摄单元生成的像素信号来生成具有第一动态范围的第一视频信号，并且生成具有与第一动态范围相关的第二动态范围的第二视频信号。
(11)根据(10)所述的图像拍摄方法，其中
所述处理电路基于用于设置第一动态范围与第二动态范围之间的相关性的信息，在使用第一动态范围作为基准时设置第二动态范围。
(12)根据(10)或(11)所述的图像拍摄方法，其中
所述处理电路基于用于设置相关性的信息来设置用于生成第一视频信号的像素信号的第一增益与用于生成第二视频信号的像素信号的第二增益之间的比例。
(13)根据(10)至(12)中任一项所述的图像拍摄方法，其中
所述处理电路根据通过对所述像素信号执行伽马信号处理而获得的信号来生成具有第一动态范围的第一视频信号。
(14)根据(10)至(13)中任一项所述的图像拍摄方法，其中
第一视频信号是标准动态范围(SDR)视频，并且
第二视频信号是高动态范围(HDR)视频。
(15)根据(10)至(14)中任一项所述的图像拍摄方法，还包括
显示器，该显示器显示由所述处理电路生成的第一视频信号。
(16)根据(15)所述的图像拍摄方法，其中
所述显示器是取景器。
(17)根据(15)或(16)所述的图像拍摄方法，其中
所述处理电路基于用于设置相关性的信息来执行在所述显示器上显示第一动态范围与第二动态范围之间的相关性的处理。
(18)根据(10)至(17)中任一项所述的图像拍摄方法，其中
在所述显示器上显示第一视频信号时，所述处理电路基于光圈调整输入来执行光圈调整处理。
(19)一种使计算机用作处理电路的程序，
所述处理电路根据由图像拍摄单元生成的像素信号来生成具有第一动态范围的第一视频信号，并且生成具有与第一动态范围相关的第二动态范围的第二视频信号，所述图像拍摄单元捕获被摄体以获得像素信号。
(20)根据(19)所述的程序，其中
所述处理电路基于用于设置第一动态范围与第二动态范围之间的相关性的信息，在使用第一动态范围作为基准时设置第二动态范围。
(21)根据(19)或(20)所述的程序，其中
所述处理电路基于用于设置相关性的信息来设置用于生成第一视频信号的像素信号的第一增益与用于生成第二视频信号的像素信号的第二增益之间的比例。
(22)根据(19)至(21)中任一项所述的程序，其中
所述处理电路根据通过对所述像素信号执行伽马信号处理而获得的信号来生成具有第一动态范围的第一视频信号。
(23)根据(19)至(22)中任一项所述的程序，其中
第一视频信号是标准动态范围(SDR)视频，并且
第二视频信号是高动态范围(HDR)视频。
(24)根据(19)至(23)中任一项所述的程序，还包括
显示器，该显示器显示由所述处理电路生成的第一视频信号。
(25)根据(24)所述的程序，其中
所述显示器是取景器。
(26)根据(24)或(25)所述的程序，其中
所述处理电路基于用于设置相关性的信息来执行在所述显示器上显示第一动态范围与第二动态范围之间的相关性的处理。
(27)根据(19)至(26)中任一项所述的程序，其中
在所述显示器上显示第一视频信号时，所述处理电路基于光圈调整输入来执行光圈调整处理。
(28)一种图像拍摄装置，包括：
处理电路，该处理电路根据由图像拍摄单元生成的像素信号来生成具有第一动态范围的第一视频信号，并且生成具有与第一动态范围相关的第二动态范围的第二视频信号，所述图像拍摄单元捕获被摄体以获得像素信号。
(29)根据(28)所述的图像拍摄装置，其中
所述处理电路被配置为基于用于设置第一动态范围与第二动态范围之间的相关性的信息，在使用第一动态范围作为基准时设置第二动态范围。
(30)根据(28)或(29)所述的图像拍摄装置，其中
所述处理电路被配置为基于用于设置相关性的信息来设置用于生成第一视频信号的像素信号的第一增益与用于生成第二视频信号的像素信号的第二增益之间的比例。
(31)根据(28)至(30)中任一项所述的图像拍摄装置，其中
所述处理电路被配置为根据通过对所述像素信号执行伽马信号处理而获得的信号来生成具有第一动态范围的第一视频信号。
(32)根据(28)至(31)中任一项所述的图像拍摄装置，其中
第一视频信号是标准动态范围(SDR)视频，并且
第二视频信号是高动态范围(HDR)视频。
(33)根据(28)至(32)中任一项所述的图像拍摄装置，还包括
显示器，该显示器显示由所述处理电路生成的第一视频信号。
(34)根据(33)所述的图像拍摄装置，其中
所述显示器是取景器。
(35)根据(33)或(34)所述的图像拍摄装置，其中
所述处理电路基于用于设置相关性的信息来执行在所述显示器上显示第一动态范围与第二动态范围之间的相关性的处理。
(36)根据(26)至(35)中任一项所述的图像拍摄装置，其中
在所述显示器上显示第一视频信号时，基于光圈调整输入来执行光圈调整处理。
附图标记列表
1 图像拍摄***
10 图像拍摄装置
12 图像拍摄单元
15 CPU
16 取景器
20 相机控制单元
22 HDR处理单元
23 SDR处理单元
24 CPU
40 操作装置
41 显示器
42 操作输入单元
221 HDR增益调整单元
231 SDR增益调整单元

Claims (8)

1.一种图像拍摄***，包括：
处理电路，所述处理电路根据由图像拍摄单元生成的像素信号来生成具有第一动态范围的第一视频信号，并且生成具有与第一动态范围相关的第二动态范围的第二视频信号，所述图像拍摄单元捕获被摄体以获得像素信号；以及
显示器，所述显示器显示由所述处理电路生成的第一视频信号，
所述处理电路基于用于设置第一动态范围与第二动态范围之间的相关性的信息来执行在所述显示器上显示所述相关性的处理。
2.根据权利要求1所述的图像拍摄***，其中
所述处理电路被配置为基于用于设置第一动态范围与第二动态范围之间的相关性的信息，在使用第一动态范围作为基准时设置第二动态范围。
3.根据权利要求1所述的图像拍摄***，其中
所述处理电路被配置为基于用于设置相关性的信息来设置用于生成第一视频信号的像素信号的第一增益与用于生成第二视频信号的像素信号的第二增益之间的比例。
4.根据权利要求3所述的图像拍摄***，其中
所述处理电路被配置为根据通过对所述像素信号执行伽马信号处理而获得的信号来生成具有第一动态范围的第一视频信号。
5.根据权利要求4所述的图像拍摄***，其中
第一视频信号是标准动态范围SDR视频，并且
第二视频信号是高动态范围HDR视频。
6.根据权利要求1所述的图像拍摄***，其中
所述显示器是取景器。
7.根据权利要求1所述的图像拍摄***，其中
在所述显示器上显示第一视频信号时，基于光圈调整输入来执行光圈调整处理。
8.一种图像拍摄方法，包括：
由图像拍摄单元捕获被摄体以生成像素信号；
由处理电路根据由所述图像拍摄单元生成的像素信号来生成具有第一动态范围的第一视频信号，并且生成具有与第一动态范围相关的第二动态范围的第二视频信号；以及
由显示器显示由所述处理电路生成的第一视频信号，
所述处理电路基于用于设置第一动态范围与第二动态范围之间的相关性的信息来执行在所述显示器上显示所述相关性的处理。
CN201680076713.3A 2016-01-05 2016-12-22 图像拍摄***和图像拍摄方法 Active CN108432236B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016-000729 2016-01-05
JP2016000729A JP6233424B2 (ja) 2016-01-05 2016-01-05 撮像システムおよび撮像方法
PCT/JP2016/005218 WO2017119039A1 (ja) 2016-01-05 2016-12-22 撮像システム、撮像方法およびプログラム

Publications (2)

Publication Number Publication Date
CN108432236A CN108432236A (zh) 2018-08-21
CN108432236B true CN108432236B (zh) 2020-11-20

Family

ID=57323864

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680076713.3A Active CN108432236B (zh) 2016-01-05 2016-12-22 图像拍摄***和图像拍摄方法

Country Status (6)

Country Link
US (2) US11212461B2 (zh)
EP (1) EP3402179B1 (zh)
JP (1) JP6233424B2 (zh)
KR (1) KR20180100119A (zh)
CN (1) CN108432236B (zh)
WO (1) WO2017119039A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6233424B2 (ja) * 2016-01-05 2017-11-22 ソニー株式会社 撮像システムおよび撮像方法
KR102582394B1 (ko) 2016-08-30 2023-09-26 삼성디스플레이 주식회사 반도체 장치
WO2018169003A1 (ja) * 2017-03-15 2018-09-20 ソニー株式会社 撮像装置、映像信号処理装置および映像信号処理方法
WO2020039716A1 (ja) * 2018-08-21 2020-02-27 ソニー・オリンパスメディカルソリューションズ株式会社 医療用制御装置及び医療用観察装置
JP7185563B2 (ja) 2019-02-28 2022-12-07 キヤノン株式会社 撮像装置及びその制御方法及びプログラム
CN110460870A (zh) * 2019-08-27 2019-11-15 四开花园网络科技(广州)有限公司 4k-hdr现场节目制作及直播方法
US11587213B1 (en) * 2021-11-05 2023-02-21 GM Cruise Holdings LLC. Preserving dynamic range in images
CN114785966B (zh) * 2022-06-21 2022-09-06 深圳比特微电子科技有限公司 曝光控制方法、拍摄处理方法、装置和介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003230022A (ja) * 2002-02-01 2003-08-15 Sony Corp 画像処理装置および方法、並びに記録媒体
CN1522054A (zh) * 2003-02-14 2004-08-18 ��ʿ��Ƭ��ʽ���� 图像处理装置，方法以及程序
JP2013090095A (ja) * 2011-10-17 2013-05-13 Olympus Imaging Corp 撮像装置、撮像方法、およびプログラム
WO2013112532A2 (en) * 2012-01-24 2013-08-01 Dolby Laboratories Licensing Corporation Piecewise cross color channel predictor
CN103907343A (zh) * 2011-10-20 2014-07-02 杜比实验室特许公司 用于视频均衡的方法和***
CN104995903A (zh) * 2013-02-21 2015-10-21 皇家飞利浦有限公司 改进的hdr图像编码和解码方法及设备

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11220659A (ja) * 1998-02-03 1999-08-10 Victor Co Of Japan Ltd 撮像装置
US6879731B2 (en) * 2003-04-29 2005-04-12 Microsoft Corporation System and process for generating high dynamic range video
US7492375B2 (en) * 2003-11-14 2009-02-17 Microsoft Corporation High dynamic range image viewing on low dynamic range displays
JP4806329B2 (ja) * 2006-10-23 2011-11-02 三洋電機株式会社 撮像装置及び撮像方法
EP2153641B2 (en) * 2007-04-13 2021-10-27 Ari M. Presler Digital cinema camera system for recording, editing and visualizing images
JP4544318B2 (ja) * 2008-03-11 2010-09-15 富士フイルム株式会社 画像処理装置、方法及びプログラム
US8339475B2 (en) * 2008-12-19 2012-12-25 Qualcomm Incorporated High dynamic range image combining
US8606009B2 (en) * 2010-02-04 2013-12-10 Microsoft Corporation High dynamic range image generation and rendering
JP5271346B2 (ja) * 2010-12-27 2013-08-21 株式会社日立製作所 撮像装置、画像処理装置、画像処理方法および画像処理プログラム
WO2012133551A1 (ja) 2011-03-30 2012-10-04 富士フイルム株式会社 固体撮像素子の駆動方法並びに固体撮像素子及び撮像装置
EP3324622B1 (en) * 2011-04-14 2019-09-11 Dolby Laboratories Licensing Corporation Multiple color channel multiple regression predictor
KR20130015179A (ko) * 2011-08-02 2013-02-13 삼성디스플레이 주식회사 표시 장치 및 표시 장치 구동 방법
CN103827956B (zh) * 2011-09-27 2017-06-13 皇家飞利浦有限公司 用于图像的动态范围变换的装置和方法
EP2613532A1 (en) 2012-01-06 2013-07-10 Thomson Licensing Method of and device for encoding an HDR video together with an LDR video, method of and device for reconstructing one of an HDR video and an LDR video coded together and non-transitory storage medium
JP2015037222A (ja) * 2013-08-12 2015-02-23 キヤノン株式会社 画像処理装置、撮像装置、制御方法、及びプログラム
EP3829171A1 (en) * 2014-02-25 2021-06-02 Apple Inc. Adaptive transfer function for video encoding and decoding
EP3739894A1 (en) * 2014-06-27 2020-11-18 Panasonic Intellectual Property Management Co., Ltd. Data output device, data output method, and data generation method
GB2534929A (en) * 2015-02-06 2016-08-10 British Broadcasting Corp Method and apparatus for conversion of HDR signals
US10122928B2 (en) * 2015-09-09 2018-11-06 Red.Com, Llc Motion video output for multiple displays
JP6581862B2 (ja) * 2015-09-18 2019-09-25 日本放送協会 Ｈｄｒ−ｓｄｒ一体化制作用ビデオカメラ
US9984446B2 (en) * 2015-12-26 2018-05-29 Intel Corporation Video tone mapping for converting high dynamic range (HDR) content to standard dynamic range (SDR) content
JP6233424B2 (ja) * 2016-01-05 2017-11-22 ソニー株式会社 撮像システムおよび撮像方法
JP6237797B2 (ja) * 2016-01-05 2017-11-29 ソニー株式会社 ビデオシステム、ビデオ処理方法、プログラム、およびビデオコンバーター

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003230022A (ja) * 2002-02-01 2003-08-15 Sony Corp 画像処理装置および方法、並びに記録媒体
CN1522054A (zh) * 2003-02-14 2004-08-18 ��ʿ��Ƭ��ʽ���� 图像处理装置，方法以及程序
JP2013090095A (ja) * 2011-10-17 2013-05-13 Olympus Imaging Corp 撮像装置、撮像方法、およびプログラム
CN103907343A (zh) * 2011-10-20 2014-07-02 杜比实验室特许公司 用于视频均衡的方法和***
WO2013112532A2 (en) * 2012-01-24 2013-08-01 Dolby Laboratories Licensing Corporation Piecewise cross color channel predictor
CN104995903A (zh) * 2013-02-21 2015-10-21 皇家飞利浦有限公司 改进的hdr图像编码和解码方法及设备

Also Published As

Publication number Publication date
US20190141259A1 (en) 2019-05-09
WO2017119039A1 (ja) 2017-07-13
JP6233424B2 (ja) 2017-11-22
EP3402179B1 (en) 2021-03-10
JP2016195378A (ja) 2016-11-17
US11895408B2 (en) 2024-02-06
CN108432236A (zh) 2018-08-21
EP3402179A1 (en) 2018-11-14
EP3402179A4 (en) 2019-08-28
KR20180100119A (ko) 2018-09-07
US11212461B2 (en) 2021-12-28
US20220086363A1 (en) 2022-03-17

Similar Documents

Publication Publication Date Title
CN108432236B (zh) 图像拍摄***和图像拍摄方法
CN108476326B (zh) 视频***及方法、介质、摄像机***和视频转换器
CN107211183B (zh) 显示方法和显示装置
US20090102945A1 (en) System and method for generating high dynamic range images
JP2015109563A (ja) 映像信号処理装置及びその制御方法
JP7020417B2 (ja) 映像信号処理装置、映像信号処理方法および映像信号処理システム
KR101753261B1 (ko) 촬영 시스템 및 그 영상품질 동기화 방법
CN109120859B (zh) 一种影像数据处理装置及拍摄设备、显示***
JP6750594B2 (ja) 撮像システムおよび撮像方法
CN112702588B (zh) 双模态图像信号处理器和双模态图像信号处理***
JP4530149B2 (ja) ハイダイナミックレンジカメラシステム
JP2012134745A (ja) 画像信号処理装置
JP6753386B2 (ja) カメラシステム、ビデオ処理方法およびプログラム
JP6852821B2 (ja) カメラシステム、ビデオ処理方法、プログラム、ビデオシステムおよびビデオコンバーター
JP6083959B2 (ja) 伝送装置、その制御方法、および制御プログラム
Funatsu et al. Development and Image Quality Evaluation of 8K High Dynamic Range Cameras with Hybrid Log-Gamma
JP5597124B2 (ja) 画像信号処理装置
JP2020120311A (ja) 画像処理装置、画像処理方法およびプログラム
JP2008301095A (ja) 撮像装置及び撮像方法
JP2007279919A (ja) 画像変換装置および方法、並びに、プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant