CN111095096B - 信息处理设备、信息处理方法、程序和照明*** - Google Patents

Abstract

本发明自动控制光源的设置以在关于要成像的被摄体的运动被摄体的移动引起可获得的图像与设计数据之间的差异的情况下，通过改变每个光源的发光强度来维持设计数据。该照明***具有信息处理装置和发光单元。所述信息处理装置具有：控制单元，其根据指示期望图像的特性的设计数据以及发光单元的发光效果来确定发光单元的设置，并且控制设置，该设置被设置为使得在被摄体存在变化的情况下保持设计数据；以及输出单元，其将设置输出到发光单元。发光单元具有发光控制单元，其基于从信息处理装置输出的设置来控制发光。

Description

信息处理设备、信息处理方法、程序和照明***

技术领域

本公开涉及一种信息处理设备、信息处理方法、程序和照明***。

背景技术

在用来自多个光源的光照射(照亮)被摄体的状态下捕获图像的捕获技术是已知的。照明被广泛用于照片和视频(例如电影)的制作现场，作为一种令人印象深刻的表达被摄体的技术，诸如为被摄体提供立体效果。然而，为了获得期望的照明效果，需要重复调整多个光源并在调整之后进行测试捕获，并且常规照明***具有需要大量人员和时间的问题。鉴于这种情况，已经提出了一种捕获模拟装置，该装置可以在计算机上设置照明条件并在计算机上检查在设置的照明条件下获得的图像(例如，参见下面的专利文献1)。

引文列表

专利文献

专利文献1：日本专利申请特开2005-301785号公报

发明内容

本发明要解决的问题

但是，即使如专利文献1所述的技术那样，可以在计算机上模拟照明结果，但也存在需要通过反复试验来设置照明条件以获得希望的照明效果的问题。

本公开的目的是提供一种信息处理设备、信息处理方法、程序和照明***，其能够容易地执行发光单元(光源)的设置以获得期望的照明效果。

问题的解决方案

本公开例如是，

一种信息处理设备，包括：

控制单元，被配置为根据指示期望图像的特性的概念数据和发光单元的发光结果来确定所述发光单元的设置，其中

所述控制单元控制所确定的设置以在被摄体的变化发生的情况下保持所述概念数据。

本公开例如是，

一种信息处理方法，包括：

根据指示期望图像的特性的概念数据和发光单元的发光结果确定所述发光单元的设置；以及

控制所确定的设置以在被摄体的变化发生的情况下保持所述概念数据。

本公开例如是，

一种程序，用于使计算机执行以下处理：

根据指示期望图像的特性的概念数据和发光单元的发光结果确定所述发光单元的设置；以及

控制所确定的设置以在被摄体的变化发生的情况下保持所述概念数据。

本公开例如是，

一种照明***，包括：

信息处理设备；以及

发光单元，

所述信息处理设备包括

控制单元，被配置为根据指示期望图像的特性的概念数据和发光单元的发光结果来确定所述发光单元的设置，并控制所确定的设置以在被摄体的变化发生的情况下保持所述概念数据，以及

输出单元，被配置为将设置输出到所述发光单元，

所述发光单元包括

发光控制单元，被配置为控制基于从所述信息处理设备输出的设置的发光。

发明的效果

至少根据本公开的实施例，可以容易地设置用于获得期望的照明效果的发光单元。注意，这里描述的效果不必被限制，并且可以展现本公开中描述的任何效果。此外，本公开内容的内容不受示例性效果的限制。

附图说明

图1是示出根据第一实施例的照明***的配置示例的图。

图2是示出根据第一实施例的成像装置的配置示例的框图。

图3是示出根据第一实施例的平板计算机的配置示例的框图。

图4A至图4C是示出根据第一实施例的光源的配置示例的框图。

图5是用于描述根据第一实施例的校准处理的图。

图6是用于描述根据第一实施例的调光表的示例的图。

图7是示出根据第一实施例的校准处理的处理流程的示例的流程图。

图8是用于描述根据第一实施例的参照图像等的示例的图。

图9是示出根据第一实施例的概念数据生成处理的处理流程的示例的流程图。

图10是示出根据第一实施例的照明设置和捕获处理的处理流程的示例的流程图。

图11是示出根据第二实施例的照明***的配置示例的图。

图12A至图12C是示出根据第二实施例的光源的配置示例的框图。

图13是示出根据第二实施例的校准处理的处理流程的示例的流程图。

图14是用于描述根据第二实施例的调光表的示例的图。

图15是用于描述根据第二实施例的参照图像等的示例的图。

图16是示出根据第二实施例的照明设置和捕获处理的处理流程的示例的流程图。

图17是用于描述修改的图。

具体实施方式

在下文中，将参考附图描述本公开的实施例等。注意，将以以下顺序给出描述。

<1.第一实施例>

<2.第二实施例>

<3.修改>

以下将描述的实施例等是本公开的有利的具体示例，并且本公开的内容不限于这些实施例等。

<1.第一实施例>

首先，将描述根据本公开的第一实施例。第一实施例是用于在用户捕获静止图像时自动执行照明的设置以获得用户期望的照明效果的实施例。照明的设置是指对光源(光)的设置，并且在实施例中，将描述与光源的发光强度有关的设置作为示例。注意，对光源的设置不限于光源的发光强度。例如，该设置可以与上述发光强度、从光源发出的光的色温、光的软/硬度、光的照射范围和光的照射方向中的至少一项有关。该设置可以是特定值(例如，在色温的情况下，以开尔文(K)为单位的特定值)，或者可以是与发光强度的等级(例如，发光强度的强、中等或弱)或光的照射方向(例如，相对于基准方向稍微向右、向左等)相对应的值(标志)。

[照明***的配置示例]

图1示出了根据本公开的第一实施例的照明***(照明***10)的配置示例。照明***10包括成像装置1、作为信息处理设备的示例的平板计算机(以下称为平板计算机2)以及多个光源(发光单元)。根据本实施例的照明***10包括与被称为三灯照明的照明技术相对应的三个光源(光源3A、3B和3C)。例如，光源3A被称为补光灯，光源3B被称为主光灯，并且光源3C被称为背光灯。使用成像装置1在光源3A至3C发光的状态下捕获被摄体4。在本实施例中，光源3A和光源3B与捕获同步地瞬时发光(闪光发射)。此外，光源3C尽管在捕获时发光但并不与捕获同步地瞬时发光，而是稳定地发光的稳定光。在图1中将被摄体4示意性地示为人。但是，被摄体4不限于一个人，并且可以是多个人、诸如宠物的其他生物、艺术品等。

可以在成像装置1与平板计算机2之间以及在平板计算机2与光源3A至3C之间执行通信。例如，在装置之间执行基于WiFi(注册商标)的无线通信。可以执行基于WiFi(注册商标)以外的通信标准的无线通信，可以执行使用红外线的通信，或者可以执行有线通信。例如，这些装置在执行已知的配对处理以使这些装置能够彼此识别并能够彼此通信之后彼此通信。

[成像装置]

(成像装置的配置示例)

接下来，将描述构成照明***10的装置的配置示例。首先，将描述成像装置1的配置示例。图2示出了成像装置1的配置示例。成像装置1包括例如光学成像***101、专用相差自动聚焦(AF)传感器102、成像元件103、预处理电路104、相机处理电路105、图像存储器106和相机控制单元107、图形接口(I/F)108、显示器109、输入单元110、读取器/写入器(R/W)111、存储器单元112和相机通信单元113。

光学成像***101包括用于将来自被摄体的光会聚在成像元件103上的捕获透镜101A(包括聚焦透镜、变焦透镜等)、通过移动聚焦透镜来执行焦点调节的透镜驱动机构101B以及快门机构、光圈机构等。这些透镜和机构基于来自相机控制单元107的控制信号来驱动。透镜驱动机构101B通过根据来自相机控制单元107的控制信号沿着光轴方向移动捕获透镜101A来实现AF操作。通过光学成像***101获得的被摄体的光学图像形成在作为成像装置的成像元件103上。

专用相差AF传感器102例如是相差检测型自动聚焦专用传感器。由捕获透镜101A会聚的被摄体光被半透射镜等反射以进入专用相差AF传感器102。由专用相差AF传感器102检测到的焦点检测信号被提供给相机控制单元107。

成像元件103是电荷耦合器件(CCD)、互补金属氧化物半导体(CMOS)等。成像元件103将经由捕获透镜101A入射的被摄体光光电转换为电荷量，并生成图像。成像元件103具有正常成像像素和相差检测像素。图像面相差AF传感器103A是包括多个相差检测像素的自动聚焦传感器。由图像面相差AF传感器103A检测到的焦点检测信号被提供给相机控制单元107。

预处理电路104对从成像元件103输出的成像信号执行采样保持，以通过相关双采样(CDS)处理来保持良好的信噪(S/N)比。此外，预处理电路104通过自动增益控制(AGC)处理来控制增益，并执行模拟/数字(A/D)转换，并输出数字图像信号。

相机处理电路105对来自预处理电路104的图像信号应用信号处理，诸如白平衡调节处理、颜色校正处理、伽马校正处理、Y/C转换处理和自动曝光(AE)处理。

图像存储器106是易失性存储器(例如，由动态随机存取存储器(DRAM)构成的缓冲存储器)，并且临时存储已经由预处理电路104和相机处理电路105应用了预定处理的图像数据。

相机控制单元107例如由中央处理单元(CPU)构成，并且包括只读存储器(ROM)107A和随机存取存储器(RAM)107B。ROM107A存储由CPU等读取并执行的程序。RAM 107B用作CPU的工作存储器。CPU通过根据ROM 107A中存储的程序执行各种类型的处理并发布命令来控制整个成像装置1。例如，CPU执行关于上述AF的控制。尽管下面将描述细节，但是相机控制单元107控制成像装置1的每个单元，从而使得在多个光源3A至3C中的每个基于对应的设置发光的状态下执行捕获。

图形I/F 108根据从相机控制单元107提供的图像信号生成要在显示器109上显示的图像信号，并将该图像信号提供给显示器109以显示图像。显示器109显示正被捕获的直通图像、记录在存储单元112中的图像等。

显示器109由液晶显示器(LCD)、有机电致发光(EL)显示器等构成。

输入单元110包括例如用于接通/断开电源的电源按钮、用于在开始记录捕获的图像时给出指令的释放按钮、用于变焦调节的操作器、与显示器109一体构成的触摸屏等。当对输入单元110进行输入时，生成与该输入相对应的控制信号，并且将其输出到相机控制单元107。然后，相机控制单元107执行与该控制信号相对应的算术处理和控制。

R/W 111是连接有记录由成像生成的图像数据的存储单元112的接口。R/W 111将从相机控制单元107提供的数据写入存储单元112，并且将从存储单元112读取的数据输出到相机控制单元107。存储单元112例如是硬盘、记忆棒(索尼公司(Sony Corporation)的注册商标)、SD存储卡、通用串行总线(USB)存储器等。基于联合图像专家组(JPEG)标准等以压缩状态存储图像。此外，还与图像相关联地存储包括与所存储的图像有关的信息和诸如捕获日期和时间的附加信息的可交换图像文件格式(EXIF)数据。存储单元112可以内置在成像装置1中，可以与成像装置1附接/从成像装置1拆卸，或者可以两者兼有。

相机通信单元113是用于成像装置1与其他装置(例如，平板计算机2)通信的配置，并且具有通信所需的功能，诸如天线和调制/解调功能。例如，通过相机通信单元113将成像装置1捕获的图像的图像数据从成像装置1发送到平板计算机2。

(成像装置的基本操作示例)

这里，将描述上述成像装置1中的基本操作。在捕获图像之前，将由成像元件103接收并光电转换的信号顺序地提供给预处理电路104。预处理电路104将CDS处理、AGC处理等应用于输入信号，并且进一步转换将输入信号转换为图像信号。

相机处理电路105对从预处理电路104提供的图像信号执行图像质量校正处理，并且经由相机控制单元107将图像信号作为直通图像信号提供给图形I/F 108。由此，在显示器109上显示直通图像。用户观看在显示器109上显示的直通图像，并且可以调整视角。

在这种状态下，当按下输入单元110的快门按钮时，相机控制单元107将控制信号输出至光学成像***101以操作构成光学成像***101的快门。由此，成像元件103输出针对一帧的图像信号。

相机处理电路105对经由预处理电路104从成像元件103提供的一帧的图像信号应用图像质量校正处理，并将处理后的图像信号提供给相机控制单元107。相机控制单元107压缩并编码输入的图像信号，并将所生成的编码数据提供给R/W 111。由此，所捕获的静止图像的数据文件经由R/W 111存储在存储单元112中。注意，在捕获运动图像时，响应于运动图像捕获指令实时地执行上述处理。通过在捕获运动图像时按下快门按钮，可以在捕获运动图像时捕获静止图像。

同时，在再现存储在存储单元112中的图像文件的情况下，相机控制单元107响应于从输入单元110输入的操作，经由R/W 111从存储单元112读取选择的静止图像文件。对读取的图像文件应用解压缩解码处理。然后，经由相机控制单元107将经解码的图像信号提供给图形I/F 108。由此，存储在存储单元112中的静止图像或运动图像被显示在显示器109上。

[平板计算机的配置示例]

图3示出了平板计算机2的配置示例。平板计算机2具有便携式大小，并且包括例如控制单元201、包括在平板计算机中的通信单元(以下称为平板通信单元)202、显示单元203、输入单元204、R/W205和存储单元206。

控制单元201包括CPU等，并且包括ROM和RAM(未示出)。ROM存储由CPU等读取并执行的程序。RAM用作CPU的工作存储器。此外，控制单元201包括作为功能的调光表生成单元201A和调光信息生成单元201B。控制单元201根据指示用户期望的图像特性的概念数据和光源3A至3C的发光结果来确定光源3A至3C的设置。

作为输出单元的示例的平板通信单元202是用于平板计算机2与其他装置(例如，成像装置1和光源3A至3C)通信的配置，并且具有通信所必需的功能，诸如天线和调制/解调功能。例如，从成像装置1发送的图像的图像数据被平板通信单元202接收，并且所接收的图像数据被提供给控制单元201。此外，光源3A至3C中的每一个的设置被从平板通信单元202发送到对应的光源。注意，根据本实施例的平板通信单元202还具有连接到诸如因特网的网络的功能。

显示单元203由液晶显示器、有机EL显示器等构成。显示单元203显示经由互联网、电视广播、游戏画面、菜单画面等获取的图像和视频。此外，显示单元203显示当用户接受用于生成将在下面描述的概念数据的输入时参照的参照图像。注意，根据本实施例的显示单元203被配置为触摸屏，并且被配置为接受各种输入。也就是说，显示单元203还用作输入单元204。

输入单元204例如是诸如可按下按钮或滑动按钮的物理按钮、触摸屏等，并且是用于接受用户操作输入的配置的统称。当对输入单元204进行输入时，生成与该输入相对应的控制信号并将其输出至控制单元201。然后，控制单元201执行与该控制信号相对应的算术处理和控制。输入单元204还用于接受用于生成将在下面描述的概念数据的输入。

R/W 205将数据写入存储单元206并从存储单元206读取数据。存储单元206例如是硬盘、记忆棒(索尼公司的注册商标)、SD存储卡、USB存储器等。存储单元206可以内置在平板计算机2中，可以与平板计算机2连接/从平板计算机2拆卸，或者可以兼而有之。

注意，平板计算机2可以具有除了上述配置之外的配置。例如，平板计算机2可以包括扬声器装置等。下面将描述平板计算机2的操作示例。

[光源的配置示例]

图4示出了光源的配置示例，并且图4A示出了光源3A的配置示例，图4B示出了光源3B的配置示例，以及图4C示出了光源3C的配置示例。

如图4A所示，光源3A包括例如发光单元(发光体)301A、调光控制单元302A和光源通信单元303A。发光单元301A例如是诸如闪光灯的闪光灯光源，并且与成像装置1的捕获同步地发光。调光控制单元302A基于由光源通信单元303A接收的调光信息控制发光单元301A的发光强度、发光定时等。光源通信单元303A用于光源3A与其他装置(例如，成像装置1和平板计算机2)通信。

如图4B所示，光源3B包括例如发光单元(发光体)301B、调光控制单元302B和光源通信单元303B。发光单元301B例如是诸如闪光灯的闪光灯光源，并且与成像装置1的捕获同步地发光。调光控制单元302B基于由光源通信单元303B接收的调光信息控制发光单元301B的发光强度、发光定时等。光源通信单元303B用于光源3B与其他装置(例如，成像装置1和平板计算机2)通信。

如图4C所示，光源3C包括例如发光单元(发光体)301C、调光控制单元302C和光源通信单元303C。发光单元301C是例如荧光灯或发光二极管(LED)。调光控制单元302C基于由光源通信单元303C接收的调光信息来控制发光单元301C的发光强度。光源通信单元303C用于光源3C与其他装置(例如，成像装置1和平板计算机2)通信。注意，不言而喻，光源3A至3C的配置可以不同。

作为示例，光源3A至3C中的每一个被配置为以三个等级的发光强度(弱、中等和强)发光。当然，光源3A至3C可以以两个等级的发光强度或以诸如四个或更多个等级的发光强度的多个等级发光。此外，例如，光源3A的发光强度“弱”和光源3B的发光强度“弱”可以是相同的发光强度或不同等级的发光强度。

[在第一实施例中执行的处理]

接下来，将描述在第一实施例中执行的处理，包括每个装置的操作。在本实施例中，为了便于描述，在第一实施例中执行的处理分为三种类型的处理：“校准处理”、“概念数据生成处理”和“照明设置和捕获处理”，并且将依次描述每种类型的处理。注意，不需要按照以下描述的顺序执行所述三种类型的处理，并且可以在不发生技术矛盾的范围内改变处理的顺序，可以并行执行该处理，或者可以连续执行每种类型的处理。例如，可以在概念数据生成处理之后执行校准处理，或者可以并行执行校准处理和概念数据生成处理。

(校准处理)

校准处理是在每个光源的发光结果、特别是每个光源一个接一个以不同模式发光的情况下预先测量光通过发光对被摄体图像的影响，并且获得作为测量结果的表(以下将该表适当地称为调光表)的处理。

将参考图5示意性地描述校准处理。首先，光源3A以不同的发光模式发光。在本示例中，光源3A以不同等级的发光强度发光。然而，不同的发光模式可以是不同的色温等。这同样适用于其他光源。注意，光源3B和3C保持关闭而不发光。

光源3A与捕获同步地以“弱”发光强度发光，并执行捕获。接下来，光源3A与捕获同步地以“中等”发光强度发光，并执行捕获。接下来，光源3A与捕获同步地以“强”发光强度发光，并执行捕获。通过捕获获得的图像被临时存储在例如成像装置1的图像存储器106中。

接下来，光源3B以不同等级的发光强度发光。注意，光源3A和3C保持关闭而不发光。光源3B与捕获同步地以“弱”发光强度发光，并执行捕获。接下来，光源3B与捕获同步地以“中等”发光强度发光，并执行捕获。接下来，光源3B与捕获同步地以“强”发光强度发光，并且执行捕获。通过捕获获得的图像被临时存储在例如成像装置1的图像存储器106中。

接下来，光源3C以不同等级的发光强度发光。注意，光源3A和3B保持关闭而不发光。在光源3C以“弱”发光强度发光的状态下执行捕获。接下来，在光源3C以“中等”发光强度发光的状态下执行捕获。在光源3C以“强”发光强度发光的状态下执行捕获。通过捕获获得的图像被临时存储在例如成像装置1的图像存储器106中。

通过捕获获得的九个图像的图像数据被从成像装置1发送到平板计算机2。也就是说，图像数据从相机通信单元113发送，并且图像数据由平板通信单元202接收。接收到的图像数据被从平板通信单元202提供给控制单元201。控制单元201的调光表生成单元201A分析并获取九个图像中的每个图像的图像信息。

图像信息是与每个光源的发光模式相对应的空间传感器信息。在本实施例中，使用构成图像的每个像素的亮度(luminance)等级。注意，为了减少信息量，可以使用具有任意大小而不是每个像素的块为单位的亮度等级，或者将通过另一种适当方法压缩的数据用作图像信息。此外，可以由成像装置1执行分析和获取图像信息的处理，并且可以仅将图像信息从成像装置1发送到平板计算机2。

已经获取了图像信息的调光表生成单元201A生成与每个光源的发光结果相对应的调光表。图6示出了根据第一实施例的调光表(调光表TA1)的示例。调光表TA1包括例如光源的类型(诸如可以识别光源的标识符的信息)、发光强度以及彼此相关联的图像信息(在本实施例中，为以发光强度捕获的图像的每个像素的亮度等级)。

注意，可以经由R/W 205将由调光表生成单元201A生成的调光表TA1写入并存储在存储单元206中。由此，例如，当在同一工作室中捕获相同或相似的被摄体时，通过使用存储在存储单元206中的调光表TA1可以省略校准处理。调光表TA1可以被存储在不是存储单元206的存储器(例如，云上的存储器)中，或者可以通过通信被发送并分配给其他装置。

此外，例如，在已知关于发光强度的变化的图像信息的变化的情况下，可以使用与预定发射强度相对应的图像信息来生成与不同于预定发光强度的发光强度相对应的图像信息，以便简化校准处理。例如，关于光源3A，调光表生成单元201A可以基于在以“弱”发光强度发光的情况下的图像信息来预测并生成与“中等”发光强度和“强”发光强度相对应的图像信息。从而，可以减少捕获的数量，并且可以简化校准处理。

注意，在校准处理中的被摄体(要捕获的被摄体)有利地是与“照明设置和捕获处理”中的被摄体相同，但也可以不同。例如，校准处理中的被摄体可以是与“照明设置和捕获处理”中的被摄体相似的被摄体(在被摄体是人的情况下、具有相似的面部大小或相似的肤色的人)。

图7是示出校准处理的处理流程的示例的流程图。在步骤ST11中，将以“弱”发光强度发光的指示给予预定光源(例如，光源3A)。例如，使用平板计算机2的输入单元204来作出该指令。注意，由于光源3A与捕获同步地发光，因此诸如同步发光和捕获的定时的同步信息被从平板计算机2发送到光源3A和成像装置1。然后，处理进行到步骤ST12和ST13。

在步骤ST12和ST13中，在由同步信息指示的定时执行捕获，并且光源3A与捕获同步地以“弱”发光强度发光。具体地，成像装置1的相机控制单元107控制成像装置1的每个单元，使得在由同步信息指示的定时执行捕获。此外，光源3A的调光控制单元302A使发光单元301A在由同步信息指示的定时以“弱”发光强度发光。然后，处理进入步骤ST14。

在步骤ST14中，将通过步骤ST13中的捕获而获得的图像从成像装置1发送到平板计算机2。然后，平板计算机2的调光表生成单元201A通过分析在光源3A以“弱”发光强度发光的情况下的图像的图像信息来生成调光表TA1的一个要素。然后，处理进入步骤ST15。

在步骤ST15中，将以“中等”发光强度发光的指令给予光源3A。例如，还使用平板计算机2的输入单元204给出该指令。注意，如上所述，由于光源3A与捕获同步地发光，因此诸如同步发光和捕获的定时的同步信息被从平板计算机2发送到光源3A和成像装置1。然后，处理进入步骤ST16和ST17。

在步骤ST16和ST17中，在由同步信息指示的定时执行捕获，并且光源3A与捕获同步地以“中等”发光强度发光。具体地，成像装置1的相机控制单元107控制成像装置1的每个单元，使得在由同步信息指示的定时执行捕获。此外，光源3A的调光控制单元302A使发光单元301A在由同步信息指示的定时以“中等”发光强度发光。然后，处理进入步骤ST18。

在步骤ST18中，将通过步骤ST16中的捕获而获得的图像从成像装置1发送到平板计算机2。然后，平板计算机2的调光表生成单元201A通过分析在光源3A以“中等”发光强度发光的情况下的图像的图像信息来生成调光表TA1的一个要素。然后，处理进入步骤ST19。

在步骤ST19中，将以“强”发光强度发光的指令给予光源3A。例如，还使用平板计算机2的输入单元204给出该指令。注意，如上所述，由于光源3A与捕获同步地发光，因此诸如同步发光和捕获的同步信息被从平板计算机2发送到光源3A和成像装置1。然后，处理进入步骤ST20和ST21。

在步骤ST20和ST21中，在由同步信息指示的定时执行捕获，并且光源3A与捕获同步地以“强”发光强度发光。具体地，成像装置1的相机控制单元107控制成像装置1的每个单元，使得在由同步信息指示的定时执行捕获。此外，光源3A的调光控制单元302A使发光单元301A在由同步信息指示的定时以“强”发光强度发光。然后，处理进入步骤ST22。

在步骤ST22中，将通过步骤ST21中的捕获而获得的图像从成像装置1发送到平板计算机2。然后，平板计算机2的调光表生成单元201A通过分析在光源3A以“强”发光强度发光的情况下的图像的图像信息来生成调光表TA1的一个要素。然后，处理进入步骤ST23。

在步骤ST23中，确定是否已经完成了使用光源的所有处理。在本示例中，使用光源3B和光源3C的处理尚未完成，处理返回到步骤ST11。然后，类似于上述处理，使光源3B以不同等级的发光强度发光，并且基于当时获得的图像的图像信息生成调光表TA1的一个要素。对光源3C执行类似的处理。注意，由于光源3C不是闪光发光，因此可以通过在使光源3C以预定发光强度发光的状态下操作成像装置1的输入单元110来执行捕获。也就是说，不需要将同步信息发送到成像装置1和光源3C。

在步骤ST23中，在已经完成了使用光源的所有处理的情况下，基于在步骤ST14、ST18和ST22中的各个处理中获得的调光表的要素，获得图6所示的调光表TA1。然后，处理结束。

(概念数据生成处理)

接下来，将描述概念数据生成处理。概念数据是指示(用户)期望的图像特性的数据，并且更具体地，指示被摄体的每个区域的明亮度(brightness)的数据。

使用平板计算机2的输入单元204来指定概念数据。显示单元203显示当接受对输入单元204的输入时要参照的参照图像。例如，如图8所示，在显示单元203上显示参照图像IM1。用户在参考参照图像IM1的同时，基于他/她对输入单元204的概念执行操作。

作为参照图像IM1，例如，可以使用通过上述校准处理获得的九个图像之一。这消除了捕获参照图像IM1本身的需要。此外，参照图像IM1可以是通过捕获“照明设置和捕获处理”捕获的被摄体而获得的图像。此时的捕获可以在光源3A至3C不发光的状态下仅发射环境光(与捕获无关的室内光)的状态下执行。此外，参照图像IM1可以是根据关于“照明设置和捕获处理”中捕获的被摄体的已知人物识别或面部识别的预定结果选择的模板图像。在这种情况下，例如，预定处理由控制单元201执行。此外，模板图像可以是通过R/W 205读取存储在存储单元206中的图像而获得的图像，或者可以是从因特网等获取的图像。

图9是示出概念数据生成处理的处理流程的示例的流程图。将参照图8和9描述概念数据生成处理的具体示例。当例如按下或触摸输入单元204的预定按钮时，开始概念数据生成处理。在步骤ST31中，参照图像IM1被显示在显示单元203上。然后，处理进入步骤ST32。

在步骤ST32中，用户在参考参照图像IM1的同时基于所述概念执行输入。例如，如图8所示，为被摄体设置两个区域AR1和AR2。例如，指定明亮度，使得区域AR1的明亮度变为适当曝光，并且区域AR2的明亮度变为适当曝光的2/3(约66％)。使用输入单元204来执行区域的设置和明亮度的指定。在本实施例中，每当通过输入单元204执行输入时，与输入相对应的配置(例如，明亮度)就反映在参照图像IM1中。例如，如图8所示，区域AR2的明亮度稍微变暗。注意，尽管未示出，但是可以执行背景的明亮度等的设置。当用户完成明亮度的指定等时，用户按下或触摸完成按钮等以终止基于所述概念的输入。然后，处理进入步骤ST33。

在步骤ST33中，基于在步骤ST32中进行的输入来生成概念数据。概念数据例如由控制单元201生成。如上所述，概念数据是指示例如对脸的右半部分适当地曝光并且以适当曝光的2/3对脸的左半部分进行曝光的数据。然后，处理结束。

注意，可以将概念数据存储在存储单元206中。然后，当捕获具有相似面部大小、肤色等的被摄体时，可以从存储单元206读取并使用先前的概念数据。此外，可以改过经由平板通信单元202的通信等来分发概念数据。例如，知名摄影师的概念数据本身具有专有价值。因此，通过对概念数据的分发进行收费，能够提供使用概念数据作为关键字的新商业模型。

(照明设置和捕获处理)

接下来，将描述照明设置和捕获处理。图10是示出照明设置和捕获处理的处理流程的示例的流程图。在处理开始之后，在步骤ST41中，调光信息生成单元201B根据概念数据和调光表TA1计算并确定每个光源的发光强度。根据调光表TA1，已知每个光源以某发光强度发光的情况下光对被摄体的图像的影响。此外，例如，在来自光源3A的光和来自光源3B的光在预定位置上发射的情况下，该位置的明亮度成为明亮度的总和。因此，调光信息生成单元201B可以通过参考调光表TA1来确定每个光源发光以实现概念数据中指定的每个区域的明亮度需要多少发光强度。

在图8所示的概念数据的情况下，例如，生成光源3A的调光信息以使得光源3A的发光强度变为“弱”，生成光源3B的调光信息以使得光源3B的发光强度变为“强”，并且生成光源3C的调光信息以使得光源3C的发光强度变为“中等”。注意，在不能实现与基于概念数据的构图完全匹配的构图的情况下，生成调光信息以实现与基于概念数据的构图尽可能接近的构图。作为获得用于概念数据的最佳照明设置(调光信息)的优化方法，可以应用准牛顿法(quasi-Newton method)、下山单纯形法(downhill simplex method)、对偶单纯形法(dual simplex method)、顺序线性二次编程(sequential linear quadraticprogramming)等。然后，处理进入步骤ST42。

在步骤ST42中，平板计算机2将指示每个光源的发光强度的调光信息输出到对应的光源。例如，平板计算机2使用平板通信单元202将调光信息发送到对应的光源。然后，处理进入步骤ST43。

在步骤ST43中，在每个光源都基于调光信息发光的状态下捕获被摄体4。例如，光源通信单元303A接收与光源3A相对应的调光信息。调光控制单元302A基于接收到的调光信息使发光单元301A以“弱”发光强度发光。此外，光源通信单元303B接收与光源3B相对应的调光信息。调光控制单元302B基于接收到的调光信息使发光单元301B以“强”发光强度发光。此外，光源通信单元303C接收与光源3C相对应的调光信息。调光控制单元302C基于接收到的调光信息使发光单元301C以“中等”发光强度发光。然后，在每个光源发光的状态下执行成像装置1的捕获。通过捕获获得的图像显示在成像装置1的显示器109上。通过捕获获得的图像可以从成像装置1发送到平板计算机2并显示在显示单元203上。然后，处理进行到步骤ST44。

在步骤ST44中，根据需要由用户进行调整(微调)。作为调整，用户本人可以直接调整一些或全部光源的发光强度。此外，可以对概念数据本身进行微调。然后，可以基于微调之后的概念数据再次生成调光信息，并且可以在每个光源以与调光信息相对应的发光强度发光的状态下再次执行捕获。此外，可以多次执行以每个光源的改变后的发光强度的捕获。

注意，在上述处理中，因为光源3A和光源3B是闪光发光，所以需要使捕获和发光同步。用于同步的同步信息可以被包括在调光信息中，或者可以当在光源3C连续发光的状态下按下成像装置1的释放按钮时，向光源3A和光源3B给出发光指令。此外，在上述处理中，已经生成了每个光源的调光信息。然而，调光信息可以是其中写入了所有光源的发光强度的信息，并且每个光源可以从调光信息中选择其自己的发光强度。

[第一实施例中获得的效果的示例]

根据上述第一实施例，可以自动执行用于获得用户期望的照明效果的光源的设置。此外，由于不需要调节光源的人，因此即使照明***变大，也可以由少数人(最少一个人)进行捕获。

不管是手动执行设置还是通过使用计算机的模拟执行设置，为了获得期望的照明效果而进行的光源的设置都要花费时间和精力。由于一般的照明***使用多个光源，因此设置花费更多的时间和精力。然而，根据本实施例，由于可以通过简单地设置与照明捕获的结果、换句话说，期望的图像配置(例如，被摄体的每个区域的明亮度)相对应的概念数据来执行光源的设置，因此用户可以减少调整光源所需的时间和精力，并且可以执行有效的捕获。此外，由于可以减少用于调整光源并使光源发光的试验次数，因此可以减少光源上的负荷并且可以提高光源的耐久性。

此外，由于捕获实际上是在针对该概念而优化的照明下执行的，因此可以获得无法通过图像编辑软件实现的高质量图像(在本实施例中为静止图像)。

<2.第二实施例>

接下来，将描述根据本公开的第二实施例。注意，除非另有说明，否则在第一实施例中描述的内容可以应用于第二实施例，并且类似地，相同实质的配置被赋予相同的附图标记，并且适当地省略了多余的描述。

[在光照下捕获运动图像时要考虑的问题]

第二实施例是用于自动执行照明设置以当用户捕获运动图像时获得用户期望的照明效果的实施例。基本处理与第一实施例中的处理相似，并且基于用户设置的概念数据自动执行每个光源的设置。

顺便提及，在照明下捕获运动图像的情况下，需要考虑运动图像特有的视点。图11示出了根据第二实施例的照明***(照明***10A)，其中在照明下捕获运动图像。照明***10A包括在第一实施例中描述的成像装置1和平板计算机2。此外，照明***10A包括例如作为光源的光源5A(补光灯)、光源5B(主光灯)和光源5C(背光灯)。注意，由于在本实施例中捕获运动图像，因此光源5A至5C发射稳定光而不是闪光发光(瞬时光)。

在捕获运动图像时，通常存在诸如人的运动的被摄体(运动被摄体)和诸如背景的不运动的被摄体。在图11所示的照明***10A中，人物6被作为运动被摄体的示例示出，并且墙壁7被作为背景示出。主要用来自光源5A和光源5B的光照射人物6，并且主要用来自光源5C的光照射墙壁7。

本实施例假设捕获人物6沿深度方向移动、更具体地相对于成像装置1从后(深度侧)朝向前(前侧)移动的状态的情况。假设用户期望人物6的明亮度(反射光的明亮度)不随着人物6的移动而改变的构图。在这种情况下，通常使用被称为擦拭法(wiping method)的方法，其中在用漫射器(diffuser)覆盖光源的同时将光量调节为恒定。然而，擦拭法需要高技能的技术。因此，在将能够执行擦拭法的***在每个光源下的情况下，作为前提，需要确保能够执行擦拭法的人员。此外，由于对人员的奖励等，捕获运动图像的成本增加。如上所述，在照明下捕获运动图像的情况下，与在照明下捕获静止图像的情况相比，人员增加和与人员增加相关联的成本增加的问题变得更加显著。基于这种观点，将描述第二实施例的细节。

[装置的配置]

由于已经参考图2和图3分别描述了成像装置1和平板计算机2的配置，因此省略了多余的描述。注意，尽管下面将描述细节，但是控制单元201控制所确定的关于光源5A至5C的设置，以在捕获运动图像时被摄体变换的情况下保持结构数据。

图12A至图12C示出了光源5A至5C的配置示例。与光源3A类似，光源5A包括发光单元501A、调光控制单元502A以及光源通信单元503A。与光源3B类似，光源5B包括发光单元501B、调光控制单元502B和光源通信单元503B。与光源3C类似，光源5C包括发光单元501C、调光控制单元502C和光源通信单元503C。注意，由于每个单元的功能与光源3A中的每个单元的功能相同，因此省略多余的描述。光源5A至5C被配置为以三个等级的发光强度(例如“弱”、“中等”和“强”)发光。

[在第二实施例中执行的处理]

接下来，将描述第二实施例中执行的处理，包括每个装置的操作。在第二实施例中，为了便于描述，将处理分为三种类型的处理：“校准处理”、“概念数据生成处理”和“照明设置和捕获处理”，然后将依次描述每种类型的处理。不需要以下述顺序执行所述三种类型的处理，并且可以在不发生技术矛盾的范围内改变处理的顺序，可以并行执行处理，或者可以连续执行每种类型的处理。

(校准处理)

首先，将描述根据第二实施例的校准处理。图13是示出根据第二实施例的校准处理的处理流程的示例的流程图。注意，与图7的流程图中描述的处理类似的处理由相同的附图标记表示，并且适当地省略多余的描述。

在开始处理之后，在步骤ST51中，作为运动被摄体的人物6移动到位置AA。位置AA例如是人物6开始移动的位置。然后，在步骤ST11至ST22中，例如，光源5A顺序地以“低”、“中等”和“强”发光强度发光，并且执行每种发光状态下的捕获。该捕获可以是静止图像或运动图像。在每次捕获中，分析与每种发光强度相对应的图像信息，并且由调光表生成单元201A生成调光表的一个要素。当捕获完成时，处理进入步骤ST23。

在步骤ST23中，确定是否已经完成了在预定位置(在本示例中为位置AA)处使用每个光源的所有处理(捕获)。在本示例中，使用光源5B和5C的处理尚未完成，处理返回到步骤ST11。然后，在步骤ST11至ST22中，例如，光源5B顺序地以“低”、“中等”和“强”发光强度发光，并且执行每种发光状态下的捕获。此外，例如，光源5C顺序地以“低”、“中等”和“强”发光强度发光，并且执行在每种发光状态下的捕获。在每次捕获中，分析与每种发光强度相对应的图像信息，并且由调光表生成单元201A生成调光表的一个要素。当捕获完成时，处理进入步骤ST23。

由于已经完成了在人物6位于位置AA中的状态下使用光源5A、5B和5C的捕获，因此在步骤ST23的处理中的确定是肯定的，并且处理进入步骤ST52。在步骤ST52中，确定是否已经完成了在所有位置处的捕获。在本示例中，步骤ST52中的处理中的确定是否定的，并且处理进入步骤ST53。

在步骤ST53中，作为运动被摄体的人物6移动到位置BB。位置BB例如是人物6已经完成移动的位置，即最终的停止位置。然后，处理返回到步骤ST11。然后，在步骤ST11至ST22中，例如，光源5A顺序地以“低”、“中等”和“强”发光强度发光，并且执行每种发光状态下的捕获。在每次捕获中，分析与每种发光强度相对应的图像信息，并且由调光表生成单元201A生成调光表的一个要素。对于其他光源5B和5C执行类似的处理。然后，处理进入步骤ST23。

在步骤ST23中，确定是否已经完成了在预定位置(在本示例中为位置BB)处使用每个光源的所有处理(捕获)。在完成使用光源5A、5B和5C的捕获的情况下，处理进入步骤ST52。如上所述，在步骤ST52中，确定是否已经完成在所有位置处的捕获。在本示例中，捕获位置是作为人物6的移动开始位置的位置AA和作为移动停止位置的位置BB的两个位置。因此，步骤ST52中的确定是肯定的，并且处理结束。

图14示出了通过根据第二实施例的校准处理获得的调光表(调光表TA2)的示例。调光表TA2是光源的类型、发光强度、人物6的位置信息以及当时捕获的图像的每个像素的亮度等级彼此相关联的表。注意，可以通过各种类型的信息来表达人物6的位置信息。例如，基于捕获中的图像执行已知人物提取处理，获得位置AA处由人物6占据的区域(人物6所在的区域)，并且该区域可以用作位置信息。此外，基于由测距传感器或图像处理获得的深度图，可以将每个位置处的人物6的距离信息用作位置信息。此外，人物6在保持信标的同时移动，并且可以将在每个位置处从信标发送的信息用作位置信息。此外，可以将以上信息的组合信息用作位置信息。

注意，调光表TA2具有比第一实施例中描述的调光表TA1更大的信息量。简而言之，信息增加了捕获位置的数量，并且在上述示例中，在位置AA和位置BB处执行捕获，因此调光表TA2中的信息量大约是调光表TA1中的信息量的两倍。因此，例如，可以使用已知的压缩技术来压缩调光表TA2的每个像素的亮度等级。此外，可以仅在调光表TA2中描述存在于由以下将描述的概念数据设置的区域中的像素的亮度等级。

(概念数据生成处理)

接下来，将描述根据第二实施例的概念数据生成处理。根据第二实施例的概念数据生成处理的处理流程基本上与根据第一实施例的概念数据生成处理相同。也就是说，由用户在平板计算机2的显示单元203上显示参照图像的状态下执行使用输入单元204的概念数据的设置。

图15是用于描述根据第二实施例的概念数据的示例的图。参照图像IM2显示在显示单元203上。参照图像IM2例如是当用户位于位置AA处时的图像(静止图像)。该图像可以是通过校准处理获得的图像，或者可以是单独捕获的图像。

用户使用输入单元204输入概念数据。例如，指定包括人物6的区域AR3和背景区域AR4。然后，例如，由用户设置用于保持人物6和背景的明亮度(来自被摄体的反射光的强度)的概念数据。这里，在捕获开始位置(运动被摄***于位置AA的状态，其在下面的描述中适当地称为初始状态)处的人物6和背景的明亮度也被设置为概念数据。

注意，概念数据的设置是示例，并且不限于该示例。例如，在上述示例中，已经示出了矩形区域。但是，可以提取人物，并且可以对人物本身进行设置(例如，保持人物的明亮度)。此外，如在上述示例中，在保持运动被摄体和背景的明亮度的情况下，可以简单地设置“保持所有被摄体(包括背景)的明亮度”的概念数据而无需设置区域。要在概念数据中设置的被摄体不仅由用户设置，而且还可以通过人物提取或面部识别自动识别。

(照明设置和捕获处理)

接下来，将描述根据第二实施例的照明设置和捕获处理。图16是示出照明设置和捕获处理的处理流程的示例的流程图。在开始处理之后，在步骤ST61中，调光信息生成单元201B基于概念数据和调光表TA2生成指示每个光源的发光强度的调光信息。也就是说，调光信息生成单元201B在参考调光表TA2的同时生成针对每个光源的调光信息，以使得人物6和背景的明亮度与概念数据所指示的初始状态下的明亮度匹配或接近。如第一实施例中所述，作为获得用于概念数据的最佳照明设置(调光信息)的优化方法，可以应用准牛顿法、下山单纯形法、对偶单纯形法、顺序线性二次编程等。然后，处理进入步骤ST62。

在步骤ST62中，平板计算机2将指示每个光源的发光强度的调光信息输出到对应的光源。例如，平板计算机2使用平板通信单元202将调光信息发送到对应的光源。光源通信单元503A接收与光源5A相对应的调光信息。调光控制单元502A基于接收到的调光信息来控制发光单元501A的发光强度。光源通信单元503B接收与光源5B相对应的调光信息。调光控制单元502B基于接收到的调光信息来控制发光单元501B的发光强度。光源通信单元503C接收与光源5C相对应的调光信息。调光控制单元502C基于接收到的调光信息来控制发光单元501C的发光强度。然后，处理进入步骤ST63。

在步骤ST63中，在每个光源基于调光信息发光的状态下开始通过成像装置1进行运动图像的捕获，并且作为捕获的结果获得一帧的图像。所获得的图像被从成像装置1发送到平板计算机2。在平板通信单元202接收到所发送的图像之后，将图像提供给控制单元201。然后，处理进入步骤ST64。

在步骤ST64中，控制单元201计算在步骤ST64中获得的一帧的图像与概念数据之间的差异。将描述差异计算方法的示例。控制单元201从一帧的图像中提取与包括人物6的区域AR3相对应的部分。然后，控制单元201将区域AR3中的每个像素的明亮度(亮度)的平均值与初始状态下区域AR3中的每个像素的明亮度的平均值进行比较，并计算差异。对于区域AR4执行类似的计算。然后，处理进入步骤ST65。

在步骤ST65中，确定在步骤ST64中计算出的关于区域AR3和AR4中的至少一个的差异是否等于或大于预定阈值。例如，预定阈值被适当地设置为允许在视觉上识别明亮度变化的值。在差异不等于或大于预定阈值的情况下，处理进入步骤ST66。

在步骤ST66中，确定运动图像的捕获是否已经完成。当完成了运动图像的捕获时，处理进入步骤ST67，并且根据需要执行对所捕获的运动图像的调整(微调)。在本示例中，由于仅完成了一帧的捕获，因此步骤ST66中的确定为否定，并且处理返回到步骤ST63。然后，对接下来要捕获的一帧执行步骤ST63和ST64的处理。

如上所述，本实施例假设人物6从深度向前方移动的情况。随着人物6接近前侧，光源5A和光源5B与人物6之间的距离减小，换句话说，人物6变得更亮。因此，步骤ST65中的处理在某个定时变为肯定。在这种情况下，处理返回到步骤ST61。

在步骤ST61中，调光信息生成单元201B重新计算调光信息。也就是说，调光信息生成单元201B在参考调光表TA2的同时重新计算调光信息，以使得人物6和背景的明亮度与人物6的当前位置处的概念数据所指示的明亮度匹配。概念上，光源5A和光源5B的发光强度减小。但是，背景的明亮度降低，并且无法实现概念数据。因此，光源5C的发光强度增加。从而，在由于人物6的移动而发生改变的情况下，可以控制关于每个光源的设置以保持概念数据。更具体地，可以根据概念数据保持人物6和背景的明亮度。然后，处理进行到步骤ST62，并且将指示每个光源的发光强度的调光信息从平板计算机2输出(发送)到每个对应的光源。然后，在每个光源基于重新计算的调光信息发光的状态下执行运动图像的捕获。在运动图像的捕获期间重复上述处理。

注意，在图14所示的调光表TA2中，仅描述了当人物6存在两个位置AA和BB时的图像信息。因此，可以使用位置AA和位置BB的信息对在位置AA与位置BB之间的位置(以下，将该位置适当地称为位置CC。注意，位置CC可以是任意位置)处、通过某光源以发光强度的发光对被摄体的影响进行插值。例如，在光源5A以“弱”发光强度发光的情况下，可以使用在人物6位于位置AA的状态下光源5A以“弱”发光强度发光的情况下的像素的亮度等级和在人物6位于位置BB的状态下光源5A以“弱”发光强度发光的情况下的像素的亮度等级来预测在位置CC处由人物6占据的范围内的像素的亮度等级。此外，可以利用人物6的空间位置的变化(深度信息的变化)，在人物6位于位置CC的状态下，预测在某光源以某发光强度发光的情况下的像素的亮度等级。

注意，设置多个位置CC，并且在位置CC处可以通过上述校准处理来预先获取在某光源以某发光强度发光的情况下的每个像素的亮度等级。因此，可以减少重新计算调光信息的处理的负荷。位置AA和位置BB之间的多个位置CC的设置可以由用户设置或者可以适当地自动设置。例如，在光源3A以“弱”发光强度发光的情况下、在人物6的明亮度中检测到等于或大于阈值的变化的情况下，该位置的位置信息、光源、光源的发光强度和每个像素的亮度等级可以在调光表TA2中相互关联地描述。

注意，与帧之间的运动相关联的明亮度变化程度很小。因此，可以以任意单位(例如，以10帧为单位)而不是以一帧为单位执行步骤ST63至ST65中的处理。

[在第二实施例中获得的效果的示例]

通过执行上述处理，自动执行光源的设置以即使在被摄体中存在运动被摄体并且在根据运动被摄体的运动获得的图像与概念数据之间出现差异的情况下，也保持概念数据。因此，根据第二实施例，即使在捕获运动图像的情况下，也可以自动执行用于获得用户期望的照明效果的光源的设置。此外，不管人物6的移动速度如何，都可以获得与概念数据匹配的运动图像。此外，可以获得与上述第一实施例中例示的效果类似的效果。

<3.修改>

已经具体描述了本公开的多个实施例。然而，本公开的内容不限于上述实施例，并且可以进行基于本公开的技术思想的各种修改。在下文中，将描述修改。注意，除非另外说明或者在不发生技术矛盾的范围内，否则以下描述的修改可以应用于第一和第二实施例。

在上述实施例中，可以设置多个概念数据，并且可以生成与各个概念数据相对应的多条调光信息。然后，可以在光源基于各个多条调光信息发光的状态下执行多次捕获。

由于光源等的性能限制，基于概念数据的图像和通过实际捕获获得的图像可能相差预定量或更大。在这种情况下，可以在通知中给出警告或错误。作为示例，比较构成基于概念数据的图像的像素的像素值和构成通过实际捕获获得的图像的像素的像素值，并且在存在一定数量的差异等于大于或大于阈值的像素的情况下，确定图像相差预定量或更大。通过声音、显示、振动等来执行警告或错误的通知。

在上述实施例中，可以改变成像装置1的设置，诸如快门速度、灵敏度和光圈。这种针对成像装置1的设置可以根据用户的偏好(诸如扩大光圈以使背景模糊)来执行，或者可以被执行以补偿光源的性能极限。

在上述实施例中，光源可以内置在成像装置1中或者可以与成像装置1附接或从成像装置1拆卸，或者可以是足够小以被用户手持的灯。此外，可以在室内或室外执行捕获，并且部分光源可以是诸如日光的环境光(自然光)。此外，仅示意性地示出了光源的形状、大小和布置位置，并且不限于上述实施例中示出的示例。此外，光源的数量不限于三个。尽管在大规模制造现场中可以使用几十个光源，但是本技术可以应用于这样的大规模照明***。此外，部分光源可以是环境光，并且其他光源或多个光源可以是灯。

在上述实施例中，可以代替平板计算机2，由其他装置(例如，云计算机)执行获得调光信息的处理。此外，可以通过成像装置1来执行获得调光信息的处理。此外，成像装置1或其他装置可以具有平板计算机2的部分或全部功能。此外，在平板计算机2具有成像功能的情况下，平板计算机2可以替代成像装置1来捕获图像。在这种情况下，平板计算机2的控制单元201可以具有成像装置1的相机控制单元107的功能。如上所述，可以适当地改变具有实现上述实施例中的功能的配置的装置。

用于执行通信的配置(例如，平板通信单元202)可以是可以与平板计算机2附接/从平板计算机2拆卸的通信适配器等。

执行使用平板计算机2的输入的位置和执行捕获的位置可以不在同一空间中，而可以在不同位置。例如，负责确定概念的人员在家中等使用平板计算机2输入概念数据，并将该概念数据发送到执行捕获的工作室。在工作室中安装的装置可以在基于调光表和概念数据生成每个光源的调光信息并控制光源的发光强度等之后执行捕获。这消除了负责确定概念的人员去执行捕获的位置的需要。

在上述第二实施例中，已经描述了保持人和背景的明亮度的示例作为概念数据的示例。但是，概念数据不限于该示例。例如，概念数据可以是其中指定了明亮度变化的概念数据。具体地，其中指定了人随着移动而变得更亮或更暗的概念数据可以是概念数据。然后，如上述第二实施例中所述，适当地改变每个光源的设置以消除与由于人的移动引起的概念数据的差异，并且实现了概念数据。此外，概念数据可以包括例如时间信息，诸如在预定时间之后一个人变得更亮的程度。

在第二实施例中，在成像装置1的记录速率是每秒60帧(fps)并且成像速率是诸如120fps或240fps的高速的情况下，可以使用不用于记录的图像来执行校准处理和重新计算调光信息的处理。

在上述第二实施例中，已经以前后方向为例描述了人物6的运动。然而，可以使用左右方向、对角线方向、前述方向的组合方向等。

本公开还可以通过装置、方法、程序、***等来实现。例如，使得用于执行实施例中描述的功能的程序可下载，并且不具有实施例中描述的控制功能的装置下载并安装该程序，从而能够执行实施例中描述的控制。本公开还可以通过分发这种程序的服务器来实现。

在上述实施方式中，将校准处理中的每个光源的发光模式的数量设置为一种，并且可以使用通过成像装置的通过透镜(TTL)自动调光功能获得的发光强度，作为每个光源的发光模式的发光强度。那时，有利的是仅在不是所有光源发射的环境光下执行捕获。

在上述实施例中，在通过在校准处理中捕获而获得的图像包括曝光过度或曝光不足，从而超过亮度值的上限或下限的区域的情况下，可以通知用户。可以在通知时显示通过捕获获得的图像，并且可以以强调的方式显示曝光过度或曝光不足的区域。

在上述实施例中，在校准处理中每个光源的色温不同的情况下，可以将每个光的色温乘以系数以抑制色温不同的影响并使用。此外，在即使在相同的光源中，色温根据发光量而不同的情况下，也可以将色温乘以与发光量相应的系数并使用。

在上述实施例中，已经描述了根据通过在校准处理中捕获而获得的图像来创建调光表的示例。然而，实施例不限于该示例。例如，通过捕获获得的图像信息可以原样使用，而不被转换为调光表。那时使用的图像信息有利地是原始图像，以确保由模拟图像的位深度和灰度表示的颜色数量，从而避免伽玛的影响。

在上述实施例中，已经描述了使用如上所述的优化方法来在照明设置和捕获处理中获得最佳调光信息的示例。然而，在将通过捕获获得的图像信息原样应用于照明设置和捕获处理的情况下，可以通过不同的方法来执行照明设置和捕获处理。具体地，通过捕获而获得的图像的比较明亮组合来生成照明捕获结果的模拟图像，并且用户确认所生成的图像。作为确认的结果，在所生成的图像是期望的模拟图像的情况下，响应于用户操作，用于获得与所生成的模拟图像相似的捕获结果的调光信息被发送到每个光源。另一方面，在作为确认结果、生成的图像不是期望的模拟图像的情况下，响应于用户操作，通过改变用于比较明亮组合的每个图像的亮度值的系数来执行调整，以获得用户期望的模拟图像。在用户调整完成之后，响应于用户操作，将用于获得与用户调整之后的模拟图像相似的捕获结果的调光信息发送到每个光源。

通过使用上述比较明亮组合，可以分别计算来自每个光源的环境光分量和发光分量。在仅环境光下的捕获图像和发光图像之间比较对应的像素值，可以通过获取较大的像素值来获得发光分量。由于光源的发光强度与所获得的反射光之间的关系由在对数-对数图中具有斜率为1的线性函数表示，因此可以计算出发光分量。这大大减少了模拟中的计算量。此外，作为比较明亮组合的方法，可以使用与RGB的总值执行比较的颜色比较明亮组合。

此外，例如，如图17所示，可以在显示单元203上显示模拟图像，以供用户通过上述比较明亮组合来确认模拟图像。那时，可以将仅在环境光下捕获的图像显示为初始状态下的参照图像IM3，或者可以显示通过预设的预定比较明亮组合的模拟图像。那时，可以与IM3同时显示用于选择要用于比较明亮组合的图像信息的比较明亮组合图像选择单元601和用于设置每条图像信息的亮度值的系数的系数设置单元602。从而，用户可以在参考参照图像IM3的同时操作比较明亮组合图像选择单元601和系数设置单元602，从而基于用户自己的概念来调整期望的模拟图像。此外，显示单元203可以显示用于显示每个连接的光源的信息的光源信息显示单元603、用于给出关于重新校准的指令的重新校准指令单元604、用于将调光信息发送到每个光源并进行主捕获的主捕获指令单元605以及用于输出显示为完成图像的模拟图像的模拟图像输出单元606。

这里，可以在仅在环境光下捕获的图像信息与每个光源的发光模式图像信息之间执行比较明亮组合，或者可以在仅在环境光下捕获的图像信息与每个光源的发光模式图像信息与仅在环境光下捕获的图像信息之间的亮度值差异的图像信息之间执行比较明亮的组合。从而，可以减小环境光的差异取决于捕获要用于比较明亮组合的图像信息的时间的影响。

在上述实施例中，当通过每个光源、成像装置或信息处理设备检测到被摄体的曝光状态的变化时，可以再次执行校准处理、概念数据生成处理以及照明设置和捕获处理的部分或全部。可替代地，可以通过用户操作来再次执行校准处理、概念数据生成处理以及照明设置和捕获处理的部分或全部。在此，可以认为，光源的数量的增减变化、被摄体或光源的位置的移动、被摄体自身的反射率的变化、成像装置或光源的设置值的变化、附件(诸如漫射器)的安装/拆卸或天气或环境光的变化都会改变被摄体的曝光状态。每个光源、成像装置或信息处理设备通过检测用户操作、各种传感器、捕获图像的变化等来检测被摄体的曝光状态的变化。在通过检测用户操作、各种传感器、捕获图像的变化等来检测被摄体的曝光状态的变化的情况下，可以再次自动地执行各种类型的处理的一部分或全部，或者可以在给用户的通知中给出被摄体的曝光状态的变化。

本公开还可以采用以下配置。

(1)一种信息处理设备，包括：

控制单元，被配置为根据指示期望图像的特性的概念数据和发光单元的发光结果来确定所述发光单元的设置，其中

所述控制单元控制所确定的设置以在被摄体的变化发生的情况下保持所述概念数据。

(2)根据(1)所述的信息处理设备，其中

所述概念数据是指示为所述被摄体的每个区域指定的亮度的数据。

(3)根据(1)或(2)所述的信息处理设备，其中

所述控制单元基于在所述发光单元已经以预定发光图案发光的情况下获得的图像的图像信息，生成与所述发光单元的发光结果相对应的调光表。

(4)根据(3)所述的信息处理设备，其中

所述发光图案是所述发光单元的发光强度。

(5)根据(3)或(4)所述的信息处理设备，其中

所述控制单元基于所述被摄体中包括的移动被摄体的位置信息，生成与所述发光单元的发光结果相对应的调光表。

(6)根据(5)所述的信息处理设备，其中

所述控制单元使用与预定发光强度和预定位置信息相对应的图像信息来生成与不同于所述预定位置信息的位置信息相对应的图像信息。

(7)根据(3)所述的信息处理设备，其中

所述发光图案是所述发光单元的色温。

(8)根据(3)至(7)中任一项所述的信息处理设备，其中

所述图像信息是与所述发光单元的发光图案相对应的空间传感器信息。

(9)根据(8)所述的信息处理设备，其中

所述图像信息是以像素单位或具有任意大小的块单位的亮度等级。

(10)根据(1)至(9)中任一项所述的信息处理设备，还包括：

输入单元，被配置为接受用于生成所述概念数据的输入。

(11)根据(10)所述的信息处理设备，还包括：

显示单元，被配置为显示当接受所述输入时要参照的参照图像。

(12)根据(1)至(11)中任一项所述的信息处理设备，其中

所述发光单元的设置是与所述发光单元的发光强度、从所述发光单元发射的光的色温、光的软/硬度、光的照射范围和光的照射方向中的至少一项相关的设置。

(13)根据(1)至(12)中任一项所述的信息处理设备，还包括：

输出单元，被配置为输出所述发光单元的设置。

(14)根据(1)至(13)中任一项所述的信息处理设备，其中

所述被摄体是由用户指定的被摄体或自动识别出的被摄体中的至少一个。

(15)一种信息处理方法，包括：

根据指示期望图像的特性的概念数据和发光单元的发光结果确定所述发光单元的设置；以及

控制所确定的设置以在被摄体的变化发生的情况下保持所述概念数据。

(16)一种程序，用于使计算机执行以下处理：

根据指示期望图像的特性的概念数据和发光单元的发光结果确定所述发光单元的设置；以及

控制所确定的设置以在被摄体的变化发生的情况下保持所述概念数据。

(17)一种照明***，包括：

信息处理设备；以及

发光单元，

所述信息处理设备包括

控制单元，被配置为根据指示期望图像的特性的概念数据和发光单元的发光结果来确定所述发光单元的设置，并控制所确定的设置以在被摄体的变化发生的情况下保持所述概念数据，以及

输出单元，被配置为将设置输出到所述发光单元，

所述发光单元包括

发光控制单元，被配置为控制基于从所述信息处理设备输出的设置的发光。

(18)根据(17)所述的照明***，其中

所述信息处理设备使用未被记录的图像来计算所述发光单元的发光结果。

附图标记列表

1成像装置

2平板计算机

3A至3C、5A至5C光源

10照明***

107相机控制单元

201控制单元

201A调光表生成单元

201B调光信息生成单元

202平板通信单元

203显示单元

204输入单元

303A至303C、503至503C光源通信单元

Claims (18)

1.一种信息处理设备，包括：

控制单元，被配置为

接收由用户提供的概念数据，所述概念数据指示期望的图像的一个或多个特性，

接收对被摄体发射光的发光单元的发光结果，

基于所述概念数据和所述发光结果来确定所述发光单元的设置，

确定所述被摄体的变化是否已发生，

响应于确定所述被摄体的变化未发生，利用所确定的所述设置来控制所述发光单元，

响应于确定所述被摄体的变化已发生，重新确定所述发光单元的所述设置，并且

响应于确定所述被摄体的变化已发生，利用所重新确定的所述设置来控制所述发光单元。

2.根据权利要求1所述的信息处理设备，其中，

所述期望的图像的所述一个或多个特性包括为所述被摄体的每个区域指定的明亮度。

3.根据权利要求1所述的信息处理设备，其中，

所述控制单元还被配置为基于在所述发光单元已经以预定发光模式发光的情况下获得的图像的图像信息，生成与所述发光单元的发光结果相对应的调光表。

4.根据权利要求3所述的信息处理设备，其中，

所述预定发光模式是所述发光单元的发光强度。

5.根据权利要求4所述的信息处理设备，其中，

所述控制单元还被配置为基于所述被摄体中包括的移动被摄体的位置信息，生成与所述发光单元的发光结果相对应的调光表。

6.根据权利要求5所述的信息处理设备，其中，

所述控制单元还被配置为基于与预定发光强度和预定位置信息相对应的图像信息来生成位置信息，所述位置信息不同于所述预定位置信息。

7.根据权利要求3所述的信息处理设备，其中，

所述预定发光模式是所述发光单元的色温。

8.根据权利要求3所述的信息处理设备，其中，

所述图像信息是与所述发光单元的所述预定发光模式相对应的空间传感器信息。

9.根据权利要求8所述的信息处理设备，其中，

所述图像信息是以像素单位或具有任意大小的块单位的亮度等级。

10.根据权利要求1所述的信息处理设备，还包括：

输入单元，被配置为接受来自用户的输入以生成所述概念数据。

11.根据权利要求10所述的信息处理设备，还包括：

显示单元，被配置为显示当接受所述输入时要参照的参照图像。

12.根据权利要求1所述的信息处理设备，其中，

所述发光单元的设置是与所述发光单元的发光强度、从所述发光单元发射的光的色温、该光的软硬度、该光的照射范围和该光的照射方向中的至少一项相关的设置。

13.根据权利要求1所述的信息处理设备，还包括：

输出单元，被配置为将所述设置输出到所述发光单元。

14.根据权利要求1所述的信息处理设备，其中，

所述被摄体是由用户指定的被摄体或自动识别出的被摄体中的至少一个。

15.一种信息处理方法，包括：

接收由用户提供的概念数据，所述概念数据指示期望的图像的一个或多个特性；

接收对被摄体发射光的发光单元的发光结果；

基于所述概念数据和所述发光结果来确定所述发光单元的设置；

确定所述被摄体的变化是否已发生；

响应于确定所述被摄体的变化未发生，利用所确定的所述设置来控制所述发光单元；

响应于确定所述被摄体的变化已发生，重新确定所述发光单元的所述设置；以及

响应于确定所述被摄体的变化已发生，利用所重新确定的所述设置来控制所述发光单元。

16.一种存储有程序的存储器，所述程序用于使计算机执行以下处理：

接收由用户提供的概念数据，所述概念数据指示期望的图像的一个或多个特性；

接收对被摄体发射光的发光单元的发光结果；

基于所述概念数据和所述发光结果来确定所述发光单元的设置；

确定所述被摄体的变化是否已发生；

响应于确定所述被摄体的变化未发生，利用所确定的所述设置来控制所述发光单元；

响应于确定所述被摄体的变化已发生，重新确定所述发光单元的所述设置；以及

响应于确定所述被摄体的变化已发生，利用所重新确定的所述设置来控制所述发光单元。

17.一种照明***，包括：

信息处理设备；以及

发光单元，被配置为基于设置来对被摄体发射光，

所述信息处理设备包括

控制单元，被配置为

接收由用户提供的概念数据，所述概念数据指示期望的图像的一个或多个特性，

接收所述发光单元的发光结果，

基于所述概念数据和所述发光结果来确定所述发光单元的设置，

确定所述被摄体的变化是否已发生，

响应于确定所述被摄体的变化未发生，利用所确定的所述设置来控制所述发光单元，

响应于确定所述被摄体的变化已发生，重新确定所述发光单元的所述设置，并且

响应于确定所述被摄体的变化已发生，利用所重新确定的所述设置来控制所述发光单元，以及

输出单元，被配置为将所述设置输出到所述发光单元，

所述发光单元包括

发光控制单元，被配置为控制基于从所述信息处理设备输出的所述设置的发光。

18.根据权利要求17所述的照明***，其中，

所述信息处理设备使用未被记录的图像来计算所述发光单元的发光结果。

Images