JP2017212640A - Color adjustment device and color adjustment system - Google Patents

Color adjustment device and color adjustment system Download PDF

Info

Publication number
JP2017212640A
JP2017212640A JP2016105300A JP2016105300A JP2017212640A JP 2017212640 A JP2017212640 A JP 2017212640A JP 2016105300 A JP2016105300 A JP 2016105300A JP 2016105300 A JP2016105300 A JP 2016105300A JP 2017212640 A JP2017212640 A JP 2017212640A
Authority
JP
Japan
Prior art keywords
color
adjustment
unit
signal value
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016105300A
Other languages
Japanese (ja)
Other versions
JP6774788B2 (en
Inventor
林田 哲哉
Tetsuya Hayashida
哲哉 林田
顕一郎 正岡
Kenichiro Masaoka
顕一郎 正岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Japan Broadcasting Corp
Original Assignee
Nippon Hoso Kyokai NHK
Japan Broadcasting Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Hoso Kyokai NHK, Japan Broadcasting Corp filed Critical Nippon Hoso Kyokai NHK
Priority to JP2016105300A priority Critical patent/JP6774788B2/en
Publication of JP2017212640A publication Critical patent/JP2017212640A/en
Application granted granted Critical
Publication of JP6774788B2 publication Critical patent/JP6774788B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Spectrometry And Color Measurement (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

PROBLEM TO BE SOLVED: To mitigate work related to color adjustment depending on an imaging environment.SOLUTION: A spectral characteristic acquisition unit acquires a spectral characteristic of illumination light. A signal value calculation unit calculate an adjustment signal value by making the spectral characteristic of the illumination light, a spectral characteristic of a target imaging unit for imaging a picture, a target of color adjustment, and an adjustment parameter be acted on a signal value showing a predetermined reference color. An adjustment parameter setting unit calculates the adjustment parameter so as to reduce a residual between the adjustment signal value and a reference signal value of the reference color from a reference imaging unit for imaging a picture to be referred to in the color adjustment.SELECTED DRAWING: Figure 2

Description

本発明は、色調整装置および色調整システムに関する。   The present invention relates to a color adjustment device and a color adjustment system.

テレビジョン放送番組の映像を撮像するカメラの分光感度特性は個々に異なる。その一因として、カメラの分光方式の違いがある。分光方式には、例えば、単板方式と3板方式がある。両方式間ではフィルタの形成方法が異なる。単板方式では、顔料を主成分とするカラーレジストをフォトリソグラフィによって撮像素子上にパターンニングしてフィルタを形成する。三板方式ではガラス基板上にスパッタ法を用いて誘電体多層膜を形成し、この誘電体多層膜がフィルタとして用いられる。よって、両方式間でフィルタの分光透過特性が異なる。また、同一の分光方式であっても分光感度特性が異なることがある。例えば、単板方式であっても、カラーレジストの原料である種々の顔料の混合条件によって透過特性が異なる。その他、分光感度特性が異なる原因として、レンズ、フィルタなどの光学系の透過特性の差異、撮像素子自体の分光感度特性が素子の特性に応じて異なること、などが挙げられる。   The spectral sensitivity characteristics of cameras that capture images of television broadcast programs are individually different. One reason for this is the difference in the spectral system of the camera. The spectroscopic method includes, for example, a single plate method and a three plate method. The filter formation method differs between the two systems. In the single plate method, a color resist mainly composed of a pigment is patterned on an image sensor by photolithography to form a filter. In the three-plate method, a dielectric multilayer film is formed on a glass substrate by sputtering, and this dielectric multilayer film is used as a filter. Therefore, the spectral transmission characteristics of the filter differ between the two systems. Also, even with the same spectral method, spectral sensitivity characteristics may be different. For example, even in the single plate system, the transmission characteristics differ depending on the mixing conditions of various pigments that are the raw materials of the color resist. Other reasons for the difference in spectral sensitivity characteristics include differences in transmission characteristics of optical systems such as lenses and filters, and differences in spectral sensitivity characteristics of the image sensor itself depending on the characteristics of the elements.

分光感度特性がカメラによって異なると、同じ照明のもとで、同じ被写体を複数のカメラで撮影すると、異なる色の画像が出力される。この色の差異を修正するために、画像データにリニアマトリックスやカラーコレクタなどを用いて、カメラ間で同一の色の画像が出力されるように色を修正する必要がある。例えば、特許文献1には、基準信号を表示装置に出力し、基準信号に基づいて表示装置に表示された画像を撮像し、獲得された画像信号を解析して一般画像信号を表示装置に所望の状態で表示させるキャリブレーション値を生成し、キャリブレーション値に基づき一般画像信号を補正するキャリブレーション装置について記載されている。   If the spectral sensitivity characteristics differ from camera to camera, images of different colors are output when the same subject is photographed by a plurality of cameras under the same illumination. In order to correct this color difference, it is necessary to correct the color so that images of the same color are output between the cameras by using a linear matrix or a color corrector for the image data. For example, in Patent Document 1, a reference signal is output to a display device, an image displayed on the display device is captured based on the reference signal, an acquired image signal is analyzed, and a general image signal is desired for the display device. A calibration device that generates a calibration value to be displayed in this state and corrects a general image signal based on the calibration value is described.

特開2006−333240号公報JP 2006-333240 A

撮影の際に異なる照明を用いる場合には、その都度色の調整を行う必要がある。一般に調整に係る作業は煩雑であり相当の時間を要する。
例えば、生放送の中継(ライブ中継)では、撮影に用いる複数のカメラの全てを同一のカラーチャートに向けて設置し、照明をカラーチャートに当てて色調整を行う。色調整において、撮影時に用いる照明と、所定の基準色を表す領域が配列されたカラーチャートを用いる。その場合には、色の調整を行うビデオエンジニアの他、撮影を行うカメラマンが撮影現場に臨席する必要がある点で人的な作業が要求される。また、色の調整の際には、照明をカラーチャートに当てる必要がある。そのような照明を常時当てることができない劇場などでは、色の調整を行う時間が限られる。
When different illumination is used for shooting, it is necessary to adjust the color each time. In general, the work related to adjustment is complicated and requires a considerable amount of time.
For example, in live broadcasting (live broadcasting), all of a plurality of cameras used for shooting are installed facing the same color chart, and color adjustment is performed by illuminating the color chart. In color adjustment, a color chart in which illumination used at the time of photographing and an area representing a predetermined reference color are arranged is used. In this case, a human engineer is required in that a video engineer who performs color adjustment and a photographer who performs shooting need to be present at the shooting site. In addition, when adjusting the color, it is necessary to illuminate the color chart. In theaters or the like where such lighting cannot be applied at all times, the time for color adjustment is limited.

また、屋外での撮影(ロケ)では、撮影場所や時間によって照明の条件が変化する。そのため、撮影現場では色の調整を行わずに、撮影する度にカラーチャートを撮影し、撮影した画像を編集する際に色の調整を行うこともある。この場合には、編集時に煩雑な色調整作業を行う必要が生じる。   Also, in outdoor shooting (location), lighting conditions vary depending on the shooting location and time. For this reason, the color chart may be taken every time the image is taken without adjusting the color at the shooting site, and the color may be adjusted when the taken image is edited. In this case, it is necessary to perform complicated color adjustment work during editing.

本発明は上記の課題を解決するためになされたものであり、[1]本発明の一態様は、照明光の分光特性を取得する分光特性取得部と、所定の基準色を表す信号値に、前記照明光の分光特性、色調整の対象である画像を撮影する対象撮影部の分光特性および調整パラメータを作用して調整信号値を算出する信号値算出部と、色調整において参照する画像を撮影する参照撮影部からの前記基準色の参照信号値と前記調整信号値との残差を少なくするように前記調整パラメータを算出する調整パラメータ設定部と、を備える色調整装置である。
[1]の構成によれば、対象撮像部が撮影した画像の色調整に用いる調整パラメータが、測定された照明光の分光特性に基づいて得られる調整信号値が参照信号値に近似するように算出される。そのため、算出した調整パラメータを用いることで複数の対象撮像部のそれぞれの撮影環境に応じて異なる照明光の分光特性に関わらず撮影した画像の色が互いに近似されるように調整することができる。
The present invention has been made to solve the above-described problems. [1] One aspect of the present invention provides a spectral characteristic acquisition unit that acquires spectral characteristics of illumination light, and a signal value that represents a predetermined reference color. A signal value calculation unit that calculates an adjustment signal value by operating spectral characteristics and adjustment parameters of a target imaging unit that captures the spectral characteristics of the illumination light, an image that is a target of color adjustment, and an image that is referred to in color adjustment. An adjustment parameter setting unit that calculates the adjustment parameter so as to reduce a residual between the reference signal value of the reference color from the reference photographing unit to be photographed and the adjustment signal value.
According to the configuration of [1], an adjustment parameter value used for color adjustment of an image captured by the target imaging unit is adjusted such that an adjustment signal value obtained based on the measured spectral characteristic of illumination light approximates a reference signal value. Calculated. Therefore, by using the calculated adjustment parameter, it is possible to adjust so that the colors of the captured images are approximated to each other regardless of the spectral characteristics of the illumination light that differs depending on the imaging environment of each of the plurality of target imaging units.

[2]本発明の一態様は、上述の色調整装置であって、前記調整パラメータ設定部は、前記残差として、前記調整信号値に基づく色空間値と前記調整信号値に基づく色空間値との差を算出することを特徴とする。
[2]の構成によれば、複数の対象撮像部のそれぞれが撮影した画像について、人間が知覚する色を定量的に表す色空間の領域において、画像の色が互いに近似させることができる調整パラメータを算出することができる。
[2] One aspect of the present invention is the above-described color adjustment device, wherein the adjustment parameter setting unit includes, as the residual, a color space value based on the adjustment signal value and a color space value based on the adjustment signal value. The difference is calculated.
According to the configuration of [2], with respect to the images captured by each of the plurality of target imaging units, the adjustment parameters that can approximate the colors of the images in a color space region that quantitatively represents the color perceived by humans. Can be calculated.

[3]本発明の一態様は、上述の色調整装置であって、前記対象撮影部の分光特性が記憶された記憶部と、前記対象撮影部の接続を検出する検出部とを備え、前記信号値算出部は、前記対象撮影部の分光特性として前記検出部が検出した対象撮像部の分光特性を用いて前記調整信号値を算出することを特徴とする。
[3]の構成によれば、対象撮影部が交換されるとき、それぞれの対象撮影部が撮影した画像の色が、参照撮影部が撮影した画像の色に近似するように調整される。そのため、算出される調整パラメータを用いることで、対象撮影部の交換の有無に関わらず、撮影した画像の色が複数の対象撮影部間で互いに近似するように色調整を行うことができる。また、対象撮影部の分光特性の設定に係るユーザの操作を回避することができる。
[3] One aspect of the present invention is the color adjustment apparatus described above, including a storage unit in which spectral characteristics of the target imaging unit are stored, and a detection unit that detects connection of the target imaging unit, The signal value calculation unit calculates the adjustment signal value using the spectral characteristic of the target imaging unit detected by the detection unit as the spectral characteristic of the target imaging unit.
According to the configuration of [3], when the target photographing units are replaced, the color of the image photographed by each target photographing unit is adjusted so as to approximate the color of the image photographed by the reference photographing unit. Therefore, by using the calculated adjustment parameter, it is possible to perform color adjustment so that the colors of the captured images are approximated to each other among the plurality of target imaging units regardless of whether or not the target imaging unit is replaced. In addition, it is possible to avoid a user operation related to the setting of the spectral characteristics of the target photographing unit.

[4]本発明の一態様は、上述の色調整装置であって、前記記憶部には、前記対象撮影部に装着される機器の分光特性が記憶され、前記検出部は、前記機器の装着を検出し、前記信号値算出部は、前記検出部が装着を検出した機器の分光特性をさらに作用して前記調整信号値を算出することを特徴とする。
[4]の構成によれば、対象撮影部への付属機器の着脱もしくは交換の状態に応じて、対象撮影部が撮影した画像の色が参照撮影部で撮影される画像の色に近似するように調整される。そのため、算出される調整パラメータを用いることで、対象撮影部への付属機器の着脱もしくは交換の有無の状態や、互いにこれらの状態が異なる複数の対象撮影部間で、撮影した画像の色が互いに近似するように色調整を行うことができる。また、対象撮影部に装着された付属機器の分光特性の設定に係るユーザの操作を回避することができる。
[4] One aspect of the present invention is the color adjustment device described above, wherein the storage unit stores spectral characteristics of a device attached to the target photographing unit, and the detection unit is attached to the device. And the signal value calculation unit calculates the adjustment signal value by further acting on a spectral characteristic of a device that the detection unit detects wearing.
According to the configuration of [4], the color of the image photographed by the target photographing unit approximates the color of the image photographed by the reference photographing unit according to the attachment / detachment or replacement state of the accessory device to the target photographing unit. Adjusted to For this reason, by using the calculated adjustment parameter, the state of whether or not the attached device is attached to or detached from the target imaging unit, and the color of the captured image between a plurality of target imaging units having different states from each other are mutually different. Color adjustment can be made to approximate. In addition, it is possible to avoid a user operation related to the setting of the spectral characteristics of the accessory device attached to the target photographing unit.

[5]本発明の一態様は、上述の色調整装置と、少なくとも2個の前記対象撮影部と、前記対象撮影部にそれぞれ対応した照明からの前記照明光の分光特性を測定する分光放射照度計とを備え、前記調整パラメータ設定部は、前記調整パラメータを前記対象撮影部に出力することを特徴とする色調整システムである。
[5]の構成によれば、少なくとも2個の対象撮像部がそれぞれ撮影した画像の色調整に用いる調整パラメータが、測定された照明光の分光特性に基づいて得られる調整信号値が参照信号値に近似するように算出される。そのため、算出した調整パラメータを用いることで少なくとも2個の対象撮像部それぞれの撮影環境に応じて異なる照明光の分光特性に関わらず、撮影した画像の色が互いに近似するように色調整を行うことができる。
[5] One aspect of the present invention is a spectral irradiance for measuring spectral characteristics of the illumination light from illumination corresponding to the color adjustment device, at least two target imaging units, and the target imaging unit, respectively. A color adjustment system, wherein the adjustment parameter setting unit outputs the adjustment parameter to the target photographing unit.
With the configuration of [5], the adjustment signal value obtained based on the measured spectral characteristic of the illumination light is the reference signal value as the adjustment parameter used for color adjustment of the images captured by the at least two target imaging units. It is calculated so as to approximate. Therefore, by using the calculated adjustment parameter, color adjustment is performed so that the colors of the captured images approximate each other regardless of the spectral characteristics of the illumination light that differs depending on the imaging environment of each of the at least two target imaging units. Can do.

本発明によれば、撮影環境に応じた色調整に係る作業を軽減することができる。   According to the present invention, it is possible to reduce work related to color adjustment according to a shooting environment.

第1実施形態に係る色調整システムの構成を示す概略図である。It is the schematic which shows the structure of the color adjustment system which concerns on 1st Embodiment. 第1実施形態に係る色調整システムの機能構成を示すブロック図である。It is a block diagram which shows the function structure of the color adjustment system which concerns on 1st Embodiment. 第1実施形態に係るカメラ撮像を表す模式図を示す。The schematic diagram showing the camera imaging which concerns on 1st Embodiment is shown. 第1実施形態に係る変換マトリックスの一例を示す図である。It is a figure which shows an example of the conversion matrix which concerns on 1st Embodiment. 第2実施形態に係る色調整システムの機能構成を示すブロック図である。It is a block diagram which shows the function structure of the color adjustment system which concerns on 2nd Embodiment. 第2実施形態に係る分光特性テーブルの一例を示す図である。It is a figure which shows an example of the spectral characteristics table which concerns on 2nd Embodiment. 第2実施形態に係る色調整処理を示すフローチャートである。It is a flowchart which shows the color adjustment process which concerns on 2nd Embodiment. 第2実施形態の変形例に係る分光特性テーブルの一例を示す図である。It is a figure which shows an example of the spectral characteristics table which concerns on the modification of 2nd Embodiment. 第2実施形態の変形例に係る色調整処理を示すフローチャートである。It is a flowchart which shows the color adjustment process which concerns on the modification of 2nd Embodiment.

(第1実施形態)
以下、図面を参照しながら本発明の第1実施形態の一構成例である色調整システム1について説明する。
図1は、本実施形態に係る色調整システム1の構成を示す概略図である。
色調整システム1は、コントローラ10、分光放射照度計20−A、20−B、カメラ30−A、30−Bおよびリファレンスカメラ30−rを含んで構成される。以下の説明では、分光放射照度計20−A、20−B、カメラ30−A、30−Bを、それぞれ分光放射照度計20、カメラ30と総称することがある。図1に示す例では、分光放射照度計20、カメラ30の個数は、それぞれ2個であるが、3個以上であってもよい。
(First embodiment)
Hereinafter, a color adjustment system 1 which is one configuration example of the first embodiment of the present invention will be described with reference to the drawings.
FIG. 1 is a schematic diagram illustrating a configuration of a color adjustment system 1 according to the present embodiment.
The color adjustment system 1 includes a controller 10, spectral irradiance meters 20-A and 20-B, cameras 30-A and 30-B, and a reference camera 30-r. In the following description, the spectral irradiance meters 20-A and 20-B and the cameras 30-A and 30-B may be collectively referred to as the spectral irradiance meter 20 and the camera 30, respectively. In the example shown in FIG. 1, the number of the spectral irradiance meter 20 and the camera 30 is two each, but may be three or more.

リファレンスカメラ30−rは、撮影した画像の色を基準として用いるカメラである。これは実在するカメラでも仮想的なカメラでもよい。リファレンスカメラ30−rとして、理想的な撮像特性を有する仮想的なカメラが好適である。リファレンスカメラ30−rは、被写体として予め色票Cmの画像を参照画像として撮影し、撮影した参照画像を形成する画素毎の参照信号値である参照RGB値を表す参照画像データをコントローラ10に出力する。この参照RGBデータは、実在するカメラを用いたデータであっても、仮想的なカメラを想定して計算上求めたRGB値でも構わない。RGB値は、赤、緑、青の各色信号値を要素として含むベクトル量である。リファレンス照明Lt−rは、放射する照明光を分光分布の基準として用いる照明である。リファレンス照明Lt−rは、照明光を色票Cmに照射し、色票Cmで反射した反射光が参照画像として撮影される。色票Cmは、色調整の基準とする複数の基準色を表す領域である色見本を配列した物体である。色票Cmとして、カラーチェッカーが利用可能である。カラーチェッカーは、所定の24色相の矩形の色見本が配列されてなる。   The reference camera 30-r is a camera that uses the color of the captured image as a reference. This may be a real camera or a virtual camera. As the reference camera 30-r, a virtual camera having ideal imaging characteristics is preferable. The reference camera 30-r previously captures an image of the color chart Cm as a reference image as a subject, and outputs reference image data representing a reference RGB value, which is a reference signal value for each pixel forming the captured reference image, to the controller 10. To do. The reference RGB data may be data using an actual camera or an RGB value obtained by calculation assuming a virtual camera. The RGB value is a vector quantity including each color signal value of red, green, and blue as an element. The reference illumination Lt-r is illumination that uses emitted illumination light as a reference for spectral distribution. The reference illumination Lt-r illuminates the color chart Cm with illumination light, and the reflected light reflected by the color chart Cm is photographed as a reference image. The color chart Cm is an object in which color samples that are areas representing a plurality of reference colors used as a reference for color adjustment are arranged. A color checker can be used as the color chart Cm. The color checker is formed by arranging rectangular color samples of a predetermined 24 hues.

カメラ30−A、30−Bは、撮影した画像の色の調整対象となるカメラである。カメラ30−A、30−Bの分光特性であるカメラ分光特性を示すカメラ分光特性データを予め記憶部16に記憶させておく。図1に示すように、カメラの分光特性は個々のカメラによって異なる。図1において、各カメラの上方に示す曲線SB−r、SG−r、SR−r等は、それぞれ青色、緑色、赤色の光を透過する当該カメラが備えるカラーフィルタの分光特性を示す。予め記憶させておく各カメラ30のカメラ分光特性データは、単波長を発するモノクロメータ(図示していない)を用いて各カメラごとに予め取得されているものとする。   The cameras 30-A and 30-B are cameras that are objects of color adjustment of captured images. Camera spectral characteristic data indicating the camera spectral characteristics which are the spectral characteristics of the cameras 30-A and 30-B are stored in the storage unit 16 in advance. As shown in FIG. 1, the spectral characteristics of the camera differ depending on the individual camera. In FIG. 1, curves SB-r, SG-r, SR-r, and the like shown above each camera indicate spectral characteristics of color filters provided in the camera that transmit blue, green, and red light, respectively. It is assumed that the camera spectral characteristic data of each camera 30 stored in advance is acquired in advance for each camera using a monochromator (not shown) that emits a single wavelength.

分光放射照度計20−A、20−Bは、それぞれに対応付けられた照明Lt−A、Lt−Bからの照明光の分光特性である照明分光特性を測定し、測定した照明分光特性を示す照明分光特性データをコントローラ10に出力する。   The spectral irradiance meters 20-A and 20-B measure the illumination spectral characteristics which are the spectral characteristics of the illumination light from the illuminations Lt-A and Lt-B associated with the respective irradiance meters 20-A and 20-B, and show the measured illumination spectral characteristics The illumination spectral characteristic data is output to the controller 10.

コントローラ10は、分光放射照度計20−A、20−Bから照明分光特性データをそれぞれ取得する。コントローラ10は、色票Cmが示す所定の基準色を示す画素毎の信号値に照明分光特性、カメラ分光特性およびカメラ30−A、30−Bの調整パラメータを作用して、カメラ30−A、30−Bのそれぞれについて調整信号値を算出する。照明分光特性として、分光放射照度計20−A、20−Bからの照明分光特性データが示す照明分光特性が用いられる。カメラ分光特性として、記憶部16に記憶されたカメラ30−A、30−Bのカメラ分光特性データが示すカメラ分光特性が用いられる。カメラ30−A、30−Bの調整パラメータにはリニアマトリックスが含まれる。   The controller 10 acquires illumination spectral characteristic data from the spectral irradiance meters 20-A and 20-B, respectively. The controller 10 operates the illumination spectral characteristics, the camera spectral characteristics, and the adjustment parameters of the cameras 30-A and 30-B on the signal value of each pixel indicating a predetermined reference color indicated by the color chart Cm, and thereby adjusts the camera 30-A, An adjustment signal value is calculated for each of 30-B. As the illumination spectral characteristic, the illumination spectral characteristic indicated by the illumination spectral characteristic data from the spectral irradiance meters 20-A and 20-B is used. As the camera spectral characteristic, the camera spectral characteristic indicated by the camera spectral characteristic data of the cameras 30-A and 30-B stored in the storage unit 16 is used. The adjustment parameters of the cameras 30-A and 30-B include a linear matrix.

コントローラ10は、リファレンスカメラ30−rからの参照画像データが示す参照信号値と、カメラ30−A、30−Bそれぞれについて算出した調整信号値との残差を少なくするようにリニアマトリックスを算出する。コントローラ10は、カメラ30−A、30−Bのそれぞれについて算出したリニアマトリックスを、カメラ30−A、30−Bに出力する。リニアマトリックスは、カメラ30−A、30−Bが備える信号処理系が撮像された画像の信号値と乗算して出力信号値を算出するために用いられる。出力信号値を表す出力画像データは、色調整がなされた画像を示すデータであり、放送番組の映像もしくは素材として用いられる。   The controller 10 calculates a linear matrix so as to reduce the residual between the reference signal value indicated by the reference image data from the reference camera 30-r and the adjustment signal value calculated for each of the cameras 30-A and 30-B. . The controller 10 outputs the linear matrix calculated for each of the cameras 30-A and 30-B to the cameras 30-A and 30-B. The linear matrix is used to calculate an output signal value by multiplying a signal value of an image captured by a signal processing system included in the cameras 30-A and 30-B. The output image data representing the output signal value is data indicating an image whose color has been adjusted, and is used as a video or material of a broadcast program.

次に、本実施形態に係るコントローラ10の機能構成について説明する。
図2は、本実施形態に係る色調整システム1の機能構成を示すブロック図である。
コントローラ10は、データ入力部12、信号処理部14、操作部15、記憶部16およびデータ出力部17を含んで構成される。なお、図2に示す例ではリファレンスカメラ30−rの図示が省略されている。リファレンスカメラ30−rから取得した参照画像データが予め記憶部16に記憶されていることを前提とする。
Next, a functional configuration of the controller 10 according to the present embodiment will be described.
FIG. 2 is a block diagram illustrating a functional configuration of the color adjustment system 1 according to the present embodiment.
The controller 10 includes a data input unit 12, a signal processing unit 14, an operation unit 15, a storage unit 16, and a data output unit 17. In the example shown in FIG. 2, the reference camera 30-r is not shown. It is assumed that reference image data acquired from the reference camera 30-r is stored in the storage unit 16 in advance.

データ入力部12は、分光放射照度計20−A、20−Bからそれぞれ入力される分光特性データを信号処理部14に出力する。   The data input unit 12 outputs spectral characteristic data respectively input from the spectral irradiance meters 20 -A and 20 -B to the signal processing unit 14.

信号処理部14は、分光特性取得部141、RGB値算出部142および調整パラメータ設定部143を含んで構成される。   The signal processing unit 14 includes a spectral characteristic acquisition unit 141, an RGB value calculation unit 142, and an adjustment parameter setting unit 143.

分光特性取得部141は、分光放射照度計20−A、20−Bからそれぞれデータ入力部12を介して入力されるカメラ分光特性データを取得し、取得したカメラ分光特性データをRGB値算出部142に出力する。   The spectral characteristic acquisition unit 141 acquires camera spectral characteristic data input from the spectral irradiance meters 20-A and 20-B via the data input unit 12, respectively, and the acquired camera spectral characteristic data is converted into an RGB value calculation unit 142. Output to.

RGB値算出部142は、記憶部16から予め記憶された色票Cmが示す所定の基準色を示す画素毎の信号値を示す色票画像データと、カメラ30−A、30−Bの分光特性を示すカメラ分光特性データを読み取る。RGB値算出部142には、RGB値算出部142は、調整パラメータ設定部143から入力される調整パラメータを示す調整パラメータデータが入力される。調整パラメータデータには、カメラ30−A、30−Bそれぞれのゲインデータとリニアマトリックスが含まれる。   The RGB value calculation unit 142 includes color chart image data indicating a signal value for each pixel indicating a predetermined reference color indicated by the color chart Cm stored in advance from the storage unit 16, and spectral characteristics of the cameras 30-A and 30-B. Is read. The RGB value calculation unit 142 receives adjustment parameter data indicating the adjustment parameters input from the adjustment parameter setting unit 143. The adjustment parameter data includes gain data and a linear matrix for each of the cameras 30-A and 30-B.

RGB値算出部142は、色票画像データが示す画素毎のRGB値に、カメラ30−A、30−Bにそれぞれ対応する照明Lt−A、Lt−Bの照明分光特性およびカメラ30−A、30−Bのカメラ分光特性データが示すカメラ分光特性をそれぞれ乗算して、調整パラメータの算出に用いるための基準信号値として基準RGB値を算出する。
RGB値算出部142は、調整パラメータ設定部143から入力されるカメラ30−A、30−Bの調整パラメータであるゲインとリニアマトリックスを基準RGB値にそれぞれ乗算して調整信号値として調整RGB値を算出する。
RGB値算出部142は、カメラ毎に算出した基準RGB値と調整RGB値を調整パラメータ設定部143に出力する。
The RGB value calculation unit 142 converts the RGB values for each pixel indicated by the color chart image data into illumination spectral characteristics of the illuminations Lt-A and Lt-B corresponding to the cameras 30-A and 30-B, and the cameras 30-A and 30-A, respectively. Each of the camera spectral characteristics indicated by the 30-B camera spectral characteristic data is multiplied to calculate a reference RGB value as a reference signal value for use in calculating the adjustment parameter.
The RGB value calculation unit 142 multiplies the reference RGB value by the gain and linear matrix, which are the adjustment parameters of the cameras 30-A and 30-B input from the adjustment parameter setting unit 143, to obtain the adjustment RGB value as an adjustment signal value. calculate.
The RGB value calculation unit 142 outputs the reference RGB value and the adjustment RGB value calculated for each camera to the adjustment parameter setting unit 143.

調整パラメータ設定部143は、ゲイン設定部144およびリニアマトリックス算出部145を含んで構成される。
ゲイン設定部144は、RGB値算出部142から入力されるカメラ毎の基準RGB値に乗算されるゲインを定める。ゲインは、各色成分の要素ゲインからなるベクトル値である。要素ゲインは、基準RGB値を構成する各色成分の色信号値であるR信号値、G信号値およびB信号値にそれぞれ乗じられるパラメータである。ゲイン設定部144は、調整RGB値が表す色のホワイトバランスを合わせるように要素ゲインを定める。ゲイン設定部144は、例えば、色票Cmのうち基準色が無彩色である領域内の画素の調整RGB値が表す色が無彩色となるように要素ゲインを定める。無彩色とは、彩度を有しない色であり、白、黒ならびに各種の濃度の灰色が含まれる。その際、ゲイン設定部144は、公知のホワイトバランスゲイン算出方法を用いてゲインを算出してもよいし、操作部15からの操作信号で指定されるゲインを採用してもよい。ゲイン設定部144は、カメラ30−A、30−B毎に定めたゲインをRGB値算出部142と、データ出力部17を介してそれぞれのカメラ30−A、30−Bに出力する。
The adjustment parameter setting unit 143 includes a gain setting unit 144 and a linear matrix calculation unit 145.
The gain setting unit 144 determines a gain by which the reference RGB value for each camera input from the RGB value calculation unit 142 is multiplied. The gain is a vector value composed of element gains of the respective color components. The element gain is a parameter that is multiplied by the R signal value, the G signal value, and the B signal value, which are the color signal values of the respective color components constituting the reference RGB value. The gain setting unit 144 determines the element gain so that the white balance of the color represented by the adjusted RGB value is matched. For example, the gain setting unit 144 determines the element gain so that the color represented by the adjustment RGB value of the pixel in the region where the reference color is an achromatic color in the color chart Cm is an achromatic color. An achromatic color is a color having no saturation, and includes white, black, and gray of various concentrations. At that time, the gain setting unit 144 may calculate the gain using a known white balance gain calculation method, or may adopt a gain specified by an operation signal from the operation unit 15. The gain setting unit 144 outputs the gain determined for each of the cameras 30 -A and 30 -B to the respective cameras 30 -A and 30 -B via the RGB value calculation unit 142 and the data output unit 17.

リニアマトリックス算出部145は、記憶部16に予め記憶させた参照画像データを読み取る。リニアマトリックス算出部145は、RGB値算出部142から入力されたカメラ30−A、30−B毎の調整RGB値と、読み取った参照画像データが示す参照RGB値との残差が少なくなるように、調整RGB値の算出に用いるリニアマトリックスを算出する。リニアマトリックス算出部145は、例えば、最小二乗法を用いてリニアマトリックスを再帰的に算出する。リニアマトリックス算出部145は、算出したリニアマトリックスをRGB値算出部142に出力する。リニアマトリックス算出部145は、残差が所定の残差の閾値よりも小さくなったときリニアマトリックスを算出する処理を停止し、最終的に算出したカメラ30−A、30−B毎のリニアマトリックスをカメラ30−A、30−Bのそれぞれにデータ出力部17を介して出力する。   The linear matrix calculation unit 145 reads the reference image data stored in advance in the storage unit 16. The linear matrix calculation unit 145 reduces the residual between the adjustment RGB value for each of the cameras 30-A and 30-B input from the RGB value calculation unit 142 and the reference RGB value indicated by the read reference image data. The linear matrix used for calculating the adjusted RGB values is calculated. The linear matrix calculation unit 145 recursively calculates the linear matrix using, for example, the least square method. The linear matrix calculation unit 145 outputs the calculated linear matrix to the RGB value calculation unit 142. The linear matrix calculation unit 145 stops the process of calculating the linear matrix when the residual becomes smaller than a predetermined residual threshold, and finally calculates the linear matrix for each of the cameras 30-A and 30-B. The data is output to the cameras 30-A and 30-B via the data output unit 17, respectively.

操作部15は、ユーザの操作に応じて操作信号を生成し、生成した操作信号を信号処理部14に出力する。操作部15は、ユーザの操作を受け付ける部材として、ボタン、つまみなどの物理的な部材を含んで構成される。操作部15は、タッチセンサなどのポインティングデバイスと所定の制御プログラムで指示される動作を実行する制御デバイスを含んで構成されたユーザインタフェースであってもよい。制御デバイスは、例えば、CPU(Central Processing Unit)である。制御プログラムで指示される処理には、所定の案内画像を表示部に表示させる処理と、タッチセンサなどのポインティングデバイスで指定された座標に対応する情報や機能を示す操作信号を生成する処理が含まれる。   The operation unit 15 generates an operation signal according to a user operation, and outputs the generated operation signal to the signal processing unit 14. The operation unit 15 is configured to include physical members such as buttons and knobs as members that receive user operations. The operation unit 15 may be a user interface including a pointing device such as a touch sensor and a control device that executes an operation instructed by a predetermined control program. The control device is, for example, a CPU (Central Processing Unit). The process instructed by the control program includes a process of displaying a predetermined guidance image on the display unit and a process of generating an operation signal indicating information or a function corresponding to coordinates designated by a pointing device such as a touch sensor. It is.

記憶部16は、信号処理部14において処理に用いられるデータ、信号処理部14が生成したデータを記憶する。記憶部16は、ROM(Read−only Memory)、RAM(Random Access Memory)などの記憶媒体を含んで構成される。
データ出力部17は、信号処理部14から入力されるデータとしてカメラ30−A、30−B毎の調整パラメータであるゲインとリニアマトリックスを、カメラ30−A、30−Bのそれぞれに出力する。データ出力部17は、データ入力部12と一体化した単一のデータ入出力インタフェースとして構成されてもよい。
The storage unit 16 stores data used for processing in the signal processing unit 14 and data generated by the signal processing unit 14. The storage unit 16 includes a storage medium such as a ROM (Read-Only Memory) and a RAM (Random Access Memory).
The data output unit 17 outputs gain and linear matrix, which are adjustment parameters for each of the cameras 30-A and 30-B, as data input from the signal processing unit 14, to each of the cameras 30-A and 30-B. The data output unit 17 may be configured as a single data input / output interface integrated with the data input unit 12.

(調整RGB値の成分)
次に、RGB値算出部142において算出される調整RGB値の成分について説明する。
図3は、本実施形態に係るカメラ撮像を表す模式図である。
照明Ltからの照明光が色票Cmで反射した反射光が、カメラ30に入射される。従って、反射光の分光特性は、色票分光反射率ρ(λ)に照明分光分布P(λ)を乗じて得られる分光特性となる。色票分光反射率ρ(λ)で表される色票Cmの基準色は、上述の色票画像データが示す画素毎のRGB値で表される。照明分光分布P(λ)は、上述の照明分光特性に相当する。
(Adjusted RGB value component)
Next, components of the adjusted RGB value calculated by the RGB value calculation unit 142 will be described.
FIG. 3 is a schematic diagram illustrating camera imaging according to the present embodiment.
Reflected light obtained by reflecting the illumination light from the illumination Lt with the color chart Cm is incident on the camera 30. Accordingly, the spectral characteristic of the reflected light is a spectral characteristic obtained by multiplying the color chart spectral reflectance ρ (λ) by the illumination spectral distribution P (λ). The reference color of the color chart Cm represented by the color chart spectral reflectance ρ (λ) is represented by the RGB value for each pixel indicated by the color chart image data described above. The illumination spectral distribution P (λ) corresponds to the illumination spectral characteristic described above.

カメラ30は、光学系31、IRカットフィルタ32、カラーフィルタ33、イメージセンサ34および信号処理系35を備える。
カメラ30に入射される反射光は、光学系31、IRカットフィルタ32およびカラーフィルタ33を透過し、イメージセンサ34において色票Cmの画像として撮影される。光学系31には、レンズが含まれる。従って、カメラの分光特性は、レンズ透過特性T(λ)、IRカットフィルタ透過特性C(λ)、カラーフィルタ透過特性F(λ)およびセンサ分光感度S(λ)を乗じて得られる分光特性に相当する。カラーフィルタ透過特性F(λ)は、赤、緑、青の各色信号値に対応するカラーフィルタ透過特性F(λ)、F(λ)、F(λ)を要素とするベクトル量である。イメージセンサ34は、撮影した画像を表す画素毎のRGB値を示す画像データを生成する。
The camera 30 includes an optical system 31, an IR cut filter 32, a color filter 33, an image sensor 34, and a signal processing system 35.
The reflected light incident on the camera 30 passes through the optical system 31, the IR cut filter 32, and the color filter 33, and is photographed as an image of the color chart Cm by the image sensor 34. The optical system 31 includes a lens. Therefore, the spectral characteristics of the camera are obtained by multiplying the lens transmission characteristics T (λ), the IR cut filter transmission characteristics C (λ), the color filter transmission characteristics F (λ), and the sensor spectral sensitivity S (λ). Equivalent to. The color filter transmission characteristic F (λ) is a vector quantity having the color filter transmission characteristics F R (λ), F G (λ), and F B (λ) corresponding to red, green, and blue color signal values as elements. is there. The image sensor 34 generates image data indicating RGB values for each pixel representing a captured image.

信号処理系35は、イメージセンサ34が生成した画像データが示すRGB値にゲインGとリニアマトリックスMを乗じて出力RGB値を算出する。信号処理系35は、算出した出力RGB値を示す出力画像データを出力する。   The signal processing system 35 calculates an output RGB value by multiplying the RGB value indicated by the image data generated by the image sensor 34 by the gain G and the linear matrix M. The signal processing system 35 outputs output image data indicating the calculated output RGB values.

コントローラ10のRGB値算出部142は、上述した処理によりカメラ30−A、30−Bが撮影した画像を表す調整RGB値をシミュレートする。
調整RGB値の算出に用いられるパラメータのうち色票画像データが示す色票分光反射率ρ(λ)は不変であってよい。照明分光分布P(λ)は、撮影現場の照明Ltの種類や配置に応じて異なる。そのため、コントローラ10の分光特性取得部141は、色調整の都度、分光放射照度計20が測定した照明分光分布P(λ)を照明分光特性として取得する。レンズ透過特性T(λ)、IRカットフィルタ透過特性C(λ)、カラーフィルタ透過特性F(λ)およびセンサ分光感度S(λ)は、カメラ30に依存するパラメータである。コントローラ10の信号処理部14は、カメラ30毎にこれらのパラメータをカメラ分光特性として予め取得し、取得した分光特性を記憶部16に記憶しておけばよい。RGB値算出部142により算出される基準RGB値[R’,G’,B’](Tは、ベクトルまたは行列の転置を示す記号)は、上述のパラメータと式(1)で表される関係を有する。
The RGB value calculation unit 142 of the controller 10 simulates adjusted RGB values representing images captured by the cameras 30-A and 30-B by the above-described processing.
Of the parameters used for calculating the adjusted RGB values, the color chart spectral reflectance ρ (λ) indicated by the color chart image data may be unchanged. The illumination spectral distribution P (λ) varies depending on the type and arrangement of the illumination Lt at the shooting site. Therefore, the spectral characteristic acquisition unit 141 of the controller 10 acquires the illumination spectral distribution P (λ) measured by the spectral irradiance meter 20 as the illumination spectral characteristic every time color adjustment is performed. The lens transmission characteristic T (λ), the IR cut filter transmission characteristic C (λ), the color filter transmission characteristic F (λ), and the sensor spectral sensitivity S (λ) are parameters that depend on the camera 30. The signal processing unit 14 of the controller 10 may acquire these parameters as camera spectral characteristics for each camera 30 in advance, and store the acquired spectral characteristics in the storage unit 16. The reference RGB values [R ′, G ′, B ′] T (T is a symbol indicating transposition of a vector or a matrix) calculated by the RGB value calculating unit 142 are expressed by the above-described parameters and Expression (1). Have a relationship.

Figure 2017212640
Figure 2017212640

式(1)において、λ、λは、それぞれ可視光線の波長の上限(約760nm)、下限(約380nm)を示す。 In the formula (1), λ r and λ v represent the upper limit (about 760 nm) and the lower limit (about 380 nm) of the wavelength of visible light, respectively.

RGB値算出部142は、式(2)に示すように基準RGB値[R’,G’,B’]の各要素である色信号値R’,G’,B’に要素ゲインG、G、Gをそれぞれ乗算して調整RGB値[R,G,B]を算出する。 RGB value calculating unit 142, reference RGB values as shown in equation (2) [R ', G ', B '] color signal values R is each element of T', G ', B' element gain G R , G G , and G B are respectively multiplied to calculate an adjusted RGB value [R, G, B] T.

Figure 2017212640
Figure 2017212640

(リニアマトリックスの算出方法)
次に、リニアマトリックスの算出方法について、より詳細に説明する。リニアマトリックス算出部145は、リニアマトリックスを算出する際、カメラ30毎の調整RGB値と参照RGB値との残差を算出する。残差を算出する際、リニアマトリックス算出部145は、画素毎の調整RGB値[R,G,B]をL*a*b*色空間値[L,a,bに変換する。L*a*b*色空間値は、国際照明委員会(CIE:Commission internationale de l’eclairage)が規定した色空間値である。L*a*b*色空間値は、人間が知覚する色を網羅的に定量化するパラメータである。L*a*b*色空間値のうち、Lは、明度を示す値である。a、bの組は、色度を示す値である。aとbは、互いに補色の関係にある次元の値である。
(Calculation method of linear matrix)
Next, the linear matrix calculation method will be described in more detail. The linear matrix calculation unit 145 calculates a residual between the adjusted RGB value and the reference RGB value for each camera 30 when calculating the linear matrix. When calculating the residual, the linear matrix calculation unit 145 converts the adjusted RGB value [R, G, B] T for each pixel into the L * a * b * color space value [L * , a * , b * ] T. Convert. The L * a * b * color space value is a color space value defined by the International Commission on Illumination (CIE). The L * a * b * color space value is a parameter that comprehensively quantifies the color perceived by humans. Of the L * a * b * color space values, L * is a value indicating brightness. A set of a * and b * is a value indicating chromaticity. a * and b * are dimension values that are complementary to each other.

ここで、リニアマトリックス算出部145は、調整RGB値[R,G,B]に変換マトリックスMRGB−XYZを用いてXYZ値[X,Y,Z]に変換する。XYZ値は、CIEが規定したXYZ表色系による色空間値である。図4に例示される変換マトリックスMRGB−XYZは、標準光源としてD65が用いられるときに反射光が表す画像のRGB値をXYZ値に線形変換するための行列である。リニアマトリックス算出部は、算出したXYZ値[X,Y,Z]について式(3)を用いてL*a*b*色空間値[L,a,bに変換する。 Here, the linear matrix calculation unit 145 converts the adjustment RGB value [R, G, B] T into the XYZ value [X, Y, Z] T using the conversion matrix M RGB-XYZ . The XYZ value is a color space value according to the XYZ color system defined by CIE. The conversion matrix M RGB-XYZ illustrated in FIG. 4 is a matrix for linearly converting the RGB values of the image represented by the reflected light into XYZ values when D65 is used as the standard light source. The linear matrix calculation unit converts the calculated XYZ values [X, Y, Z] T into L * a * b * color space values [L * , a * , b * ] T using Expression (3).

Figure 2017212640
Figure 2017212640

式(3)において、Xn、Yn、Znは、それぞれ基準となるホワイトポイントのXYZ値を示す。f(…)は、式(4)により表される関数である。   In the formula (3), Xn, Yn, and Zn respectively indicate XYZ values of the reference white point. f (...) is a function represented by Expression (4).

Figure 2017212640
Figure 2017212640

リニアマトリックス算出部145は、画素毎の参照RGB値[R,G,Bについても同様にしてL*a*b*色空間値[L ,a ,b に変換する。
そして、リニアマトリックス算出部145は、式(5)に示すように、調整RGB値[R,G,B]に基づくL*a*b*色空間値[L,a,bと参照RGB値[R,G,Bに基づくL*a*b*色空間値[L ,a ,b の差分の二乗値の画素間での総和を二乗残差εとしてカメラ毎に算出する。
The linear matrix calculation unit 145 similarly applies the L * a * b * color space value [L r * , a r * , b r * ] to the reference RGB value [R r , G r , B r ] T for each pixel . ] Convert to T.
The linear matrix calculation unit 145 then displays the L * a * b * color space value [L * , a * , b * ] based on the adjusted RGB value [R, G, B] T as shown in Expression (5). T and the reference RGB values [R r, G r, B r] L * a * b * color space values based on T [L r *, a r *, b r *] between pixels of the difference between the square of T For each camera as a square residual ε c .

Figure 2017212640
Figure 2017212640

式(5)において、i、cは、それぞれ画素、カメラを示すインデックスである。総和を求める際にリニアマトリックス算出部145が参照する画素は、色票Cmの各基準色を表す領域内に少なくとも1画素ずつ含まれていればよい。二乗残差εは、調整RGB値に基づく色空間値と参照RGB値[R,G,B]に基づく色空間値との差の大きさを定量的に表す指標値として算出される。 In Expression (5), i and c are indexes indicating pixels and cameras, respectively. The pixels referred to by the linear matrix calculation unit 145 when obtaining the sum total may be included in at least one pixel in the region representing each reference color of the color chart Cm. The square residual ε c is calculated as an index value that quantitatively represents the magnitude of the difference between the color space value based on the adjusted RGB value and the color space value based on the reference RGB values [R r , G r , B r ]. The

リニアマトリックス算出部145は、二乗残差εがより小さくなるようにカメラ30毎にリニアマトリックスMを算出する。リニアマトリックス算出部145は、リニアマトリックスMを算出する際、公知の最適化アルゴリズム、例えば、ニュートン法、準ニュートン法などの手法を用いてもよい。従って、リファレンスカメラ30−rで撮影された参照画像の参照信号値と、調整対象のカメラ30で撮影された画像に基づく調整信号値との間で、人間が知覚する色の感覚を表すL*a*b*色空間値を本位として、残差が少なくなるようにリニアマトリックスMが算出される。そのため、算出されたリニアマトリックスMを用いることで調整対象のカメラ30がそれぞれ撮影した画像の色が、リファレンスカメラ30−rで撮影された参照画像の色に色覚上近似される。 The linear matrix calculation unit 145 calculates the linear matrix M for each camera 30 so that the square residual ε c becomes smaller. When calculating the linear matrix M, the linear matrix calculation unit 145 may use a known optimization algorithm such as a Newton method or a quasi-Newton method. Therefore, L * representing the color sensation perceived by humans between the reference signal value of the reference image captured by the reference camera 30-r and the adjustment signal value based on the image captured by the camera 30 to be adjusted. Using the a * b * color space value as a standard, the linear matrix M is calculated so as to reduce the residual. Therefore, by using the calculated linear matrix M, the color of the image captured by the camera 30 to be adjusted is approximated in terms of color vision to the color of the reference image captured by the reference camera 30-r.

以上に説明したように、本実施形態の一構成例であるコントローラ10は、分光放射照度計20が測定した照明光の分光特性を取得する分光特性取得部141を備える。コントローラ10は、所定の基準色を表すRGB値に、照明光の分光特性、色調整の対象である画像を撮影するカメラ30の分光特性および調整パラメータが表す分光特性を作用して調整RGB値を算出するRGB値算出部142を備える。また、コントローラ10は、色調整において参照する画像を撮影するリファレンスカメラ30−rからの基準色の参照信号値と調整RGB値との残差を少なくするように調整パラメータを算出する調整パラメータ設定部143を備える。
この構成によれば、カメラ30が撮影した画像の色調整に用いる調整パラメータが、測定された照明光の分光特性に基づいて得られる調整RGB値が参照RGB値に近似するように算出される。そのため、算出した調整パラメータを用いることで複数のカメラ30のそれぞれの撮影環境に応じて異なる照明光の分光特性に関わらず撮影した画像の色が互いに近似されるように調整することができる。
As described above, the controller 10, which is a configuration example of the present embodiment, includes the spectral characteristic acquisition unit 141 that acquires the spectral characteristics of the illumination light measured by the spectral irradiance meter 20. The controller 10 applies the adjusted RGB value by applying the spectral characteristics of the illumination light, the spectral characteristics of the camera 30 that captures the image to be color-adjusted, and the spectral characteristics represented by the adjustment parameters to the RGB values representing the predetermined reference color. An RGB value calculation unit 142 for calculating is provided. Further, the controller 10 calculates an adjustment parameter so as to reduce the residual between the reference signal value of the reference color from the reference camera 30-r that captures an image to be referred to in color adjustment and the adjusted RGB value. 143.
According to this configuration, the adjustment parameter used for color adjustment of the image captured by the camera 30 is calculated so that the adjusted RGB value obtained based on the measured spectral characteristic of the illumination light approximates the reference RGB value. Therefore, by using the calculated adjustment parameter, it is possible to adjust so that the colors of the captured images are approximated to each other regardless of the spectral characteristics of the illumination light that differs depending on the imaging environment of each of the plurality of cameras 30.

また、調整パラメータ設定部143は、基準色の参照RGB値と調整RGB値との残差として、調整RGB値に基づく色空間値と調整RGB値に基づく色空間値との差を算出することを特徴とする。
この構成によれば、複数のカメラ30のそれぞれが撮影した画像について、人間が知覚する色を定量的に表す色空間の領域において、画像の色を互いに近似させることができる調整パラメータを算出することができる。
The adjustment parameter setting unit 143 calculates a difference between the color space value based on the adjustment RGB value and the color space value based on the adjustment RGB value as a residual between the reference RGB value of the base color and the adjustment RGB value. Features.
According to this configuration, the adjustment parameters that can approximate the colors of the images in the region of the color space that quantitatively represents the colors perceived by humans are calculated for the images captured by each of the plurality of cameras 30. Can do.

(第2実施形態)
次に、本発明の第2実施形態について説明する。第1実施形態と同一の構成については、同一の符号を付してその説明を援用する。
図5は、本実施形態に係る色調整システム1の機能構成を示すブロック図である。
本実施形態の一構成例である色調整システム1では、カメラ30−A、30−Bの記憶部(図示せず)には、それぞれを特定する識別情報として互いに異なる機器ID(Identifier)が設定させておく。
(Second Embodiment)
Next, a second embodiment of the present invention will be described. About the same structure as 1st Embodiment, the same code | symbol is attached | subjected and the description is used.
FIG. 5 is a block diagram showing a functional configuration of the color adjustment system 1 according to the present embodiment.
In the color adjustment system 1 that is one configuration example of the present embodiment, different device IDs (Identifiers) are set in the storage units (not shown) of the cameras 30-A and 30-B as identification information for specifying each. Let me.

コントローラ10の記憶部16には、予め機器IDと、当該機器IDにより特定されるカメラ30のカメラ分光特性を示すカメラ分光特性データとを対応付けて記憶させておく。
コントローラ10は、さらに機器検出部18を含んで構成される。機器検出部18は、データ入力部12とデータ出力部17に有線または無線で接続されたカメラ30−A、30−Bを検出する。機器検出部18は、例えば、データ入力部12に接続された機器としてカメラ30−A、30−Bに接続確認信号を送信する。カメラ30−A、30−Bが備える制御部(図示せず)は、コントローラ10から接続確認信号を受信するとき、その応答として自機の機器IDを含む応答信号をコントローラ10に出力する。機器検出部18は、接続確認信号の送信から所定時間(例えば、1秒)以内に受信する応答信号に含まれる機器IDが示すカメラ30を特定する。機器検出部18は、特定したカメラ30の機器IDをRGB値算出部142に出力する。
The storage unit 16 of the controller 10 stores a device ID and camera spectral characteristic data indicating the camera spectral characteristic of the camera 30 specified by the device ID in advance in association with each other.
The controller 10 further includes a device detection unit 18. The device detection unit 18 detects the cameras 30 -A and 30 -B connected to the data input unit 12 and the data output unit 17 by wire or wirelessly. For example, the device detection unit 18 transmits a connection confirmation signal to the cameras 30 -A and 30 -B as devices connected to the data input unit 12. When receiving a connection confirmation signal from the controller 10, the control unit (not shown) included in the cameras 30 -A and 30 -B outputs a response signal including its own device ID to the controller 10 as a response. The device detection unit 18 specifies the camera 30 indicated by the device ID included in the response signal received within a predetermined time (for example, 1 second) from the transmission of the connection confirmation signal. The device detection unit 18 outputs the specified device ID of the camera 30 to the RGB value calculation unit 142.

RGB値算出部142は、機器検出部18から入力された機器IDに対応するカメラ分光特性データを記憶部16から読み取り、読み取ったカメラ分光特性データが示すカメラ分光特性を当該機器IDが示すカメラ30に係る基準RGB値ひいては調整RGB値の算出に用いる。従って、リニアマトリックス算出部145は、読み取ったカメラ分光特性データが示すカメラ分光特性を用いて算出した調整RGB値と参照RGB値との残差が小さくなるようにリニアマトリックスを算出する。   The RGB value calculation unit 142 reads the camera spectral characteristic data corresponding to the device ID input from the device detection unit 18 from the storage unit 16, and the camera 30 indicated by the device ID indicates the camera spectral characteristic indicated by the read camera spectral characteristic data. Are used to calculate the reference RGB value and thus the adjusted RGB value. Therefore, the linear matrix calculation unit 145 calculates the linear matrix so that the residual between the adjusted RGB value calculated using the camera spectral characteristic indicated by the read camera spectral characteristic data and the reference RGB value becomes small.

図6は、本実施形態に係る分光特性テーブルの一例を示す図である。
図6に示す例では、分光特性テーブルは、機器IDとカメラ分光特性データとが対応付けて記憶部16に記憶されるデータテーブルである。分光特性テーブルには、複数の機器IDのそれぞれとカメラ分光特性データが対応付けられる。図6の第2行に示す例では、機器ID「00011」とカメラ分光特性データを格納したデータファイル「Spec_Cm_A」とが対応付けられている。
FIG. 6 is a diagram illustrating an example of a spectral characteristic table according to the present embodiment.
In the example illustrated in FIG. 6, the spectral characteristic table is a data table in which the device ID and the camera spectral characteristic data are stored in the storage unit 16 in association with each other. Each of the plurality of device IDs is associated with the camera spectral characteristic data in the spectral characteristic table. In the example shown in the second row of FIG. 6, the device ID “00011” is associated with the data file “Spec_Cm_A” storing the camera spectral characteristic data.

(色調整処理)
次に、本実施形態に係る色調整処理について説明する。
図7は、本実施形態に係る色調整処理を示すフローチャートである。
(ステップS101)機器検出部18は、データ入力部12に接続された機器であるカメラ30から受信した応答信号に含まれる機器IDを検出する。その後、ステップS102の処理に進む。
(ステップS102)RGB値算出部142は、検出した機器IDに対応するカメラ分光特性データを記憶部16から取得する。その後、ステップS103の処理に進む。
(ステップS103)リニアマトリックス算出部145は、取得したカメラ分光特性データを用いて算出された調整RGB値と参照RGB値との残差の大きさが小さくなるようにリニアマトリックスを算出する。その後、図7に示す処理を終了する。
(Color adjustment processing)
Next, color adjustment processing according to the present embodiment will be described.
FIG. 7 is a flowchart showing color adjustment processing according to the present embodiment.
(Step S <b> 101) The device detection unit 18 detects a device ID included in a response signal received from the camera 30 that is a device connected to the data input unit 12. Thereafter, the process proceeds to step S102.
(Step S102) The RGB value calculation unit 142 acquires camera spectral characteristic data corresponding to the detected device ID from the storage unit 16. Thereafter, the process proceeds to step S103.
(Step S103) The linear matrix calculation unit 145 calculates a linear matrix so that the residual size between the adjusted RGB value calculated using the acquired camera spectral characteristic data and the reference RGB value is small. Thereafter, the process shown in FIG. 7 ends.

図7に示す処理によれば、カメラ30が交換される場合でも、それぞれのカメラ30が撮影した画像の色がリファレンスカメラ30−rが撮影した画像の色に近似するように調整される。このことは、撮影現場において一度に複数のカメラ30が用いられる場合や、カメラ30を交換する際に好適である。   According to the processing illustrated in FIG. 7, even when the cameras 30 are replaced, the color of the image captured by each camera 30 is adjusted to approximate the color of the image captured by the reference camera 30-r. This is suitable when a plurality of cameras 30 are used at the same time at the shooting site or when the cameras 30 are replaced.

(変形例)
次に、本実施形態の変形例について説明する。
本変形例では、記憶部16において、カメラ30に装着されうる付属機器、例えば、レンズ、フィルタなどを識別する機器IDと、付属機器の分光特性を示す分光特性データをさらに対応付けて記憶させておいてもよい。その場合、カメラ分光特性データが示すカメラ分光特性として、レンズやフィルタなど着脱される付属機器の分光特性が含まれないカメラ30の基本的な分光特性を示すカメラ分光特性データを記憶部16に記憶しておく。
(Modification)
Next, a modification of this embodiment will be described.
In the present modification, the storage unit 16 further stores a device ID for identifying an accessory device that can be attached to the camera 30, such as a lens and a filter, and spectral characteristic data indicating the spectral characteristics of the accessory device in association with each other. It may be left. In this case, the camera spectral characteristic data indicating the basic spectral characteristic of the camera 30 that does not include the spectral characteristic of the attached device such as a lens or a filter is stored in the storage unit 16 as the camera spectral characteristic indicated by the camera spectral characteristic data. Keep it.

図8は、本変形例に係る分光特性テーブルの一例を示す図である。
図8に示す例では、分光特性テーブルには、カメラ30−A、30−Bの機器IDとして「00011」、「00012」、の他、レンズの機器IDとして「00021」、「00022」、フィルタの機器IDとして「00031」、「00032」が含まれる。機器ID「00011」、「00012」、「00021」、「00022」、「00031」、「00032」には、それぞれの機器IDが示す機器の分光特性データ「Spec_Cm_A」、「Spec_Cm_B」、「Spec_Ln_A」、「Spec_Ln_B」、「Spec_Fl_A」、「Spec_Fl_B」が対応付けられている。
FIG. 8 is a diagram illustrating an example of a spectral characteristic table according to the present modification.
In the example illustrated in FIG. 8, the spectral characteristic table includes “00011” and “00012” as the device IDs of the cameras 30 -A and 30 -B, and “00021” and “00022” as the device IDs of the lenses and a filter. Device IDs “00031” and “00032” are included. The device IDs “00011”, “00012”, “00021”, “00022”, “00031”, and “00032” include spectral characteristic data “Spec_Cm_A”, “Spec_Cm_B”, and “Spec_Ln_A” of the devices indicated by the respective device IDs. , “Spec_Ln_B”, “Spec_Fl_A”, and “Spec_Fl_B” are associated with each other.

カメラ30は、制御部(図示せず)と付属機器が装着される装着部を備える。制御部は装着部への付属機器の装着の有無を検出する。付属機器が装着されている場合には、制御部は装着されている付属機器を特定する。例えば、装着部は導体からなる接点を備え、接点は付属機器が装着されるとき当該付属機器と電気的に接続される。制御部は、装着部に装着された付属機器を検出する。制御部は、付属機器を検出する際、接点を介して付属機器に電気信号である装着確認信号を送信する。付属機器は、制御部から装着確認信号を受信するとき、その応答として電気信号である装着応答信号を制御部に送信する。装着応答信号には当該付属機器の機器IDが搬送される。制御部は、装着確認信号の送信後、所定時間以内に装着応答信号を受信するとき、受信した装着応答信号から機器IDを検出する。   The camera 30 includes a mounting unit on which a control unit (not shown) and attached devices are mounted. The control unit detects whether the attached device is attached to the attachment unit. When the accessory device is attached, the control unit identifies the attached device attached. For example, the mounting portion includes a contact made of a conductor, and the contact is electrically connected to the accessory device when the accessory device is mounted. The control unit detects an accessory device attached to the attachment unit. When detecting the accessory device, the control unit transmits an attachment confirmation signal, which is an electrical signal, to the accessory device via the contact. When the attachment device receives the attachment confirmation signal from the controller, the accessory device transmits an attachment response signal, which is an electrical signal, to the controller as a response. The attachment response signal carries the device ID of the accessory device. When receiving the mounting response signal within a predetermined time after transmitting the mounting confirmation signal, the control unit detects the device ID from the received mounting response signal.

なお、接続部が付属機器を検出するために、接点が付属機器と相互に嵌合する形状を有し、その形状が当該付属機器の種別に応じて異なっていてもよい。制御部は、接点の電気抵抗または押圧力を測定し、測定した電気抵抗または押圧力が、所定の電気抵抗または押圧力の閾値から有意に変化した接点を特定する。そして、制御部は、特定した接点に対応する付属機器の機器IDを特定する。付属機器は、カメラ30と必ずしも電気的に接続されなくてもよく、無線で接続されてもよい。
制御部は、コントローラ10からの接続確認信号を受信するとき、検出した付属機器の機器IDをさらに含む応答信号をコントローラ10に送信する。
In addition, in order for a connection part to detect an attachment apparatus, it has a shape which a contact fits with an attachment apparatus mutually, and the shape may differ according to the classification of the said attachment apparatus. The control unit measures the electrical resistance or pressing force of the contact, and specifies the contact at which the measured electrical resistance or pressing force has changed significantly from a predetermined threshold value of the electrical resistance or pressing force. And a control part specifies apparatus ID of the attached apparatus corresponding to the specified contact. The accessory device does not necessarily have to be electrically connected to the camera 30 and may be connected wirelessly.
When receiving a connection confirmation signal from the controller 10, the control unit transmits a response signal further including the detected device ID of the attached device to the controller 10.

機器検出部18は、カメラ30の制御部から入力される応答信号にさらに含まれる機器IDが示す付属機器を特定する。よって、機器検出部18は、接続されたカメラ30の他、そのカメラ30に装着されたレンズ、フィルタなどの付属機器を検出することができる。
機器検出部18は、接続されたカメラの機器IDの他、検出した付属機器の機器IDをRGB値算出部142に出力する。
The device detection unit 18 specifies the attached device indicated by the device ID further included in the response signal input from the control unit of the camera 30. Therefore, the device detection unit 18 can detect attached devices such as a lens and a filter attached to the camera 30 in addition to the connected camera 30.
The device detection unit 18 outputs the detected device ID of the attached device to the RGB value calculation unit 142 in addition to the device ID of the connected camera.

RGB値算出部142は、機器検出部18から入力された付属機器の機器IDに対応する分光特性データを記憶部16から読み取る。RGB値算出部142は、読み取った分光特性データをさらに用いて当該付属機器が装着されたカメラ30に係る基準RGB値ひいては調整RGB値を算出する。リニアマトリックス算出部145は、読み取った付属機器の分光特性データが示す分光特性を用いて算出された調整RGB値と参照RGB値との残差の大きさが小さくなるようにリニアマトリックスを算出する。   The RGB value calculation unit 142 reads spectral characteristic data corresponding to the device ID of the accessory device input from the device detection unit 18 from the storage unit 16. The RGB value calculation unit 142 further uses the read spectral characteristic data to calculate a reference RGB value and thus an adjustment RGB value related to the camera 30 to which the accessory device is attached. The linear matrix calculation unit 145 calculates a linear matrix so that the residual between the adjusted RGB value calculated using the spectral characteristic indicated by the read spectral characteristic data of the attached device and the reference RGB value is small.

(色調整処理)
次に、本変形例に係る色調整処理について説明する。次に説明する例では、付属機器がレンズとフィルタである場合を例にする。
図9は、本変形例に係る色調整処理を示すフローチャートである。
図9に示す色調整処理は、ステップS111〜S117の処理を有する。ステップS111、S112の処理は、図7に示すステップS101、S102の処理と同様であるため、説明を省略する。但し、ステップS112の処理の終了後、ステップS113の処理に進む。
(Color adjustment processing)
Next, color adjustment processing according to this modification will be described. In the example described below, a case where the accessory devices are a lens and a filter is taken as an example.
FIG. 9 is a flowchart showing color adjustment processing according to the present modification.
The color adjustment process illustrated in FIG. 9 includes processes in steps S111 to S117. The processing in steps S111 and S112 is the same as the processing in steps S101 and S102 shown in FIG. However, after the process of step S112 ends, the process proceeds to step S113.

(ステップS113)機器検出部18は、カメラ30から受信した応答信号からレンズの機器IDを検出できるか否かを判定する。検出できると判定された場合(ステップS113 YES)、ステップS114の処理に進む。検出できないと判定された場合(ステップS113 NO)、ステップS115の処理に進む。
(ステップS114)RGB値算出部142は、検出したレンズの機器IDに対応する分光特性データを記憶部16から取得する。その後、ステップS115の処理に進む。
(Step S113) The device detection unit 18 determines whether or not the device ID of the lens can be detected from the response signal received from the camera 30. If it is determined that detection is possible (YES in step S113), the process proceeds to step S114. If it is determined that it cannot be detected (NO in step S113), the process proceeds to step S115.
(Step S114) The RGB value calculation unit 142 acquires the spectral characteristic data corresponding to the detected device ID of the lens from the storage unit 16. Thereafter, the process proceeds to step S115.

(ステップS115)機器検出部18は、カメラ30から受信した応答信号からフィルタの機器IDを検出できるか否かを判定する。検出できると判定された場合(ステップS115 YES)、ステップS116の処理に進む。検出できないと判定された場合(ステップS115 NO)、ステップS117の処理に進む。
(ステップS116)RGB値算出部142は、検出したレンズの機器IDに対応する分光特性データを記憶部16から取得する。その後、ステップS117の処理に進む。
(Step S115) The device detection unit 18 determines whether the device ID of the filter can be detected from the response signal received from the camera 30. If it is determined that it can be detected (YES in step S115), the process proceeds to step S116. If it is determined that it cannot be detected (NO in step S115), the process proceeds to step S117.
(Step S <b> 116) The RGB value calculation unit 142 acquires spectral characteristic data corresponding to the detected device ID of the lens from the storage unit 16. Thereafter, the process proceeds to step S117.

(ステップS117)リニアマトリックス算出部145は、取得した分光特性データを用いて算出された調整RGB値と参照RGB値との残差の大きさが小さくなるようにリニアマトリックスを算出する。RGB値算出部142は、調整RGB値を算出する際、色票画像データが示す画素毎のRGB値に、検出したカメラに対応する照明の照明分光特性と当該カメラのカメラ分光特性データが示すカメラ分光特性の他、検出したレンズの分光特性データが示す分光特性と検出したフィルタの分光特性データが示す分光特性を乗算して調整RGB値を算出する。従って、レンズ、フィルタが検出されない場合には、RGB値算出部142は、検出されないレンズ、フィルタの分光特性を乗算せずに調整RGB値を算出する。その後、図9に示す処理を終了する。 (Step S117) The linear matrix calculation unit 145 calculates a linear matrix so that the residual size between the adjusted RGB value calculated using the acquired spectral characteristic data and the reference RGB value is small. When calculating the adjusted RGB value, the RGB value calculation unit 142 adds the illumination spectral characteristic of the illumination corresponding to the detected camera and the camera spectral characteristic data of the camera to the RGB value for each pixel indicated by the color chart image data. In addition to the spectral characteristic, the adjusted RGB value is calculated by multiplying the spectral characteristic indicated by the spectral characteristic data of the detected lens by the spectral characteristic indicated by the spectral characteristic data of the detected filter. Therefore, when no lens or filter is detected, the RGB value calculation unit 142 calculates an adjusted RGB value without multiplying the spectral characteristics of the lens and filter that are not detected. Thereafter, the process shown in FIG. 9 ends.

図9に示す処理によれば、カメラ30へのレンズやフィルタの着脱や交換に応じて撮影される画像の色が変化する場合でも、変化した色がリファレンスカメラ30−rで撮像される画像の色に近似するように調整される。このことは、撮影現場において撮影に用いるカメラ30においてレンズやフィルタを着脱する場合や、他のレンズやフィルタに交換する場合に好都合である。   According to the processing illustrated in FIG. 9, even when the color of an image captured according to the attachment or detachment or replacement of the lens or the filter with respect to the camera 30 is changed, the changed color Adjusted to approximate color. This is convenient when a lens or filter is attached to or detached from the camera 30 used for shooting at the shooting site, or when it is replaced with another lens or filter.

以上に説明したように、本実施形態に係るコントローラ10は、カメラ30の分光特性が記憶された記憶部16と、カメラ30の接続を検出する機器検出部18と、を備える。RGB値算出部142は、カメラ30の分光特性として機器検出部18が検出したカメラ30の分光特性を用いて調整RGB値を算出する。
この構成により、カメラ30が交換されるとき、それぞれのカメラ30が撮影した画像の色がリファレンスカメラ30−rが撮影した画像の色に近似するように調整される。そのため、算出される調整パラメータを用いることで、カメラ30の交換の有無に関わらず、撮影した画像の色が複数のカメラ30間で互いに近似するように色調整を行うことができる。また、カメラ30の分光特性の設定に係るユーザの操作を回避することができる。
As described above, the controller 10 according to the present embodiment includes the storage unit 16 in which the spectral characteristics of the camera 30 are stored, and the device detection unit 18 that detects the connection of the camera 30. The RGB value calculation unit 142 calculates the adjusted RGB value using the spectral characteristic of the camera 30 detected by the device detection unit 18 as the spectral characteristic of the camera 30.
With this configuration, when the camera 30 is replaced, the color of the image captured by each camera 30 is adjusted to approximate the color of the image captured by the reference camera 30-r. Therefore, by using the calculated adjustment parameter, it is possible to perform color adjustment so that the color of the captured image is approximated between the plurality of cameras 30 regardless of whether or not the camera 30 is replaced. Further, it is possible to avoid a user operation related to the setting of the spectral characteristics of the camera 30.

また、本実施形態に係るコントローラ10において、記憶部16には、カメラ30に装着される付属機器の分光特性が記憶される。機器検出部18は、カメラ30に装着される付属機器の装着を検出する。RGB値算出部142は、機器検出部18が装着を検出した付属機器の分光特性をさらに作用して調整RGB値を算出することを特徴とする。
この構成により、カメラ30へのレンズやフィルタなどの付属機器の着脱もしくは交換の状態に応じて、カメラ30が撮影した画像の色がリファレンスカメラ30−rで撮影される画像の色に近似するように調整される。そのため、算出される調整パラメータを用いることで、カメラ30において付属機器の着脱もしくは交換の有無の状態や、これらの状態が互いに異なる複数のカメラ30間で、撮影した画像の色が互いに近似するように色調整を行うことができる。また、カメラ30に装着した付属機器の分光特性の設定に係るユーザの操作を回避することができる。
In the controller 10 according to the present embodiment, the storage unit 16 stores the spectral characteristics of the accessory device attached to the camera 30. The device detection unit 18 detects the attachment of an accessory device attached to the camera 30. The RGB value calculating unit 142 calculates the adjusted RGB value by further acting on the spectral characteristics of the attached device detected by the device detecting unit 18.
With this configuration, the color of the image captured by the camera 30 approximates to the color of the image captured by the reference camera 30-r, depending on the attachment / detachment or replacement state of an accessory device such as a lens or a filter with respect to the camera 30. Adjusted to For this reason, by using the calculated adjustment parameters, the camera 30 may be attached or detached or replaced, and the captured images may be similar in color between the plurality of cameras 30 having different states. Color adjustment can be made. Further, it is possible to avoid a user operation related to the setting of the spectral characteristics of the accessory device attached to the camera 30.

以上、図面を参照してこの発明の実施形態について説明してきたが、具体的な構成は上述のものに限られることはなく、この発明の要旨を逸脱しない範囲内において様々な設計変更等をすることが可能である。   The embodiments of the present invention have been described above with reference to the drawings. However, the specific configuration is not limited to the above, and various design changes and the like are made without departing from the scope of the present invention. It is possible.

上述した実施形態では各種の画像データで表される画素毎の信号値がRGB表色系に基づくRGB値であることを例にしたが、これには限られない。信号値は、他の表色系、例えば、YCrCb表色系に基づくYCrCb値であってもよい。
上述した実施形態では、調整信号値と参照信号値の差の大きさの指標値として、調整信号値を変換したL*a*b*色空間値と参照信号値を変換したL*a*b*色空間値との差の画素間の平方和である二乗残差εを例にしたがこれには限らない。当該指標値は、調整信号値と参照信号値の差の画素間の平方和であってもよい。
また、カメラ30間で色調整に共通に用いる画像として色票Cmが表す画像を用いることを例にしたが、これには限られない。色調整に用いる画像は、複数個の基準色を表す領域を含み、人間が知覚可能な色域全体に複数個の基準色が分布する画像であればよい。
In the above-described embodiment, the signal value for each pixel represented by various image data is an RGB value based on the RGB color system, but is not limited thereto. The signal value may be a YCrCb value based on another color system, for example, a YCrCb color system.
In the above-described embodiment, the L * a * b * color space value obtained by converting the adjustment signal value and the L * a * b obtained by converting the reference signal value are used as index values for the difference between the adjustment signal value and the reference signal value. * the squared residuals epsilon c is a sum of squares between pixels of the difference between the color space value as an example, but not limited thereto. The index value may be a sum of squares between pixels of a difference between the adjustment signal value and the reference signal value.
Further, although an example in which an image represented by the color chart Cm is used as an image commonly used for color adjustment between the cameras 30, the present invention is not limited to this. The image used for color adjustment may be an image including a plurality of reference color areas and having a plurality of reference colors distributed in the entire color gamut that can be perceived by humans.

コントローラ10が定めた調整パラメータは、必ずしも調整対象のカメラ30に出力されなくともよい。コントローラ10は、調整対象のカメラ30が撮影した画像の画像データを処理する機器に定めた調整パラメータを出力すればよい。その場合には、カメラ30において信号処理系35が省略されてもよい。
コントローラ10は、いずれかのカメラ30と一体化した単一の色調整装置として構成されてもよい。
The adjustment parameter determined by the controller 10 is not necessarily output to the camera 30 to be adjusted. The controller 10 may output adjustment parameters determined for a device that processes image data of an image captured by the camera 30 to be adjusted. In that case, the signal processing system 35 may be omitted in the camera 30.
The controller 10 may be configured as a single color adjustment device integrated with any one of the cameras 30.

また、コントローラ10の機能は、コンピュータにおいて実現されてもよい。その場合、コントローラ10の機能を実現するコンピュータは、CPUなどの制御デバイスを含んで構成される。制御デバイスは、インストールした制御プログラムで指示される処理を実行することによってデータ入力部12、信号処理部14、操作部15、記憶部16およびデータ出力部17のいずれか、またはそれらの任意の組み合わせとして機能する。   Further, the function of the controller 10 may be realized by a computer. In this case, the computer that realizes the function of the controller 10 includes a control device such as a CPU. The control device executes any one of the data input unit 12, the signal processing unit 14, the operation unit 15, the storage unit 16, the data output unit 17, or any combination thereof by executing processing instructed by the installed control program. Function as.

1…色調整システム、10…コントローラ、12…データ入力部、14…信号処理部、15…操作部、16…記憶部、17…データ出力部、18…機器検出部、20(20−A、20−B)…分光放射照度計、30(30−A、30−B)…カメラ、141…分光特性取得部、142…RGB値算出部、143…調整パラメータ設定部、144…ゲイン設定部、145…リニアマトリックス算出部 DESCRIPTION OF SYMBOLS 1 ... Color adjustment system, 10 ... Controller, 12 ... Data input part, 14 ... Signal processing part, 15 ... Operation part, 16 ... Memory | storage part, 17 ... Data output part, 18 ... Apparatus detection part, 20 (20-A, 20-B) ... Spectral irradiance meter, 30 (30-A, 30-B) ... Camera, 141 ... Spectral characteristic acquisition unit, 142 ... RGB value calculation unit, 143 ... Adjustment parameter setting unit, 144 ... Gain setting unit, 145 ... Linear matrix calculation unit

Claims (5)

照明光の分光特性を取得する分光特性取得部と、
所定の基準色を表す信号値に、前記照明光の分光特性、色調整の対象である画像を撮影する対象撮影部の分光特性および調整パラメータを作用して調整信号値を算出する信号値算出部と、
色調整において参照する画像を撮影する参照撮影部からの前記基準色の参照信号値と前記調整信号値との残差を少なくするように前記調整パラメータを算出する調整パラメータ設定部と、
を備える色調整装置。
A spectral characteristic acquisition unit that acquires the spectral characteristic of the illumination light;
A signal value calculation unit that calculates an adjustment signal value by applying the spectral characteristic of the illumination light, the spectral characteristic of the target photographing unit that captures an image that is a target of color adjustment, and an adjustment parameter to a signal value that represents a predetermined reference color When,
An adjustment parameter setting unit that calculates the adjustment parameter so as to reduce a residual between the reference signal value of the standard color and the adjustment signal value from a reference photographing unit that photographs an image to be referred to in color adjustment;
A color adjustment device comprising:
前記調整パラメータ設定部は、前記残差として、前記調整信号値に基づく色空間値と前記調整信号値に基づく色空間値との差を算出する
ことを特徴とする請求項1に記載の色調整装置。
The color adjustment according to claim 1, wherein the adjustment parameter setting unit calculates a difference between a color space value based on the adjustment signal value and a color space value based on the adjustment signal value as the residual. apparatus.
前記対象撮影部の分光特性が記憶された記憶部と、
前記対象撮影部の接続を検出する検出部と、を備え、
前記信号値算出部は、前記対象撮影部の分光特性として前記検出部が検出した対象撮像部の分光特性を用いて前記調整信号値を算出する
ことを特徴とする請求項1または請求項2に記載の色調整装置。
A storage unit storing spectral characteristics of the target imaging unit;
A detection unit for detecting connection of the target imaging unit,
The said signal value calculation part calculates the said adjustment signal value using the spectral characteristic of the object imaging part which the said detection part detected as the spectral characteristic of the said object imaging | photography part. The Claim 1 or Claim 2 characterized by the above-mentioned. The color adjustment device described.
前記記憶部には、前記対象撮影部に装着される機器の分光特性が記憶され、
前記検出部は、前記機器の装着を検出し
前記信号値算出部は、前記検出部が装着を検出した機器の分光特性をさらに作用して前記調整信号値を算出する
ことを特徴とする請求項3に記載の色調整装置。
The storage unit stores spectral characteristics of a device attached to the target imaging unit,
The said detection part detects mounting | wearing of the said apparatus, The said signal value calculation part further acts on the spectral characteristic of the apparatus which the said detection part detected mounting | wearing, and calculates the said adjustment signal value. The color adjusting apparatus according to 3.
請求項1から請求項4のいずれか一項に記載の色調整装置と、
少なくとも2個の前記対象撮影部と、
前記対象撮影部のそれぞれに対応した照明からの前記照明光の分光特性を測定する分光放射照度計と、
を備え、
前記調整パラメータ設定部は、前記調整パラメータを前記対象撮影部に出力する
ことを特徴とする色調整システム。
A color adjusting device according to any one of claims 1 to 4,
At least two of the target photographing units;
A spectral irradiance meter for measuring spectral characteristics of the illumination light from the illumination corresponding to each of the target imaging units;
With
The color adjustment system, wherein the adjustment parameter setting unit outputs the adjustment parameter to the target photographing unit.
JP2016105300A 2016-05-26 2016-05-26 Color adjuster and color adjuster Expired - Fee Related JP6774788B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016105300A JP6774788B2 (en) 2016-05-26 2016-05-26 Color adjuster and color adjuster

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016105300A JP6774788B2 (en) 2016-05-26 2016-05-26 Color adjuster and color adjuster

Publications (2)

Publication Number Publication Date
JP2017212640A true JP2017212640A (en) 2017-11-30
JP6774788B2 JP6774788B2 (en) 2020-10-28

Family

ID=60476962

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016105300A Expired - Fee Related JP6774788B2 (en) 2016-05-26 2016-05-26 Color adjuster and color adjuster

Country Status (1)

Country Link
JP (1) JP6774788B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019134331A (en) * 2018-01-31 2019-08-08 セコム株式会社 Image processing system
WO2023108443A1 (en) * 2021-12-14 2023-06-22 深圳传音控股股份有限公司 Image processing method, smart terminal and storage medium

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6286992A (en) * 1985-10-11 1987-04-21 Canon Inc Video camera and exchange lens
JP2003046818A (en) * 2001-07-27 2003-02-14 Canon Inc Lens unit, intermediate accessory, camera and camera system
JP2005045446A (en) * 2003-07-25 2005-02-17 Pentax Corp Color conversion matrix calculation method and color correction method
JP2011029858A (en) * 2009-07-24 2011-02-10 Nippon Hoso Kyokai <Nhk> Imaging apparatus
JP2011223452A (en) * 2010-04-13 2011-11-04 Nippon Hoso Kyokai <Nhk> Color correction device
JP2011223134A (en) * 2010-04-06 2011-11-04 Nippon Hoso Kyokai <Nhk> Imaging apparatus
JP2016006954A (en) * 2014-05-30 2016-01-14 パナソニックIpマネジメント株式会社 Color correction parameter calculation method, color correction parameter calculation device and image output system

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6286992A (en) * 1985-10-11 1987-04-21 Canon Inc Video camera and exchange lens
JP2003046818A (en) * 2001-07-27 2003-02-14 Canon Inc Lens unit, intermediate accessory, camera and camera system
JP2005045446A (en) * 2003-07-25 2005-02-17 Pentax Corp Color conversion matrix calculation method and color correction method
JP2011029858A (en) * 2009-07-24 2011-02-10 Nippon Hoso Kyokai <Nhk> Imaging apparatus
JP2011223134A (en) * 2010-04-06 2011-11-04 Nippon Hoso Kyokai <Nhk> Imaging apparatus
JP2011223452A (en) * 2010-04-13 2011-11-04 Nippon Hoso Kyokai <Nhk> Color correction device
JP2016006954A (en) * 2014-05-30 2016-01-14 パナソニックIpマネジメント株式会社 Color correction parameter calculation method, color correction parameter calculation device and image output system

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019134331A (en) * 2018-01-31 2019-08-08 セコム株式会社 Image processing system
WO2023108443A1 (en) * 2021-12-14 2023-06-22 深圳传音控股股份有限公司 Image processing method, smart terminal and storage medium

Also Published As

Publication number Publication date
JP6774788B2 (en) 2020-10-28

Similar Documents

Publication Publication Date Title
JP7075687B2 (en) Color conversion system, color conversion device and color conversion method
US7756328B2 (en) Color chart processing apparatus, color chart processing method, and color chart processing program
US11748912B2 (en) Hyperspectral imaging spectrophotometer and system
US7884980B2 (en) System for capturing graphical images using hyperspectral illumination
US20110176029A1 (en) Multispectral and Colorimetric Imaging System
US8976239B2 (en) System and apparatus for color correction in transmission-microscope slides
JP6257551B2 (en) Color fidelity environment correction apparatus and color fidelity environment correction method
TW202123684A (en) Systems for characterizing ambient illumination
JP2019020311A (en) Color measurement method and color measurement device
JP2005311581A (en) Image input system, transformation matrix calculating method, and program
JP2010139324A (en) Color irregularity measuring method and color irregularity measuring device
Varghese et al. Colorimetric calibration of high dynamic range images with a ColorChecker chart
JP6774788B2 (en) Color adjuster and color adjuster
JP4987045B2 (en) Color chart processing apparatus, color chart processing method, and color chart processing program
EP3993382B1 (en) Colour calibration of an imaging device
US20170038196A1 (en) System and method for acquiring color image from monochrome scan camera
JP6851082B2 (en) Multi-point monitor color sharing device
JP4661129B2 (en) Imaging apparatus and program thereof
JP6601632B2 (en) Color measurement method
CN110599551B (en) Image processing apparatus, image processing method, and storage medium
JP6813749B1 (en) How to quantify the color of an object, signal processor, and imaging system
JP4277032B2 (en) Color chart processing apparatus, color chart processing method, and color chart processing program
JP2020191668A (en) Chart device
JP2009053212A (en) Color chip processing apparatus, color chip processing method, and color chip processing program

Legal Events

Date Code Title Description
RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20181026

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190402

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20191210

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191217

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200210

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200630

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200827

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200908

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20201005

R150 Certificate of patent or registration of utility model

Ref document number: 6774788

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees