JP2022006827A - Image processing device, image processing system, image processing method, and program - Google Patents

Image processing device, image processing system, image processing method, and program Download PDF

Info

Publication number
JP2022006827A
JP2022006827A JP2020109332A JP2020109332A JP2022006827A JP 2022006827 A JP2022006827 A JP 2022006827A JP 2020109332 A JP2020109332 A JP 2020109332A JP 2020109332 A JP2020109332 A JP 2020109332A JP 2022006827 A JP2022006827 A JP 2022006827A
Authority
JP
Japan
Prior art keywords
captured image
image
subject
unit
color
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2020109332A
Other languages
Japanese (ja)
Inventor
裕樹 三好
Hiroki Miyoshi
崇人 千葉
Takahito Chiba
紘一 高瀬
Koichi Takase
貴也 田中
Takaya Tanaka
崇 稲村
Takashi Inamura
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toppan Inc
Original Assignee
Toppan Printing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toppan Printing Co Ltd filed Critical Toppan Printing Co Ltd
Priority to JP2020109332A priority Critical patent/JP2022006827A/en
Publication of JP2022006827A publication Critical patent/JP2022006827A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Color Image Communication Systems (AREA)
  • Image Processing (AREA)

Abstract

To provide an image processing device, an image processing system, an image processing method, and a program capable of accurately converting a captured image to a colorimetric value image.SOLUTION: The image processing device comprises: a specifying part which specifies a color characteristic of a subject in a region included in a captured image captured by an imaging device for imaging the subject; an acquisition part which on the basis of the color characteristic specified by the specifying part, acquires conversion information indicating correspondence between a pixel value of the captured image and a colorimetric value of the subject; an assignment part which assigns the conversion information acquired by the acquisition part to the region included in the captured image; and a conversion part which on the basis of the conversion information assigned to the region included in the captured image, converts the pixel value of the captured image to the colorimetric value.SELECTED DRAWING: Figure 2

Description

本発明は、画像処理装置、画像処理システム、画像処理方法、及びプログラムに関する。 The present invention relates to an image processing apparatus, an image processing system, an image processing method, and a program.

従来、撮像装置が被写体を撮像した撮像画像の画素値を、被写体の色を示す測色値(色空間上の座標値)に変換することで、撮像画像における被写体の色を実物の被写体の見えにより近づけるための技術が各種提案されている。 Conventionally, the pixel value of an image captured by an image pickup device is converted into a colorimetric value (coordinate value in a color space) indicating the color of the subject, so that the color of the subject in the image can be seen as a real subject. Various techniques have been proposed to bring it closer.

例えば、下記特許文献1には、分光反射率の異なる複数の色票が配列された標準板の画像データに基づき、画素値を測色値に変換するための変換行列を算出し、当該変換行列を用いて被写体の画像データを測色データに変換する技術が開示されている。 For example, in Patent Document 1 below, a conversion matrix for converting pixel values into color measurement values is calculated based on image data of a standard plate in which a plurality of color sheets having different spectral reflectances are arranged, and the conversion matrix is used. There is disclosed a technique for converting image data of a subject into color measurement data using the above.

特許第4715288号公報Japanese Patent No. 4715288

しかしながら、従来の技術では、撮像画像を測色値画像に変換する色変換が撮像画像全体に一律に適用されたため、色特性の取り得る範囲を狭められず、画素値から測色値への変換精度が下がっていた。画素値から測色値の変換精度は、被写体の色特性とされる範囲が狭いほど(特定されているほど)高くなる。 However, in the conventional technique, since the color conversion for converting the captured image into the color measurement value image is uniformly applied to the entire captured image, the range in which the color characteristics can be taken cannot be narrowed, and the conversion from the pixel value to the color measurement value cannot be narrowed. The accuracy was reduced. The conversion accuracy from the pixel value to the color measurement value becomes higher as the range of the color characteristic of the subject is narrower (the more specified).

上述の課題を鑑み、本発明の目的は、撮像画像から測色値画像へ高精度に変換することが可能な画像処理装置、画像処理システム、画像処理方法、及びプログラムを提供することにある。 In view of the above problems, an object of the present invention is to provide an image processing apparatus, an image processing system, an image processing method, and a program capable of converting an captured image into a colorimetric image with high accuracy.

上述の課題を解決するために、本発明の一態様に係る画像処理装置は、被写体を撮像する撮像装置によって撮像された撮像画像に含まれる領域における前記被写体の色特性を特定する特定部と、前記特定部によって特定される前記色特性に基づき、前記撮像画像の画素値と、前記被写体の測色値との対応関係を示す変換情報を取得する取得部と、前記取得部によって取得される前記変換情報を前記撮像画像に含まれる領域に割り当てる割当部と、前記撮像画像に含まれる領域に割り当てられた前記変換情報に基づき、前記撮像画像の前記画素値を前記測色値に変換する変換部と、を備える。 In order to solve the above-mentioned problems, the image processing apparatus according to one aspect of the present invention includes a specific unit that specifies the color characteristics of the subject in a region included in the image captured by the image pickup device that images the subject. Based on the color characteristics specified by the specific unit, an acquisition unit that acquires conversion information indicating the correspondence between the pixel value of the captured image and the color measurement value of the subject, and the acquisition unit acquired by the acquisition unit. An allocation unit that allocates conversion information to a region included in the captured image, and a conversion unit that converts the pixel value of the captured image into the color measurement value based on the conversion information allocated to the region included in the captured image. And.

本発明の一態様に係る画像処理システムは、被写体を撮像する撮像部と、前記撮像部によって撮像された撮像画像に含まれる領域における前記被写体の色特性を特定する特定部と、前記特定部によって特定される前記色特性に基づき、前記撮像画像の画素値と、前記被写体の測色値との対応関係を示す変換情報を取得する取得部と、前記取得部によって取得される前記変換情報を前記撮像画像に含まれる領域に割り当てる割当部と、前記撮像画像に含まれる領域に割り当てられた前記変換情報に基づき、前記撮像画像の前記画素値を前記測色値に変換する変換部と、前記測色値に基づく表示画像を表示する表示部と、を有する。 The image processing system according to one aspect of the present invention comprises an image pickup unit that captures a subject, a specific unit that specifies the color characteristics of the subject in a region included in the image captured by the image pickup unit, and the specific unit. Based on the specified color characteristics, the acquisition unit that acquires the conversion information indicating the correspondence between the pixel value of the captured image and the color measurement value of the subject, and the conversion information acquired by the acquisition unit are described. An allocation unit assigned to an area included in the captured image, a conversion unit that converts the pixel value of the captured image into the color measurement value based on the conversion information assigned to the region included in the captured image, and the measurement. It has a display unit for displaying a display image based on a color value.

本発明の一態様に係る画像処理方法は、特定部が、被写体を撮像する撮像装置によって撮像された撮像画像に含まれる領域における前記被写体の色特性を特定することと、取得部が、前記特定部によって特定される前記色特性に基づき、前記撮像画像の画素値と、前記被写体の測色値との対応関係を示す変換情報を取得することと、割当部が、前記取得部によって取得される前記変換情報を前記撮像画像に含まれる領域に割り当てることと、変換部が、前記撮像画像に含まれる領域に割り当てられた前記変換情報に基づき、前記撮像画像の前記画素値を前記測色値に変換することと、を含む。 In the image processing method according to one aspect of the present invention, the specific unit specifies the color characteristics of the subject in the region included in the image captured by the image pickup device that images the subject, and the acquisition unit identifies the subject. Based on the color characteristics specified by the unit, the conversion information indicating the correspondence between the pixel value of the captured image and the color measurement value of the subject is acquired, and the allocation unit is acquired by the acquisition unit. Based on the conversion information assigned to the region included in the captured image and the conversion information assigned to the region included in the captured image, the conversion unit converts the pixel value of the captured image into the color measurement value. Includes converting and.

本発明の一態様に係るプログラムは、コンピュータを、被写体を撮像する撮像装置によって撮像された撮像画像に含まれる領域における前記被写体の色特性を特定する特定部と、前記特定部によって特定される前記色特性に基づき、前記撮像画像の画素値と、前記被写体の測色値との対応関係を示す変換情報を取得する取得部と、前記取得部によって取得される前記変換情報を前記撮像画像に含まれる領域に割り当てる割当部と、前記撮像画像に含まれる領域に割り当てられた前記変換情報に基づき、前記撮像画像の前記画素値を前記測色値に変換する変換部と、として機能させる。 In the program according to one aspect of the present invention, the computer is specified by a specific unit that specifies the color characteristics of the subject in a region included in the image captured by the image pickup device that images the subject, and the specific unit that is specified by the specific unit. The captured image includes an acquisition unit that acquires conversion information indicating the correspondence between the pixel value of the captured image and the color measurement value of the subject based on the color characteristics, and the conversion information acquired by the acquisition unit. It functions as an allocation unit assigned to the region and a conversion unit that converts the pixel value of the captured image into the color measurement value based on the conversion information assigned to the region included in the captured image.

本発明によれば、撮像画像から測色値画像へ高精度に変換することができる。 According to the present invention, it is possible to convert a captured image into a colorimetric image with high accuracy.

第1の実施形態に係る画像処理システムの構成の一例を示す図である。It is a figure which shows an example of the structure of the image processing system which concerns on 1st Embodiment. 第1の実施形態に係る画像処理装置の構成の一例を示すブロック図である。It is a block diagram which shows an example of the structure of the image processing apparatus which concerns on 1st Embodiment. 第1の実施形態に係るプロファイルDBにおけるプロファイルテーブルの構成の一例を示す図である。It is a figure which shows an example of the structure of the profile table in the profile DB which concerns on 1st Embodiment. 第1の実施形態に係る撮像画像の変換の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of conversion of the captured image which concerns on 1st Embodiment. 第2の実施形態に係る識別情報の一例を示す図である。It is a figure which shows an example of the identification information which concerns on 2nd Embodiment. 第2の実施形態に係るプロファイルDBにおけるプロファイルテーブルの構成の一例を示す図である。It is a figure which shows an example of the structure of the profile table in the profile DB which concerns on 2nd Embodiment. 第3の実施形態に係る識別情報の一例を示す図である。It is a figure which shows an example of the identification information which concerns on 3rd Embodiment. 第3の実施形態に係るプロファイルDBにおけるプロファイルテーブルの構成の一例を示す図である。It is a figure which shows an example of the structure of the profile table in the profile DB which concerns on 3rd Embodiment. 第4の実施形態に係る撮像画像と設計情報の関係の一例を示す図である。It is a figure which shows an example of the relationship between the captured image and the design information which concerns on 4th Embodiment. 第4の実施形態に係るプロファイルDBにおけるプロファイルテーブルの構成の一例を示す図である。It is a figure which shows an example of the structure of the profile table in the profile DB which concerns on 4th Embodiment. 第4の実施形態に係る撮像画像の変換の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of conversion of the captured image which concerns on 4th Embodiment.

本発明は、被写体が撮像された撮像画像の画素値を被写体の測色値へ高精度に変換することが可能な画像処理システムに関する。以下の各実施形態では、一例として、被写体が印刷物である例について説明する。なお、被写体は、かかる例に限定されない。
以下、図面を参照しながら本発明の各実施形態について詳しく説明する。
The present invention relates to an image processing system capable of converting a pixel value of an image captured by a subject into a colorimetric value of the subject with high accuracy. In each of the following embodiments, an example in which the subject is a printed matter will be described as an example. The subject is not limited to this example.
Hereinafter, each embodiment of the present invention will be described in detail with reference to the drawings.

<<1.第1の実施形態>>
図1~図4を参照して、本発明の第1の実施形態について説明する。第1の実施形態では、ユーザによって予め設定された情報に基づき、印刷物の色特性が特定される例について説明する。
<< 1. First Embodiment >>
A first embodiment of the present invention will be described with reference to FIGS. 1 to 4. In the first embodiment, an example in which the color characteristics of the printed matter are specified based on the information preset by the user will be described.

<1-1.画像処理システムの構成>
図1を参照して、第1の実施形態に係る画像処理システムの構成について説明する。図1は、第1の実施形態に係る画像処理システムの構成の一例を示す図である。
図1に示すように、画像処理システム1は、撮像装置10、画像処理装置20、及び表示装置30を有する。
<1-1. Image processing system configuration>
The configuration of the image processing system according to the first embodiment will be described with reference to FIG. 1. FIG. 1 is a diagram showing an example of the configuration of the image processing system according to the first embodiment.
As shown in FIG. 1, the image processing system 1 includes an image pickup device 10, an image processing device 20, and a display device 30.

撮像装置10と画像処理装置20は、互いに通信可能に接続されている。例えば、撮像装置10と画像処理装置20は、ローカルエリアネットワーク(Local Area Network:LAN)によって接続されている。LANは、有線接続によって実現されてもよいし、Bluetooth(登録商標)やWi-Fi(登録商標)等の無線接続によって接続されてもよい。画像処理装置20と表示装置30も同様に、互いに通信可能に接続されている。 The image pickup device 10 and the image processing device 20 are connected to each other so as to be able to communicate with each other. For example, the image pickup apparatus 10 and the image processing apparatus 20 are connected by a local area network (LAN). The LAN may be realized by a wired connection, or may be connected by a wireless connection such as Bluetooth (registered trademark) or Wi-Fi (registered trademark). Similarly, the image processing device 20 and the display device 30 are connected to each other so as to be able to communicate with each other.

撮像装置10は、被写体を撮像する装置である。撮像装置10の一例として、カメラが挙げられる。本実施形態の撮像装置10は、図1に示すように、撮影台50に置かれた印刷物51を撮像する。印刷物51は、「被写体」の一例である。当該印刷物51は、照明40によって照射されている。撮像装置10は、印刷物51を撮像して得られる撮像画像を画像処理装置20へ送信する。 The image pickup device 10 is a device for capturing an image of a subject. An example of the image pickup apparatus 10 is a camera. As shown in FIG. 1, the image pickup apparatus 10 of the present embodiment takes an image of the printed matter 51 placed on the photographing table 50. The printed matter 51 is an example of a “subject”. The printed matter 51 is illuminated by the illumination 40. The image pickup apparatus 10 transmits the captured image obtained by imaging the printed matter 51 to the image processing apparatus 20.

本実施形態の印刷物51は、紙等の媒体に対して、文字、数字、記号、図形、画像等がインキで印刷された物である。印刷物51における印刷領域52a、印刷領域52b、印刷領域52c、印刷領域52d、及び印刷領域52eは、インキで印刷が行われた領域を示している。 The printed matter 51 of the present embodiment is a printed matter 51 in which characters, numbers, symbols, figures, images, etc. are printed with ink on a medium such as paper. The print area 52a, the print area 52b, the print area 52c, the print area 52d, and the print area 52e in the printed matter 51 indicate an area printed with ink.

画像処理装置20は、画像処理を行う装置である。画像処理装置20の一例として、PC(Personal Computer)、サーバ、スマートフォン、タブレット端末等が挙げられる。本実施形態の画像処理装置20は、撮像装置10から受信する撮像画像に対して、画素値を測色値へ変換する変換処理を行う。これにより、画像処理装置20は、撮像画像を測色値画像に変換する。ここで、測色値画像とは、画素値がXYZやCIELABなどの測色値を直接指すような画像の他、sRGBやAdobeRGBなどの画素値と測色値の対応関係が一意に決定されるような色空間の画像としてもよい。画像処理装置20は、変換処理にて得た測色値画像から表示装置30の表示特性に応じて変換された表示画像を表示装置30へ送信する。 The image processing device 20 is a device that performs image processing. Examples of the image processing device 20 include a PC (Personal Computer), a server, a smartphone, a tablet terminal, and the like. The image processing device 20 of the present embodiment performs conversion processing for converting a pixel value into a color measurement value for an image captured image received from the image pickup device 10. As a result, the image processing device 20 converts the captured image into a colorimetric value image. Here, the colorimetric image is an image in which the pixel value directly points to the colorimetric value such as XYZ or CIELAB, and the correspondence between the pixel value such as sRGB or AdobeRGB and the colorimetric value is uniquely determined. It may be an image of such a color space. The image processing device 20 transmits to the display device 30 a display image converted according to the display characteristics of the display device 30 from the colorimetric value image obtained in the conversion process.

表示装置30は、測色値に基づく表示画像を表示する装置である。表示装置30は、画像処理システム1における表示部である。表示装置30の一例として、ディスプレイが挙げられる。表示装置30は、画像処理装置20が有するディスプレイであってもよいし、画像処理装置20と有線接続または無線接続された外部ディスプレイであってもよい。表示装置30が外部ディスプレイである場合、表示装置30が設けられる場所は特に限定されない。例えば、表示装置30は、被写体が撮像される場所とは異なる遠隔地に設けられてもよい。 The display device 30 is a device that displays a display image based on the colorimetric value. The display device 30 is a display unit in the image processing system 1. An example of the display device 30 is a display. The display device 30 may be a display included in the image processing device 20, or may be an external display connected to the image processing device 20 by wire or wirelessly. When the display device 30 is an external display, the place where the display device 30 is provided is not particularly limited. For example, the display device 30 may be provided at a remote location different from the location where the subject is imaged.

<1-2.画像処理装置の構成>
図2を参照して、第1の実施形態に係る画像処理装置20の構成について説明する。図2は、第1の実施形態に係る画像処理装置20の構成の一例を示すブロック図である。
図2に示すように、画像処理装置20は、通信部200、制御部210、及び記憶部220を備える。
<1-2. Image processing device configuration>
The configuration of the image processing apparatus 20 according to the first embodiment will be described with reference to FIG. 2. FIG. 2 is a block diagram showing an example of the configuration of the image processing apparatus 20 according to the first embodiment.
As shown in FIG. 2, the image processing device 20 includes a communication unit 200, a control unit 210, and a storage unit 220.

(1)通信部200
通信部200は、他の装置と通信を行う。通信部200は、当該通信により各種情報の送受信を行う。例えば、通信部200は、撮像装置10との通信において、撮像装置10から撮像画像を受信する。また、通信部200は、表示装置30との通信において、表示装置30へ測色値画像を送信する。
(1) Communication unit 200
The communication unit 200 communicates with other devices. The communication unit 200 transmits / receives various information by the communication. For example, the communication unit 200 receives an image captured from the image pickup device 10 in communication with the image pickup device 10. Further, the communication unit 200 transmits a colorimetric value image to the display device 30 in communication with the display device 30.

(2)制御部210
制御部210は、画像処理装置20の動作全体を制御する機能を有する。制御部210は、画像処理装置20がハードウェアとして備えるCPU(Central Processing Unit)にプログラムを実行させることによって実現される。
図2に示すように、制御部210は、特定部2102、取得部2104、割当部2106、変換部2108、及び出力処理部2110を備える。
(2) Control unit 210
The control unit 210 has a function of controlling the entire operation of the image processing device 20. The control unit 210 is realized by causing a CPU (Central Processing Unit) provided as hardware in the image processing device 20 to execute a program.
As shown in FIG. 2, the control unit 210 includes a specific unit 2102, an acquisition unit 2104, an allocation unit 2106, a conversion unit 2108, and an output processing unit 2110.

(2-1)特定部2102
特定部2102は、撮像画像に含まれる領域における印刷物51の色特性を特定する。印刷物51の色特性は、例えば、印刷物51の素材の分光反射率である。印刷物51の素材の一例として、印刷が行われる媒体、インキ等が挙げられる。印刷物51の色特性は、インキの種類、印刷方式等の組み合わせに応じて変化し得る。インキの種類の一例として、特色インキ、プロセスインキ等が挙げられる。印刷方式の一例として、活版印刷、オフセット印刷、グラビア印刷、スクリーン印刷、インクジェット方式等が挙げられる。以下、印刷物51のインキの種類、印刷方式等の組み合わせを示す情報は、「色特性情報」とも称される。
(2-1) Specific part 2102
The specifying unit 2102 specifies the color characteristics of the printed matter 51 in the region included in the captured image. The color characteristic of the printed matter 51 is, for example, the spectral reflectance of the material of the printed matter 51. Examples of the material of the printed matter 51 include a medium on which printing is performed, ink, and the like. The color characteristics of the printed matter 51 may change depending on the combination of the type of ink, the printing method, and the like. Examples of the types of ink include spot color inks and process inks. Examples of the printing method include letterpress printing, offset printing, gravure printing, screen printing, inkjet printing and the like. Hereinafter, the information indicating the combination of the ink type, the printing method, and the like of the printed matter 51 is also referred to as "color characteristic information".

本実施形態では、特定部2102は、ユーザによって予め設定された色特性情報を参照することで、印刷物51の色特性を特定する。特定部2102は、特定した印刷物51の色特性を取得部2104へ入力する。 In the present embodiment, the specifying unit 2102 specifies the color characteristics of the printed matter 51 by referring to the color characteristic information preset by the user. The specific unit 2102 inputs the color characteristics of the specified printed matter 51 to the acquisition unit 2104.

(2-2)取得部2104
取得部2104は、プロファイル(変換情報)を取得する。プロファイルは、撮像画像を測色値画像に変換するための情報であり、撮像画像の画素値と、印刷物51の測色値との対応関係を示す情報が含まれる。撮像画像の画素値と、印刷物51の測色値との対応関係は、例えば、印刷物51の色特性に依存する。そのため、プロファイルは、印刷物51の色特性に応じて用意される。
(2-2) Acquisition unit 2104
The acquisition unit 2104 acquires a profile (conversion information). The profile is information for converting the captured image into a colorimetric image, and includes information indicating the correspondence between the pixel value of the captured image and the colorimetric value of the printed matter 51. The correspondence between the pixel value of the captured image and the color measurement value of the printed matter 51 depends on, for example, the color characteristics of the printed matter 51. Therefore, the profile is prepared according to the color characteristics of the printed matter 51.

撮像画像の画素値と、印刷物51の測色値との対応関係は、撮像装置10の特性にも依存し得る。撮像装置10の特性(例えば分光感度)は、例えば、撮像装置10の種類によって異なり得る。また、撮像装置10の特性は、同一の種類であっても、装置ごとに異なり得る。そのため、プロファイルは、撮像装置10の特性に応じて用意されることが好ましい。撮像装置10の特性に応じて用意されるプロファイルは、以下、「カメラプロファイル」とも称される。カメラプロファイルは、撮像装置10の特性と印刷物51の色特性の組み合わせの数だけ存在し得る。 The correspondence between the pixel value of the captured image and the color measurement value of the printed matter 51 may also depend on the characteristics of the image pickup device 10. The characteristics (for example, spectral sensitivity) of the image pickup apparatus 10 may differ depending on, for example, the type of the image pickup apparatus 10. Further, the characteristics of the imaging device 10 may differ from device to device even if they are of the same type. Therefore, it is preferable that the profile is prepared according to the characteristics of the image pickup apparatus 10. The profile prepared according to the characteristics of the image pickup apparatus 10 is also hereinafter referred to as a “camera profile”. There may be as many camera profiles as there are combinations of the characteristics of the image pickup apparatus 10 and the color characteristics of the printed matter 51.

なお、カメラプロファイルが示す画素値と測色値との対応関係は、撮像装置10が印刷物51を撮像する撮像環境と同一の環境にて、あらかじめ撮像装置10がカラーチャートを撮像した画像の画素値に基づき取得される。カメラプロファイルには、カラーチャートの撮影時には含まれない画素値と測色値との対応関係が含まれてもよい。カメラプロファイルの形式としてCLUT(Color Look-Up Table)が用いられる場合、RGBの各グリッド点における測色値にモデル式による補間等が行われてもよい。色変換の際は、CLUTの値を参照して補間処理が行われる。 The correspondence between the pixel value and the color measurement value indicated by the camera profile is the pixel value of the image in which the image pickup device 10 has captured the color chart in advance in the same environment as the image pickup environment in which the image pickup device 10 captures the printed matter 51. Obtained based on. The camera profile may include a correspondence between a pixel value and a colorimetric value that are not included when the color chart is taken. When CLUT (Color Look-Up Table) is used as the camera profile format, interpolation by a model formula may be performed on the color measurement values at each grid point of RGB. At the time of color conversion, interpolation processing is performed with reference to the CLUT value.

測色値画像が表示装置30に表示される場合、表示される測色値画像の色は、表示装置30の特性に依存し得る。そのため、カメラプロファイルによって変換された測色値画像をそのまま表示装置30に表示させると、表示されている測色値画像中の印刷物51の見えと、実物の印刷物51の見えとの間に差異が生じ得る。そこで、表示装置30の特性に応じたプロファイルをさらに用意しておき、表示装置30に表示させる前に測色値画像に対して当該プロファイルを適用することで、当該差異を小さくすることができる。表示装置30の特性は、例えば、表示装置30の種類によって異なり得る。また、表示装置30の特性は、同一の種類であっても、装置ごとに異なり得る。そのため、プロファイルは、表示装置30の特性に応じて用意されることが好ましい。表示装置30の特性に応じて用意されるプロファイルは、以下、「ディスプレイプロファイル」とも称される。ディスプレイプロファイルは、表示装置30の特性の数だけ存在し得る。 When the colorimetric value image is displayed on the display device 30, the color of the displayed colorimetric value image may depend on the characteristics of the display device 30. Therefore, when the colorimetric value image converted by the camera profile is displayed on the display device 30 as it is, there is a difference between the appearance of the printed matter 51 in the displayed colorimetric value image and the appearance of the actual printed matter 51. Can occur. Therefore, by further preparing a profile corresponding to the characteristics of the display device 30 and applying the profile to the colorimetric value image before displaying it on the display device 30, the difference can be reduced. The characteristics of the display device 30 may differ depending on, for example, the type of the display device 30. Further, the characteristics of the display device 30 may differ from device to device even if they are of the same type. Therefore, it is preferable that the profile is prepared according to the characteristics of the display device 30. The profile prepared according to the characteristics of the display device 30 is also hereinafter referred to as a “display profile”. There may be as many display profiles as there are characteristics of the display device 30.

本実施形態では、各プロファイルは、ユーザによって予め用意され、後述する記憶部220に記憶されている。取得部2104は、例えば、特定部2102から入力される色特性に基づき、記憶部220からプロファイルを取得する。取得部2104は、取得したプロファイルを割当部2106へ入力する。 In the present embodiment, each profile is prepared in advance by the user and stored in the storage unit 220 described later. The acquisition unit 2104 acquires a profile from the storage unit 220, for example, based on the color characteristics input from the specific unit 2102. The acquisition unit 2104 inputs the acquired profile to the allocation unit 2106.

(2-3)割当部2106
割当部2106は、プロファイルを対象となる画像に割り当てる。例えば、取得部2104からカメラプロファイルが入力された場合、割当部2106は、当該カメラプロファイルを撮像画像に含まれる領域に割り当てる。割当部2106は、取得部2104から入力されたディスプレイプロファイルを測色値画像に割り当てる。割当部2106は、各プロファイルが割り当てられた画像を変換部2108へ入力する。割当部2106は、撮像画像について画像全体に一つのカメラプロファイルを割り当ててもよいし、撮像画像における領域のそれぞれにカメラプロファイルを割り当ててもよい。割当部2106は、撮像画像における領域のそれぞれにカメラプロファイルを割り当てる場合には、領域のそれぞれに互いに異なるカメラプロファイルを割り当ててもよいし、各領域のうち一部の領域に同一のカメラプロファイルを割り当てるようにしてもよい。また、撮像画像における領域に、撮像画像の全体が含まれていてもよい。
(2-3) Allocation unit 2106
The allocation unit 2106 allocates the profile to the target image. For example, when a camera profile is input from the acquisition unit 2104, the allocation unit 2106 allocates the camera profile to an area included in the captured image. The allocation unit 2106 allocates the display profile input from the acquisition unit 2104 to the colorimetric value image. The allocation unit 2106 inputs an image to which each profile is assigned to the conversion unit 2108. The allocation unit 2106 may allocate one camera profile to the entire image of the captured image, or may allocate a camera profile to each of the regions in the captured image. When the camera profile is assigned to each of the regions in the captured image, the allocation unit 2106 may assign different camera profiles to each of the regions, or assign the same camera profile to a part of the regions. You may do so. Further, the region in the captured image may include the entire captured image.

(2-4)変換部2108
変換部2108は、プロファイルに基づき、画像の変換処理を行う。例えば、カメラプロファイルが割り当てられた撮像画像が入力された場合、変換部2108は、撮像画像に含まれる領域に割り当てられたカメラプロファイルに基づき、撮像画像の画素値を測色値に変換する。これにより、変換部2108は、撮像画像を測色値画像に変換する。
(2-4) Conversion unit 2108
The conversion unit 2108 performs image conversion processing based on the profile. For example, when a captured image to which a camera profile is assigned is input, the conversion unit 2108 converts the pixel value of the captured image into a color measurement value based on the camera profile assigned to the area included in the captured image. As a result, the conversion unit 2108 converts the captured image into a colorimetric value image.

変換部2108は、測色値画像に割り当てられたディスプレイプロファイルに基づき、測色値画像の測色値を表示装置30に適した測色値に変換する。これにより、変換部2108は、測色値画像を表示画像に変換する。変換部2108は、表示画像を出力処理部2110へ入力する。 The conversion unit 2108 converts the color measurement value of the color measurement value image into a color measurement value suitable for the display device 30 based on the display profile assigned to the color measurement value image. As a result, the conversion unit 2108 converts the colorimetric value image into a display image. The conversion unit 2108 inputs the display image to the output processing unit 2110.

変換部2108は、プロファイルを用いて変換処理を行うことで、画像に写る被写体の色を実物の被写体の見えにより近づけて再現することができる。本実施形態のように撮像装置10が撮像した撮像画像を表示装置30が表示する場合、画像処理装置20は、撮像画像に対して、カメラプロファイルを用いた変換処理とディスプレイプロファイルを用いた変換処理を行う。これにより、表示装置30は、撮像装置10と表示装置30の色特性が考慮された印刷物51の画像を表示することができる。 By performing the conversion process using the profile, the conversion unit 2108 can reproduce the color of the subject reflected in the image closer to the appearance of the actual subject. When the display device 30 displays the captured image captured by the image pickup device 10 as in the present embodiment, the image processing device 20 converts the captured image into a conversion process using a camera profile and a conversion process using a display profile. I do. As a result, the display device 30 can display the image of the printed matter 51 in consideration of the color characteristics of the image pickup device 10 and the display device 30.

(2-5)出力処理部2110
出力処理部2110は、表示画像の出力を制御する。例えば、出力処理部2110は、変換部2108から入力される表示画像を、通信部200を介して画像処理装置20から表示装置30へ送信する。画像処理装置20が表示部を有する場合、出力処理部2110は、変換部2108から入力される表示画像を当該表示部に表示させてもよい。
(2-5) Output processing unit 2110
The output processing unit 2110 controls the output of the displayed image. For example, the output processing unit 2110 transmits the display image input from the conversion unit 2108 from the image processing device 20 to the display device 30 via the communication unit 200. When the image processing device 20 has a display unit, the output processing unit 2110 may display the display image input from the conversion unit 2108 on the display unit.

(3)記憶部220
記憶部220は、記憶媒体、例えば、HDD(Hard Disk Drive)、フラッシュメモリ、EEPROM(Electrically Erasable Programmable Read Only Memory)、RAM(Random Access read/write Memory)、ROM(Read Only Memory)、又はこれらの記憶媒体の任意の組み合わせによって構成される。記憶部220は、例えば、不揮発性メモリを用いることができる。
(3) Storage unit 220
The storage unit 220 is a storage medium, for example, an HDD (Hard Disk Drive), a flash memory, an EEPROM (Electrically Erasable Programmable Read Only Memory), a RAM (Random Access Read / Write Memory), or a RAM (Random Access read / writer) It consists of any combination of storage media. For the storage unit 220, for example, a non-volatile memory can be used.

記憶部220は、各種情報を記憶する機能を有する。記憶部220は、例えば、各種プロファイルを記憶する。各種情報は、DB(データベース)に記憶される。例えば、各種プロファイルは、プロファイルDBに記憶される。 The storage unit 220 has a function of storing various types of information. The storage unit 220 stores, for example, various profiles. Various information is stored in a DB (database). For example, various profiles are stored in the profile DB.

ここで、図3を参照して、プロファイルDBに記憶されるプロファイルの一例について説明する。図3は、第1の実施形態に係るプロファイルDBにおけるプロファイルテーブルの構成の一例を示す図である。図3に示すように、プロファイルテーブルのレコードには、プロファイル名、色特性、画素値、及び測色値が含まれる。なお、プロファイルテーブルのレコードに含まれる情報は、かかる例に限定されない。 Here, an example of the profile stored in the profile DB will be described with reference to FIG. FIG. 3 is a diagram showing an example of the configuration of the profile table in the profile DB according to the first embodiment. As shown in FIG. 3, the record of the profile table includes the profile name, the color characteristic, the pixel value, and the color measurement value. The information contained in the record of the profile table is not limited to such an example.

プロファイル名は、撮像装置10や表示装置30ごとのプロファイルの名称を示す情報である。色特性は、印刷物51の色特性を示す情報である。画素値は、撮像画像における画素値を示す情報であり、(R,G,B)で示されている。測色値は、撮像画像の画素値の変換後の値を示す情報であり、(X,Y,Z)で示されている。なお、画素値のR,G,Bは、それぞれ測色値のX,Y,Zと対応しているものとする。図3には、プロファイルの一例として、カメラの特性に応じたプロファイルであるカメラプロファイル1とカメラプロファイル2が示されている。 The profile name is information indicating the name of the profile for each of the image pickup device 10 and the display device 30. The color characteristic is information indicating the color characteristic of the printed matter 51. The pixel value is information indicating the pixel value in the captured image, and is indicated by (R, G, B). The colorimetric value is information indicating a value after conversion of the pixel value of the captured image, and is indicated by (X, Y, Z). It is assumed that the pixel values R, G, and B correspond to the colorimetric values X, Y, and Z, respectively. FIG. 3 shows a camera profile 1 and a camera profile 2 which are profiles according to the characteristics of the camera as an example of the profile.

カメラプロファイル1には、印刷物51の色特性が「インキ1」かつ「印刷方式1」である場合の画素値と測色値の対応関係が関連付けられている。当該対応関係では、画素値(R1-1,G1-1,B1-1)が測色値(X1-1,Y1-1,Z1-1)に、画素値(R1-2,G1-2,B1-2)が測色値(X1-2,Y1-2,Z1-2)にそれぞれ変換されることが示されている。 The camera profile 1 is associated with the correspondence between the pixel value and the color measurement value when the color characteristic of the printed matter 51 is "ink 1" and "printing method 1". In this correspondence relationship, the pixel value (R 1-1 , G 1-1 , B 1-1 ) becomes the color measurement value (X 1-1 , Y 1-1 , Z 1-1 ), and the pixel value (R 1 ). It has been shown that -2 , G 1-2 , B 1-2 ) are converted into colorimetric values (X 1-2 , Y 1-2 , Z 1-2 ), respectively.

カメラプロファイル2には、印刷物51の色特性が「インキ2」かつ「印刷方式2」である場合の画素値と測色値の対応関係が関連付けられている。当該対応関係では、画素値(R2-1,G2-1,B2-1)が測色値(X2-1,Y2-1,Z2-1)に、画素値(R2-2,G2-2,B2-2)が測色値(X2-2,Y2-2,Z2-2)にそれぞれ変換されることが示されている。 The camera profile 2 is associated with the correspondence between the pixel value and the color measurement value when the color characteristic of the printed matter 51 is "ink 2" and "printing method 2". In this correspondence relationship, the pixel values ( R2-1 , G2-1 , B2-1 ) are the color measurement values ( X2-1 , Y2-1 , Z2-1 ) and the pixel values ( R2 ). It has been shown that -2 , G 2-2 , B 2-2 ) are converted into colorimetric values (X 2-2 , Y 2-2 , Z 2-2 ), respectively.

<1-3.処理の流れ>
図4を参照して、第1の実施形態に係る撮像画像の変換の流れについて説明する。図4は、第1の実施形態に係る撮像画像の変換の流れの一例を示すフローチャートである。
<1-3. Processing flow>
With reference to FIG. 4, the flow of conversion of the captured image according to the first embodiment will be described. FIG. 4 is a flowchart showing an example of the flow of conversion of the captured image according to the first embodiment.

図4に示すように、まず、ユーザは、印刷物51を撮影台50に設置する(S102)。 As shown in FIG. 4, first, the user installs the printed matter 51 on the photographing table 50 (S102).

次いで、画像処理装置20は、撮影台50に設置された印刷物51の撮像画像を取得する(S104)。印刷物51は、例えば、ユーザが撮像装置10を操作することで撮像される。 Next, the image processing device 20 acquires a captured image of the printed matter 51 installed on the photographing table 50 (S104). The printed matter 51 is imaged, for example, by the user operating the image pickup apparatus 10.

次いで、画像処理装置20の特定部2102は、撮像画像に含まれる印刷物51の色特性を特定する(S106)。例えば、特定部2102は、ユーザによって設定されている色特性を印刷物51の色特性と特定する。 Next, the specifying unit 2102 of the image processing apparatus 20 specifies the color characteristics of the printed matter 51 included in the captured image (S106). For example, the specifying unit 2102 identifies the color characteristics set by the user as the color characteristics of the printed matter 51.

次いで、画像処理装置20の取得部2104は、特定した色特性に基づき、記憶部220からプロファイルを取得する(S108)。例えば、色特性が「インキ1」かつ「印刷方式1」である場合、取得部2104は、記憶部220のプロファイルDBからカメラプロファイル1を取得する。 Next, the acquisition unit 2104 of the image processing device 20 acquires a profile from the storage unit 220 based on the specified color characteristics (S108). For example, when the color characteristics are "ink 1" and "printing method 1", the acquisition unit 2104 acquires the camera profile 1 from the profile DB of the storage unit 220.

次いで、画像処理装置20の割当部2106は、取得したプロファイルを撮像画像に割り当てる(S110)。 Next, the allocation unit 2106 of the image processing apparatus 20 allocates the acquired profile to the captured image (S110).

次いで、画像処理装置20の変換部2108は、割り当てられたプロファイルに基づき、変換処理を行う(S112)。 Next, the conversion unit 2108 of the image processing apparatus 20 performs conversion processing based on the assigned profile (S112).

最後に、表示装置30は、変換部2108の変換処理によって得られた表示画像を表示する(S114)。 Finally, the display device 30 displays the display image obtained by the conversion process of the conversion unit 2108 (S114).

<<2.第2の実施形態>>
以上、本発明の第1の実施形態について説明した。続いて、図5及び図6を参照して、本発明の第2の実施形態について説明する。第2の実施形態では、印刷物の色特性と関連付けられた識別情報に基づき、撮像画像に含まれる印刷物の色特性が特定される例について説明する。なお、第2の実施形態における識別情報は、印刷物に付与される識別情報(第1の識別情報)である。なお、以下では、上述した第1の実施形態と重複する説明を省略する。
<< 2. Second embodiment >>
The first embodiment of the present invention has been described above. Subsequently, a second embodiment of the present invention will be described with reference to FIGS. 5 and 6. In the second embodiment, an example in which the color characteristics of the printed matter included in the captured image are specified based on the identification information associated with the color characteristics of the printed matter will be described. The identification information in the second embodiment is the identification information (first identification information) given to the printed matter. In the following, the description overlapping with the first embodiment described above will be omitted.

ここで、図5を参照して、第2の実施形態に係る識別情報の一例について説明する。図5は、第2の実施形態に係る識別情報の一例を示す図である。図5に示すように、印刷物51には、識別情報53が印刷(付与)されている。印刷物51に印刷される識別情報の一例として、撮像装置10で読み取り可能な1次元コード、2次元コード等が挙げられる。1次元コードは、例えば、1次元バーコードである。2次元コードは、例えば、2次元バーコードである。識別情報には、印刷物51の色特性が関連付けられている。一例として、識別情報には、印刷物51の素材ごとの色特性と、撮像画像における素材の位置とが関連付けられる。ここで素材は、印刷物51に用いられている媒体やインキのことである。 Here, an example of the identification information according to the second embodiment will be described with reference to FIG. FIG. 5 is a diagram showing an example of identification information according to the second embodiment. As shown in FIG. 5, the identification information 53 is printed (assigned) to the printed matter 51. As an example of the identification information printed on the printed matter 51, a one-dimensional code and a two-dimensional code that can be read by the image pickup apparatus 10 can be mentioned. The one-dimensional code is, for example, a one-dimensional bar code. The two-dimensional code is, for example, a two-dimensional bar code. The identification information is associated with the color characteristics of the printed matter 51. As an example, the identification information is associated with the color characteristics of each material of the printed matter 51 and the position of the material in the captured image. Here, the material is a medium or ink used for the printed matter 51.

<2-1.画像処理システムの構成>
第2の実施形態に係る画像処理システムの構成は、上述した第1の実施形態に係る画像処理システム1の構成と同様であるため、詳細な説明を省略する。以下、第2の実施形態に係る画像処理システムの構成について、第1の実施形態に係る画像処理システム1と同一の符号を用いる。
<2-1. Image processing system configuration>
Since the configuration of the image processing system according to the second embodiment is the same as the configuration of the image processing system 1 according to the first embodiment described above, detailed description thereof will be omitted. Hereinafter, the same reference numerals as those of the image processing system 1 according to the first embodiment are used for the configuration of the image processing system according to the second embodiment.

<2-2.画像処理装置の構成>
第2の実施形態に係る画像処理装置20の構成は、上述した第1の実施形態に係る画像処理装置20の構成と同様である。以下、第2の実施形態に係る画像処理装置20の構成について、第1の実施形態に係る画像処理装置20の構成と同一の符号を用いる。なお、第2の実施形態に係る画像処理装置20では、特定部2102の機能の一部と、プロファイルDBのプロファイルテーブルの構成の一部が、第1の実施形態と異なる。以下、第1の実施形態との差異について説明する。
<2-2. Image processing device configuration>
The configuration of the image processing apparatus 20 according to the second embodiment is the same as the configuration of the image processing apparatus 20 according to the first embodiment described above. Hereinafter, the same reference numerals as those of the image processing apparatus 20 according to the first embodiment will be used for the configuration of the image processing apparatus 20 according to the second embodiment. In the image processing apparatus 20 according to the second embodiment, a part of the function of the specific unit 2102 and a part of the structure of the profile table of the profile DB are different from those of the first embodiment. Hereinafter, the difference from the first embodiment will be described.

第2の実施形態の特定部2102は、撮像画像に含まれる識別情報53に基づき、撮像画像に含まれる印刷物51の色特性を特定する。例えば、特定部2102は、識別情報53に関連付けられている色特性を、印刷物51の色特性として特定する。識別情報53に印刷物51の素材ごとの色特性が関連付けられている場合、特定部2102は、印刷物51の素材ごとの色特性を特定することができる。さらに、識別情報53に印刷物51の素材の位置が関連付けられている場合、特定部2102は、印刷物51の素材の位置を特定することができる。 The specifying unit 2102 of the second embodiment identifies the color characteristics of the printed matter 51 included in the captured image based on the identification information 53 included in the captured image. For example, the specifying unit 2102 specifies the color characteristic associated with the identification information 53 as the color characteristic of the printed matter 51. When the identification information 53 is associated with the color characteristics of each material of the printed matter 51, the specifying unit 2102 can specify the color characteristics of each material of the printed matter 51. Further, when the identification information 53 is associated with the position of the material of the printed matter 51, the specifying unit 2102 can specify the position of the material of the printed matter 51.

特定部2102により、印刷物51の素材ごとの色特性が特定されることで、取得部2104は、印刷物51の素材ごとのプロファイルを取得することができる。また、割当部2106は、撮像画像に対して、印刷物51の素材ごとにプロファイルを割り当てることができる。これにより、変換部2108は、撮像画像の画素値を、素材の色特性に応じて素材ごとに変換することができる。これにより、第2の実施形態の変換部2108は、第1の実施形態の変換部2108よりも精度高く変換処理を行うことができる。 By specifying the color characteristics of each material of the printed matter 51 by the specifying unit 2102, the acquisition unit 2104 can acquire the profile of each material of the printed matter 51. Further, the allocation unit 2106 can assign a profile to the captured image for each material of the printed matter 51. As a result, the conversion unit 2108 can convert the pixel value of the captured image for each material according to the color characteristics of the material. As a result, the conversion unit 2108 of the second embodiment can perform the conversion process with higher accuracy than the conversion unit 2108 of the first embodiment.

ここで、図6を参照して、プロファイルDBに記憶されるプロファイルの一例について説明する。図6は、第2の実施形態に係るプロファイルDBにおけるプロファイルテーブルの構成の一例を示す図である。図6に示すように、プロファイルテーブルのレコードには、プロファイル名、識別情報、色特性、画素値、及び測色値が含まれる。なお、プロファイルテーブルのレコードに含まれる情報は、かかる例に限定されない。 Here, an example of the profile stored in the profile DB will be described with reference to FIG. FIG. 6 is a diagram showing an example of the configuration of the profile table in the profile DB according to the second embodiment. As shown in FIG. 6, the record of the profile table includes the profile name, the identification information, the color characteristic, the pixel value, and the color measurement value. The information contained in the record of the profile table is not limited to such an example.

プロファイルテーブルの識別情報は、色特性と関連付けられている識別情報を示す情報である。図6には、プロファイルの一例として、カメラの特性に応じたプロファイルであるカメラプロファイル3とカメラプロファイル4が示されている。 The identification information of the profile table is information indicating the identification information associated with the color characteristic. FIG. 6 shows a camera profile 3 and a camera profile 4, which are profiles according to the characteristics of the camera, as an example of the profile.

カメラプロファイル3には、識別情報の「2次元バーコード1」と、色特性の「インキ3」と、「印刷方式3」とが関連付けられている。
さらに、カメラプロファイル3には、印刷物51の色特性が「インキ3」かつ「印刷方式3」である場合の画素値と測色値の対応関係が関連付けられている。当該対応関係では、画素値(R3-1,G3-1,B3-1)が測色値(X3-1,Y3-1,Z3-1)に、画素値(R3-2,G3-2,B3-2)が測色値(X3-2,Y3-2,Z3-2)にそれぞれ変換されることが示されている。
The camera profile 3 is associated with the identification information "two-dimensional bar code 1", the color characteristics "ink 3", and the "printing method 3".
Further, the camera profile 3 is associated with the correspondence between the pixel value and the color measurement value when the color characteristic of the printed matter 51 is "ink 3" and "printing method 3". In this correspondence relationship, the pixel value (R 3-1 , G 3-1 , B 3-1 ) becomes the color measurement value (X 3-1 , Y 3-1 , Z 3-1 ), and the pixel value (R 3 ). It has been shown that -2 , G 3-2 , B 3-2 ) are converted into colorimetric values (X 3-2 , Y 3-2 , Z 3-2 ), respectively.

カメラプロファイル4には、識別情報の「2次元バーコード2」と、色特性の「インキ4」と、「印刷方式4」とが関連付けられている。
さらに、カメラプロファイル4には、印刷物51の色特性が「インキ4」かつ「印刷方式4」である場合の画素値と測色値の対応関係が関連付けられている。当該対応関係では、画素値(R4-1,G4-1,B4-1)が測色値(X4-1,Y4-1,Z4-1)に、画素値(R4-2,G4-2,B4-2)が測色値(X4-2,Y4-2,Z4-2)にそれぞれ変換されることが示されている。
The camera profile 4 is associated with an identification information "two-dimensional bar code 2", a color characteristic "ink 4", and a "printing method 4".
Further, the camera profile 4 is associated with the correspondence between the pixel value and the color measurement value when the color characteristic of the printed matter 51 is "ink 4" and "printing method 4". In this correspondence relationship, the pixel value ( R4-1 , G4-1, B4-1) becomes the colorimetric value (X4-1, Y4-1, Z4-1 ) and the pixel value ( R4 ). It has been shown that -2 , G 4-2 , B 4-2 ) are converted into colorimetric values (X 4-2 , Y 4-2 , Z 4-2 ), respectively.

<2-3.撮像画像の変換の流れ>
第2の実施形態に係る撮像画像の変換の流れは、上述した第1の実施形態に係る撮像画像の変換の流れと同様であるため、詳細な説明を省略する。
<2-3. Flow of conversion of captured image>
Since the flow of conversion of the captured image according to the second embodiment is the same as the flow of conversion of the captured image according to the first embodiment described above, detailed description thereof will be omitted.

<<3.第3の実施形態>>
以上、本発明の第2の実施形態について説明した。続いて、図7及び図8を参照して、本発明の第3の実施形態について説明する。第3の実施形態では、印刷物の色特性と関連付けられた識別情報に基づき、撮像画像に含まれる印刷物の色特性が特定される例について説明する。なお、第3の実施形態における識別情報は、撮像装置10が印刷物51を撮像する撮像環境に付与される識別情報(第2の識別情報)である。撮像環境の一例として、撮影台が挙げられる。なお、以下では、上述した第1の実施形態及び第2の実施形態と重複する説明を省略する。
<< 3. Third Embodiment >>
The second embodiment of the present invention has been described above. Subsequently, a third embodiment of the present invention will be described with reference to FIGS. 7 and 8. In the third embodiment, an example in which the color characteristics of the printed matter included in the captured image are specified based on the identification information associated with the color characteristics of the printed matter will be described. The identification information in the third embodiment is identification information (second identification information) given to the image pickup environment in which the image pickup apparatus 10 images the printed matter 51. An example of an imaging environment is a shooting table. In the following, the description overlapping with the first embodiment and the second embodiment described above will be omitted.

ここで、図7を参照して、第3の実施形態に係る識別情報の一例について説明する。図7は、第3の実施形態に係る識別情報の一例を示す図である。図7に示す例では、撮影台50が領域58と領域59に分割されている。領域58には、一例として、「印刷物置き場」と示されたラベル56が識別情報として付与されている。ラベル56が付与された領域58には、印刷物51が置かれている。領域59には、一例として、「見本置き場」と示されたラベル57が識別情報として付与されている。ラベル57が付与された領域59には、印刷物の見本54が置かれている。 Here, an example of the identification information according to the third embodiment will be described with reference to FIG. 7. FIG. 7 is a diagram showing an example of identification information according to the third embodiment. In the example shown in FIG. 7, the photographing table 50 is divided into a region 58 and a region 59. As an example, the area 58 is given a label 56 labeled as “printed matter storage” as identification information. A printed matter 51 is placed in the area 58 to which the label 56 is attached. As an example, the area 59 is given a label 57 indicated as "sample storage" as identification information. A sample of printed matter 54 is placed in the area 59 to which the label 57 is attached.

第3の実施形態の識別情報には、被写体の色特性と、撮像画像における被写体の位置が関連付けられている。当該被写体には、図7に示す印刷物51と見本54に両方が含まれる。よって、撮像画像に複数の被写体が含まれる場合、画像処理装置20は、当該識別情報に基づき、それぞれの被写体を区別し、それぞれの被写体に応じた色特性を特定することができる。 The identification information of the third embodiment is associated with the color characteristics of the subject and the position of the subject in the captured image. The subject includes both the printed matter 51 and the sample 54 shown in FIG. 7. Therefore, when a plurality of subjects are included in the captured image, the image processing device 20 can distinguish each subject based on the identification information and specify the color characteristics corresponding to each subject.

<3-1.画像処理システムの構成>
第3の実施形態に係る画像処理システムの構成は、上述した第1の実施形態及び第2の実施形態に係る画像処理システム1の構成と同様であるため、詳細な説明を省略する。以下、第3の実施形態に係る画像処理システムの構成について、第1の実施形態及び第2の実施形態に係る画像処理システム1と同一の符号を用いる。
<3-1. Image processing system configuration>
Since the configuration of the image processing system according to the third embodiment is the same as the configuration of the image processing system 1 according to the first embodiment and the second embodiment described above, detailed description thereof will be omitted. Hereinafter, the same reference numerals as those of the image processing system 1 according to the first embodiment and the second embodiment are used for the configuration of the image processing system according to the third embodiment.

<3-2.画像処理装置の構成>
第3の実施形態に係る画像処理装置20の構成は、上述した第1の実施形態及び第2の実施形態に係る画像処理装置20の構成と同様である。以下、第3の実施形態に係る画像処理装置20の構成について、第1の実施形態及び第2の実施形態に係る画像処理装置20の構成と同一の符号を用いる。なお、第3の実施形態に係る画像処理装置20では、特定部2102の機能の一部と、プロファイルDBのプロファイルテーブルの構成の一部が、第1の実施形態及び第2の実施形態と異なる。以下、第1の実施形態及び第2の実施形態との差異について説明する。
<3-2. Image processing device configuration>
The configuration of the image processing apparatus 20 according to the third embodiment is the same as the configuration of the image processing apparatus 20 according to the first embodiment and the second embodiment described above. Hereinafter, the same reference numerals as those of the image processing apparatus 20 according to the first embodiment and the second embodiment are used for the configuration of the image processing apparatus 20 according to the third embodiment. In the image processing apparatus 20 according to the third embodiment, a part of the function of the specific unit 2102 and a part of the structure of the profile table of the profile DB are different from those of the first embodiment and the second embodiment. .. Hereinafter, the differences between the first embodiment and the second embodiment will be described.

第3の実施形態の特定部2102は、撮像画像に含まれる識別情報(第2の識別情報)に基づき、撮像画像に含まれる被写体の位置と色特性を特定する。例えば、図7に示す例において、ラベル56には、印刷物51の色特性と、印刷物51の位置(例えばラベル56が付与されている領域58)が関連付けられている。これにより、画像処理装置20は、撮像画像に含まれるラベル56を認識することで、ラベル56が付与されている領域58に置かれている被写体が印刷物51であると判定し、かつ、印刷物51の色特性を特定することができる。 The identification unit 2102 of the third embodiment identifies the position and color characteristics of the subject included in the captured image based on the identification information (second identification information) included in the captured image. For example, in the example shown in FIG. 7, the label 56 is associated with the color characteristics of the printed matter 51 and the position of the printed matter 51 (for example, the area 58 to which the label 56 is attached). As a result, the image processing apparatus 20 recognizes the label 56 included in the captured image, determines that the subject placed in the area 58 to which the label 56 is attached is the printed matter 51, and determines that the printed matter 51 is the printed matter 51. Color characteristics can be specified.

また、図7に示す例において、ラベル57には、見本54の色特性と、見本54の位置(例えばラベル57が付与されている領域59)が関連付けられている。これにより、画像処理装置20は、撮像画像に含まれるラベル57を認識することで、ラベル57が付与されている領域59に置かれている被写体が見本54であると判定し、かつ、見本54の色特性を特定することができる。 Further, in the example shown in FIG. 7, the label 57 is associated with the color characteristic of the sample 54 and the position of the sample 54 (for example, the area 59 to which the label 57 is attached). As a result, the image processing apparatus 20 recognizes the label 57 included in the captured image, determines that the subject placed in the area 59 to which the label 57 is attached is the sample 54, and determines that the sample 54 is the sample 54. Color characteristics can be specified.

なお、第3の実施形態では、印刷物51と見本54の両方を含む撮像画像を、印刷物51のみを含む画像と見本54のみを含む画像とに分割してから、上述した方法によって印刷物51と見本54のそれぞれの色特性が特定されてもよい。変換処理も各々の画像に対して行われてよい。 In the third embodiment, the captured image including both the printed matter 51 and the sample 54 is divided into an image containing only the printed matter 51 and an image containing only the sample 54, and then the printed matter 51 and the sample are prepared by the above method. Each color characteristic of 54 may be specified. The conversion process may also be performed on each image.

ここで、図8を参照して、プロファイルDBに記憶されるプロファイルの一例について説明する。図8は、第3の実施形態に係るプロファイルDBにおけるプロファイルテーブルの構成の一例を示す図である。図8に示すように、プロファイルテーブルのレコードには、プロファイル名、識別情報、位置情報、色特性、画素値、及び測色値が含まれる。なお、プロファイルテーブルのレコードに含まれる情報は、かかる例に限定されない。 Here, an example of the profile stored in the profile DB will be described with reference to FIG. FIG. 8 is a diagram showing an example of the configuration of the profile table in the profile DB according to the third embodiment. As shown in FIG. 8, the record of the profile table includes a profile name, identification information, position information, color characteristics, pixel values, and color measurement values. The information contained in the record of the profile table is not limited to such an example.

プロファイルテーブルの位置情報は、撮像画像における被写体の位置を示す情報である。図8には、プロファイルの一例として、カメラの特性に応じたプロファイルであるカメラプロファイル5とカメラプロファイル6が示されている。 The position information of the profile table is information indicating the position of the subject in the captured image. FIG. 8 shows a camera profile 5 and a camera profile 6 which are profiles according to the characteristics of the camera as an example of the profile.

カメラプロファイル5には、識別情報の「印刷物置き場ラベル」(ラベル56)と、位置情報の「領域58」、色特性の「インキ5」と、「印刷方式5」とが関連付けられている。これは、「印刷物置き場ラベル」が付与されている「領域58」に置かれている被写体の色特性が「インキ5」かつ「印刷方式5」であることを示している。
さらに、カメラプロファイル5には、被写体の色特性が「インキ5」かつ「印刷方式5」である場合の画素値と測色値の対応関係が関連付けられている。当該対応関係では、画素値(R5-1,G5-1,B5-1)が測色値(X5-1,Y5-1,Z5-1)に、画素値(R5-2,G5-2,B5-2)が測色値(X5-2,Y5-2,Z5-2)にそれぞれ変換されることが示されている。
The camera profile 5 is associated with an identification information "printed matter storage label" (label 56), a position information "region 58", a color characteristic "ink 5", and a "printing method 5". This indicates that the color characteristics of the subject placed in the "region 58" to which the "printed matter storage label" is attached are "ink 5" and "printing method 5".
Further, the camera profile 5 is associated with the correspondence between the pixel value and the color measurement value when the color characteristic of the subject is "ink 5" and "printing method 5". In this correspondence relationship, the pixel value (R 5-1 , G 5-1 , B 5-1 ) becomes the color measurement value (X 5-1 , Y 5-1 , Z 5-1 ), and the pixel value (R 5 ). It has been shown that -2 , G 5-2 , B 5-2 ) are converted into colorimetric values (X 5-2 , Y 5-2 , Z 5-2 ), respectively.

カメラプロファイル6には、識別情報の「見本置き場ラベル」(ラベル57)と、位置情報の「領域59」、色特性の「インキ6」と、「印刷方式6」とが関連付けられている。これは、「見本置き場ラベル」が付与されている「領域59」に置かれている被写体の色特性が「インキ6」かつ「印刷方式6」であることを示している。
さらに、カメラプロファイル6には、被写体の色特性が「インキ6」かつ「印刷方式6」である場合の画素値と測色値の対応関係が関連付けられている。当該対応関係では、画素値(R6-1,G6-1,B6-1)が測色値(X6-1,Y6-1,Z6-1)に、画素値(R6-2,G6-2,B6-2)が測色値(X6-2,Y6-2,Z6-2)にそれぞれ変換されることが示されている。
The camera profile 6 is associated with an identification information "sample storage label" (label 57), a position information "region 59", a color characteristic "ink 6", and a "printing method 6". This indicates that the color characteristics of the subject placed in the "region 59" to which the "sample storage label" is attached are "ink 6" and "printing method 6".
Further, the camera profile 6 is associated with the correspondence between the pixel value and the color measurement value when the color characteristic of the subject is "ink 6" and "printing method 6". In this correspondence relationship, the pixel value ( R6-1 , G6-1 , B6-1 ) becomes the colorimetric value ( X6-1 , Y6-1 , Z6-1 ) and the pixel value (R6). It has been shown that -2 , G 6-2 , B 6-2 ) are converted into colorimetric values (X 6-2 , Y 6-2 , Z 6-2 ), respectively.

<3-3.撮像画像の変換の流れ>
第3の実施形態に係る撮像画像の変換の流れは、上述した第1の実施形態及び第2の実施形態に係る撮像画像の変換の流れと同様であるため、詳細な説明を省略する。
<3-3. Flow of conversion of captured image>
Since the flow of conversion of the captured image according to the third embodiment is the same as the flow of conversion of the captured image according to the first embodiment and the second embodiment described above, detailed description thereof will be omitted.

<<4.第4の実施形態>>
以上、本発明の第3の実施形態について説明した。続いて、図9~図11を参照して、本発明の第4の実施形態について説明する。第4の実施形態では、被写体の素材ごとの色特性を示す設計情報に基づき、撮像画像に含まれる被写体の色特性が特定される例について説明する。被写体が印刷物51である場合の設計情報は、例えば、印刷物51の製版画像である。なお、被写体の設計情報は、かかる例に限定されない。なお、以下では、上述した第1の実施形態~第3の実施形態と重複する説明を省略する。
<< 4. Fourth Embodiment >>
The third embodiment of the present invention has been described above. Subsequently, a fourth embodiment of the present invention will be described with reference to FIGS. 9 to 11. In the fourth embodiment, an example in which the color characteristics of the subject included in the captured image are specified based on the design information indicating the color characteristics of each material of the subject will be described. The design information when the subject is the printed matter 51 is, for example, a plate-making image of the printed matter 51. The design information of the subject is not limited to this example. In the following, the description overlapping with the first to third embodiments described above will be omitted.

ここで、図9を参照して、第4の実施形態に係る撮像画像と設計情報の関係の一例について説明する。図9は、第4の実施形態に係る撮像画像と設計情報の関係の一例を示す図である。図9には、設計情報の一例として、印刷物51の製版画像70が示されている。 Here, with reference to FIG. 9, an example of the relationship between the captured image and the design information according to the fourth embodiment will be described. FIG. 9 is a diagram showing an example of the relationship between the captured image and the design information according to the fourth embodiment. FIG. 9 shows a plate-making image 70 of the printed matter 51 as an example of the design information.

製版画像70には、印刷物51を印刷する際の印刷領域が示されている。印刷領域には、例えば、印刷物51の印刷時に印刷領域に用いられる素材の色特性が連付けられている。一例として、図9に示すように、製版画像70の印刷領域71aには特色インキ1、印刷領域71bには特色インキ2、印刷領域71cにはプロセスインキ3、印刷領域71dにはプロセスインキ2、印刷領域71eにはプロセスインキ3が関連付けられている。 The plate-making image 70 shows a print area when the printed matter 51 is printed. In the print area, for example, the color characteristics of the material used for the print area at the time of printing the printed matter 51 are linked. As an example, as shown in FIG. 9, the special color ink 1 is in the print area 71a of the plate making image 70, the special color ink 2 is in the print area 71b, the process ink 3 is in the print area 71c, and the process ink 2 is in the print area 71d. The process ink 3 is associated with the print area 71e.

画像処理装置20は、印刷物51が含まれる撮像画像60と、製版画像70との位置合わせを行い、対応する位置における色特性は同一であるとして、印刷物51の素材ごとの色特性を特定する。例えば、図9に示す例の場合、印刷物51の印刷領域52a、印刷領域52b、印刷領域52c、印刷領域52d、印刷領域52eは、それぞれ製版画像70の印刷領域71a、印刷領域71b、印刷領域71c、印刷領域71d、印刷領域71eと対応する。
よって、画像処理装置20は、印刷領域52a、印刷領域52b、印刷領域52c、印刷領域52d、及び印刷領域52eの色特性は、それぞれ特色インキ1の色特性、特色インキ2の色特性、プロセスインキ1の色特性、プロセスインキ2の色特性、プロセスインキ3の色特性であると特定することができる。
The image processing apparatus 20 aligns the captured image 60 including the printed matter 51 with the plate-making image 70, and specifies the color characteristics of each material of the printed matter 51 on the assumption that the color characteristics at the corresponding positions are the same. For example, in the case of the example shown in FIG. 9, the print area 52a, the print area 52b, the print area 52c, the print area 52d, and the print area 52e of the printed matter 51 are the print area 71a, the print area 71b, and the print area 71c of the plate making image 70, respectively. Corresponds to the print area 71d and the print area 71e.
Therefore, in the image processing apparatus 20, the color characteristics of the print area 52a, the print area 52b, the print area 52c, the print area 52d, and the print area 52e are the color characteristics of the spot color ink 1, the color characteristics of the spot color ink 2, and the process ink, respectively. It can be specified that it is the color characteristic of 1, the color characteristic of the process ink 2, and the color characteristic of the process ink 3.

<4-1.画像処理システムの構成>
第4の実施形態に係る画像処理システムの構成は、上述した第1の実施形態~第3の実施形態に係る画像処理システム1の構成と同様であるため、詳細な説明を省略する。以下、第4の実施形態に係る画像処理システムの構成について、第1の実施形態~第3の実施形態に係る画像処理システム1と同一の符号を用いる。
<4-1. Image processing system configuration>
Since the configuration of the image processing system according to the fourth embodiment is the same as the configuration of the image processing system 1 according to the first to third embodiments described above, detailed description thereof will be omitted. Hereinafter, the same reference numerals as those of the image processing system 1 according to the first to third embodiments are used for the configuration of the image processing system according to the fourth embodiment.

<4-2.画像処理装置の構成>
第4の実施形態に係る画像処理装置20の構成は、上述した第1の実施形態~第3の実施形態に係る画像処理装置20の構成と同様である。以下、第4の実施形態に係る画像処理装置20の構成について、第1の実施形態~第3の実施形態に係る画像処理装置20の構成と同一の符号を用いる。なお、第4の実施形態に係る画像処理装置20では、特定部2102の機能の一部と、プロファイルDBのプロファイルテーブルの構成の一部が、第1の実施形態~第3の実施形態と異なる。以下、第1の実施形態~第3の実施形態との差異について説明する。
<4-2. Image processing device configuration>
The configuration of the image processing device 20 according to the fourth embodiment is the same as the configuration of the image processing device 20 according to the first to third embodiments described above. Hereinafter, the same reference numerals as those of the image processing apparatus 20 according to the first to third embodiments are used for the configuration of the image processing apparatus 20 according to the fourth embodiment. In the image processing apparatus 20 according to the fourth embodiment, a part of the function of the specific unit 2102 and a part of the structure of the profile table of the profile DB are different from those of the first embodiment to the third embodiment. .. Hereinafter, the differences from the first embodiment to the third embodiment will be described.

第4の実施形態の特定部2102は、印刷物51の製版画像に基づき、撮像画像に含まれる被写体の色特性を特定する。例えば、特定部2102は、撮像画像60に含まれる印刷物51と製版画像70との位置合わせを行うことで、当該印刷物51の素材の位置と当該素材の色特性とを特定する。 The specifying unit 2102 of the fourth embodiment specifies the color characteristics of the subject included in the captured image based on the plate-making image of the printed matter 51. For example, the specifying unit 2102 identifies the position of the material of the printed matter 51 and the color characteristics of the material by aligning the printed matter 51 included in the captured image 60 with the plate-making image 70.

特定部2102により、印刷物51の素材ごとの色特性が特定されることで、取得部2104は、印刷物51の素材ごとのプロファイルを取得することができる。また、特定部2102によって撮像画像60における印刷物51の各素材の位置も特定されているため、割当部2106は、当該位置に基づき、撮像画像における印刷物51の各素材に対して精度高くプロファイルを割り当てることができる。これにより、変換部2108における変換処理の精度も向上する。 By specifying the color characteristics of each material of the printed matter 51 by the specifying unit 2102, the acquisition unit 2104 can acquire the profile of each material of the printed matter 51. Further, since the position of each material of the printed matter 51 in the captured image 60 is also specified by the specific unit 2102, the allocation unit 2106 allocates the profile to each material of the printed matter 51 in the captured image with high accuracy based on the position. be able to. As a result, the accuracy of the conversion process in the conversion unit 2108 is also improved.

ここで、図10を参照して、プロファイルDBに記憶されるプロファイルの一例について説明する。図10は、第4の実施形態に係るプロファイルDBにおけるプロファイルテーブルの構成の一例を示す図である。図10に示すように、プロファイルテーブルのレコードには、プロファイル名、印刷領域、色特性、画素値、及び測色値が含まれる。なお、プロファイルテーブルのレコードに含まれる情報は、かかる例に限定されない。 Here, an example of the profile stored in the profile DB will be described with reference to FIG. 10. FIG. 10 is a diagram showing an example of the configuration of the profile table in the profile DB according to the fourth embodiment. As shown in FIG. 10, the record of the profile table includes a profile name, a print area, a color characteristic, a pixel value, and a color measurement value. The information contained in the record of the profile table is not limited to such an example.

プロファイルテーブルの位置情報は、製版画像70における各素材の位置を示す情報である。図10には、プロファイルの一例として、カメラの特性に応じたプロファイルであるカメラプロファイル7、カメラプロファイル8、カメラプロファイル9、カメラプロファイル10、及びカメラプロファイル11が示されている。 The position information of the profile table is information indicating the position of each material in the plate making image 70. As an example of the profile, FIG. 10 shows a camera profile 7, a camera profile 8, a camera profile 9, a camera profile 10, and a camera profile 11, which are profiles according to the characteristics of the camera.

カメラプロファイル7には、位置情報の「印刷領域71a」と、色特性の「特色インキ1」とが関連付けられている。これは、製版画像70の「印刷領域71a」の色特性が「特色インキ1」であることを示している。
さらに、カメラプロファイル7には、色特性が「特色インキ1」である場合の画素値と測色値の対応関係が関連付けられている。当該対応関係では、画素値(R7-1,G7-1,B7-1)が測色値(X7-1,Y7-1,Z7-1)に変換されることが示されている。
The camera profile 7 is associated with the "printing area 71a" of the position information and the "spot color ink 1" of the color characteristics. This indicates that the color characteristic of the "printing area 71a" of the plate-making image 70 is "spot color ink 1".
Further, the camera profile 7 is associated with the correspondence between the pixel value and the color measurement value when the color characteristic is "spot color ink 1". In this correspondence, it is shown that the pixel values (R 7-1 , G 7-1 , B 7-1 ) are converted into the colorimetric values (X 7-1 , Y 7-1 , Z 7-1 ). Has been done.

カメラプロファイル8には、位置情報の「印刷領域71b」と、色特性の「特色インキ2」とが関連付けられている。これは、製版画像70の「印刷領域71b」の色特性が「特色インキ2」であることを示している。
さらに、カメラプロファイル8には、色特性が「特色インキ2」である場合の画素値と測色値の対応関係が関連付けられている。当該対応関係では、画素値(R8-1,G8-1,B8-1)が測色値(X8-1,Y8-1,Z8-1)に変換されることが示されている。
The camera profile 8 is associated with a "print area 71b" of position information and a "spot color ink 2" of color characteristics. This indicates that the color characteristic of the "print area 71b" of the plate-making image 70 is "special color ink 2".
Further, the camera profile 8 is associated with the correspondence between the pixel value and the color measurement value when the color characteristic is "spot color ink 2". In this correspondence, it is shown that the pixel values (R 8-1 , G 8-1 , B 8-1 ) are converted into the color measurement values (X 8-1 , Y 8-1 , Z 8-1 ). Has been done.

カメラプロファイル9には、位置情報の「印刷領域71c」と、色特性の「プロセスインキ1」とが関連付けられている。これは、製版画像70の「印刷領域71c」の色特性が「プロセスインキ1」であることを示している。
さらに、カメラプロファイル9には、色特性が「プロセスインキ1」である場合の画素値と測色値の対応関係が関連付けられている。当該対応関係では、画素値(R9-1,G9-1,B9-1)が測色値(X9-1,Y9-1,Z9-1)に変換されることが示されている。
The camera profile 9 is associated with the position information "print area 71c" and the color characteristic "process ink 1". This indicates that the color characteristic of the "printing area 71c" of the plate-making image 70 is "process ink 1".
Further, the camera profile 9 is associated with the correspondence between the pixel value and the color measurement value when the color characteristic is "process ink 1". In this correspondence, it is shown that the pixel values (R 9-1 , G 9-1 , B 9-1 ) are converted into the color measurement values (X 9-1 , Y 9-1 , Z 9-1 ). Has been done.

カメラプロファイル10には、位置情報の「印刷領域71d」と、色特性の「プロセスインキ2」とが関連付けられている。これは、製版画像70の「印刷領域71d」の色特性が「プロセスインキ2」であることを示している。
さらに、カメラプロファイル10には、色特性が「プロセスインキ2」である場合の画素値と測色値の対応関係が関連付けられている。当該対応関係では、画素値(R10-1,G10-1,B10-1)が測色値(X10-1,Y10-1,Z10-1)に変換されることが示されている。
In the camera profile 10, the position information "print area 71d" and the color characteristic "process ink 2" are associated with each other. This indicates that the color characteristic of the "printing area 71d" of the plate-making image 70 is "process ink 2".
Further, the camera profile 10 is associated with the correspondence between the pixel value and the color measurement value when the color characteristic is "process ink 2". In this correspondence, it is shown that the pixel values (R 10-1 , G 10-1 , B 10-1 ) are converted into the color measurement values (X 10-1 , Y 10-1 , Z 10-1 ). Has been done.

カメラプロファイル11には、位置情報の「印刷領域71e」と、色特性の「プロセスインキ3」とが関連付けられている。これは、製版画像70の「印刷領域71e」の色特性が「プロセスインキ3」であることを示している。
さらに、カメラプロファイル11には、色特性が「プロセスインキ3」である場合の画素値と測色値の対応関係が関連付けられている。当該対応関係では、画素値(R11-1,G11-1,B11-1)が測色値(X11-1,Y11-1,Z11-1)に変換されることが示されている。
The camera profile 11 is associated with the position information "print area 71e" and the color characteristic "process ink 3". This indicates that the color characteristic of the "printing area 71e" of the plate-making image 70 is "process ink 3".
Further, the camera profile 11 is associated with the correspondence between the pixel value and the color measurement value when the color characteristic is "process ink 3". In this correspondence, it is shown that the pixel values (R 11-1 , G 11-1 , B 11-1 ) are converted into the colorimetric values (X 11-1 , Y 11-1 , Z 11-1 ). Has been done.

<4-3.撮像画像の変換の流れ>
図11を参照して、第4の実施形態に係る撮像画像の変換の流れについて説明する。図11は、第4の実施形態に係る撮像画像の変換の流れの一例を示すフローチャートである。
<4-3. Flow of conversion of captured image>
With reference to FIG. 11, the flow of conversion of the captured image according to the fourth embodiment will be described. FIG. 11 is a flowchart showing an example of the flow of conversion of the captured image according to the fourth embodiment.

図11に示すように、まず、ユーザは、印刷物51を撮影台50に設置する(S202)。 As shown in FIG. 11, first, the user installs the printed matter 51 on the photographing table 50 (S202).

次いで、画像処理装置20は、撮影台50に設置された印刷物51の撮像画像を取得する(S204)。印刷物51は、例えば、ユーザが撮像装置10を操作することで撮像される。 Next, the image processing device 20 acquires a captured image of the printed matter 51 installed on the photographing table 50 (S204). The printed matter 51 is imaged, for example, by the user operating the image pickup apparatus 10.

次いで、画像処理装置20の特定部2102は、撮像画像60と製版画像70の位置合わせを行う(S206)。特定部2102は、位置合わせの結果に基づき、撮像画像に含まれる印刷物51の印刷領域ごとの色特性を特定する(S208)。 Next, the identification unit 2102 of the image processing apparatus 20 aligns the captured image 60 with the plate-making image 70 (S206). The specifying unit 2102 specifies the color characteristics of the printed matter 51 included in the captured image for each print area based on the alignment result (S208).

次いで、画像処理装置20の取得部2104は、特定した色特性に基づき、記憶部220からプロファイルを取得する(S210)。例えば、色特性が「特色インキ1」である場合、取得部2104は、記憶部220のプロファイルDBからカメラプロファイル7を取得する。 Next, the acquisition unit 2104 of the image processing device 20 acquires a profile from the storage unit 220 based on the specified color characteristics (S210). For example, when the color characteristic is "spot color ink 1", the acquisition unit 2104 acquires the camera profile 7 from the profile DB of the storage unit 220.

次いで、画像処理装置20の割当部2106は、取得したプロファイルを撮像画像に割り当てる(S212)。 Next, the allocation unit 2106 of the image processing apparatus 20 allocates the acquired profile to the captured image (S212).

次いで、画像処理装置20の変換部2108は、割り当てられたプロファイルに基づき、変換処理を行う(S214)。 Next, the conversion unit 2108 of the image processing apparatus 20 performs conversion processing based on the assigned profile (S214).

最後に、表示装置30は、変換部2108の変換処理によって得られた表示画像を表示する(S216)。 Finally, the display device 30 displays the display image obtained by the conversion process of the conversion unit 2108 (S216).

<<5.変形例>>
以上、本発明の第4の実施形態について説明した。続いて、本発明の変形例について説明する。なお、以下に説明する変形例は、本発明の各実施形態で説明した構成に代えて適用されてもよいし、本発明の各実施形態で説明した構成に対して追加的に適用されてもよい。
<< 5. Modification example >>
The fourth embodiment of the present invention has been described above. Subsequently, a modification of the present invention will be described. The modifications described below may be applied in place of the configurations described in each embodiment of the present invention, or may be additionally applied to the configurations described in each embodiment of the present invention. good.

上述の各実施形態では、特定部2102の機能によって、撮像画像に含まれる領域における印刷物51の色特性が特定される例について説明したが、かかる例に限定されない。例えば、印刷物51の色特性は、機械学習に基づき特定されてもよい。機械学習に用いるアルゴリズムの一例として、セマンティックセグメンテーション(Semantic Segmentation)が挙げられる。セマンティックセグメンテーションは、画像内の全画素にラベルやカテゴリを関連付けるディープラーニング(Deep Learning)のアルゴリズムである。当該アルゴリズムを用いることで、例えば、撮像画像に含まれる領域に複数の被写体が存在する場合に、被写体ごとの領域分割と各被写体の素材の特定を同時に行うことが可能となる。また、当該アルゴリズムを用いることで、衣服の素材の撮像画像や、多様な被写体が存在し得る部屋の中の撮像画像であっても、画素値から測色値への変換を精度高く行うことができる。 In each of the above-described embodiments, an example in which the color characteristics of the printed matter 51 in the region included in the captured image are specified by the function of the specific unit 2102 has been described, but the present invention is not limited to such an example. For example, the color characteristics of the printed matter 51 may be specified based on machine learning. An example of an algorithm used for machine learning is Semantic Segmentation. Semantic segmentation is a deep learning algorithm that associates labels and categories with all pixels in an image. By using this algorithm, for example, when a plurality of subjects exist in a region included in a captured image, it is possible to divide the region for each subject and specify the material of each subject at the same time. In addition, by using this algorithm, it is possible to accurately convert pixel values to colorimetric values even for images captured of clothing materials or images captured in a room where various subjects may exist. can.

以上、本発明の変形例について説明した。
以上説明したように、各実施形態に係る画像処理装置20の特定部2102は、印刷物51を撮像する撮像装置10によって撮像された撮像画像に含まれる領域における印刷物51の色特性を特定する。
画像処理装置20の取得部2104は、特定部2102によって特定される色特性に基づき、撮像画像の画素値と、被写体の測色値との対応関係を示すプロファイル(変換情報)を取得する。
画像処理装置20の割当部2106は、取得部2104によって取得されるプロファイルを撮像画像に含まれる領域に割り当てる。
画像処理装置20の変換部2108は、撮像画像に含まれる領域に割り当てられたプロファイルに基づき、撮像画像の画素値を測色値に変換する。
The modification of the present invention has been described above.
As described above, the specifying unit 2102 of the image processing device 20 according to each embodiment specifies the color characteristics of the printed matter 51 in the region included in the captured image captured by the image pickup device 10 that captures the printed matter 51.
The acquisition unit 2104 of the image processing apparatus 20 acquires a profile (conversion information) showing the correspondence between the pixel value of the captured image and the color measurement value of the subject based on the color characteristics specified by the specific unit 2102.
The allocation unit 2106 of the image processing device 20 allocates the profile acquired by the acquisition unit 2104 to the area included in the captured image.
The conversion unit 2108 of the image processing apparatus 20 converts the pixel value of the captured image into the color measurement value based on the profile assigned to the region included in the captured image.

かかる構成により、各実施形態に係る画像処理装置20は、被写体である印刷物51の色特性の範囲を特定(狭く)した上で、撮像画像の画素値を測色値に変換することができる。これにより、本発明における画素値から測色値への変換精度は、撮像画像全体に対して色変換が一律に適用される従来の方法の精度と比較して向上する。 With such a configuration, the image processing apparatus 20 according to each embodiment can convert the pixel value of the captured image into the color measurement value after specifying (narrowing) the range of the color characteristic of the printed matter 51 which is the subject. Thereby, the conversion accuracy from the pixel value to the color measurement value in the present invention is improved as compared with the accuracy of the conventional method in which the color conversion is uniformly applied to the entire captured image.

よって、各実施形態に係る画像処理装置20は、撮像画像から測色値画像へ高精度に変換することができる。 Therefore, the image processing device 20 according to each embodiment can convert the captured image into the colorimetric value image with high accuracy.

以上、本発明の各実施形態について説明した。なお、上述した各実施形態は、単独で本発明の実施形態として実施されてもよいし、組み合わせで本発明の1つの実施形態として実施されてもよい。 The embodiments of the present invention have been described above. In addition, each of the above-described embodiments may be implemented alone as an embodiment of the present invention, or may be implemented as one embodiment of the present invention in combination.

なお、上述した各実施形態における画像処理装置20をコンピュータで実現するようにしてもよい。その場合、この機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することによって実現してもよい。なお、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD-ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含んでもよい。また上記プログラムは、前述した機能の一部を実現するためのものであってもよく、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであってもよく、FPGA(Field Programmable Gate Array)等のプログラマブルロジックデバイスを用いて実現されるものであってもよい。 The image processing device 20 in each of the above-described embodiments may be realized by a computer. In that case, a program for realizing this function may be recorded on a computer-readable recording medium, and the program recorded on the recording medium may be read by a computer system and executed. The term "computer system" as used herein includes hardware such as an OS and peripheral devices. Further, the "computer-readable recording medium" refers to a portable medium such as a flexible disk, a magneto-optical disk, a ROM, or a CD-ROM, and a storage device such as a hard disk built in a computer system. Further, a "computer-readable recording medium" is a communication line for transmitting a program via a network such as the Internet or a communication line such as a telephone line, and dynamically holds the program for a short period of time. It may also include a program that holds a program for a certain period of time, such as a volatile memory inside a computer system that is a server or a client in that case. Further, the above program may be for realizing a part of the above-mentioned functions, and may be further realized for realizing the above-mentioned functions in combination with a program already recorded in the computer system. It may be realized by using a programmable logic device such as FPGA (Field Programmable Gate Array).

以上、図面を参照してこの発明の実施形態について詳しく説明してきたが、具体的な構成は上述のものに限られることはなく、この発明の要旨を逸脱しない範囲内において様々な設計変更等をすることが可能である。 Although the embodiments of the present invention have been described in detail with reference to the drawings, the specific configuration is not limited to the above, and various design changes and the like can be made without departing from the gist of the present invention. It is possible to do.

1 画像処理システム
10 撮像装置
20 画像処理装置
30 表示装置
40 照明
50 撮影台
51 印刷物
53 識別情報
54 見本
56 ラベル
57 ラベル
60 撮像画像
70 製版画像
200 通信部
210 制御部
220 記憶部
2102 特定部
2104 取得部
2106 割当部
2108 変換部
2110 出力処理部
1 Image processing system 10 Image processing device 20 Image processing device 30 Display device 40 Lighting 50 Shooting table 51 Printed matter 53 Identification information 54 Sample 56 Label 57 Label 60 Captured image 70 Plate making image 200 Communication unit 210 Control unit 220 Storage unit 2102 Specific unit 2104 acquisition Part 2106 Allocation part 2108 Conversion part 2110 Output processing part

Claims (11)

被写体を撮像する撮像装置によって撮像された撮像画像に含まれる領域における前記被写体の色特性を特定する特定部と、
前記特定部によって特定される前記色特性に基づき、前記撮像画像の画素値と、前記被写体の測色値との対応関係を示す変換情報を取得する取得部と、
前記取得部によって取得される前記変換情報を前記撮像画像に含まれる領域に割り当てる割当部と、
前記撮像画像に含まれる領域に割り当てられた前記変換情報に基づき、前記撮像画像の前記画素値を前記測色値に変換する変換部と、
を備える、画像処理装置。
A specific unit that specifies the color characteristics of the subject in a region included in the captured image captured by the image pickup device that captures the subject, and a specific unit.
Based on the color characteristics specified by the specific unit, an acquisition unit that acquires conversion information indicating the correspondence between the pixel value of the captured image and the color measurement value of the subject, and the acquisition unit.
An allocation unit that allocates the conversion information acquired by the acquisition unit to a region included in the captured image, and an allocation unit.
A conversion unit that converts the pixel value of the captured image into the color measurement value based on the conversion information assigned to the region included in the captured image.
An image processing device.
前記特定部は、前記被写体の色特性と関連付けられた識別情報に基づき、前記撮像画像に含まれる被写体の色特性を特定する、
請求項1に記載の画像処理装置。
The specific unit identifies the color characteristics of the subject included in the captured image based on the identification information associated with the color characteristics of the subject.
The image processing apparatus according to claim 1.
前記識別情報は、前記被写体に付与された第1の識別情報であり、
前記特定部は、前記撮像画像に含まれる前記第1の識別情報に基づき、前記撮像画像に含まれる被写体の色特性を特定する、
請求項2に記載の画像処理装置。
The identification information is the first identification information given to the subject, and is
The specific unit identifies the color characteristics of the subject included in the captured image based on the first identification information included in the captured image.
The image processing apparatus according to claim 2.
前記識別情報は、前記撮像装置が前記被写体を撮像する撮像環境に付与された第2の識別情報であり、
前記特定部は、前記撮像画像に含まれる前記第2の識別情報に基づき、前記撮像画像に含まれる被写体の色特性を特定する、
請求項2に記載の画像処理装置。
The identification information is the second identification information given to the imaging environment in which the imaging device images the subject.
The specific unit identifies the color characteristics of the subject included in the captured image based on the second identification information included in the captured image.
The image processing apparatus according to claim 2.
前記識別情報は、前記被写体の色特性と、前記撮像画像における前記被写体の位置とさらに関連付けられており、
前記特定部は、前記識別情報に基づき、前記撮像画像に含まれる被写体の色特性と位置を特定する、
請求項2から請求項4のいずれか1項に記載の画像処理装置。
The identification information is further associated with the color characteristics of the subject and the position of the subject in the captured image.
The specific unit identifies the color characteristics and the position of the subject included in the captured image based on the identification information.
The image processing apparatus according to any one of claims 2 to 4.
前記特定部は、前記被写体の素材ごとの色特性を示す設計情報に基づき、前記撮像画像に含まれる被写体の色特性を特定する、
請求項1に記載の画像処理装置。
The specific unit specifies the color characteristics of the subject included in the captured image based on the design information indicating the color characteristics of each material of the subject.
The image processing apparatus according to claim 1.
前記被写体が印刷物である場合、前記設計情報は製版画像であり、
前記特定部は、前記撮像画像と前記製版画像との位置合わせを行うことで、前記撮像画像に含まれる被写体の素材の位置と当該素材の色特性とを特定する、
請求項6に記載の画像処理装置。
When the subject is a printed matter, the design information is a plate-making image.
The specific unit identifies the position of the material of the subject included in the captured image and the color characteristics of the material by aligning the captured image with the plate-making image.
The image processing apparatus according to claim 6.
前記色特性は、前記被写体の素材の分光反射率である、
請求項1から請求項7のいずれか1項に記載の画像処理装置。
The color characteristic is the spectral reflectance of the material of the subject.
The image processing apparatus according to any one of claims 1 to 7.
被写体を撮像する撮像部と、
前記撮像部によって撮像された撮像画像に含まれる領域における前記被写体の色特性を特定する特定部と、
前記特定部によって特定される前記色特性に基づき、前記撮像画像の画素値と、前記被写体の測色値との対応関係を示す変換情報を取得する取得部と、
前記取得部によって取得される前記変換情報を前記撮像画像に含まれる領域に割り当てる割当部と、
前記撮像画像に含まれる領域に割り当てられた前記変換情報に基づき、前記撮像画像の前記画素値を前記測色値に変換する変換部と、
前記測色値に基づく表示画像を表示する表示部と、
を有する、画像処理システム。
An image pickup unit that captures the subject and
A specific unit that specifies the color characteristics of the subject in a region included in the image captured by the image pickup unit, and a specific unit.
Based on the color characteristics specified by the specific unit, an acquisition unit that acquires conversion information indicating the correspondence between the pixel value of the captured image and the color measurement value of the subject, and the acquisition unit.
An allocation unit that allocates the conversion information acquired by the acquisition unit to a region included in the captured image, and an allocation unit.
A conversion unit that converts the pixel value of the captured image into the color measurement value based on the conversion information assigned to the region included in the captured image.
A display unit that displays a display image based on the colorimetric value, and
Has an image processing system.
特定部が、被写体を撮像する撮像装置によって撮像された撮像画像に含まれる領域における前記被写体の色特性を特定することと、
取得部が、前記特定部によって特定される前記色特性に基づき、前記撮像画像の画素値と、前記被写体の測色値との対応関係を示す変換情報を取得することと、
割当部が、前記取得部によって取得される前記変換情報を前記撮像画像に含まれる領域に割り当てることと、
変換部が、前記撮像画像に含まれる領域に割り当てられた前記変換情報に基づき、前記撮像画像の前記画素値を前記測色値に変換することと、
を含む、画像処理方法。
The specific unit identifies the color characteristics of the subject in the region included in the captured image captured by the imaging device that captures the subject.
The acquisition unit acquires conversion information indicating the correspondence between the pixel value of the captured image and the color measurement value of the subject based on the color characteristic specified by the specific unit.
The allocation unit allocates the conversion information acquired by the acquisition unit to the area included in the captured image.
The conversion unit converts the pixel value of the captured image into the color measurement value based on the conversion information assigned to the region included in the captured image.
Image processing methods, including.
コンピュータを、
被写体を撮像する撮像装置によって撮像された撮像画像に含まれる領域における前記被写体の色特性を特定する特定部と、
前記特定部によって特定される前記色特性に基づき、前記撮像画像の画素値と、前記被写体の測色値との対応関係を示す変換情報を取得する取得部と、
前記取得部によって取得される前記変換情報を前記撮像画像に含まれる領域に割り当てる割当部と、
前記撮像画像に含まれる領域に割り当てられた前記変換情報に基づき、前記撮像画像の前記画素値を前記測色値に変換する変換部と、
として機能させる、プログラム。
Computer,
A specific unit that specifies the color characteristics of the subject in a region included in the captured image captured by the image pickup device that captures the subject, and a specific unit.
Based on the color characteristics specified by the specific unit, an acquisition unit that acquires conversion information indicating the correspondence between the pixel value of the captured image and the color measurement value of the subject, and the acquisition unit.
An allocation unit that allocates the conversion information acquired by the acquisition unit to a region included in the captured image, and an allocation unit.
A conversion unit that converts the pixel value of the captured image into the color measurement value based on the conversion information assigned to the region included in the captured image.
A program that functions as.
JP2020109332A 2020-06-25 2020-06-25 Image processing device, image processing system, image processing method, and program Pending JP2022006827A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020109332A JP2022006827A (en) 2020-06-25 2020-06-25 Image processing device, image processing system, image processing method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020109332A JP2022006827A (en) 2020-06-25 2020-06-25 Image processing device, image processing system, image processing method, and program

Publications (1)

Publication Number Publication Date
JP2022006827A true JP2022006827A (en) 2022-01-13

Family

ID=80110928

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020109332A Pending JP2022006827A (en) 2020-06-25 2020-06-25 Image processing device, image processing system, image processing method, and program

Country Status (1)

Country Link
JP (1) JP2022006827A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7131727B1 (en) * 2022-02-14 2022-09-06 凸版印刷株式会社 Image processing server, image processing system, image processing method, and program

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7131727B1 (en) * 2022-02-14 2022-09-06 凸版印刷株式会社 Image processing server, image processing system, image processing method, and program

Similar Documents

Publication Publication Date Title
US6157735A (en) System for distributing controlling color reproduction at multiple sites
US8094918B2 (en) Check and other item design for reflectance values determination prior to item manufacture
CN101494709A (en) Image forming apparatus and blank sheet ejection preventing method
US10554861B2 (en) Method and device for color compensation
JP2005190435A (en) Image processing method, image processing apparatus and image recording apparatus
CN101600038A (en) Image processing equipment and image processing method
US8976428B2 (en) Image information managing method, image information managing apparatus and image information managing system for preparing and measuring an evaluation chart
US6954227B2 (en) Method, apparatus, and recording medium for image correction
JP2022006827A (en) Image processing device, image processing system, image processing method, and program
JP2009010983A (en) Method of associating different image display devices, color error detection method, and color measurement device
JP4967490B2 (en) Profile creation system
JP2002094820A (en) Image-processing device and method therefor
US10747486B2 (en) Web service for printer color matching via profile mapping device-independent color values of reference device to device-specific color values of production device
WO2015072542A1 (en) Color conversion table creation device and method, program, and recording medium
US11818317B2 (en) Printing management
JP2018136654A (en) Image processing apparatus and image processing program
US20040001208A1 (en) Method of reproducing color in recorded material
JP6776139B2 (en) Print color evaluation system and print color evaluation method
US8363267B2 (en) Image forming apparatus and color converting method thereof
CN101655978B (en) Method and device for image analysis
JP7131727B1 (en) Image processing server, image processing system, image processing method, and program
JP3840141B2 (en) Image processing apparatus, information input apparatus, and methods thereof
Park et al. Design and implementation of digital photo kiosk system with auto color-correction module
US7251030B2 (en) Digital workflow independent output matching
JP2012124764A (en) Image processing system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230524

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240326

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240409

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240607

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20240702