JP5578298B1 - Two-dimensional image processing apparatus, two-dimensional color luminance meter, two-dimensional image processing method, and two-dimensional image processing program - Google Patents

Two-dimensional image processing apparatus, two-dimensional color luminance meter, two-dimensional image processing method, and two-dimensional image processing program Download PDF

Info

Publication number
JP5578298B1
JP5578298B1 JP2014509021A JP2014509021A JP5578298B1 JP 5578298 B1 JP5578298 B1 JP 5578298B1 JP 2014509021 A JP2014509021 A JP 2014509021A JP 2014509021 A JP2014509021 A JP 2014509021A JP 5578298 B1 JP5578298 B1 JP 5578298B1
Authority
JP
Japan
Prior art keywords
image
rectangular
dimensional image
cut
dimensional
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014509021A
Other languages
Japanese (ja)
Other versions
JPWO2014069224A1 (en
Inventor
祥之 河野
幹夫 上松
佳也 松井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Inc
Original Assignee
Konica Minolta Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Inc filed Critical Konica Minolta Inc
Priority to JP2014509021A priority Critical patent/JP5578298B1/en
Application granted granted Critical
Publication of JP5578298B1 publication Critical patent/JP5578298B1/en
Publication of JPWO2014069224A1 publication Critical patent/JPWO2014069224A1/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/46—Measurement of colour; Colour measuring devices, e.g. colorimeters
    • G01J3/50—Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors
    • G01J3/51—Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors using colour filters
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/46—Measurement of colour; Colour measuring devices, e.g. colorimeters
    • G01J3/50—Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors
    • G01J3/506—Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors measuring the colour produced by screens, monitors, displays or CRTs
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/006—Electronic inspection or testing of displays and display drivers, e.g. of LED or LCD displays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof

Landscapes

  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Spectrometry And Color Measurement (AREA)
  • Testing Of Optical Devices Or Fibers (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Studio Devices (AREA)

Abstract

撮像機構を被計測物に正対させることを容易にし、計測の精度及び再現性を向上するために、２次元画像処理装置においては、撮像機構が撮像を行い、互いに垂直をなす第１の方向及び第２の方向に拡がる２次元画像を表現する画像データを生成する。２次元画像から第１の長方形画像を切り取る第１の切り取り領域及び２次元画像から第２の長方形画像を切り取る第２の切り取り領域が２次元画像に設定される。第２の切り取り領域は、第１の切り取り領域から第１の方向に離れ、第２の方向について第１の切り取り領域と同じ大きさを有する。第２の長方形画像が第１の長方形画像の第１の方向に隣接する集合画像が表示部に描画される。   In the two-dimensional image processing apparatus, in order to facilitate the imaging mechanism to face the object to be measured and to improve the measurement accuracy and reproducibility, the imaging mechanism performs imaging and a first direction that is perpendicular to each other And image data representing a two-dimensional image extending in the second direction. A first cut area for cutting the first rectangular image from the two-dimensional image and a second cut area for cutting the second rectangular image from the two-dimensional image are set as the two-dimensional image. The second cut-out area is separated from the first cut-out area in the first direction and has the same size as the first cut-out area in the second direction. A collective image in which the second rectangular image is adjacent in the first direction of the first rectangular image is drawn on the display unit.

Description

本発明は、２次元画像処理装置、２次元色彩輝度計、２次元画像処理方法及び２次元画像処理プログラムに関する。   The present invention relates to a two-dimensional image processing apparatus, a two-dimensional color luminance meter, a two-dimensional image processing method, and a two-dimensional image processing program.

フラットパネルディスプレイ（ＦＰＤ）には、液晶ディスプレイ、プラズマディスプレイ、有機エレクトロルミネッセンス（ＥＬ）ディスプレイ等がある。これらのＦＰＤが評価される場合は、表示画面内の輝度むら又は色むらを評価するために、２次元色彩輝度計が使用される。２次元色彩輝度計を使用してＦＰＤが評価される場合は、撮像機構が表示面に正対させられることが望ましい。   Flat panel displays (FPD) include liquid crystal displays, plasma displays, organic electroluminescence (EL) displays, and the like. When these FPDs are evaluated, a two-dimensional color luminance meter is used to evaluate luminance unevenness or color unevenness in the display screen. When FPD is evaluated using a two-dimensional color luminance meter, it is desirable that the imaging mechanism is directly opposed to the display surface.

撮像機構が表示面に正対しない場合は、表示面の一部がフォーカス面から外れアウトフォーカスになる。例えば、表示面の上端及び下端がフォーカス面から外れアウトフォーカスになったり、表示面の左端及び右端がフォーカス面から外れアウトフォーカスになったりする。   When the imaging mechanism does not face the display surface, a part of the display surface is out of the focus surface and is out of focus. For example, the upper and lower ends of the display surface may be out of focus and out of focus, or the left and right ends of the display surface may be out of focus and out of focus.

また、撮像機構が表示面に正対せず表示面が俯瞰撮像、俯仰撮像等される場合は、長方形の表示面が台形に撮像され、表示面内の位置によって撮像解像度が変化する。   In addition, when the imaging mechanism is not directly facing the display surface and the display surface is imaged as a bird's-eye view or ascending, the rectangular display surface is captured in a trapezoidal shape, and the imaging resolution changes depending on the position in the display surface.

特許文献１の撮像装置においては、内蔵された姿勢検出手段により撮像装置の傾きが検出された場合に、所定間隔で画面を水平及び垂直に分割するグリッド表示線がスルー画像に重ねて描画され、グリッド表示線を基準にして姿勢を水平に調整できる。   In the imaging apparatus of Patent Document 1, when the tilt of the imaging apparatus is detected by the built-in posture detection unit, grid display lines that divide the screen horizontally and vertically at a predetermined interval are drawn over the through image, The posture can be adjusted horizontally based on the grid display line.

特開２００６−１６５９４１号公報JP 2006-165941 A

撮像機構が表示面に正対しない場合は、表示面の一部がフォーカス面から外れアウトフォーカスになり、表示面の内部の位置によって撮像解像度が変化する。このため、計測の精度及び再現性が低下する。この問題は、被計測物がＦＰＤの表示面以外である場合にも生じる。   When the imaging mechanism does not face the display surface, a part of the display surface is out of the focus surface and becomes out-of-focus, and the imaging resolution changes depending on the position inside the display surface. For this reason, the accuracy and reproducibility of measurement are reduced. This problem also occurs when the object to be measured is other than the display surface of the FPD.

特許文献１に開示された撮像装置においては、姿勢検出手段が必要になり機構が複雑になる。また、鉛直方向を基準としてグリッド表示線が検出されるので、撮像装置を水平状態に調整できるが、撮像面が被写体に正対するように姿勢を調整することは目的とされていない。   In the imaging apparatus disclosed in Patent Document 1, posture detection means is required, and the mechanism is complicated. Further, since the grid display line is detected with reference to the vertical direction, the imaging apparatus can be adjusted to a horizontal state, but it is not intended to adjust the posture so that the imaging surface faces the subject.

本発明の目的は、２次元色彩輝度計等の計測機器において、撮像機構を被計測物に正対させることを容易にし、計測の精度及び再現性を向上することである。   An object of the present invention is to make it easy to make an imaging mechanism directly face an object to be measured in a measuring device such as a two-dimensional color luminance meter, and to improve measurement accuracy and reproducibility.

本発明は、２次元画像処理装置に向けられる。上述の目的を実現するために、本発明の一態様に係る２次元画像処理装置においては、撮像機構が、撮像を行い、互いに垂直をなす第１の方向及び第２の方向に広がる２次元画像を表現する画像データを生成する。   The present invention is directed to a two-dimensional image processing apparatus. In order to achieve the above object, in the two-dimensional image processing apparatus according to one aspect of the present invention, the imaging mechanism performs imaging, and the two-dimensional image spreads in the first direction and the second direction perpendicular to each other. The image data expressing

２次元画像から第１の長方形画像を切り取る第１の切り取り領域及び２次元画像から第２の長方形画像を切り取る第２の切り取り領域が２次元画像に設定される。第２の切り取り領域が第１の切り取り領域から第１の方向に離れる。第２の切り取り領域が第２の方向について第１の切り取り領域と同じ大きさを有する。   A first cut area for cutting the first rectangular image from the two-dimensional image and a second cut area for cutting the second rectangular image from the two-dimensional image are set as the two-dimensional image. The second cut area is separated from the first cut area in the first direction. The second cutout area has the same size as the first cutout area in the second direction.

第２の長方形画像が第１の長方形画像の第１の方向に隣接する集合画像を表現する集合画像データが画像データから生成される。   Collective image data representing a collective image in which the second rectangular image is adjacent in the first direction of the first rectangular image is generated from the image data.

集合画像データに基づいて集合画像が表示部に描画される。   A collective image is drawn on the display unit based on the collective image data.

本発明は、２次元画像処理装置を備える２次元色彩輝度計にも向けられる。また、本発明は、２次元画像処理方法及び２次元画像処理プログラムにも向けられる。   The present invention is also directed to a two-dimensional color luminance meter provided with a two-dimensional image processing apparatus. The present invention is also directed to a two-dimensional image processing method and a two-dimensional image processing program.

本発明の態様に係る２次元画像処理装置、２次元色彩輝度計、２次元画像処理方法及び２次元画像処理プログラムのいずれによっても、撮像機構が被計測物に正対しているか否かを集合画像から容易に認識できる。したがって、撮像機構を被計測物に正対させることが容易になる。撮像機構が被計測物に正対するように撮像機構又は被計測物を修正することが容易になり、計測の精度及び再現性が向上する。   Whether or not the imaging mechanism is directly facing the object to be measured by any of the two-dimensional image processing apparatus, the two-dimensional color luminance meter, the two-dimensional image processing method, and the two-dimensional image processing program according to the aspect of the present invention Can be easily recognized. Therefore, it becomes easy to make the imaging mechanism face the object to be measured. It becomes easy to correct the imaging mechanism or the object to be measured so that the imaging mechanism faces the object to be measured, and the accuracy and reproducibility of measurement are improved.

これらの及びこれら以外の本発明の目的、特徴、局面及び利点は、添付図面とともに考慮されたときに下記の本発明の詳細な説明によってより明白となる。   These and other objects, features, aspects and advantages of the invention will become more apparent from the following detailed description of the invention when considered in conjunction with the accompanying drawings.

２次元色彩輝度計の模式図である。It is a schematic diagram of a two-dimensional color luminance meter. 撮像機構のブロック図である。It is a block diagram of an imaging mechanism. ＰＣのブロック図である。It is a block diagram of PC. ＰＣにおける処理を示すブロック図である。It is a block diagram which shows the process in PC. ２次元画像を示す模式図である。It is a schematic diagram which shows a two-dimensional image. 集合画像を示す模式図である。It is a schematic diagram which shows a group image. 長方形枠及び第１から第４までの切り取り領域を示す模式図である。It is a schematic diagram which shows a rectangular frame and the 1st to 4th cutting area. 長方形枠及び第１から第４までの切り取り領域を示す模式図である。It is a schematic diagram which shows a rectangular frame and the 1st to 4th cutting area. 描画の内容を示す模式図である。It is a schematic diagram which shows the content of drawing. ２次元色彩輝度計における処理を示すブロック図である。It is a block diagram which shows the process in a two-dimensional color luminance meter. ２次元画像データの処理の流れを示すフローチャートである。It is a flowchart which shows the flow of a process of two-dimensional image data. 表示面及び撮像機構の位置及び姿勢を示す模式図である。It is a schematic diagram which shows the position and attitude | position of a display surface and an imaging mechanism. 集合画像を示す模式図である。It is a schematic diagram which shows a group image. 表示面及び撮像機構の位置及び姿勢を示す模式図である。It is a schematic diagram which shows the position and attitude | position of a display surface and an imaging mechanism. 表示面及び撮像機構の位置及び姿勢を示す模式図である。It is a schematic diagram which shows the position and attitude | position of a display surface and an imaging mechanism. ２次元画像を示す模式図である。It is a schematic diagram which shows a two-dimensional image. 集合画像を示す模式図である。It is a schematic diagram which shows a group image. 表示面及び撮像機構の位置及び姿勢を示す模式図である。It is a schematic diagram which shows the position and attitude | position of a display surface and an imaging mechanism. ２次元画像を示す模式図である。It is a schematic diagram which shows a two-dimensional image. 集合画像を示す模式図である。It is a schematic diagram which shows a group image. ボトルを示す模式図である。It is a schematic diagram which shows a bottle. ２次元画像を示す模式図である。It is a schematic diagram which shows a two-dimensional image. 集合画像を示す模式図である。It is a schematic diagram which shows a group image. ２次元画像を示す模式図である。It is a schematic diagram which shows a two-dimensional image. 集合画像を示す模式図である。It is a schematic diagram which shows a group image. ボトルを示す模式図である。It is a schematic diagram which shows a bottle. ２次元画像を示す模式図である。It is a schematic diagram which shows a two-dimensional image. 集合画像を示す模式図である。It is a schematic diagram which shows a group image.

（２次元色彩輝度計）
図１の模式図は、２次元色彩輝度計１０００の望ましい実施の形態を示す。(2D color luminance meter)
The schematic diagram of FIG. 1 shows a preferred embodiment of a two-dimensional color luminance meter 1000.

図１に示される２次元色彩輝度計１０００は、液晶ディスプレイ９０００の表示面９０２０の色度及び輝度の両方又は片方を計測する。２次元色彩輝度計１０００が表示面９０２０以外の被計測物の色度及び輝度の両方又は片方を計測してもよい。２次元色彩輝度計１０００が色度以外の色彩の指標値を計測してもよい。例えば、２次元色彩輝度計１０００が色相及び彩度を計測してもよい。２次元色彩輝度計１０００は、撮像機構１０２０を表示面９０２０に正対させる作業を補助する２次元画像処理装置としての機能を有する。   A two-dimensional color luminance meter 1000 shown in FIG. 1 measures both or one of the chromaticity and luminance of the display surface 9020 of the liquid crystal display 9000. The two-dimensional color luminance meter 1000 may measure both or one of the chromaticity and luminance of the measurement object other than the display surface 9020. The two-dimensional color luminance meter 1000 may measure index values for colors other than chromaticity. For example, the two-dimensional color luminance meter 1000 may measure hue and saturation. The two-dimensional color luminance meter 1000 has a function as a two-dimensional image processing device that assists the work of causing the imaging mechanism 1020 to face the display surface 9020.

２次元色彩輝度計１０００は、撮像機構１０２０、パーソナルコンピューター（ＰＣ）１０２１及びユニバーサルシリアルバス（ＵＳＢ）ケーブル１０２２を備える。これらの構成物以外の構成物が２次元色彩輝度計１０００に付加されてもよい。撮像機構１０２０がＰＣ１０２１と無線通信する場合は、ＵＳＢケーブル１０２２が省略されてもよい。   The two-dimensional color luminance meter 1000 includes an imaging mechanism 1020, a personal computer (PC) 1021, and a universal serial bus (USB) cable 1022. Components other than these components may be added to the two-dimensional color luminance meter 1000. When the imaging mechanism 1020 performs wireless communication with the PC 1021, the USB cable 1022 may be omitted.

計測が行われる場合は、ＰＣ１０２１がＵＳＢケーブル１０２２を経由して撮像機構１０２０へ制御データを送信し撮像機構１０２０を制御する。撮像機構１０２０は、ＰＣ１０２１による制御に従って、撮像を行い、２次元画像データを生成する。２次元画像データは、撮像された２次元画像を表現する。撮像機構１０２０は、ＵＳＢケーブル１０２２を経由してＰＣ１０２１へ２次元画像データを送信する。ＰＣ１０２１は、２次元画像データを処理する。   When measurement is performed, the PC 1021 transmits control data to the imaging mechanism 1020 via the USB cable 1022 to control the imaging mechanism 1020. The imaging mechanism 1020 performs imaging according to control by the PC 1021, and generates two-dimensional image data. Two-dimensional image data represents a captured two-dimensional image. The imaging mechanism 1020 transmits 2D image data to the PC 1021 via the USB cable 1022. The PC 1021 processes 2D image data.

（撮像機構）
図２のブロック図は、撮像機構１０２０を示す。(Imaging mechanism)
The block diagram of FIG. 2 shows the imaging mechanism 1020.

図２に示されるように、撮像機構１０２０は、撮像レンズ１０４０、色フィルター１０４１、撮像センサー１０４２、アナログ／デジタル（Ａ／Ｄ）コンバーター１０４３、タイミングジェネレーター１０４４、フィルター駆動部１０４５、メモリー１０４６、コントローラー１０４７、インターフェース１０４８及び筐体１０４９を備える。これらの構成物以外の構成物が撮像機構１０２０に付加されてもよい。撮像機構１０２０は、表示部及び操作部を備えず、ＰＣ１０２１により制御される。   As shown in FIG. 2, the imaging mechanism 1020 includes an imaging lens 1040, a color filter 1041, an imaging sensor 1042, an analog / digital (A / D) converter 1043, a timing generator 1044, a filter driving unit 1045, a memory 1046, and a controller 1047. , An interface 1048 and a housing 1049. Components other than these components may be added to the imaging mechanism 1020. The imaging mechanism 1020 does not include a display unit and an operation unit, and is controlled by the PC 1021.

撮像が行われる場合は、撮像レンズ１０４０が色フィルター１０４１を経由して撮像センサー１０４２へ光を導き撮像センサー１０４２のセンサー面に像を結像させる。色フィルター１０４１は、第１の色、第２の色及び第３の色のいずれかの色の光を透過させる。望ましくは、色フィルター１０４１はＸＹＺフィルターである。   When imaging is performed, the imaging lens 1040 guides light to the imaging sensor 1042 via the color filter 1041 and forms an image on the sensor surface of the imaging sensor 1042. The color filter 1041 transmits light of any one of the first color, the second color, and the third color. Desirably, the color filter 1041 is an XYZ filter.

コントローラー１０４７は、タイミングジェネレーター１０４４を制御する。タイミングジェネレーター１０４４は、駆動パルスを撮像センサー１０４２へ出力する。撮像センサー１０４２は、センサー面に結像させられた像を表現する画像信号を駆動パルスに従って生成しＡ／Ｄコンバーター１０４３へ出力する。Ａ／Ｄコンバーター１０４３は、アナログの画像信号をデジタルの画像データへ変換し、コントローラー１０４７へ出力する。コントローラー１０４７は、画像データをメモリー１０４６に書き込む。   The controller 1047 controls the timing generator 1044. The timing generator 1044 outputs a driving pulse to the image sensor 1042. The imaging sensor 1042 generates an image signal representing an image formed on the sensor surface according to the drive pulse, and outputs the image signal to the A / D converter 1043. The A / D converter 1043 converts an analog image signal into digital image data and outputs the digital image data to the controller 1047. The controller 1047 writes the image data in the memory 1046.

コントローラー１０４７は、フィルター駆動部１０４５を制御する。フィルター駆動部１０４５は、色フィルター１０４１が透過させる光の色を切り替える。   The controller 1047 controls the filter driving unit 1045. The filter driving unit 1045 switches the color of light transmitted by the color filter 1041.

色フィルター１０４１が第１の色、第２の色及び第３の色の光を透過させる場合に、それぞれ、第１の色成分、第２の色成分及び第３の色成分の画像データが生成される。コントローラー１０４７は、第１の色成分、第２の色成分及び第３の色成分の画像データをメモリー１０４６から読み出し、３刺激値の２次元画像データを生成しインターフェース１０４８へ出力する。インターフェース１０４８は、２次元画像データをＰＣ１０２１へ送信する。   When the color filter 1041 transmits light of the first color, the second color, and the third color, image data of the first color component, the second color component, and the third color component is generated, respectively. Is done. The controller 1047 reads the image data of the first color component, the second color component, and the third color component from the memory 1046, generates tristimulus value two-dimensional image data, and outputs the data to the interface 1048. The interface 1048 transmits the two-dimensional image data to the PC 1021.

望ましくは、標準、広角及び望遠の撮像レンズ１０４０が準備され、表示面９０２０の全体が収まる画角を有する撮像レンズ１０４０が選択され、選択された撮像レンズ１０４０が筐体１０４９に取り付けられる。   Desirably, standard, wide-angle, and telephoto imaging lenses 1040 are prepared, an imaging lens 1040 having an angle of view that fits the entire display surface 9020 is selected, and the selected imaging lens 1040 is attached to the housing 1049.

撮像センサー１０４２は、エリアセンサー（２次元センサー）である。撮像センサー１０４２は、電荷結合素子（ＣＣＤ）センサーである。撮像センサー１０４２がＣＣＤセンサー以外であってもよい。例えば、撮像センサー１０４２が相補型金属酸化物半導体（ＣＭＯＳ）センサーであってもよい。   The imaging sensor 1042 is an area sensor (two-dimensional sensor). The imaging sensor 1042 is a charge coupled device (CCD) sensor. The image sensor 1042 may be other than a CCD sensor. For example, the imaging sensor 1042 may be a complementary metal oxide semiconductor (CMOS) sensor.

コントローラー１０４７は、中央処理装置（ＣＰＵ）である。コントローラー１０４７は、現場プログラム可能ゲートアレイ（ＦＰＧＡ）である。コントローラー１０４７が特定用途集積回路（ＡＳＩＣ）であってもよい。   The controller 1047 is a central processing unit (CPU). The controller 1047 is a field programmable gate array (FPGA). The controller 1047 may be an application specific integrated circuit (ASIC).

（ＰＣ）
図３のブロック図は、ＰＣ１０２１を示す。(PC)
The block diagram in FIG. 3 shows the PC 1021.

図３に示されるように、ＰＣ１０２１は、ＣＰＵ１０６０、メモリー１０６１、ハードディスクドライブ１０６２、操作部１０６３及び表示部１０６４を備える。これらの構成物以外の構成物がＰＣ１０２１に付加されてもよい。   As illustrated in FIG. 3, the PC 1021 includes a CPU 1060, a memory 1061, a hard disk drive 1062, an operation unit 1063, and a display unit 1064. Components other than these components may be added to the PC 1021.

ハードディスクドライブ１０６２には、プログラム１０８０がインストールされる。プログラム１０８０は、記録媒体１１００により提供されてもよいし、ネットワーク１１２０を経由して提供されてもよい。ＰＣ１０２１が撮像機構１０２０を制御する場合は、プログラム１０８０がメモリー１０６１にロードされ、ＣＰＵ１０６０がプログラム１０８０を実行する。   A program 1080 is installed in the hard disk drive 1062. The program 1080 may be provided by the recording medium 1100 or may be provided via the network 1120. When the PC 1021 controls the imaging mechanism 1020, the program 1080 is loaded into the memory 1061, and the CPU 1060 executes the program 1080.

ハードディスクドライブ１０６２が他の種類の記憶装置に置き換えられてもよい。例えば、ハードディスクドライブ１０６２がソリッドステートドライブに置き換えられてもよい。   The hard disk drive 1062 may be replaced with another type of storage device. For example, the hard disk drive 1062 may be replaced with a solid state drive.

操作部１０６３は、キーボード、ポインティングデバイス、スイッチ、ロータリーエンコーダー等である。ポインティングデバイスは、マウス、トラックパッド、タッチパネル、タブレット等である。   The operation unit 1063 is a keyboard, a pointing device, a switch, a rotary encoder, or the like. The pointing device is a mouse, a track pad, a touch panel, a tablet, or the like.

表示部１０６４は、ディスプレイ、ランプ等である。ディスプレイは、液晶ディスプレイ、有機エレクトロルミネッセンス（ＥＬ）ディスプレイ等である。   The display unit 1064 is a display, a lamp, or the like. The display is a liquid crystal display, an organic electroluminescence (EL) display, or the like.

（ＰＣにおける処理の内容）
図４のブロック図は、ＰＣ１０２１における処理の内容を示す。図５の模式図は、２次元画像１１６０を示す。図６の模式図は、集合画像１２４０を示す。(Contents of processing on PC)
The block diagram of FIG. 4 shows the contents of processing in the PC 1021. The schematic diagram of FIG. 5 shows a two-dimensional image 1160. The schematic diagram of FIG. 6 shows a collective image 1240.

ＰＣ１０２１は、撮像機構１０２０が生成した２次元画像データに基づいて２次元画像１１６０を表示部１０６４に描画するファインダー機能を有する。２次元画像１１６０は、静止画であってもよいし、動画であってもよい。２次元画像１１６０は、スルー画像、ライブビュー画像等とも呼ばれる。   The PC 1021 has a finder function for drawing a two-dimensional image 1160 on the display unit 1064 based on the two-dimensional image data generated by the imaging mechanism 1020. The two-dimensional image 1160 may be a still image or a moving image. The two-dimensional image 1160 is also called a through image, a live view image, or the like.

図４に示されるように、ＰＣ１０２１における処理は、枠設定部１１４０、領域設定部１１４１、生成部１１４２、表示制御部１１４３、処理部１１４４、ハードディスクドライブ１０６２、操作部１０６３及び表示部１０６４により行われる。枠設定部１１４０、領域設定部１１４１、生成部１１４２、表示制御部１１４３及び処理部１１４４は、ＣＰＵ１０６０がプログラム１０８０を実行することにより実現される。枠設定部１１４０、領域設定部１１４１、生成部１１４２、表示制御部１１４３及び処理部１１４４の全部又は一部が専用のハードウエアにより実現されてもよい。   As shown in FIG. 4, processing in the PC 1021 is performed by a frame setting unit 1140, an area setting unit 1141, a generation unit 1142, a display control unit 1143, a processing unit 1144, a hard disk drive 1062, an operation unit 1063, and a display unit 1064. . The frame setting unit 1140, the region setting unit 1141, the generation unit 1142, the display control unit 1143, and the processing unit 1144 are realized by the CPU 1060 executing the program 1080. All or part of the frame setting unit 1140, the region setting unit 1141, the generation unit 1142, the display control unit 1143, and the processing unit 1144 may be realized by dedicated hardware.

図５に示されるように、２次元画像１１６０は、第１の方向Ｄ１及び第２の方向Ｄ２に広がる。第１の方向Ｄ１及び第２の方向Ｄ２は、垂直をなす。図５においては第１の方向Ｄ１が右方向であり第２の方向Ｄ２が下方向であるが、第１の方向Ｄ１及び第２の方向Ｄ２は任意に定義される。   As shown in FIG. 5, the two-dimensional image 1160 extends in the first direction D1 and the second direction D2. The first direction D1 and the second direction D2 are vertical. In FIG. 5, the first direction D1 is the right direction and the second direction D2 is the downward direction, but the first direction D1 and the second direction D2 are arbitrarily defined.

２次元画像１１６０には、長方形枠１１８０、第１の切り取り領域１２００、第２の切り取り領域１２０１、第３の切り取り領域１２０２及び第４の切り取り領域１２０３が設定される。長方形は、正方形を含む。第１の切り取り領域１２００、第２の切り取り領域１２０１、第３の切り取り領域１２０２及び第４の切り取り領域１２０３により、それぞれ、第１の長方形画像１２２０、第２の長方形画像１２２１、第３の長方形画像１２２２及び第４の長方形画像１２２３が２次元画像１１６０から切り取られる。   In the two-dimensional image 1160, a rectangular frame 1180, a first cut area 1200, a second cut area 1201, a third cut area 1202, and a fourth cut area 1203 are set. The rectangle includes a square. The first cutout area 1200, the second cutout area 1201, the third cutout area 1202, and the fourth cutout area 1203 respectively have a first rectangular image 1220, a second rectangular image 1221, and a third rectangular image. 1222 and the fourth rectangular image 1223 are cut from the two-dimensional image 1160.

図６に示されるように、第１の長方形画像１２２０、第２の長方形画像１２２１、第３の長方形画像１２２２及び第４の長方形画像１２２３は、集合画像１２４０を構成する。集合画像１２４０は、撮像機構１０２０が表示面９０２０に正対しているか否かを認識することを容易にする。   As shown in FIG. 6, the first rectangular image 1220, the second rectangular image 1221, the third rectangular image 1222, and the fourth rectangular image 1223 constitute a collective image 1240. The collective image 1240 makes it easy to recognize whether the imaging mechanism 1020 is directly facing the display surface 9020.

枠設定部１１４０は、長方形枠１１８０を２次元画像１１６０に設定する。長方形枠１１８０は、第１の辺１２６０、第２の辺１２６１、第３の辺１２６２及び第４の辺１２６３を有する。第１の辺１２６０及び第２の辺１２６１は、第１の方向Ｄ１に伸びる。第３の辺１２６２及び第４の辺１２６３は、第２の方向Ｄ２に伸びる。長方形枠１１８０は、第１の隅１２８０、第２の隅１２８１、第３の隅１２８２及び第４の隅１２８３を有する。長方形枠１１８０は、第１の頂点１３００、第２の頂点１３０１、第３の頂点１３０２及び第４の頂点１３０３を有する。   The frame setting unit 1140 sets the rectangular frame 1180 to the two-dimensional image 1160. The rectangular frame 1180 has a first side 1260, a second side 1261, a third side 1262, and a fourth side 1263. The first side 1260 and the second side 1261 extend in the first direction D1. The third side 1262 and the fourth side 1263 extend in the second direction D2. The rectangular frame 1180 has a first corner 1280, a second corner 1281, a third corner 1282, and a fourth corner 1283. The rectangular frame 1180 has a first vertex 1300, a second vertex 1301, a third vertex 1302, and a fourth vertex 1303.

望ましくは、枠設定部１１４０は、長方形枠１１８０の位置及び大きさを示す情報を２次元画像１１６０に重ねて表示部１０６４に描画する。長方形枠１１８０は、表示面９０２０の像１３１０を２次元画像１１６０の内部に適切に配置するための案内枠となる。操作者は、表示面９０２０の像が長方形枠１１８０にちょうど収まるように表示面９０２０又は撮像機構１０２０の位置又は姿勢を調整する。   Desirably, the frame setting unit 1140 superimposes information indicating the position and size of the rectangular frame 1180 on the two-dimensional image 1160 and draws it on the display unit 1064. The rectangular frame 1180 serves as a guide frame for appropriately arranging the image 1310 of the display surface 9020 inside the two-dimensional image 1160. The operator adjusts the position or orientation of the display surface 9020 or the imaging mechanism 1020 so that the image of the display surface 9020 is exactly within the rectangular frame 1180.

望ましくは、枠設定部１１４０は、長方形枠１１８０の形状を変更することを指示する操作が操作部１０６３を用いて行われたことを検出し、当該操作に従って長方形枠１１８０の形状を変更する。例えば、枠設定部１１４０は、第１の辺１２６０、第２の辺１２６１、第３の辺１２６２、第４の辺１２６３、第１の頂点１３００、第２の頂点１３０１、第３の頂点１３０２又は第４の頂点１３０３を移動することを指示する操作がポインティングデバイスを用いて行われたことを検出し、当該操作に従って第１の辺１２６０、第２の辺１２６１、第３の辺１２６２、第４の辺１２６３、第１の頂点１３００、第２の頂点１３０１、第３の頂点１３０２又は第４の頂点１３０３を移動する。これにより、第１の切り取り領域１２００、第２の切り取り領域１２０１、第３の切り取り領域１２０２及び第４の切り取り領域１２０３に表示面９０２０の像１３１０の適所を配置することが容易になる。適所は、撮像機構１０２０が表示面９０２０に正対しているか否かを判定するのに適した箇所であり、典型的には水平線及び垂直線である。   Desirably, the frame setting unit 1140 detects that an operation for instructing to change the shape of the rectangular frame 1180 is performed using the operation unit 1063, and changes the shape of the rectangular frame 1180 according to the operation. For example, the frame setting unit 1140 includes a first side 1260, a second side 1261, a third side 1262, a fourth side 1263, a first vertex 1300, a second vertex 1301, a third vertex 1302, or It is detected that an operation for instructing to move the fourth vertex 1303 is performed using the pointing device, and the first side 1260, the second side 1261, the third side 1262, the fourth are detected according to the operation. Side 1263, first vertex 1300, second vertex 1301, third vertex 1302, or fourth vertex 1303. Accordingly, it is easy to place an appropriate position of the image 1310 on the display surface 9020 in the first cut area 1200, the second cut area 1201, the third cut area 1202, and the fourth cut area 1203. The appropriate place is a place suitable for determining whether or not the imaging mechanism 1020 is directly facing the display surface 9020, and is typically a horizontal line and a vertical line.

図１に示されるように撮像機構１０２０が表示面９０２０に正対する場合は、図５に示されるように長方形の表示面９０２０がそのまま長方形に撮像され、図６に示されるように集合画像１２４０を形成する第１の長方形画像１２２０、第２の長方形画像１２２１、第３の長方形画像１２２２及び第４の長方形画像１２２３の間で表示面９０２０の像１３１０の位置がずれない。第１の長方形画像１２２０及び第２の長方形画像１２２１の間で水平線１３３０の第２の方向Ｄ２の位置がずれず、第３の長方形画像１２２２及び第４の長方形画像１２２３の間で水平線１３３１の第２の方向Ｄ２の位置がずれず、第１の長方形画像１２２０及び第３の長方形画像１２２２の間で垂直線１３３２の第１の方向Ｄ１の位置がずれず、第２の長方形画像１２２１及び第４の長方形画像１２２３の間で垂直線１３３３の第１の方向Ｄ１の位置がずれない。   When the imaging mechanism 1020 faces the display surface 9020 as shown in FIG. 1, the rectangular display surface 9020 is directly captured in a rectangular shape as shown in FIG. 5, and the collective image 1240 is displayed as shown in FIG. 6. The position of the image 1310 on the display surface 9020 is not shifted between the first rectangular image 1220, the second rectangular image 1221, the third rectangular image 1222, and the fourth rectangular image 1223 to be formed. The position of the horizontal line 1330 in the second direction D2 is not shifted between the first rectangular image 1220 and the second rectangular image 1221, and the horizontal line 1331 of the horizontal line 1331 is between the third rectangular image 1222 and the fourth rectangular image 1223. The position of the second direction D2 does not shift, the position of the vertical line 1332 in the first direction D1 does not shift between the first rectangular image 1220 and the third rectangular image 1222, and the second rectangular image 1221 and the fourth rectangular image 1221 The positions of the vertical lines 1333 in the first direction D <b> 1 are not shifted between the rectangular images 1223.

望ましくは、枠設定部１１４０は、長方形枠１１８０の形状をハードディスクドライブ１０６２に書き込み、長方形枠１１８０の形状をハードディスクドライブ１０６２から読み出して２次元画像１１６０において再現して設定する。これにより、長方形枠１１８０の形状を再利用できる。   Desirably, the frame setting unit 1140 writes the shape of the rectangular frame 1180 to the hard disk drive 1062, reads the shape of the rectangular frame 1180 from the hard disk drive 1062, and reproduces and sets it in the two-dimensional image 1160. Thereby, the shape of the rectangular frame 1180 can be reused.

領域設定部１１４１は、第１の切り取り領域１２００、第２の切り取り領域１２０１、第３の切り取り領域１２０２及び第４の切り取り領域１２０３を２次元画像１１６０に設定する。   The area setting unit 1141 sets the first cut area 1200, the second cut area 1201, the third cut area 1202, and the fourth cut area 1203 in the two-dimensional image 1160.

望ましくは、領域設定部１１４１は、第１の切り取り領域１２００、第２の切り取り領域１２０１、第３の切り取り領域１２０２及び第４の切り取り領域１２０３の位置及び大きさを示す情報を２次元画像１１６０に重ねて表示部１０６４に描画する。   Desirably, the area setting unit 1141 stores information indicating the positions and sizes of the first cut area 1200, the second cut area 1201, the third cut area 1202, and the fourth cut area 1203 in the two-dimensional image 1160. Overlapping and drawing on the display unit 1064.

第２の切り取り領域１２０１は、第１の切り取り領域１２００から第１の方向Ｄ１に離れる。第４の切り取り領域１２０３は、第３の切り取り領域１２０２から第１の方向Ｄ１に離れる。第３の切り取り領域１２０２は、第１の切り取り領域１２００から第２の方向Ｄ２に離れる。第４の切り取り領域１２０３は、第２の切り取り領域１２０１から第２の方向Ｄ２に離れる。   The second cut area 1201 is separated from the first cut area 1200 in the first direction D1. The fourth cut area 1203 is separated from the third cut area 1202 in the first direction D1. The third cutout area 1202 is separated from the first cutout area 1200 in the second direction D2. The fourth cut area 1203 is separated from the second cut area 1201 in the second direction D2.

第１の切り取り領域１２００、第２の切り取り領域１２０１、第３の切り取り領域１２０２及び第４の切り取り領域１２０３は、同じ形状を有する。ただし、第１の長方形画像１２２０、第２の長方形画像１２２１、第３の長方形画像１２２２及び第４の長方形画像１２２３を集合画像１２４０において規則正しくマトリクス状に配置できる場合は、第１の切り取り領域１２００、第２の切り取り領域１２０１、第３の切り取り領域１２０２及び第４の切り取り領域１２０３の形状が異なってもよい。一般的に言って、第２の切り取り領域１２０１は、第２の方向Ｄ２について第１の切り取り領域１２００と同じ大きさを有する。第４の切り取り領域１２０３は、第２の方向Ｄ２について第３の切り取り領域１２０２と同じ大きさを有する。第３の切り取り領域１２０２は、第１の方向Ｄ１について第１の切り取り領域１２００と同じ大きさを有する。第４の切り取り領域１２０３は、第１の方向Ｄ１について第２の切り取り領域１２０１と同じ大きさを有する。   The first cut area 1200, the second cut area 1201, the third cut area 1202, and the fourth cut area 1203 have the same shape. However, if the first rectangular image 1220, the second rectangular image 1221, the third rectangular image 1222, and the fourth rectangular image 1223 can be regularly arranged in a matrix form in the collective image 1240, the first cropping area 1200, The shapes of the second cut region 1201, the third cut region 1202, and the fourth cut region 1203 may be different. Generally speaking, the second cutout area 1201 has the same size as the first cutout area 1200 in the second direction D2. The fourth cutout area 1203 has the same size as the third cutout area 1202 in the second direction D2. The third cutout area 1202 has the same size as the first cutout area 1200 in the first direction D1. The fourth cutout area 1203 has the same size as the second cutout area 1201 in the first direction D1.

第１の切り取り領域１２００の辺１３２０及び第２の切り取り領域１２０１の辺１３２１は、第２の方向Ｄ２に伸び、対向する。第３の切り取り領域１２０２の辺１３２２及び第４の切り取り領域１２０３の辺１３２３は、第２の方向Ｄ２に伸び、対向する。第１の切り取り領域１２００の辺１３２４及び第３の切り取り領域１２０２の辺１３２５は、第１の方向Ｄ１に伸び、対向する。第２の切り取り領域１２０１の辺１３２６及び第４の切り取り領域１２０３の辺１３２７は、第１の方向Ｄ１に伸び、対向する。   The side 1320 of the first cutout area 1200 and the side 1321 of the second cutout area 1201 extend in the second direction D2 and face each other. The side 1322 of the third cutout region 1202 and the side 1323 of the fourth cutout region 1203 extend in the second direction D2 and face each other. The side 1324 of the first cutout area 1200 and the side 1325 of the third cutout area 1202 extend in the first direction D1 and face each other. The side 1326 of the second cutout region 1201 and the side 1327 of the fourth cutout region 1203 extend in the first direction D1 and face each other.

望ましくは、図５に示されるように、第１の切り取り領域１２００、第２の切り取り領域１２０１、第３の切り取り領域１２０２及び第４の切り取り領域１２０３は、それぞれ、第１の隅１２８０、第２の隅１２８１、第３の隅１２８２及び第４の隅１２８３に配置される。又は、図７に示されるように、第１の切り取り領域１２００の代表点１３４０、第２の切り取り領域１２０１の代表点１３４１、第３の切り取り領域１２０２の代表点１３４２及び第４の切り取り領域１２０３の代表点１３４３は、それぞれ、第１の頂点１３００、第２の頂点１３０１、第３の頂点１３０２及び第４の頂点１３０３に配置される。代表点１３４０、１３４１、１３４２及び１３４３は、それぞれ、第１の切り取り領域１２００、第２の切り取り領域１２０１、第３の切り取り領域１２０２及び第４の切り取り領域１２０３の中心点であってもよいし、第１の切り取り領域１２００、第２の切り取り領域１２０１、第３の切り取り領域１２０２及び第４の切り取り領域１２０３の任意に選択された点であってもよい。これにより、第１の切り取り領域１２００、第２の切り取り領域１２０１、第３の切り取り領域１２０２及び第４の切り取り領域１２０３に表示面９０２０の像１３１０の適所を配置することが容易になる。第１の切り取り領域１２００、第２の切り取り領域１２０１、第３の切り取り領域１２０２及び第４の切り取り領域１２０３が他の位置に配置されてもよい。例えば、図８に示されるように、第１の切り取り領域１２００及び第２の切り取り領域１２０１が第１の辺１２６０に沿って配置され、第３の切り取り領域１２０２及び第４の切り取り領域１２０３が第２の辺１２６１に沿って配置されるが、第１の切り取り領域１２００及び第３の切り取り領域１２０２が第３の辺１２６２から離れるように配置され、第２の切り取り領域１２０１及び第４の切り取り領域１２０３が第４の辺１２６３から離れるように配置されてもよい。   Desirably, as shown in FIG. 5, the first cutout area 1200, the second cutout area 1201, the third cutout area 1202, and the fourth cutout area 1203 have a first corner 1280 and a second cutout area 1203, respectively. Of the first corner 1281, the third corner 1282, and the fourth corner 1283. Alternatively, as shown in FIG. 7, the representative point 1340 of the first cut region 1200, the representative point 1341 of the second cut region 1201, the representative point 1342 of the third cut region 1202, and the fourth cut region 1203. The representative points 1343 are arranged at the first vertex 1300, the second vertex 1301, the third vertex 1302, and the fourth vertex 1303, respectively. The representative points 1340, 1341, 1342 and 1343 may be the center points of the first cut area 1200, the second cut area 1201, the third cut area 1202 and the fourth cut area 1203, respectively. The points may be arbitrarily selected from the first cut area 1200, the second cut area 1201, the third cut area 1202, and the fourth cut area 1203. Accordingly, it is easy to place an appropriate position of the image 1310 on the display surface 9020 in the first cut area 1200, the second cut area 1201, the third cut area 1202, and the fourth cut area 1203. The first cut area 1200, the second cut area 1201, the third cut area 1202, and the fourth cut area 1203 may be arranged at other positions. For example, as shown in FIG. 8, the first cut area 1200 and the second cut area 1201 are arranged along the first side 1260, and the third cut area 1202 and the fourth cut area 1203 are the first cut area 1203. The second cutout area 1201 and the fourth cutout area are arranged such that the first cutout area 1200 and the third cutout area 1202 are separated from the third side 1262. 1203 may be disposed away from the fourth side 1263.

第１の切り取り領域１２００、第２の切り取り領域１２０１、第３の切り取り領域１２０２及び第４の切り取り領域１２０３の４個が配置される場合は、２方向以上のずれが集合画像１２４０から認識される。ただし、第１の切り取り領域１２００及び第２の切り取り領域１２０１の２個のみが配置される場合も、１方向のずれが集合画像１２４０から認識される。   When four of the first cut area 1200, the second cut area 1201, the third cut area 1202, and the fourth cut area 1203 are arranged, a shift in two or more directions is recognized from the collective image 1240. . However, even when only two of the first cutout area 1200 and the second cutout area 1201 are arranged, a shift in one direction is recognized from the collective image 1240.

生成部１１４２は、２次元画像データから集合画像データを生成する。集合画像データは、集合画像１２４０を表現する。集合画像１２４０においては、第２の長方形画像１２２１が第１の長方形画像１２２０の第１の方向Ｄ１に隣接し、第４の長方形画像１２２３が第３の長方形画像１２２２の第１の方向Ｄ１に隣接し、第３の長方形画像１２２２が第１の長方形画像１２２０の第２の方向Ｄ２に隣接し、第４の長方形画像１２２３が第２の長方形画像１２２１の第２の方向Ｄ２に隣接する。集合画像１２４０においては、第１の長方形画像１２２０の辺１３２０及び第２の長方形画像１２２１の辺１３２１が重なり、第３の長方形画像１２２２の辺１３２２及び第４の長方形画像１２２３の辺１３２３が重なり、第１の長方形画像１２２０の辺１３２４及び第３の長方形画像１２２２の辺１３２５が重なり、第２の長方形画像１２２１の辺１３２６及び第４の長方形画像１２２３の辺１３２７が重なる。   The generation unit 1142 generates aggregate image data from the two-dimensional image data. The collective image data represents the collective image 1240. In the collective image 1240, the second rectangular image 1221 is adjacent to the first direction D1 of the first rectangular image 1220, and the fourth rectangular image 1223 is adjacent to the first direction D1 of the third rectangular image 1222. The third rectangular image 1222 is adjacent to the second direction D2 of the first rectangular image 1220, and the fourth rectangular image 1223 is adjacent to the second direction D2 of the second rectangular image 1221. In the collective image 1240, the side 1320 of the first rectangular image 1220 and the side 1321 of the second rectangular image 1221 overlap, the side 1322 of the third rectangular image 1222 and the side 1323 of the fourth rectangular image 1223 overlap, The side 1324 of the first rectangular image 1220 and the side 1325 of the third rectangular image 1222 overlap, and the side 1326 of the second rectangular image 1221 and the side 1327 of the fourth rectangular image 1223 overlap.

表示制御部１１４３は、２次元画像データに基づいて２次元画像１１６０を表示部１０６４に描画し、集合画像データに基づいて集合画像１２４０を表示部１０６４に描画する。集合画像１２４０によれば、撮像機構１０２０を表示面９０２０に正対させることが容易になり、計測の精度及び再現性が向上する。   The display control unit 1143 draws the two-dimensional image 1160 on the display unit 1064 based on the two-dimensional image data, and draws the collective image 1240 on the display unit 1064 based on the collective image data. According to the collective image 1240, it is easy to make the imaging mechanism 1020 face the display surface 9020, and the measurement accuracy and reproducibility are improved.

図９の模式図は、表示部１０６４への描画の内容を示す。   The schematic diagram of FIG. 9 shows the contents of drawing on the display unit 1064.

望ましくは、図９に示されるように、表示制御部１１４３は、相対的に大きな主描画欄１３５５に２次元画像１１６０を描画し、相対的に小さな副描画欄１３５６に集合画像１２４０を描画する。これにより、２次元画像１１６０が視認しやすくなる。   Desirably, as shown in FIG. 9, the display control unit 1143 draws the two-dimensional image 1160 in the relatively large main drawing field 1355 and draws the collective image 1240 in the relatively small sub-drawing field 1356. Thereby, the two-dimensional image 1160 becomes easy to visually recognize.

又は、表示制御部１１４３は、表示を切り替えることを指示する操作が操作部１０６３を用いて行われたことを検出した場合に第１の表示及び第２の表示を切り替える。表示制御部１１４３は、第１の表示においては、２次元画像１１６０を主描画欄１３５５に描画し集合画像１２４０を副描画欄１３５６に描画する。表示制御部１１４３は、第２の表示においては、２次元画像１１６０を副描画欄１３５６に描画し集合画像１２４０を主描画欄１３５５に描画する。これにより、２次元画像１１６０及び集合画像１２４０のうちの必要な方が視認しやすくなる。   Alternatively, the display control unit 1143 switches between the first display and the second display when it is detected that an operation to instruct switching is performed using the operation unit 1063. In the first display, the display control unit 1143 draws the two-dimensional image 1160 in the main drawing field 1355 and draws the collective image 1240 in the sub-drawing field 1356. In the second display, the display control unit 1143 draws the two-dimensional image 1160 in the sub drawing field 1356 and draws the collective image 1240 in the main drawing field 1355. This makes it easier to visually recognize the required one of the two-dimensional image 1160 and the collective image 1240.

望ましくは、表示制御部１１４３は、２次元画像１１６０及び集合画像１２４０を並べて描画する。これにより、撮像機構１０２０を表示面９０２０に正対させる作業が容易になる。   Desirably, the display control unit 1143 draws the two-dimensional image 1160 and the collective image 1240 side by side. This facilitates the work of causing the imaging mechanism 1020 to face the display surface 9020.

望ましくは、表示制御部１１４３は、２次元画像１１６０に重ねて第１のグリッド１３６０を表示部１０６４に描画し、集合画像１２４０に重ねて第２のグリッド１３６１を表示部１０６４に描画する。これにより、撮像機構１０２０が表示面９０２０に正対しているか否かが容易に認識される。   Desirably, the display control unit 1143 draws the first grid 1360 on the display unit 1064 so as to overlap the two-dimensional image 1160, and draws the second grid 1361 on the display unit 1064 so as to overlap the collective image 1240. Thereby, it is easily recognized whether or not the imaging mechanism 1020 is directly facing the display surface 9020.

処理部１１４４は、２次元画像データに対して色度及び輝度の両方又は片方に関する処理を行う。処理部１１４４は、例えば、色度又は輝度の２次元分布の擬似カラー表示を表示部１０６４に描画する処理、色度又は輝度のむらの強調表示を表示部１０６４に描画する処理、スポットの位置における色度又は輝度の値を表示部１０６４に描画する処理等を行う。   The processing unit 1144 performs processing on both or one of chromaticity and luminance on the two-dimensional image data. The processing unit 1144 is, for example, a process of drawing a pseudo color display of a two-dimensional distribution of chromaticity or luminance on the display unit 1064, a process of drawing an emphasis display of unevenness of chromaticity or luminance on the display unit 1064, a color at the spot position For example, a process of drawing the degree or luminance value on the display unit 1064 is performed.

（ずれの演算）
図１０のブロック図は、２次元色彩輝度計１０００において望ましくは行われる処理を示す。(Calculation of deviation)
The block diagram of FIG. 10 shows the processing that is desirably performed in the two-dimensional color luminance meter 1000.

図１０に示される演算部１３７５、判定部１３７６及び駆動部１３７７は、ＣＰＵ１０６０がプログラム１０８０を実行することにより実現される。演算部１３７５、判定部１３７６及び駆動部１３７７の全部又は一部が専用のハードウエアにより実現されてもよい。   The calculation unit 1375, the determination unit 1376, and the drive unit 1377 illustrated in FIG. 10 are realized by the CPU 1060 executing the program 1080. All or part of the calculation unit 1375, the determination unit 1376, and the drive unit 1377 may be realized by dedicated hardware.

演算部１３７５は、集合画像１２４０を構成する第１の長方形画像１２２０、第２の長方形画像１２２１、第３の長方形画像１２２２及び第４の長方形画像１２２３の間の表示面９０２０の像１３１０の位置のずれを演算する。例えば、演算部１３７５は、第１の長方形画像１２２０及び第３の長方形画像１２２２の間の表示面９０２０の像１３１０の第１の方向の位置のずれを画像処理により演算する。   The calculation unit 1375 calculates the position of the image 1310 on the display surface 9020 between the first rectangular image 1220, the second rectangular image 1221, the third rectangular image 1222, and the fourth rectangular image 1223 constituting the collective image 1240. Calculate the deviation. For example, the computing unit 1375 computes a positional shift in the first direction of the image 1310 on the display surface 9020 between the first rectangular image 1220 and the third rectangular image 1222 by image processing.

望ましくは、表示制御部１１４３は、ずれが小さくなるほど集合画像１２４０を大きく描画する。これにより、わずかなずれが容易に認識される。   Desirably, the display control unit 1143 renders the collective image 1240 larger as the shift becomes smaller. Thereby, a slight shift is easily recognized.

図１０に示されるステージコントローラー１４００には、撮像機構１０２０が載せられる。ステージコントローラー１４００は、撮像機構１０２０の位置又は姿勢を調整する。撮像機構１０２０に代えて液晶ディスプレイ９０００がステージコントローラー１４００に載せられ、表示面９０２０の位置又は姿勢が調整されてもよい。ステージコントローラー１４００が、表示面９０２０及び撮像機構１０２０の両方又は片方の位置又は姿勢を調整する他の種類の調整機構に置き換えられてもよい。   An imaging mechanism 1020 is mounted on the stage controller 1400 shown in FIG. The stage controller 1400 adjusts the position or orientation of the imaging mechanism 1020. Instead of the imaging mechanism 1020, a liquid crystal display 9000 may be placed on the stage controller 1400, and the position or orientation of the display surface 9020 may be adjusted. The stage controller 1400 may be replaced with another type of adjustment mechanism that adjusts the position or orientation of both or one of the display surface 9020 and the imaging mechanism 1020.

駆動部１３７７は、ずれが解消するようにステージコントローラー１４００を駆動する。これにより、容易に撮像機構１０２０を表示面９０２０に正対させることができる。   The driving unit 1377 drives the stage controller 1400 so that the deviation is eliminated. Thereby, the imaging mechanism 1020 can be easily faced to the display surface 9020.

判定部１３７６は、ずれが解消する表示面９０２０又は撮像機構１０２０の位置又は姿勢の調整方向を判定する。判定部１３７６は、当該調整方向を示す情報を表示部１０６４に描画する。操作者は、当該情報にしたがって、表示面９０２０又は撮像機構１０２０の位置又は姿勢を調整する。これにより、容易に撮像機構１０２０を表示面９０２０に正対させることができる。   The determination unit 1376 determines the adjustment direction of the position or orientation of the display surface 9020 or the imaging mechanism 1020 from which the deviation is eliminated. The determination unit 1376 draws information indicating the adjustment direction on the display unit 1064. The operator adjusts the position or orientation of the display surface 9020 or the imaging mechanism 1020 according to the information. Thereby, the imaging mechanism 1020 can be easily faced to the display surface 9020.

（２次元画像データ処理の流れ）
図１１のフローチャートは、２次元画像データの処理の流れを示す。(2D image data processing flow)
The flowchart of FIG. 11 shows the flow of processing of two-dimensional image data.

２次元色彩輝度計１０００における２次元画像データの処理の流れの一例を、図４から図７まで及び図１１を参照して説明する。   An example of the processing flow of the two-dimensional image data in the two-dimensional color luminance meter 1000 will be described with reference to FIGS. 4 to 7 and FIG.

ステップＳ１０１において、撮像機構１０２０が、ＰＣ１０２１の制御に従い、液晶ディスプレイ９０００の表示面９０２０を撮像し、互いに垂直をなす第１の方向Ｄ１及び第２の方向Ｄ２に広がる２次元画像１１６０を表現する画像データ（２次元画像データ）を生成する。   In step S101, the imaging mechanism 1020 images the display surface 9020 of the liquid crystal display 9000 according to the control of the PC 1021, and represents an image representing a two-dimensional image 1160 spreading in the first direction D1 and the second direction D2 perpendicular to each other. Data (two-dimensional image data) is generated.

ステップＳ１０２において、枠設定部１１４０が、撮像機構１０２０によって撮像された２次元画像１１６０に長方形枠１１８０を設定する。   In step S <b> 102, the frame setting unit 1140 sets a rectangular frame 1180 in the two-dimensional image 1160 captured by the imaging mechanism 1020.

ステップＳ１０３において、領域設定部１１４１が、長方形枠１１８０の配置に基づき、第１の切り取り領域１２００、第２の切り取り領域１２０１、第３の切り取り領域１２０２及び第４の切り取り領域１２０３を２次元画像１１６０に設定する。このとき、長方形枠１１８０は、第１の切り取り領域１２００、第２の切り取り領域１２０１、第３の切り取り領域１２０２及び第４の切り取り領域１２０３を表示面９０２０の像１３１０の適切な箇所に設定するための目安になる。   In step S103, the area setting unit 1141 converts the first cut area 1200, the second cut area 1201, the third cut area 1202, and the fourth cut area 1203 into a two-dimensional image 1160 based on the arrangement of the rectangular frame 1180. Set to. At this time, the rectangular frame 1180 sets the first cut area 1200, the second cut area 1201, the third cut area 1202, and the fourth cut area 1203 at appropriate positions of the image 1310 on the display surface 9020. It becomes a standard of.

ステップＳ１０４において、生成部１１４２が、２次元画像データから集合画像データを生成する。集合画像データは、ステップＳ１０３において設定された第１の切り取り領域１２００、第２の切り取り領域１２０１、第３の切り取り領域１２０２及び第４の切り取り領域１２０３により指定される部分を２次元画像１１６０から切り取ることにより得られる第１の長方形画像１２２０、第２の長方形画像１２２１、第３の長方形画像１２２２及び第４の長方形画像１２２３を組み合わせた集合画像１２４０を表現する。   In step S104, the generation unit 1142 generates aggregate image data from the two-dimensional image data. In the collective image data, a portion specified by the first cut area 1200, the second cut area 1201, the third cut area 1202, and the fourth cut area 1203 set in step S103 is cut from the two-dimensional image 1160. A collective image 1240 obtained by combining the first rectangular image 1220, the second rectangular image 1221, the third rectangular image 1222, and the fourth rectangular image 1223 is obtained.

ステップＳ１０５において、表示制御部１１４３が、集合画像データに基づいて集合画像１２４０を表示部１０６４に描画する。描画された集合画像１２４０において画像の位置ずれの状態を見ることによって、撮像機構１０２０が表示面９０２０に正対しているか否かを容易に確認できる。   In step S105, the display control unit 1143 renders the collective image 1240 on the display unit 1064 based on the collective image data. It can be easily confirmed whether or not the imaging mechanism 1020 is directly facing the display surface 9020 by looking at the position of the image in the drawn collective image 1240.

（ずれの例）
図１２の模式図は、表示面９０２０及び撮像機構１０２０の位置及び姿勢を示す。図１３の模式図は、２次元画像１１６０を示す。図１４の模式図は、集合画像１２４０を示す。(Example of deviation)
The schematic diagram of FIG. 12 shows the positions and orientations of the display surface 9020 and the imaging mechanism 1020. The schematic diagram of FIG. 13 shows a two-dimensional image 1160. The schematic diagram of FIG. 14 shows a collective image 1240.

図１２に示されるように表示面９０２０が撮像機構１０２０と正対する方向より上方向を向く場合は、図１３に示されるように長方形の表示面９０２０が台形に撮像され、図１４に示されるように集合画像１２４０を構成する第１の長方形画像１２２０、第２の長方形画像１２２１、第３の長方形画像１２２２及び第４の長方形画像１２２３の間で表示面９０２０の像１３１０の位置がずれる。第１の長方形画像１２２０及び第３の長方形画像１２２２の間で垂直線１３３２の第１の方向Ｄ１の位置がずれ、第２の長方形画像１２２１及び第４の長方形画像１２２３の間で垂直線１３３３の第１の方向Ｄ１の位置がずれる。   When the display surface 9020 faces upward from the direction facing the imaging mechanism 1020 as shown in FIG. 12, the rectangular display surface 9020 is imaged in a trapezoid as shown in FIG. 13, and as shown in FIG. The position of the image 1310 on the display surface 9020 is shifted between the first rectangular image 1220, the second rectangular image 1221, the third rectangular image 1222, and the fourth rectangular image 1223 constituting the collective image 1240. The position of the vertical line 1332 in the first direction D1 is shifted between the first rectangular image 1220 and the third rectangular image 1222, and the vertical line 1333 is shifted between the second rectangular image 1221 and the fourth rectangular image 1223. The position in the first direction D1 is shifted.

図１５の模式図は、表示面９０２０及び撮像機構１０２０の位置及び姿勢を示す。図１６の模式図は、２次元画像１１６０を示す。図１７の模式図は、集合画像１２４０を示す。   The schematic diagram of FIG. 15 shows the positions and orientations of the display surface 9020 and the imaging mechanism 1020. The schematic diagram of FIG. 16 shows a two-dimensional image 1160. The schematic diagram of FIG. 17 shows a collective image 1240.

図１５に示されるように表示面９０２０が撮像機構１０２０の光軸１４２０の周りに右回転している場合は、図１６に示されるように表示面９０２０も右回転して撮像され、図１７に示されるように集合画像１２４０を構成する第１の長方形画像１２２０、第２の長方形画像１２２１、第３の長方形画像１２２２及び第４の長方形画像１２２３の間で表示面９０２０の像１３１０の位置がずれる。第１の長方形画像１２２０及び第２の長方形画像１２２１の間で水平線１３３０の第２の方向Ｄ２の位置がずれ、第３の長方形画像１２２２及び第４の長方形画像１２２３の間で水平線１３３１の第２の方向Ｄ２の位置がずれ、第１の長方形画像１２２０及び第３の長方形画像１２２２の間で垂直線１３３２の第１の方向Ｄ１の位置がずれ、第２の長方形画像１２２１及び第４の長方形画像１２２３の間で垂直線１３３３の第１の方向Ｄ１の位置がずれる。   When the display surface 9020 is rotated clockwise around the optical axis 1420 of the imaging mechanism 1020 as shown in FIG. 15, the display surface 9020 is also rotated to the right as shown in FIG. As shown, the position of the image 1310 on the display surface 9020 is shifted between the first rectangular image 1220, the second rectangular image 1221, the third rectangular image 1222, and the fourth rectangular image 1223 constituting the collective image 1240. . The position of the horizontal line 1330 in the second direction D2 is shifted between the first rectangular image 1220 and the second rectangular image 1221, and the second of the horizontal line 1331 is between the third rectangular image 1222 and the fourth rectangular image 1223. The position of the first direction D2 is shifted, the position of the vertical line 1332 in the first direction D1 is shifted between the first rectangular image 1220 and the third rectangular image 1222, and the second rectangular image 1221 and the fourth rectangular image The position of the vertical line 1333 in the first direction D1 is shifted between 1223.

図１８の模式図は、表示面９０２０及び撮像機構１０２０の位置及び姿勢を示す。図１９の模式図は、２次元画像１１６０を示す。図２０の模式図は、集合画像１２４０を示す。   The schematic diagram of FIG. 18 shows the positions and orientations of the display surface 9020 and the imaging mechanism 1020. The schematic diagram of FIG. 19 shows a two-dimensional image 1160. The schematic diagram of FIG. 20 shows a collective image 1240.

図１８に示されるように撮像機構１０２０が表示面９０２０と正対する方向より上方向を向き撮像機構１０２０が光軸１４２０の周りに左回転している場合は、図１９に示されるように長方形の表示面９０２０が擬台形に撮像され右回転して撮像され、図２０に示されるように集合画像１２４０を形成する第１の長方形画像１２２０、第２の長方形画像１２２１、第３の長方形画像１２２２及び第４の長方形画像１２２３の間で表示面９０２０の像１３１０の位置がずれる。第１の長方形画像１２２０及び第２の長方形画像１２２１の間で水平線１３３０の第２の方向Ｄ２の位置がずれ、第３の長方形画像１２２２及び第４の長方形画像１２２３の間で水平線１３３１の第２の方向Ｄ２の位置がずれ、第１の長方形画像１２２０及び第３の長方形画像１２２２の間で垂直線１３３２の第１の方向Ｄ１の位置がずれ、第２の長方形画像１２２１及び第４の長方形画像１２２３の間で垂直線１３３３の第１の方向Ｄ１の位置がずれる。   As shown in FIG. 18, when the imaging mechanism 1020 faces upward from the direction facing the display surface 9020 and the imaging mechanism 1020 rotates counterclockwise around the optical axis 1420, a rectangular shape as shown in FIG. A display surface 9020 is imaged in a pseudo-trapezoid shape, rotated to the right, and imaged to form a collective image 1240 as shown in FIG. 20, and a first rectangular image 1220, a second rectangular image 1221, a third rectangular image 1222, and The position of the image 1310 on the display surface 9020 is shifted between the fourth rectangular images 1223. The position of the horizontal line 1330 in the second direction D2 is shifted between the first rectangular image 1220 and the second rectangular image 1221, and the second of the horizontal line 1331 is between the third rectangular image 1222 and the fourth rectangular image 1223. The position of the first direction D2 is shifted, the position of the vertical line 1332 in the first direction D1 is shifted between the first rectangular image 1220 and the third rectangular image 1222, and the second rectangular image 1221 and the fourth rectangular image The position of the vertical line 1333 in the first direction D1 is shifted between 1223.

図２１の模式図は、ボトル１３５０を示す。図２２及び図２４の模式図は、２次元画像１１６０を示す。図２３及び図２５の模式図は、集合画像１２４０を示す。   The schematic diagram of FIG. 21 shows a bottle 1350. The schematic diagrams of FIGS. 22 and 24 show a two-dimensional image 1160. The schematic diagrams of FIGS. 23 and 25 show a collective image 1240.

図２１に示されるように被計測物がボトル１３５０である場合は、図２２に示されるようにボトル１３５０の像１３７０の適所が第１の切り取り領域１２００、第２の切り取り領域１２０１、第３の切り取り領域１２０２及び第４の切り取り領域１２０３に配置されない場合があり、図２３に示されるように集合画像１２４０を形成する第１の長方形画像１２２０、第２の長方形画像１２２１、第３の長方形画像１２２２及び第４の長方形画像１２２３の間でボトル１３５０の像１３７０の位置がずれるか否かが不明である。第１の長方形画像１２２０及び第２の長方形画像１２２１の間で水平線１３８０の第２の方向Ｄ２の位置が一致し、第３の長方形画像１２２２及び第４の長方形画像１２２３の間で水平線１３８１の第２の方向Ｄ２の位置が一致するが、第１の長方形画像１２２０及び第３の長方形画像１２２２の間で垂直線１３８２の第１の方向Ｄ１の位置が一致するか否かが不明であり、第２の長方形画像１２２１及び第４の長方形画像１２２３の間で垂直線１３８３の第１の方向Ｄ１の位置が一致するか否かが不明である。   When the object to be measured is the bottle 1350 as shown in FIG. 21, the appropriate positions of the image 1370 of the bottle 1350 are the first cutout area 1200, the second cutout area 1201, and the third cutout as shown in FIG. The cutout area 1202 and the fourth cutout area 1203 may not be arranged, and the first rectangular image 1220, the second rectangular image 1221, and the third rectangular image 1222 that form the collective image 1240 as shown in FIG. It is unknown whether the position of the image 1370 of the bottle 1350 is shifted between the fourth rectangular image 1223 and the fourth rectangular image 1223. The position of the horizontal line 1380 in the second direction D2 matches between the first rectangular image 1220 and the second rectangular image 1221, and the horizontal line 1381 of the horizontal line 1381 between the third rectangular image 1222 and the fourth rectangular image 1223. Although the position of the second direction D2 matches, it is unclear whether or not the position of the vertical direction 1382 of the vertical line 1382 matches between the first rectangular image 1220 and the third rectangular image 1222. It is unknown whether the position of the vertical line 1383 in the first direction D1 matches between the second rectangular image 1221 and the fourth rectangular image 1223.

そこで、図２４に示されるように、長方形枠１１８０の第１の辺１２６０が下方に移動させられる。これにより、ボトル１３５０の像１３７０の適所が第１の切り取り領域１２００、第２の切り取り領域１２０１、第３の切り取り領域１２０２及び第４の切り取り領域１２０３に配置され、図２５に示されるように集合画像１２４０を構成する第１の長方形画像１２２０、第２の長方形画像１２２１、第３の長方形画像１２２２及び第４の長方形画像１２２３の間でボトル１３５０の像１３７０の位置がずれないことが確認される。第１の長方形画像１２２０及び第２の長方形画像１２２１の間で水平線１３８０の第２の方向Ｄ２の位置がずれず、第３の長方形画像１２２２及び第４の長方形画像１２２３の間で水平線１３８１の第２の方向Ｄ２の位置がずれず、第１の長方形画像１２２０及び第３の長方形画像１２２２の間で垂直線１３８２の第１の方向Ｄ１の位置がずれず、第２の長方形画像１２２１及び第４の長方形画像１２２３の間で垂直線１３８３の第１の方向Ｄ１の位置がずれない。   Therefore, as shown in FIG. 24, the first side 1260 of the rectangular frame 1180 is moved downward. As a result, appropriate positions of the image 1370 of the bottle 1350 are arranged in the first cutout area 1200, the second cutout area 1201, the third cutout area 1202, and the fourth cutout area 1203. As shown in FIG. It is confirmed that the position of the image 1370 of the bottle 1350 is not shifted between the first rectangular image 1220, the second rectangular image 1221, the third rectangular image 1222, and the fourth rectangular image 1223 constituting the image 1240. . The position of the horizontal line 1380 in the second direction D2 is not shifted between the first rectangular image 1220 and the second rectangular image 1221, and the horizontal line 1381 of the horizontal line 1381 is between the third rectangular image 1222 and the fourth rectangular image 1223. The position of the second direction D2 is not displaced, the position of the vertical line 1382 in the first direction D1 is not displaced between the first rectangular image 1220 and the third rectangular image 1222, and the second rectangular image 1221 and the fourth rectangular image 1221 are not displaced. The positions of the vertical lines 1383 in the first direction D1 are not shifted between the rectangular images 1223.

図２６の模式図は、ボトル１４５０を示す。図２７の模式図は、２次元画像１１６０を示す。図２８の模式図は、集合画像１２４０を示す。   The schematic diagram of FIG. 26 shows a bottle 1450. The schematic diagram in FIG. 27 shows a two-dimensional image 1160. The schematic diagram of FIG. 28 shows a collective image 1240.

図２６に示されるように被計測物がボトル１４５０である場合には、図２７に示されるように長方形枠１１８０の第１の辺１２６０が上方に移動させられ、図２８に示されるように集合画像１２４０を構成する第１の長方形画像１２２０、第２の長方形画像１２２１、第３の長方形画像１２２２及び第４の長方形画像１２２３の間でボトル１４５０の像１４１０の位置がずれないことが確認される。第１の長方形画像１２２０及び第２の長方形画像１２２１の間で水平線１４４０の第２の方向Ｄ２の位置が一致し、第３の長方形画像１２２２及び第４の長方形画像１２２３の間で水平線１４４１の第２の方向Ｄ２の位置が一致し、第１の長方形画像１２２０及び第３の長方形画像１２２２の間で垂直線１４４２の第１の方向Ｄ１の位置が一致し、第２の長方形画像１２２１及び第４の長方形画像１２２３の間で垂直線１４４３の第１の方向Ｄ１の位置がずれない。   When the object to be measured is the bottle 1450 as shown in FIG. 26, the first side 1260 of the rectangular frame 1180 is moved upward as shown in FIG. 27, and the assembly is performed as shown in FIG. It is confirmed that the position of the image 1410 of the bottle 1450 is not shifted between the first rectangular image 1220, the second rectangular image 1221, the third rectangular image 1222, and the fourth rectangular image 1223 constituting the image 1240. . The position of the horizontal line 1440 in the second direction D2 matches between the first rectangular image 1220 and the second rectangular image 1221, and the horizontal line 1441 of the horizontal line 1441 between the third rectangular image 1222 and the fourth rectangular image 1223. The position of the second direction D2 matches, the position of the vertical line 1442 in the first direction D1 matches between the first rectangular image 1220 and the third rectangular image 1222, and the second rectangular image 1221 and the fourth rectangular image 1222 The positions of the vertical lines 1443 in the first direction D1 are not shifted between the rectangular images 1223.

第１の切り取り領域１２００の形状及び第２の切り取り領域１２０１の形状は同じであり、第３の切り取り領域１２０２の形状及び第４の切り取り領域１２０３の形状は同じである。しかし、第１の切り取り領域１２００の形状及び第３の切り取り領域１２０２の形状は異なり、第２の切り取り領域１２０１の形状及び第４の切り取り領域１２０３の形状は異なる。   The shape of the first cut region 1200 and the shape of the second cut region 1201 are the same, and the shape of the third cut region 1202 and the shape of the fourth cut region 1203 are the same. However, the shape of the first cut region 1200 and the shape of the third cut region 1202 are different, and the shape of the second cut region 1201 and the shape of the fourth cut region 1203 are different.

本発明は詳細に示され記述されたが、上記の記述は全ての局面において例示であって限定的ではない。したがって、本発明の範囲からはずれることなく無数の修正及び変形が案出されうると解される。   While the invention has been shown and described in detail, the above description is illustrative in all aspects and not restrictive. Accordingly, it is understood that numerous modifications and variations can be devised without departing from the scope of the present invention.

１０００ ２次元色彩輝度計
１０２０ 撮像機構
１１６０ ２次元画像
１１８０ 長方形枠
１２００ 第１の切り取り領域
１２０１ 第２の切り取り領域
１２０２ 第３の切り取り領域
１２０３ 第４の切り取り領域
１２４０ 集合画像1000 Two-dimensional color luminance meter 1020 Imaging mechanism 1160 Two-dimensional image 1180 Rectangular frame 1200 First cut area 1201 Second cut area 1202 Third cut area 1203 Fourth cut area 1240 Collective image

Claims (17)

撮像を行い、互いに垂直をなす第１の方向及び第２の方向に広がる２次元画像を表現する画像データを生成する撮像機構と、
前記２次元画像から第１の長方形画像を切り取る第１の切り取り領域及び前記２次元画像から第２の長方形画像を切り取る第２の切り取り領域を前記２次元画像に設定し、前記第２の切り取り領域が前記第１の切り取り領域から前記第１の方向に離れ、前記第２の切り取り領域が前記第２の方向について前記第１の切り取り領域と同じ大きさを有する領域設定部と、
前記画像データから、前記第２の長方形画像が前記第１の長方形画像の前記第１の方向に隣接する集合画像を表現する集合画像データを生成する生成部と、
表示部と、
前記集合画像データに基づいて前記集合画像を前記表示部に描画する表示制御部と、
を備える２次元画像処理装置。An imaging mechanism that performs imaging and generates image data representing a two-dimensional image extending in a first direction and a second direction perpendicular to each other;
A first cutout area for cutting out a first rectangular image from the two-dimensional image and a second cutout area for cutting out a second rectangular image from the two-dimensional image are set in the two-dimensional image, and the second cutout area is set. An area setting unit that is separated from the first cut area in the first direction, and the second cut area has the same size as the first cut area in the second direction;
A generating unit that generates, from the image data, collective image data representing the collective image in which the second rectangular image is adjacent in the first direction of the first rectangular image;
A display unit;
A display control unit for drawing the group image on the display unit based on the group image data;
A two-dimensional image processing apparatus. 前記領域設定部は、
前記２次元画像から第３の長方形画像を切り取る第３の切り取り領域及び前記２次元画像から第４の長方形画像を切り取る第４の切り取り領域を前記２次元画像にさらに設定し、前記第３の切り取り領域及び前記第４の切り取り領域がそれぞれ前記第１の切り取り領域及び前記第２の切り取り領域から前記第２の方向に離れ、前記第３の切り取り領域及び前記第４の切り取り領域がそれぞれ前記第１の方向について前記第１の切り取り領域及び前記第２の切り取り領域と同じ大きさを有し、前記第４の切り取り領域が前記第３の切り取り領域から前記第１の方向に離れ、前記第４の切り取り領域が前記第２の方向について前記第３の切り取り領域と同じ大きさを有し、
前記集合画像において前記第３の長方形画像及び前記第４の長方形画像がそれぞれ前記第１の長方形画像及び前記第２の長方形画像の前記第２の方向にさらに隣接する
請求項１の２次元画像処理装置。The region setting unit
A third cutout region for cutting out a third rectangular image from the two-dimensional image and a fourth cutout region for cutting out a fourth rectangular image from the two-dimensional image are further set in the two-dimensional image, and the third cutout is set. The region and the fourth cut region are separated from the first cut region and the second cut region in the second direction, respectively, and the third cut region and the fourth cut region are respectively the first cut region and the fourth cut region. The fourth cut area has the same size as the first cut area and the second cut area, and the fourth cut area is separated from the third cut area in the first direction, The cut area has the same size as the third cut area in the second direction;
The two-dimensional image processing according to claim 1, wherein the third rectangular image and the fourth rectangular image are further adjacent to each other in the second direction of the first rectangular image and the second rectangular image in the collective image, respectively. apparatus. 前記２次元画像に長方形枠を設定し、前記長方形枠が第１の隅、第２の隅、第３の隅及び第４の隅を有し、前記第１の切り取り領域、第２の切り取り領域、第３の切り取り領域及び第４の切り取り領域がそれぞれ第１の隅、第２の隅、第３の隅及び第４の隅に配置される枠設定部
をさらに備える
請求項２の２次元画像処理装置。A rectangular frame is set in the two-dimensional image, and the rectangular frame has a first corner, a second corner, a third corner, and a fourth corner, and the first cut region and the second cut region The two-dimensional image according to claim 2, further comprising a frame setting unit in which the third cut area and the fourth cut area are arranged at the first corner, the second corner, the third corner, and the fourth corner, respectively. Processing equipment. 長方形枠を前記２次元画像に設定し、前記長方形枠が第１の頂点、第２の頂点、第３の頂点及び第４の頂点を有し、前記第１の切り取り領域の代表点、前記第２の切り取り領域の代表点、前記第３の切り取り領域の代表点及び前記第４の切り取り領域の代表点がそれぞれ前記第１の頂点、前記第２の頂点、前記第３の頂点及び前記第４の頂点に配置される枠設定部
をさらに備える
請求項２の２次元画像処理装置。A rectangular frame is set in the two-dimensional image, and the rectangular frame has a first vertex, a second vertex, a third vertex, and a fourth vertex, and the representative point of the first crop region, the first The representative point of the second cut region, the representative point of the third cut region, and the representative point of the fourth cut region are the first vertex, the second vertex, the third vertex, and the fourth point, respectively. The two-dimensional image processing apparatus according to claim 2, further comprising a frame setting unit arranged at a vertex of the frame. 前記表示制御部は、
前記画像データに基づいて前記２次元画像を前記表示部に描画し、
前記２次元画像を前記集合画像より大きく描画する
請求項１から請求項４までのいずれかの２次元画像処理装置。The display control unit
Drawing the two-dimensional image on the display unit based on the image data;
The two-dimensional image processing apparatus according to claim 1, wherein the two-dimensional image is drawn larger than the collective image. 操作部
をさらに備え、
前記表示制御部は、
前記画像データに基づいて前記２次元画像を前記表示部に描画し、
第１の操作が前記操作部を用いて行われたことが検出された場合に第１の表示及び第２の表示を切り替え、前記第１の表示において前記２次元画像を前記集合画像より大きく描画し、前記第２の表示において前記２次元画像を前記集合画像より小さく描画する
請求項１から請求項４までのいずれかの２次元画像処理装置。It further includes an operation unit,
The display control unit
Drawing the two-dimensional image on the display unit based on the image data;
When it is detected that the first operation is performed using the operation unit, the first display and the second display are switched, and the two-dimensional image is drawn larger than the collective image in the first display. The two-dimensional image processing apparatus according to any one of claims 1 to 4, wherein the two-dimensional image is rendered smaller than the collective image in the second display. 前記表示制御部は、
前記２次元画像及び前記集合画像を並べて描画する
請求項１から請求項６までのいずれかの２次元画像処理装置。The display control unit
The two-dimensional image processing apparatus according to claim 1, wherein the two-dimensional image and the collective image are drawn side by side. 操作部
をさらに備え、
前記枠設定部は、
第２の操作が前記操作部を用いて行われたことが検出された場合に前記第２の操作に従って前記長方形枠の形状を変更する
請求項３又は請求項４の２次元画像処理装置。It further includes an operation unit,
The frame setting unit
5. The two-dimensional image processing apparatus according to claim 3, wherein when the second operation is detected to be performed using the operation unit, the shape of the rectangular frame is changed according to the second operation. 記憶部
をさらに備え、
前記枠設定部は、
前記長方形枠の形状を前記記憶部に書き込み、前記長方形枠の形状を前記記憶部から読み出して前記２次元画像において再現して設定する
請求項８の２次元画像処理装置。A storage unit;
The frame setting unit
The two-dimensional image processing apparatus according to claim 8, wherein the shape of the rectangular frame is written in the storage unit, the shape of the rectangular frame is read from the storage unit, and reproduced and set in the two-dimensional image. 前記第１の長方形画像、前記第２の長方形画像、前記第３の長方形画像及び前記第４の長方形画像の間の被計測物の像の位置のずれを演算する演算部、
をさらに備え、
前記表示制御部は、
前記ずれが小さくなるほど前記集合画像を大きく描画する、
請求項２、請求項３、請求項４、請求項８及び請求項９のいずれかの２次元画像処理装置。 A calculation unit that calculates a shift in the position of the image of the object to be measured between the first rectangular image, the second rectangular image, the third rectangular image, and the fourth rectangular image;
Further comprising
The display control unit
The larger the group image is drawn, the smaller the deviation is.
The two-dimensional image processing apparatus according to any one of claims 2, 3, 4, 8, and 9 . 前記第１の長方形画像、前記第２の長方形画像、前記第３の長方形画像及び前記第４の長方形画像の間の被計測物の像の位置のずれを演算する演算部と、
前記撮像機構及び前記被計測物の両方又は片方の位置又は姿勢を調整する調整機構と、
前記ずれが解消するように前記調整機構を駆動する駆動部と、
をさらに備える
請求項２、請求項３、請求項４、請求項８及び請求項９のいずれかの２次元画像処理装置。 A computing unit that computes a position shift of the image of the object to be measured between the first rectangular image, the second rectangular image, the third rectangular image, and the fourth rectangular image;
An adjustment mechanism that adjusts the position or posture of both or one of the imaging mechanism and the object to be measured;
A drive unit that drives the adjustment mechanism so as to eliminate the deviation;
Further comprising
The two-dimensional image processing apparatus according to any one of claims 2, 3, 4, 8, and 9 . 前記第１の長方形画像、前記第２の長方形画像、前記第３の長方形画像及び前記第４の長方形画像の間の被計測物の像の位置のずれを演算する演算部と、
前記ずれが解消する前記撮像機構又は前記被計測物の位置又は姿勢の調整方向を判定し前記調整方向を示す情報を前記表示部に描画する判定部と、
をさらに備える
請求項２、請求項３、請求項４、請求項８及び請求項９のいずれかの２次元画像処理装置。

A computing unit that computes a position shift of the image of the object to be measured between the first rectangular image, the second rectangular image, the third rectangular image, and the fourth rectangular image;
A determination unit that determines an adjustment direction of the position or orientation of the imaging mechanism or the object to be measured in which the deviation is eliminated, and draws information indicating the adjustment direction on the display unit;
Further comprising
The two-dimensional image processing apparatus according to any one of claims 2, 3, 4, 8, and 9 .

前記表示制御部は、
前記２次元画像に重ねて第１のグリッドを前記表示部に描画する
請求項１から請求項１２までのいずれかの２次元画像処理装置。The display control unit
The two-dimensional image processing apparatus according to claim 1, wherein a first grid is drawn on the display unit so as to overlap the two-dimensional image. 前記表示制御部は、
前記集合画像に重ねて第２のグリッドを前記表示部に描画する
請求項１から請求項１３までのいずれかの２次元画像処理装置。The display control unit
The two-dimensional image processing apparatus according to any one of claims 1 to 13, wherein a second grid is drawn on the display unit so as to overlap the collective image. 請求項１から請求項１４までのいずれかの２次元画像処理装置と、
前記画像データに対して色彩及び輝度の両方又は片方に関する処理を行う処理部と、
を備える２次元色彩輝度計。A two-dimensional image processing apparatus according to any one of claims 1 to 14,
A processing unit that performs processing related to one or both of color and luminance with respect to the image data;
A two-dimensional color luminance meter. (a) 撮像を行い、互いに垂直をなす第１の方向及び第２の方向に広がる２次元画像を表現する画像データを生成する工程と、
(b) 前記２次元画像から第１の長方形画像を切り取る第１の切り取り領域と、前記第１の切り取り領域から前記第１の方向に離れ、前記第２の方向について前記第１の切り取り領域と同じ大きさを有する第２の長方形画像を前記２次元画像から切り取る第２の切り取り領域と、を設定する工程と、
(c) 前記画像データから、前記第２の長方形画像が前記第１の長方形画像の前記第１の方向に隣接する集合画像を表現する集合画像データを生成する工程と、
(d) 前記集合画像データに基づいて前記集合画像を描画する工程と、
を備える２次元画像処理方法。(a) performing imaging and generating image data representing a two-dimensional image extending in a first direction and a second direction perpendicular to each other;
(b) a first cut-out area that cuts out a first rectangular image from the two-dimensional image, and a first cut-out area that is separated from the first cut-out area in the first direction and that is in the second direction. Setting a second cutout region for cutting out a second rectangular image having the same size from the two-dimensional image;
(c) generating, from the image data, collective image data representing a collective image in which the second rectangular image is adjacent in the first direction of the first rectangular image;
(d) drawing the collective image based on the collective image data;
A two-dimensional image processing method. (a) 撮像を行い、互いに垂直をなす第１の方向及び第２の方向に広がる２次元画像を表現する画像データを生成する工程と、
(b) 前記２次元画像から第１の長方形画像を切り取る第１の切り取り領域と、前記第１の切り取り領域から前記第１の方向に離れ、前記第２の方向について前記第１の切り取り領域と同じ大きさを有する第２の長方形画像を前記２次元画像から切り取る第２の切り取り領域と、を設定する工程と、
(c) 前記画像データから、前記第２の長方形画像が前記第１の長方形画像の前記第１の方向に隣接する集合画像を表現する集合画像データを生成する工程と、
(d) 前記集合画像データに基づいて前記集合画像を描画する工程と、
をコンピューターに実行させる２次元画像処理プログラム。(a) performing imaging and generating image data representing a two-dimensional image extending in a first direction and a second direction perpendicular to each other;
(b) a first cut-out area that cuts out a first rectangular image from the two-dimensional image, and a first cut-out area that is separated from the first cut-out area in the first direction and that is in the second direction. Setting a second cutout region for cutting out a second rectangular image having the same size from the two-dimensional image;
(c) generating, from the image data, collective image data representing a collective image in which the second rectangular image is adjacent in the first direction of the first rectangular image;
(d) drawing the collective image based on the collective image data;
A two-dimensional image processing program for causing a computer to execute.
JP2014509021A 2012-10-29 2013-10-11 Two-dimensional image processing apparatus, two-dimensional color luminance meter, two-dimensional image processing method, and two-dimensional image processing program Active JP5578298B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014509021A JP5578298B1 (en) 2012-10-29 2013-10-11 Two-dimensional image processing apparatus, two-dimensional color luminance meter, two-dimensional image processing method, and two-dimensional image processing program

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2012237756 2012-10-29
JP2012237756 2012-10-29
JP2014509021A JP5578298B1 (en) 2012-10-29 2013-10-11 Two-dimensional image processing apparatus, two-dimensional color luminance meter, two-dimensional image processing method, and two-dimensional image processing program
PCT/JP2013/077820 WO2014069224A1 (en) 2012-10-29 2013-10-11 Two-dimensional image processing device, two-dimensional luminance colorimeter, two-dimensional image processing device, and two-dimensional image processing program

Publications (2)

Publication Number Publication Date
JP5578298B1 true JP5578298B1 (en) 2014-08-27
JPWO2014069224A1 JPWO2014069224A1 (en) 2016-09-08

Family

ID=50627138

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014509021A Active JP5578298B1 (en) 2012-10-29 2013-10-11 Two-dimensional image processing apparatus, two-dimensional color luminance meter, two-dimensional image processing method, and two-dimensional image processing program

Country Status (3)

Country Link
JP (1) JP5578298B1 (en)
CN (1) CN104769931B (en)
WO (1) WO2014069224A1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001236509A (en) * 2000-02-24 2001-08-31 Minolta Co Ltd Device and method for detecting inclination of subject
JP2004294271A (en) * 2003-03-27 2004-10-21 Japan Science & Technology Agency Apparatus and method for inspecting flat panel display device
JP2007271350A (en) * 2006-03-30 2007-10-18 Fujifilm Corp Reference planar setting method for planar representation type display, and visibility angle measuring method
JP2012100229A (en) * 2010-11-05 2012-05-24 Toa Corp Monitoring camera

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5506499B2 (en) * 2010-03-30 2014-05-28 キヤノン株式会社 IMAGING DEVICE, ITS CONTROL METHOD, PROGRAM, AND RECORDING MEDIUM

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001236509A (en) * 2000-02-24 2001-08-31 Minolta Co Ltd Device and method for detecting inclination of subject
US20010021277A1 (en) * 2000-02-24 2001-09-13 Toshihiro Hamamura Device and method for detecting subject inclination
JP2004294271A (en) * 2003-03-27 2004-10-21 Japan Science & Technology Agency Apparatus and method for inspecting flat panel display device
JP2007271350A (en) * 2006-03-30 2007-10-18 Fujifilm Corp Reference planar setting method for planar representation type display, and visibility angle measuring method
JP2012100229A (en) * 2010-11-05 2012-05-24 Toa Corp Monitoring camera

Also Published As

Publication number Publication date
CN104769931A (en) 2015-07-08
WO2014069224A1 (en) 2014-05-08
JPWO2014069224A1 (en) 2016-09-08
CN104769931B (en) 2018-10-02

Similar Documents

Publication Publication Date Title
US9818377B2 (en) Projection system, image processing apparatus, and correction method
JP5428600B2 (en) Projector, image projection system, and image projection method
EP1608160B1 (en) Projector and image correction method
JP5257616B2 (en) Projector, program, information storage medium, and trapezoidal distortion correction method
EP3136377B1 (en) Information processing device, information processing method, program
JP6550150B2 (en) Measurement support apparatus and measurement support method
JP6844871B2 (en) Focus adjustment method and its device
JP6589294B2 (en) Image display device
JP6309176B2 (en) Remote work support device, instruction terminal and on-site terminal
JP2005106505A (en) Detector and method for detecting corresponding points between images
JP2013228267A (en) Display device, display method, and program
WO2020085303A1 (en) Information processing device and information processing method
JP5812593B2 (en) VIDEO PROCESSING DEVICE, IMAGING DEVICE, VIDEO PROCESSING METHOD, AND PROGRAM
JP5578298B1 (en) Two-dimensional image processing apparatus, two-dimensional color luminance meter, two-dimensional image processing method, and two-dimensional image processing program
JP2007212404A (en) Infrared imaging apparatus
WO2014065121A1 (en) Two-dimensional image data processing device, two-dimensional color luminance meter, method for processing two-dimensional image data, and program for processing two-dimensional image data
US20120188457A1 (en) Image processing apparatus and image processing method
JP2011077780A (en) Method for calculating position of camera device
KR101920682B1 (en) Image pickup apparatus for measuring the length of crack
JP5740843B2 (en) Electronics
JP5664725B2 (en) Projector, image projection system, and image projection method
JP2008154195A (en) Method of creating pattern for calibration of lens, pattern for calibration of lens, method and device for calibrating lens utilizing pattern for calibration, and method and device for calibrating imaging apparatus
JP2015053734A (en) Projector, image projection system, and image projection method
JP2010154461A (en) Projection image converter and projector device
JP5610579B2 (en) 3D dimension measuring device

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140519

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140610

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140623

R150 Certificate of patent or registration of utility model

Ref document number: 5578298

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150