WO2015137019A1 - 温度監視装置、及び、温度監視方法 - Google Patents

温度監視装置、及び、温度監視方法 Download PDF

Info

Publication number
WO2015137019A1
WO2015137019A1 PCT/JP2015/053166 JP2015053166W WO2015137019A1 WO 2015137019 A1 WO2015137019 A1 WO 2015137019A1 JP 2015053166 W JP2015053166 W JP 2015053166W WO 2015137019 A1 WO2015137019 A1 WO 2015137019A1
Authority
WO
WIPO (PCT)
Prior art keywords
temperature
image
color
region
pixel
Prior art date
Application number
PCT/JP2015/053166
Other languages
English (en)
French (fr)
Inventor
清 高
Original Assignee
コニカミノルタ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by コニカミノルタ株式会社 filed Critical コニカミノルタ株式会社
Publication of WO2015137019A1 publication Critical patent/WO2015137019A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/02—Constructional details
    • G01J5/025—Interfacing a pyrometer to an external device or network; User interface
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J2005/0077—Imaging

Definitions

  • the present invention relates to an apparatus for monitoring the temperature of an object surface, and more particularly, to a monitoring technique using a thermal image.
  • an infrared thermography device is known as a device for detecting the temperature distribution on the surface of a measurement object.
  • This infrared thermography device detects the infrared energy emitted from the measurement object by two-dimensionally arranged infrared detection elements, and detects each predetermined color (pseudo color) corresponding to the detected infrared energy level.
  • An image is created and displayed as the color of the pixel corresponding to the element. Since the amount of infrared energy radiated from the measurement object is proportional to the temperature of the surface of the measurement object, the image displayed by the infrared thermography apparatus is an image representing the temperature distribution of the surface of the measurement object.
  • the temperature distribution on the surface of the measurement object can be known, but it is difficult to grasp the exact shape of the measurement object from the image representing the temperature distribution. Therefore, it is difficult to know which part of the measurement object has an abnormal temperature (predetermined temperature).
  • Patent Document 1 a technique for displaying a black and white visible image of an object and displaying only an abnormal temperature portion in the black and white visible image as a pseudo color has been proposed (see Patent Document 1).
  • the display density ratio of the thermal image (temperature distribution image) of the measurement object (building) and the visible image is variable, and the thermal image and the visible image are displayed so as to overlap each other.
  • Patent Document 2 a technique that makes it possible to specify
  • the present invention provides an apparatus and a method for displaying an image capable of recognizing that a portion having a surface temperature of a predetermined temperature has occurred on an object and easily recognizing details of the portion having the predetermined temperature. With the goal.
  • the temperature monitoring device includes a thermal image acquisition unit that acquires a thermal image indicating a heat distribution on the surface of an object, a visible image acquisition unit that acquires a visible image of the object, and the thermal image.
  • Region extracting means for extracting a temperature region of a predetermined temperature from the image
  • first image creating means for creating a first converted image in which the color of the region corresponding to the temperature region in the visible image is changed
  • in the visible image The second image creating means for creating a second converted image in which the color of the region corresponding to the edge portion of the temperature region is changed, and the first converted image and the second converted image are selectively switched and displayed.
  • Display control means Therefore, it is possible to display an image in which it is possible to recognize that a portion having a surface temperature of a predetermined temperature has occurred in the object and to easily recognize details of the portion having the predetermined temperature.
  • FIG. 1 is a diagram illustrating a configuration example of functional blocks of the temperature monitoring device 100.
  • the temperature monitoring device 100 includes a thermal image acquisition unit 10, a visible image acquisition unit 20, a display control unit 30, an input unit 40, and a display unit 50.
  • the thermal image acquisition unit 10 is a so-called infrared camera, and acquires a thermal image representing the temperature distribution of the surface temperature of the object.
  • the thermal image acquisition unit 10 includes two-dimensionally arranged infrared detection elements that are sensitive to wavelengths in a predetermined infrared region, and each of the video data that is current output from the infrared detection elements, Convert to voltage video data. Then, the thermal image acquisition unit 10 performs necessary processing such as amplification on voltage video data that is analog data, converts the video data into digital video data (thermal image), and outputs the video data. Since the current amount (infrared energy amount) output from the infrared detection element is proportional to the temperature, the thermal image is composed of the temperature data of each pixel.
  • the thermal image acquisition unit 10 performs sampling at a predetermined sampling period, and outputs time-series thermal image data to the display control unit 30 at a predetermined frame rate (for example, 30 frames / second).
  • the visible image acquisition unit 20 is a so-called normal camera, and acquires a captured image (hereinafter, referred to as “visible image”) obtained by imaging the appearance of the object. More specifically, the visible image acquisition unit 20 includes two-dimensionally arranged photoelectric conversion elements having R, G, and B color filters arranged in a Bayer arrangement and having sensitivity to wavelengths visible to the human eye. Then, each video data, which is a current output from the photoelectric conversion element, is converted into voltage video data. The visible image acquisition unit 20 performs necessary processing such as amplification on the video data that is analog data, converts the video data into video data (visible image) of digital data, and outputs the video data. In the embodiment, it is assumed that the visible image is a color image and is composed of color data (RGB components) of each pixel.
  • RGB components color data
  • the visible image acquisition unit 20 performs sampling at a predetermined sampling period in synchronization with the sampling cycle performed by the thermal image acquisition unit 10, and outputs time-series visible image data to the display control unit 30 at a predetermined frame rate.
  • thermal image acquisition unit 10 and the visible image acquisition unit 20 are set so as to each capture an object with the same field of view, and the thermal image and the visible image acquisition unit 20 output by the thermal image acquisition unit 10. Are the same size (number of pixels).
  • the display control unit 30 includes an abnormal region extraction unit 31, an edge region extraction unit 32, a first converted image creation unit 33, a second conversion image creation unit 34, an abnormal temperature information storage unit 35, and a color conversion information storage unit 36.
  • the display control unit 30 creates a temperature monitoring image from the thermal image acquired by the thermal image acquisition unit 10 and the visible image acquired by the visible image acquisition unit 20, for example, a microprocessor, a memory, and
  • the microcomputer includes a peripheral circuit.
  • the memory stores various programs and various data such as a program for detecting an abnormal part based on the thermal image data and a control program for controlling the entire temperature monitoring apparatus 100.
  • a so-called CPU Central Processing Unit
  • the like execute a program stored in the memory, thereby realizing all or a part of each functional unit.
  • the abnormal region extraction unit 31 extracts a region having a predetermined temperature from the thermal image acquired by the thermal image acquisition unit 10. Specifically, the abnormal area extraction unit 31 determines whether or not the temperature data of each pixel constituting the thermal image is a predetermined temperature, and if the temperature data is the predetermined temperature, the abnormal pixel position is abnormally determined. The area is stored in a working memory (not shown). Then, the abnormal region extraction unit 31 outputs the extracted abnormal region data (pixel position and temperature data) to the edge region extraction unit 32 and the first converted image creation unit 33.
  • the predetermined temperature refers to a temperature higher than a threshold temperature stored in the abnormal temperature information storage unit 35.
  • the edge region extraction unit 32 extracts the edge of the abnormal region indicated by the abnormal region data input from the abnormal region extraction unit 31.
  • An edge refers to the outline of an abnormal area.
  • the edge region extraction unit 32 creates a set of pixels whose positions are adjacent from the pixel position of the abnormal region data input from the abnormal region extraction unit 31, and detects the set as an abnormal region. Therefore, there may be a plurality of abnormal areas. Then, the edge area extraction unit 32 detects pixels constituting the edge of the abnormal area, and stores the pixels within a certain width area including the detected pixels as an edge area (pixel position) in the work memory. Then, the edge region extraction unit 32 outputs the extracted edge region data (pixel position and temperature data) to the second converted image creation unit 34.
  • the first converted image creation unit 33 creates a first converted image in which an abnormal region is displayed in the visible image acquired by the visible image acquisition unit 20.
  • the first converted image creation unit 33 rewrites the color data of the pixel in the visible image at the same position (coordinates) as the pixel position of the abnormal region data input from the abnormal region extraction unit 31 to pseudo color data corresponding to the temperature. .
  • the first converted image creation unit 33 obtains pseudo color data corresponding to the temperature indicated by the temperature data of the abnormal area data with reference to the pseudo color information stored in the color conversion information storage unit 36.
  • An example of the first converted image created by the first converted image creating unit 33 is shown as a first converted image P10 in FIG.
  • An abnormal area A10 is displayed in the first converted image P10.
  • the abnormal area A ⁇ b> 10 is solid black for the convenience of display, but actually, different pseudo colors are displayed for each temperature area according to the surface temperature.
  • the second converted image creation unit 34 creates a second converted image in which the edge region of the abnormal region is displayed in the visible image acquired by the visible image acquisition unit 20.
  • the second conversion image creation unit 34 rewrites the color data of the pixel in the visible image at the same position (coordinates) as the pixel position of the edge region data input from the edge region extraction unit 32 to pseudo color data corresponding to the temperature. .
  • the second converted image creation unit 34 obtains pseudo color data corresponding to the temperature indicated by the temperature data of the edge region data with reference to the pseudo color information stored in the color conversion information storage unit 36.
  • An example of the second converted image created by the second converted image creating unit 34 is shown as a second converted image P20 in FIG.
  • An edge region E20 is displayed in the second converted image P20.
  • the edge region E ⁇ b> 20 is black, but actually, different pseudo colors are displayed for each temperature region according to the surface temperature.
  • the abnormal temperature information storage unit 35 stores a predetermined temperature as an abnormal temperature.
  • FIG. 5 shows an example of the configuration and contents of abnormal temperature data 3510 stored in the abnormal temperature information storage unit 35.
  • the abnormal temperature data 3510 includes a threshold temperature 3511.
  • the threshold temperature 3511 indicates a threshold temperature for determining whether or not the temperature is an abnormal temperature. For example, 100 ° C.
  • the abnormal area extraction unit 31 determines that the pixel is an abnormal area pixel.
  • a temperature equal to or lower than the temperature indicated by the threshold temperature 3511 may be an abnormal temperature. Further, the temperature in a predetermined range may be an abnormal temperature, and FIG. 6 shows an example of the configuration and contents of the abnormal temperature data 3520.
  • the abnormal temperature data 3520 includes a lower limit temperature 3521 and an upper limit temperature 3522.
  • the lower limit temperature 3521 indicates the lower limit temperature of the abnormal temperature, and is 70 ° C., for example.
  • the upper limit temperature 3522 indicates the upper limit temperature of the abnormal temperature, and is 100 ° C., for example.
  • the abnormal region extraction unit 31 determines whether the temperature indicated by the pixel temperature data is equal to or higher than the temperature (70 ° C.) indicated by the lower limit temperature 3521 and not higher than the temperature (100 ° C.) indicated by the upper limit temperature 3522.
  • the color conversion information storage unit 36 stores pseudo color information.
  • FIG. 4 shows an example of the configuration and contents of the pseudo color data 3610 stored in the color conversion information storage unit 36.
  • the pseudo color data 3610 includes a temperature 3611, a color 3612, and RGB 3613.
  • Temperature 3611 indicates the temperature.
  • “10 to 30” indicates a temperature range of 10 ° C. or higher and 30 ° C. or lower.
  • the temperature is represented by an integer.
  • the color 3612 indicates a pseudo color of the temperature indicated by the temperature 3611
  • the RGB 3613 indicates the R component, the G component, and the B component of the pseudo color indicated by the color 3612.
  • “(Ro, Go, Bo)” set as the RGB 3613 of the record with the temperature 3611 of “51 to 80” is the color of the pixel (orange ) Is set.
  • the pseudo color data 3610 includes an item of color 3612, but may not be provided.
  • the input unit 40 is connected to the display control unit 30.
  • various commands such as a command for instructing start of temperature monitoring, and various data necessary for executing the temperature monitoring processing, for example,
  • a device that inputs a temperature threshold value for determining an abnormal temperature to the temperature monitoring device 100 such as a keyboard or a mouse.
  • the display unit 50 is connected to the display control unit 30 and is a device that outputs commands and data input from the input unit 40, an image showing an abnormal area, and the like.
  • a CRT (Cathode Ray Tube) display LCD It is a display device such as a (Liquid Crystal Display) or an organic EL (Electroluminescence) display, and may be a printing device such as a printer.
  • a touch panel may be configured from the input unit 40 and the display unit 50.
  • the input unit 40 is a position input device that detects and inputs an operation position such as a resistive film method or a capacitance method
  • the display unit 50 is a display device.
  • a display screen 51 is shown in FIG.
  • the display screen 51 includes a monitoring image display unit 55 corresponding to the display unit 50, buttons 52 and 53 corresponding to the input unit 40, and an area 54.
  • the “temperature region display” button 52 is a button for instructing the display of the first conversion image.
  • the “temperature region display” button 52 When the “temperature region display” button 52 is touched (selected), the frame of only the “temperature region display” button 52 is a thick line.
  • the first converted image (see the first converted image P10 in FIG. 2) is displayed on the monitoring image display unit 55.
  • the “temperature region edge display” button 53 is a button for instructing the display of the second converted image.
  • the frame of only the “temperature region edge display” button 53 is bold.
  • the second converted image (see the second converted image P20 in FIG. 2) is displayed on the monitoring image display unit 55.
  • the area 54 includes an “alternate display” button 541 and a slide bar 542.
  • the “alternate display” button 541 is a button for instructing to alternately display the first converted image and the second converted image at a predetermined time interval.
  • the frame of only the “alternate display” button 541 is displayed with a thick line, and the first converted image and the second converted image are alternately displayed on the monitoring image display unit 55 at predetermined time intervals, for example, 0.5 second intervals, 1 second intervals, etc. (Refer to the first converted image P10 and the second converted image P20 in FIG. 2).
  • This predetermined time interval is a time interval set by the slide bar 542. The user operates the slide bar 542 and sets a time interval in a timely manner so that the image is easy to see for the user.
  • the user touches any one of the “temperature region display” button 52, the “temperature region edge display” button 53, and the “alternate display” button 541 to touch the first converted image and the second converted image. Images can be selectively displayed.
  • FIG. 7 is a flowchart of the temperature monitoring process.
  • the user operates the input unit 40 to store the threshold temperature 3511 of the abnormal temperature data 3510 in the abnormal temperature information storage unit 35 and store the pseudo color data 3610 in the color conversion information storage unit 36. Then, the user operates the input unit 40 to input a command for instructing start of temperature monitoring.
  • the display control unit 30 that has detected that a command for instructing the start of temperature monitoring is input via the input unit 40 instructs the thermal image acquisition unit 10 and the visible image acquisition unit 20 to start image output. In addition, each functional unit in the display control unit 30 is instructed to start processing.
  • the display control unit 30 acquires a visible image from the visible image acquisition unit 20 (step S11), and acquires a thermal image captured at the same timing as when the visible image was captured from the thermal image acquisition unit 10 ( Step S12).
  • the abnormal region extraction unit 31 performs an abnormal temperature region extraction process using the thermal image output from the thermal image acquisition unit 10 (step S13).
  • FIG. 8 is a flowchart of the abnormal temperature region extraction process.
  • the abnormal region extraction unit 31 first reads the threshold temperature set as the threshold temperature 3511 with reference to the abnormal temperature data 3510 of the abnormal temperature information storage unit 35. Then, the abnormal area extraction unit 31 reads the temperature data of one pixel constituting the thermal image (Step S21), and determines whether or not the temperature indicated by the read temperature data exceeds the threshold temperature (Step S22).
  • step S22: No When the temperature data is equal to or lower than the threshold temperature (step S22: No), the abnormal area extraction unit 31 proceeds to processing of the next pixel.
  • step S22: Yes When the temperature data exceeds the threshold temperature (step S22: Yes), the abnormal area extraction unit 31 stores the pixel position and temperature data of one pixel being processed in the working memory as an abnormal area (step S23).
  • the abnormal area extraction unit 31 repeats the processes of steps S21 to S24 until the process of all the pixels in the thermal image is completed (step S24: No).
  • the abnormal region extraction unit 31 uses the extracted pixel position and temperature data of the abnormal region as the edge region extraction unit 32 and the first converted image creation unit 33. Output to.
  • the abnormal area extraction unit 31 does not extract a pixel as an abnormal area
  • the abnormal area extraction unit 31 outputs a message indicating that there is no abnormal area to the edge area extraction unit 32 and the first converted image creation unit 33.
  • the edge region extraction unit 32 that has input the pixel position and temperature data of the abnormal region from the abnormal region extraction unit 31 extracts the edge region indicating the contour of the abnormal region, and extracts the extracted edge region data (pixel position and temperature data). It outputs to the 2 conversion image creation part 34 (step S14). In addition, when the fact that there is no abnormal region is input from the abnormal region extraction unit 31, the edge region extraction unit 32 outputs to the second converted image creation unit 34 that there is no edge region.
  • the first converted image creating unit 33 that has input the abnormal region data (pixel position and temperature data) from the abnormal region extracting unit 31 creates a first converted image (step S15).
  • the second converted image creating unit 34 that has received the edge region data (pixel position and temperature data) from the edge region extracting unit 32 creates a second converted image (step S16).
  • FIG. 9 is a flowchart of the first converted image creation process.
  • step S31 When the first converted image creation unit 33 inputs that there is no abnormal region from the abnormal region extraction unit 31 (step S31: No), the visible image acquired from the visible image acquisition unit 20 is used as the first converted image as a work memory. And finish the process.
  • the first converted image creation unit 33 reads the input temperature data of one pixel of the abnormal region (step S32) and reads The pseudo color data of the temperature indicated by the temperature data is determined with reference to the pseudo color data 3610 (see FIG. 4) (step S33). Specifically, the first converted image creation unit 33 uses the RGB 3613 set as RGB 3613 from the record in which the temperature range including the temperature indicated by the pixel temperature data is set as the temperature 3611 of the pseudo color data 3610. Read the component.
  • the first converted image creation unit 33 rewrites the color data of the visible image pixel at the same position as the pixel position of the one pixel being processed with the read RGB component (step S34).
  • the first converted image creation unit 33 repeats the processing of steps S32 to S35 until the processing of all the pixels in the abnormal region is completed (step S35: No).
  • step S35: Yes the first converted image creation unit 33 stores the visible image in which the color data of the pixels in the abnormal region is rewritten as the first converted image in the working memory. The process is terminated.
  • FIG. 10 is a flowchart of the second converted image creation process.
  • the second converted image creating unit 34 inputs that there is no edge region from the edge region extracting unit 32 (step S41: No), the visible image acquired from the visible image acquiring unit 20 is used as the second converted image as a work memory. And finish the process.
  • the second converted image creation unit 34 reads the input temperature data of one pixel of the edge region (step S42) and reads The pseudo color data (RGB component) of the temperature indicated by the temperature data is read from the pseudo color data 3610 (step S43).
  • the second converted image creation unit 34 rewrites the color data of the visible image pixel at the same position as the pixel position of the one pixel being processed with the read RGB component (step S44).
  • the second converted image creation unit 34 repeats the processing of steps S42 to S45 until the processing of all the pixels in the edge region is completed (step S45: No).
  • the second converted image creating unit 34 stores the visible image in which the color data of the pixels in the edge region is rewritten as the second converted image in the working memory. The process is terminated.
  • the display control unit 30 displays the currently instructed display method, specifically, the “temperature region display” button 52, the “temperature region edge display” button 53, and the “alternate display” on the display screen 51 shown in FIG. Which of the buttons 541 is touched (selected) by the user is acquired from the input unit 40 (step S17).
  • step S17 temperature region display
  • the first converted image is read from the work memory and displayed on the monitoring image display unit 55 (step S18).
  • the “temperature region edge display” button 53 is selected (step S17: edge display)
  • the second converted image is read from the work memory and displayed on the monitoring image display unit 55 (step S19).
  • the “alternate display” button 541 is selected (step S17: alternate display), the first converted image and the second converted image are alternately read from the work memory at predetermined time intervals, and the monitoring image display unit is displayed. (Step S20).
  • steps S11 to S20 are performed each time the thermal image acquisition unit 10 and the visible image acquisition unit 20 each acquire one image.
  • FIG. 11 shows a modified example of the first converted image and the second converted image.
  • the abnormal region in the first converted image is displayed using a pseudo color (see FIG. 2), and the edge region in the second converted image is displayed in a pseudo color corresponding to the temperature.
  • the abnormal area A11 is indicated by a surface, and thus it is easy for the user to visually recognize even if the pseudo color is used, but the edge area is displayed by a line. Depending on the color of the background, it may be difficult to view.
  • the edge region E21 is difficult to visually recognize.
  • the edge region is displayed in a color whose luminance or color difference component is more than a predetermined value compared to the color of the original visible image.
  • FIG. 12 is a flowchart of the second converted image creation process. The process of the same step number as the flowchart of FIG. 10 shows the same process as FIG. Here, the processing of steps S51 to S53, which is processing different from the processing of FIG. 10, will be described.
  • the second converted image creation unit 34 that has read out the pseudo-color RGB component in step S43 reads out the color data (RGB component) of the pixel of the visible image at the same position as the pixel being processed (step S51).
  • the second converted image creation unit 34 has a difference between the luminance value of the pseudo color and the luminance value of the color of the visible image equal to or greater than a predetermined threshold value, and the difference between the color difference components is equal to or greater than the predetermined threshold value. Whether or not (step S52). Specifically, the second converted image creation unit 34 converts the RGB components of the pseudo colors and the colors of the visible image into YUV components using the following equations.
  • R represents an R component
  • G represents a G component
  • B represents a B component
  • Y represents a Y component
  • U represents a U component
  • V represents a V component.
  • the R component, G component, and B component are all 0 to 255, the Y component is 0 to 255, and the U component and V component are -128 to 127.
  • Y 0.299 ⁇ R + 0.587 ⁇ G + 0.114 ⁇ B
  • U ⁇ 0.169 ⁇ R ⁇ 0.331 ⁇ G + 0.500 ⁇ B
  • V 0.500 ⁇ R ⁇ 0.419 ⁇ G ⁇ 0.081 ⁇ B
  • the second converted image creation unit 34 obtains a difference in Y (luminance) component value between the pseudo color and the visible image, and compares the luminance difference with a threshold value.
  • the second converted image extraction unit 34 determines the difference between the U (difference between the blue signal and the luminance signal) component and the V (difference between the red signal and the luminance signal) component between the pseudo color and the visible image. The difference is obtained, and the difference between the obtained color difference components is compared with a threshold value.
  • step S52: Yes If the luminance difference is larger than a threshold, for example, “20”, or if the difference between any of the color difference components is larger than the threshold (step S52: Yes), the second converted image creation unit 34 is processing.
  • the color data of the pixel of the visible image at the same position as the pixel position of the one pixel is rewritten with the RGB component of the pseudo color (step S44).
  • step S52: No when the luminance difference and the difference between any (all) color difference components are equal to or smaller than the threshold value (step S52: No), the second converted image extraction unit 34 creates a new color.
  • the second converted image creating unit 34 adds a threshold value to the Y, U, and V component values calculated from the color data (RGB components) of the pixels of the visible image using the above-described formula, and so on.
  • the U and V components are obtained, and the RGB components are calculated using the following equations with the new Y, U, and V components (step S53).
  • R 1.000 ⁇ Y + 1.402 ⁇
  • V G 1.000 ⁇ Y ⁇ 0.344 ⁇ U ⁇ 0.714 ⁇
  • V B 1.000 x Y + 1.772 x U
  • the second converted image creation unit 34 rewrites the color data of the pixel of the visible image at the same position as the pixel position of the one pixel being processed with the calculated RGB component (step S44).
  • an edge region that is easy for the user to visually recognize such as the edge region E22 in the second converted image P22, is obtained.
  • the threshold is provided for each of the luminance and each color difference component, but a common threshold may be used.
  • FIG. 13 is a flowchart of the second converted image creation process.
  • the process of the same step number as the flowchart of FIG. 10 shows the same process as FIG.
  • the process of steps S61 and S62 which is a process different from the process of FIG. 10, will be described.
  • the second converted image creation unit 34 that has read the temperature data of one pixel in the edge region in step S42 reads the color data (RGB component) of the visible image pixel at the same position as the pixel being processed (step S61).
  • the second converted image creation unit 34 calculates the RGB component of the complementary color using the following formula (step S62).
  • R1, G1, and B1 indicate the R component, G component, and B component of the pixel of the visible image, respectively, and R2, G2, and B2 indicate the R component, G component, and B component of complementary colors, respectively.
  • R2
  • G2
  • B2
  • a visible image when an abnormal region is not extracted, that is, in a normal time, a visible image is displayed.
  • a thermal image may be displayed.
  • the displayed thermal image is a so-called monochrome image in which the pixel value has a luminance corresponding to the temperature indicated by the temperature data of each pixel, or a color image having a pseudo color corresponding to the temperature.
  • the abnormal region is displayed with a pseudo color (color) corresponding to the temperature.
  • the abnormal value is displayed as a so-called infrared image (monochrome image) having a luminance value corresponding to the temperature and having no color difference component. It is good to do.
  • RGB 3613 of the pseudo color data 3610 in which the temperature and the pseudo color are associated
  • a luminance value associated with the temperature is set.
  • the 1st conversion image extraction part 33 and the 2nd conversion image extraction part 34 produce a conversion image, it is good also as calculating a luminance value from temperature using a predetermined formula. In these cases, the color difference component in the converted image is zero.
  • the visible image is a color image, but may be a monochrome image.
  • a temperature monitoring apparatus includes a thermal image acquisition unit that acquires a thermal image indicating a heat distribution on a surface of an object, a visible image acquisition unit that acquires a visible image of the object, and the thermal image.
  • Region extracting means for extracting a temperature region of a predetermined temperature from the image
  • first image creating means for creating a first converted image in which the color of the region corresponding to the temperature region in the visible image is changed
  • in the visible image The second image creating means for creating a second converted image in which the color of the region corresponding to the edge portion of the temperature region is changed, and the first converted image and the second converted image are selectively switched and displayed.
  • a display control means for controlling the color of the region corresponding to the edge portion of the temperature region.
  • a temperature monitoring method is a temperature monitoring method used in a temperature monitoring device that monitors a surface temperature of an object, and a thermal image that acquires a thermal image indicating a heat distribution of the surface of the object.
  • An image acquisition step a visible image acquisition step of acquiring a visible image of the object, a region extraction step of extracting a temperature region of a predetermined temperature from the thermal image, and a region corresponding to the temperature region in the visible image
  • a display control step of selectively switching and displaying the first converted image and the second converted image.
  • an image in which the color of a region where the surface temperature of the object is a predetermined temperature is changed is displayed, so that the user can determine that the surface temperature of the object is a predetermined temperature. It is possible to immediately recognize that the image has changed, and an image in which only the color of the edge portion of the area where the temperature has reached is changed is displayed. It becomes possible to know in detail which part of the object has reached the predetermined temperature.
  • the display control means selectively displays the first converted image and the second converted image in accordance with an instruction from the outside.
  • the display control means is characterized in that the first converted image and the second converted image are alternately switched and displayed at a predetermined time interval.
  • an image in which the color of the area where the surface temperature of the target object is the predetermined temperature is changed alternately and the color of only the edge portion of the area where the predetermined temperature is reached are changed at predetermined time intervals. Therefore, the user can immediately recognize that the surface temperature of the object has reached the predetermined temperature, and the normal visible image inside the edge portion indicates which part of the object has the predetermined temperature. It becomes possible to know in detail whether the temperature has been reached.
  • the thermal image is composed of a plurality of pixels, each pixel has temperature data indicating the temperature, and a pixel color storage unit that stores the temperature and the color in association with each other
  • the first image creating means further includes a temperature indicated by the temperature data of each pixel in the temperature region in the thermal image indicating the color of each pixel in the region corresponding to the temperature region in the visible image.
  • the first converted image is created by changing the color to the color stored in the pixel color storage means in association with the second image creating means, and the second image creating means corresponds to an edge portion of the temperature region in the visible image Changing the color of each pixel in the area to be the color stored in the pixel color storage unit in association with the temperature indicated by the temperature data of each pixel in the edge portion in the thermal image, Create a converted image
  • the second image creating unit includes the luminance and chrominance components of each pixel color in the region corresponding to the edge portion of the temperature region in the visible image, and the edge in the thermal image.
  • the difference between the luminance of the color stored in the pixel color storage means and the difference between each of the color difference components in association with the temperature indicated by the temperature data of each pixel of the portion has a predetermined threshold value. If it is lower, the color of each pixel in the edge portion in the visible image is changed to a color in which the difference between the luminance and the color difference component from the color is greater than or equal to the threshold value.
  • the edge portion since the luminance and color difference components of the edge portion are displayed with an image having a difference equal to or greater than a predetermined threshold with the luminance and color difference components of the color corresponding to the edge portion in the visible image, the user can The possibility that the edge portion can be easily visually recognized increases.
  • the second image creation unit changes the color of each pixel in the region corresponding to the edge portion of the temperature region in the visible image to a complementary color of the color, and performs the second conversion. It is characterized by creating an image.
  • the edge portion is displayed as a complementary color of the color corresponding to the edge portion in the visible image, the edge portion is conspicuous and the user may be able to easily see the image. Get higher.
  • the thermal image includes a plurality of pixels, each pixel has temperature data indicating temperature, and the first image creating unit is configured to perform the temperature region in the visible image. Changing the color of each pixel in the region corresponding to 1 to a color having a luminance value corresponding to the temperature indicated by the temperature data of each pixel in the temperature region in the thermal image and having no color difference component.
  • One converted image is created, and the second image creating means has each pixel of the edge portion in the thermal image having the color of each pixel of the region corresponding to the edge portion of the temperature region in the visible image.
  • the second converted image is created by changing to a color having a luminance value corresponding to the temperature indicated by the temperature data and having no color difference component.
  • the predetermined temperature is a temperature exceeding a predetermined temperature threshold.
  • the predetermined temperature is a temperature equal to or lower than a predetermined temperature threshold value.
  • the predetermined temperature is not more than a predetermined upper limit temperature threshold and is not less than a predetermined lower limit temperature threshold.
  • the above-described temperature monitoring device further includes temperature acquisition means for acquiring the temperature threshold value from the outside of the device itself.
  • an instruction to alternately switch and display the first converted image and the second converted image at a predetermined time interval, an instruction to display the first converted image, and a second converted image are displayed.
  • the temperature of the surface of the object can be monitored in detail in a timely manner.
  • the display device further includes time interval acquisition means for acquiring a predetermined time interval for alternately switching and displaying the first converted image and the second converted image from the outside of the device itself.
  • the control means is characterized in that the first converted image and the second converted image are alternately switched and displayed at the time interval acquired by the time interval acquiring means.
  • the temperature monitoring device and the temperature monitoring method it is possible to recognize that a portion having a surface temperature of a predetermined temperature has occurred in the object, and to display an image that can easily recognize details of the portion having the predetermined temperature. Can do.
  • a temperature monitoring device capable of recognizing that a portion having a surface temperature of a predetermined temperature has occurred in an object and displaying an image capable of easily recognizing details of the portion having the predetermined temperature. And a temperature monitoring method can be provided.

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Radiation Pyrometers (AREA)

Abstract

　温度監視装置は、対象物の表面の熱分布を示す熱画像を取得し、前記対象物の可視画像を取得し、前記熱画像から所定の温度の温度領域を抽出し、前記可視画像内の前記温度領域に該当する領域の色を変更した第１画像を作成し、前記可視画像内の前記温度領域のエッジ部分に該当する領域の色を変更した第２画像を作成し、前記第１画像と前記第２画像とを選択的に切り替えて表示する。そのため、表面温度が所定温度である箇所が対象物に生じたことが認識でき、かつ、所定の温度である箇所の詳細を容易に認識できる画像を表示することができる。

Description

温度監視装置、及び、温度監視方法
　本発明は、物体表面の温度を監視する装置に関し、特に、熱画像を用いた監視技術に関する。
　従来、測定対象物表面の温度分布を検出する装置として、赤外線サーモグラフィ装置が知られている。この赤外線サーモグラフィ装置は、測定対象物が放射している赤外線エネルギーを２次元に配列された赤外線検出素子により検出し、検出した赤外線エネルギーのレベルに応じた所定の色（疑似カラー）を各赤外線検出素子に対応する画素の色として画像を作成し、表示する。測定対象物が放射している赤外線エネルギーの量は、測定対象物表面の温度と比例するため、赤外線サーモグラフィ―装置が表示する画像は、測定対象物表面の温度分布を表す画像となる。
　このように、赤外線サーモグラフィ装置で測定対象物を測定することにより、測定対象物表面の温度分布を知ることはできるが、温度分布を表した画像からは測定対象物の正確な形状が把握し難いため、測定対象物のどの部分が異常な温度（所定の温度）になっているのかを知ることは難しかった。
　そこで、対象物の白黒の可視画像を表示し、その白黒の可視画像内の異常な温度部分のみを、疑似カラーとして表示する技術が提案されている（特許文献１参照）。また、測定対象物（建造物）の熱画像（温度分布画像）と可視画像との表示濃度比率を可変にして、熱画像と可視画像とを重ね合わせて表示し、ユーザが建造物の欠陥部分を特定できるようにする技術も提案されている（特許文献２参照）。
　しかし、上記特許文献１の技術では、対象物全体の形状は把握でき、異常な温度となっている部分（疑似カラーでの表示部分）は把握できるが、疑似カラー部分の詳細、つまり、対象物のどの部分の温度が何度であるかというような情報を正確に知ることはできない。また、上記特許文献２の技術では、画像全体を１つの表示濃度比率で表示させるので、１つの画像内に複数の測定対象物（建造物）が存在する場合には、重ね合わせた画像が、１つの建造物にとっては欠陥部分を特定しやすい画像であったとしても、他の建造物にとっては欠陥部分を特定し難い画像である場合が発生し得る。
特開平０９－０２１７０４号公報 特開２００５－０１６９９１号公報
　本発明は、表面温度が所定温度である箇所が対象物に生じたことが認識でき、かつ、所定の温度である箇所の詳細を容易に認識できる画像を表示する装置及び該方法を提供することを目的とする。
　本発明の一態様にかかる温度監視装置は、対象物の表面の熱分布を示す熱画像を取得する熱画像取得手段と、前記対象物の可視画像を取得する可視画像取得手段と、前記熱画像から所定の温度の温度領域を抽出する領域抽出手段と、前記可視画像内の前記温度領域に該当する領域の色を変更した第１変換画像を作成する第１画像作成手段と、前記可視画像内の前記温度領域のエッジ部分に該当する領域の色を変更した第２変換画像を作成する第２画像作成手段と、前記第１変換画像と前記第２変換画像とを選択的に切り替えて表示する表示制御手段とを備える。そのため、表面温度が所定温度である箇所が対象物に生じたことが認識でき、かつ、所定の温度である箇所の詳細を容易に認識できる画像を表示することができる。
　上記並びにその他の本発明の目的、特徴及び利点は、以下の詳細な記載と添付図面から明らかになる。
本発明の実施形態による温度監視装置の機能ブロックの例を示す図である。 図１に示す温度監視装置の第１変換画像及び第２変換画像の例を示す図である。 図１に示す温度監視装置の表示画面の例を示す図である。 図１に示す温度監視装置の疑似色データの構成及び内容の例を示す図である。 図１に示す温度監視装置の異常温度データの構成及び内容の例を示す図である。 図１に示す温度監視装置の異常温度データの構成及び内容の例を示す図である。 図１に示す温度監視装置の温度監視処理のフローチャートである。 図１に示す温度監視装置の異常温度領域抽出処理のフローチャートである。 図１に示す温度監視装置の第１変換画像作成処理のフローチャートである。 図１に示す温度監視装置の第２変換画像作成処理のフローチャートである。 図１に示す温度監視装置の第１変換画像及び第２変換画像の変形例を示す図である。 図１に示す温度監視装置の変形例（１）の第２変換画像作成処理のフローチャートである。 図１に示す温度監視装置の変形例（２）の第２変換画像作成処理のフローチャートである。
　以下、本発明にかかる実施の一形態を図面に基づいて説明する。
＜実施形態１＞
　＜構成＞
　以下、本発明の一実施の形態における温度監視装置１００について説明する。図１は、温度監視装置１００の機能ブロックの構成例を示す図である。
　温度監視装置１００は、熱画像取得部１０、可視画像取得部２０、表示制御部３０、入力部４０、及び、表示部５０を備える。
　熱画像取得部１０は、いわゆる赤外線カメラであり、対象物の表面温度の温度分布を表す熱画像を取得する。詳細には、熱画像取得部１０は、所定の赤外領域の波長に感度を持つ２次元に配列された赤外線検出素子を有し、赤外線検出素子から出力された電流である映像データそれぞれを、電圧の映像データに変換する。そして、熱画像取得部１０は、アナログデータである電圧の映像データに増幅等の必要な処理を行い、デジタルデータの映像データ（熱画像）に変換して出力する。赤外線検出素子から出力された電流量（赤外線エネルギーの量）は、温度と比例するので、熱画像は、各画素の温度データにより構成されていることになる。
　熱画像取得部１０は、所定のサンプリング周期でサンプリングし、所定のフレームレート（例えば、３０フレーム／秒）で時系列の熱画像データを表示制御部３０に出力する。
　可視画像取得部２０は、いわゆる通常のカメラであり、対象物の外観を撮像した撮像画像（以下、「可視画像」という。）を取得する。詳細には、可視画像取得部２０は、ベイヤー配列で配列されたＲ、Ｇ、Ｂの色フィルタを備えた、人の目で見える波長に感度を持つ２次元に配列された光電変換素子を有し、光電変換素子から出力された電流である映像データそれぞれを、電圧の映像データに変換する。そして、可視画像取得部２０は、アナログデータである映像データに増幅等の必要な処理を行い、デジタルデータの映像データ（可視画像）に変換して出力する。実施形態では、可視画像は、カラー画像であり、各画素の色データ（ＲＧＢ成分）で構成されているものとする。
　可視画像取得部２０は、熱画像取得部１０が行うサンプリング周期と同期をとって、所定のサンプリング周期でサンプリングし、所定のフレームレートで時系列の可視画像データを表示制御部３０に出力する。
　尚、熱画像取得部１０及び可視画像取得部２０は、それぞれが対象物を同一視野で撮像するように設定されているものとし、熱画像取得部１０が出力する熱画像と可視画像取得部２０が出力する可視画像とは、同一サイズ（画素数）であるものとする。
　表示制御部３０は、異常領域抽出部３１、エッジ領域抽出部３２、第１変換画像作成部３３、第２変換画像作成部３４、異常温度情報記憶部３５、及び、色変換情報記憶部３６を備える。表示制御部３０は、熱画像取得部１０で取得された熱画像、および、可視画像取得部２０で取得された可視画像から、温度監視画像を作成するものであり、例えば、マイクロプロセッサ、メモリおよびその周辺回路を備えるマイクロコンピュータによって構成される。メモリには、熱画像データに基づいて異常個所を検出するためのプログラムや、温度監視装置１００全体を制御するための制御プログラム等の各種のプログラムや各種データが記憶され、いわゆるＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）等であるマイクロプロセッサが、メモリに記憶されているプログラムを実行することにより、各機能部の全部又は一部を実現する。
　異常領域抽出部３１は、熱画像取得部１０により取得された熱画像から、所定の温度の領域を抽出する。具体的には、異常領域抽出部３１は、熱画像を構成する各画素の温度データが、所定の温度であるか否かを判断し、所定の温度である場合は、その画素の位置を異常領域として作業メモリ（不図示）に記憶する。そして、異常領域抽出部３１は、抽出した異常領域データ（画素位置と温度データ）を、エッジ領域抽出部３２、および、第１変換画像作成部３３に出力する。実施形態では、所定の温度とは、異常温度情報記憶部３５に記憶されている閾値の温度より高い温度をいうものとする。
　エッジ領域抽出部３２は、異常領域抽出部３１から入力した異常領域データが示す異常領域のエッジを抽出する。エッジとは、異常領域の輪郭をいう。エッジ領域抽出部３２は、異常領域抽出部３１から入力した異常領域データの画素位置から、位置が隣接する画素の集合を作成し、その集合を異常領域として検出する。従って、異常領域は、複数ある場合もある。そして、エッジ領域抽出部３２は、異常領域のエッジを構成する画素を検出し、検出した画素を含む一定幅の領域内にある画素をエッジ領域（画素位置）として作業メモリに記憶する。そして、エッジ領域抽出部３２は、抽出したエッジ領域データ（画素位置と温度データ）を、第２変換画像作成部３４に出力する。
　第１変換画像作成部３３は、可視画像取得部２０が取得した可視画像内に異常領域が表示された第１変換画像を作成する。第１変換画像作成部３３は、異常領域抽出部３１から入力した異常領域データの画素位置と同じ位置（座標）の、可視画像内の画素の色データを、温度に応じた疑似色データに書き換える。第１変換画像作成部３３は、異常領域データの温度データが示す温度に応じた疑似色データを、色変換情報記憶部３６に記憶されている疑似色情報を参照して求める。第１変換画像作成部３３が作成する第１変換画像の例を、図２の第１変換画像Ｐ１０に示す。第１変換画像Ｐ１０内には、異常領域Ａ１０が表示されている。図２では、表示の便宜上、異常領域Ａ１０は黒一色となっているが、実際には、表面温度に応じて、温度の領域ごとに異なる疑似色が表示されている。
　第２変換画像作成部３４は、可視画像取得部２０が取得した可視画像内に異常領域のエッジ領域が表示された第２変換画像を作成する。第２変換画像作成部３４は、エッジ領域抽出部３２から入力したエッジ領域データの画素位置と同じ位置（座標）の、可視画像内の画素の色データを、温度に応じた疑似色データに書き換える。第２変換画像作成部３４は、エッジ領域データの温度データが示す温度に応じた疑似色データを、色変換情報記憶部３６に記憶されている疑似色情報を参照して求める。第２変換画像作成部３４が作成する第２変換画像の例を、図２の第２変換画像Ｐ２０に示す。第２変換画像Ｐ２０内には、エッジ領域Ｅ２０が表示されている。図２では、表示の便宜上、エッジ領域Ｅ２０が黒一色となっているが、実際には、表面温度に応じて、温度の領域ごとに異なる疑似色が表示されている。
　異常温度情報記憶部３５は、異常温度とする所定の温度を記憶する。
　図５に、異常温度情報記憶部３５が記憶している異常温度データ３５１０の構成及び内容の例を示す。異常温度データ３５１０は、閾値温度３５１１を備える。閾値温度３５１１は、温度が異常温度であるか否か判断するための閾値の温度を示す。例えば、１００℃である。異常領域抽出部３１は、画素の温度データが示す温度が、閾値温度３５１１が示す温度を超える場合、その画素を異常領域の画素と判断する。
　尚、閾値温度３５１１が示す温度以下の温度を、異常温度としてもよい。また、所定の範囲の温度を異常温度としてもよく、図６に、異常温度データ３５２０の構成及び内容の例を示す。異常温度データ３５２０は、下限温度３５２１及び上限温度３５２２を備える。下限温度３５２１は、異常温度の下限の温度を示し、例えば７０℃である。また、上限温度３５２２は、異常温度の上限の温度を示し、例えば、１００℃である。この場合、異常領域抽出部３１は、画素の温度データが示す温度が、下限温度３５２１が示す温度（７０℃）以上であり、かつ、上限温度３５２２が示す温度（１００℃）以下の場合、その画素を異常領域の画素と判断する。
　色変換情報記憶部３６は、疑似色情報を記憶する。
　図４に、色変換情報記憶部３６が記憶している疑似色データ３６１０の構成及び内容の例を示す。疑似色データ３６１０は、温度３６１１、色３６１２、及び、ＲＧＢ３６１３を備える。
　温度３６１１は、温度を示す。例えば、「１０～３０」は、１０℃以上であり３０℃以下の温度の範囲を示す。尚、実施形態では、温度は、整数で示されるものとする。
　色３６１２は、温度３６１１が示す温度の疑似色を示し、ＲＧＢ３６１３は、色３６１２が示す疑似色のＲ成分、Ｇ成分、Ｂ成分を示す。例えば、画素の温度データが示す温度が６０℃である場合、温度３６１１が「５１～８０」のレコードのＲＧＢ３６１３として設定されている「（Ｒｏ，Ｇｏ，Ｂｏ）」が、その画素の色（オレンジ）として設定される。尚、図４では、説明の便宜上、疑似色データ３６１０は、色３６１２の項目を備えることとしているが、なくてもよい。
　図１に戻って、入力部４０は、表示制御部３０に接続され、例えば、温度監視の開始を指示するコマンド等の各種コマンド、及び、温度監視処理を実行する上で必要な各種データ、例えば、異常温度と判断するための温度閾値等を、温度監視装置１００に入力する機器であり、例えば、キーボードやマウス等である。
　表示部５０は、表示制御部３０に接続され、入力部４０から入力されたコマンドやデータ、及び、異常領域を示した画像等を出力する機器であり、例えばＣＲＴ（Ｃａｔｈｏｄｅ　Ｒａｙ　Ｔｕｂｅ）ディスプレイ、ＬＣＤ（Ｌｉｑｕｉｄ　Ｃｒｙｓｔａｌ　Ｄｉｓｐｌａｙ）および有機ＥＬ（Ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイ等の表示装置であり、プリンタ等の印刷装置等であってもよい。
　尚、入力部４０及び表示部５０からタッチパネルが構成されてもよい。このタッチパネルを構成する場合において、入力部４０は、例えば抵抗膜方式や静電容量方式等の操作位置を検出して入力する位置入力装置であり、表示部５０は、表示装置である。タッチパネルを用いた場合の入力部４０及び表示部５０の例として、表示画面５１を図３に示す。表示画面５１は、表示部５０に相当する監視画像表示部５５、入力部４０に相当するボタン５２、５３、及び、エリア５４を備える。「温度領域表示」ボタン５２は、第１変換画像の表示を指示するボタンであり、「温度領域表示」ボタン５２がタッチ（選択）されると、「温度領域表示」ボタン５２のみの枠が太線で表示され、監視画像表示部５５に第１変換画像（図２の第１変換画像Ｐ１０参照）が表示される。「温度領域エッジ表示」ボタン５３は、第２変換画像の表示を指示するボタンであり、「温度領域エッジ表示」ボタン５３がタッチされると、「温度領域エッジ表示」ボタン５３のみの枠が太線で表示され、監視画像表示部５５に第２変換画像（図２の第２変換画像Ｐ２０参照）が表示される。エリア５４は、「交替表示」ボタン５４１、及び、スライドバー５４２を備える。「交替表示」ボタン５４１は、第１変換画像と第２変換画像とを、所定の時間間隔で交互に表示させることを指示するボタンであり、「交替表示」ボタン５４１がタッチされると、「交替表示」ボタン５４１のみの枠が太線で表示され、監視画像表示部５５に第１変換画像と第２変換画像とが所定の時間間隔、例えば、０．５秒間隔、１秒間隔等で交互に表示される（図２の第１変換画像Ｐ１０、第２変換画像Ｐ２０参照）。この所定の時間間隔は、スライドバー５４２で設定された時間間隔である。ユーザは、スライドバー５４２を操作し、ユーザにとって見やすい画像となるように、適時、時間間隔を設定する。
　表示画面５１において、ユーザは、「温度領域表示」ボタン５２、「温度領域エッジ表示」ボタン５３、及び、「交替表示」ボタン５４１のいずれかをタッチすることにより、第１変換画像と第２変換画像とを選択的に表示させることが可能となる。
　＜動作＞
　実施形態の温度監視装置１００が行う、温度監視処理について図７～図１０を用いて説明する。
　図７は、温度監視処理のフローチャートである。
　まず、ユーザは、入力部４０を操作して、異常温度情報記憶部３５に異常温度データ３５１０の閾値温度３５１１を記憶させ、色変換情報記憶部３６に疑似色データ３６１０を記憶させる。そして、ユーザは、入力部４０を操作して、温度監視開始を指示するコマンドを入力する。
　入力部４０を介して、温度監視の開始を指示するコマンドが入力されたことを検知した表示制御部３０は、熱画像取得部１０及び可視画像取得部２０に、画像の出力の開始を指示し、また、表示制御部３０内の各機能部に、処理の開始を指示する。
　まず、表示制御部３０は、可視画像取得部２０から可視画像を取得し（ステップＳ１１）、可視画像が撮像されたタイミングと同じタイミングで撮像された熱画像を熱画像取得部１０から取得する（ステップＳ１２）。
　異常領域抽出部３１は、熱画像取得部１０から出力された熱画像を用いて、異常温度領域抽出処理を行う（ステップＳ１３）。
　ここで、図８を用いて、異常温度領域抽出処理を説明する。図８は、異常温度領域抽出処理のフローチャートである。
　異常領域抽出部３１は、まず、異常温度情報記憶部３５の異常温度データ３５１０を参照し、閾値温度３５１１として設定されている閾値温度を読み出す。そして、異常領域抽出部３１は、熱画像を構成する１画素の温度データを読み出し（ステップＳ２１）、読み出した温度データが示す温度が閾値温度を超えているか否かを判断する（ステップＳ２２）。
　温度データが閾値温度以下の場合（ステップＳ２２：Ｎｏ）、異常領域抽出部３１は、次の画素の処理に移る。温度データが閾値温度を超える場合（ステップＳ２２：Ｙｅｓ）、異常領域抽出部３１は、処理中の１画素の画素位置及び温度データを、異常領域として作業メモリに記憶する（ステップＳ２３）。
　次に、異常領域抽出部３１は、熱画像内の全画素の処理が終了するまで（ステップＳ２４：Ｎｏ）、ステップＳ２１～Ｓ２４の処理を繰り返す。熱画像内の全画素の処理が終了すると（ステップＳ２４：Ｙｅｓ）、異常領域抽出部３１は、抽出した異常領域の画素位置及び温度データを、エッジ領域抽出部３２及び第１変換画像作成部３３に出力する。尚、異常領域抽出部３１は、異常領域として画素を抽出しなかった場合は、異常領域が無い旨を、エッジ領域抽出部３２及び第１変換画像作成部３３に出力する。
　これで、図７のステップＳ１３の異常温度領域抽出処理が終了する。
　異常領域抽出部３１から異常領域の画素位置及び温度データを入力したエッジ領域抽出部３２は、異常領域の輪郭を示すエッジ領域を抽出し、抽出したエッジ領域データ（画素位置及び温度データ）を第２変換画像作成部３４に出力する（ステップＳ１４）。尚、エッジ領域抽出部３２は、異常領域抽出部３１から異常領域が無い旨を入力した場合は、エッジ領域が無い旨を第２変換画像作成部３４に出力する。
　異常領域抽出部３１から異常領域データ（画素位置及び温度データ）を入力した第１変換画像作成部３３は、第１変換画像を作成する（ステップＳ１５）。また、エッジ領域抽出部３２からエッジ領域データ（画素位置及び温度データ）を入力した第２変換画像作成部３４は、第２変換画像を作成する（ステップＳ１６）。
　ここで、図９を用いて、ステップＳ１５の第１変換画像作成処理を説明する。図９は、第１変換画像作成処理のフローチャートである。
　第１変換画像作成部３３は、異常領域抽出部３１から異常領域が無い旨を入力した場合（ステップＳ３１：Ｎｏ）、可視画像取得部２０から取得した可視画像を第１変換画像として、作業メモリに記憶し、処理を終了する。
　異常領域抽出部３１から異常領域の画素データを入力した場合（ステップＳ３１：Ｙｅｓ）、第１変換画像作成部３３は、入力した異常領域の１画素の温度データを読み出し（ステップＳ３２）、読み出した温度データが示す温度の疑似色データを、疑似色データ３６１０（図４参照）を参照して決定する（ステップＳ３３）。具体的には、第１変換画像作成部３３は、疑似色データ３６１０の温度３６１１として、画素の温度データが示す温度が含まれる温度範囲が設定されているレコードから、ＲＧＢ３６１３として設定されているＲＧＢ成分を読み出す。
　そして、第１変換画像作成部３３は、処理中の１画素の画素位置と同じ位置の、可視画像の画素の色データを、読み出したＲＧＢ成分で書き換える（ステップＳ３４）。
　次に、第１変換画像作成部３３は、異常領域の全画素の処理が終了するまで（ステップＳ３５：Ｎｏ）、ステップＳ３２～Ｓ３５の処理を繰り返す。異常領域の全画素の処理が終了すると（ステップＳ３５：Ｙｅｓ）、第１変換画像作成部３３は、異常領域の画素の色データを書き換えた可視画像を、第１変換画像として作業メモリに記憶し、処理を終了する。
　これで、図７のステップＳ１５の第１変換画像作成処理が終了する。
　次に、図１０を用いて、図７のステップＳ１６の第２変換画像作成処理を説明する。図１０は、第２変換画像作成処理のフローチャートである。
　第２変換画像作成部３４は、エッジ領域抽出部３２からエッジ領域が無い旨を入力した場合（ステップＳ４１：Ｎｏ）、可視画像取得部２０から取得した可視画像を第２変換画像として、作業メモリに記憶し、処理を終了する。
　エッジ領域抽出部３２からエッジ領域の画素データを入力した場合（ステップＳ４１：Ｙｅｓ）、第２変換画像作成部３４は、入力したエッジ領域の１画素の温度データを読み出し（ステップＳ４２）、読み出した温度データが示す温度の疑似色データ（ＲＧＢ成分）を、疑似色データ３６１０から読み出す（ステップＳ４３）。
　そして、第２変換画像作成部３４は、処理中の１画素の画素位置と同じ位置の、可視画像の画素の色データを、読み出したＲＧＢ成分で書き換える（ステップＳ４４）。
　次に、第２変換画像作成部３４は、エッジ領域の全画素の処理が終了するまで（ステップＳ４５：Ｎｏ）、ステップＳ４２～Ｓ４５の処理を繰り返す。エッジ領域の全画素の処理が終了すると（ステップＳ４５：Ｙｅｓ）、第２変換画像作成部３４は、エッジ領域の画素の色データを書き換えた可視画像を、第２変換画像として作業メモリに記憶し、処理を終了する。
　これで、図７のステップＳ１６の第２変換画像作成処理が終了する。
　表示制御部３０は、現在指示されている表示方法、具体的には、図３に示す表示画面５１の「温度領域表示」ボタン５２、「温度領域エッジ表示」ボタン５３、及び、「交替表示」ボタン５４１のうちの何れのボタンが、ユーザによりタッチ（選択）されているか入力部４０から取得する（ステップＳ１７）。「温度領域表示」ボタン５２が選択されている場合（ステップＳ１７：温度領域表示）は、作業メモリから第１変換画像を読み出して監視画像表示部５５に表示する（ステップＳ１８）。「温度領域エッジ表示」ボタン５３が選択されている場合（ステップＳ１７：エッジ表示）は、作業メモリから第２変換画像を読み出して監視画像表示部５５に表示する（ステップＳ１９）。また、「交替表示」ボタン５４１が選択されている場合（ステップＳ１７：交替表示）は、作業メモリから第１変換画像と第２変換画像とを所定時間間隔で交互に読み出して、監視画像表示部５５に表示する（ステップＳ２０）。
　尚、ステップＳ１１～Ｓ２０は、熱画像取得部１０及び可視画像取得部２０が、それぞれ１画像を取得する毎に行われるものとする。
＜変形例＞
　図１１に、第１変換画像、及び、第２変換画像の変形例を示す。
　（１）実施形態では、第１変換画像内の異常領域を、疑似色を用いて表示し（図２参照）、第２変換画像においてエッジ領域を温度に応じた疑似色で表示することとしている。しかし、図１１に示すように、第１変換画像Ｐ１１において異常領域Ａ１１は、面で示されるため、疑似色を用いてもユーザにとって視認し易いが、エッジ領域は、線で表示されるため、背景の色によっては視認し難くなる場合がある。第２変換画像Ｐ２１において、エッジ領域Ｅ２１が、視認し難いようにである。
　そこで、変形例（１）では、エッジ領域を、元の可視画像の色と比べて、輝度又は色差成分が所定の値以上の離れている色で表示する。この場合の、第２変換画像作成処理を、図１２を用いて説明する。図１２は、第２変換画像作成処理のフローチャートである。図１０のフローチャートと同じステップ番号の処理は、図１０と同じ処理を示す。ここでは、図１０の処理と異なる処理であるステップＳ５１～Ｓ５３の処理を説明する。
　ステップＳ４３において疑似色のＲＧＢ成分を読み出した第２変換画像作成部３４は、処理中の画素と同じ位置の、可視画像の画素の色データ（ＲＧＢ成分）を読み出す（ステップＳ５１）。
　そして、第２変換画像作成部３４は、疑似色の輝度値と可視画像の色の輝度値との差が、所定の閾値以上であり、かつ、色差成分の差が、所定の閾値以上であるか否かを判断する（ステップＳ５２）。詳細には、第２変換画像作成部３４は、疑似色及び可視画像の色それぞれのＲＧＢ成分から、以下の式を用いてＹＵＶ成分に変換する。ＲはＲ成分を示し、ＧはＧ成分を示し、ＢはＢ成分を示し、ＹはＹ成分を示し、ＵはＵ成分を示し、ＶはＶ成分を示す。尚、Ｒ成分、Ｇ成分、Ｂ成分ともに、０～２５５であり、Ｙ成分は、０～２５５、Ｕ成分及びＶ成分は、－１２８～１２７であるとする。
Ｙ　＝　０．２９９×Ｒ　＋　０．５８７×Ｇ　＋　０．１１４×Ｂ
Ｕ　＝－０．１６９×Ｒ　－　０．３３１×Ｇ　＋　０．５００×Ｂ
Ｖ　＝　０．５００×Ｒ　－　０．４１９×Ｇ　－　０．０８１×Ｂ
第２変換画像作成部３４は、疑似色と可視画像とのＹ（輝度）成分の値の差を求め、輝度差を閾値と比較する。また、第２変換画像抽出部３４は、疑似色と可視画像とのＵ（青色信号と輝度信号の差）成分の値の差、及び、Ｖ（赤色信号と輝度信号の差）成分の値の差を求め、求めたそれぞれの色差成分の差を、閾値と比較する。
　輝度差が、閾値、例えば、「２０」より大きいか、または、いずれかの色差成分の差が、閾値より大きい場合（ステップＳ５２：Ｙｅｓ）には、第２変換画像作成部３４は、処理中の１画素の画素位置と同じ位置の、可視画像の画素の色データを、疑似色のＲＧＢ成分で書き換える（ステップＳ４４）。一方、輝度差、及び、いずれもの（全ての）色差成分の差が閾値以下の場合（ステップＳ５２：Ｎｏ）には、第２変換画像抽出部３４は、新しい色を作成する。第２変換画像作成部３４は、可視画像の画素の色データ（ＲＧＢ成分）から上記式を用いて算出したＹ、Ｕ、Ｖ成分の値に閾値の値を加算する等して、新しいＹ、Ｕ、Ｖ成分を求め、新しいＹ、Ｕ、Ｖ成分で、以下の式を用いて、ＲＧＢ成分を算出する（ステップＳ５３）。
Ｒ　＝　１．０００×Ｙ　＋　１．４０２×Ｖ
Ｇ　＝　１．０００×Ｙ　－　０．３４４×Ｕ　－　０．７１４×Ｖ
Ｂ　＝　１．０００×Ｙ　＋　１．７７２×Ｕ
そして、第２変換画像作成部３４は、処理中の１画素の画素位置と同じ位置の、可視画像の画素の色データを、算出したＲＧＢ成分で書き換える（ステップＳ４４）。このように、元の色と一定の輝度差又は色差成分差がある色でエッジ領域を表示することにより、第２変換画像Ｐ２２におけるエッジ領域Ｅ２２のように、ユーザが視認し易いエッジ領域となる。尚、閾値は、輝度、各色差成分それぞれに設けられているものとするが、共通の閾値を用いてもよい。
　（２）変形例（１）では、エッジ領域を、元の可視画像の色と比べて、輝度等が所定の値以上の離れている色で表示する場合を説明したが、変形例（２）では、元の可視画像の色の補色で表示する。
　この場合の、第２変換画像作成処理を、図１３を用いて説明する。図１３は、第２変換画像作成処理のフローチャートである。図１０のフローチャートと同じステップ番号の処理は、図１０と同じ処理を示す。ここでは、図１０の処理と異なる処理であるステップＳ６１、Ｓ６２の処理を説明する。
　ステップＳ４２においてエッジ領域の１画素の温度データを読み出した第２変換画像作成部３４は、処理中の画素と同じ位置の、可視画像の画素の色データ（ＲＧＢ成分）を読み出す（ステップＳ６１）。
　そして、第２変換画像作成部３４は、以下の式を用いて、補色のＲＧＢ成分を算出する（ステップＳ６２）。Ｒ１、Ｇ１、Ｂ１は、それぞれ、可視画像の画素のＲ成分、Ｇ成分、Ｂ成分を示し、Ｒ２、Ｇ２、Ｂ２はそれぞれ、補色のＲ成分、Ｇ成分、Ｂ成分を示すものとする。
Ｒ２＝｜Ｒ１－２５５｜
Ｇ２＝｜Ｇ１－２５５｜
Ｂ２＝｜Ｂ１－２５５｜
そして、第２変換画像作成部３４は、処理中の１画素の画素位置と同じ位置の、可視画像の画素の色データを、算出したＲＧＢ成分で書き換える（ステップＳ４４）。
　（３）尚、実施形態では、異常領域が抽出されない場合、つまり、通常時は、可視画像が表示されることになるが、通常時には、熱画像を表示することとしてもよい。表示される熱画像は、画素値を、各画素の温度データが示す温度に応じた輝度とした、いわゆるモノクロ画像、又は、温度に応じた疑似色としたカラー画像となる。
　（４）実施形態では、異常領域を温度に応じた疑似色（カラー）で表示することとしているが、温度に応じた輝度値とし、色差成分を持たない、いわゆる赤外線画像（モノクロ画像）で表示することとしてもよい。この場合、温度と疑似色とを対応付けた疑似色データ３６１０（図４参照）のＲＧＢ３６１３に代えて、温度に対応付けた輝度値を設定しておく。または、第１変換画像抽出部３３及び第２変換画像抽出部３４が変換画像を作成する際に、温度から輝度値を所定の式を用いて算出することとしてもよい。尚、これらの場合、変換画像における色差成分はゼロである。
　（５）実施形態では、可視画像はカラー画像としているが、モノクロ画像でもよい。
　本明細書は、上記のように様々な態様の技術を開示しているが、そのうち主な技術を以下に纏める。
　本発明にかかる一態様の温度監視装置は、対象物の表面の熱分布を示す熱画像を取得する熱画像取得手段と、前記対象物の可視画像を取得する可視画像取得手段と、前記熱画像から所定の温度の温度領域を抽出する領域抽出手段と、前記可視画像内の前記温度領域に該当する領域の色を変更した第１変換画像を作成する第１画像作成手段と、前記可視画像内の前記温度領域のエッジ部分に該当する領域の色を変更した第２変換画像を作成する第２画像作成手段と、前記第１変換画像と前記第２変換画像とを選択的に切り替えて表示する表示制御手段とを備えることを特徴とする。
　また、他の一態様にかかる温度監視方法は、対象物の表面温度を監視する温度監視装置で用いられる温度監視方法であって、前記対象物の表面の熱分布を示す熱画像を取得する熱画像取得ステップと、前記対象物の可視画像を取得する可視画像取得ステップと、前記熱画像から所定の温度の温度領域を抽出する領域抽出ステップと、前記可視画像内の前記温度領域に該当する領域の色を変更した第１変換画像を作成する第１画像作成ステップと、前記可視画像内の前記温度領域のエッジ部分に該当する領域の色を変更した第２変換画像を作成する第２画像作成ステップと、前記第１変換画像と前記第２変換画像とを選択的に切り替えて表示する表示制御ステップとを備えることを特徴とする。
　このような温度監視装置及び温度監視方法は、対象物の表面温度が所定の温度である領域の色を変更した画像が表示されるので、ユーザは、対象物の表面温度が、所定の温度となったことを即座に認識することが可能となり、また、所定の温度になった領域のエッジ部分のみの色を変更した画像が表示されるので、エッジ部分の内側の通常の可視画像により、対象物のどの部分が所定の温度になったのかを詳細に知ることが可能となる。
　上述の温度監視装置において、前記表示制御手段は、外部からの指示に応じて、前記第１変換画像と前記第２変換画像とを選択的に切り替えて表示することを特徴とする。
　この構成によれば、外部からの指示により、対象物の表面温度が所定の温度である領域の色を変更した画像、又は、所定の温度になった領域のエッジ部分のみの色を変更した画像が表示されるので、ユーザは所望するときに、所望する画像を表示させることが可能となる。
　上述の温度監視装置において、前記表示制御手段は、前記第１変換画像と前記第２変換画像とを所定の時間間隔で交互に切り替えて表示することを特徴とする。
　この構成によれば、所定の時間間隔で、交互に、対象物の表面温度が所定の温度である領域の色を変更した画像と、所定の温度になった領域のエッジ部分のみの色を変更した画像とが表示されるので、ユーザは、対象物の表面温度が所定の温度になったことを即座に認識でき、エッジ部分の内側の通常の可視画像により、対象物のどの部分が所定の温度になったのかを詳細に知ることが可能となる。
　上述の温度監視装置において、前記熱画像は、複数の画素から構成され、前記各画素は温度を示す温度データを有しており、温度と色とを対応付けて記憶している画素色記憶手段を、更に備え、前記第１画像作成手段は、前記可視画像内の前記温度領域に該当する領域の各画素の色を、前記熱画像内の前記温度領域の各画素が有する温度データが示す温度と対応付けて前記画素色記憶手段に記憶されている色に変更して、前記第１変換画像を作成し、前記第２画像作成手段は、前記可視画像内の前記温度領域のエッジ部分に該当する領域の各画素の色を、前記熱画像内の前記エッジ部分の各画素が有する温度データが示す温度と対応付けて前記画素色記憶手段に記憶されている色に変更して、前記第２変換画像を作成することを特徴とする。
　この構成によれば、対象物の表面温度に応じて、色分けされた画像が表示されるので、ユーザは、対象物のどの部分が何度であるかを、詳細に認識することが可能となる。
　上述の温度監視装置において、前記第２画像作成手段は、前記可視画像内の前記温度領域のエッジ部分に該当する領域の各画素の色の輝度及び色差成分それぞれと、前記熱画像内の前記エッジ部分の各画素が有する温度データが示す温度と対応付けて前記画素色記憶手段に記憶されている色の輝度及び色差成分それぞれとの差のうちのいずれかの差が、予め定められた閾値を下回る場合は、前記可視画像内の前記エッジ部分の各画素の色を、当該色との輝度及び色差成分それぞれの差が前記閾値以上である色に変更することを特徴とする。
　この構成によれば、エッジ部分の輝度及び色差成分を、可視画像内のエッジ部分に相当する色の輝度及び色差成分と所定の閾値以上の差をつけた画像が表示されるので、ユーザは、エッジ部分を容易に視認することができる可能性が高くなる。
　上述の温度監視装置において、前記第２画像作成手段は、前記可視画像内の前記温度領域のエッジ部分に該当する領域の各画素の色を、当該色の補色に変更して、前記第２変換画像を作成することを特徴とする。
　この構成によれば、エッジ部分を、可視画像内のエッジ部分に相当する色の補色とした画像が表示されるので、エッジ部分が目立って、ユーザは、容易に視認することができる可能性が高くなる。
　上述の温度監視装置において、前記熱画像は、複数の画素から構成され、前記各画素は温度を示す温度データを有しており、前記第１画像作成手段は、前記可視画像内の前記温度領域に該当する領域の各画素の色を、前記熱画像内の前記温度領域の各画素が有する温度データが示す温度に応じた輝度値を有し色差成分を持たない色に変更して、前記第１変換画像を作成し、前記第２画像作成手段は、前記可視画像内の前記温度領域のエッジ部分に該当する領域の各画素の色を、前記熱画像内の前記エッジ部分の各画素が有する温度データが示す温度に応じた輝度値を有し色差成分を持たない色に変更して、前記第２変換画像を作成することを特徴とする。
　この構成によれば、対象物の表面温度に応じて、白黒の濃度分けされた画像が表示されるので、対象物のどの部分が何度であるかを、ユーザは、詳細に認識することが可能となる。
　上述の温度監視装置において、前記所定の温度とは、予め定められた温度の閾値を超える温度であることを特徴とする。
　上述の温度監視装置において、前記所定の温度とは、予め定められた温度の閾値以下の温度であることを特徴とする。
　上述の温度監視装置において、前記所定の温度とは、予め定められた上限の温度の閾値以下であり、且つ、予め定められた下限の温度の閾値以上の温度であることを特徴とする。
　上述の温度監視装置において、前記温度の閾値を、自装置の外部から取得する温度取得手段を、更に備えることを特徴とする。
　この構成によれば、ユーザが温度を設定できるので、ユーザが監視したい温度で対象物の表面温度を監視することが可能となる。
　上述の温度監視装置において、前記第１変換画像と前記第２変換画像とを所定の時間間隔で交互に切り替えて表示する指示と、第１変換画像を表示する指示と、第２変換画像を表示する指示のうち、いずれか１つの指示を、自装置の外部から取得する表示指示取得手段を、更に備え、前記表示制御手段は、前記表示指示取得手段が取得した指示に応じた表示を行うことを特徴とする。
　この構成によれば、ユーザが見たい画像を選択できるので、対象物の表面の温度を、適時、詳細に監視することが可能となる。
　上述の温度監視装置において、前記第１変換画像と前記第２変換画像とを交互に切り替えて表示する所定の時間間隔を、自装置の外部から取得する時間間隔取得手段を、更に備え、前記表示制御手段は、前記時間間隔取得手段が取得した時間間隔で、前記第１変換画像と前記第２変換画像とを交互に切り替えて表示することを特徴とする。
　この構成によれば、画面の切り替え時間をユーザが設定できるので、ユーザにとって画面が見やすくなり、対象物の表面の温度を、より正確に監視することが可能となる。
　温度監視装置及び温度監視方法によれば、表面温度が所定温度である箇所が対象物に生じたことが認識でき、かつ、所定の温度である箇所の詳細を容易に認識できる画像を表示することができる。
　この出願は、２０１４年３月１３日に出願された日本国特許出願特願２０１４－０５０５９３を基礎とするものであり、その内容は、本願に含まれるものである。
　本発明を表現するために、上述において図面を参照しながら実施形態を通して本発明を適切且つ十分に説明したが、当業者であれば上述の実施形態を変更および／または改良することは容易に為し得ることであると認識すべきである。したがって、当業者が実施する変更形態または改良形態が、請求の範囲に記載された請求項の権利範囲を離脱するレベルのものでない限り、当該変更形態または当該改良形態は、当該請求項の権利範囲に包括されると解釈される。
　本発明によれば、表面温度が所定温度である箇所が対象物に生じたことが認識でき、かつ、所定の温度である箇所の詳細を容易に認識できる画像を表示することができる温度監視装置及び温度監視方法を提供することができる。

Claims (14)

  1. 　対象物の表面の熱分布を示す熱画像を取得する熱画像取得手段と、
    　前記対象物の可視画像を取得する可視画像取得手段と、
    　前記熱画像から所定の温度の温度領域を抽出する領域抽出手段と、
    　前記可視画像内の前記温度領域に該当する領域の色を変更した第１変換画像を作成する第１画像作成手段と、
    　前記可視画像内の前記温度領域のエッジ部分に該当する領域の色を変更した第２変換画像を作成する第２画像作成手段と、
    　前記第１変換画像と前記第２変換画像とを選択的に切り替えて表示する表示制御手段と
    　を備える温度監視装置。
  2. 　前記表示制御手段は、外部からの指示に応じて、前記第１変換画像と前記第２変換画像とを選択的に切り替えて表示する
    　請求項１に記載の温度監視装置。
  3. 　前記表示制御手段は、前記第１変換画像と前記第２変換画像とを所定の時間間隔で交互に切り替えて表示する
    　請求項１又は２に記載の温度監視装置。
  4. 　前記熱画像は、複数の画素から構成され、前記各画素は温度を示す温度データを有しており、
    　温度と色とを対応付けて記憶している画素色記憶手段を、更に備え、
    　前記第１画像作成手段は、前記可視画像内の前記温度領域に該当する領域の各画素の色を、前記熱画像内の前記温度領域の各画素が有する温度データが示す温度と対応付けて前記画素色記憶手段に記憶されている色に変更して、前記第１変換画像を作成し、
    　前記第２画像作成手段は、前記可視画像内の前記温度領域のエッジ部分に該当する領域の各画素の色を、前記熱画像内の前記エッジ部分の各画素が有する温度データが示す温度と対応付けて前記画素色記憶手段に記憶されている色に変更して、前記第２変換画像を作成する
    　請求項１ないし３のいずれか一項に記載の温度監視装置。
  5. 　前記第２画像作成手段は、前記可視画像内の前記温度領域のエッジ部分に該当する領域の各画素の色の輝度及び色差成分それぞれと、前記熱画像内の前記エッジ部分の各画素が有する温度データが示す温度と対応付けて前記画素色記憶手段に記憶されている色の輝度及び色差成分それぞれとの差のうちのいずれかの差が、予め定められた閾値を下回る場合は、前記可視画像内の前記エッジ部分の各画素の色を、当該色との輝度及び色差成分それぞれの差が前記閾値以上である色に変更する
    　請求項４に記載の温度監視装置。
  6. 　前記第２画像作成手段は、前記可視画像内の前記温度領域のエッジ部分に該当する領域の各画素の色を、当該色の補色に変更して、前記第２変換画像を作成する
    　請求項１ないし３のいずれか一項に記載の温度監視装置。
  7. 　前記熱画像は、複数の画素から構成され、前記各画素は温度を示す温度データを有しており、
    　前記第１画像作成手段は、前記可視画像内の前記温度領域に該当する領域の各画素の色を、前記熱画像内の前記温度領域の各画素が有する温度データが示す温度に応じた輝度値を有し色差成分を持たない色に変更して、前記第１変換画像を作成し、
    　前記第２画像作成手段は、前記可視画像内の前記温度領域のエッジ部分に該当する領域の各画素の色を、前記熱画像内の前記エッジ部分の各画素が有する温度データが示す温度に応じた輝度値を有し色差成分を持たない色に変更して、前記第２変換画像を作成する
    　請求項１ないし３のいずれか一項に記載の温度監視装置。
  8. 　前記所定の温度とは、予め定められた温度の閾値を超える温度である
    　請求項１～７のいずれか一項に記載の温度監視装置。
  9. 　前記所定の温度とは、予め定められた温度の閾値以下の温度である
    　請求項１～７のいずれか一項に記載の温度監視装置。
  10. 　前記所定の温度とは、予め定められた上限の温度の閾値以下であり、且つ、予め定められた下限の温度の閾値以上の温度である
    　請求項１～７のいずれか一項に記載の温度監視装置。
  11. 　前記温度の閾値を、自装置の外部から取得する温度取得手段を、更に備える
    　請求項７～１０のいずれか一項に記載の温度監視装置。
  12. 　前記第１変換画像と前記第２変換画像とを所定の時間間隔で交互に切り替えて表示する指示と、第１変換画像を表示する指示と、第２変換画像を表示する指示のうち、いずれか１つの指示を、自装置の外部から取得する表示指示取得手段を、更に備え、
    　前記表示制御手段は、前記表示指示取得手段が取得した指示に応じた表示を行う
    　請求項１～１１のいずれか一項に記載の温度監視装置。
  13. 　前記第１変換画像と前記第２変換画像とを交互に切り替えて表示する所定の時間間隔を、自装置の外部から取得する時間間隔取得手段を、更に備え、
    　前記表示制御手段は、前記時間間隔取得手段が取得した時間間隔で、前記第１変換画像と前記第２変換画像とを交互に切り替えて表示する
    　請求項１～１２のいずれか一項に記載の温度監視装置。
  14. 　対象物の表面温度を監視する温度監視装置で用いられる温度監視方法であって、
    　前記対象物の表面の熱分布を示す熱画像を取得する熱画像取得ステップと、
    　前記対象物の可視画像を取得する可視画像取得ステップと、
    　前記熱画像から所定の温度の温度領域を抽出する領域抽出ステップと、
    　前記可視画像内の前記温度領域に該当する領域の色を変更した第１変換画像を作成する第１画像作成ステップと、
    　前記可視画像内の前記温度領域のエッジ部分に該当する領域の色を変更した第２変換画像を作成する第２画像作成ステップと、
    　前記第１変換画像と前記第２変換画像とを選択的に切り替えて表示する表示制御ステップと
    　を備える温度監視方法。 
PCT/JP2015/053166 2014-03-13 2015-02-05 温度監視装置、及び、温度監視方法 WO2015137019A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014-050593 2014-03-13
JP2014050593 2014-03-13

Publications (1)

Publication Number Publication Date
WO2015137019A1 true WO2015137019A1 (ja) 2015-09-17

Family

ID=54071471

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/053166 WO2015137019A1 (ja) 2014-03-13 2015-02-05 温度監視装置、及び、温度監視方法

Country Status (1)

Country Link
WO (1) WO2015137019A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020039606A1 (ja) * 2018-08-20 2020-02-27 コニカミノルタ株式会社 ガス検出装置、情報処理装置およびプログラム
CN110998654A (zh) * 2017-07-27 2020-04-10 三菱日立电力***株式会社 模型学习装置、学习完成模型的生成方法、程序、学习完成模型、监视装置以及监视方法
CN111488868A (zh) * 2020-03-27 2020-08-04 贵州电网有限责任公司 一种基于变压器红外图像的高温区域识别方法及***
CN114034396A (zh) * 2021-10-27 2022-02-11 纵古(江苏)智能科技有限公司 一种基于红外图谱色差识别电力设备温度异常的技术方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05307013A (ja) * 1992-04-28 1993-11-19 Jeol Ltd サーモグラフィ装置を用いた検査方法
JPH0921704A (ja) * 1995-07-10 1997-01-21 Nippon Avionics Co Ltd 擬似カラー熱画像をアラーム表示に用いた温度監視方法及び装置
JP3634845B2 (ja) * 2000-09-04 2005-03-30 昇 早川 温度表示装置及び温度監視システム
JP2007212404A (ja) * 2006-02-13 2007-08-23 Nippon Avionics Co Ltd 赤外線撮像装置
JP2010078522A (ja) * 2008-09-26 2010-04-08 Terumo Corp 赤外線サーモグラフィ装置及び画像処理方法
JP2011203159A (ja) * 2010-03-26 2011-10-13 Nec Corp 赤外線撮像装置及び赤外線画像の表示方法
JP2011232110A (ja) * 2010-04-26 2011-11-17 Olympus Corp 検査装置及び検査装置を用いた欠陥検出方法
JP2013002959A (ja) * 2011-06-16 2013-01-07 Fujitsu Ltd 情報処理装置、及び情報処理方法
JP2013191054A (ja) * 2012-03-14 2013-09-26 Omron Corp 領域抽出結果の表示方法及び画像処理装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05307013A (ja) * 1992-04-28 1993-11-19 Jeol Ltd サーモグラフィ装置を用いた検査方法
JPH0921704A (ja) * 1995-07-10 1997-01-21 Nippon Avionics Co Ltd 擬似カラー熱画像をアラーム表示に用いた温度監視方法及び装置
JP3634845B2 (ja) * 2000-09-04 2005-03-30 昇 早川 温度表示装置及び温度監視システム
JP2007212404A (ja) * 2006-02-13 2007-08-23 Nippon Avionics Co Ltd 赤外線撮像装置
JP2010078522A (ja) * 2008-09-26 2010-04-08 Terumo Corp 赤外線サーモグラフィ装置及び画像処理方法
JP2011203159A (ja) * 2010-03-26 2011-10-13 Nec Corp 赤外線撮像装置及び赤外線画像の表示方法
JP2011232110A (ja) * 2010-04-26 2011-11-17 Olympus Corp 検査装置及び検査装置を用いた欠陥検出方法
JP2013002959A (ja) * 2011-06-16 2013-01-07 Fujitsu Ltd 情報処理装置、及び情報処理方法
JP2013191054A (ja) * 2012-03-14 2013-09-26 Omron Corp 領域抽出結果の表示方法及び画像処理装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JAMES W. DAVIS ET AL.: "Background-subtraction using contour-based fusion of thermal and visible imagery", COMPUTER VISION AND IMAGE UNDERSTANDING, vol. 106, no. 2-3, 25 January 2007 (2007-01-25), pages 162 - 182, XP022077225, ISSN: 1077-3142 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110998654A (zh) * 2017-07-27 2020-04-10 三菱日立电力***株式会社 模型学习装置、学习完成模型的生成方法、程序、学习完成模型、监视装置以及监视方法
CN110998654B (zh) * 2017-07-27 2024-03-26 三菱重工业株式会社 模型学习装置、学习完成模型的生成方法、程序、学习完成模型、监视装置以及监视方法
WO2020039606A1 (ja) * 2018-08-20 2020-02-27 コニカミノルタ株式会社 ガス検出装置、情報処理装置およびプログラム
JPWO2020039606A1 (ja) * 2018-08-20 2021-08-26 コニカミノルタ株式会社 ガス検出装置、情報処理装置およびプログラム
US11197065B2 (en) 2018-08-20 2021-12-07 Konica Minolta, Inc. Gas detection device, information processing device, and program
JP7294343B2 (ja) 2018-08-20 2023-06-20 コニカミノルタ株式会社 ガス検出装置、情報処理装置およびプログラム
CN111488868A (zh) * 2020-03-27 2020-08-04 贵州电网有限责任公司 一种基于变压器红外图像的高温区域识别方法及***
CN111488868B (zh) * 2020-03-27 2023-06-30 贵州电网有限责任公司 一种基于变压器红外图像的高温区域识别方法及***
CN114034396A (zh) * 2021-10-27 2022-02-11 纵古(江苏)智能科技有限公司 一种基于红外图谱色差识别电力设备温度异常的技术方法

Similar Documents

Publication Publication Date Title
US10298859B2 (en) Enhanced visual representation of infrared data values
EP2921995A1 (en) Visible light image with edge marking for enhancing ir imagery
WO2015137019A1 (ja) 温度監視装置、及び、温度監視方法
JP6468439B2 (ja) ガス検知用画像処理装置、ガス検知用画像処理方法及びガス検知用画像処理プログラム
US20180189013A1 (en) Visual focus-aware techniques for visualizing display changes
JPWO2019203351A1 (ja) 画像表示装置及び画像表示方法
JP2014179922A5 (ja) 表示制御装置、表示制御方法、およびプログラム
US9436996B2 (en) Recording medium storing image processing program and image processing apparatus
US10182184B2 (en) Image processing apparatus and image processing method
US11140306B2 (en) Method for controlling monitoring camera, and monitoring system employing method
WO2010116467A1 (ja) 画像表示装置、及び画像処理方法
US10721432B2 (en) Image capturing apparatus connectable to display apparatus, display apparatus connectable to external apparatus, and image processing apparatus performing image processing
JP2011013334A (ja) 画像表示装置
JPH06341904A (ja) 赤外線熱画像装置
JP2007212404A (ja) 赤外線撮像装置
US20120188457A1 (en) Image processing apparatus and image processing method
WO2018078753A1 (ja) 補正システム
JP5152317B2 (ja) プレゼンテーション制御装置及びプログラム
JPWO2014065121A1 (ja) ２次元画像データ処理装置、２次元色彩輝度計、２次元画像データ処理方法及び２次元画像データ処理プログラム
JP2012044480A (ja) 撮像装置及び撮像方法
JP6028305B2 (ja) マーカーを表示する方法及び装置
WO2014061124A1 (ja) ディスプレイ装置、及び画像表示方法
JP2008282131A (ja) 電子機器の制御装置
JP2008301238A (ja) 映像監視システムの監視領域設定装置及び監視領域設定方法
US20230419548A1 (en) Color adjustment apparatus used for color matching between image capturing apparatuses, color adjustment method, and storage medium storing color adjustment program

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15760891

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15760891

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP