WO2012165553A1 - 蛍光観察装置および蛍光観察方法 - Google Patents

蛍光観察装置および蛍光観察方法 Download PDF

Info

Publication number
WO2012165553A1
WO2012165553A1 PCT/JP2012/064085 JP2012064085W WO2012165553A1 WO 2012165553 A1 WO2012165553 A1 WO 2012165553A1 JP 2012064085 W JP2012064085 W JP 2012064085W WO 2012165553 A1 WO2012165553 A1 WO 2012165553A1
Authority
WO
WIPO (PCT)
Prior art keywords
fluorescence
image
unit
route
image generation
Prior art date
Application number
PCT/JP2012/064085
Other languages
English (en)
French (fr)
Inventor
裕美 志田
Original Assignee
オリンパス株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オリンパス株式会社 filed Critical オリンパス株式会社
Priority to JP2013518164A priority Critical patent/JP6042808B2/ja
Priority to CN201280025942.4A priority patent/CN103561626B/zh
Publication of WO2012165553A1 publication Critical patent/WO2012165553A1/ja
Priority to US14/091,673 priority patent/US9516235B2/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00045—Display arrangement
    • A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/043—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64—Fluorescence; Phosphorescence
    • G01N21/645—Specially adapted constructive features of fluorimeters
    • G01N21/6456—Spatial resolved fluorescence measurements; Imaging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/12—Edge-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/174—Segmentation; Edge detection involving the use of two or more images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10064—Fluorescence image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10068—Endoscopic image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30241—Trajectory

Definitions

  • the present invention relates to a fluorescence observation apparatus and a fluorescence observation method.
  • the present invention has been made in view of the above-described circumstances, and is a fluorescence observation apparatus and a fluorescence observation method capable of easily specifying the shape of an organ that cannot always generate fluorescence.
  • the purpose is to provide.
  • a fluorescence image generation unit that generates a plurality of fluorescence images by photographing fluorescence generated from an observation target at time intervals, and each fluorescence image generated by the fluorescence image generation unit
  • a position extracting unit for extracting a high luminance position having a gradation value equal to or higher than a predetermined threshold, a storage unit for storing the high luminance position extracted by the position extracting unit, and a plurality of units stored in the storage unit
  • the fluorescence observation apparatus includes a route image generation unit that generates a route image having a gradation value at a high-luminance position and a display unit that displays the route image generated by the route image generation unit.
  • the fluorescence image when the fluorescence image is generated by the fluorescence image generation unit, the high brightness position in the fluorescence image is extracted by the position extraction unit and stored in the storage unit. And since the several high-intensity position extracted for every several fluorescence image produced
  • high-intensity fluorescence that moves in the observation target such as fluorescence from a liquid containing a fluorescent substance that flows through the urethra
  • fluorescence is extracted as a high luminance position arranged at a different position by the position extraction unit.
  • the route images having gradation values at these high-luminance positions can well represent the fluorescence movement route, that is, the shape of an organ such as the urethra. As a result, it is possible to easily specify the shape of an organ such as a ureter that cannot always generate fluorescence.
  • the fluorescence image generation unit shoots a set number of images of the observation target to generate the set number of fluorescence images
  • the route image generated by the route image generation unit includes a plurality of regions.
  • the area division unit that divides the image into two regions
  • the region number counting unit that counts the number of regions in which pixels having gradation values exist among the regions divided by the region division unit
  • the region number counting unit A configuration may be provided that includes a number updating unit that updates the set number of fluorescent images generated by the fluorescent image generating unit according to the number of regions.
  • the route image generated by the route image generation unit from the fluorescence images generated by the fluorescence image generation unit by the set number is divided into a plurality of regions by the region dividing unit.
  • the number of regions where pixels having gradation values exist is counted by the region number counting unit.
  • An appropriate route image can be generated by updating the set number of sheets by the number updating unit in accordance with the counted number of regions. In other words, when the speed of the observation target of the high-luminance area to be observed is slow, the number of areas having pixels with gradation values in the path image decreases, so update by increasing the set number.
  • a route image showing a route having an appropriate length can be generated.
  • the number updating unit may update the set number to increase when the number of regions counted by the region number counting unit is smaller than a region number threshold.
  • a region number threshold when the number of high-luminance positions counted by the number-of-regions counter is smaller than the number-of-regions threshold, a set number of images for generating a sufficient route for the high-luminance region included in the route image It is possible that there is not enough. Therefore, an appropriate route image can be generated by updating the number updating unit to increase the set number.
  • the detachable part that is attached and detached to change the observation condition the identification information storage unit that is provided in the detachable part and stores the identification information of the detachable part, and is stored in the identification information storage part
  • An identification information reading unit that reads the identification information, and the region dividing unit may divide the fluorescent image according to the number of divisions stored corresponding to the identification information read by the identification information reading unit. Good.
  • the identification information stored in the identification information storage unit of the detachable part is read by the identification information reading unit. Then, the number of divisions by the region dividing unit is set to the number of divisions stored corresponding to the read identification information. Thereby, it is possible to easily set an appropriate number of divisions according to the observation conditions, that is, the size of each divided region to an appropriate size.
  • a return light image generation unit that irradiates the observation target with illumination light and captures return light that returns from the observation target and generates a return light image
  • the region dividing unit includes the return light.
  • the fluorescent image may be divided according to the number of divisions stored corresponding to the luminance information of the return light image generated by the image generation unit.
  • the number of divisions by the area dividing unit is set according to the luminance information of the return light image. Since the brightness of the return light image depends on the distance between the irradiation position of the illumination light and the observation target, when the brightness is high, a high brightness region to be observed becomes large in the fluorescence image. Therefore, in such a case, an appropriate route image can be generated by reducing the number of divisions, that is, by increasing the divided area.
  • the position extraction unit extracts the high-luminance position every time a fluorescent image is generated by the fluorescent image generation unit, and the path image generation unit uses the position extraction unit to extract the high-intensity position.
  • the route image may be generated every time the luminance position is extracted. In this way, a route image can be generated in real time in accordance with the movement of the high luminance position.
  • the path image generation unit detects the generation start time or generation end time of the path image corresponding to the observation range of the observation target, and is already generated when the generation start time or generation end time is detected.
  • the route image thus made may be deleted.
  • the fluorescent image generation unit captures a fluorescent image by photographing at a predetermined time interval, and the storage unit associates the high luminance position with the time when the high luminance position is extracted.
  • the path image generation unit stores the two high-luminance positions between the two high-luminance positions when the time between the extracted times of any two of the high-luminance positions obtained in succession is longer than the time interval.
  • a virtual route may be generated.
  • the return light image generation unit that irradiates the observation target with illumination light and captures the return light that returns from the observation target and generates a return light image
  • the path image generation unit An image composition unit that superimposes a route image and the return light image generated by the return light image generation unit may be provided, and the display unit may display the superimposed image generated by the image composition unit.
  • a route image showing the route of the high-luminance position is superimposed on the return light image that represents the morphological characteristics of the observation target, so that the observer can directly correspond to the observation target and display the route image. Can be confirmed.
  • a fluorescence image generation unit that generates a plurality of fluorescence images by photographing fluorescence generated from an observation object at time intervals, and a fluorescence image generated by the fluorescence image generation unit
  • a position extracting unit that extracts a high luminance variation position in which the maximum gradation value is equal to or greater than the first threshold value and the gradation value varies within a range equal to or greater than the second threshold value, and the position extraction unit
  • a storage unit that stores the high-intensity fluctuation position extracted by the step, a route image generation unit that generates a route image having gradation values at a plurality of high-intensity positions stored in the storage unit, and the route image generation unit It is a fluorescence observation apparatus provided with the display part which displays the produced
  • the position extraction unit performs gradation values at each position in the fluorescent image.
  • the position where fluctuates with a fluctuation range equal to or greater than the second threshold By extracting the position where the fluorescence has moved can be extracted in more detail.
  • the position where the maximum gradation value is equal to or greater than the first threshold value from the extracted positions the position that emits fluorescence with higher intensity, that is, the target high brightness fluctuation position can be accurately obtained. Can be extracted well. As a result, continuous route images can be easily generated by the route image generation unit.
  • the position extraction unit extracts the maximum gradation value and the minimum gradation value at the same position of the plurality of fluorescent images, and calculates the fluctuation range of the gradation value based on the difference therebetween.
  • the time differential value of the gradation value at each same position of the plurality of fluorescent images may be calculated, and the fluctuation range of the gradation value may be calculated based on the calculated time differential value.
  • a fluorescence image generation step for generating a plurality of fluorescence images by photographing fluorescence generated from an observation object at time intervals, and each fluorescence image generated by the fluorescence image generation step A position extracting step for extracting a high luminance position having a gradation value equal to or higher than a predetermined threshold, a storing step for storing the high luminance position extracted by the position extracting step, and a plurality of data stored in the storing step.
  • This is a fluorescence observation method comprising a route image generation step for generating a route image having a gradation value at a high brightness position and a display step for displaying the route image generated by the route image generation step.
  • a fluorescence image generation step for generating a plurality of fluorescence images by photographing fluorescence generated from an observation object at time intervals, and a fluorescence image generated by the fluorescence image generation step.
  • a position extraction step for extracting a high brightness fluctuation position where the maximum gradation value is greater than or equal to the first threshold and the gradation value fluctuates by a width greater than or equal to the second threshold at each of the positions
  • the position extraction step A storage step for storing the high-luminance fluctuation position extracted by the step, a route image generation step for generating a route image having gradation values at a plurality of high-intensity positions stored in the storage step, and the route image generation step And a display step for displaying the path image generated by the method.
  • a fluorescence observation apparatus 1 is an endoscope apparatus, and as shown in FIG. 1, an elongated insertion portion 2 inserted into a body, a light source 3, excitation light from the light source 3, and An illumination unit 4 that irradiates illumination light from the distal end of the insertion unit 2 toward the observation target F, an imaging unit 5 that is provided at the distal end of the insertion unit 2 and acquires image information of a biological tissue that is the observation target F, and insertion An image processing unit 6 that is disposed on the base end side of the unit 2 and processes image information acquired by the imaging unit 5 and a monitor 7 that displays an image G processed by the image processing unit 6 are provided.
  • the light source 3 includes a xenon lamp 8, a filter 9 that cuts out excitation light and white light (illumination light: wavelength band from 400 nm to 740 nm) from the light emitted from the xenon lamp 8, and the excitation light cut out by the filter 9 and And a coupling lens 10 for condensing the illumination light.
  • the illumination unit 4 is disposed over substantially the entire length of the insertion portion 2 in the longitudinal direction, and is provided at the distal end of the insertion portion 2 and a light guide fiber 11 that guides the excitation light and white light collected by the coupling lens 10.
  • an illumination optical system 12 that diffuses the excitation light and white light guided by the light guide fiber 11 and irradiates the observation target F facing the distal end surface 2a of the insertion portion 2.
  • the imaging unit 5 condenses light returning from a predetermined observation range of the observation target F, and out of the light collected by the objective lens 13, light (excitation light and fluorescence) having an excitation wavelength or more.
  • a dichroic mirror 14 that reflects and transmits white light (return light) having a wavelength shorter than the excitation wavelength, and two condensings that respectively collect the fluorescence reflected by the dichroic mirror 14 and the white light transmitted through the dichroic mirror 14.
  • Lenses 15 and 16 and two image sensors 17 and 18 such as a CCD for photographing white light and fluorescence condensed by the condenser lenses 15 and 16 are provided.
  • reference numeral 19 denotes an excitation light cut filter that blocks excitation light (for example, transmits only light having a wavelength band of 760 nm to 850 nm) out of the light reflected by the dichroic mirror 14.
  • the image processing unit 6 generates a white light image G1 from the white light image information acquired by the image sensor 17, and generates a fluorescent image G2 from the fluorescent image information acquired by the image sensor 18.
  • a pixel (high luminance pixel) having a gradation value equal to or higher than a preset threshold value is extracted, and the position of the pixel (
  • An extraction unit (position extraction unit) 22 that outputs (coordinates), a position storage unit 23 that stores the positions of the pixels extracted by the extraction unit 22, and floors at all positions stored in the position storage unit 23.
  • a route image generation unit 24 that generates a route image G3 having a tone value, and an image composition unit 25 that generates a superimposed image G by superimposing the white light image G1 and the route image G3 are provided.
  • reference numeral 26 denotes an input unit for inputting an image switching instruction by an observer.
  • Reference numeral 27 denotes an image switching unit that switches an image to be sent to the monitor 7 between the white light image G1 and the superimposed image G when an image switching instruction is input from the input unit 26.
  • the image sensors 17 and 18 acquire white light image information and fluorescent image information at a constant frame rate.
  • the extraction unit 22 compares the gradation value of each pixel of the fluorescence image G2 sent from the fluorescence image generation unit 21 with a predetermined threshold, extracts a pixel having a gradation value equal to or greater than the threshold, and the position Is output to the position storage unit 23.
  • the position storage unit 23 starts storing the position when the pixel position is first sent from the extraction unit 22 after the observation is started. Thereafter, the position storage unit 23 continues to store the pixel positions for the set number (for example, 25) of fluorescent images G2. And the position memory
  • the route image generation unit 24 generates a route image G3 in which a certain gradation value is given to the positions of all the pixels sent from the position storage unit 23. That is, since the fluorescent substance moves in the observation target F, even if a high-luminance region moves in the fluorescent image G2, the movement path is generated as the path image G3. Therefore, the shape of the organ to which the fluorescent substance has moved can be specified by the route image G3.
  • the insertion portion 2 is inserted into the body, and the distal end surface 2a of the insertion portion 2 is set as the observation target F. Make them face each other.
  • the light source 3 is operated to generate excitation light and white light, which are incident on the light guide fiber 11 by the coupling lens 10. Excitation light and white light guided through the light guide fiber 11 and reaching the distal end of the insertion portion 2 are diffused by the illumination optical system 12 at the distal end of the insertion portion 2 and irradiated to the observation object F.
  • the fluorescent substance contained therein is excited by excitation light to emit fluorescence, and white light is reflected on the surface of the observation target F.
  • the reflected light of the fluorescence and the white light returns from the observation object F to the distal end surface 2a of the insertion portion 2, and the fluorescence and the white light emitted from a part of the observation range are collected by the objective lens 13.
  • FIG. 2 shows a flowchart for explaining a superimposed image generation process by the fluorescence observation apparatus 1 in the fluorescence observation method according to the present embodiment.
  • Fluorescent light and white light collected by the objective lens 13 are branched for each wavelength by the dichroic mirror 14.
  • White light having a wavelength band of 400 nm to 700 nm, for example, is collected by the condensing lens 15, and white light is collected by the image sensor 17. Obtained as image information (step S1).
  • the light reflected by the dichroic mirror 14 such as excitation light in the wavelength band of 700 nm to 850 nm and light containing fluorescence, is excited by the excitation light cut filter 19 (for example, after the light having a wavelength of 740 nm or less is removed, only the fluorescence is condensed by the condenser lens 16 and acquired as fluorescence image information by the image sensor 18 (fluorescence image generation step S1).
  • the image information acquired by the image sensors 17 and 18 is sent to the image processing unit 6.
  • white light image information is input to the white light image generation unit 20 to generate a white light image G1.
  • fluorescence image information is input to the fluorescence image generation unit 21 to generate the fluorescence image G2.
  • the generated fluorescent image G2 is sent to the extraction unit 22, and as shown in FIGS. 3A and 3B, a pixel (high luminance pixel) P having a gradation value equal to or higher than a predetermined threshold is extracted (position).
  • Extraction step S2 If the high-luminance pixel P does not exist, the process returns to step S1 to acquire the next image (step S3).
  • the position (coordinates) of the extracted high luminance pixel P is output from the extraction unit 22 to the position storage unit 23 and stored in the position storage unit 23 (storage step S4). .
  • the route image generation unit 24 as shown in FIG. 3C, a route image G3 having a constant gradation value is generated only at the positions of all the high-luminance pixels P sent from the position storage unit 23 ( Route image generation step S6).
  • the generated route image G3 is superimposed on the white light image G1 sent from the white light image generation unit 20 in the image composition unit 25 (step S7).
  • the generated superimposed image G is output from the image composition unit 25 (display step).
  • the observer can operate the image switching unit 27 so that the white light image G1 or the superimposed image G is switched and displayed on the monitor 7 by inputting a switching instruction from the input unit 26.
  • the fluorescence observation apparatus 1 when the observer inputs the switching instruction from the input unit 26, the predetermined number of fluorescence images G2 acquired at time intervals are equal to or greater than the threshold value.
  • a route image G3 having a gradation value at the position of the high-luminance pixel P having the gradation value is superimposed on the white light image G1 and displayed. Even when the fluorescent substance moves in the observation target F from the superimposed image G, the movement path can be specified.
  • high-intensity fluorescence moving in the observation target F such as fluorescence from a liquid containing a fluorescent substance flowing in the urethra
  • the Rukoto is arranged at different positions in a plurality of fluorescent images G2 generated at intervals of time.
  • the route image G3 having gradation values at all these high-luminance positions P can well represent the fluorescence movement route, that is, the shape of an organ such as the urethra.
  • the number of acquired fluorescent images G2 from which the high-luminance pixels P are extracted is fixed to a predetermined set number N 0 (for example, 25), but instead, as follows: It may be varied.
  • the process proceeds to the set number update step S8 as shown in FIG.
  • Step S81 the number A of regions R (regions surrounded by broken lines) including at least one pixel having a gradation value (shown by diagonal lines) is counted (step S82).
  • the number of areas A is 5.
  • step S83 it is determined whether or not the counted area number A is equal to or less than a predetermined area number threshold A 0 (step S83). If the counted area number A is equal to or less than the predetermined area number threshold A 0 , the set number N 0 is set. What is necessary is just to increase.
  • the set number N 0 When the moving speed of the fluorescent substance in the observation target F is slow, the set number N 0 is initially set, it may route appearing in the path image G3 becomes very short. Therefore, by updating the set number N 0 as described above, there is an advantage that a route image G3 in which a sufficiently long route is represented can be generated.
  • the size of the area to be divided depends on the observation conditions. That is, in the observation condition in which the fluorescent substance is observed relatively large in the observation object F, the number of divisions is reduced and each divided area is enlarged. On the other hand, it is preferable to increase the number of divisions and make each divided area small under observation conditions for observing a fluorescent substance relatively small.
  • an insertion part (detachable part) 2 that can be attached to and detached from the light source 3 and the image processing part 6 is provided so that the fluorescence observation apparatus 1 can be exchanged according to the observation target part.
  • An IC chip 61 that stores identification information of the insertion unit 2 may be provided in the insertion unit 2.
  • a reading device 62 that reads identification information in the IC chip 61 is provided.
  • the image processing unit 6 includes a division number storage unit 63 that stores the identification information and the division number in association with each other.
  • the division number storage unit 63 is connected to the extraction unit 22.
  • the identification information in the IC chip 61 provided in the insertion unit 2 is read by the reading device 62 and sent to the image processing unit 6.
  • the number of divisions corresponding to the sent identification information is read from the division number storage unit 63, and the number of attention areas R extracted by the extraction unit 22 is used to generate a route image. It is easily determined whether the number is sufficient. Thereby, it is possible to easily set an appropriate number of divisions according to the observation conditions, that is, the size of each divided region to an appropriate size.
  • the division number storage unit 64 stores the luminance information of the white light image and the number of divisions in association with each other.
  • the luminance information of the white light image G1 generated by the white light image generation unit 20, for example, the division number corresponding to the average luminance value is read from the division number storage unit 64 and set in the extraction unit 22. Also good.
  • an appropriate route image G3 can be generated by dividing the white light image G1 by the number of divisions that decreases as the white light image G1 is brighter and darker. That is, the luminance of the white light image G1 depends on the distance between the irradiation position of the illumination light and the observation target F. Therefore, when the luminance is high, a high luminance region to be observed becomes large in the fluorescent image G2. . Therefore, in such a case, an appropriate route image G3 can be generated by reducing the number of divisions, that is, by increasing the divided area.
  • the route image G3 is generated after the high-luminance pixels P are extracted for the set number N 0 of the fluorescence images G2, but this is shown in FIG. 9 instead.
  • the route image G3 may be updated each time one fluorescent image G2 is acquired. By doing in this way, it can display on the monitor 7 so that the movement path
  • the latest route image G3 is used by deleting the route image G3 generated so far and starting generation of a new route image G3. Observations can be made.
  • the maximum gradation value B is extracted in each fluorescent pixel G2 (position extraction step S10), and the extracted maximum gradation value It is determined whether B is equal to or greater than the first threshold value B0 (position extraction step S11). If the maximum gray level value B is the first threshold value B 0 or calculates a difference value C between the maximum gradation value B and the minimum grayscale value (position extraction step S12), the difference value C is calculated It is determined whether or not the second threshold value C 0 or more (position extraction step S13).
  • the difference value C is a fluctuation range of the gradation value between the plurality of fluorescent images G2 of the pixel having the maximum gradation value B, that is, a fluctuation range of the gradation value in the time axis direction, and corresponds to the pixel. This corresponds to the temporal change width of the fluorescence intensity at the position of the observation object F.
  • the pixel position is stored (storage step S14). Thereby, the position of the pixel whose maximum gradation value B is equal to or greater than the first threshold value B 0 and whose difference value C is equal to or greater than the second threshold value C 0 is stored.
  • the position storage unit 23 outputs the positions of all the pixels that satisfy the above condition to the route image generation unit 24.
  • the route image generation unit 24 generates a route image G3 having gradation values only at the positions of these pixels (route image generation step).
  • the gradation value of the gradation value at each position in the fluorescent image G2 is changed.
  • a time differential value may be used. That is, for the pixel having the maximum gradation value B, the gradation value is extracted from the plurality of fluorescent images G2 arranged in the time axis direction, and the time differential value of the gradation value is determined from the change in the time axis direction of the extracted gradation value. And the calculated time differential value is compared with the second threshold value. When the time differential value is equal to or greater than the second threshold value, the pixel position is stored. Even in this case, it is possible to selectively extract a position where the fluorescence intensity has changed with time in a sufficiently large width.
  • the position of the high luminance pixel P when the position of the high luminance pixel P is stored in the position storage unit 23, it may be stored in association with the time when the high luminance pixel P is extracted. Then, after the high brightness pixel P is extracted from the set number N 0 of the fluorescent images G2, when the path image generation unit 24 generates the path image G3, there is a time when the high brightness pixel P does not exist. As shown in FIGS. 11A and 11B, a virtual path Q that connects the high-intensity pixels P at the closest positions before and after the time may be generated.
  • an organ such as a ureter is partially hidden under adipose tissue or other organs, and even when fluorescence from a fluorescent substance flowing inside cannot be partially detected,
  • a virtual path Q By connecting the detected high-luminance pixels P to each other by a virtual path Q, it is possible to estimate the position of an organ such as a hidden ureter.
  • the high-intensity pixels P may be connected by a straight line, or may be connected by a curve estimated from the shape of the path before and after. Further, the color may be changed from that of the other route parts or may be generated by a broken line so that the route image G3 can be seen as the virtual route Q.

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Surgery (AREA)
  • Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • General Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Veterinary Medicine (AREA)
  • Optics & Photonics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Public Health (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • Immunology (AREA)
  • Endoscopes (AREA)
  • Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)
  • Image Processing (AREA)

Abstract

　蛍光を常時発生させておくことができない臓器であっても、その形状を簡易に特定する。観察対象（Ｆ）からの蛍光を時間間隔をあけて撮影することにより複数の蛍光画像（Ｇ２）を生成する蛍光画像生成部（２１）と、該蛍光画像生成部（２１）により生成された各蛍光画像（Ｇ２）内において、所定の閾値以上の階調値を有する高輝度位置を抽出する位置抽出部（２２と、該位置抽出部（２２）により抽出された高輝度位置を記憶する記憶部（２３）と、該記憶部（２３）に記憶された複数の高輝度位置に階調値を有する経路画像（Ｇ３）を生成する経路画像生成部（２４）と、該経路画像生成部（２４）により生成された経路画像（Ｇ３）を表示する表示部（７）とを備える蛍光観察装置（１）を提供する。

Description

蛍光観察装置および蛍光観察方法
　本発明は、蛍光観察装置および蛍光観察方法に関するものである。
　従来、蛍光画像を取得し、蛍光画像内に所定の閾値より高い階調値を有する領域が現れた場合にこれを報知する手段を有する蛍光内視鏡装置が知られている（例えば、特許文献１参照。）。
特許第４５８７８１１号公報
　例えば、尿管のような臓器は、周囲の臓器と外観上区別しにくいため、蛍光物質を含む尿等の液体を内部に流動させつつ蛍光観察によりその形状を特定する方法が考えられる。
　しかしながら、尿管内を流れる尿等の液体は、尿管内に満たされるのではなく、蠕動運動によって間欠的に流動する。したがって、特許文献１の蛍光内視鏡装置のように、単に閾値を越える階調値を有する領域が現れたことを報知するだけでは、尿管の形状を把握することが困難である。
　すなわち、特許文献１の蛍光内視鏡装置により、閾値を越える蛍光が発生したとの報知を受けた観察者が、蛍光画像を連続的に観察し続けることで、蛍光が発せられた位置における尿管等の臓器の存在は確認できる。しかし、尿等の液体が通り過ぎて蛍光が消滅した後には、次の尿等の液体が通過するまで、尿管の位置を把握することができなくなるという不都合がある。
　本発明は、上述した事情に鑑みてなされたものであって、蛍光を常時発生させておくことができない臓器であっても、その形状を簡易に特定することができる蛍光観察装置および蛍光観察方法を提供することを目的としている。
　上記目的を達成するために、本発明は以下の手段を提供する。
　本発明の第１の態様は、観察対象から発生する蛍光を時間間隔をあけて撮影することにより複数の蛍光画像を生成する蛍光画像生成部と、該蛍光画像生成部により生成された各蛍光画像内において、所定の閾値以上の階調値を有する高輝度位置を抽出する位置抽出部と、該位置抽出部により抽出された高輝度位置を記憶する記憶部と、該記憶部に記憶された複数の高輝度位置に階調値を有する経路画像を生成する経路画像生成部と、該経路画像生成部により生成された経路画像を表示する表示部とを備える蛍光観察装置である。
　本発明の第１の態様によれば、蛍光画像生成部により蛍光画像が生成されると、位置抽出部により蛍光画像内における高輝度位置が抽出され、記憶部に記憶される。そして、蛍光画像生成部により時間間隔をあけて生成された複数の蛍光画像毎に抽出された複数の高輝度位置が記憶されるので、経路画像生成部により、複数の高輝度位置に階調値を有する経路画像が生成され、表示部に表示される。
　すなわち、尿道を流れる蛍光物質を含む液体からの蛍光のように、観察対象内を移動する高い強度の蛍光は、時間間隔をあけて生成された複数の蛍光画像内において異なる位置に配置されることとなる。このような蛍光が、位置抽出部によって、異なる位置に配置される高輝度位置として抽出される。これらの高輝度位置に階調値を有する経路画像は、蛍光の移動経路、つまり、尿道等の臓器の形状を良好に表すことができる。その結果、蛍光を常時発生させておくことができない尿管等の臓器であっても、その形状を簡易に特定することができる。
　上記第１の態様においては、前記蛍光画像生成部が、前記観察対象を設定枚数だけ撮影して該設定枚数の蛍光画像を生成し、前記経路画像生成部により生成された経路画像を複数の領域に分割する領域分割部と、該領域分割部により分割された領域のうち、階調値を有する画素が存在する領域の数を計数する領域数計数部と、該領域数計数部により計数された領域数に応じて前記蛍光画像生成部により生成される蛍光画像の前記設定枚数を更新する枚数更新部とを備えた構成とされていてもよい。
　このようにすることで、蛍光画像生成部により設定枚数だけ生成された蛍光画像から経路画像生成部により生成された経路画像が、領域分割部により複数の領域に分割される。分割された領域のうち、階調値を有する画素が存在する領域の数が領域数計数部により計数される。そして、計数された領域数に応じて枚数更新部により設定枚数を更新することで、適正な経路画像を生成することが可能となる。すなわち、観察しようとする高輝度の領域の観察対象における速度が遅い場合に、経路画像において階調値を有する画素が存在する領域数は少なくなるので、設定枚数を増加させるように更新することで、適正な長さの経路が表れた経路画像を生成することができる。
　上記構成においては、前記枚数更新部は、前記領域数計数部により計数された領域数が、領域数閾値より少ない場合に、前記設定枚数を増加させるよう更新してもよい。
　このようにすることで、領域数計数部により計数された高輝度位置の数が領域数閾値より少ない場合には、経路画像に含まれる高輝度の領域の十分な経路を生成するための設定枚数が足りないことが考えられる。そこで、枚数更新部により設定枚数を増加させるよう更新することで、適正な経路画像を生成することができる。
　また、上記構成においては、観察条件を変更するために着脱される着脱部品と、該着脱部品に設けられ、該着脱部品の識別情報を記憶する識別情報記憶部と、該識別情報記憶部に記憶された識別情報を読み取る識別情報読取部とを備え、前記領域分割部が、前記識別情報読取部により読み取られた識別情報に対応して記憶されている分割数に従って前記蛍光画像を分割してもよい。
　このようにすることで、観察条件に合わせて着脱部品を交換あるいは装着すると、着脱部品の識別情報記憶部に記憶されている識別情報が識別情報読取部により読み取られる。そして、領域分割部による分割数が、読み取られた識別情報に対応して記憶されている分割数に設定される。これにより、観察条件に合わせて適正な分割数、すなわち、分割される各領域の大きさを簡易に適正な大きさに設定することができる。
　また、上記構成においては、前記観察対象に照明光を照射して前記観察対象から戻る戻り光を撮影し戻り光画像を生成する戻り光画像生成部を備え、前記領域分割部が、前記戻り光画像生成部により生成された戻り光画像の輝度情報に対応して記憶されている分割数に従って前記蛍光画像を分割してもよい。
　このようにすることで、領域分割部による分割数が戻り光画像の輝度情報に応じて設定される。戻り光画像の輝度は、照明光の照射位置と観察対象との距離に依存するので、輝度が高い場合には、観察しようとする高輝度の領域が蛍光画像中において大きくなる。したがって、このような場合には、分割数を少なく、すなわち、分割された領域を大きくすることで、適正な経路画像を生成することができる。
　上記第１の態様においては、前記位置抽出部が、前記蛍光画像生成部により蛍光画像が生成される都度に前記高輝度位置を抽出し、前記経路画像生成部が、前記位置抽出部により前記高輝度位置が抽出される都度に経路画像を生成する構成とされていてもよい。
　このようにすることで、高輝度位置の移動に合わせてリアルタイムに経路画像を生成することができる。
　上記構成においては、前記経路画像生成部が、観察対象の観察範囲に対応する経路画像の生成開始時または生成終了時を検出し、生成開始時または生成終了時が検出された時点で、既に生成された経路画像を消去してもよい。
　このようにすることで、高輝度位置の移動に合わせてリアルタイムで生成された経路画像が、生成開始時または生成終了時の検出に応じて消去され、新たな経路画像の生成が開始される。これにより、最新の経路画像を表示部に表示して、観察対象を精度よく観察することができる。
　上記第１の態様においては、前記蛍光画像生成部が、所定の時間間隔で撮影して蛍光画像を生成し、前記記憶部が、前記高輝度位置を該高輝度位置が抽出された時刻と対応づけて記憶し、前記経路画像生成部は、連続して取得された任意の２つの前記高輝度位置の抽出された時刻間の時間が前記時間間隔より長いときには、当該２つの高輝度位置間に仮想経路を生成してもよい。
　このようにすることで、記憶部に記憶されたいずれか２つの高輝度位置の抽出された時刻間の時間が、蛍光画像の撮影の時間間隔より長い場合には、その間の時刻における高輝度位置が抽出されなかった可能性が高いことがわかる。例えば、観察しようとする尿管のような臓器が、脂肪等の組織や他の臓器に部分的に隠れてしまっている等の原因が考えられる。そのような場合においても、２つの高輝度位置間に仮想経路を形成することで、抽出されなかった高輝度位置を補間して、見やすい経路画像を生成することができる。
　上記第１の態様においては、前記観察対象に照明光を照射して前記観察対象から戻る戻り光を撮影し戻り光画像を生成する戻り光画像生成部と、前記経路画像生成部により生成された経路画像と前記戻り光画像生成部により生成された戻り光画像とを重畳する画像合成部とを備え、前記表示部が、前記画像合成部により生成された重畳画像を表示してもよい。
　このようにすることで、観察対象の形態的特徴を表す戻り光画像に、高輝度位置の経路を示す経路画像が重畳されるので、観察者は、観察対象に直接的に対応させて経路画像を確認することができる。
　本発明の第２の態様は、観察対象から発生する蛍光を時間間隔をあけて撮影することにより複数の蛍光画像を生成する蛍光画像生成部と、該蛍光画像生成部により生成された蛍光画像内の各位置において、最大階調値が第１の閾値以上であり、かつ、階調値が第２の閾値以上の幅で変動する高輝度変動位置を抽出する位置抽出部と、該位置抽出部により抽出された高輝度変動位置を記憶する記憶部と、該記憶部に記憶された複数の高輝度位置に階調値を有する経路画像を生成する経路画像生成部と、該経路画像生成部により生成された経路画像を表示する表示部とを備える蛍光観察装置である。
　本発明の第２の態様によれば、蛍光画像生成部により、時間間隔をあけて撮影された複数の蛍光画像が生成された後に、位置抽出部が、蛍光画像内の各位置において階調値が第２の閾値以上の変動幅で変動する位置を抽出することにより、蛍光が移動した位置をより詳細に抽出することができる。さらに、抽出された位置の内、最大階調値が第１の閾値以上である位置を抽出することにより、より強度の高い蛍光を発している位置、すなわち、目的とする高輝度変動位置を精度よく抽出することができる。その結果、連続する経路画像を経路画像生成部により簡易に生成することができる。
　上記第２の態様発明においては、前記位置抽出部が、複数の蛍光画像の各同一位置における最大階調値と最小階調値とを抽出し、その差分により階調値の変動幅を算出してもよく、または、複数の蛍光画像の各同一位置における階調値の時間微分値を計算し、算出された時間微分値により階調値の変動幅を算出してもよい。
　このようにすることで、生成された複数の蛍光画像から、簡易に高輝度変動位置を抽出することができる。
　本発明の第３の態様は、観察対象から発生する蛍光を時間間隔をあけて撮影することにより複数の蛍光画像を生成する蛍光画像生成ステップと、該蛍光画像生成ステップにより生成された各蛍光画像内において、所定の閾値以上の階調値を有する高輝度位置を抽出する位置抽出ステップと、該位置抽出ステップにより抽出された高輝度位置を記憶する記憶ステップと、該記憶ステップにおいて記憶された複数の高輝度位置に階調値を有する経路画像を生成する経路画像生成ステップと、該経路画像生成ステップにより生成された経路画像を表示する表示ステップとを備える蛍光観察方法である。
　本発明の第４の態様は、観察対象から発生する蛍光を時間間隔をあけて撮影することにより複数の蛍光画像を生成する蛍光画像生成ステップと、該蛍光画像生成ステップにより生成された蛍光画像内の各位置において、最大階調値が第１の閾値以上であり、かつ、階調値が第２の閾値以上の幅で変動する高輝度変動位置を抽出する位置抽出ステップと、該位置抽出ステップにより抽出された高輝度変動位置を記憶する記憶ステップと、該記憶ステップおいて記憶された複数の高輝度位置に階調値を有する経路画像を生成する経路画像生成ステップと、該経路画像生成ステップにより生成された経路画像を表示する表示ステップとを備える蛍光観察方法である。
　本発明によれば、蛍光を常時発生させておくことができない臓器であっても、その形状を簡易に特定することができるという効果を奏する。
本発明の一実施形態に係る蛍光観察装置を示す全体構成図である。 図１の蛍光観察装置による重畳画像の生成処理を説明するフローチャートである。 図１の蛍光観察装置による経路画像の生成処理を説明する図であって、最初の高輝度画素を示す画像例を示す図である。 図１の蛍光観察装置による経路画像の生成処理を説明する図であって、２番目の高輝度画素を示す画像例を示す図である。 図１の蛍光観察装置による経路画像の生成処理を説明する図であって、経路画像の画像例を示す図である。 図１の蛍光観察装置の第１の変形例における重複画像の生成処理を説明するフローチャートである。 図４の蛍光観察装置における設定枚数更新処理を説明するフローチャートである。 図４の蛍光観察装置における領域分割と領域数のカウントを説明する図である。 図１の蛍光観察装置の第２の変形例を示す全体構成図である。 図１の蛍光観察装置の第３の変形例を示す全体構成図である。 図１の蛍光観察装置の第４の変形例における重複画像の生成処理を説明するフローチャートである。 図１の蛍光観察装置の第５の変形例における重複画像の生成処理を説明するフローチャートである。 図１の蛍光観察装置の第６の変形例により生成された、空白を有する経路画像を示す図である。 図１の蛍光観察装置の第６の変形例により生成された、仮想経路により補間された経路画像を示す図である。
　本発明の一実施形態に係る蛍光観察装置および蛍光観察方法について、図面を参照して以下に説明する。
　本実施形態に係る蛍光観察装置１は、内視鏡装置であって、図１に示されるように、体内に挿入される細長い挿入部２と、光源３と、該光源３からの励起光および照明光を挿入部２の先端から観察対象Ｆに向けて照射する照明ユニット４と、挿入部２の先端に設けられ、観察対象Ｆである生体組織の画像情報を取得する撮像ユニット５と、挿入部２の基端側に配置され、撮像ユニット５により取得された画像情報を処理する画像処理部６と、該画像処理部６により処理された画像Ｇを表示するモニタ７とを備えている。
　光源３は、キセノンランプ８と、該キセノンランプ８から発せられた光から、励起光および白色光（照明光：波長帯域４００ｎｍから７４０ｎｍ）を切り出すフィルタ９と、フィルタ９により切り出された励起光および照明光を集光するカップリングレンズ１０とを備えている。
　照明ユニット４は、挿入部２の長手方向のほぼ全長にわたって配置され、カップリングレンズ１０によって集光された励起光および白色光を導光するライトガイドファイバ１１と、挿入部２の先端に設けられ、ライトガイドファイバ１１によって導光されてきた励起光および白色光を拡散させて、挿入部２の先端面２ａに対向する観察対象Ｆに照射する照明光学系１２とを備えている。
　撮像ユニット５は、観察対象Ｆの所定の観察範囲から戻る光を集光する対物レンズ１３と、該対物レンズ１３によって集光された光のうち、励起波長以上の光（励起光および蛍光）を反射し、励起波長より短い波長の白色光（戻り光）を透過するダイクロイックミラー１４と、該ダイクロイックミラー１４により反射された蛍光およびダイクロイックミラー１４を透過した白色光をそれぞれ集光する２つの集光レンズ１５，１６と、集光レンズ１５，１６によって集光された白色光および蛍光を撮影するＣＣＤのような２個の撮像素子１７，１８とを備えている。図中、符号１９は、ダイクロイックミラー１４によって反射された光のうち励起光を遮断する（例えば、波長帯域７６０ｎｍから８５０ｎｍの光だけを透過する）励起光カットフィルタである。
　画像処理部６は、撮像素子１７により取得された白色光画像情報から白色光画像Ｇ１を生成する白色光画像生成部２０と、撮像素子１８により取得された蛍光画像情報から蛍光画像Ｇ２を生成する蛍光画像生成部２１と、該蛍光画像生成部２１により生成された蛍光画像Ｇ２において、予め設定されている閾値以上の階調値を有する画素（高輝度画素）を抽出し、その画素の位置（座標）を出力する抽出部（位置抽出部）２２と、該抽出部２２により抽出された画素の位置を記憶する位置記憶部２３と、該位置記憶部２３に記憶されている全ての位置に階調値を有する経路画像Ｇ３を生成する経路画像生成部２４と、白色光画像Ｇ１と経路画像Ｇ３とを重畳して重畳画像Ｇを生成する画像合成部２５とを備えている。
　図中、符号２６は、観察者による画像の切替指示を入力するための入力部である。符号２７は、入力部２６により画像の切替指示が入力されることにより、モニタ７に送る画像を白色光画像Ｇ１と重畳画像Ｇとで切り替える画像切替部である。
　撮像素子１７，１８は、一定のフレームレートで白色光画像情報および蛍光画像情報を取得するようになっている。
　抽出部２２は、蛍光画像生成部２１から送られてくる蛍光画像Ｇ２の各画素の階調値と所定の閾値とを比較して、閾値以上の階調値を有する画素を抽出し、その位置を位置記憶部２３に出力するようになっている。
　位置記憶部２３は、観察開始後、抽出部２２から最初に画素の位置が送られてきた時点で、その位置の記憶を開始する。その後、位置記憶部２３は、設定枚数（例えば、２５枚）分の蛍光画像Ｇ２についての画素の位置を記憶し続けるようになっている。そして、位置記憶部２３は、設定枚数分の蛍光画像Ｇ２について、画素の位置の記憶が終了した時点で、記憶されている全ての画素の位置を経路画像生成部２４に出力するようになっている。
　経路画像生成部２４は、位置記憶部２３から送られてきた全ての画素の位置に、一定の階調値を付与した経路画像Ｇ３を生成するようになっている。すなわち、観察対象Ｆ内において蛍光物質が移動するために、蛍光画像Ｇ２内において高輝度の領域が移動しても、その移動経路が経路画像Ｇ３として生成される。したがって、該経路画像Ｇ３によって蛍光物質が移動した臓器の形状を特定することができるようになっている。
　このように構成された本実施形態に係る蛍光観察装置１の作用について以下に説明する。
　本実施形態に係る蛍光観察装置１を用いて観察対象Ｆである体内の生体組織の観察を行うには、体内に挿入部２を挿入して、挿入部２の先端面２ａを観察対象Ｆに対向させる。そして、光源３を作動させて、励起光および白色光を発生させ、カップリングレンズ１０によってライトガイドファイバ１１に入射させる。ライトガイドファイバ１１内を導光されて挿入部２の先端に達した励起光および白色光は、挿入部２先端の照明光学系１２によって拡散されて観察対象Ｆに照射される。
　観察対象Ｆにおいては、内部に含まれている蛍光物質が励起光によって励起されることにより蛍光が発せられるとともに、観察対象Ｆの表面において白色光が反射させられる。蛍光および白色光の反射光は、観察対象Ｆから挿入部２の先端面２ａに戻り、その一部の観察範囲内から発せられた蛍光および白色光が対物レンズ１３によって集光される。
　図２に、本実施形態に係る蛍光観察方法であって、蛍光観察装置１による重畳画像の生成処理を説明するフローチャートを示す。
　対物レンズ１３によって集光された蛍光および白色光はダイクロイックミラー１４によって波長毎に分岐され、例えば４００ｎｍから７００ｎｍの波長帯域の白色光は、集光レンズ１５によって集光され、撮像素子１７により白色光画像情報として取得される（ステップＳ１）。
　対物レンズ１３によって集光された蛍光および白色光の内、ダイクロイックミラー１４を反射した光、例えば７００ｎｍから８５０ｎｍの波長帯域の励起光および蛍光を含む光からは、励起光カットフィルタ１９によって励起光（例えば７４０ｎｍ以下の光）が除去された後に、蛍光のみが集光レンズ１６によって集光されて撮像素子１８によって蛍光画像情報として取得される（蛍光画像生成ステップＳ１）。
　各撮像素子１７，１８によって取得された画像情報は、画像処理部６に送られる。画像処理部６においては、白色光画像情報が白色光画像生成部２０に入力されて白色光画像Ｇ１が生成される。一方、蛍光画像情報が蛍光画像生成部２１に入力されて蛍光画像Ｇ２が生成される。
　生成された蛍光画像Ｇ２は、抽出部２２に送られて、図３Ａおよび図３Ｂに示されるように、所定の閾値以上の階調値を有する画素（高輝度画素）Ｐが抽出される（位置抽出ステップＳ２）。高輝度画素Ｐが存在しない場合にはステップＳ１に戻って次の画像取得が行われる（ステップＳ３）。高輝度画素Ｐが存在する場合には、抽出された高輝度画素Ｐの位置（座標）が、抽出部２２から位置記憶部２３に出力され、位置記憶部２３に記憶される（記憶ステップＳ４）。
　そして、所定枚数（ここでは、Ｎ０＝２５）の蛍光画像Ｇ２の高輝度画素Ｐの位置が記憶されたか否かが判定され（ステップＳ５）、所定枚数Ｎ０分だけ記憶された時点で、記憶していた全ての高輝度画素Ｐの位置が位置記憶部２３から経路画像生成部２４に出力される。経路画像生成部２４においては、図３Ｃに示されるように、位置記憶部２３から送られてきた全ての高輝度画素Ｐの位置のみに一定の階調値を有する経路画像Ｇ３が生成される（経路画像生成ステップＳ６）。
　生成された経路画像Ｇ３は、画像合成部２５において、白色光画像生成部２０から送られてきた白色光画像Ｇ１と重畳され（ステップＳ７）る。生成された重畳画像Ｇは画像合成部２５から出力される（表示ステップ）。
　観察者は入力部２６から切替指示を入力することにより、白色光画像Ｇ１か重畳画像Ｇかを切り替えてモニタ７に表示させるように画像切替部２７を作動させることができる。
　このように、本実施形態に係る蛍光観察装置１によれば、観察者が、入力部２６から切替指示を入力することにより、時間間隔をあけて取得された所定枚数の蛍光画像Ｇ２において閾値以上の階調値を有する高輝度画素Ｐの位置に階調値を有する経路画像Ｇ３が、白色光画像Ｇ１に重畳されて表示される。この重畳画像Ｇから、蛍光物質が観察対象Ｆ内において移動する場合においても、その移動経路を特定することが可能となる。
　例えば、尿道を流れる蛍光物質を含む液体からの蛍光のように、観察対象Ｆ内を移動する高い強度の蛍光は、時間間隔をあけて生成された複数の蛍光画像Ｇ２内において異なる位置に配置されることとなる。これら全ての高輝度位置Ｐに階調値を有する経路画像Ｇ３は、蛍光の移動経路、つまり、尿道等の臓器の形状を良好に表すことができる。その結果、蛍光を常時発生させておくことができない尿管等の臓器であっても、その形状を簡易に特定することができるという利点がある。
　本実施形態においては、以下の変形例を採用することにしてもよい。
　第１に、本実施形態においては、高輝度画素Ｐを抽出する蛍光画像Ｇ２の取得枚数を所定の設定枚数Ｎ０（例えば、２５枚）に固定したが、これに代えて、以下のように変動させることにしてもよい。
　すなわち、最初の設定枚数Ｎ０分の蛍光画像Ｇ２による経路画像Ｇ３が生成された時点で、図４に示されるように、設定枚数更新ステップＳ８に移行する。
　設定枚数更新ステップＳ８においては、図５および図６に示されるように、生成された経路画像Ｇ３全体を複数画素（図６に示す例では、３×３＝９画素）からなる複数の領域Ｒに分割し（ステップＳ８１）、階調値を有する画素（斜線で示す）を少なくとも１つ含む領域Ｒ（破線で囲まれた領域）の数Ａをカウントする（ステップＳ８２）。図６においては領域数Ａは５である。そして、カウントされた領域数Ａが、所定の領域数閾値Ａ０以下であるか否かを判定し（ステップＳ８３）、所定の領域数閾値Ａ０以下である場合には、設定枚数Ｎ０を増加させることにすればよい。
　例えば、図５において、最初の設定枚数Ｎ０を１０枚とし、経路画像Ｇ３全体において、十分な長さの経路が表示されていると判定できる領域数閾値Ａ０を５０とする。カウントされた領域数Ａが２０であった場合には、経路画像Ｇ３を生成するために取得する蛍光画像Ｇ２の設定枚数Ｎ０を２．５（＝５０÷２０）倍の２５枚に更新すればよい（ステップＳ８４）。
　観察対象Ｆにおける蛍光物質の移動速度が遅い場合には、最初に設定された設定枚数Ｎ０では、経路画像Ｇ３内に表れる経路が非常に短くなってしまうことがある。そこで、上記のように設定枚数Ｎ０を更新することにより、十分な長さの経路が表された経路画像Ｇ３を生成することができるという利点がある。
　第２に、分割する領域の大きさは、観察条件に依存する。すなわち、観察対象Ｆにおいて蛍光物質を比較的大きく観察する観察条件においては、分割数を少なくして、分割された個々の領域を大きくする。一方、蛍光物質を比較的小さく観察する観察条件においては、分割数を多くして、分割された個々の領域を小さくすることが好ましい。
　この目的から、図７に示されるように、蛍光観察装置１が、観察対象部位に応じて交換できるように、光源３および画像処理部６に対して着脱可能な挿入部（着脱部品）２を備えており、挿入部２には、該挿入部２の識別情報を記憶するＩＣチップ６１が設けられていてもよい。挿入部２が取り付けられる光源３側には、ＩＣチップ６１内の識別情報を読み取る読取装置６２が備えられている。
　さらに、画像処理部６には、識別情報と分割数とを対応づけて記憶する分割数記憶部６３が備えられている。該分割数記憶部６３は、抽出部２２に接続されている。
　挿入部２が取り付けられると、該挿入部２に設けれられているＩＣチップ６１内の識別情報が読取装置６２によって読み取られ、画像処理部６に送られるようになっている。
　画像処理部６においては、送られてきた識別情報に対応する分割数が分割数記憶部６３から読み出され、抽出部２２により抽出された注目領域Ｒの数が、経路画像を生成するために十分な数であるか否かが容易に判断される。
　これにより、観察条件に合わせて適正な分割数、すなわち、分割される各領域の大きさを簡易に適正な大きさに設定することができる。
　第３に、図８に示されるように、挿入部２の着脱によって分割数を切り替えることに代えて、分割数記憶部６４に、白色光画像の輝度情報と分割数とを対応づけて記憶しておき、白色光画像生成部２０により生成された白色光画像Ｇ１の輝度情報、例えば、平均輝度値に対応する分割数を分割数記憶部６４から読み出して、抽出部２２に設定することにしてもよい。
　例えば、白色光画像Ｇ１が明るいほど少なく、暗いほど多くなる分割数で分割することにより、適正な経路画像Ｇ３を生成することができる。すなわち、白色光画像Ｇ１の輝度は、照明光の照射位置と観察対象Ｆとの距離に依存するので、輝度が高い場合には、観察しようとする高輝度の領域が蛍光画像Ｇ２中において大きくなる。したがって、このような場合には、分割数を少なく、すなわち、分割された領域を大きくすることで、適正な経路画像Ｇ３を生成することができる。
　第４に、本実施形態においては、設定枚数Ｎ０分の蛍光画像Ｇ２について高輝度画素Ｐが抽出された後に経路画像Ｇ３を生成することとしたが、これに代えて、図９に示されるように、１枚の蛍光画像Ｇ２が取得される毎に経路画像Ｇ３を更新していくことにしてもよい。
　このようにすることで、蛍光物質の移動に従って、重畳画像Ｇ中の移動経路が延びていくようにモニタ７に表示することができる。これにより、よりリアルタイムに臓器の形状を観察することができるという利点がある。この場合に、設定枚数Ｎ０分の処理が終了した時点で、それまでに生成された経路画像Ｇ３を消去し新たな経路画像Ｇ３の生成を開始することにより、最新の経路画像Ｇ３を用いた観察を行うことができる。
　第５に、本実施形態においては、設定枚数Ｎ０分の各蛍光画像Ｇ２から抽出した高輝度画素Ｐの位置を蓄積して経路画像Ｇ３を生成することとしたが、これに代えて、設定枚数Ｎ０分の蛍光画像Ｇ２を取得した後に、各画素における最大階調値Ｂおよび該最大階調値と最小階調値との差分値Ｃを求め最大階調値Ｂが第１の閾値以上であり、かつ、差分値Ｃが第２の閾値以上である画素を高輝度画素Ｐとして抽出することにしてもよい。
　すなわち、図１０に示されるように、設定枚数Ｎ０分の蛍光画像Ｇ２を記憶し、各蛍光画素Ｇ２において最大階調値Ｂを抽出し（位置抽出ステップＳ１０）、抽出された最大階調値Ｂが第１の閾値Ｂ０以上か否かを判定する（位置抽出ステップＳ１１）。最大階調値Ｂが第１の閾値Ｂ０以上の場合には、最大階調値Ｂと最小階調値との差分値Ｃを算出し（位置抽出ステップＳ１２）、算出された差分値Ｃが第２の閾値Ｃ０以上か否かを判定する（位置抽出ステップＳ１３）。この差分値Ｃは、最大階調値Ｂを有する画素の、複数の蛍光画像Ｇ２間における階調値の変動幅、すなわち、時間軸方向の階調値の変動幅であり、当該画素と対応する観察対象Ｆの位置における蛍光強度の時間変化幅に相当する。
　差分値Ｃが第２の閾値以上である場合には、その画素の位置を記憶する（記憶ステップＳ１４）。
　これにより、最大階調値Ｂが第１の閾値Ｂ０以上であり、かつ、差分値Ｃが第２の閾値Ｃ０以上である画素の位置が記憶される。
　最大階調値Ｂが第１の閾値Ｂ０未満である場合、または、差分値Ｃが第２の閾値Ｃ０未満である場合には、画素の位置を記憶することなく、画素をｘ方向またはｙ方向にずらして、次の画素について同様の判定を行う。ステップＳ１０からステップＳ１４の処理を、ｘ＝ｘＭＡＸ、ｙ＝ｙＭＡＸとなるまで繰り返すことにより（ステップＳ１５からステップＳ１８）、全ての画素について上記判定が行われる。
　そして、全ての画素について判定が行われた後に、位置記憶部２３は経路画像生成部２４に、上記条件を満たした全ての画素の位置を出力する。経路画像生成部２４は、これらの画素の位置にのみ階調値を有する経路画像Ｇ３を生成する（経路画像生成ステップ）。
　このようにすることで、移動しない高輝度位置Ｐが経路として抽出されてしまう不都合を防止して、より正確な蛍光物質の経路を観察者に提供することができるという利点がある。
　なお、この第５の変形例においては、蛍光画像Ｇ２内の各位置の階調値の変動幅として、最大階調値Ｂと最小階調値との差分値Ｃに代えて、階調値の時間微分値を用いてもよい。すなわち、最大階調値Ｂを有する画素について、時間軸方向に並ぶ複数の蛍光画像Ｇ２から階調値を抽出し、抽出された階調値の時間軸方向の変化から階調値の時間微分値を求め、算出された時間微分値を第２の閾値と比較する。そして、時間微分値が第２の閾値以上である場合、その画素の位置を記憶する。このようにしても、蛍光強度が十分に大きな幅で時間変化した位置を選択的に抽出することができる。
　第６に、高輝度画素Ｐの位置を位置記憶部２３に記憶する際に、高輝度画素Ｐが抽出された時刻に対応づけて記憶することにしてもよい。そして、設定枚数Ｎ０分の蛍光画像Ｇ２について高輝度画素Ｐが抽出された後、経路画像生成部２４による経路画像Ｇ３の生成の際に、高輝度画素Ｐが存在しない時刻が存在する場合に、図１１Ａおよび図１１Ｂに示されるように、その時刻の前後における最も近い位置の高輝度画素Ｐどうしを接続する仮想経路Ｑを生成することにしてもよい。
　このようにすることで、例えば、尿管等の臓器が、脂肪組織や他の臓器の下に部分的に隠れてしまい、内部を流れる蛍光物質からの蛍光が部分的に検出できない場合においても、検出された高輝度画素Ｐどうしを仮想経路Ｑによって結ぶことにより、隠れている尿管等の臓器の位置を推測することが可能となる。
　仮想経路Ｑは、高輝度画素Ｐどうしを直線によって接続してもよいし、前後の経路の形状から推測される曲線により接続してもよい。また、経路画像Ｇ３中において仮想経路Ｑであることがわかるように、他の経路部分とは色を変えたり、破線で生成したりしてもよい。
Ａ　領域数
Ｂ　最大階調値
Ｃ　差分値（差分）
Ｆ　観察対象
Ｇ１　白色光画像（戻り光画像）
Ｇ２　蛍光画像
Ｇ３　経路画像
Ｐ　高輝度位置
Ｒ　領域
Ｎ０　設定枚数
Ａ０　領域数閾値
１　蛍光観察装置
２　挿入部（着脱部品）
７　モニタ（表示部）
２０　白色光画像生成部（戻り光画像生成部）
２１　蛍光画像生成部
２２　抽出部（位置抽出部、領域分割部）
２３　位置記憶部（記憶部）
２４　経路画像生成部
２５　画像合成部
６１　ＩＣチップ（識別情報記憶部）
６２　読取装置（識別情報読取部）

Claims (14)

  1. 　観察対象から発生する蛍光を時間間隔をあけて撮影することにより複数の蛍光画像を生成する蛍光画像生成部と、
    　該蛍光画像生成部により生成された各蛍光画像内において、所定の閾値以上の階調値を有する高輝度位置を抽出する位置抽出部と、
    　該位置抽出部により抽出された高輝度位置を記憶する記憶部と、
    　該記憶部に記憶された複数の高輝度位置に階調値を有する経路画像を生成する経路画像生成部と、
    　該経路画像生成部により生成された経路画像を表示する表示部とを備える蛍光観察装置。
  2. 　観察対象から発生する蛍光を時間間隔をあけて撮影することにより複数の蛍光画像を生成する蛍光画像生成部と、
    　該蛍光画像生成部により生成された蛍光画像内の各位置において、最大階調値が第１の閾値以上であり、かつ、階調値が第２の閾値以上の幅で変動する高輝度変動位置を抽出する位置抽出部と、
    　該位置抽出部により抽出された高輝度変動位置を記憶する記憶部と、
    　該記憶部に記憶された複数の高輝度位置に階調値を有する経路画像を生成する経路画像生成部と、
    　該経路画像生成部により生成された経路画像を表示する表示部とを備える蛍光観察装置。
  3. 　前記位置抽出部が、複数の蛍光画像の各同一位置における最大階調値と最小階調値とを抽出し、その差分により階調値の変動幅を算出する請求項２に記載の蛍光観察装置。
  4. 　前記位置抽出部が、複数の蛍光画像の各同一位置における階調値の時間微分値を計算し、算出された時間微分値により階調値の変動幅を算出する請求項２に記載の蛍光観察装置。
  5. 　前記蛍光画像生成部が、前記観察対象を設定枚数だけ撮影して該設定枚数の蛍光画像を生成し、
    　前記経路画像生成部により生成された経路画像を複数の領域に分割する領域分割部と、
    　該領域分割部により分割された領域のうち、階調値を有する画素が存在する領域の数を計数する領域数計数部と、
    　該領域数計数部により計数された領域数に応じて前記蛍光画像生成部により生成される蛍光画像の前記設定枚数を更新する枚数更新部とを備える請求項１に記載の蛍光観察装置。
  6. 　前記枚数更新部は、前記領域数計数部により計数された領域数が、領域数閾値より少ない場合に、前記設定枚数を増加させるよう更新する請求項５に記載の蛍光観察装置。
  7. 　観察条件を変更するために着脱される着脱部品と、
    　該着脱部品に設けられ、該着脱部品の識別情報を記憶する識別情報記憶部と、
    　該識別情報記憶部に記憶された識別情報を読み取る識別情報読取部とを備え、
    　前記領域分割部が、前記識別情報読取部により読み取られた識別情報に対応して記憶されている分割数に従って前記蛍光画像を分割する請求項５または請求項６に記載の蛍光観察装置。
  8. 　前記観察対象に照明光を照射して前記観察対象から戻る戻り光を撮影し戻り光画像を生成する戻り光画像生成部を備え、
    　前記領域分割部が、前記戻り光画像生成部により生成された戻り光画像の輝度情報に対応して記憶されている分割数に従って前記蛍光画像を分割する請求項５または請求項６に記載の蛍光観察装置。
  9. 　前記位置抽出部が、前記蛍光画像生成部により蛍光画像が生成される都度に前記高輝度位置を抽出し、
    　前記経路画像生成部が、前記位置抽出部により前記高輝度位置が抽出される都度に経路画像を生成する請求項１に記載の蛍光観察装置。
  10. 　前記経路画像生成部が、観察対象の観察範囲に対応する経路画像の生成開始時または生成終了時を検出し、生成開始時または生成終了時が検出された時点で、既に生成された経路画像を消去する請求項９に記載の蛍光観察装置。
  11. 　前記蛍光画像生成部が、所定の時間間隔で撮影して蛍光画像を生成し、
    　前記記憶部が、前記高輝度位置を該高輝度位置が抽出された時刻と対応づけて記憶し、
    　前記経路画像生成部は、連続して取得された任意の２つの前記高輝度位置の抽出された時刻間の時間が前記時間間隔より長いときには、当該２つの高輝度位置間に仮想経路を生成する請求項１に記載の蛍光観察装置。
  12. 　前記観察対象に照明光を照射して前記観察対象から戻る戻り光を撮影し戻り光画像を生成する戻り光画像生成部と、
    　前記経路画像生成部により生成された経路画像と前記戻り光画像生成部により生成された戻り光画像とを重畳する画像合成部とを備え、
    　前記表示部が、前記画像合成部により生成された重畳画像を表示する請求項１に記載の蛍光観察装置。
  13. 　観察対象から発生する蛍光を時間間隔をあけて撮影することにより複数の蛍光画像を生成する蛍光画像生成ステップと、
    　該蛍光画像生成ステップにより生成された各蛍光画像内において、所定の閾値以上の階調値を有する高輝度位置を抽出する位置抽出ステップと、
    　該位置抽出ステップにより抽出された高輝度位置を記憶する記憶ステップと、
    　該記憶ステップにおいて記憶された複数の高輝度位置に階調値を有する経路画像を生成する経路画像生成ステップと、
    　該経路画像生成ステップにより生成された経路画像を表示する表示ステップとを備える蛍光観察方法。
  14. 　観察対象から発生する蛍光を時間間隔をあけて撮影することにより複数の蛍光画像を生成する蛍光画像生成ステップと、
    　該蛍光画像生成ステップにより生成された蛍光画像内の各位置において、最大階調値が第１の閾値以上であり、かつ、階調値が第２の閾値以上の幅で変動する高輝度変動位置を抽出する位置抽出ステップと、
    　該位置抽出ステップにより抽出された高輝度変動位置を記憶する記憶ステップと、
    　該記憶ステップおいて記憶された複数の高輝度位置に階調値を有する経路画像を生成する経路画像生成ステップと、
    　該経路画像生成ステップにより生成された経路画像を表示する表示ステップとを備える蛍光観察方法。
PCT/JP2012/064085 2011-06-03 2012-05-31 蛍光観察装置および蛍光観察方法 WO2012165553A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2013518164A JP6042808B2 (ja) 2011-06-03 2012-05-31 蛍光観察装置および蛍光観察装置の作動方法
CN201280025942.4A CN103561626B (zh) 2011-06-03 2012-05-31 荧光观察装置和荧光观察方法
US14/091,673 US9516235B2 (en) 2011-06-03 2013-11-27 Fluorescence observation apparatus and fluorescence observation method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011125524 2011-06-03
JP2011-125524 2011-06-03

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US14/091,673 Continuation US9516235B2 (en) 2011-06-03 2013-11-27 Fluorescence observation apparatus and fluorescence observation method

Publications (1)

Publication Number Publication Date
WO2012165553A1 true WO2012165553A1 (ja) 2012-12-06

Family

ID=47259405

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/064085 WO2012165553A1 (ja) 2011-06-03 2012-05-31 蛍光観察装置および蛍光観察方法

Country Status (4)

Country Link
US (1) US9516235B2 (ja)
JP (1) JP6042808B2 (ja)
CN (1) CN103561626B (ja)
WO (1) WO2012165553A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018029880A (ja) * 2016-08-26 2018-03-01 キヤノンメディカルシステムズ株式会社 医用画像処理装置および内視鏡装置

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012176285A1 (ja) * 2011-06-21 2012-12-27 オリンパス株式会社 蛍光観察装置、蛍光観察システムおよび蛍光画像処理方法
JP5926909B2 (ja) 2011-09-07 2016-05-25 オリンパス株式会社 蛍光観察装置
CN105654457A (zh) * 2014-11-14 2016-06-08 富士通株式会社 图像处理装置和方法
DE112017002826T5 (de) * 2016-06-06 2019-02-28 Olympus Corporation Endoskopvorrichtung
WO2017221336A1 (ja) * 2016-06-21 2017-12-28 オリンパス株式会社 内視鏡システム、画像処理装置、画像処理方法およびプログラム
CN108961250B (zh) * 2018-07-20 2023-02-07 中国科学院深圳先进技术研究院 一种目标物统计方法、装置、终端以及存储介质
JP7281308B2 (ja) * 2019-03-07 2023-05-25 ソニー・オリンパスメディカルソリューションズ株式会社 医療用画像処理装置及び医療用観察システム
CN116958152B (zh) * 2023-09-21 2024-01-12 中科航迈数控软件(深圳)有限公司 一种零件尺寸测量方法、装置、设备及介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010017396A (ja) * 2008-07-11 2010-01-28 Olympus Corp 生体観察方法および装置
JP4587811B2 (ja) * 2005-01-11 2010-11-24 オリンパス株式会社 蛍光観察内視鏡装置

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3869589B2 (ja) * 1999-09-02 2007-01-17 ペンタックス株式会社 ファイババンドル及び内視鏡装置
US6781724B1 (en) * 2000-06-13 2004-08-24 Eastman Kodak Company Image processing and manipulation system
EP1301118B1 (en) * 2000-07-14 2006-09-06 Xillix Technologies Corp. Compact fluorescence endoscopy video system
WO2004080291A2 (en) * 2003-03-12 2004-09-23 Color Kinetics Incorporated Methods and systems for medical lighting
DE10358735B4 (de) * 2003-12-15 2011-04-21 Siemens Ag Kathetereinrichtung umfassend einen Katheter, insbesondere einen intravaskulären Katheter
US20060173358A1 (en) * 2005-01-11 2006-08-03 Olympus Corporation Fluorescence observation endoscope apparatus and fluorescence observation method
JP2006263044A (ja) * 2005-03-23 2006-10-05 Fuji Photo Film Co Ltd 蛍光検出システム
EP2562266B1 (en) * 2005-03-30 2016-02-24 Olympus Corporation Predetermined site luminescence measuring method, predetermined site luminescence measuring apparatus, expression amount measuring method, and measuring apparatus
JP4643481B2 (ja) * 2006-03-23 2011-03-02 オリンパスメディカルシステムズ株式会社 画像処理装置
JP5021254B2 (ja) * 2006-09-06 2012-09-05 オリンパス株式会社 顕微鏡装置の制御方法、顕微鏡装置
JP5372356B2 (ja) * 2007-10-18 2013-12-18 オリンパスメディカルシステムズ株式会社 内視鏡装置及び内視鏡装置の作動方法
CN101909509B (zh) * 2007-11-12 2013-03-27 康奈尔大学 多路径、多放大率、非共焦荧光发射内窥镜装置和方法
US20090192385A1 (en) * 2008-01-25 2009-07-30 Oliver Meissner Method and system for virtual roadmap imaging
US8167793B2 (en) * 2008-04-26 2012-05-01 Intuitive Surgical Operations, Inc. Augmented stereoscopic visualization for a surgical robot using time duplexing
US8655043B2 (en) * 2008-05-16 2014-02-18 Huron Technologies International Inc. Imaging system with dynamic range maximization
CN102333473A (zh) * 2009-03-24 2012-01-25 奥林巴斯医疗株式会社 荧光观察装置
CN102164530B (zh) * 2009-03-30 2014-07-30 奥林巴斯医疗株式会社 荧光观察装置
JP2012090889A (ja) * 2010-10-28 2012-05-17 Olympus Corp 蛍光観察装置
JP5485191B2 (ja) * 2011-01-19 2014-05-07 富士フイルム株式会社 内視鏡装置
JP5485190B2 (ja) * 2011-01-19 2014-05-07 富士フイルム株式会社 内視鏡装置
WO2013015120A1 (ja) * 2011-07-22 2013-01-31 オリンパス株式会社 蛍光内視鏡装置
JP5926909B2 (ja) * 2011-09-07 2016-05-25 オリンパス株式会社 蛍光観察装置
JP6141196B2 (ja) * 2011-12-28 2017-06-07 オリンパス株式会社 蛍光観察装置
JP5993237B2 (ja) * 2012-07-25 2016-09-14 オリンパス株式会社 蛍光観察装置
JP6017219B2 (ja) * 2012-08-01 2016-10-26 オリンパス株式会社 蛍光観察装置および蛍光観察システム
EP2926713A4 (en) * 2012-11-30 2016-07-20 Olympus Corp OBSERVATION DEVICE

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4587811B2 (ja) * 2005-01-11 2010-11-24 オリンパス株式会社 蛍光観察内視鏡装置
JP2010017396A (ja) * 2008-07-11 2010-01-28 Olympus Corp 生体観察方法および装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018029880A (ja) * 2016-08-26 2018-03-01 キヤノンメディカルシステムズ株式会社 医用画像処理装置および内視鏡装置
JP7014509B2 (ja) 2016-08-26 2022-02-01 キヤノンメディカルシステムズ株式会社 医用画像処理装置および内視鏡装置

Also Published As

Publication number Publication date
CN103561626B (zh) 2015-12-02
US9516235B2 (en) 2016-12-06
CN103561626A (zh) 2014-02-05
US20140078279A1 (en) 2014-03-20
JPWO2012165553A1 (ja) 2015-02-23
JP6042808B2 (ja) 2016-12-14

Similar Documents

Publication Publication Date Title
JP6042808B2 (ja) 蛍光観察装置および蛍光観察装置の作動方法
JP5993237B2 (ja) 蛍光観察装置
JP6057890B2 (ja) 蛍光観察装置
US9392942B2 (en) Fluoroscopy apparatus and fluoroscopy system
US10491813B2 (en) Image processing apparatus and image processing method
JP6188721B2 (ja) 蛍光観察装置
JP5802440B2 (ja) 蛍光観察装置
JP5714875B2 (ja) 蛍光内視鏡装置
WO2012147820A1 (ja) 蛍光観察装置とその画像表示方法
JP5993184B2 (ja) 蛍光観察装置および蛍光観察装置の作動方法
WO2012056970A1 (ja) 蛍光観察装置
JP2012170774A (ja) 内視鏡システム
JP5484997B2 (ja) 蛍光観察装置および蛍光観察装置の作動方法
JP2012170641A (ja) 蛍光観察装置
WO2016084504A1 (ja) 診断支援装置及び診断支援情報表示方法
JPWO2019087557A1 (ja) 内視鏡システム
EP1743568A2 (en) Image processing device
WO2018047369A1 (ja) 内視鏡システム
JP5346635B2 (ja) 蛍光観察装置
JPWO2017104192A1 (ja) 医用観察システム
JP2005204958A (ja) 自家蛍光観察可能な電子内視鏡装置およびシステム
JP6205531B1 (ja) 内視鏡システム
JP2016202411A (ja) 蛍光観察装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12793945

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2013518164

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12793945

Country of ref document: EP

Kind code of ref document: A1