WO2019215905A1 - 治療支援装置および治療支援システム - Google Patents

治療支援装置および治療支援システム Download PDF

Info

Publication number
WO2019215905A1
WO2019215905A1 PCT/JP2018/018285 JP2018018285W WO2019215905A1 WO 2019215905 A1 WO2019215905 A1 WO 2019215905A1 JP 2018018285 W JP2018018285 W JP 2018018285W WO 2019215905 A1 WO2019215905 A1 WO 2019215905A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
treatment
fluorescence
fluorescent
unit
Prior art date
Application number
PCT/JP2018/018285
Other languages
English (en)
French (fr)
Inventor
紘之 妻鳥
石川 亮宏
Original Assignee
株式会社島津製作所
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社島津製作所 filed Critical 株式会社島津製作所
Priority to PCT/JP2018/018285 priority Critical patent/WO2019215905A1/ja
Publication of WO2019215905A1 publication Critical patent/WO2019215905A1/ja

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B10/00Other methods or instruments for diagnosis, e.g. instruments for taking a cell sample, for biopsy, for vaccination diagnosis; Sex determination; Ovulation-period determination; Throat striking implements
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons

Definitions

  • the present invention relates to a treatment support apparatus and a treatment support system, and more particularly to a treatment support apparatus and a treatment support system that capture an image of a treatment target site in a subject at the time of treatment and perform treatment support.
  • JP 2012-023492 A irradiates a subject containing a fluorescent agent with visible light and excitation light, and obtains a fluorescent image based on the fluorescence generated from the fluorescent agent by the visible light image and the excitation light of the subject.
  • a treatment support apparatus that performs treatment support is disclosed.
  • Japanese Patent Application Laid-Open No. 2012-023492 discloses a configuration in which a visible light image and a fluorescence image are acquired by irradiating an operation site to which a fluorescent agent has been administered with switching between visible light and excitation light. Yes.
  • the fluorescent agent is an agent that emits fluorescence of a predetermined wavelength when irradiated with excitation light of a predetermined wavelength.
  • ICG indocyanine green
  • a fluorescent agent for purposes other than simply visualizing the part to be excised.
  • a method of using such a fluorescent agent is disclosed in, for example, Japanese Patent Application Laid-Open No. 2017-071654.
  • a drug in which a substance that emits fluorescence by absorbing excitation light and an antibody that selectively binds to cancer cells is bound is administered to a subject, and the fluorescence image is displayed on the fluorescence image.
  • a method for killing cancer cells by irradiating with excitation light after specifying the position of the cancer cells by the fluorescence to be displayed is disclosed.
  • IRDye (registered trademark) 700Dx hereinafter referred to as IR700
  • IR700 IRDye (registered trademark) 700Dx
  • the present invention is not limited to the method disclosed in Japanese Patent Application Laid-Open No. 2017-071654, and there is a case where it is desired to easily confirm the therapeutic effect by comparing the fluorescence images before and after treatment when performing treatment using a fluorescent agent. It is believed that there is. In addition, there are cases where it is desired to simply confirm whether there is a therapeutic effect or whether the treatment has already been completed during treatment.
  • the present invention has been made to solve the above-described problems, and one object of the present invention is to easily confirm the therapeutic effect when performing treatment using a fluorescent agent.
  • a treatment support apparatus is a treatment support apparatus that captures an image of a treatment target site in a subject at the time of treatment, and performs treatment support.
  • Fluorescence detection unit that detects fluorescence emitted from the fluorescent agent accumulated in the region
  • fluorescence image generation unit that generates a fluorescence image based on the signal output from the fluorescence detection unit, and fluorescence generated by the fluorescence image generation unit
  • An image output unit that outputs at least a first fluorescent image and a second fluorescent image at different treatment points of time to the display unit.
  • the fluorescence detection unit and the fluorescence image generation unit image the fluorescence image based on the fluorescence emitted from the fluorescent agent, and the image output unit.
  • the first fluorescent image and the second fluorescent image that are different in the treatment time point out of the fluorescent images generated by the fluorescent image generating unit can be output to the display unit.
  • the first fluorescence is extracted based on the extraction unit that extracts at least one feature point in the fluorescence image and the position information of the feature point extracted by the extraction unit.
  • An alignment unit that aligns the image with the second fluorescent image, and the image output unit includes the first fluorescent image and the second fluorescent image that are aligned by the alignment unit, It is comprised so that it may output to a display part. If comprised in this way, the 1st fluorescence image and 2nd fluorescence image from which a treatment time differs will be displayed on a display part in the state aligned based on the positional information on the feature point in a fluorescence image Therefore, it is possible to accurately compare fluorescent images at different treatment points.
  • the image output unit outputs an output image that displays the first fluorescent image and the second fluorescent image in a comparable manner, or an output image that is displayed in a superimposed manner. Is output to the display unit. If comprised in this way, since the 1st fluorescence image and 2nd fluorescence image from which a treatment time differs can be displayed on a display part so that contrast is possible, or it can be made to superimpose and display, Compared with the case where the images cannot be displayed in a comparable manner and the case where they cannot be displayed in a superimposed manner, fluorescence images at different treatment points can be compared more easily.
  • the image output unit includes a region in which fluorescence is reflected in common among the fluorescence regions reflected in the first fluorescence image and the second fluorescence image, It is configured so that it is colored in a different color in the region where the fluorescence is reflected only on one side and is output to the display unit. If configured in this manner, the first fluorescent image can be displayed on the display unit by coloring the common fluorescent region and the fluorescent region only on one side in different colors. And the second fluorescent image can be easily compared. As a result, it is possible to easily compare differences between fluorescent images at different treatment points.
  • a visible light detection unit that detects visible light
  • a visible image generation unit that generates a visible image based on a signal output by the visible light detection unit
  • An extraction unit that extracts at least one feature point in the image, and alignment of the first fluorescence image and the second fluorescence image based on the positional information of the feature point in the visible image extracted by the extraction unit
  • an image output unit configured to output the first fluorescent image and the second fluorescent image aligned by the alignment unit to the display unit.
  • the 1st fluorescence image and 2nd fluorescence image from which a treatment time differs will be displayed on a display part in the state aligned based on the positional information on the feature point in a visible image Therefore, it is possible to accurately compare fluorescent images at different treatment points.
  • the image output unit is configured to output at least one or more visible images generated by the visible image generating unit together with the first fluorescent image and the second fluorescent image to the display unit. Yes. If configured in this way, the area around the part where the fluorescence is reflected in the fluorescence image can be observed by the visible image, so that it is reflected in the fluorescence image as compared with the case where only the fluorescence image is displayed. The part to which the fluorescent agent is administered can be easily confirmed.
  • the image output unit preferably superimposes one visible image, the first fluorescent image, and the second fluorescent image among the visible images generated by the visible image generation unit. And output to the display unit. If configured in this way, the area around the portion where the fluorescence is reflected in the fluorescence image can be observed with the visible image superimposed on the fluorescence image, so the imaging direction, imaging position, imaging angle, etc. of the subject Even when the imaging conditions are different between fluorescent images at different treatment points, the difference between the portions to which the fluorescent agent is administered can be easily confirmed.
  • the image output unit superimposes the first visible image on the first fluorescent image among the visible images generated by the visible image generation unit, and generates the second visible image.
  • the image is superimposed on the second fluorescent image and output to the display unit. If comprised in this way, the area
  • the alignment unit performs alignment between the first visible image and the second visible image based on the position information of the feature points in the visible image extracted by the extraction unit, and outputs the image.
  • the unit superimposes the first visible image aligned by the alignment unit on the first fluorescence image, superimposes the second visible image aligned by the alignment unit on the second fluorescence image, It is comprised so that it may output to a display part. If comprised in this way, the 1st fluorescence image and the 2nd fluorescence image which were mutually aligned on the 1st visible image and 2nd visible image which were mutually aligned, respectively, may be superimposed and displayed. Therefore, even if the imaging conditions such as the imaging direction, imaging position, and imaging angle of the subject are different between fluorescent images at different treatment points, the difference between the portions where the fluorescent drug is administered can be confirmed easily and more accurately. Can do.
  • a treatment support system is a treatment support system that captures an image of a treatment target site in a subject at the time of treatment, and performs treatment support.
  • a fluorescence detection unit that detects fluorescence emitted from the fluorescent agent accumulated in the treatment target site
  • a fluorescence image generation unit that generates a fluorescence image based on a signal output by the fluorescence detection unit
  • a display device that displays at least a first fluorescent image and a second fluorescent image that are different in time of treatment among the fluorescent images generated by the fluorescent image generating unit is provided.
  • the fluorescence detection unit and the fluorescence image generation unit image the fluorescence image based on the fluorescence emitted from the fluorescent agent, and the display device Of the fluorescence images generated by the fluorescence image generation unit, at least a first fluorescence image and a second fluorescence image at different treatment points can be displayed.
  • the fluorescence images from which a treatment time differs can be compared easily.
  • the therapeutic effect can be easily confirmed.
  • the therapeutic effect when a treatment using a fluorescent agent is performed, the therapeutic effect can be easily confirmed.
  • FIG. 1 is a perspective view of a treatment support apparatus and a treatment support system according to a first embodiment of the present invention. It is the block diagram which showed the outline of the treatment assistance apparatus and treatment assistance system by 1st Embodiment of this invention. It is the schematic of the imaging part of the treatment assistance apparatus by 1st Embodiment of this invention. It is the block diagram which showed the outline inside the imaging part of the treatment assistance apparatus by 1st Embodiment of this invention. It is the figure which showed a mode that the pre-treatment visible image, the pre-treatment fluorescence image, and the pre-treatment synthetic image were displayed on the display apparatus of the treatment assistance system by 1st Embodiment of this invention.
  • the treatment support apparatus 100 is an apparatus (system) for capturing an image of a treatment target site in the subject P during treatment and performing treatment support.
  • the display device 900 is an example of the “display unit” in the claims.
  • the treatment support apparatus 100 includes an imaging unit 10 for imaging a subject P, a main body unit 20 including a control unit 21 (see FIG. 2), and the like.
  • the arm part 30 which connects the part 10 and the main-body part 20 and the operation part 40 for operating the treatment assistance apparatus 100 are provided.
  • the treatment support apparatus 100 is configured to irradiate the fluorescent agent administered to the subject P with the excitation light Ex and detect and image the fluorescence Lx emitted when the fluorescent agent is excited by the excitation light Ex. Device.
  • the treatment support apparatus 100 is configured to be able to display an image captured by the imaging unit 10 on the display device 900.
  • the imaging unit 10 is configured to correspond to the IR700 wavelength band as a fluorescent agent to be administered to the subject P.
  • IR700 is a drug obtained by binding a substance that emits fluorescence Lx (Lx1) by absorbing excitation light Ex (Ex1) and an antibody that selectively binds to cancer cells M. That is, the IR 700 is a fluorescent agent that is accumulated at the treatment target site of the subject P.
  • the fluorescence Lx1 is light having a peak in the wavelength band of near-infrared light (invisible light).
  • IR700 is an example of the “fluorescent agent” in the claims.
  • IR700 is a drug used for near-infrared photoimmunotherapy (NIR-PIT) in which cancer cells M (see FIG. 5) are killed by irradiation with therapeutic light in a state administered to the subject P. .
  • the therapeutic light is near infrared light having an absorption wavelength of IR700 of about 600 nm to about 700 nm.
  • the treatment light has a higher irradiation intensity than the excitation light Ex1 for imaging the cancer cell M (see FIG. 5) that is the treatment target site in the subject P, and the IR 700 irradiated with the treatment light Heat is generated.
  • produced from IR700 is destroyed.
  • the fluorescence Lx1 is not generated even when the excitation light Ex1 is irradiated. That is, by comparing the intensity of the fluorescence Lx1 before and after the treatment light irradiation, it is possible to confirm how much the cancer cells M (see FIG. 5) have been destroyed (therapeutic effect). Further, whether or not the treatment light is correctly applied to the treatment target site of the subject P can be grasped depending on whether the intensity of the fluorescence Lx1 has changed (becomes small) before or after the treatment light irradiation. . Even when the cancer cell M (see FIG. 5) is present at a position different from the assumed position, the position of the cancer cell M (see FIG.
  • IR700 is accurately grasped based on the fluorescence Lx1 emitted from the IR700. be able to.
  • IR700 is administered before treatment (for example, 1 to 2 days before) so as to be bound to the cancer cell M of the subject P at the time of treatment (at the time of irradiation with the excitation light Ex1). .
  • the imaging unit 10 includes a light source unit 50 for irradiating visible light Vis and excitation light Ex1, an optical system 60 for separating visible light Vis and fluorescence Lx1, and visible light Vis and And a detector 70 for detecting the fluorescence Lx1.
  • the light source unit 50 includes an excitation light source 51 that generates excitation light Ex1 for exciting the IR 700, and a visible light source 53 that generates visible light Vis.
  • the excitation light source 51 and the visible light source 53 include, for example, a light emitting diode (LED) as a light source.
  • the excitation light source 51 is configured to generate excitation light Ex1 in a wavelength band corresponding to IR700.
  • the excitation light Ex1 has near-infrared light having a peak wavelength of 700 mm.
  • the excitation light Ex1 is excitation light Ex (confirmation light) for confirming a portion to which IR700 is administered, and has a lower irradiation intensity than excitation light Ex (treatment light) for treating cancer. It is comprised so that it may become.
  • the visible light source 53 is configured to generate, for example, white light including a plurality of (all) wavelengths in the visible region as the visible light Vis.
  • the visible light Vis is not limited to white light, and may be configured to include only a specific wavelength in the visible region.
  • a plurality (six) of excitation light sources 51 and visible light sources 53 are provided in the treatment support apparatus 100.
  • the plurality (six) of excitation light sources 51 and the plurality (six) of visible light sources 53 are arranged in a circular shape at approximately equal intervals in the light source unit 50.
  • the six excitation light sources 51 and the six visible light sources 53 are arranged in a ring so as to surround the periphery of the optical system 60.
  • the excitation light sources 51 and the visible light sources 53 are alternately arranged at substantially equal intervals. Thereby, the excitation light source 51 and the visible light source 53 are in a state of being arranged at substantially equal intervals in the light source unit 50, respectively.
  • the light source unit 50 is configured to irradiate the subject P with excitation light Ex1 and visible light Vis irradiated from the excitation light source 51 and the visible light source 53, respectively. Yes.
  • the IR 700 is administered to the subject P
  • the excitation light Ex1 is irradiated to the surgical site Pa where the IR 700 exists
  • the IR 700 is excited, and thereby the fluorescence Lx1 is emitted from the IR 700.
  • the visible light Vis irradiated to the subject P is reflected by the subject P.
  • the optical system 60 includes a zoom lens 61 for focusing, and a prism 62 for separating visible light Vis and fluorescence Lx1 reflected from the subject P. As shown in FIG. 4, the zoom lens 61 and the prism 62 are arranged in this order along the optical axis L direction.
  • the zoom lens 61 is configured to be able to reciprocate in the direction of the optical axis L by a lens moving mechanism (not shown) for focusing.
  • the prism 62 separates the visible light Vis and the fluorescence Lx1 reflected from the subject P and passed through the zoom lens 61, and guides the visible light Vis and the fluorescence Lx1 to the visible light detection unit 73 and the fluorescence detection unit 71, respectively. It is configured as follows.
  • the detection unit 70 includes a fluorescence detection unit 71 for detecting the fluorescence Lx1 and a visible light detection unit 73 for detecting the visible light Vis.
  • the visible light detection unit 73 is configured to detect the visible light Vis guided to the prism 62.
  • the fluorescence detection unit 71 is configured to detect the fluorescence Lx1 guided to the prism 62.
  • the fluorescence detection unit 71 and the visible light detection unit 73 are each configured by an image sensor (imaging device) using, for example, a CMOS (complementary metal oxide semiconductor) or a CCD (charge coupled device).
  • an imaging device capable of detecting light in a range including the wavelength band of the fluorescence Lx1 is used.
  • the visible light detection unit 73 uses an image sensor that can detect light in a range including the wavelength band of the visible light Vis.
  • the visible light detection unit 73 uses an image sensor that can capture a visible image 830 (see FIGS. 5 and 6) as a color image.
  • the main body unit 20 includes a control unit 21 for controlling various configurations of the treatment support apparatus 100, an image generation unit 22 that generates an image based on a signal detected by the detection unit 70, A storage unit 23 that stores an image generated by the image generation unit 22 and an image output unit 24 that outputs the image generated by the image generation unit 22 to the display device 900 are provided.
  • the main unit 20 includes a personal computer (PC) including a control unit 21, an image generation unit 22, a storage unit 23, an image output unit 24, and the like, and is provided with wheels so that the treatment support apparatus 100 can be moved. It is configured as a trolley.
  • the image generation unit 22 is an example of the “fluorescence image generation unit” and the “visible image generation unit” in the claims.
  • the control unit 21 is a computer including a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), and the like.
  • CPU Central Processing Unit
  • ROM Read Only Memory
  • RAM Random Access Memory
  • the image generation unit 22 is a computer including a processor such as a GPU (Graphics Processing Unit) or an FPGA (Field-Programmable Gate Array) configured for image processing.
  • the image generation unit 22 is based on the detection signals output by the fluorescence detection unit 71 and the visible light detection unit 73, respectively, and the fluorescence image 810 (see FIGS. 5 and 6) and the visible image 830 (see FIGS. 5 and 6), respectively. ) Can be generated.
  • the storage unit 23 includes, for example, a nonvolatile memory or a hard disk drive (HDD).
  • the storage unit 23 stores a program used for the processing of the control unit 21 and is configured to store images (fluorescent image 810 and visible image 830) generated by the image generation unit 22 and the like.
  • the storage unit 23 stores the image generated by the image generation unit 22 together with a time stamp such as an imaging date and time.
  • the fluorescence image 810 includes a pre-treatment fluorescence image 811 (see FIG. 5) and a post-treatment fluorescence image 812 (see FIG. 6) generated before and after the treatment, respectively.
  • the visible image 830 includes a pre-treatment visible image 831 (see FIG.
  • the pre-treatment fluorescence image 811 (see FIG. 5) and the post-treatment fluorescence image 812 (see FIG. 6) are examples of the “first fluorescence image” and the “second fluorescence image” in the claims, respectively. is there.
  • the pre-treatment visible image 831 (see FIG. 5) and the post-treatment visible image 832 (see FIG. 6) are examples of the “first visible image” and the “second visible image” in the claims, respectively. is there.
  • the image output unit 24 is an interface for connecting the treatment support apparatus 100 to the display apparatus 900.
  • the image output unit 24 is connected to the display device 900 by a video interface such as HDMI (registered trademark), for example.
  • the image output unit 24 is configured to output an output image 800 (see FIGS. 5 and 6) including the images (fluorescence image 810 and visible image 830) generated by the image generation unit 22 to the display device 900.
  • the image output unit 24 includes the pre-treatment fluorescence image 811 (see FIG. 5) and the post-treatment fluorescence image 812 (see FIG. 5) of the fluorescence images 810 generated by the image generation unit 22 at different treatment points. 6) is output to the display device 900.
  • the image output unit 24 is configured to output the visible image 830 generated by the image generation unit 22 together with the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812 to the display device 900.
  • the display device 900 is configured to display the output image 800 output by the image output unit 24 on the screen.
  • “before treatment” and “after treatment” mean not only before and after the start of treatment, but also before and after a certain treatment time point.
  • the arm unit 30 connects the main body unit 20 and the imaging unit 10 via a plurality of arms and a plurality of hinges.
  • the arm unit 30 is configured to be able to change the relative position of the imaging unit 10 with respect to the main body unit 20.
  • the operation unit 40 is configured to receive an input for operating the treatment support apparatus 100 via the control unit 21.
  • the operation unit 40 is, for example, a remote controller that can communicate with the treatment support apparatus 100.
  • the operation unit 40 is configured to be able to accept an input for selecting a pre-treatment fluorescence image 811 and a post-treatment fluorescence image 812 from the fluorescence image 810 stored in the storage unit 23.
  • the operation unit 40 is configured to receive an input for selecting the pre-treatment visible image 831 and the post-treatment visible image 832 from the visible image 830 stored in the storage unit 23. Yes.
  • the treatment support apparatus 100 causes the display device 900 to display a plurality of pre-treatment fluorescent images 811 and a plurality of post-treatment fluorescent images 812. Then, a user such as a doctor can use the pretreatment fluorescent image 811 and the pretreatment fluorescent image 811 to be used for treatment support from the plurality of pretreatment fluorescent images 811 and the plurality of posttreatment fluorescent images 812 displayed on the display device 900. A post-treatment fluorescent image 812 is selected.
  • the image output unit 24 outputs the selected pre-treatment fluorescent image 811 and post-treatment fluorescent image 812 to the display device 900.
  • the display device 900 is configured to be able to display images (fluorescent image 810 and visible image 830) generated by the image generation unit 22 and output by the image output unit 24. ing.
  • the display device 900 is configured by, for example, a liquid crystal display, an organic EL display, an inorganic EL display, or the like. 5 and 6 show an example in which the surgical site Pa affected by cancer is imaged and displayed on the display device 900. FIG.
  • the fluorescence image 810 includes cancer cells M administered with IR700.
  • the visible image 830 includes the surgical site Pa around the cancer cell M to which IR700 has been administered.
  • the cancer cells M are indicated by thick solid lines with white inside.
  • the cancer cell M before treatment and the cancer cell M after treatment are shown to be similar and different in size (smaller after treatment than before treatment). The change in the shape of the cancer cell M caused by the treatment is not limited to this.
  • the image output unit 24 can output the fluorescent image 810 and the visible image 830 so that the fluorescent image 810 and the visible image 830 are superimposed and displayed on the display device 900. It is configured. More specifically, the treatment support system 1100 is configured to be able to display the composite image 840 obtained by superimposing the fluorescent image 810 and the visible image 830 on the display device 900. Specifically, as illustrated in FIG. 5, the treatment support system 1100 can cause the display device 900 to display a pre-treatment composite image 841 in which a pre-treatment fluorescence image 811 and a pre-treatment visible image 831 are superimposed. It is configured. As shown in FIG.
  • the treatment support system 1100 is configured to display a post-treatment composite image 842 in which the post-treatment fluorescence image 812 and the post-treatment visible image 832 are superimposed on the display device 900.
  • the image output unit 24 includes the pre-treatment visible image 831 and the post-treatment visible image 832 of the visible image 830 generated by the image generation unit 22, and the pre-treatment fluorescent image 811 and the treatment, respectively. It is configured to be able to be superimposed on the post-fluorescence image 812 and output to the display device 900.
  • the image output unit 24 displays the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812 in the fluorescent image 810 stored by the storage unit 23 in a comparable manner.
  • an output image 800 to be displayed in a superimposed manner is output to the display device 900.
  • the image output unit 24 includes the pre-treatment composite image 841 in which the pre-treatment fluorescence image 811 is superimposed on the pre-treatment visible image 831 among the visible images 830 stored in the storage unit 23.
  • displaying in a comparable manner means displaying in a manner in which a plurality of images can be compared with each other, and includes displaying the images side by side. For example, FIGS.
  • FIG. 7 and 8 show an example in which the pre-treatment composite image 841 and the post-treatment composite image 842 are displayed side by side on the display device 900.
  • 9 and 10 show an example in which a pre-treatment composite image 841 and a post-treatment composite image 842 are displayed superimposed on the display device 900.
  • FIG. In the treatment support device 100 the cancer cells M reflected in the pre-treatment composite image 841 and the cancer cells M reflected in the post-treatment composite image 842 can be displayed in different colors, and treatment can be performed.
  • An area common to the pre-combination image 841 and the post-treatment composite image 842 and a non-common area an area where the cancer cells M have been reduced after treatment) can be displayed in different colors.
  • the image output unit 24 fluoresces only in one of the fluorescent regions reflected in the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812 and the region in which the fluorescent Lx is reflected. It is configured such that it can be colored in a color different from the area where Lx is reflected and output to the display unit. In particular, when images before and after treatment are displayed in a superimposed manner, it is effective to color the image before treatment and the image after treatment in different colors.
  • the image output unit 24 can output to the display apparatus 900 an output image 800 in which a plurality of pre-treatment composite images 841 and post-treatment composite images 842 are displayed side by side. It is configured.
  • the treatment support system 1100 includes a plurality (three) of pre-treatment composite images 841 (841a, 841b, and 841c) and a plurality (three) of post-treatment composite images 842 ( 842a, 842b, and 842c) can be displayed side by side on the display device 900.
  • the pre-treatment composite image 841a, the pre-treatment composite image 841b, and the pre-treatment composite image 841c have different imaging directions.
  • the post-treatment composite image 842a, the post-treatment composite image 842b, and the post-treatment composite image 842c have different imaging directions.
  • the image output unit 24 is configured to be able to output to the display apparatus 900 an output image 800 that displays the pre-treatment composite image 841 and the post-treatment composite image 842 superimposed on each other.
  • the treatment support system is configured to be able to display on the display device 900 a pre-treatment composite image 843 in which a pre-treatment composite image 841 and a post-treatment composite image 842 are superimposed.
  • the cancer cells M before and after treatment are indicated by a white chain line inside and a thick solid line inside.
  • the treatment support system 1100 is configured to be able to display a plurality (three) of pre- and post-treatment composite images 843 (843a, 843b, and 843c) side by side.
  • the image output unit 24 includes the pre-treatment fluorescent image 811 and the post-treatment aligned by the alignment unit 26 (see FIG. 2).
  • the fluorescent image 812 is configured to be output to the display device 900.
  • the treatment support apparatus 100 includes an extraction unit 25 that extracts a marker member 80 (see FIGS. 5 and 6) in the fluorescence image 810 (see FIGS. 5 and 6), and an extraction unit. Based on the positional information of the marker member 80 (see FIGS. 5 and 6) in the fluorescence image 810 (see FIGS. 5 and 6) extracted by the unit 25, the pre-treatment fluorescence image 811 (see FIG. 5) and the post-treatment An alignment unit 26 that performs alignment with the fluorescent image 812 (see FIG. 6) is provided.
  • the treatment support apparatus 100 As shown in FIGS. 5 and 6, a plurality of surgical parts Pa in the vicinity of the surgical part Pa or near the surgical part Pa so that the marker member 80 is reflected in the images before and after the treatment.
  • the marker member 80 is placed.
  • the marker member 80 is, for example, a surgical marker that appears in the fluorescent image 810.
  • 5 and 6 show an example in which three marker members 80 are arranged.
  • the marker members 80 before and after treatment are referred to as marker members 81 and 82, respectively.
  • the extraction unit 25 extracts the marker member 81 reflected in the pre-treatment fluorescent image 811 and the marker member 81 reflected in the post-treatment fluorescent image 812. Then, the alignment unit 26 matches the position of the marker member 81 reflected in the pre-treatment fluorescent image 811 with the position of the marker member 81 reflected in the post-treatment fluorescent image 812 or the pre-treatment fluorescent image 811 or the treatment. The post fluorescence image 812 is corrected.
  • the alignment unit 26 reflects the distance between the plurality of marker members 81 reflected in the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812. Based on the distances between the plurality of marker members 81, the magnification of the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812 is corrected.
  • the image output unit 24 substantially matches the position and size of the subject P reflected in the pre-treatment fluorescent image 811 with the position and size of the subject P reflected in the post-treatment fluorescent image 812. In this state, it is possible to output to the display device 900 an output image 800 that can be compared and an output image 800 that is displayed in a superimposed manner. That is, as shown in FIG.
  • the image output unit 24 is in a state in which the position and size of the subject P reflected in the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812 are substantially matched (the marker member 81 and the marker
  • An output image 800 that displays the pre-treatment composite image 841 and the post-treatment composite image 842 side by side can be output to the display device 900 in a state where the position and size of the member 82 are substantially the same. Further, as shown in FIG.
  • the image output unit 24 is in a state in which the position and size of the subject P reflected in the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812 are substantially matched (the marker member 81 and the marker In a state in which the position and the size of the member 82 are substantially matched), an output image 800 that displays the pre-treatment composite image 841 and the post-treatment composite image 842 superimposed on each other can be output to the display device 900.
  • the treatment support system 1100 uses the operation unit 40 to determine which of the display forms shown in FIGS. 5, 7, 8, 9, and 10 is to be displayed on the display device 900.
  • the controller 21 can be set.
  • the treatment support apparatus 100 images the fluorescence image 810 based on the fluorescence Lx (Lx1) emitted from the IR 700 by the fluorescence detection unit 71 and the image generation unit 22.
  • the image output unit 24 can output, to the display device 900, the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812 at different treatment points in the fluorescent image 810 generated by the image generation unit 22.
  • the pre-treatment fluorescence image 811 and the post-treatment fluorescence image 812 at different treatment points can be displayed on the display device 900, so that the fluorescence images 810 at different treatment points can be easily compared.
  • the therapeutic effect can be easily confirmed when performing treatment using IR700.
  • the treatment support apparatus 100 includes the extraction unit 25 that extracts the plurality of marker members 80 in the fluorescence image 810 and the plurality of marker members 80 extracted by the extraction unit 25.
  • An alignment unit 26 that aligns the pre-treatment fluorescence image 811 and the post-treatment fluorescence image 812 based on the position information, and the image output unit 24 is aligned by the alignment unit 26 before treatment.
  • the fluorescent image 811 and the post-treatment fluorescent image 812 are configured to be output to the display device 900.
  • the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812 at different treatment points are displayed on the display device 900 in a state of being aligned based on the positional information of the plurality of marker members 80 in the fluorescent image 810. Therefore, it is possible to accurately compare the fluorescence images 810 at different treatment points. Further, when the treatment support apparatus 100 performs alignment based on the plurality of marker members 80, the distance between the plurality of marker members 81 in the pre-treatment fluorescent image 811 and the plurality of markers in the post-treatment fluorescent image 812 are used. Based on the distance between the members 81, the magnification of the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812 is corrected.
  • the pre-treatment fluorescent image 811 or the post-treatment fluorescent image 812 can be corrected so that the enlargement ratio is matched with the positions of the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812.
  • the size of cancer cells M before and after treatment can be compared. As a result, it is possible to more accurately grasp how much therapeutic effect has been obtained.
  • the image output unit 24 causes the output image 800 to display the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812 so as to be comparable to each other, or an output to be displayed in a superimposed manner.
  • the image 800 is configured to be output to the display device 900.
  • the pre-treatment fluorescence image 811 and the post-treatment fluorescence image 812 at different treatment points can be displayed on the display device 900 in a comparable manner or can be displayed in a superimposed manner.
  • the fluorescence images 810 at different treatment points can be compared more easily.
  • the image output unit 24 includes, in the fluorescent regions reflected in the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812, a region in which fluorescence is reflected in common, It is configured such that only one side is colored in a different color in the region where the fluorescence is reflected and output to the display device 900.
  • the region where the fluorescence Lx (Lx1) is reflected in common and the region where the fluorescence Lx (Lx1) is reflected only in one color can be colored in different colors and displayed on the display device 900,
  • the difference between the pre-treatment fluorescence image 811 and the post-treatment fluorescence image 812 can be easily compared.
  • the difference between the fluorescence images 810 at different treatment points can be easily compared.
  • the visible light detection unit 73 that detects the visible light Vis and the image generation unit 22 that generates the visible image 830 based on the signal output by the visible light detection unit 73.
  • the pre-treatment fluorescent image 811 and the post-treatment An alignment unit 26 that performs alignment with the fluorescence image 812.
  • the image output unit 24 displays the pre-treatment fluorescence image 811 and the post-treatment fluorescence image 812, which are aligned by the alignment unit 26, with a display device. It is comprised so that it may output to 900.
  • the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812 at different treatment points can be displayed on the display device 900 in a state of being aligned based on the position information of the marker member 80 in the visible image 830. Therefore, the fluorescence images 810 at different treatment points can be accurately compared with each other.
  • the image output unit 24 displays the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812 together with at least one or more visible images 830 generated by the image generation unit 22. It is configured to output to the device 900. Thereby, since the area
  • the image output unit 24 aligns the pre-treatment visible image 831 and the post-treatment visible image 832 of the visible image 830 generated by the image generation unit 22, respectively.
  • the pre-treatment fluorescence image 811 and the post-treatment fluorescence image 812 aligned by the unit 26 are superimposed on each other and output to the display device 900.
  • the visible image 830 captured at the time corresponding to the fluorescent image 810 captured at different time points is superimposed on the fluorescent image 810 in the area around the portion where the fluorescence Lx (Lx1) is reflected in the fluorescent image 810. Since the visible image 830 can be observed, even when the imaging conditions such as the imaging direction, imaging position, and imaging angle of the subject P are different between the fluorescent images 810 at different treatment points, the difference in the portion to which IR700 is administered Can be confirmed easily and accurately.
  • the image output unit 24 causes the display device 900 to display the output image 800 that displays a plurality of pre-treatment composite images 841 and post-treatment composite images 842, respectively. Configure to output. Thereby, a plurality of pretreatment composite images 841 and a plurality of posttreatment composite images 842 captured from various directions can be displayed side by side. As a result, compared with the case where the composite images 840 before and after treatment imaged from one direction are displayed side by side, the change before and after the treatment of the portion to which IR700 is administered (the treated portion) can be accurately confirmed. .
  • the image output unit 24 outputs, to the display device 900, the output image 800 in which the pre-treatment composite image 841 and the post-treatment composite image 842 are superimposed and displayed.
  • the image output unit 24 outputs, to the display device 900, the output image 800 in which the pre-treatment composite image 841 and the post-treatment composite image 842 are superimposed and displayed.
  • the treatment support apparatus 100 receives an input for selecting the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812 from the fluorescent image 810 stored in the storage unit 23.
  • the operation unit 40 receives an input for selecting a pre-treatment visible image 831 and a post-treatment visible image 832 from the visible image 830 stored in the storage unit 23.
  • the treatment support apparatus 100 includes the light source unit 50 that emits the excitation light Ex1 for exciting the IR 700.
  • the IR 700 can be easily excited by the excitation light Ex1 emitted from the light source unit 50, the fluorescence Lx1 can be easily generated from the IR 700 administered to the subject P.
  • the intensity of the excitation light Ex1 applied to the subject P can be adjusted. For example, the intensity of the excitation light Ex is too strong and halation occurs. Can be suppressed.
  • the treatment support apparatus 200 included in the treatment support system 1200 of the second embodiment includes an imaging unit 210 and a main body unit 220 including an image generation unit 222 and the like.
  • the imaging unit 210 is configured to correspond to the IR700 and ICG wavelength bands as a fluorescent agent to be administered to the subject P.
  • IR700 and ICG differ in absorption spectrum and emission spectrum.
  • the ICG is a drug containing a substance that emits fluorescence Lx2 having a wavelength band different from the fluorescence Lx1 of IR700 by absorbing excitation light Ex2 having a wavelength band different from the excitation light Ex1 of IR700. Both the fluorescence Lx1 and the fluorescence Lx2 are light having a peak in the wavelength band of near infrared light (invisible light).
  • ICG is a drug that is administered to the subject P and used for visualization of the surgical site Pa during surgery by irradiating the excitation light Ex2.
  • ICG is administered to the subject P at the same time as the IR 700 or after the IR 700 in order to improve the visibility of the subject P around the cancer cells M in the follow-up after treatment with the IR 700.
  • ICG is an example of the “fluorescent agent” in the claims.
  • the imaging unit 210 includes a light source unit 250 for irradiating visible light Vis and excitation light Ex (Ex1, Ex2), an optical system 260 for separating visible light Vis, fluorescence Lx1, and fluorescence Lx2, and visible light Vis. And a detection unit 270 for detecting the fluorescence Lx (Lx1, Lx2).
  • the light source unit 250 includes an excitation light source 52 that generates excitation light Ex2 for exciting the ICG, in addition to the excitation light source 51 and the visible light source 53.
  • the excitation light source 52 is configured to generate excitation light Ex2 in a wavelength band corresponding to ICG.
  • the excitation light Ex2 has near-infrared light having a peak wavelength of 760 mm.
  • the excitation light Ex2 is excitation light Ex (confirmation light) for confirming a portion to which ICG is administered, and the irradiation intensity is higher than that of excitation light Ex (treatment light) for treating cancer. It is configured to be low.
  • a plurality (four each) of excitation light sources 51, excitation light sources 52, and visible light sources 53 are provided in the treatment support apparatus 200. Further, the plurality (four) of the excitation light sources 51, the plurality of (four) of the excitation light sources 52, and the plurality of (four) of the visible light sources 53 are respectively arranged in a ring shape and at substantially equal intervals in the light source unit 250. ing. Specifically, in the light source unit 250, the four excitation light sources 51, the four excitation light sources 52, and the four visible light sources 53 are arranged in a ring shape so as to surround the periphery of the optical system 260.
  • the excitation light source 51, the excitation light source 52, and the visible light source 53 are arrange
  • the excitation light source 51, the excitation light source 52, and the visible light source 53 are in the state arrange
  • the light source unit 250 is configured to irradiate the subject P with the excitation light Ex1, the excitation light Ex2, and the visible light Vis emitted from the excitation light source 51, the excitation light source 52, and the visible light source 53, respectively. ing.
  • the surgical light Pa where IR700 and ICG are present is irradiated with the excitation light Ex1 and the excitation light Ex2, IR700 and ICG are excited. Then, fluorescence Lx1 and fluorescence Lx2 are emitted from IR700 and ICG, respectively.
  • the optical system 260 includes a prism 62 for separating visible light Vis and fluorescence Lx (fluorescence Lx1, fluorescence Lx2) reflected from the subject P, and fluorescence Lx (fluorescence Lx1, fluorescence Lx2) separated by the prism 62.
  • a prism 63 for separating the light into fluorescence Lx1 and fluorescence Lx2. As shown in FIG. 13, the zoom lens 61, the prism 62, and the prism 63 are arranged in this order along the optical axis L direction.
  • the prism 62 separates the visible light Vis and fluorescence Lx (Lx1, Lx2) reflected from the subject P and passed through the zoom lens 61, and converts the visible light Vis and fluorescence Lx (Lx1, Lx2) into visible light, respectively. It is configured to be guided to the detection unit 73 and the prism 63.
  • the prism 63 is configured to separate the fluorescence Lx (fluorescence Lx1, fluorescence Lx2) that has passed through the prism 62 and guide the fluorescence Lx1 and fluorescence Lx2 to the fluorescence detection unit 71 and the fluorescence detection unit 72, respectively.
  • the detection unit 270 includes a fluorescence detection unit 72 for detecting the fluorescence Lx2.
  • the fluorescence detection unit 72 is configured to detect the fluorescence Lx2 guided to the prism 63.
  • an image sensor capable of detecting light in a range including the wavelength band of the fluorescence Lx2 is used.
  • the main body unit 220 generates an image based on a signal detected by the detection unit 270, and outputs an image generated by the image generation unit 222 to the display device 900.
  • the image generation unit 222 is an example of the “fluorescence image generation unit” and the “visible image generation unit” in the claims.
  • the image generation unit 222 generates a fluorescence image 810, a fluorescence image 820 (see FIG. 14), and a visible image 830 based on the detection signals output from the fluorescence detection unit 71, the fluorescence detection unit 72, and the visible light detection unit 73, respectively. It is configured to be able to generate.
  • the image output unit 224 is an interface for connecting the treatment support apparatus 200 to the display apparatus 900.
  • the image output unit 224 is configured to output the images (fluorescence image 810, fluorescence image 820, and visible image 830) generated by the image generation unit 222 to the display device 900. That is, in the second embodiment, the image output unit 224 displays the fluorescence images 810 and 820 (see FIG. 14) before and after the treatment at different treatment points among the fluorescence images 810 generated by the image generation unit 222, as the display device 900. It is configured to output to. In FIG. 14, only the fluorescence images 810 and 820 before treatment among the fluorescence images 810 and 820 are shown.
  • the display device 900 is configured to be able to display the images (fluorescence image 810, fluorescence image 820, and visible image 830) generated by the image generation unit 222 and output by the image output unit 224.
  • a pre-treatment fluorescent image 811, a pre-treatment fluorescent image 821, and a pre-treatment visible image 831 generated before treatment are shown as a fluorescence image 810, a fluorescence image 820, and a visible image 830, respectively.
  • the pre-treatment fluorescent image 821 is an example of the “first fluorescent image” in the claims.
  • cancer cells M administered with ICG are reflected.
  • ICG and IR700 have different distributions at the surgical site Pa due to differences in biochemical characteristics. Therefore, in the fluorescence image 810 and the fluorescence image 820, the cancer cells M are reflected in different display modes.
  • the cancer cell M is indicated by a solid line in which the inside is filled with diagonal lines.
  • the image output unit 224 causes the display device 900 to display the fluorescent image 810, the fluorescent image 820, and the visible image so that the fluorescent image 810, the fluorescent image 820, and the visible image 830 are superimposed.
  • 830 can be output.
  • the treatment support system 1200 is configured to display on the display device 900 a composite image 860 in which a fluorescent image 810, a fluorescent image 820, and a visible image 830 are superimposed.
  • FIG. 14 shows an example in which a pre-treatment composite image 861 in which a pre-treatment fluorescent image 811, a pre-treatment fluorescent image 821, and a pre-treatment visible image 831 are superimposed is displayed on the display device 900.
  • the image output unit 224 causes the display device 900 to display the fluorescent image 810 and the visible image 830 in a superimposed manner, and to display the fluorescent image 820 and the visible image 830 in a superimposed manner.
  • a fluorescence image 810, a fluorescence image 820, and a visible image 830 can be output.
  • the treatment support system 1200 includes a composite image 840 in which a fluorescent image 810 and a visible image 830 are superimposed, and a composite image 850 in which a fluorescent image 820 and a visible image 830 are superimposed. Can be displayed side by side on the display device 900.
  • An example of display is shown.
  • the image output unit 224 like the image output unit 24 of the first embodiment, among the fluorescence images 810 stored in the storage unit 23, the pre-treatment fluorescence image 811 and the post-treatment fluorescence.
  • An output image 800 that displays the image 812 in a comparable manner or an output image 800 that displays the image 812 in a superimposed manner can be output to the display device 900.
  • the image output unit 224 outputs, to the display device 900, an output image 800 that displays the pre-treatment fluorescent image 821 and the post-treatment fluorescent image 822 in a comparable manner among the fluorescent images 820 stored in the storage unit 23. It is configured to be able to.
  • the image output unit 224 outputs to the display apparatus 900 an output image 800 that displays a plurality of pre-treatment composite images 861 and post-treatment composite images 862 side by side. It is configured as follows. Specifically, as illustrated in FIG. 15, the treatment support system 1200 includes a plurality (three) of pre-treatment composite images 861 (861a, 861b, and 861c) and a plurality (three) of post-treatment composite images 862 ( 862a, 862b, and 862c) can be displayed side by side on the display device 900.
  • the image output unit 224 displays the fluorescent image 810 and the visible image 830 generated after the treatment while superimposing and displaying the fluorescent image 810 and the visible image 830 generated before the treatment.
  • An output image 800 to be displayed in a superimposed manner is output to the display device 900.
  • the treatment support system 1200 includes a pre-treatment composite image 841 in which a pre-treatment visible image 831 is superimposed on a pre-treatment visible image 811 and a post-treatment fluorescent image on the post-treatment visible image 832.
  • the post-treatment composite image 852 superimposed with 822 can be displayed side by side on the display device 900. Therefore, in FIG.
  • IR700 is used to identify the position of cancer cell M, and after treatment, not IR700 whose visibility has decreased due to the death of cancer cell M, but by ICG The progress of cancer cells M can be accurately observed.
  • the treatment support apparatus 200 uses the image output unit 24 to select the pre-treatment fluorescent image and the post-treatment among the fluorescent images 810 and 820 generated by the image generation unit 22.
  • a fluorescent image can be output to the display device 900.
  • the fluorescence images 810 and 820 before and after treatment fluorescence images
  • the therapeutic effect can be easily confirmed.
  • the detection unit 70 detects two types of fluorescence Lx (Lx1 and Lx2) respectively emitted from two types of fluorescent agents (IR700 and ICG), and the image generation unit 222.
  • IR700 and ICG fluorescent agents
  • the image generation unit 222 are configured to generate two types of fluorescence images 810 and 820 based on the two types of fluorescence Lx (Lx1 and Lx2).
  • two types of fluorescent agents (IR700 and ICG) having different properties two types of fluorescent images 810 and 820 having different display modes before and after treatment can be displayed in a comparable manner. It can be displayed on the device 900.
  • two types of fluorescent images 810 and 820 having different display modes can be observed in combination, when a treatment using a fluorescent agent is performed, compared to the case of using one type of fluorescent agent. The therapeutic effect can be confirmed more easily.
  • the light source unit 250 uses the two types of excitation light Ex (Ex1 and Ex1) for exciting the two types of fluorescent agents (IR700 and ICG) administered to the subject P, respectively. It is configured to irradiate Ex2).
  • Ex1 and Ex2 two types of fluorescent agents
  • Ex2 and Ex2 Two types of fluorescent Lx (Lx1 and Lx2) can be easily generated from two types of fluorescent agents (IR700 and ICG).
  • the treatment support system 1100 (1200) is configured so that the pre-treatment composite image 841 and the post-treatment composite image 842 have the same orientation, position, and size of the surgical site Pa.
  • the present invention is not limited to this.
  • the treatment support apparatus system may be configured to match any of the orientation, position, or size of the surgical site in the image between the pre-treatment image and the post-treatment image. , They need not be configured to match.
  • the pre-treatment fluorescence image 811 and the post-treatment fluorescence image 812 are aligned based on the marker member 80 reflected in the pre-treatment fluorescence image 811 and the post-treatment fluorescence image 812.
  • the present invention is not limited to this.
  • the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812 may be aligned based on the marker member 80 reflected in the pre-treatment visible image 831 and the post-treatment visible image 832. Further, based on both the marker member 80 reflected in the fluorescent image 810 and the marker member 80 reflected in the visible image 830, the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812 may be aligned. .
  • the treatment support system 1100 (1200) is based on the position and size deviation of the marker member 80 reflected in the pre-treatment visible image 831 and the post-treatment visible image 832.
  • the present invention shows this Not limited to.
  • the treatment support system substantially matches the imaging direction with respect to the surgical site Pa at the time of imaging before treatment and at the time of imaging after treatment, whereby the pre-treatment composite image 841 (861) and the post-treatment composite image. You may comprise so that the position and magnitude
  • the treatment support system is configured so that the position of the subject P reflected in the pre-treatment composite image 841 (861) based on the specific position of the subject P reflected in the visible image 830 instead of the marker member 80, and The position of the subject P reflected in the post-treatment composite image 842 (852, 862) may be substantially matched.
  • the position of the subject P reflected in the post-treatment composite image 842 (852, 862) may be substantially matched.
  • throat cancer based on the difference in the position of the nose, ear, mouth, etc. of the subject P reflected in the pre-treatment composite image 841 (861) and the post-treatment composite image 842 (852, 862), respectively.
  • the pre-treatment composite image 841 is obtained.
  • the post-treatment composite image 842 (852, 862) may be substantially coincident with the position and size of the subject P.
  • the treatment support system 1100 (1200) is used to determine the position of the surgical site Pa in the pre-treatment composite image 841 (861) and the post-treatment composite image 842 (852, 862).
  • the pre-treatment composite image 841 (861) and the post-treatment composite image 842 (852, 862) are superposed with the sizes substantially matched, the present invention is not limited to this. I can't.
  • the pre-treatment composite image 841 (861) and the post-treatment composite image 842 are used in the treatment support system in addition to the case where the pre-treatment composite image 841 (861) and the post-treatment composite image 842 (852, 862) are superimposed.
  • the position and size of the surgical site Pa in the (852, 862) image may be substantially matched.
  • a plurality of 841 (861) and post-treatment composite images 842 (852, 862) may be displayed side by side.
  • the operation unit 40 is configured to receive an input for selecting the pre-treatment fluorescent image 811 and the post-treatment fluorescent image 812 from the fluorescent image 810 stored in the storage unit 23.
  • the operation unit may be configured not to accept an input for selecting a pre-treatment fluorescent image and a post-treatment fluorescent image. In that case, for example, a pre-treatment fluorescence image and a post-treatment fluorescence image may be determined based on the time stamp of the fluorescence image stored in the storage unit 23. Moreover, you may make it receive the input of the implementation date of treatment.
  • the image output unit 224 causes the fluorescent image 810 and the visible image 830 generated before the treatment to be superimposed and displayed, and the fluorescent image 820 and the visible image 830 generated after the treatment are displayed.
  • the fluorescence image superimposed on the visible image may be reversed before and after treatment. That is, the image output unit 224 causes the fluorescent image 820 generated before the treatment and the visible image 830 to be superimposed and displayed, and the fluorescent image 810 generated after the treatment and the visible image 830 are superimposed and displayed.
  • the image 800 may be configured to be output to the display device 900.
  • the treatment support system 1100 (1200) is configured to superimpose and display the pre-treatment composite image 841 (861) and the post-treatment composite image 842 (852, 862).
  • the present invention is not limited to this.
  • the treatment support system 1100 (1200) is displayed by superimposing only the portion of the surgical site Pa reflected in the pre-treatment composite image 841 (861) and the post-treatment composite image 842 (852, 862). You may make it comprise.
  • the treatment support system 1100 (1200) includes a plurality of pre-treatment composite images 841 (861) having different imaging directions and a plurality of post-treatment composite images 842 having different imaging directions. Although (852, 862) is displayed side by side on the display device 900, the present invention is not limited to this.
  • the treatment support system 1100 (1200) displays a plurality of pretreatment composite images 841 having different imaging timings and a plurality of posttreatment composite images 842 (852, 862) having different imaging timings on the display device 900. May be displayed side by side. In this case, for example, a plurality of pre-treatment composite images 841 (861) and a plurality of post-treatment composite images 842 (852, 862) may be displayed in chronological order, respectively.
  • the treatment support system 1100 (1200) is configured to display the pre-treatment visible image 831 on the pre-treatment fluorescent image 811 (821) and the post-treatment visible image 832 after the treatment.
  • the treatment support system 1100 (1200) superimposes the pre-treatment fluorescent image 811 (821) on the post-treatment visible image 832 and the post-treatment fluorescent image 812 (822) on the post-treatment visible image 832. You may comprise so that the made image may be displayed so that contrast is possible.
  • the post-treatment visible image 832 may be the current (latest) visible image 830.
  • the image output unit 24 (224) causes the visible image 830 generated by the image generation unit 22 (222) to include one visible image 830, a pre-treatment fluorescent image 811 (821), and a post-treatment fluorescent image 812 ( 822) may be superimposed and output to the display device 900.
  • the excitation light source 51 and the visible light source 53 were each arrange
  • the excitation light source 51 and the visible light source 53 may be arranged non-annularly, at non-uniform intervals, or may be provided one by one in the light source unit 50. Further, the numbers of the excitation light source 51 and the visible light source 53 may be different from each other. The same applies to the light source unit 250 shown in the second embodiment.
  • the treatment support apparatus 100 irradiates the fluorescent agent administered to the subject P with the excitation light Ex (Ex1, Ex2), which is confirmation light, and the excitation light.
  • Ex excitation light
  • the fluorescence Lx (Lx1, Lx2) emitted when the fluorescent agent is excited by Ex (Ex1, Ex2) is detected and imaged the present invention is not limited to this.
  • the treatment support apparatus irradiates the fluorescent drug administered to the subject P with excitation light Ex (treatment light) irradiated from a light source other than the treatment support apparatus for treating cancer, You may comprise so that the fluorescence emitted when a fluorescent chemical
  • the “treatment light” is excitation light Ex that has a wavelength band substantially equal to the excitation light Ex1 for exciting the IR 700 and has a higher irradiation intensity than the excitation light Ex1.
  • the treatment support apparatus may not include the light source unit 50 for irradiating the excitation light Ex.
  • the light source other than the treatment support apparatus disposed in the vicinity of the treatment support apparatus may be configured to emit the excitation light Ex for exciting the fluorescent drug administered to the subject P.
  • the fluorescence detection unit 71 and the fluorescence detection unit 72 for detecting the fluorescence Lx1 and the fluorescence Lx2 are provided.
  • the present invention is not limited to this.
  • the fluorescence Lx1 and the fluorescence Lx2 can be detected by one fluorescence detection unit, and a member for separating the fluorescence Lx1 and the fluorescence Lx2 is not required, so that the apparatus configuration can be simplified.
  • the treatment support system 1100 (1200) displays the image captured by the imaging unit 10 (210) on the display device 900.
  • the present invention is not limited to this. Not limited to. In this invention, you may comprise so that a treatment assistance apparatus may be equipped with the display part which displays the image imaged by the imaging part.
  • the fluorescent image 810 and 820 and the visible image 830 are displayed on the display device 900.
  • the present invention is not limited to this. In the present invention, only the fluorescent image may be displayed on the display device 900.
  • fluorescence may be emitted from different sites for each fluorescent agent.
  • one fluorescent agent may emit fluorescence from cancer cells, and another fluorescent agent may emit fluorescence from around the cancer cells.
  • a treatment support apparatus that can easily confirm a treatment effect when performing treatment using a fluorescent agent may be applied to a treatment support apparatus for treatment other than cancer.
  • the fluorescent agent is used to visualize other objects than cancer by fluorescence.
  • ICG is used as a medicine containing a substance that emits fluorescence Lx2 in a wavelength band different from the fluorescence Lx1 of IR700
  • a fluorescent agent other than ICG may be used as the agent containing a substance that emits fluorescence Lx2 in a wavelength band different from that of IR700 fluorescence Lx1.
  • a drug in which a substance that emits fluorescence Lx (Lx1) by absorbing excitation light Ex (Ex1) and an antibody that selectively binds to cancer cells M are combined.
  • a fluorescent agent other than IR700 may be used as an agent in which a substance that emits fluorescence Lx by absorbing excitation light Ex and an antibody that selectively binds to cancer cells M are combined.
  • the example using the fluorescent agent that emits the fluorescence Lx1 and the fluorescence Lx2 having peaks in the wavelength band of near-infrared light (invisible light) is shown.
  • a fluorescent agent that emits fluorescence having a peak in the wavelength band of visible light or ultraviolet light may be used as long as it is an agent that emits fluorescence when irradiated with excitation light.
  • the treatment support system 1100 (1200) displays the images side by side or displays the images in a superimposed manner so that the images can be compared with each other.
  • the present invention is not limited to this.
  • the treatment support system 1100 (1200) may be displayed by other display methods so that the images can be compared with each other.
  • the images may be switched and displayed at a predetermined time.
  • the treatment support system 1100 (1200) is configured to display the output image 800 on one display device 900 has been described. Not limited to.
  • the present invention may be configured to display on a plurality of display devices.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Pathology (AREA)
  • Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Physics & Mathematics (AREA)
  • Biophysics (AREA)
  • Endoscopes (AREA)
  • Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)

Abstract

この治療支援装置(100)は、蛍光検出部(71)により出力された信号に基づいて蛍光画像(810)を生成する蛍光画像生成部(22)と、 画像生成部により生成された蛍光画像のうち、少なくとも、治療時点の異なる第一の蛍光画像(811)と第二の蛍光画像(812)を、表示部(900)に出力する画像出力部(24)と、を備える。

Description

治療支援装置および治療支援システム
 本発明は、治療支援装置および治療支援システムに関し、特に、治療時の被検体内の治療対象部位における画像を撮像し、治療支援を行う治療支援装置および治療支援システムに関する。
 従来、治療時の被検体内の治療対象部位における画像を撮像し、治療支援を行う治療支援装置が知られている。このような治療支援装置は、たとえば、特開2012-023492号公報に開示されている。
 上記特開2012-023492号公報には、蛍光薬剤を含む被検体に、可視光および励起光を照射し、被検体の可視光画像および励起光によって蛍光薬剤から発生した蛍光に基づく蛍光画像を取得し治療支援を行う治療支援装置が開示されている。上記特開2012-023492号公報には、蛍光薬剤が投与された術部に、可視光と励起光とを相互に切り替えて照射させ、可視光画像と蛍光画像とを取得する構成が開示されている。なお、蛍光薬剤とは、所定の波長の励起光を照射されることにより、所定の波長の蛍光を発する薬剤のことである。上記特開2012-023492号公報では、蛍光薬剤として、インドシアニングリーン(以下、ICGという)が用いられている。特開2012-023492号公報では、ICGを被検者に投与し、励起光を照射することによって切除する部位を可視化することにより、治療支援を行っている。
 また、切除する部位を単純に可視化するという目的以外にも、蛍光薬剤を用いることが知られている。このような蛍光薬剤の使用方法は、たとえば、特開2017-071654号公報に開示されている。特開2017-071654号公報には、励起光を吸収することにより蛍光を発する物質と、がん細胞に選択的に結合する抗体とを結合させた薬剤を被検体に投与し、蛍光画像上に表示させる蛍光によりがん細胞の位置を特定した上で、励起光を照射することによりがん細胞を死滅させる方法が開示されている。上記特開2017-071654号公報では、蛍光薬剤として、IRDye(登録商標)700Dx(以下、IR700という)が用いられている。なお、IR700とICGとは、吸収スペクトルが異なるとともに、発光スペクトルが異なる。
特開2012-023492号公報 特開2017-071654号公報
 ここで、上記特開2017-071654号公報に開示されている方法によりがんの治療を行う際、治療効果を確認するために、治療前の蛍光画像と治療後の蛍光画像とを比較することが考えられる。しかしながら、治療前の蛍光画像を撮像するタイミングと、治療後の蛍光画像を撮像するタイミングとが異なっているため、被検体の撮像位置、撮像角度等の撮像条件が、治療前後で変化してしまう。このため、治療前の蛍光画像と治療後の蛍光画像に映り込んだ、がん細胞の大きさ、形状、濃さ等の差異を、目視等のように簡便に比較することは困難であるので、蛍光薬剤を用いた治療を行う際に、治療効果を容易に確認することが難しいという問題点がある。なお、上記特開2017-071654号公報に開示されている方法に限らず、蛍光薬剤を用いた治療を行う際に、治療前後の蛍光画像を比較して、治療効果を容易に確認したい場合があると考えられる。また、治療中においても、治療効果があるのか、あるいは、既に治療が完了しているのかを簡便に確認したい場合もある。
 この発明は、上記のような課題を解決するためになされたものであり、この発明の1つの目的は、蛍光薬剤を用いた治療を行う際に、治療効果を容易に確認することが可能な治療支援装置および治療支援システムを提供することである。
 上記目的を達成するために、この発明の第1の局面による治療支援装置は、治療時の被検体内の治療対象部位における画像を撮像し、治療支援を行う治療支援装置であって、治療対象部位に集積された蛍光薬剤から発せられる蛍光を検出する蛍光検出部と、蛍光検出部により出力された信号に基づいて蛍光画像を生成する蛍光画像生成部と、 蛍光画像生成部により生成された蛍光画像のうち、少なくとも、治療時点の異なる第一の蛍光画像と第二の蛍光画像とを、表示部に出力する画像出力部と、を備える。
 この発明の第1の局面による治療支援装置では、上記のように、蛍光検出部と、蛍光画像生成部とによって、蛍光薬剤から発せられた蛍光に基づく蛍光画像を画像化するとともに、画像出力部によって、蛍光画像生成部により生成された蛍光画像のうち、少なくとも、治療時点の異なる第一の蛍光画像と第二の蛍光画像とを、表示部に出力することができる。これにより、治療時点の異なる第一の蛍光画像と第二の蛍光画像とを表示部に表示させることができるので、治療時点の異なる蛍光画像同士を容易に比較することができる。その結果、蛍光薬剤を用いた治療を行う際に、治療効果を容易に確認することができる。
 上記第1の局面による治療支援装置において、好ましくは、蛍光画像内の特徴点を少なくとも1点以上抽出する抽出部と、抽出部によって抽出された特徴点の位置情報に基づいて、第一の蛍光画像と第二の蛍光画像との位置合せを行う位置合せ部と、をさらに備え、画像出力部は、位置合せ部によって位置合せされた、第一の蛍光画像と第二の蛍光画像とを、表示部に出力するように構成されている。このように構成すれば、治療時点の異なる第一の蛍光画像と第二の蛍光画像とを、蛍光画像内の特徴点の位置情報に基づいて位置合わせされた状態で、表示部に表示させることができるので、治療時点の異なる蛍光画像同士を正確に比較することができる。
 上記第1の局面による治療支援装置において、好ましくは、画像出力部は、第一の蛍光画像と第二の蛍光画像とを、対比可能に表示する出力画像、または、重畳して表示する出力画像を、表示部に出力するように構成されている。このように構成すれば、治療時点の異なる第一の蛍光画像と第二の蛍光画像とを、表示部に、対比可能に表示させることができる、または、重畳して表示させることができるので、対比可能に表示させることができない場合、および、重畳して表示させることができない場合と比較して、治療時点の異なる蛍光画像同士をより容易に比較することができる。
 上記第1の局面による治療支援装置において、好ましくは、画像出力部は、第一の蛍光画像および第二の蛍光画像に写り込んだ蛍光領域のうち、共通して蛍光が映り込んだ領域と、一方にのみ蛍光が映り込んだ領域とで異なる色に着色して、表示部に出力するように構成されている。このように構成すれば、共通して蛍光が映り込んだ領域と、一方にのみ蛍光が映り込んだ領域とを異なる色に着色して表示部に表示させることができるので、第一の蛍光画像と第二の蛍光画像との差異を容易に比較することができる。その結果、治療時点の異なる蛍光画像同士の差異を容易に比較することができる。
 上記第1の局面による治療支援装置において、好ましくは、可視光を検出する可視光検出部と、可視光検出部により出力された信号に基づいて、可視画像を生成する可視画像生成部と、可視画像内の特徴点を少なくとも1点以上抽出する抽出部と、抽出部によって抽出された可視画像内の特徴点の位置情報に基づいて、第一の蛍光画像と第二の蛍光画像との位置合せを行う位置合せ部と、をさらに備え、画像出力部は、位置合せ部によって位置合せされた、第一の蛍光画像と第二の蛍光画像とを、表示部に出力するように構成されている。このように構成すれば、治療時点の異なる第一の蛍光画像と第二の蛍光画像とを、可視画像内の特徴点の位置情報に基づいて位置合わせされた状態で、表示部に表示させることができるので、治療時点の異なる蛍光画像同士を正確に比較することができる。
 この場合、好ましくは、画像出力部は、第一の蛍光画像および第二の蛍光画像とともに、可視画像生成部により生成された少なくとも1以上の可視画像を、表示部に出力するように構成されている。このように構成すれば、蛍光画像において蛍光が映り込む部分の周辺の領域を、可視画像により観察することができるので、蛍光画像のみが表示される場合と比較して、蛍光画像に映り込んだ蛍光薬剤が投与された部分を容易に確認することができる。
 上記可視画像生成部を備える構成において、好ましくは、画像出力部は、可視画像生成部により生成された可視画像のうち、1の可視画像と第一の蛍光画像および第二の蛍光画像を重畳させて、表示部に出力するように構成されている。このように構成すれば、蛍光画像において蛍光が映り込む部分の周辺の領域を、蛍光画像と重畳させた可視画像により観察することができるので、被検体の撮像方向、撮像位置、撮像角度等の撮像条件が治療時点の異なる蛍光画像同士で異なる場合でも、蛍光薬剤が投与された部分の差異を容易に確認することができる。
 上記可視画像生成部を備える構成において、好ましくは、画像出力部は、可視画像生成部により生成された可視画像のうち、第一の可視画像を第一の蛍光画像に重畳させ、第二の可視画像を第二の蛍光画像に重畳させて、表示部に出力するように構成されている。このように構成すれば、蛍光画像において蛍光が映り込む部分の周辺の領域を、異なる時点で撮影された蛍光画像にそれぞれ対応する時点で撮影された可視画像を蛍光画像と重畳させた可視画像により観察することができるので、被検体の撮像方向、撮像位置、撮像角度等の撮像条件が治療時点の異なる蛍光画像同士で異なる場合でも、蛍光薬剤が投与された部分の差異を容易かつ正確に確認することができる。
 この場合、好ましくは、位置合せ部は、抽出部によって抽出された可視画像内の特徴点の位置情報に基づいて、第一の可視画像と第二の可視画像との位置合せを行い、画像出力部は、位置合せ部によって位置合せされた第一の可視画像を第一の蛍光画像に重畳させ、位置合せ部によって位置合せされた第二の可視画像を第二の蛍光画像に重畳させて、表示部に出力するように構成されている。このように構成すれば、互いに位置合せされた第一の可視画像および第二の可視画像に、それぞれ、互いに位置合わせされた第一の蛍光画像および第二の蛍光画像を重畳して表示させることができるので、被検体の撮像方向、撮像位置、撮像角度等の撮像条件が治療時点の異なる蛍光画像同士で異なる場合でも、蛍光薬剤が投与された部分の差異を容易かつより正確に確認することができる。
 また、上記目的を達成するために、この発明の第2の局面による治療支援システムは、治療時の被検体内の治療対象部位における画像を撮像し、治療支援を行う治療支援システムであって、治療対象部位に集積された蛍光薬剤から発せられる蛍光を検出する蛍光検出部と、蛍光検出部により出力された信号に基づいて蛍光画像を生成する蛍光画像生成部と、
蛍光画像生成部により生成された蛍光画像のうち、少なくとも、治療時点の異なる第一の蛍光画像と第二の蛍光画像を、表示する表示装置と、を備える。
 この発明の第2の局面による治療支援システムでは、上記のように、蛍光検出部と、蛍光画像生成部とによって、蛍光薬剤から発せられた蛍光に基づく蛍光画像を画像化するとともに、表示装置によって、蛍光画像生成部により生成された蛍光画像のうち、少なくとも、治療時点の異なる第一の蛍光画像と第二の蛍光画像とを表示することができる。これにより、治療時点の異なる第一の蛍光画像と第二の蛍光画像とを表示部に表示させることができるので、治療時点の異なる蛍光画像同士を容易に比較することができる。その結果、蛍光薬剤を用いた治療を行う際に、治療効果を容易に確認することができる。
 本発明によれば、上記のように、蛍光薬剤を用いた治療を行う際に、治療効果を容易に確認することができる。
本発明の第1実施形態による治療支援装置および治療支援システムの斜視図である。 本発明の第1実施形態による治療支援装置および治療支援システムの概略を示したブロック図である。 本発明の第1実施形態による治療支援装置の撮像部の概略図である。 本発明の第1実施形態による治療支援装置の撮像部内部の概略を示したブロック図である。 本発明の第1実施形態による治療支援システムの表示装置に、治療前可視画像、治療前蛍光画像および治療前合成画像を表示させた様子を示した図である。 本発明の第1実施形態による治療支援システムの表示装置に、治療後可視画像、治療後蛍光画像合成および治療後画像を表示させた様子を示した図である。 本発明の第1実施形態による治療支援システムの表示装置に、治療前合成画像と、治療後合成画像とを、並べて表示させた様子を示した図である。 本発明の第1実施形態による治療支援システムの表示装置に、治療前合成画像と、治療後合成画像とを、それぞれ複数ずつ並べて表示させた様子を示した図である。 本発明の第1実施形態による治療支援システムの表示装置に、治療前合成画像と、治療後合成画像とを、重畳させた画像を表示させた様子を示した図である。 本発明の第1実施形態による治療支援システムの表示装置に、治療前合成画像と、治療後合成画像とを、重畳させた画像を、複数並べて表示させた様子を示した図である。 本発明の第2実施形態による治療支援装置および治療支援システムの概略を示したブロック図である。 本発明の第2実施形態による治療支援装置の撮像部の概略図である。 本発明の第2実施形態による治療支援装置の撮像部内部の概略を示したブロック図である。 本発明の第2実施形態による治療支援システムの表示装置に、治療前可視画像、治療前蛍光画像および治療前合成画像を表示させた様子を示した図である。 本発明の第2実施形態による治療支援システムの表示装置に、治療前合成画像と、治療後合成画像とを、それぞれ複数ずつ並べて表示させた様子を示した図である。 本発明の第2実施形態による治療支援システムの表示装置に、治療前合成画像と、治療前合成とは異なる蛍光を重畳した治療後合成画像とを、並べて表示させた様子を示した図である。
 以下、本発明を具体化した実施形態を図面に基づいて説明する。
 [第1実施形態]
 図1~図10を参照して、本発明の第1実施形態による治療支援装置100と表示装置900とを備えた、治療支援システム1100の構成について説明する。治療支援装置100(治療支援システム1100)は、治療時の被検体P内の治療対象部位における画像を撮像し、治療支援を行うための装置(システム)である。なお、表示装置900は、請求の範囲の「表示部」の一例である。
 図1に示すように、第1実施形態による治療支援装置100は、被検体Pを撮像するための撮像部10と、制御部21(図2参照)等が内蔵された本体部20と、撮像部10と本体部20とを接続するアーム部30と、治療支援装置100を操作するための操作部40と、を備えている。治療支援装置100は、被検体Pに投与された蛍光薬剤に励起光Exを照射するとともに、励起光Exにより蛍光薬剤が励起されることにより発せられる蛍光Lxを検出して画像化するように構成された装置である。また、治療支援装置100は、表示装置900に、撮像部10により撮像した画像を表示させることが可能に構成されている。
 第1実施形態では、撮像部10は、被検体Pに投与される蛍光薬剤として、IR700の波長帯域に対応するように構成されている。IR700は、励起光Ex(Ex1)を吸収することにより蛍光Lx(Lx1)を発する物質と、がん細胞Mに選択的に結合する抗体とを結合させた薬剤である。すなわち、IR700は、被検体Pの治療対象部位に集積される蛍光薬剤である。蛍光Lx1は、近赤外光(非可視光)の波長帯域にピークを有する光である。なお、IR700は、特許請求の範囲の「蛍光薬剤」の一例である。
 IR700は、被検体Pに投与された状態で、治療光が照射されることによりがん細胞M(図5参照)を死滅させる近赤外光免疫療法(NIR-PIT)に用いられる薬剤である。治療光は、IR700の吸収波長である略600以上nm略700以下nmの近赤外光である。治療光は、被検体P内の治療対象部位であるがん細胞M(図5参照)を画像化するための励起光Ex1と比較して照射強度が高く、治療光が照射されたIR700からは熱が発生する。そして、IR700から発生した熱により、IR700が結合するがん細胞M(図5参照)が破壊される。がん細胞M(図5参照)が破壊された場合、励起光Ex1を照射しても蛍光Lx1が発生しなくなる。すなわち、治療光の照射前後における、蛍光Lx1の強度を比較することにより、がん細胞M(図5参照)がどの程度破壊されたのか(治療効果)を確認することが可能である。また、治療光の照射前後において、蛍光Lx1の強度が変化したか(小さくなったか)によって、治療光が被検体Pの治療対象部位に正しく照射されているか否かを把握することが可能である。また、がん細胞M(図5参照)が想定した位置と異なる位置に存在した場合でも、IR700から発せられる蛍光Lx1に基づいて、がん細胞M(図5参照)の位置を正確に把握することができる。なお、IR700は、治療時(励起光Ex1の照射時)に、被検体Pのがん細胞Mに結合された状態となるように、治療の前(たとえば、1~2日前)に投与される。
 図2に示すように、撮像部10は、可視光Visおよび励起光Ex1を照射するための光源部50と、可視光Visと蛍光Lx1とを分離するための光学系60と、可視光Visおよび蛍光Lx1を検出するための検出部70と、を備えている。
 光源部50は、IR700を励起させるための励起光Ex1を発生する励起光源51と、可視光Visを発生する可視光源53と、を備えている。
 励起光源51および可視光源53は、たとえば、光源としての発光ダイオード(LED)を含む。励起光源51は、IR700に対応する波長帯域の励起光Ex1を発生するように構成されている。たとえば、励起光Ex1は、ピーク波長700mmが近赤外光である。なお、励起光Ex1は、IR700が投与された部分を確認するための励起光Ex(確認光)であり、がんを治療するための励起光Ex(治療光)と比較して照射強度が低くなるように構成されている。また、可視光源53は、可視光Visとして、たとえば、可視領域の複数の(全ての)波長を含む白色光を発生させるように構成されている。なお、可視光Visは、白色光に限らず、可視領域の特定の波長だけを含むように構成してもよい。
 図3に示すように、治療支援装置100では、励起光源51および可視光源53は、それぞれ、複数(6つずつ)設けられている。また、治療支援装置100では、複数(6つ)の励起光源51および複数(6つ)の可視光源53は、光源部50において、それぞれ、環状かつ略等間隔に並んで配置されている。具体的には、光源部50において、6つの励起光源51および6つの可視光源53は、光学系60の周囲を囲むように、環状に並ぶように配置されている。また、励起光源51および可視光源53は、交互に、かつ、互いに略等間隔で配置されている。これにより、励起光源51および可視光源53は、光源部50において、それぞれ、略等間隔に配置された状態となっている。
 図2に示すように、治療支援装置100では、光源部50は、励起光源51および可視光源53からそれぞれ照射された励起光Ex1および可視光Visを、被検体Pに照射するように構成されている。IR700が被検体Pに投与された状態で、IR700が存在する術部Paに励起光Ex1が照射されると、IR700が励起されることにより、IR700から蛍光Lx1が発せられる。また、被検体Pに照射された可視光Visは、被検体Pにより反射される。
 光学系60は、フォーカスを合わせるためのズームレンズ61と、被検体Pから反射された可視光Visと蛍光Lx1とを分離するためのプリズム62と、を含む。図4に示すように、ズームレンズ61と、プリズム62とは、光軸L方向に沿って、この順に並んで配置されている。
 ズームレンズ61は、フォーカスを合わせるために、図示しないレンズ移動機構によって光軸L方向に往復移動することが可能に構成されている。プリズム62は、被検体Pから反射されズームレンズ61を通過した可視光Visと蛍光Lx1とを分離して、可視光Visおよび蛍光Lx1を、それぞれ、可視光検出部73および蛍光検出部71に導くように構成されている。
 検出部70は、蛍光Lx1を検出するための蛍光検出部71と、可視光Visを検出するための可視光検出部73と、を備えている。可視光検出部73では、プリズム62に導かれた可視光Visを検出するように構成されている。蛍光検出部71では、プリズム62に導かれた蛍光Lx1を検出するように構成されている。
 蛍光検出部71および可視光検出部73は、たとえば、それぞれCMOS(complementary metal oxide semiconductor)やCCD(charge coupled device)等を用いたイメージセンサ(撮像素子)から構成される。蛍光検出部71では、蛍光Lx1の波長帯域を含む範囲の光を検出可能な撮像素子が用いられる。可視光検出部73では、可視光Visの波長帯域を含む範囲の光を検出可能な撮像素子が用いられる。また、可視光検出部73では、可視画像830(図5および図6参照)をカラー画像として撮影することが可能な撮像素子が使用される。
 図2に示すように、本体部20は、治療支援装置100の各種構成を制御するための制御部21と、検出部70で検出された信号に基づいて画像を生成する画像生成部22と、画像生成部22で生成した画像等を記憶する記憶部23と、画像生成部22で生成した画像を表示装置900に出力する画像出力部24と、を備えている。本体部20は、制御部21、画像生成部22、記憶部23および画像出力部24等を含むPC(Personal Computer)が内蔵されるとともに、車輪が設けられ治療支援装置100を移動させることが可能な台車として構成されている。なお、画像生成部22は、特許請求の範囲の「蛍光画像生成部」および「可視画像生成部」の一例である。
 制御部21は、CPU(Central Processing Unit)、ROM(Read Only Memory)およびRAM(Random Access Memory)などを含んで構成されたコンピュータである。
 画像生成部22は、GPU(Graphics Processing Unit)や画像処理用に構成されたFPGA(Field-Programmable Gate Array)などのプロセッサを含んで構成されたコンピュータである。画像生成部22は、蛍光検出部71および可視光検出部73により出力された検出信号に基づいて、それぞれ、蛍光画像810(図5および図6参照)および可視画像830(図5および図6参照)を生成することが可能に構成されている。
 記憶部23は、たとえば、不揮発性のメモリまたはハードディスクドライブ(HDD)などを含む。記憶部23は、制御部21の処理に用いられるプログラムが記憶されているとともに、画像生成部22で生成された画像(蛍光画像810および可視画像830)等を記憶できるように構成されている。記憶部23は、たとえば、画像生成部22で生成された画像を、撮像日時などのタイムスタンプとともに記憶する。治療支援装置100では、蛍光画像810は、治療前後にそれぞれ生成された治療前蛍光画像811(図5参照)および治療後蛍光画像812(図6参照)を含む。また、可視画像830は、治療前後にそれぞれ生成された治療前可視画像831(図5参照)および治療後可視画像832(図6参照)を含む。なお、治療前蛍光画像811(図5参照)および治療後蛍光画像812(図6参照)は、それぞれ、特許請求の範囲の「第一の蛍光画像」と「第二の蛍光画像」の一例である。また、治療前可視画像831(図5参照)および治療後可視画像832(図6参照)は、それぞれ、特許請求の範囲の「第一の可視画像」と「第二の可視画像」の一例である。
 画像出力部24は、治療支援装置100を表示装置900に接続するためのインターフェースである。画像出力部24は、たとえば、HDMI(登録商標)等の映像インターフェースにより表示装置900と接続される。画像出力部24は、画像生成部22で生成された画像(蛍光画像810および可視画像830)を含む出力画像800(図5および図6参照)を表示装置900に出力するように構成されている。すなわち、第1実施形態では、画像出力部24は、画像生成部22により生成された蛍光画像810のうち、治療時点の異なる治療前蛍光画像811(図5参照)と治療後蛍光画像812(図6参照)とを、表示装置900に出力するように構成されている。また、画像出力部24は、治療前蛍光画像811および治療後蛍光画像812とともに、画像生成部22により生成された可視画像830を、表示装置900に出力するように構成されている。そして、表示装置900は、画像出力部24により出力された出力画像800を画面に表示するように構成されている。なお、本明細書中において、「治療前」および「治療後」は、治療開始前および治療開始後に限らず、ある治療時点の前および後を意味する。
 アーム部30は、図1に示すように、複数のアームおよび複数のヒンジ等を介して、本体部20と撮像部10とを接続している。アーム部30は、撮像部10の本体部20に対する相対位置を変更可能に構成されている。
 操作部40は、制御部21を介して、治療支援装置100を操作するための入力を受け付けるように構成されている。操作部40は、たとえば、治療支援装置100と通信可能なリモートコントローラである。
 治療支援装置100では、操作部40は、記憶部23により記憶された蛍光画像810から、治療前蛍光画像811と治療後蛍光画像812とを選択する入力を受け付けることが可能に構成されている。また、治療支援装置100では、操作部40は、記憶部23により記憶された可視画像830から、治療前可視画像831と治療後可視画像832とを選択する入力を受け付けることが可能に構成されている。
 具体的には、図8に示すように、治療支援システム1100では、治療支援装置100は、表示装置900に、複数の治療前蛍光画像811および複数の治療後蛍光画像812を表示させる。そして、医師等のユーザは、表示装置900に表示された複数の治療前蛍光画像811および複数の治療後蛍光画像812から、操作部40を介して、治療支援に用いたい治療前蛍光画像811および治療後蛍光画像812を選択する。画像出力部24は、選択された治療前蛍光画像811および治療後蛍光画像812を、表示装置900に出力する。
 表示装置900は、図5および図6に示すように、画像生成部22により生成され、画像出力部24により出力された画像(蛍光画像810および可視画像830)を表示することが可能に構成されている。表示装置900は、たとえば、液晶ディスプレイ、有機ELディスプレイ、無機ELディスプレイなどにより構成されている。なお、図5および図6では、がんに侵された術部Paを撮像し、表示装置900に表示する例を示している。
 図5および図6に示すように、蛍光画像810には、IR700が投与されたがん細胞Mが写り込んでいる。また、可視画像830には、IR700が投与されたがん細胞Mの周辺の術部Paが写り込んでいる。なお、図5および図6では、説明の都合上、蛍光画像810において、がん細胞Mを、内部が白塗りの太い実線で示している。また、治療前のがん細胞Mと治療後のがん細胞Mとで、互いに相似、かつ、大きさが異なる(治療前に比べて治療後が小さくなる)ように示しているが、IR700による治療によって生じるがん細胞Mの形状の変化はこれに限られない。
 なお、治療支援装置100では、画像出力部24は、表示装置900により、蛍光画像810と可視画像830とを重畳して表示させるように、蛍光画像810および可視画像830を出力することが可能に構成されている。より詳細には、治療支援システム1100は、蛍光画像810と可視画像830とを重畳させた合成画像840を、表示装置900に表示させることが可能に構成されている。具体的には、図5に示すように、治療支援システム1100は、治療前蛍光画像811と治療前可視画像831とを重畳させた治療前合成画像841を、表示装置900に表示させることが可能に構成されている。また、図6に示すように、治療支援システム1100は、治療後蛍光画像812と治療後可視画像832とを重畳させた治療後合成画像842を、表示装置900に表示させることが可能に構成されている。すなわち、第1実施形態では、画像出力部24は、画像生成部22により生成された可視画像830のうち、治療前可視画像831および治療後可視画像832を、それぞれ、治療前蛍光画像811および治療後蛍光画像812に重畳させて、表示装置900に出力することが可能に構成されている。
 ここで、第1実施形態では、画像出力部24は、記憶部23により記憶された蛍光画像810のうち、治療前蛍光画像811と治療後蛍光画像812とを、対比可能に表示する出力画像800、または、重畳して表示する出力画像800を、表示装置900に出力するように構成されている。
 具体的には、治療支援装置100では、画像出力部24は、記憶部23により記憶された可視画像830のうち、治療前可視画像831に治療前蛍光画像811を重畳させた治療前合成画像841と、治療後可視画像832に治療後蛍光画像812を重畳させた治療後合成画像842とを、対比可能に表示する出力画像800、または、重畳して表示する出力画像800を、表示装置900に出力するように構成されている。ここで、対比可能に表示するとは、複数の画像同士を見比べることが可能な態様で表示することであり、画像同士を並べて表示することを含む。たとえば、図7および図8では、治療前合成画像841と治療後合成画像842とを、表示装置900に並べて表示させた例を示している。図9および図10では、治療前合成画像841と治療後合成画像842とを、表示装置900に重畳させて表示させた例を示している。なお、治療支援装置100では、治療前合成画像841に写り込んだがん細胞Mと、治療後合成画像842とに映り込んだがん細胞Mとを異なる色で表示させることが可能であるとともに、治療前合成画像841と治療後合成画像842とで共通する領域と、共通しない領域(治療されてがん細胞Mが縮小した領域)とを異なる色で表示させることが可能である。すなわち、第1実施形態では、画像出力部24は、治療前蛍光画像811および治療後蛍光画像812に写り込んだ蛍光領域のうち、共通して蛍光Lxが映り込んだ領域と、一方にのみ蛍光Lxが映り込んだ領域とで異なる色に着色して、表示部に出力することが可能に構成されている。特に、治療前後の画像を重畳して表示する場合には、治療前の画像と治療後の画像とを互いに異なる色に着色することが効果的である。
 また、治療支援装置100では、画像出力部24は、治療前合成画像841と、治療後合成画像842とを、それぞれ、複数ずつ並べて表示する出力画像800を、表示装置900に出力することが可能に構成されている。具体的には、図8に示すように、治療支援システム1100は、複数(3つ)の治療前合成画像841(841a、841bおよび841c)と、複数(3つ)の治療後合成画像842(842a、842bおよび842c)とを、表示装置900に並べて表示することが可能に構成されている。なお、治療前合成画像841aと、治療前合成画像841bと、治療前合成画像841cとは、互いに撮像方向が異なる。同様に、治療後合成画像842aと、治療後合成画像842bと、治療後合成画像842cとは、互いに撮像方向が異なる。
 また、治療支援装置100では、画像出力部24は、治療前合成画像841と治療後合成画像842とを重畳して表示する出力画像800を、表示装置900に出力することが可能に構成されている。具体的には、図9に示すように、治療支援システムは、治療前合成画像841と治療後合成画像842とを重畳した治療前後合成画像843を、表示装置900に表示することが可能に構成されている。なお、図9では、治療前後のがん細胞Mを、それぞれ、内部が白塗りの鎖線、および、内部が白塗りの太実線で示している。また、図10に示すように、治療支援システム1100は、複数(3つ)の治療前後合成画像843(843a、843bおよび843c)を並べて表示することが可能に構成されている。
 ここで、図7に示すように、第1実施形態では、画像出力部24(図2参照)は、位置合せ部26(図2参照)によって位置合せされた、治療前蛍光画像811と治療後蛍光画像812とを、表示装置900に出力するように構成されている。詳細には、図2に示すように、治療支援装置100は、蛍光画像810(図5および図6参照)内のマーカ部材80(図5および図6参照)を抽出する抽出部25と、抽出部25によって抽出された蛍光画像810(図5および図6参照)内のマーカ部材80(図5および図6参照)の位置情報に基づいて、治療前蛍光画像811(図5参照)と治療後蛍光画像812(図6参照)との位置合せを行う位置合せ部26とを備える。
 具体的には、治療支援装置100では、図5および図6に示すように、治療前後の画像にマーカ部材80が映り込むように、被検体Pの術部Paまたは術部Paの近傍に複数のマーカ部材80を配置させておく。マーカ部材80は、たとえば、蛍光画像810に映り込む外科用マーカである。なお、図5および図6では、マーカ部材80を3つ配置させた例を示している。また、図5および図6では、治療前後のマーカ部材80を、それぞれ、マーカ部材81および82とする。
 抽出部25は、治療前蛍光画像811に映り込んだマーカ部材81と、治療後蛍光画像812に映り込んだマーカ部材81とを抽出する。そして、位置合せ部26は、治療前蛍光画像811に映り込んだマーカ部材81の位置と治療後蛍光画像812に映り込んだマーカ部材81との位置が合うように、治療前蛍光画像811または治療後蛍光画像812の補正を行う。位置合せ部26は、治療前蛍光画像811または治療後蛍光画像812の補正を行う際に、治療前蛍光画像811に映り込んだ複数のマーカ部材81同士の距離と、治療後蛍光画像812に映り込んだ複数のマーカ部材81同士の距離とに基づいて、治療前蛍光画像811と治療後蛍光画像812との拡大率の補正を行う。
 以上の構成により、画像出力部24は、治療前蛍光画像811に映り込んだ被検体Pの位置および大きさと、治療後蛍光画像812に映り込んだ被検体Pの位置および大きさとを略一致させた状態で、対比可能に表示する出力画像800、および、重畳して表示する出力画像800を、表示装置900に出力することが可能である。すなわち、図7に示すように、画像出力部24は、治療前蛍光画像811および治療後蛍光画像812に映り込んだ被検体Pの位置および大きさを略一致させた状態(マーカ部材81とマーカ部材82との位置および大きさが略一致した状態)で、治療前合成画像841と治療後合成画像842とを並べて表示する出力画像800を、表示装置900に出力することができる。また、図9に示すように、画像出力部24は、治療前蛍光画像811および治療後蛍光画像812に映り込んだ被検体Pの位置および大きさを略一致させた状態(マーカ部材81とマーカ部材82との位置および大きさが略一致した状態)で、治療前合成画像841と治療後合成画像842とを重畳させて表示する出力画像800を、表示装置900に出力することができる。
 なお、治療支援システム1100は、表示装置900に、図5、図7、図8、図9および図10で示した表示形態のうち、いずれの表示形態により表示させるかどうかを、操作部40により、制御部21に対して設定することが可能に構成されている。
 (第1実施形態の効果)
 第1実施形態では、以下のような効果を得ることができる。
 第1実施形態では、上記のように、治療支援装置100は、蛍光検出部71と、画像生成部22とによって、IR700から発せられた蛍光Lx(Lx1)に基づく蛍光画像810を画像化するとともに、画像出力部24によって、画像生成部22により生成された蛍光画像810のうち、治療時点の異なる治療前蛍光画像811と治療後蛍光画像812とを、表示装置900に出力することができる。これにより、治療時点の異なる治療前蛍光画像811と治療後蛍光画像812とを表示装置900に表示させることができるので、治療時点の異なる蛍光画像810同士を容易に比較することができる。その結果、IR700を用いた治療を行う際に、治療効果を容易に確認することができる。
 また、第1実施形態では、上記のように、治療支援装置100は、蛍光画像810内の複数のマーカ部材80を抽出する抽出部25と、抽出部25によって抽出された複数のマーカ部材80の位置情報に基づいて、治療前蛍光画像811と治療後蛍光画像812との位置合せを行う位置合せ部26と、を備え、画像出力部24を、位置合せ部26によって位置合せされた、治療前蛍光画像811と治療後蛍光画像812とを、表示装置900に出力するように構成する。これにより、治療時点の異なる治療前蛍光画像811と治療後蛍光画像812とを、蛍光画像810内の複数のマーカ部材80の位置情報に基づいて位置合わせされた状態で、表示装置900に表示させることができるので、治療時点の異なる蛍光画像810同士を正確に比較することができる。また、治療支援装置100は、複数のマーカ部材80に基づいて位置合せを行う際に、治療前蛍光画像811内の複数のマーカ部材81同士の距離と、治療後蛍光画像812内の複数のマーカ部材81同士の距離とに基づいて、治療前蛍光画像811と治療後蛍光画像812との拡大率の補正を行う。これにより、治療前蛍光画像811または治療後蛍光画像812を、治療前蛍光画像811と治療後蛍光画像812との位置に加えて拡大率も一致させた状態となるように補正することができるので、治療前と治療後のがん細胞Mの大きさを比較することができる。その結果、具体的にどの程度の治療効果があったのかをより正確に把握することができる。
 また、第1実施形態では、上記のように、画像出力部24を、治療前蛍光画像811と治療後蛍光画像812とを、対比可能に表示する出力画像800、または、重畳して表示する出力画像800を、表示装置900に出力するように構成する。これにより、治療時点の異なる治療前蛍光画像811と治療後蛍光画像812とを、表示装置900に、対比可能に表示させることができる、または、重畳して表示させることができるので、対比可能に表示させることができない場合、および、重畳して表示させることができない場合と比較して、治療時点の異なる蛍光画像810同士をより容易に比較することができる。
 また、第1実施形態では、上記のように、画像出力部24を、治療前蛍光画像811および治療後蛍光画像812に写り込んだ蛍光領域のうち、共通して蛍光が映り込んだ領域と、一方にのみ蛍光が映り込んだ領域とで異なる色に着色して、表示装置900に出力するように構成する。これにより、共通して蛍光Lx(Lx1)が映り込んだ領域と、一方にのみ蛍光Lx(Lx1)が映り込んだ領域とを異なる色に着色して表示装置900に表示させることができるので、治療前蛍光画像811と治療後蛍光画像812との差異を容易に比較することができる。その結果、治療時点の異なる蛍光画像810同士の差異を容易に比較することができる。
 また、第1実施形態では、上記のように、可視光Visを検出する可視光検出部73と、可視光検出部73により出力された信号に基づいて、可視画像830を生成する画像生成部22と、可視画像830内の複数のマーカ部材80を抽出する抽出部25と、抽出部25によって抽出された可視画像830内のマーカ部材80の位置情報に基づいて、治療前蛍光画像811と治療後蛍光画像812との位置合せを行う位置合せ部26と、を備え、画像出力部24は、位置合せ部26によって位置合せされた、治療前蛍光画像811と治療後蛍光画像812とを、表示装置900に出力するように構成されている。これにより、治療時点の異なる治療前蛍光画像811と治療後蛍光画像812とを、可視画像830内のマーカ部材80の位置情報に基づいて位置合わせされた状態で、表示装置900に表示させることができるので、治療時点の異なる蛍光画像810同士を正確に比較することができる。
 また、第1実施形態では、上記のように、画像出力部24を、治療前蛍光画像811および治療後蛍光画像812とともに、画像生成部22により生成された少なくとも1以上の可視画像830を、表示装置900に出力するように構成する。これにより、蛍光画像810において蛍光Lx(Lx1)が映り込む部分の周辺の領域を、可視画像830により観察することができるので、蛍光画像810のみが表示される場合と比較して、蛍光画像810に映り込んだIR700が投与された部分を容易に確認することができる。
 また、第1実施形態では、上記のように、画像出力部24を、画像生成部22により生成された可視画像830のうち、治療前可視画像831および治療後可視画像832を、それぞれ、位置合せ部26によって位置合せされた治療前蛍光画像811および治療後蛍光画像812に重畳させて、表示装置900に出力するように構成する。これにより、蛍光画像810において蛍光Lx(Lx1)が映り込む部分の周辺の領域を、異なる時点で撮影された蛍光画像810にそれぞれ対応する時点で撮影された可視画像830を蛍光画像810と重畳させた可視画像830により観察することができるので、被検体Pの撮像方向、撮像位置、撮像角度等の撮像条件が治療時点の異なる蛍光画像810同士で異なる場合でも、IR700が投与された部分の差異を容易かつ正確に確認することができる。
 また、第1実施形態では、上記のように、画像出力部24を、治療前合成画像841と、治療後合成画像842とを、それぞれ、複数ずつ並べて表示する出力画像800を、表示装置900に出力するように構成する。これにより、様々な方向から撮像した、複数の治療前合成画像841と、複数の治療後合成画像842とを、並べて表示させることができる。その結果、1つの方向から撮像した治療前後の合成画像840を並べて表示させる場合と比較して、IR700が投与された部分(治療された部分)の治療前後の変化を精度よく確認することができる。
 また、第1実施形態では、上記のように、画像出力部24を、治療前合成画像841と、治療後合成画像842とを、重畳して表示する出力画像800を、表示装置900に出力するように構成する。これにより、治療前合成画像841と、治療後合成画像842とを、重畳させずに個別に表示させる場合と比較して、治療前にIR700が存在する部分と、治療後にIR700が存在する部分との相互の位置関係を、容易に把握することができる。
 また、第1実施形態では、上記のように、治療支援装置100は、記憶部23により記憶された蛍光画像810から、治療前蛍光画像811と治療後蛍光画像812とを選択する入力を受け付けるとともに、記憶部23により記憶された可視画像830から、治療前可視画像831と治療後可視画像832とを選択する入力を受け付ける操作部40を備える。これにより、医師等のユーザが、治療効果を確認するために対比するのに最も適した画像を容易に選択して表示装置900に表示させることができる。
 また、第1実施形態では、上記のように、治療支援装置100は、IR700を励起させるための励起光Ex1を照射する光源部50を備える。これにより、光源部50から照射される励起光Ex1により、IR700を容易に励起させることができるので、被検体Pに投与されたIR700から容易に蛍光Lx1を発生させることができる。また、励起光Ex1を照射する光源部50を設けることで、被検体Pに照射する励起光Ex1の強度を調整することができるので、たとえば、励起光Exの強度が強すぎて、ハレーションが生じるのを抑制することができる。
 [第2実施形態]
 次に、図11~図16を参照して、第2実施形態について説明する。この第2実施形態では、1つの蛍光薬剤を用いた第1実施形態とは異なり、複数の蛍光薬剤を用いた例について説明する。なお、図中において、第1実施形態と同様の構成には、同一の符号を付している。
 図11に示すように、第2実施形態の治療支援システム1200が備える治療支援装置200は、撮像部210と、画像生成部222等が内蔵された本体部220と、を備えている。
 第2実施形態では、撮像部210は、被検体Pに投与される蛍光薬剤として、IR700およびICGの波長帯域に対応するように構成されている。IR700とICGとは、吸収スペクトルおよび発光スペクトルが異なる。ICGは、IR700の励起光Ex1とは異なる波長帯域の励起光Ex2を吸収することにより、IR700の蛍光Lx1とは異なる波長帯域の蛍光Lx2を発する物質を含む薬剤である。なお、蛍光Lx1と蛍光Lx2とは、共に、近赤外光(非可視光)の波長帯域にピークを有する光である。ICGは、被検体Pに投与され、励起光Ex2を照射することにより手術時の術部Paの可視化に用いられる薬剤である。ICGは、IR700による治療後の経過観察において、被検体Pのがん細胞Mの周囲の視認性を向上させるために、IR700と同時またはIR700よりも後に被検体Pに投与される。なお、ICGは、特許請求の範囲の「蛍光薬剤」の一例である。
 撮像部210は、可視光Visおよび励起光Ex(Ex1、Ex2)を照射するための光源部250と、可視光Visと蛍光Lx1と蛍光Lx2とを分離するための光学系260と、可視光Visおよび蛍光Lx(Lx1、Lx2)を検出するための検出部270と、を備えている。
 光源部250は、励起光源51、可視光源53に加えて、ICGを励起させるための励起光Ex2を発生する励起光源52、を備えている。励起光源52は、ICGに対応する波長帯域の励起光Ex2を発生するように構成されている。たとえば、励起光Ex2は、ピーク波長760mmが近赤外光である。なお、励起光Ex2は、ICGが投与された部分を確認するための励起光Ex(確認光)であり、がんを治療するための励起光Ex(治療光)と比較して、照射強度が低くなるように構成されている。
 図12に示すように、治療支援装置200では、励起光源51、励起光源52および可視光源53は、それぞれ、複数(4つずつ)設けられている。また、複数(4つ)の励起光源51、複数(4つ)の励起光源52および複数(4つ)の可視光源53は、光源部250において、それぞれ、環状かつ略等間隔に並んで配置されている。具体的には、光源部250において、4つの励起光源51、4つの励起光源52および4つの可視光源53は、光学系260の周囲を囲むように、環状に並ぶように配置されている。また、励起光源51、励起光源52および可視光源53は、励起光源51、励起光源52、可視光源53、の順が繰り返されるように、互いに略等間隔で配置されている。これにより、励起光源51、励起光源52および可視光源53は、光源部250において、それぞれ、略等間隔に配置された状態となっている。
 治療支援装置100では、光源部250は、励起光源51、励起光源52および可視光源53からそれぞれ照射された励起光Ex1、励起光Ex2および可視光Visを、被検体Pに照射するように構成されている。IR700およびICGが被検体Pに投与された状態で、IR700およびICGが存在する術部Paに励起光Ex1および励起光Ex2が照射されると、IR700およびICGが励起される。そして、IR700およびICGから、それぞれ、蛍光Lx1および蛍光Lx2が発せられる。
 光学系260は、被検体Pから反射された可視光Visと蛍光Lx(蛍光Lx1、蛍光Lx2)とを分離するためのプリズム62と、プリズム62により分離された蛍光Lx(蛍光Lx1、蛍光Lx2)を、蛍光Lx1と蛍光Lx2とに分離するためのプリズム63とを含む。図13に示すように、ズームレンズ61と、プリズム62と、プリズム63とは、光軸L方向に沿って、この順に並んで配置されている。
 プリズム62は、被検体Pから反射されズームレンズ61を通過した可視光Visと蛍光Lx(Lx1、Lx2)とを分離して、可視光Visおよび蛍光Lx(Lx1、Lx2)を、それぞれ、可視光検出部73およびプリズム63に導くように構成されている。プリズム63は、プリズム62を通過した蛍光Lx(蛍光Lx1、蛍光Lx2)を分離して、蛍光Lx1および蛍光Lx2を、それぞれ、蛍光検出部71および蛍光検出部72に導くように構成されている。
 検出部270は、蛍光Lx2を検出するための蛍光検出部72を備えている。蛍光検出部72では、プリズム63に導かれた蛍光Lx2を検出するように構成されている。蛍光検出部72では、蛍光Lx2の波長帯域を含む範囲の光を検出可能な撮像素子が用いられる。
 図11に示すように、本体部220は、検出部270で検出された信号に基づいて画像を生成する画像生成部222と、画像生成部222で生成した画像を表示装置900に出力する画像出力部224と、を備えている。なお、画像生成部222は、特許請求の範囲の「蛍光画像生成部」および「可視画像生成部」の一例である。
 画像生成部222は、蛍光検出部71、蛍光検出部72および可視光検出部73により出力された検出信号に基づいて、それぞれ、蛍光画像810、蛍光画像820(図14参照)および可視画像830を生成することが可能に構成されている。
 画像出力部224は、治療支援装置200を表示装置900に接続するためのインターフェースである。画像出力部224は、画像生成部222で生成された画像(蛍光画像810、蛍光画像820および可視画像830)を表示装置900に出力するように構成されている。すなわち、第2実施形態では、画像出力部224は、画像生成部222により生成された蛍光画像810のうち、治療時点の異なる治療前後の蛍光画像810、820(図14参照)を、表示装置900に出力するように構成されている。なお、図14では、蛍光画像810、820のうち、治療前の蛍光画像810、820のみを示している。
 表示装置900は、図14に示すように、画像生成部222により生成され、画像出力部224により出力された画像(蛍光画像810、蛍光画像820および可視画像830)を表示することが可能に構成されている。なお、図14では、蛍光画像810、蛍光画像820および可視画像830として、それぞれ、治療前に生成された治療前蛍光画像811、治療前蛍光画像821および治療前可視画像831を示している。なお、治療前蛍光画像821は、特許請求の範囲の「第一の蛍光画像」の一例である。
 蛍光画像820には、ICGが投与されたがん細胞Mが写り込んでいる。ICGとIR700とは、生化学的特性の差異により術部Paにおける分布が異なる。そのため、蛍光画像810と蛍光画像820とでは、がん細胞Mが異なる表示態様で写り込んでいる。なお、図14では、説明の都合上、蛍光画像820において、がん細胞Mを、内部が斜線で塗り潰された実線で示している。
 なお、治療支援装置200では、画像出力部224は、表示装置900により、蛍光画像810と蛍光画像820と可視画像830とを重畳して表示させるように、蛍光画像810、蛍光画像820および可視画像830を出力することが可能に構成されている。より詳細には、治療支援システム1200は、蛍光画像810と蛍光画像820と可視画像830とを重畳させた合成画像860を、表示装置900に表示させることが可能に構成されている。なお、図14では、治療前蛍光画像811と治療前蛍光画像821と治療前可視画像831とを重畳させた治療前合成画像861を、表示装置900に表示させた例を示している。
 また、治療支援装置200では、画像出力部224は、表示装置900により、蛍光画像810と可視画像830とを重畳して表示させるとともに、蛍光画像820と可視画像830とを重畳して表示させるように、蛍光画像810、蛍光画像820および可視画像830を出力することが可能に構成されている。具体的には、図16に示すように、治療支援システム1200は、蛍光画像810と可視画像830とを重畳させた合成画像840と、蛍光画像820と可視画像830とを重畳させた合成画像850とを表示装置900に並べて表示させることが可能に構成されている。なお、図16では、治療前可視画像831に治療前蛍光画像811を重畳させた治療前合成画像841と、治療後可視画像832に治療後蛍光画像822を重畳させた治療後合成画像852とを表示させた例を示している。
 ここで、第2実施形態では、画像出力部224は、第1実施形態の画像出力部24と同様に、記憶部23により記憶された蛍光画像810のうち、治療前蛍光画像811と治療後蛍光画像812とを、対比可能に表示する出力画像800、または、重畳して表示する出力画像800を、表示装置900に出力することが可能に構成されている。また、画像出力部224は、記憶部23により記憶された蛍光画像820のうち、治療前蛍光画像821と治療後蛍光画像822とを、対比可能に表示する出力画像800を、表示装置900に出力することが可能に構成されている。
 具体的には、治療支援装置200では、画像出力部224は、治療前合成画像861と、治療後合成画像862とを、それぞれ、複数ずつ並べて表示する出力画像800を、表示装置900に出力するように構成されている。具体的には、図15に示すように、治療支援システム1200は、複数(3つ)の治療前合成画像861(861a、861bおよび861c)と、複数(3つ)の治療後合成画像862(862a、862bおよび862c)とを、表示装置900に並べて表示することが可能に構成されている。
 また、治療支援装置200では、画像出力部224は、治療前に生成された蛍光画像810と可視画像830とを重畳させて表示させるとともに、治療後に生成された蛍光画像820と可視画像830とを重畳させて表示する出力画像800を、表示装置900に出力するように構成されている。具体的には、図16に示すように、治療支援システム1200は、治療前可視画像831に治療前蛍光画像811を重畳させた治療前合成画像841と、治療後可視画像832に治療後蛍光画像822を重畳させた治療後合成画像852とを、表示装置900に並べて表示することが可能に構成されている。したがって、図16では、被検体Pに投与されたIR700およびICGのうち、治療前合成画像841では、IR700のみが写り込んでおり、治療後合成画像852では、ICGのみが写り込んでいる。これにより、治療前には、がん細胞Mの位置を特定するために、IR700を用いるとともに、治療後には、がん細胞Mの死滅に伴って、視認性が低下したIR700ではなく、ICGによって、がん細胞Mの経過観察を精度よく行うことができる。
 なお、第2実施形態のその他の構成については、上記第1実施形態と同様である。
 (第2実施形態の効果)
 第2実施形態では、以下のような効果を得ることができる。
 第2実施形態では、上記のように、治療支援装置200は、画像出力部24によって、画像生成部22により生成された蛍光画像810、820のうち、治療時点の異なる治療前蛍光画像と治療後蛍光画像とを、表示装置900に出力することができる。これにより、治療時点の異なる治療前後の蛍光画像810、820(治療前蛍光画像と治療後蛍光画像と)を表示装置900に表示させることができるので、第1実施形態の治療支援装置100と同様に、IR700を用いた治療を行う際に、治療効果を容易に確認することができる。
 また、第2実施形態では、上記のように、検出部70は、2種類の蛍光薬剤(IR700およびICG)からそれぞれ発せられる2種類の蛍光Lx(Lx1およびLx2)を検出し、画像生成部222を、2種類の蛍光Lx(Lx1およびLx2)に基づいて、2種類の蛍光画像810および820を生成するように構成する。これにより、互いに性質の異なる2種類の蛍光薬剤(IR700およびICG)を用いることにより、治療前および治療後それぞれの、互いに異なる表示態様を有する2種類の蛍光画像810および820を、対比可能に表示装置900に表示させることができる。その結果、互いに異なる表示態様を有する2種類の蛍光画像810および820を組み合わせて観察することができるので、1種類の蛍光薬剤を用いる場合と比較して、蛍光薬剤を用いた治療を行う際に、治療効果をより容易に確認することができる。
 また、第2実施形態では、上記のように、光源部250を、被検体Pに投与された2種類の蛍光薬剤(IR700およびICG)をそれぞれ励起させるための2種類の励起光Ex(Ex1およびEx2)を照射するように構成する。これにより、光源部250から照射される2種類の励起光Ex(Ex1およびEx2)により、2種類の蛍光薬剤(IR700およびICG)を容易に励起させることができるので、被検体Pに投与された2種類の蛍光薬剤(IR700およびICG)から容易に2種類の蛍光Lx(Lx1およびLx2)を発生させることができる。
 なお、第2実施形態のその他の効果については、上記第1実施形態と同様である。
 [変形例]
 今回開示された実施形態は、全ての点で例示であり制限的なものではないと考えられるべきである。本発明の範囲は上記実施形態の説明ではなく請求の範囲によって示され、さらに請求の範囲と均等の意味および範囲内での全ての変更(変形例)が含まれる。
 たとえば、上記第1および第2実施形態では、治療支援システム1100(1200)を、治療前合成画像841と治療後合成画像842とを、術部Paの向き、位置および大きさを一致させた状態で重畳させるように構成させた例を示したが、本発明はこれに限られない。本発明では、治療支援装置システムを、治療前の画像と治療後の画像との間で、画像中における術部の向き、位置または大きさのいずれかを一致させるように構成してもよいし、それらを一致させるように構成しなくてもよい。
 また、上記第1および第2実施形態では、治療前蛍光画像811と治療後蛍光画像812とに映り込んだマーカ部材80に基づいて治療前蛍光画像811と治療後蛍光画像812との位置合せを行った例を示したが、本発明はこれに限られない。本発明では、治療前可視画像831と治療後可視画像832とに映り込んだマーカ部材80に基づいて、治療前蛍光画像811と治療後蛍光画像812との位置合せを行ってもよい。また、蛍光画像810に映り込んだマーカ部材80および可視画像830に映り込んだマーカ部材80との両方に基づいて、治療前蛍光画像811と治療後蛍光画像812との位置合せを行ってもよい。
 また、上記第1および第2実施形態では、治療支援システム1100(1200)を、治療前可視画像831および治療後可視画像832に映り込んだマーカ部材80の位置および大きさのずれに基づいて、治療前合成画像841(861)および治療後合成画像842(852、862)の画像中における術部Paの位置および大きさを略一致させるように構成させた例を示したが、本発明はこれに限られない。本発明では、治療支援システムを、治療前の撮像時と、治療後の撮像時とで、術部Paに対する撮像方向を略一致させることにより、治療前合成画像841(861)および治療後合成画像842(852、862)の画像中における術部Paの位置および大きさを一致させるように構成してもよい。
 また、治療支援システムを、マーカ部材80ではなく、可視画像830に映り込んだ被検体Pの特定の位置に基づいて、治療前合成画像841(861)に映り込んだ被検体Pの位置と、治療後合成画像842(852、862)に映り込んだ被検体Pの位置とを略一致させるように構成してもよい。たとえば、咽喉がんの場合、治療前合成画像841(861)と治療後合成画像842(852、862)とにそれぞれ映り込んだ被検体Pの鼻、耳、口などの位置の差に基づいて幾何補正係数を算出して、治療前合成画像841(861)または治療後合成画像842(852、862)のいずれかを、算出された幾何補正係数により幾何補正することにより、治療前合成画像841と治療後合成画像842(852、862)とのそれぞれに映り込んだ被検体Pの位置および大きさとを略一致させてもよい。
 また、上記第1および第2実施形態では、治療支援システム1100(1200)を、治療前合成画像841(861)および治療後合成画像842(852、862)の画像中における術部Paの位置および大きさを略一致させた状態で、治療前合成画像841(861)と治療後合成画像842(852、862)とを重畳させるように構成させた例を示したが、本発明はこれに限られない。本発明では、治療支援システムを、治療前合成画像841(861)と治療後合成画像842(852、862)とを重畳させる場合以外に、治療前合成画像841(861)および治療後合成画像842(852、862)の画像中における術部Paの位置および大きさを略一致させた状態にしもよい。たとえば、治療支援システムを、治療前合成画像841(861)および治療後合成画像842(852、862)の画像中における術部Paの位置および大きさを略一致させた状態で、治療前合成画像841(861)と治療後合成画像842(852、862)とを、それぞれ、複数ずつ並べて表示させるように構成してもよい。
 また、上記第1および第2実施形態では、操作部40を、記憶部23により記憶された蛍光画像810から、治療前蛍光画像811と治療後蛍光画像812とを選択する入力を受け付けるように構成させた例を示したが、本発明はこれに限られない。本発明では、操作部を、治療前蛍光画像と治療後蛍光画像とを選択する入力を受け付けないように構成してもよい。その場合、たとえば、記憶部23により記憶された蛍光画像のタイムスタンプに基づいて、治療前蛍光画像と治療後蛍光画像とを判別するように構成してもよい。また、治療の実施日時の入力を受け付けるようにしてもよい。
 また、上記第2実施形態では、画像出力部224を、治療前に生成された蛍光画像810と可視画像830とを重畳させて表示させるとともに、治療後に生成された蛍光画像820と可視画像830とを重畳させて表示する出力画像800を、表示装置900に出力するように構成させた例を示したが、本発明はこれに限られない。本発明では、可視画像に重畳させる蛍光画像を、治療前後で逆にしてもよい。すなわち、画像出力部224を、治療前に生成された蛍光画像820と可視画像830とを重畳させて表示させるとともに、治療後に生成された蛍光画像810と可視画像830とを重畳させて表示する出力画像800を、表示装置900に出力するように構成してもよい。
 また、上記第1および第2実施形態では、治療支援システム1100(1200)を、治療前合成画像841(861)と治療後合成画像842(852、862)とを重畳して表示するように構成させた例を示したが、本発明はこれに限られない。本発明では、治療支援システム1100(1200)を、治療前合成画像841(861)および治療後合成画像842(852、862)にそれぞれ映り込んだ術部Paの部分のみを重畳して表示するように構成させてもよい。
 また、上記第1および第2実施形態では、治療支援システム1100(1200)を、互いに撮像方向が異なる複数の治療前合成画像841(861)と、互いに撮像方向が異なる複数の治療後合成画像842(852、862)とを、表示装置900に並べて表示させた例を示したが、本発明はこれに限られない。本発明では、治療支援システム1100(1200)を、互いに撮像タイミングが異なる複数の治療前合成画像841と、互いに撮像タイミングが異なる複数の治療後合成画像842(852、862)とを、表示装置900に並べて表示させてもよい。この場合、たとえば、複数の治療前合成画像841(861)と、複数の治療後合成画像842(852、862)とを、それぞれ、時系列順に表示させてもよい。
 また、上記第1および第2実施形態では、治療支援システム1100(1200)を、治療前可視画像831に治療前蛍光画像811(821)を重畳させた画像と、治療後可視画像832に治療後蛍光画像812(822)を重畳させた画像とを、対比可能に表示するように構成させた例を示したが、本発明はこれに限られない。本発明では、治療支援システム1100(1200)を、治療後可視画像832に治療前蛍光画像811(821)を重畳させた画像と、治療後可視画像832に治療後蛍光画像812(822)を重畳させた画像とを、対比可能に表示するように構成してもよい。その場合、たとえば、治療後可視画像832は、現在(最新)の可視画像830としてもよい。言い換えると、画像出力部24(224)を、画像生成部22(222)により生成された可視画像830のうち、1つの可視画像830と治療前蛍光画像811(821)および治療後蛍光画像812(822)とを重畳させて、表示装置900に出力するように構成してもよい。
 また、上記第1実施形態では、光源部50において、励起光源51および可視光源53を、それぞれ、6つずつ略等間隔かつ環状に配置させた例を示したが、本発明はこれに限られない。本発明では、励起光源51および可視光源53を、光源部50において、それぞれ、非環状に配置してもよいし、非等間隔に配置してもよいし、幾つずつ設けてもよい。また、励起光源51および可視光源53の個数を互いに異ならせてもよい。また、上記第2実施形態で示した光源部250についても同様である。
 また、上記第1および第2実施形態では、治療支援装置100(200)を、被検体Pに投与された蛍光薬剤に確認光である励起光Ex(Ex1、Ex2)を照射するとともに、励起光Ex(Ex1、Ex2)により蛍光薬剤が励起されることにより発せられる蛍光Lx(Lx1、Lx2)を検出して画像化するように構成させた例を示したが、本発明はこれに限られない。本発明では、治療支援装置を、被検体Pに投与された蛍光薬剤に、治療支援装置以外の光源から照射された、がんを治療するための励起光Ex(治療光)を照射するとともに、治療光により蛍光薬剤が励起されることにより発せられる蛍光を検出して画像化するように構成してもよい。なお、「治療光」は、IR700を励起させるための励起光Ex1と略等しい波長帯域を有し、励起光Ex1と比較して照射強度が高い励起光Exである。
 また、上記第1および第2実施形態では、治療支援装置100(200)に、励起光Exを照射するための光源部50を設けた例を示したが、本発明はこれに限られない。本発明では、治療支援装置に、励起光Exを照射するための光源部50を設けなくてもよい。その場合、たとえば、治療支援装置の近傍に配置させた治療支援装置以外の光源により、被検体Pに投与された蛍光薬剤を励起させるための励起光Exを照射するように構成してもよい。
 また、上記第2実施形態では、蛍光Lx1および蛍光Lx2をそれぞれ検出するための蛍光検出部71および蛍光検出部72を設けた例を示したが、本発明はこれに限られない。本発明では、蛍光Lx1および蛍光Lx2をそれぞれ透過させるフィルタ部材により、蛍光Lx1および蛍光Lx2をそれぞれ検出するように構成してもよい。その場合、1つの蛍光検出部により、蛍光Lx1および蛍光Lx2を検出することができるとともに、蛍光Lx1と蛍光Lx2とを分離させるための部材が不要となるので、装置構成を簡素化できる。
 また、上記第1および第2実施形態では、治療支援システム1100(1200)を、表示装置900に、撮像部10(210)により撮像した画像を表示させた例を示したが、本発明はこれに限られない。本発明では、撮像部により撮像した画像を表示させる表示部を治療支援装置が備えるように構成してもよい。
 また、上記第1および第2実施形態では、表示装置900に、蛍光画像810および820と、可視画像830とを表示させた例を示したが、本発明はこれに限られない。本発明では、表示装置900に、蛍光画像のみを表示させてもよい。
 また、上記第2実施形態では、2つの蛍光薬剤のいずれもが、被検体Pのがん細胞Mから蛍光を発する例を示したが、本発明はこれに限られない。本発明では、蛍光薬剤毎に、異なる部位から蛍光を発するようにしてもよい。たとえば、1つの蛍光薬剤が、がん細胞から蛍光を発し、他の蛍光薬剤が、がん細胞の周囲から蛍光を発するようにしてもよい。
 また、上記第1および第2実施形態では、被検体の術部Paを、がん細胞Mとした例を示したが、本発明はこれに限られない。本発明は、蛍光薬剤を用いた治療を行う際に、治療効果を容易に確認することができる治療支援装置を、がん以外の治療用の治療支援装置に適用させてもよい。その場合、蛍光薬剤は、がん以外の他の対象を蛍光により可視化するために用いられる。
 また、上記第2実施形態では、IR700の蛍光Lx1とは異なる波長帯域の蛍光Lx2を発する物質を含む薬剤として、ICGを用いた例を示したが、本発明はこれに限られない。本発明では、IR700の蛍光Lx1とは異なる波長帯域の蛍光Lx2を発する物質を含む薬剤として、ICG以外の蛍光薬剤を用いてもよい。
 また、上記第1および第2実施形態では、励起光Ex(Ex1)を吸収することにより蛍光Lx(Lx1)を発する物質と、がん細胞Mに選択的に結合する抗体とを結合させた薬剤として、IR700を用いた例を示したが、本発明はこれに限られない。本発明では、励起光Exを吸収することにより蛍光Lxを発する物質と、がん細胞Mに選択的に結合する抗体とを結合させた薬剤として、IR700以外の蛍光薬剤を用いてもよい。
 また、上記第1および第2実施形態では、それぞれ、1つの蛍光薬剤および2つの蛍光薬剤を用いた例を示したが、本発明はこれに限られない。本発明では、3つ以上の蛍光薬剤を用いてもよい。
 また、上記第1および第2実施形態では、近赤外光(非可視光)の波長帯域にピークを有する蛍光Lx1および蛍光Lx2を発する蛍光薬剤を用いた例を示したが、本発明はこれに限られない。本発明では、励起光を照射されることにより蛍光を発する薬剤であれば、たとえば、可視光や紫外光の波長帯域にピークを有する蛍光を発する蛍光薬剤を用いてもよい。
 また、上記第1および第2実施形態では、治療支援システム1100(1200)を、画像同士を並べて表示する、または、画像同士を重畳して表示することにより、画像同士を対比可能に表示させた例を示したが、本発明はこれに限られない。本発明では、治療支援システム1100(1200)を、他の表示方法で、画像同士を対比可能に表示させてもよい。たとえば、画像同士を所定の時間で切り換えて表示させてもよい。
 また、上記第1および第2実施形態では、治療支援システム1100(1200)を、1台の表示装置900に、出力画像800を表示させるように構成させた例を示したが、本発明はこれに限られない。本発明では、複数の表示装置に表示させるように構成してもよい。
 22、222 画像生成部(蛍光画像生成部、可視画像生成部)
 24、224 画像出力部
 25 抽出部
 26 位置合せ部
 71、72 蛍光検出部
 73 可視光検出部
 80(81、82) マーカ部材(特徴点)
 100、200 治療支援装置
 810、820 蛍光画像
 811、821 治療前蛍光画像(第一の蛍光画像)
 812 治療後蛍光画像(第二の蛍光画像)
 830 可視画像
 831 治療前可視画像(第一の可視画像)
 832 治療後可視画像(第二の可視画像)
 900 表示装置(表示部)
 1100、1200 治療支援システム
 Ex(Ex1、Ex2) 励起光
 Lx(Lx1、Lx2) 蛍光
 M がん細胞
 P 被検体
 Vis 可視光

Claims (10)

  1.  治療時の被検体内の治療対象部位における画像を撮像し、治療支援を行う治療支援装置であって、
     前記治療対象部位に集積された蛍光薬剤から発せられる蛍光を検出する蛍光検出部と、
     前記蛍光検出部により出力された信号に基づいて蛍光画像を生成する蛍光画像生成部と、
     前記蛍光画像生成部により生成された前記蛍光画像のうち、少なくとも、治療時点の異なる第一の蛍光画像と第二の蛍光画像を、表示部に出力する画像出力部と、を備える、治療支援装置。
  2.  前記蛍光画像内の特徴点を少なくとも1点以上抽出する抽出部と、
     前記抽出部によって抽出された前記特徴点の位置情報に基づいて、前記第一の蛍光画像と前記第二の蛍光画像との位置合せを行う位置合せ部と、
    をさらに備え、
     前記画像出力部は、前記位置合せ部によって位置合せされた、前記第一の蛍光画像と前記第二の蛍光画像とを、前記表示部に出力するように構成されている、請求項1に記載の治療支援装置。
  3.  前記画像出力部は、前記第一の蛍光画像と前記第二の蛍光画像とを、対比可能に表示する出力画像、または、重畳して表示する出力画像を、前記表示部に出力するように構成されている、請求項1または2に記載の治療支援装置。
  4.  前記画像出力部は、前記第一の蛍光画像および前記第二の蛍光画像に写り込んだ前記蛍光領域のうち、共通して前記蛍光が映り込んだ領域と、一方にのみ前記蛍光が映り込んだ領域とで異なる色に着色して、前記表示部に出力するように構成されている、請求項1~3に記載の治療支援装置。
  5.  可視光を検出する可視光検出部と、
     前記可視光検出部により出力された信号に基づいて、可視画像を生成する可視画像生成部と、
     前記可視画像内の特徴点を少なくとも1点以上抽出する抽出部と、
     前記抽出部によって抽出された前記可視画像内の前記特徴点の位置情報に基づいて、前記第一の蛍光画像と前記第二の蛍光画像との位置合せを行う位置合せ部と、
    をさらに備え、
     前記画像出力部は、前記位置合せ部によって位置合せされた、前記第一の蛍光画像と前記第二の蛍光画像とを、前記表示部に出力するように構成されている、請求項1に記載の治療支援装置。
  6.  前記画像出力部は、前記第一の蛍光画像および前記第二の蛍光画像とともに、前記可視画像生成部により生成された少なくとも1以上の前記可視画像を、前記表示部に出力するように構成されている、請求項5に記載の治療支援装置。
  7.  前記画像出力部は、前記可視画像生成部により生成された前記可視画像のうち、1の可視画像と前記第一の蛍光画像および前記第二の蛍光画像とを重畳させて、前記表示部に出力するように構成されている、請求項5または6に記載の治療支援装置。
  8.  前記画像出力部は、前記可視画像生成部により生成された前記可視画像のうち、第一の可視画像を前記第一の蛍光画像に重畳させ、第二の可視画像を前記第二の蛍光画像に重畳させて、前記表示部に出力するように構成されている、請求項5または6に記載の治療支援装置。
  9.  前記位置合せ部は、前記抽出部によって抽出された前記可視画像内の前記特徴点の位置情報に基づいて、前記第一の可視画像と前記第二の可視画像との位置合せを行い、
     前記画像出力部は、前記位置合せ部によって位置合せされた前記第一の可視画像を前記第一の蛍光画像に重畳させ、前記位置合せ部によって位置合せされた前記第二の可視画像を前記第二の蛍光画像に重畳させて、前記表示部に出力するように構成されている、請求項8に記載の治療支援装置。
  10.  治療時の被検体内の治療対象部位における画像を撮像し、治療支援を行う治療支援システムであって、
     前記治療対象部位に集積された蛍光薬剤から発せられる蛍光を検出する蛍光検出部と、
     前記蛍光検出部により出力された信号に基づいて蛍光画像を生成する蛍光画像生成部と、
     前記蛍光画像生成部により生成された前記蛍光画像のうち、少なくとも、治療時点の異なる第一の蛍光画像と第二の蛍光画像とを、表示する表示装置と、を備える、治療支援システム。
PCT/JP2018/018285 2018-05-11 2018-05-11 治療支援装置および治療支援システム WO2019215905A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/JP2018/018285 WO2019215905A1 (ja) 2018-05-11 2018-05-11 治療支援装置および治療支援システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2018/018285 WO2019215905A1 (ja) 2018-05-11 2018-05-11 治療支援装置および治療支援システム

Publications (1)

Publication Number Publication Date
WO2019215905A1 true WO2019215905A1 (ja) 2019-11-14

Family

ID=68466747

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/018285 WO2019215905A1 (ja) 2018-05-11 2018-05-11 治療支援装置および治療支援システム

Country Status (1)

Country Link
WO (1) WO2019215905A1 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021038913A1 (ja) 2019-08-27 2021-03-04 株式会社島津製作所 治療支援装置および画像生成方法
DE102020117579A1 (de) 2020-07-03 2022-01-05 Hoya Corporation Endoskopisches Beleuchtungssystem für ein Fluoreszenzmittel
WO2022219783A1 (ja) * 2021-04-15 2022-10-20 オリンパス株式会社 光治療装置、光治療方法および光治療プログラム
US11931008B2 (en) 2020-06-03 2024-03-19 Shimadzu Corporation Treatment support device and method of setting region of interest
JP7472988B2 (ja) 2020-08-19 2024-04-23 株式会社島津製作所 治療支援システムおよび治療支援装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011509768A (ja) * 2008-01-25 2011-03-31 ノバダック テクノロジーズ インコーポレイテッド 心筋組織におけるブラッシュを評価する方法
US20140073885A1 (en) * 2002-03-12 2014-03-13 Beth Israel Deaconess Medical Center Multi-channel medical imaging system
JP2015066129A (ja) * 2013-09-27 2015-04-13 富士フイルム株式会社 蛍光観察装置、内視鏡システム及びプロセッサ装置並びに作動方法
US20150182106A1 (en) * 2013-12-31 2015-07-02 Timothy King Switching Between White Light Imaging And Excitation Light Imaging Leaving Last Video Frame Displayed
JP2016214507A (ja) * 2015-05-19 2016-12-22 株式会社島津製作所 イメージング装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140073885A1 (en) * 2002-03-12 2014-03-13 Beth Israel Deaconess Medical Center Multi-channel medical imaging system
JP2011509768A (ja) * 2008-01-25 2011-03-31 ノバダック テクノロジーズ インコーポレイテッド 心筋組織におけるブラッシュを評価する方法
JP2015066129A (ja) * 2013-09-27 2015-04-13 富士フイルム株式会社 蛍光観察装置、内視鏡システム及びプロセッサ装置並びに作動方法
US20150182106A1 (en) * 2013-12-31 2015-07-02 Timothy King Switching Between White Light Imaging And Excitation Light Imaging Leaving Last Video Frame Displayed
JP2016214507A (ja) * 2015-05-19 2016-12-22 株式会社島津製作所 イメージング装置

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021038913A1 (ja) 2019-08-27 2021-03-04 株式会社島津製作所 治療支援装置および画像生成方法
US11931008B2 (en) 2020-06-03 2024-03-19 Shimadzu Corporation Treatment support device and method of setting region of interest
DE102020117579A1 (de) 2020-07-03 2022-01-05 Hoya Corporation Endoskopisches Beleuchtungssystem für ein Fluoreszenzmittel
JP7472988B2 (ja) 2020-08-19 2024-04-23 株式会社島津製作所 治療支援システムおよび治療支援装置
WO2022219783A1 (ja) * 2021-04-15 2022-10-20 オリンパス株式会社 光治療装置、光治療方法および光治療プログラム
JP7430845B2 (ja) 2021-04-15 2024-02-13 オリンパス株式会社 光治療装置、光治療方法および光治療プログラム

Similar Documents

Publication Publication Date Title
WO2019215905A1 (ja) 治療支援装置および治療支援システム
US20220201274A1 (en) Goggle imaging systems and methods
JP6586211B2 (ja) プロジェクションマッピング装置
JP6319448B2 (ja) イメージング装置
EP2136697B1 (en) Medical device including scanned beam unit for imaging and therapy
US10517483B2 (en) System for detecting fluorescence and projecting a representative image
US9211058B2 (en) Method and system for fluorescent imaging with background surgical image composed of selective illumination spectra
WO2016174911A1 (ja) 光線力学診断装置及び光線力学診断方法
JP4190917B2 (ja) 内視鏡装置
US11717375B2 (en) Methods and systems for alternate image display
CN110478625A (zh) 基于高光谱和荧光成像引导的光动力精准治疗***
US10413619B2 (en) Imaging device
US11273002B2 (en) Display system
US20180360299A1 (en) Imaging apparatus, imaging method, and medical observation equipment
WO2017043539A1 (ja) 画像処理システム、画像処理装置、投影装置、及び投影方法
WO2019215800A1 (ja) 治療支援装置および治療支援システム
JP7435272B2 (ja) 治療支援装置および治療支援装置の作動方法
WO2019215796A1 (ja) 治療支援装置
KR101021989B1 (ko) 임상실험용 소동물의 이미지 취득장치
JP7160093B2 (ja) 医用画像撮像装置
JP2022106152A (ja) 治療支援システム、治療支援装置、表示用画像作成方法およびレーザ出力方法
US8433117B2 (en) Computer controlled system for laser energy delivery to the retina
WO2016039001A1 (ja) イメージング装置
JP2005049282A (ja) 蛍光観察装置及びレーザ光照射装置
WO2021038729A1 (ja) 治療支援装置および治療支援方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18918134

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18918134

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP