JP6556076B2

JP6556076B2 - Endoscopic image signal processing apparatus and method, and program

Info

Publication number: JP6556076B2
Application number: JP2016046847A
Authority: JP
Inventors: 久保　雅裕; 雅裕久保
Original assignee: Fujifilm Corp
Current assignee: Fujifilm Corp
Priority date: 2016-03-10
Filing date: 2016-03-10
Publication date: 2019-08-07
Anticipated expiration: 2036-03-10
Also published as: JP2017158840A

Description

本発明は、内視鏡画像の色情報を数値によって定量化する内視鏡画像信号処理装置および方法並びにプログラムに関するものである。 The present invention relates to an endoscope image signal processing apparatus, method, and program for quantifying color information of an endoscope image by numerical values.

医療分野においては、光源装置、内視鏡、およびプロセッサ装置を備えた内視鏡システムを用いた診断が広く行われるようになってきた。特に、カラー内視鏡システムの性能向上により、撮像された内視鏡画像の色を観察することによって、消化器の粘膜などの病状を診断することが行われている。 In the medical field, diagnosis using an endoscope system including a light source device, an endoscope, and a processor device has been widely performed. In particular, by improving the performance of a color endoscope system, diagnosing a medical condition such as a digestive mucous membrane by observing the color of a captured endoscopic image.

たとえば胃の粘膜が胃がんの原因と考えられているピロリ菌に感染している場合、胃の粘膜上に斑状に赤い炎症部分が現れることが知られている。したがって、このような炎症部分の色を内視鏡画像を用いて観察することにより、ピロリ菌の感染の有無を確認することが行われている。 For example, when the gastric mucosa is infected with Helicobacter pylori, which is considered to be the cause of gastric cancer, it is known that a red inflammation portion appears in a patchy manner on the gastric mucosa. Therefore, the presence or absence of H. pylori infection is confirmed by observing the color of such an inflamed part using an endoscopic image.

ここで、たとえば胃の粘膜を撮像した内視鏡画像には赤色部分が多く含まれ、正常な粘膜組織と病変部などとの境界部分の色の変化は連続的であるため、病変部と正常な粘膜組織との色の違いを判別することが難しい場合がある。また、色の違いの評価は主観的なものであるため、観察者の経験などによって評価にばらつきが生じ、客観的な診断が難しいという問題がある。 Here, for example, an endoscopic image obtained by imaging the mucous membrane of the stomach contains many red parts, and the color change at the boundary between the normal mucosal tissue and the lesioned part is continuous. It may be difficult to distinguish a color difference from a different mucosal tissue. Further, since the evaluation of the color difference is subjective, there is a problem that the evaluation varies depending on the experience of the observer, and it is difficult to make an objective diagnosis.

そこで、内視鏡画像に基づいて、客観的な評価値などを算出し、その評価値を観察者に提供する方法が種々提案されている。 Therefore, various methods for calculating objective evaluation values and the like based on the endoscopic image and providing the evaluation values to the observer have been proposed.

たとえば、特許文献１においては、内視鏡画像を構成する各画素の色相値および彩度値を算出し、その色相値および彩度値に基づいて、病変部の重症度を算出して観察者に提供する方法が提案されている。 For example, in Patent Document 1, the hue value and the saturation value of each pixel constituting the endoscopic image are calculated, and the severity of the lesion is calculated based on the hue value and the saturation value to observe the observer. Proposed methods are proposed.

また、特許文献２においては、内視鏡画像の色調の違いを客観的に表す数値としてＩＨｂ（Index of Hemoglobin）を算出し、観察者に提供する方法が提案されている。 Patent Document 2 proposes a method of calculating IHb (Index of Hemoglobin) as a numerical value that objectively represents a difference in color tone of an endoscopic image and providing it to an observer.

また、特許文献３においては、内視鏡画像の色信号に基づいて特徴量を算出し、その特徴量を観察者に提供する方法が提案されている。 Patent Document 3 proposes a method of calculating a feature amount based on a color signal of an endoscopic image and providing the feature amount to an observer.

特開２０１４−２１３０９４号公報JP 2014-213094 A 特開２００４−１８８０２６号公報JP 2004-188026 A 特開２００７−２３６９５７号公報JP 2007-236957 A

しかしながら、たとえば同時式撮像素子を備えた内視鏡システムにおいて内視鏡画像を生成する際には、撮像素子から出力されたＲＡＷ信号に対してデモザイク処理が施される。このデモザイク処理が施される際には、複数の素子から出力されたＲＡＷ信号を用いた補間処理が行われるため、色の情報としては、撮像素子が受光した色の情報とは異なるものとなってしまう。すなわち、上述した補間処理を用いて生成された内視鏡画像の色情報は、撮像対象の色情報を正確に表したものではなくなってしまう。 However, for example, when an endoscopic image is generated in an endoscope system including a simultaneous image sensor, demosaic processing is performed on the RAW signal output from the image sensor. When the demosaic process is performed, an interpolation process using RAW signals output from a plurality of elements is performed, so that the color information is different from the color information received by the image sensor. End up. In other words, the color information of the endoscopic image generated using the above-described interpolation process does not accurately represent the color information of the imaging target.

特許文献１〜特許文献３においては、デモザイク処理を用いて生成された内視鏡画像に基づいて数値情報を得る方法しか提案されていない。 In Patent Documents 1 to 3, only a method for obtaining numerical information based on an endoscopic image generated using demosaic processing has been proposed.

本発明は、上記の問題に鑑み、撮像対象の色情報をより正確に表した数値情報を取得することができる内視鏡画像信号処理装置および方法並びにプログラムを提供することを目的とする。 In view of the above problems, an object of the present invention is to provide an endoscopic image signal processing apparatus, method, and program capable of acquiring numerical information that more accurately represents color information of an imaging target.

本発明の第１の内視鏡画像信号処理装置は、内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得するＲＡＷ信号取得部と、ＲＡＷ信号を直接用いて、撮像対象の色情報を数値化した色数値情報を算出する色数値情報算出部とを備える。 A first endoscope image signal processing apparatus according to the present invention obtains a RAW signal output from a simultaneous imaging device having a color filter by imaging an imaging target using an endoscope. And a color value information calculation unit that calculates color value information obtained by digitizing the color information of the imaging target using the RAW signal directly.

また、上記本発明の第１の内視鏡画像信号処理装置においては、ＲＡＷ信号に対してデモザイク処理を施してＲＧＢ−ＲＡＷ信号を生成するデモザイク処理部と、ＲＧＢ−ＲＡＷ信号に基づいて、表示用の内視鏡画像を生成する内視鏡画像生成部とを備えることができ、デモザイク処理部は、表示用の内視鏡画像を生成する場合には、同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行うデモザイク処理を行い、色数値情報を算出する場合には、ＲＡＷ信号を直接用いたデモザイク処理を行うことができる。 In the first endoscopic image signal processing device of the present invention, a demosaic processing unit that performs demosaic processing on a RAW signal to generate an RGB-RAW signal, and a display based on the RGB-RAW signal An endoscopic image generating unit that generates an endoscopic image for use, and the demosaic processing unit, when generating an endoscopic image for display, includes a plurality of simultaneous imaging elements When performing demosaic processing that performs interpolation processing using the RAW signal output from the element and calculating color numerical value information, it is possible to perform demosaic processing that directly uses the RAW signal.

また、上記本発明の第１の内視鏡画像信号処理装置においては、ＲＧＢ−ＲＡＷ信号に対して色補正処理を施す色補正処理部を備えることができ、色補正処理部は、表示用の内視鏡画像を生成する場合と色数値情報を算出する場合とで異なるパラメータを用いて色補正処理を施すことができる。 The first endoscopic image signal processing apparatus of the present invention may further include a color correction processing unit that performs color correction processing on the RGB-RAW signal. The color correction processing unit is for display. Color correction processing can be performed using different parameters when generating an endoscopic image and when calculating color numerical value information.

また、上記本発明の第１の内視鏡画像信号処理装置においては、ＲＡＷ信号に対してデモザイク処理を施してＲＧＢ−ＲＡＷ信号を生成するデモザイク処理部と、ＲＧＢ−ＲＡＷ信号に基づいて、撮像対象の色情報以外の画像情報を数値化した画像数値情報を算出する画像数値情報算出部とを備えることができ、デモザイク処理部は、画像数値情報を算出する場合には、同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行うデモザイク処理を行い、色数値情報を算出する場合には、ＲＡＷ信号を直接用いたデモザイク処理を行うことができる。 In the first endoscopic image signal processing device of the present invention, a demosaic processing unit that generates a RGB-RAW signal by performing demosaic processing on the RAW signal, and imaging based on the RGB-RAW signal. An image numerical information calculation unit that calculates image numerical information obtained by digitizing image information other than the target color information, and the demosaic processing unit includes a simultaneous image sensor when calculating the image numerical information. When performing demosaic processing that performs interpolation processing using RAW signals output from a plurality of constituent elements and calculating color numerical value information, it is possible to perform demosaic processing that directly uses RAW signals.

また、上記本発明の第１の内視鏡画像信号処理装置においては、ＲＧＢ−ＲＡＷ信号に対して色補正処理を施す色補正処理部を備えることができ、色補正処理部は、画像数値情報を算出する場合と色数値情報を算出する場合とで異なるパラメータを用いて色補正処理を施すことができる。 The first endoscopic image signal processing apparatus of the present invention may further include a color correction processing unit that performs color correction processing on the RGB-RAW signal. The color correction processing unit includes image numerical information. The color correction process can be performed using different parameters for calculating the color numerical value information and the color numerical value information.

また、上記本発明の第１の内視鏡画像信号処理装置において、画像数値情報算出部は、鮮鋭度の情報およびノイズの情報の少なくとも１つを画像数値情報として算出することができる。 In the first endoscopic image signal processing device of the present invention, the image numerical information calculation unit can calculate at least one of sharpness information and noise information as image numerical information.

また、上記本発明の第１の内視鏡画像信号処理装置においては、同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行うデモザイク処理をして第１のＲＧＢ−ＲＡＷ信号を生成し、かつＲＡＷ信号を直接用いたデモザイク処理をして第２のＲＧＢ−ＲＡＷ信号を生成するデモザイク処理部と、第１のＲＧＢ−ＲＡＷ信号に基づいて、表示用の内視鏡画像を生成する内視鏡画像生成部と、表示用の内視鏡画像を表示部に表示させる表示制御部と、表示部に表示された内視鏡画像上における関心領域を特定する関心領域特定部とを備えることができ、色数値情報算出部は、内視鏡画像上において特定された関心領域内のＲＡＷ信号または第２のＲＧＢ−ＲＡＷ信号を用いて色数値情報を算出することができる。 In the first endoscopic image signal processing device of the present invention, the first demosaicing process is performed to perform the interpolation process using the RAW signals output from the plurality of elements constituting the simultaneous imaging element. A demosaic processing unit that generates an RGB-RAW signal and performs a demosaic process using the RAW signal directly to generate a second RGB-RAW signal, and an internal display unit based on the first RGB-RAW signal An endoscopic image generation unit that generates an endoscopic image, a display control unit that displays an endoscopic image for display on the display unit, and an interest that specifies a region of interest on the endoscopic image displayed on the display unit A color numerical value information calculating unit that calculates color numerical value information using a RAW signal or a second RGB-RAW signal within the region of interest specified on the endoscopic image. Can do.

また、上記本発明の第１の内視鏡画像信号処理装置においては、第１のＲＧＢ−ＲＡＷ信号と関心領域内の第２のＲＧＢ−ＲＡＷ信号に対して色補正処理を施す色補正処理部を備えることができ、色補正処理部は、第１のＲＧＢ−ＲＡＷ信号と関心領域内の第２のＲＧＢ−ＲＡＷ信号に対してそれぞれ異なるパラメータを用いて色補正処理を施すことができる。 In the first endoscopic image signal processing device of the present invention, a color correction processing unit that performs color correction processing on the first RGB-RAW signal and the second RGB-RAW signal in the region of interest. The color correction processing unit can apply color correction processing to the first RGB-RAW signal and the second RGB-RAW signal in the region of interest using different parameters.

また、上記本発明の第１の内視鏡画像信号処理装置においては、デモザイク処理の施されたＲＡＷ信号と、デモザイク処理前のＲＡＷ信号とを記憶する記憶部を備えることができる。 The first endoscopic image signal processing apparatus of the present invention may further include a storage unit that stores the demosaic-processed RAW signal and the demosaic-processed RAW signal.

また、上記本発明の第１の内視鏡画像信号処理装置においては、ＲＡＷ信号に対してシェーディング補正を施すシェーディング補正部を備えることができる。 Further, the first endoscopic image signal processing device of the present invention may include a shading correction unit that performs shading correction on the RAW signal.

また、上記本発明の第１の内視鏡画像信号処理装置において、色数値情報算出部は、撮像対象の色相および彩度の少なくとも１つを色数値情報として算出することができる。 In the first endoscopic image signal processing device of the present invention, the color numerical value information calculation unit can calculate at least one of hue and saturation of the imaging target as color numerical information.

また、上記本発明の第１の内視鏡画像信号処理装置においては、同時式撮像素子として、ＲＧＢのカラーフィルタを備えたものを用いることができる。 In the first endoscopic image signal processing apparatus of the present invention, a simultaneous image pickup device including an RGB color filter can be used.

本発明の第２の内視鏡画像信号処理装置は、内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得するＲＡＷ信号取得部と、ＲＡＷ信号を直接用いて、撮像対象の色相および彩度の少なくとも１つを色数値情報として算出する色数値情報算出部と、ＲＡＷ信号に対してデモザイク処理を施してＲＧＢ−ＲＡＷ信号を生成するデモザイク処理部とを備え、デモザイク処理部が、表示用の内視鏡画像を生成する場合には、同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行うデモザイク処理を行い、色数値情報を算出する場合には、ＲＡＷ信号を直接用いたデモザイク処理を行い、色数値情報算出部が、ＲＡＷ信号を直接用いたデモザイク処理後のＲＧＢ−ＲＡＷ信号を用いて色数値情報を算出する。 The second endoscopic image signal processing device of the present invention acquires a RAW signal output from a simultaneous imaging device having a color filter by imaging an imaging target using an endoscope. And a color value information calculation unit for calculating at least one of hue and saturation of an imaging target as color value information by directly using the RAW signal, and generating an RGB-RAW signal by performing demosaic processing on the RAW signal When the demosaic processing unit generates an endoscopic image for display, the demosaic processing unit performs an interpolation process using RAW signals output from a plurality of elements constituting the simultaneous imaging device. When performing demosaic processing and calculating color numerical information, the demosaic processing using the RAW signal directly is performed, and the color numerical information calculation unit uses the demosaic directly using the RAW signal. It calculates color numerical information using the RGB-RAW signal after sense.

本発明の第３の内視鏡画像信号処理装置は、内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得するＲＡＷ信号取得部と、ＲＡＷ信号を直接用いて、撮像対象の色相および彩度の少なくとも１つを色数値情報として算出する色数値情報算出部と、ＲＧＢ−ＲＡＷ信号に基づいて、撮像対象の画像の鮮鋭度の情報およびノイズの情報の少なくとも１つを画像数値情報として算出する画像数値情報算出部と、ＲＡＷ信号に対してデモザイク処理を施してＲＧＢ−ＲＡＷ信号を生成するデモザイク処理部とを備え、デモザイク処理部が、画像数値情報を算出する場合には、同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行うデモザイク処理を行い、色数値情報を算出する場合には、ＲＡＷ信号を直接用いたデモザイク処理を行い、色数値情報算出部が、ＲＡＷ信号を直接用いたデモザイク処理後のＲＧＢ−ＲＡＷ信号を用いて色数値情報を算出し、画像数値情報算出部が、補間処理を行うデモザイク処理後のＲＧＢ−ＲＡＷ信号を用いて画像数値情報を算出する。 The third endoscopic image signal processing device of the present invention obtains a RAW signal output from a simultaneous imaging device having a color filter by imaging an imaging target using an endoscope. A color numerical value information calculation unit that calculates at least one of hue and saturation of the imaging target as color numerical value information directly using the RAW signal, and the sharpness of the image of the imaging target based on the RGB-RAW signal An image numerical information calculation unit that calculates at least one of information and noise information as image numerical information, and a demosaic processing unit that performs demosaic processing on the RAW signal to generate an RGB-RAW signal, and a demosaic processing unit However, when calculating numerical image information, a demosaic process that performs interpolation processing using RAW signals output from a plurality of elements constituting the simultaneous imaging element is used. When the color numerical value information is calculated, the demosaic process using the RAW signal directly is performed, and the color numerical information calculation unit uses the RGB-RAW signal after the demosaic process directly using the RAW signal. The information is calculated, and the image numerical information calculation unit calculates the image numerical information using the RGB-RAW signal after the demosaic process for performing the interpolation process.

本発明の第４の内視鏡画像信号処理装置は、内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得するＲＡＷ信号取得部と、ＲＡＷ信号を直接用いて、撮像対象の色相および彩度の少なくとも１つを色数値情報として算出する色数値情報算出部と、同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行うデモザイク処理をして第１のＲＧＢ−ＲＡＷ信号を生成し、かつＲＡＷ信号を直接用いたデモザイク処理をして第２のＲＧＢ−ＲＡＷ信号を生成するデモザイク処理部と、第１のＲＧＢ−ＲＡＷに基づいて、表示用の内視鏡画像を生成する内視鏡画像生成部と、表示用の内視鏡画像を表示部に表示させる表示制御部と、表示部に表示された内視鏡画像上における関心領域を特定する関心領域特定部とを備え、色数値情報算出部が、内視鏡画像上において特定された関心領域内のＲＡＷ信号または第２のＲＧＢ−ＲＡＷ信号を用いて色数値情報を算出する。 A fourth endoscopic image signal processing device according to the present invention is a RAW signal acquisition unit that acquires a RAW signal output from a simultaneous imaging device having a color filter by imaging an imaging target using an endoscope. A color numerical value information calculation unit that calculates at least one of hue and saturation of an imaging target as color numerical value information directly using the RAW signal, and a RAW signal output from a plurality of elements constituting the simultaneous imaging element A demosaic processing unit that generates a first RGB-RAW signal by performing a demosaic process that performs an interpolation process using the, and a demosaic process that directly uses the RAW signal to generate a second RGB-RAW signal; Based on the first RGB-RAW, an endoscope image generation unit that generates an endoscope image for display, a display control unit that displays the endoscope image for display on the display unit, and a display on the display unit The A region-of-interest specifying unit that specifies a region of interest on the endoscopic image, and the color value information calculating unit includes a RAW signal or a second RGB-RAW signal in the region of interest specified on the endoscopic image. Is used to calculate color numerical information.

本発明の内視鏡画像信号処理装置の作動方法は、内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得し、その取得したＲＡＷ信号を直接用いて、撮像対象の色情報を数値化した色数値情報を算出する。 According to the operation method of the endoscope image signal processing apparatus of the present invention, the RAW signal output from the simultaneous image pickup device having the color filter is acquired by imaging the imaging target using the endoscope, and the acquisition is performed. By directly using the RAW signal, color numerical value information obtained by digitizing the color information of the imaging target is calculated.

本発明の内視鏡画像信号処理プログラムは、コンピュータを、内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得するＲＡＷ信号取得部と、ＲＡＷ信号を直接用いて、撮像対象の色情報を数値化した色数値情報を算出する色数値情報算出部として機能させる。 An endoscope image signal processing program of the present invention is a RAW signal acquisition unit that acquires a RAW signal output from a simultaneous image pickup device having a color filter by imaging a subject to be imaged using a computer. Then, the RAW signal is directly used to function as a color value information calculation unit that calculates color value information obtained by digitizing the color information of the imaging target.

本発明の内視鏡画像信号処理装置および方法並びにプログラムによれば、同時式撮像素子から出力されたＲＡＷ信号を取得し、同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行うことなく、各素子から出力されたＲＡＷ信号を直接用いて、撮像対象の色情報を数値化した色数値情報を算出する。したがって、上述した補間処理による混色を無くすことができ、撮像対象の色情報をより正確に表した色数値情報を取得することができる。 According to the endoscope image signal processing apparatus, method, and program of the present invention, a RAW signal output from a simultaneous image sensor is acquired, and RAW signals output from a plurality of elements constituting the simultaneous image sensor are used. Without using the interpolation processing, the RAW signal output from each element is directly used to calculate the color value information obtained by digitizing the color information of the imaging target. Therefore, it is possible to eliminate color mixing due to the above-described interpolation processing, and it is possible to acquire color numerical information that more accurately represents color information of an imaging target.

本発明の内視鏡画像信号処理装置の一実施形態を用いた内視鏡システムの概略構成を示す図The figure which shows schematic structure of the endoscope system using one Embodiment of the endoscope image signal processing apparatus of this invention. 第１の実施形態の内視鏡システムの内部構成を示すブロック図The block diagram which shows the internal structure of the endoscope system of 1st Embodiment. 白色光の分光スペクトルを示す図Figure showing the spectrum of white light 特殊光の分光スペクトルを示す図Diagram showing the spectrum of special light デモザイク処理を説明するための図Diagram for explaining demosaic processing 第１の実施形態の内視鏡システムの作用を説明するためのフローチャートThe flowchart for demonstrating the effect | action of the endoscope system of 1st Embodiment. 第２の実施形態の内視鏡システムの内部構成を示すブロック図The block diagram which shows the internal structure of the endoscope system of 2nd Embodiment. 第２の実施形態の内視鏡システムの作用を説明するためのフローチャートThe flowchart for demonstrating the effect | action of the endoscope system of 2nd Embodiment. 第３の実施形態の内視鏡システムの内部構成を示すブロック図The block diagram which shows the internal structure of the endoscope system of 3rd Embodiment. 第３の実施形態の内視鏡システムの作用を説明するためのフローチャートThe flowchart for demonstrating the effect | action of the endoscope system of 3rd Embodiment. 紫色光Ｖ、青色光Ｂ、緑色光Ｇ、および赤色光Ｒの発光スペクトルを示す図The figure which shows the emission spectrum of purple light V, blue light B, green light G, and red light R 従来のＲＧＢの階調テーブルを用いた階調処理を説明するための図The figure for demonstrating the gradation process using the conventional RGB gradation table

以下、本発明の内視鏡画像信号処理装置および方法並びにプログラムの第１の実施形態を用いた内視鏡システムについて、図面を参照しながら詳細に説明する。図１は、本実施形態の内視鏡システム１０の概略構成を示す図である。 Hereinafter, an endoscope system using a first embodiment of an endoscope image signal processing apparatus and method and a program according to the present invention will be described in detail with reference to the drawings. FIG. 1 is a diagram illustrating a schematic configuration of an endoscope system 10 according to the present embodiment.

本実施形態の内視鏡システム１０は、内視鏡１２と、光源装置１４と、プロセッサ装置１６と、モニタ１８と、入力装置２０とを有する。内視鏡１２は、光源装置１４に光学的に接続され、プロセッサ装置１６に電気的に接続される。 The endoscope system 10 according to the present embodiment includes an endoscope 12, a light source device 14, a processor device 16, a monitor 18, and an input device 20. The endoscope 12 is optically connected to the light source device 14 and electrically connected to the processor device 16.

内視鏡１２は、被検体内に挿入される挿入部２１と、挿入部の基端部分に設けられた操作部２２と、挿入部２１の先端側に設けられる湾曲部２３および先端部２４を有している。操作部２２には、アングルノブ２２ａが設けられており、このアングルノブ２２ａを回転操作することによって、湾曲部２３が湾曲動作する。この湾曲動作に伴って、先端部２４が所望の方向に向けられる。 The endoscope 12 includes an insertion portion 21 to be inserted into a subject, an operation portion 22 provided at a proximal end portion of the insertion portion, a bending portion 23 and a distal end portion 24 provided on the distal end side of the insertion portion 21. Have. The operation section 22 is provided with an angle knob 22a, and the bending section 23 is bent by rotating the angle knob 22a. With this bending operation, the tip 24 is directed in a desired direction.

また、操作部２２には、モード切替スイッチ２２ｂと、ズーム操作部２２ｃとが設けられている。モード切替スイッチ２２ｂは、通常観察モードと特殊観察モードの切り替え操作に用いられる。通常観察モードは、被検体内の撮像対象の照明に白色光を用いるモードである。特殊観察モードは、被検体内の撮像対象の照明に青味を帯びた特殊光を用いるモードであり、炎症などによる粘膜の色の変化や血管の透見像を強調するモードである。ズーム操作部２２ｃは、内視鏡１２内のズームレンズ４７（図２参照）を駆動させて、撮像対象を拡大させるズーム操作に用いられる。 Further, the operation unit 22 is provided with a mode switch 22b and a zoom operation unit 22c. The mode switch 22b is used for switching operation between the normal observation mode and the special observation mode. The normal observation mode is a mode in which white light is used for illumination of an imaging target in the subject. The special observation mode is a mode in which special light having a bluish color is used for illumination of the imaging target in the subject, and is a mode in which a change in the color of the mucous membrane due to inflammation or the like and a transparent image of the blood vessel are emphasized. The zoom operation unit 22c is used for a zoom operation for driving a zoom lens 47 (see FIG. 2) in the endoscope 12 to enlarge an imaging target.

モニタ１８および入力装置２０は、プロセッサ装置１６に電気的に接続されるものである。モニタ１８は、内視鏡１２によって撮像された内視鏡画像および後述する色数値情報を表示するものである。入力装置２０は、機能設定等などの入力操作を受け付けるものであり、キーボードおよびマウスなどを備えたものである。なお、タッチパネルを用いることによってモニタ１８と入力装置２０とを兼用するようにしてもよい。 The monitor 18 and the input device 20 are electrically connected to the processor device 16. The monitor 18 displays an endoscopic image captured by the endoscope 12 and color numerical value information described later. The input device 20 accepts input operations such as function settings, and includes a keyboard and a mouse. In addition, you may make it use the monitor 18 and the input device 20 together by using a touch panel.

図２は、本実施形態の内視鏡システム１０の内部構成を示すブロック図である。 FIG. 2 is a block diagram showing an internal configuration of the endoscope system 10 of the present embodiment.

光源装置１４は、中心波長４４５ｎｍの青色レーザ光を発する青色レーザ光源３４と、中心波長４０５ｎｍの青紫色レーザ光を発する青紫色レーザ光源３６とを備えている。各光源３４、３６は、光源制御部４０により個別に制御され、青色レーザ光源３４の出射光と、青紫色レーザ光源３６の出射光の光量比は変更可能になっている。 The light source device 14 includes a blue laser light source 34 that emits blue laser light having a central wavelength of 445 nm, and a blue-violet laser light source 36 that emits blue-violet laser light having a central wavelength of 405 nm. The light sources 34 and 36 are individually controlled by the light source control unit 40, and the light quantity ratio between the emitted light of the blue laser light source 34 and the emitted light of the blue-violet laser light source 36 can be changed.

光源制御部４０は、通常観察モードの場合には、主として青色レーザ光源３４を駆動させる。なお、青紫色レーザ光源３６については、青紫色レーザ光がわずかに発光されるように制御してもよい。 The light source controller 40 mainly drives the blue laser light source 34 in the normal observation mode. Note that the blue-violet laser light source 36 may be controlled so that the blue-violet laser light is slightly emitted.

これに対し、光源制御部４０は、特殊観察モードの場合には、青色レーザ光源３４と青紫色レーザ光源３６の両方を駆動させるとともに、青色レーザ光の光強度が青紫色レーザ光の光強度よりも大きくなるように制御している。なお、青色レーザ光または青紫色レーザ光の半値幅は±２ｎｍ程度にし、青色狭帯域光とすることが好ましい。また、青色レーザ光源３４および青紫色レーザ光源３６としては、ブロードエリア型のＩｎＧａＮ系レーザダイオード、ＩｎＧａＡｓＮ系レーザダイオードおよびＧａＡｓＮ系レーザダイオードなどを用いることができる。また、上記光源として、発光ダイオードなどの発光体を用いた構成としてもよい。 On the other hand, in the special observation mode, the light source control unit 40 drives both the blue laser light source 34 and the blue-violet laser light source 36, and the light intensity of the blue laser light is higher than the light intensity of the blue-violet laser light. Is also controlled to be larger. Note that the half-value width of the blue laser light or the blue-violet laser light is preferably about ± 2 nm and is preferably blue narrow-band light. Further, as the blue laser light source 34 and the blue-violet laser light source 36, a broad area type InGaN laser diode, InGaAsN laser diode, GaAsN laser diode, or the like can be used. In addition, a light-emitting body such as a light-emitting diode may be used as the light source.

各光源３４、３６から出射されるレーザ光は、集光レンズなどの光学部材（図示省略）を介してライトガイド（ＬＧ）４１に入射する。ライトガイド４１は、ユニバーサルコード１３内に収容されており、内視鏡１２に光学的に接続される。 Laser light emitted from each of the light sources 34 and 36 enters a light guide (LG) 41 via an optical member (not shown) such as a condenser lens. The light guide 41 is accommodated in the universal cord 13 and is optically connected to the endoscope 12.

青色レーザ光または青紫色レーザ光は、ライトガイド４１を介して、内視鏡１２の先端部２４まで伝搬される。なお、ライトガイド４１としては、マルチモードファイバを使用することができる。 The blue laser beam or the blue-violet laser beam is propagated to the distal end portion 24 of the endoscope 12 through the light guide 41. A multimode fiber can be used as the light guide 41.

内視鏡１２の先端部２４は照明光学系２４aと撮像光学系２４ｂを有している。照明光学系２４aには、ライトガイド４１から出射された青色レーザ光または青紫色レーザ光が入射する蛍光体４４と、照明レンズ４５が設けられている。蛍光体４４に、青色レーザ光が照射されることで励起され、蛍光体４４から蛍光が発せられる。また、一部の青色レーザ光は、そのまま蛍光体４４を透過する。青紫色レーザ光は、蛍光体４４を励起させることなく透過する。蛍光体４４を出射した光は、照明レンズ４５を介して、撮像対象に照射される。 The distal end portion 24 of the endoscope 12 has an illumination optical system 24a and an imaging optical system 24b. The illumination optical system 24 a is provided with a phosphor 44 on which blue laser light or blue-violet laser light emitted from the light guide 41 is incident, and an illumination lens 45. The phosphor 44 is excited by being irradiated with blue laser light, and fluorescence is emitted from the phosphor 44. Some of the blue laser light passes through the phosphor 44 as it is. The blue-violet laser light is transmitted without exciting the phosphor 44. The light emitted from the phosphor 44 is irradiated to the imaging target via the illumination lens 45.

ここで、通常観察モードにおいては、主として青色レーザ光が蛍光体４４に入射する。したがって、図３に示すような、青色レーザ光ＢＬと蛍光体４４から発せられた蛍光ＦＬとを合波した白色光ＷＬが、撮像対象に照射される。一方、特殊観察モードにおいては、青紫色レーザ光と青色レーザ光の両方が蛍光体４４に入射する。したがって、図４に示すような、青紫色レーザ光ＶＬ、青色レーザ光ＢＬ、および蛍光ＦＬを合波した特殊光ＳＬが、撮像対象に照射される。この特殊観察モードでは、青色レーザ光に加えて、青紫色レーザ光が含まれているため、特殊光は、青色成分を多く含みかつ波長範囲がほぼ可視光全域に及ぶ広帯域光となっている。 Here, in the normal observation mode, mainly blue laser light is incident on the phosphor 44. Therefore, as shown in FIG. 3, white light WL obtained by combining the blue laser light BL and the fluorescence FL emitted from the phosphor 44 is irradiated to the imaging target. On the other hand, in the special observation mode, both blue-violet laser light and blue laser light are incident on the phosphor 44. Therefore, as shown in FIG. 4, special light SL obtained by combining the blue-violet laser light VL, the blue laser light BL, and the fluorescence FL is irradiated onto the imaging target. In this special observation mode, in addition to blue laser light, blue-violet laser light is included, so the special light is a broadband light that contains a large amount of blue components and has a wavelength range that covers almost the entire visible light range.

なお、蛍光体４４は、青色レーザ光の一部を吸収して、緑色〜黄色に励起発光する複数種の蛍光体（例えばＹＡＧ（Yttrium Aluminum Garnet）系蛍光体、或いはＢＡＭ（ＢａＭｇＡｌ_１０Ｏ_１７）等の蛍光体）を含んで構成されるものを使用することが好ましい。本実施形態のように、半導体発光素子を蛍光体４４の励起光源として用いれば、高い発光効率で高強度の白色光が得られ、白色光の強度を容易に調整できる上に、白色光の色温度、色度の変化を小さく抑えることができる。 The phosphor 44 absorbs a part of the blue laser beam and emits a plurality of types of phosphors that emit green to yellow light (for example, YAG (Yttrium Aluminum Garnet) phosphor or BAM (BaMgAl ₁₀ O ₁₇ )). It is preferable to use a material comprising a phosphor such as If a semiconductor light emitting device is used as an excitation light source for the phosphor 44 as in this embodiment, high intensity white light can be obtained with high luminous efficiency, the intensity of white light can be easily adjusted, and the color of white light can be adjusted. Changes in temperature and chromaticity can be kept small.

なお、本実施形態においては、蛍光体４４を内視鏡１２の先端部２４に設けたが、これに代えて、蛍光体４４を光源装置１４内に設けてもよい。この場合には、ライトガイド４１と青色レーザ光源３４との間に、蛍光体４４を設けることが好ましい。 In the present embodiment, the phosphor 44 is provided at the distal end portion 24 of the endoscope 12, but the phosphor 44 may be provided in the light source device 14 instead. In this case, it is preferable to provide a phosphor 44 between the light guide 41 and the blue laser light source 34.

また、内視鏡１２の撮像光学系２４ｂは、撮像レンズ４６、ズームレンズ４７、および撮像素子４８を有している。撮像対象からの反射光は、撮像レンズ４６およびズームレンズ４７を介して、撮像素子４８に入射する。これにより、撮像素子４８に撮像対象の反射像が結像される。ズームレンズ４７は、ズーム操作部２２ｃを操作することで移動する。 The imaging optical system 24 b of the endoscope 12 includes an imaging lens 46, a zoom lens 47, and an imaging element 48. Reflected light from the imaging target enters the imaging element 48 via the imaging lens 46 and the zoom lens 47. As a result, a reflected image of the imaging target is formed on the imaging element 48. The zoom lens 47 is moved by operating the zoom operation unit 22c.

撮像素子４８はカラーのイメージセンサであり、撮像対象の反射像を撮像してＲＡＷ信号を出力する。なお、撮像素子４８は、ＣＣＤ(Charge Coupled Device）イメージセンサやＣＭＯＳ(Complementary Metal-Oxide Semiconductor）イメージセンサ等であることが好ましい。 The image sensor 48 is a color image sensor, which captures a reflection image to be imaged and outputs a RAW signal. The image sensor 48 is preferably a CCD (Charge Coupled Device) image sensor, a CMOS (Complementary Metal-Oxide Semiconductor) image sensor, or the like.

また、本実施形態の撮像素子４８は、撮像面にＲＧＢのカラーフィルタが設けられた同時式撮像素子である。Ｒ（赤）のカラーフィルタが設けられた素子からＲ成分のＲＡＷ信号が出力され、Ｇ（緑）のカラーフィルタが設けられた素子からＧ成分のＲＡＷ信号が出力され、Ｂ（青）のカラーフィルタが設けられた素子からＢ成分のＲＡＷ信号が出力される。フィルタ配列としては、ベイヤー配列でもよいし、ハニカム配列でもよい。 The image sensor 48 of the present embodiment is a simultaneous image sensor in which an RGB color filter is provided on the imaging surface. The R component RAW signal is output from the element provided with the R (red) color filter, the G component RAW signal is output from the element provided with the G (green) color filter, and the color of B (blue) A B-component RAW signal is output from the element provided with the filter. The filter array may be a Bayer array or a honeycomb array.

ここで、本明細書でいうＲＡＷ信号とは、撮像素子４８の各素子から出力された信号であって、各素子に設けられたカラーフィルタの色をそのまま表している信号のことである。 Here, the RAW signal referred to in this specification is a signal output from each element of the image sensor 48 and directly representing the color of the color filter provided in each element.

なお、撮像素子４８としては、撮像面にＣ（シアン）、Ｍ（マゼンタ）、Ｙ（イエロー）およびＧ（緑）のＣＭＹＧフィルタを備えたイメージセンサであっても良い。ＣＭＹＧフィルタを備えたイメージセンサの場合には、Ｃ（シアン）のカラーフィルタが設けられた素子からＣ成分のＲＡＷ信号が出力され、Ｍ（マゼンダ）のカラーフィルタが設けられた素子からＭ成分のＲＡＷ信号が出力され、Ｙ（イエロー）のカラーフィルタが設けられた素子からＹ成分のＲＡＷ信号が出力され、Ｇ（緑）のカラーフィルタが設けられた素子からＧ成分のＲＡＷ信号が出力される。 The image sensor 48 may be an image sensor including C (cyan), M (magenta), Y (yellow), and G (green) CMYG filters on the imaging surface. In the case of an image sensor provided with a CMYG filter, a C component RAW signal is output from an element provided with a C (cyan) color filter, and an M component output from an element provided with an M (magenta) color filter. A RAW signal is output, a Y component RAW signal is output from an element provided with a Y (yellow) color filter, and a G component RAW signal is output from an element provided with a G (green) color filter. .

撮像素子４８から出力されたＲＡＷ信号は、ＣＤＳ／ＡＧＣ回路５０に出力される。ＣＤＳ／ＡＧＣ回路５０は、アナログ信号である画像信号に相関二重サンプリング（ＣＤＳ（correlated double sampling））や自動利得制御（ＡＧＣ（Auto gain control））を行う。ＣＤＳ／ＡＧＣ回路５０を経たＲＡＷ信号は、ガンマ変換部５１においてガンマ変換が施された後、Ａ／Ｄ変換部５２により、デジタルＲＡＷ信号に変換される。Ａ／Ｄ変換されたデジタルＲＡＷ信号は、プロセッサ装置１６に入力される。 The RAW signal output from the image sensor 48 is output to the CDS / AGC circuit 50. The CDS / AGC circuit 50 performs correlated double sampling (CDS) and automatic gain control (AGC) on an image signal that is an analog signal. The RAW signal that has passed through the CDS / AGC circuit 50 is subjected to gamma conversion in the gamma conversion unit 51 and then converted into a digital RAW signal by the A / D conversion unit 52. The A / D converted digital RAW signal is input to the processor unit 16.

プロセッサ装置１６は、ＲＡＷ信号取得部６０と、シェーディング補正部６１と、デモザイク処理部６２と、色補正処理部６３と、通常画像生成部６４と、特殊画像生成部６５と、色数値情報算出部６６と、表示制御部６７と、記憶部６８とを備える。プロセッサ装置１６は、ＣＰＵ（Central Processing Unit）、半導体メモリおよびハードディスクなどを備えたコンピュータから構成されるものであり、本発明の内視鏡画像信号処理プログラムの一実施形態がインストールされたものである。この内視鏡画像信号処理プログラムがＣＰＵによって実行されることによって、上記各部が機能する。 The processor device 16 includes a RAW signal acquisition unit 60, a shading correction unit 61, a demosaic processing unit 62, a color correction processing unit 63, a normal image generation unit 64, a special image generation unit 65, and a color numerical value information calculation unit. 66, a display control unit 67, and a storage unit 68. The processor device 16 includes a computer having a CPU (Central Processing Unit), a semiconductor memory, a hard disk, and the like, and is installed with an embodiment of the endoscope image signal processing program of the present invention. . The above-described units function when the endoscope image signal processing program is executed by the CPU.

ＲＡＷ信号取得部６０は、内視鏡１２から出力されたデジタルＲＡＷ信号を取得するものである。ＲＡＷ信号取得部６０によって取得されたデジタルＲＡＷ信号は記憶部６８に記憶される。通常画像生成部６４および特殊画像生成部６５が、内視鏡画像生成部に相当するものである。 The RAW signal acquisition unit 60 acquires a digital RAW signal output from the endoscope 12. The digital RAW signal acquired by the RAW signal acquisition unit 60 is stored in the storage unit 68. The normal image generation unit 64 and the special image generation unit 65 correspond to an endoscope image generation unit.

シェーディング補正部６１は、ＲＡＷ信号取得部６０によって取得されたデジタルＲＡＷ信号に対してシェーディング補正を施すものである。シェーディング補正の方法としては、公知な手法を用いることができる。 The shading correction unit 61 performs shading correction on the digital RAW signal acquired by the RAW signal acquisition unit 60. As a shading correction method, a known method can be used.

デモザイク処理部６２は、シェーディング補正の施されたデジタルＲＡＷ信号に対してデモザイク処理を施すものである。ここで、デモザイク処理について、図５を参照しながら説明する。 The demosaic processing unit 62 performs demosaic processing on the digital RAW signal subjected to shading correction. Here, the demosaic process will be described with reference to FIG.

たとえば撮像素子４８が、ベイヤー配列のＲＧＢカラーフィルタが設けられた同時式撮像素子である場合、撮像素子４８から出力されるＲＧＢのＲＡＷ信号Ｉは、図５に示すようにＲＧＢカラーフィルタと同じ配列になる。そして、ＲＡＷ信号Ｉをそれぞれ色成分毎に分けた場合、図５に示すように、Ｇ成分のＲＡＷ信号ＭＧ、Ｒ成分のＲＡＷ信号ＭＲおよびＢ成分のＲＡＷ信号ＭＢとなり、各色成分のＲＡＷ信号はモザイク状になる。 For example, when the image sensor 48 is a simultaneous image sensor provided with an RGB color filter having a Bayer array, the RGB RAW signal I output from the image sensor 48 has the same array as the RGB color filter as shown in FIG. become. Then, when the RAW signal I is divided for each color component, as shown in FIG. 5, the RAW signal MG for the G component, the RAW signal MR for the R component, and the RAW signal MB for the B component are obtained. It becomes a mosaic.

デモザイク処理は、図５に示すようなモザイク状のＲＡＷ信号ＭＧ，ＭＲ，ＭＢのそれぞれについて、ＲＡＷ信号が無い部分を生成して埋めることによって色成分毎の画像信号ＩＧ，ＩＲ，ＩＢを生成する処理のことである。なお、以下、このデモザイク処理によって得られる画像信号ＩＧ，ＩＲ，ＩＢのことをＲＧＢ−ＲＡＷ信号という。 The demosaic processing generates image signals IG, IR, and IB for each color component by generating and filling a portion having no RAW signal for each of the mosaic-like RAW signals MG, MR, and MB as shown in FIG. It is processing. Hereinafter, the image signals IG, IR, and IB obtained by the demosaic processing are referred to as RGB-RAW signals.

本実施形態のデモザイク処理部６２は、２種類のデモザイク処理を行うものである。具体的には、デモザイク処理部６２は、補間処理を行うデモザイク処理と、補間処理を行わないデモザイク処理とを切り替えて行うものである。以下、補間処理を行うデモザイク処理を第１のデモザイク処理といい、補間処理を行わないデモザイク処理を第２のデモザイク処理という。 The demosaic processing unit 62 of this embodiment performs two types of demosaic processing. Specifically, the demosaic processing unit 62 switches between demosaic processing that performs interpolation processing and demosaic processing that does not perform interpolation processing. Hereinafter, the demosaic process that performs the interpolation process is referred to as a first demosaic process, and the demosaic process that does not perform the interpolation process is referred to as a second demosaic process.

ここで、本明細書でいう補間処理とは、撮像素子４８を構成する複数の素子から出力されたＲＡＷ信号を用いて新しいＲＡＷ信号を生成する処理のことである。この補間処理には、たとえば隣接する同じ色成分のＲＡＷ信号で置き換えるニアレストレイバー法によって新しいＲＡＷ信号を生成する処理は含まれない。 Here, the interpolation processing referred to in this specification is processing for generating a new RAW signal using RAW signals output from a plurality of elements constituting the image sensor 48. This interpolation process does not include, for example, a process for generating a new RAW signal by the near-rebar method that replaces the adjacent RAW signal with the same color component.

本実施形態の補間処理としては、たとえば勾配法に基づく補間法、適応型カラープレーン補間法（ACPI(Adaptive Color Plane Interpolation)）および線形補間法などを用いることができるが、これらの補間処理に限らず、複数の素子から出力されたＲＡＷ信号を用いて新しいＲＡＷ信号を生成する処理であれば、その他の公知な補間処理を用いるようにしてもよい。また、撮像素子４８に設けられたカラーフィルタがＣＭＹＧのカラーフィルタである場合も同様に、複数の素子から出力されたＲＡＷ信号を用いて新しいＲＡＷ信号を生成する処理であれば、如何なる公知な補間処理を用いるようにしてもよい。 For example, an interpolation method based on a gradient method, an adaptive color plane interpolation method (ACPI (Adaptive Color Plane Interpolation)), and a linear interpolation method can be used as the interpolation processing of the present embodiment. Instead, other known interpolation processing may be used as long as processing is performed to generate a new RAW signal using RAW signals output from a plurality of elements. Similarly, when the color filter provided in the image sensor 48 is a CMYG color filter, any known interpolation may be used as long as the process generates a new RAW signal using RAW signals output from a plurality of elements. Processing may be used.

デモザイク処理部６２は、モニタ１８に表示させる表示用の内視鏡画像を生成する場合には、第１のデモザイク処理を行い、色数値情報算出部６６によって撮像対象の色情報を数値化した色数値情報を算出する場合には、第２のデモザイク処理を行うものである。 The demosaic processing unit 62 performs a first demosaic process when generating an endoscopic image for display to be displayed on the monitor 18, and the color numerical value information calculation unit 66 digitizes the color information of the imaging target. When calculating numerical information, the second demosaic process is performed.

第１のデモザイク処理では、上述した補間処理を行うことによってＲＧＢ−ＲＡＷ信号ＩＧ，ＩＲ，ＩＢを生成する。 In the first demosaic process, the RGB-RAW signals IG, IR, and IB are generated by performing the above-described interpolation process.

また、第２のデモザイク処理では、補間処理を行わず、上述したニアレストレイバー法によって新しいＲＡＷ信号を生成しすることによって、ＲＧＢ−ＲＡＷ信号ＩＧ，ＩＲ，ＩＢを生成する。第２のデモザイク処理によって得られるＲＧＢ−ＲＡＷ信号ＩＧ，ＩＲ，ＩＢは、撮像対象の色をより正確に表したものとなる。なお、色数値情報については、後で詳述する。また、第１のデモザイク処理によって生成されたＲＧＢ−ＲＡＷ信号を第１のＲＧＢ−ＲＡＷ信号といい、第２のデモザイク処理によって生成されたＲＧＢ−ＲＡＷ信号を第２のＲＧＢ−ＲＡＷ信号という。 Further, in the second demosaic process, the RGB-RAW signals IG, IR, and IB are generated by generating a new RAW signal by the above-mentioned near-less lever method without performing an interpolation process. The RGB-RAW signals IG, IR and IB obtained by the second demosaic process more accurately represent the color to be imaged. The color numerical value information will be described later in detail. The RGB-RAW signal generated by the first demosaic process is referred to as a first RGB-RAW signal, and the RGB-RAW signal generated by the second demosaic process is referred to as a second RGB-RAW signal.

色補正処理部６３は、デモザイク処理部６２において生成された第１および第２のＲＧＢ−ＲＡＷ信号に対して色補正処理を施すものである。本実施形態における色補正処理部６３は、表示用の内視鏡画像（通常画像および特殊画像）を生成する場合と色数値情報を算出する場合とで異なるパラメータを用いて色補正処理を行うものである。具体的には、表示用の内視鏡画像を生成する場合には、モニタ１８の表示に適したパラメータを用いて色補正処理を行う。 The color correction processing unit 63 performs color correction processing on the first and second RGB-RAW signals generated by the demosaic processing unit 62. The color correction processing unit 63 in the present embodiment performs color correction processing using different parameters for generating a display endoscope image (normal image and special image) and calculating color numerical value information. It is. Specifically, when an endoscope image for display is generated, color correction processing is performed using parameters suitable for display on the monitor 18.

一方、色数値情報を算出する場合には、第２のＲＧＢ−ＲＡＷ信号をＸＹＺ色空間またはＬａｂ色空間などの画像信号に変換する色補正処理を行う。このようにＲＧＢの画像信号をＸＹＺ色空間またはＬａｂ色空間などの画像信号に変換するのは、これらの色空間の画像信号の方が、実際の撮像対象の色をより正確に表しているからである。なお、色空間としては、ＸＹＺ空間およびＬａｂ色空間に限らず、その他のＨＳＶ色空間などを用いるようにしてもよい。 On the other hand, when calculating color numerical value information, color correction processing is performed for converting the second RGB-RAW signal into an image signal such as an XYZ color space or a Lab color space. The RGB image signal is converted into an image signal such as an XYZ color space or a Lab color space in this manner because the image signals in these color spaces more accurately represent the actual color of the imaging target. It is. Note that the color space is not limited to the XYZ space and the Lab color space, and other HSV color spaces may be used.

通常画像生成部６４は、色補正処理の施された第１のＲＧＢ−ＲＡＷ信号に対して、通常画像用の予め設定された画像処理を施して表示用の通常画像信号を生成するものである。また、特殊画像生成部６５は、色補正処理の施された第１のＲＧＢ−ＲＡＷ信号に対して、特殊画像用の予め設定された画像処理を施して表示用の特殊画像信号を生成するものである。 The normal image generation unit 64 generates a normal image signal for display by performing preset image processing for a normal image on the first RGB-RAW signal subjected to the color correction processing. . The special image generating unit 65 generates a special image signal for display by performing preset image processing for the special image on the first RGB-RAW signal subjected to the color correction processing. It is.

色数値情報算出部６６は、色補正処理部６３においてＸＹＺ色空間またはＬａｂ色空間に変換された画像信号に基づいて、撮像対象の色情報を数値化した色数値情報を算出するものである。このように撮像対象の色情報を数値化することによって、撮像対象の色を定量化することができ、撮像対象の客観的な色情報を得ることができる。 The color numerical value information calculation unit 66 calculates color numerical value information obtained by converting the color information of the imaging target into a numerical value based on the image signal converted into the XYZ color space or the Lab color space by the color correction processing unit 63. Thus, by digitizing the color information of the imaging target, the color of the imaging target can be quantified, and objective color information of the imaging target can be obtained.

また、上述したように、色数値情報算出部６６において色数値情報を算出する場合には、デモザイク処理部６２において第２のデモザイク処理を行う。すなわち、複数の素子から出力されたＲＡＷ信号を用いた補間処理を行うことなく、撮像素子４８から出力されたＲＡＷ信号を直接用いた第２のデモザイク処理を行うようにしたので、撮像対象の色の情報をより正確に表した色数値情報を算出することができる。 Further, as described above, when the color numerical value information calculation unit 66 calculates color numerical information, the demosaic processing unit 62 performs the second demosaic process. That is, since the second demosaic process directly using the RAW signal output from the image sensor 48 is performed without performing the interpolation process using the RAW signal output from the plurality of elements, the color of the imaging target It is possible to calculate color numerical information that more accurately represents the above information.

色数値情報算出部６６は、具体的には、ＸＹＺ色空間の画像信号の場合には、撮像対象の色相および彩度を表す数値情報として、ｘ値とｙ値を算出する。ここで、ｘ＝Ｘ／（Ｘ＋Ｙ＋Ｚ）であり、ｙ＝Ｙ／（Ｘ＋Ｙ＋Ｚ）である。ｘ値としては、画像信号を構成する各画素のｘ値の平均値を算出することが望ましいが、これに限らず、最大値、最小値または中央値などを算出するようにしてもよい。ｙ値も同様に、画像信号を構成する各画素のｙ値の平均値を算出することが望ましいが、これに限らず、最大値、最小値または中央値などを算出するようにしてもよい。 Specifically, in the case of an image signal in the XYZ color space, the color numerical value information calculation unit 66 calculates an x value and ay value as numerical information representing the hue and saturation of the imaging target. Here, x = X / (X + Y + Z) and y = Y / (X + Y + Z). As the x value, it is desirable to calculate the average value of the x values of the pixels constituting the image signal. However, the present invention is not limited to this, and a maximum value, minimum value, median value, or the like may be calculated. Similarly, for the y value, it is desirable to calculate the average value of the y values of the respective pixels constituting the image signal. However, the present invention is not limited to this.

また、Ｌａｂ色空間の画像信号に変換した場合には、撮像対象の色相および彩度を表す数値情報として、ａ*値とｂ*値を算出する。ａ*値としては、画像信号を構成する各画素のａ*値の平均値を算出することが望ましいが、これに限らず、最大値、最小値または中央値などを算出するようにしてもよい。ｂ*値も同様に、画像信号を構成する各画素のｂ*値の平均値を算出することが望ましいが、これに限らず、最大値、最小値または中央値などを算出するようにしてもよい。 Further, when converted into an image signal in the Lab color space, the a * value and the b * value are calculated as numerical information representing the hue and saturation of the imaging target. As the a * value, it is desirable to calculate the average value of the a * values of the pixels constituting the image signal. However, the present invention is not limited to this. . Similarly, for the b * value, it is desirable to calculate the average value of the b * values of the respective pixels constituting the image signal. Good.

また、ＬＳＶ色空間の画像信号に変換した場合には、撮像対象の色相を表す数値情報としてＨ値を算出し、彩度を表す情報としてＳ値を算出する。Ｈ値としては、画像信号を構成する各画素のＨ値の平均値を算出することが望ましいが、これに限らず、最大値、最小値または中央値などを算出するようにしてもよい。Ｓ値も同様に、画像信号を構成する各画素のＳ値の平均値を算出することが望ましいが、これに限らず、最大値、最小値または中央値などを算出するようにしてもよい。 Further, when the image signal is converted into an image signal in the LSV color space, the H value is calculated as numerical information representing the hue of the imaging target, and the S value is calculated as information representing the saturation. As the H value, it is desirable to calculate the average value of the H values of each pixel constituting the image signal. Similarly, for the S value, it is desirable to calculate the average value of the S values of the pixels constituting the image signal. However, the present invention is not limited to this.

表示制御部６７は、通常画像生成部６４または特殊画像生成部６５から出力された通常画像信号または特殊画像信号を、モニタ１８で表示可能な表示画像信号に変換する。モニタ１８は、表示画像信号に基づいて、通常画像または特殊画像を表示する。 The display control unit 67 converts the normal image signal or the special image signal output from the normal image generation unit 64 or the special image generation unit 65 into a display image signal that can be displayed on the monitor 18. The monitor 18 displays a normal image or a special image based on the display image signal.

また、表示制御部６７は、色数値情報算出部６６によって算出された色数値情報をモニタ１８にテキスト表示するものである。ユーザは、モニタ１８に表示された色数値情報を見ることによって、撮像対象の客観的な色情報を認識することができる。 The display control unit 67 displays the color value information calculated by the color value information calculation unit 66 as text on the monitor 18. The user can recognize objective color information of the imaging target by looking at the numerical color information displayed on the monitor 18.

次に、本実施形態の内視鏡システムの作用について、図６に示すフローチャートを参照しながら説明する。 Next, the operation of the endoscope system of this embodiment will be described with reference to the flowchart shown in FIG.

まず、通常観察モードに設定し、内視鏡１２の挿入部２１を被検体内に挿入する（Ｓ１０）。内視鏡１２によって撮像対象を撮像することによって撮像素子４８から出力されたＲＡＷ信号は、シェーディング補正が施された後、第１のデモザイク処理が施され、第１のＲＧＢ−ＲＡＷ信号が生成される。 First, the normal observation mode is set, and the insertion portion 21 of the endoscope 12 is inserted into the subject (S10). The RAW signal output from the image sensor 48 by imaging the imaging target with the endoscope 12 is subjected to shading correction, and then subjected to a first demosaic process to generate a first RGB-RAW signal. The

第１のＲＧＢ−ＲＡＷ信号は、通常画像生成部６４において通常画像用の画像処理が施された後、表示制御部６７に出力され、表示制御部６７は、モニタ１８に通常画像を表示させる。 The first RGB-RAW signal is subjected to image processing for a normal image in the normal image generation unit 64 and then output to the display control unit 67. The display control unit 67 causes the monitor 18 to display a normal image.

次いで、ユーザが、現在表示されている通常画像の色数値情報を確認したいと考えた場合には（Ｓ１２，ＹＥＳ）、その指示入力に応じて色数値情報が算出され、色数値情報が表示制御部６７によってモニタ１８にテキスト表示される（Ｓ２０）。この際、上述したようにデモザイク処理部６２におけるデモザイク処理は、第１のデモザイク処理から第２のデモザイク処理に切り換えられ、第２のＲＧＢ−ＲＡＷ信号が生成される。色補正処理部６３における色補正処理についても、ＸＹＺ色空間などへの色変換処理に切り換えられる。色数値情報の算出の指示入力については、たとえば入力装置２０を用いてユーザが行うようにすればよいが、これに限らず、切替スイッチを内視鏡１２の操作部２２に設けるようにしてもよい。 Next, when the user wants to confirm the color numerical information of the normal image currently displayed (S12, YES), the color numerical information is calculated in response to the instruction input, and the color numerical information is displayed and controlled. The text is displayed on the monitor 18 by the unit 67 (S20). At this time, as described above, the demosaic process in the demosaic processing unit 62 is switched from the first demosaic process to the second demosaic process, and a second RGB-RAW signal is generated. The color correction processing in the color correction processing unit 63 is also switched to color conversion processing to an XYZ color space or the like. The instruction input for calculating the color numerical information may be performed by the user using the input device 20, for example. However, the present invention is not limited thereto, and a changeover switch may be provided in the operation unit 22 of the endoscope 12. Good.

一方、ユーザが通常画像を観察している際に、さらに特殊画像を観察したいと考えた場合には、特殊光観察モードに設定する（Ｓ１２，ＮＯ、Ｓ１４，ＹＥＳ，Ｓ１６）。内視鏡１２によって撮像対象を撮像することによって撮像素子４８から出力されたＲＡＷ信号は、シェーディング補正が施された後、第１のデモザイク処理が施され、第１のＲＧＢ−ＲＡＷ信号が生成される。 On the other hand, when the user wants to observe a special image while observing a normal image, the special light observation mode is set (S12, NO, S14, YES, S16). The RAW signal output from the image sensor 48 by imaging the imaging target with the endoscope 12 is subjected to shading correction, and then subjected to a first demosaic process to generate a first RGB-RAW signal. The

第１のＲＧＢ−ＲＡＷ信号は、特殊画像生成部６５において特殊画像用の画像処理が施された後、表示制御部６７に出力され、表示制御部６７は、モニタ１８に特殊画像を表示させる。 The first RGB-RAW signal is subjected to image processing for a special image in the special image generation unit 65, and then output to the display control unit 67. The display control unit 67 causes the monitor 18 to display the special image.

次いで、ユーザが、現在表示されている特殊画像の色数値情報を確認したいと考えた場合には（Ｓ１８，ＹＥＳ）、その指示入力に応じて色数値情報が算出され、その算出された色数値情報が表示制御部６７によってモニタ１８にテキスト表示される（Ｓ２０）。この際、デモザイク処理部６２におけるデモザイク処理は、第１のデモザイク処理から第２のデモザイク処理に切り換えられ、第２のＲＧＢ−ＲＡＷ信号が生成される。色補正処理部６３における色補正処理についても、ＸＹＺ色空間などへの色変換処理に切り換えられる。 Next, when the user wants to confirm the color value information of the special image currently displayed (S18, YES), the color value information is calculated in response to the instruction input, and the calculated color value is calculated. Information is displayed as text on the monitor 18 by the display control unit 67 (S20). At this time, the demosaic process in the demosaic processing unit 62 is switched from the first demosaic process to the second demosaic process, and a second RGB-RAW signal is generated. The color correction processing in the color correction processing unit 63 is also switched to color conversion processing to an XYZ color space or the like.

次に、本発明の内視鏡画像信号処理装置および方法並びにプログラムの第２の実施形態を用いた内視鏡システムについて説明する。図７は、本実施形態の内視鏡システム１１の概略構成を示す図である。第２の実施形態の内視鏡システム１１は、第１の実施形態の内視鏡システム１０に対して、さらに画像数値情報算出部６９を設けたものである。 Next, an endoscope system using the endoscope image signal processing device and method and the second embodiment of the program of the present invention will be described. FIG. 7 is a diagram showing a schematic configuration of the endoscope system 11 of the present embodiment. The endoscope system 11 according to the second embodiment further includes an image numerical value information calculation unit 69 with respect to the endoscope system 10 according to the first embodiment.

画像数値情報算出部６９は、撮像対象の色情報以外の画像情報を数値化した画像数値情報を算出するものである。画像数値情報としては、たとえば鮮鋭度の数値情報、ノイズの量を表す数値情報、およびコントラストの数値情報などがある。なお、ノイズの量を表す数値情報は、たとえば指定された領域または画像信号値が予め設定された閾値よりも低い領域において標準偏差を算出することによって取得すればよい。または、時間軸方向に連続する画像に対して同じ座標位置の標準偏差を算出することによって取得してもよい。 The image numerical information calculation unit 69 calculates image numerical information obtained by digitizing image information other than the color information of the imaging target. Examples of the numerical image information include sharpness numerical information, numerical information indicating the amount of noise, and numerical information on contrast. Note that the numerical information indicating the amount of noise may be obtained by calculating the standard deviation in, for example, a specified region or a region where the image signal value is lower than a preset threshold value. Or you may acquire by calculating the standard deviation of the same coordinate position with respect to the image continuous in a time-axis direction.

画像数値情報は、表示制御部６７によってモニタ１８にテキスト表示される。このように画像数値情報をモニタ１８にテキスト表示させることによって、ユーザは、画像の鮮鋭度などの色情報以外の画像の特徴量を定量化した客観的な情報を認識することができる。 The numerical image information is displayed as text on the monitor 18 by the display control unit 67. Thus, by displaying the image numerical information on the monitor 18 as text, the user can recognize objective information obtained by quantifying the feature amount of the image other than the color information such as the sharpness of the image.

画像数値情報算出部６９によって画像数値情報を算出する場合には、色数値情報を算出する場合と異なり、デモザイク処理部６２は、補間処理を行う第１のデモザイク処理を行う。また、色補正処理部６３は、表示用の内視鏡画像を生成する場合と同様の色補正処理を施す。 When calculating the image numerical information by the image numerical information calculation unit 69, unlike the case of calculating the color numerical information, the demosaic processing unit 62 performs a first demosaic process for performing an interpolation process. Further, the color correction processing unit 63 performs the same color correction processing as that for generating an endoscope image for display.

なお、その他の構成については、上記第１の実施形態の内視鏡システム１０と同様である。 In addition, about another structure, it is the same as that of the endoscope system 10 of the said 1st Embodiment.

次に、第２の実施形態の内視鏡システム１１の作用について、図８に示すフローチャートを参照しながら説明する。 Next, the operation of the endoscope system 11 of the second embodiment will be described with reference to the flowchart shown in FIG.

まず、通常観察モードに設定し、内視鏡１２の挿入部２１を被検体内に挿入する（Ｓ３０）。内視鏡１２によって撮像対象を撮像することによって撮像素子４８から出力されたＲＡＷ信号は、シェーディング補正が施された後、第１のデモザイク処理が施され、第１のＲＧＢ−ＲＡＷ信号が生成される。 First, the normal observation mode is set, and the insertion portion 21 of the endoscope 12 is inserted into the subject (S30). The RAW signal output from the image sensor 48 by imaging the imaging target with the endoscope 12 is subjected to shading correction, and then subjected to a first demosaic process to generate a first RGB-RAW signal. The

次いで、ユーザが、現在表示されている通常画像の色数値情報または画像数値情報を確認したいと考えた場合には（Ｓ３２，ＹＥＳ）、その指示入力に応じて色数値情報または画像数値情報が算出され、その算出された色数値情報または画像数値情報がモニタ１８にテキスト表示される（Ｓ４０）。この際、色数値情報を算出する場合には、デモザイク処理部６２におけるデモザイク処理は、第１のデモザイク処理から第２のデモザイク処理に切り換えられ、第２のＲＧＢ−ＲＡＷ信号が生成される。また、色補正処理部６３における色補正処理についても、ＸＹＺ色空間などへの色変換処理に切り換えられる。 Next, when the user wants to check the color numerical information or image numerical information of the normal image currently displayed (S32, YES), the color numerical information or image numerical information is calculated according to the instruction input. The calculated color numerical value information or image numerical value information is displayed as text on the monitor 18 (S40). At this time, when calculating the color numerical value information, the demosaic process in the demosaic processing unit 62 is switched from the first demosaic process to the second demosaic process, and a second RGB-RAW signal is generated. The color correction processing in the color correction processing unit 63 is also switched to color conversion processing to an XYZ color space or the like.

一方、画像数値情報を算出する場合には、デモザイク処理部６２におけるデモザイク処理は、第１のデモザイク処理のままで切り換えられない。また、色補正処理部６３における色補正処理についても、通常画像を生成する場合における色補正処理と同様の色補正処理が施される。色数値情報の算出および画像数値情報の算出の指示入力については、たとえば入力装置２０を用いてユーザが行うようにすればよいが、これに限らず、切替スイッチを内視鏡１２の操作部２２に設けるようにしてもよい。 On the other hand, when calculating the image numerical information, the demosaic process in the demosaic processing unit 62 is not switched as it is in the first demosaic process. Further, the color correction processing in the color correction processing unit 63 is also subjected to the same color correction processing as the color correction processing in the case of generating a normal image. The instruction input for calculating the numerical color information and the numerical image information may be performed by the user using, for example, the input device 20, but is not limited thereto, and the changeover switch is not limited to the operation unit 22 of the endoscope 12. You may make it provide in.

一方、ユーザが通常画像を観察している際に、さらに特殊画像を観察したいと考えた場合には、特殊光観察モードに設定する（Ｓ３２，ＮＯ、Ｓ３４，ＹＥＳ，Ｓ３６）。内視鏡１２によって撮像対象を撮像することによって撮像素子４８から出力されたＲＡＷ信号は、シェーディング補正が施された後、第１のデモザイク処理が施されて第１のＲＧＢ−ＲＡＷ信号が生成される。 On the other hand, when the user wants to observe a special image while observing a normal image, the special light observation mode is set (S32, NO, S34, YES, S36). The RAW signal output from the image sensor 48 by imaging the imaging target with the endoscope 12 is subjected to shading correction, and then subjected to a first demosaic process to generate a first RGB-RAW signal. The

次いで、ユーザが、現在表示されている特殊画像の色数値情報または画像数値情報を確認したいと考えた場合には（Ｓ３８，ＹＥＳ）、その指示入力に応じて色数値情報または画像数値情報が算出され、その算出された色数値情報または画像数値情報がモニタ１８にテキスト表示される（Ｓ４０）。この際、色数値情報を算出する場合には、デモザイク処理部６２におけるデモザイク処理は、第１のデモザイク処理から第２のデモザイク処理に切り換えられ、第２のＲＧＢ−ＲＡＷ信号が生成される。また、色補正処理部６３における色補正処理についても、ＸＹＺ色空間などへの色変換処理に切り換えられる。 Next, when the user wishes to confirm the color numerical information or image numerical information of the special image currently displayed (S38, YES), the color numerical information or image numerical information is calculated according to the instruction input. The calculated color numerical value information or image numerical value information is displayed as text on the monitor 18 (S40). At this time, when calculating the color numerical value information, the demosaic process in the demosaic processing unit 62 is switched from the first demosaic process to the second demosaic process, and a second RGB-RAW signal is generated. The color correction processing in the color correction processing unit 63 is also switched to color conversion processing to an XYZ color space or the like.

一方、画像数値情報を算出する場合には、デモザイク処理部６２におけるデモザイク処理は、第１のデモザイク処理のままで切り換えられない。また、色補正処理部６３における色補正処理についても、特殊画像を生成する場合における色補正処理と同様の色補正処理が施される。 On the other hand, when calculating the image numerical information, the demosaic process in the demosaic processing unit 62 is not switched as it is in the first demosaic process. Further, the color correction processing in the color correction processing unit 63 is also subjected to the same color correction processing as the color correction processing in the case of generating a special image.

次に、本発明の内視鏡画像信号処理装置および方法並びにプログラムの第３の実施形態を用いた内視鏡システムについて説明する。図９は、本実施形態の内視鏡システム１５の概略構成を示す図である。第３の実施形態の内視鏡システム１５は、第１の実施形態の内視鏡システム１０に対して、さらに関心領域特定部７０を備えたものである。 Next, an endoscope system using the endoscope image signal processing apparatus and method and the third embodiment of the program of the present invention will be described. FIG. 9 is a diagram showing a schematic configuration of the endoscope system 15 of the present embodiment. The endoscope system 15 according to the third embodiment is further provided with a region of interest specifying unit 70 with respect to the endoscope system 10 according to the first embodiment.

関心領域特定部７０は、モニタ１８に表示された通常画像上または特殊画像上における関心領域を特定するものである。関心領域については、ユーザが通常画像または特殊画像を観察しながら入力装置２０を用いて設定入力してもよいし、画像処理などによって病変部を自動的に抽出し、その病変部を関心領域としてもよい。 The region of interest specifying unit 70 specifies a region of interest on a normal image or a special image displayed on the monitor 18. The region of interest may be set and input using the input device 20 while the user observes a normal image or a special image, or a lesion is automatically extracted by image processing or the like, and the lesion is used as the region of interest. Also good.

関心領域特定部７０によって特定された関心領域の位置情報は、色数値情報算出部６６に出力される。色数値情報算出部６６は、入力された関心領域の位置情報に基づいて、その関心領域内の色数値情報を算出するものである。色数値情報の算出方法については、第１の実施形態と同様である。 The position information of the region of interest specified by the region of interest specifying unit 70 is output to the color value information calculating unit 66. The color numerical value information calculation unit 66 calculates color numerical value information in the region of interest based on the input position information of the region of interest. The calculation method of color numerical information is the same as that in the first embodiment.

また、その他の構成については、上記第１の実施形態の内視鏡システム１０と同様である。 Other configurations are the same as those of the endoscope system 10 of the first embodiment.

次に、第３の実施形態の内視鏡システム１５の作用について、図１０に示すフローチャートを参照しながら説明する。 Next, the operation of the endoscope system 15 of the third embodiment will be described with reference to the flowchart shown in FIG.

まず、通常観察モードに設定し、内視鏡１２の挿入部２１を被検体内に挿入する（Ｓ５０）。内視鏡１２によって撮像対象を撮像することによって撮像素子４８から出力されたＲＡＷ信号は、シェーディング補正が施された後、第１のデモザイク処理が施され、第１のＲＧＢ−ＲＡＷ信号が生成される。 First, the normal observation mode is set, and the insertion portion 21 of the endoscope 12 is inserted into the subject (S50). The RAW signal output from the image sensor 48 by imaging the imaging target with the endoscope 12 is subjected to shading correction, and then subjected to a first demosaic process to generate a first RGB-RAW signal. The

次いで、ユーザが、現在表示されている通常画像上の特定の関心領域の色数値情報を確認したいと考えた場合には（Ｓ５２，ＹＥＳ）、その指示入力が行われる。続いて、ユーザによって入力装置２０を用いて関心領域が設定入力され、その位置情報が関心領域特定部７０によって取得される（Ｓ６０）。 Next, when the user wants to confirm color numerical value information of a specific region of interest on the currently displayed normal image (S52, YES), the instruction is input. Subsequently, a region of interest is set and input by the user using the input device 20, and the position information is acquired by the region of interest specifying unit 70 (S60).

関心領域特定部７０によって取得された関心領域の位置情報は、色数値情報算出部６６に出力される。色数値情報算出部６６は、入力された関心領域内の色数値情報を算出する（Ｓ６２）。この際、デモザイク処理部６２におけるデモザイク処理は、第１のデモザイク処理から第２のデモザイク処理に切り換えられ、第２のＲＧＢ−ＲＡＷ信号が生成される。また、色補正処理部６３における色補正処理についても、ＸＹＺ色空間などへの色変換処理に切り換えられる。算出された色数値情報は表示制御部６７に出力され、表示制御部６７は、色数値情報をモニタ１８にテキスト表示させる（Ｓ６４）。 The position information of the region of interest acquired by the region of interest specifying unit 70 is output to the color value information calculating unit 66. The color value information calculation unit 66 calculates color value information in the input region of interest (S62). At this time, the demosaic process in the demosaic processing unit 62 is switched from the first demosaic process to the second demosaic process, and a second RGB-RAW signal is generated. The color correction processing in the color correction processing unit 63 is also switched to color conversion processing to an XYZ color space or the like. The calculated color numerical information is output to the display control unit 67, and the display control unit 67 displays the color numerical information on the monitor 18 as text (S64).

一方、ユーザが通常画像を観察している際に、さらに特殊画像を観察したいと考えた場合には、特殊光観察モードに設定する（Ｓ５２，ＮＯ，Ｓ５４，ＹＥＳ，Ｓ５６）。内視鏡１２によって撮像対象を撮像することによって撮像素子４８から出力されたＲＡＷ信号は、シェーディング補正が施された後、第１のデモザイク処理が施されて第１のＲＧＢ−ＲＡＷ信号が生成される。 On the other hand, when the user wants to observe a special image while observing a normal image, the special light observation mode is set (S52, NO, S54, YES, S56). The RAW signal output from the image sensor 48 by imaging the imaging target with the endoscope 12 is subjected to shading correction, and then subjected to a first demosaic process to generate a first RGB-RAW signal. The

次いで、ユーザが、現在表示されている特殊画像上の特定の関心領域の色数値情報を確認したいと考えた場合には（Ｓ５８，ＹＥＳ）、その指示入力が行われる。続いて、ユーザによって入力装置２０を用いて関心領域が設定入力され、その位置情報が関心領域特定部７０によって取得される（Ｓ６０）。 Next, when the user wants to confirm color numerical value information of a specific region of interest on the currently displayed special image (S58, YES), the instruction is input. Subsequently, a region of interest is set and input by the user using the input device 20, and the position information is acquired by the region of interest specifying unit 70 (S60).

関心領域特定部７０によって取得された関心領域の位置情報は、色数値情報算出部６６に出力される。色数値情報算出部６６は、入力された関心領域内の色数値情報を算出する（Ｓ６２）。この際、デモザイク処理部６２におけるデモザイク処理は、第１のデモザイク処理から第２のデモザイク処理に切り換えられ、第２のＲＧＢ−ＲＡＷ信号が生成される。また、色補正処理部６３における色補正処理についても、ＸＹＺ色空間などへの色変換処理に切り換えられる。算出された色数値情報は表示制御部６７に出力され、表示制御部６７は、色数値情報をモニタ１８にテキスト表示させる（Ｓ６４）。 The position information of the region of interest acquired by the region of interest specifying unit 70 is output to the color value information calculating unit 66. The color value information calculation unit 66 calculates color value information in the input region of interest (S62). At this time, the demosaic process in the demosaic processing unit 62 is switched from the first demosaic process to the second demosaic process, and a second RGB-RAW signal is generated. The color correction processing in the color correction processing unit 63 is also switched to color conversion processing to an XYZ color space or the like. The calculated color numerical value information is output to the display control unit 67, and the display control unit 67 displays the color numerical value information on the monitor 18 as text (S64).

なお、上記第１〜第３の実施形態の内視鏡システム１０，１１，１５においては、第２のデモザイク処理の施された第２のＲＧＢ−ＲＡＷ信号を用いて色数値情報を算出するようにしたが、第２のデモザイク処理を施す前の、モザイク状のＲ成分、Ｇ成分およびＢ成分のＲＡＷ信号を用いて色数値情報を算出するようにしてもよい。 In the endoscope systems 10, 11, and 15 of the first to third embodiments, color numerical value information is calculated using the second RGB-RAW signal subjected to the second demosaic process. However, the color numerical value information may be calculated using the mosaic-shaped R component, G component, and B component RAW signals before the second demosaic process is performed.

また、上記第１〜第３の実施形態の内視鏡システム１０，１１，１５においては、本発明の実施を内視鏡の診断中に行ったが、これに限らず、内視鏡診断後、内視鏡システム１０，１１，１５の記憶部６８に記憶しておいた第２のデモザイク処理前のモザイク状のＲ成分、Ｇ成分およびＢ成分のＲＡＷ信号、または第２のデモザイク処理後の第２のＲＧＢ−ＲＡＷ信号を用いて色数値情報を算出するようにしてもよい。また、記憶部６８に記憶しておいた第１のデモザイク処理の施された第１のＲＧＢ−ＲＡＷ信号を用いて通常画像または特殊画像を表示させるようにしてもよい。 In the endoscope systems 10, 11, and 15 of the first to third embodiments, the present invention is performed during the diagnosis of the endoscope. However, the present invention is not limited thereto, and after the endoscope diagnosis. The mosaic R component, G component and B component RAW signals stored in the storage unit 68 of the endoscope system 10, 11, 15 before the second demosaic process, or after the second demosaic process Color numerical value information may be calculated using the second RGB-RAW signal. Alternatively, the normal image or the special image may be displayed using the first RGB-RAW signal subjected to the first demosaic process stored in the storage unit 68.

また、上記第１〜第３の実施形態の内視鏡システム１０，１１，１５においては、Ｒ成分、Ｇ成分およびＢ成分の画像信号をＸＹＺ色空間の画像信号に変換して色数値情報を算出するようにしたが、色数値情報として、Ｒ成分およびＧ成分の第２のＲＧＢ−ＲＡＷ信号に基づいて、粘膜ヘモグロビン指数であるＩＨｂを算出するようにしてもよい。 In the endoscope systems 10, 11, and 15 of the first to third embodiments, the R component, G component, and B component image signals are converted into image signals in the XYZ color space to obtain color numerical information. Although it is calculated, IHb, which is a mucosal hemoglobin index, may be calculated based on the second RGB-RAW signal of the R component and the G component as color numerical value information.

また、上記第１〜第３の実施形態の内視鏡システム１０，１１，１５においては、色数値情報をテキスト表示するようにしたが、さらに、その色数値情報に関連するカラーバーや色度図などの色画像情報を表示させるようにしてもよい。 In the endoscope systems 10, 11, and 15 of the first to third embodiments, the color numerical information is displayed as text. Further, a color bar and chromaticity related to the color numerical information are displayed. You may make it display color image information, such as a figure.

また、上記第１〜第３の実施形態の内視鏡システム１０，１１，１５においては、光源として、青色レーザ光源３４と青紫色レーザ光源３６とを用い、蛍光体４４に青色レーザ光を照射することによって白色光を得るようにしたが、光源装置１４の構成は、これに限らず、その他の構成でもよい。 In the endoscope systems 10, 11, and 15 of the first to third embodiments, the blue light source 34 and the blue-violet laser light source 36 are used as the light sources, and the phosphor 44 is irradiated with the blue laser light. However, the configuration of the light source device 14 is not limited to this, and other configurations may be used.

具体的には、図１１に示す内視鏡システム１５のように、光源装置１４が、Ｖ−ＬＥＤ（Violet Light Emitting Diode）４２ａ、Ｂ-ＬＥＤ（Blue Light Emitting Diode）４２ｂ、Ｇ-ＬＥＤ（Green Light Emitting Diode）４２ｃ、およびＲ-ＬＥＤ（Red Light Emitting Diode）４２ｄを備えるようにしてもよい。光源装置１４は、さらに４色のＬＥＤ４２a〜４２ｄの駆動を制御する光源制御部４０と４色のＬＥＤ４２a〜４２ｄから発せられる４色の光の光路を結合する光路結合部４３とを備えている。光路結合部４３で結合された光は、ライトガイド４１を介して、被検体内に照射される。 Specifically, as in the endoscope system 15 shown in FIG. 11, the light source device 14 includes a V-LED (Violet Light Emitting Diode) 42a, a B-LED (Blue Light Emitting Diode) 42b, and a G-LED (Green A light emitting diode (R) 42c and a red light emitting diode (R-LED) 42d may be provided. The light source device 14 further includes a light source control unit 40 that controls driving of the four color LEDs 42a to 42d and an optical path coupling unit 43 that couples the optical paths of the four color lights emitted from the four color LEDs 42a to 42d. The light coupled by the optical path coupling unit 43 is irradiated into the subject through the light guide 41.

図１２に示すように、Ｖ-ＬＥＤ４２ａは、中心波長４０５±１０nm、波長範囲３８０〜４２０nmの紫色光Ｖを発生する。Ｂ-ＬＥＤ４２ｂは、中心波長４６０±１０nm、波長範囲４２０〜５００nmの青色光Ｂを発生する。Ｇ-ＬＥＤ４２ｃは、波長範囲が４８０〜６００nmに及ぶ緑色光Ｇを発生する。Ｒ-ＬＥＤ４２ｄは、中心波長６２０〜６３０nmで、波長範囲が６００〜６５０nmに及ぶ赤色光Ｒを発生する。 As shown in FIG. 12, the V-LED 42a generates purple light V having a center wavelength of 405 ± 10 nm and a wavelength range of 380 to 420 nm. The B-LED 42b generates blue light B having a center wavelength of 460 ± 10 nm and a wavelength range of 420 to 500 nm. The G-LED 42c generates green light G having a wavelength range of 480 to 600 nm. The R-LED 42d generates red light R having a center wavelength of 620 to 630 nm and a wavelength range of 600 to 650 nm.

光源制御部４０は、通常観察モード、第１特殊光観察モード、及び第２特殊光観察モードのいずれの観察モードにおいても、Ｖ−ＬＥＤ４２ａ、Ｂ-ＬＥＤ４２ｂ、Ｇ-ＬＥＤ４２ｃ、Ｒ-ＬＥＤ４２ｄを点灯する。したがって、紫色光Ｖ、青色光Ｂ、緑色光Ｇ、及び赤色光Ｒの４色の光が混色した光が、観察対象に照射される。また、光源制御部４０は、通常観察モード時には、紫色光Ｖ、青色光Ｂ、緑色光Ｇ、赤色光Ｒ間の光量比がＶｃ：Ｂｃ：Ｇｃ：Ｒｃとなるように、各ＬＥＤ４２ａ〜４２ｄを制御する。一方、光源制御部４０は、第１及び第２特殊観察モード時には、紫色光Ｖ、青色光Ｂ、緑色光Ｇ、赤色光Ｒ間の光量比がＶｓ：Ｂｓ：Ｇｓ：Ｒｓとなるように、各ＬＥＤ４２ａ〜４２ｄを制御する。なお、第１特殊光観察モードは、ピロリ菌の除菌が成功したか否かを判断する場合に用いられ、第１特殊画像をモニタ１８上に表示するモードである。第２特殊光観察モードは、ピロリ菌に感染しているか否かを判断する場合に用いられ、第２特殊画像をモニタ１８上に表示するモードである。 The light source control unit 40 lights the V-LED 42a, the B-LED 42b, the G-LED 42c, and the R-LED 42d in any of the observation modes of the normal observation mode, the first special light observation mode, and the second special light observation mode. . Accordingly, the observation target is irradiated with light in which four colors of light of purple light V, blue light B, green light G, and red light R are mixed. In the normal observation mode, the light source controller 40 sets the LEDs 42a to 42d so that the light quantity ratio among the violet light V, blue light B, green light G, and red light R is Vc: Bc: Gc: Rc. Control. On the other hand, in the first and second special observation modes, the light source control unit 40 is configured so that the light quantity ratio among the violet light V, the blue light B, the green light G, and the red light R is Vs: Bs: Gs: Rs. Each LED 42a-42d is controlled. The first special light observation mode is used when determining whether or not the sterilization of Helicobacter pylori has been successful, and is a mode for displaying the first special image on the monitor 18. The second special light observation mode is used to determine whether or not the virus is infected with H. pylori, and is a mode for displaying the second special image on the monitor 18.

また、上記第１〜第３の実施形態の内視鏡システム１０，１１，１５においては、同時式撮像素子を用いるようにしたが、本発明は、いわゆる面順次方式の内視鏡システムにも適用することができる。 In the endoscope systems 10, 11, and 15 of the first to third embodiments, the simultaneous imaging device is used. However, the present invention is applicable to a so-called frame sequential endoscope system. Can be applied.

面順次方式の内視鏡システムにおいては、通常観察モードの場合には、Ｒ（赤）フィルタ、Ｇ（緑）フィルタおよびＢ（青）フィルタが周方向に沿って設けられた回転フィルタが回転することで、青色光、緑色光および赤色光が撮像対象に順次照射される。 In the field sequential endoscope system, in the normal observation mode, a rotary filter in which an R (red) filter, a G (green) filter, and a B (blue) filter are provided along the circumferential direction rotates. Thus, blue light, green light, and red light are sequentially irradiated onto the imaging target.

青色光、緑色光および赤色光の照射による撮像対象からの反射像がモノクロの撮像素子によって撮像され、撮像素子からＢ成分、Ｇ成分およびＲ成分のＲＧＢ−ＲＡＷ信号が順次出力される。なお、ここでいうＲＧＢ−ＲＡＷ信号は、上述したデモザイク処理によって得られたものではないが、全ての画素がそれぞれＲ成分、Ｇ成分およびＢ成分の信号を有するという意味では同じなので、ＲＧＢ−ＲＡＷ信号と呼ぶことにする。 A reflected image from an imaging target by irradiation with blue light, green light, and red light is picked up by a monochrome image pickup device, and RGB-RAW signals of B component, G component, and R component are sequentially output from the image pickup device. Note that the RGB-RAW signal here is not obtained by the demosaic processing described above, but is the same in the sense that all pixels have R component, G component, and B component signals, respectively. It will be called a signal.

面順次方式の内視鏡システムでは、時分割にＲ成分、Ｇ成分およびＢ成分のＲＧＢ−ＲＡＷ信号が取得されるので、すなわち撮像対象を撮像するタイミングが色成分毎に異なるので、Ｒ成分、Ｇ成分およびＢ成分のＲＧＢ−ＲＡＷ信号のそれぞれに対して位置合わせ処理が施され、その位置合わせ処理後のＲ成分、Ｇ成分およびＢ成分のＲＧＢ−ＲＡＷ信号に基づいて通常画像が生成される。 In the frame-sequential endoscope system, R-component, G-component, and B-component RGB-RAW signals are acquired in a time division manner, that is, the timing at which the imaging target is imaged differs for each color component. Each of the G-component and B-component RGB-RAW signals is subjected to alignment processing, and a normal image is generated based on the R-component, G-component, and B-component RGB-RAW signals after the alignment processing. .

しかしながら、色数値情報を算出する場合に上述した位置合わせ処理を行ったのでは、上記実施形態の補間処理と同様に混色が生じてしまい、撮像対象の正確な色を表した色数値情報を取得することができない。したがって、位置合わせ処理を行う前のＲ成分、Ｇ成分およびＢ成分のＲＧＢ−ＲＡＷ信号を直接用いて色数値情報を算出する。 However, if the alignment process described above is performed when calculating the color numerical information, color mixture occurs as in the interpolation process of the above-described embodiment, and color numerical information representing the exact color of the imaging target is acquired. Can not do it. Therefore, the color numerical value information is calculated by directly using the RGB-RAW signals of the R component, G component, and B component before the alignment processing.

また、特殊光観察モードにおいては、中心波長４１５ｎｍの青色狭帯域光を透過させるＢｎフィルタ、ＧフィルタおよびＲフィルタが周方向に沿って設けられた回転フィルタを回転させることによって、撮像対象に対して青色狭帯域光、緑色光および赤色光が撮像対象に順次照射される。 Further, in the special light observation mode, by rotating a rotary filter provided with a Bn filter, a G filter, and an R filter that transmit blue narrow-band light having a center wavelength of 415 nm along the circumferential direction, Blue narrow-band light, green light, and red light are sequentially irradiated onto the imaging target.

青色狭帯域光、緑色光および赤色光の照射による撮像対象からの反射像がモノクロの撮像素子によって撮像され、撮像素子からＢｎ成分、Ｇ成分およびＲ成分のＲＧＢ−ＲＡＷ信号が順次出力される。 A reflected image from an imaging target by irradiation with blue narrow band light, green light, and red light is picked up by a monochrome image pickup device, and RGB-RAW signals of Bn component, G component, and R component are sequentially output from the image pickup device.

そして、通常観察モードの場合と同様に、位置合わせ処理後のＲ成分、Ｇ成分およびＢｎ成分のＲＧＢ−ＲＡＷ信号に基づいて特殊画像が生成され、位置合わせ処理を行う前のＲ成分、Ｇ成分およびＢｎ成分のＲＧＢ−ＲＡＷ信号を直接用いて色数値情報が算出される。 Then, as in the normal observation mode, a special image is generated based on the RGB-RAW signals of the R component, G component, and Bn component after the alignment process, and the R component, G component before the alignment process is performed. Color numerical value information is calculated by directly using RGB-RAW signals of the Bn component and the Bn component.

なお、本発明は、第１〜第３の実施形態の内視鏡システム１０，１１，１５のような挿入部２１を備えた内視鏡システムに限らず、カプセル内視鏡にも適用可能である。 In addition, this invention is applicable not only to the endoscope system provided with the insertion part 21 like the endoscope systems 10, 11, and 15 of the first to third embodiments but also to the capsule endoscope. is there.

１０，１１，１５内視鏡システム
１２内視鏡
１３ユニバーサルコード
１４光源装置
１５内視鏡システム
１６プロセッサ装置
１８モニタ
２０入力装置
２１挿入部
２２操作部
２２ａアングルノブ
２２ｂモード切替スイッチ
２２ｃズーム操作部
２３湾曲部
２４先端部
２４a 照明光学系
２４ｂ撮像光学系
３４青色レーザ光源
３６青紫色レーザ光源
４０光源制御部
４１ライトガイド
４４蛍光体
４５照明レンズ
４６撮像レンズ
４７ズームレンズ
４８撮像素子
５０回路
５１ガンマ変換部
５２変換部
６０信号取得部
６１シェーディング補正部
６２デモザイク処理部
６３色補正処理部
６４通常画像生成部
６５特殊画像生成部
６６色数値情報算出部
６７表示制御部
６８記憶部
６９画像数値情報算出部
７０関心領域特定部
ＢＬ青色レーザ光
ＦＬ蛍光
ＳＬ特殊光
ＶＬ青紫色レーザ光
ＷＬ白色色
ＩＲＡＷ信号
ＩＲＲ成分のＲＧＢ−ＲＡＷ信号
ＩＧＧ成分のＲＧＢ−ＲＡＷ信号
ＩＢＢ成分のＲＧＢ−ＲＡＷ信号
ＭＧＧ成分のモザイク状のＲＡＷ信号
ＭＲＲ成分のモザイク状のＲＡＷ信号
ＭＢＢ成分のモザイク状のＲＡＷ信号 10, 11, 15 Endoscope system 12 Endoscope 13 Universal code 14 Light source device 15 Endoscope system 16 Processor device 18 Monitor 20 Input device 21 Insertion unit 22 Operation unit 22a Angle knob 22b Mode changeover switch 22c Zoom operation unit 23 Curved portion 24 Tip portion 24a Illumination optical system 24b Imaging optical system 34 Blue laser light source 36 Blue-violet laser light source 40 Light source control unit 41 Light guide 44 Phosphor 45 Illumination lens 46 Imaging lens 47 Zoom lens 48 Imaging element 50 Circuit 51 Gamma conversion unit 52 conversion unit 60 signal acquisition unit 61 shading correction unit 62 demosaic processing unit 63 color correction processing unit 64 normal image generation unit 65 special image generation unit 66 color numerical information calculation unit 67 display control unit 68 storage unit 69 image numerical information calculation unit 70 Region-of-interest specifying part BL Blue laser FL Fluorescent SL Special light VL Blue-violet laser light WL White color I RAW signal IR R component RGB-RAW signal IGG component RGB-RAW signal IB B component RGB-RAW signal MG G component mosaic RAW signal MR R component mosaic RAW signal MB B component mosaic RAW signal

Claims

内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得するＲＡＷ信号取得部と、
前記ＲＡＷ信号に対してデモザイク処理を施してＲＧＢ−ＲＡＷ信号を生成するデモザイク処理部と、
前記ＲＧＢ−ＲＡＷ信号に基づいて、表示用の内視鏡画像を生成する内視鏡画像生成部と、
前記ＲＧＢ−ＲＡＷ信号を用いて、前記撮像対象の色情報を数値化した色数値情報を算出する色数値情報算出部とを備え、
前記デモザイク処理部が、
前記表示用の内視鏡画像を生成する場合には、前記同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行う前記デモザイク処理を行い、
前記色数値情報を算出する場合には、前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによって前記デモザイク処理を行うことを特徴とする内視鏡画像信号処理装置。 A RAW signal acquisition unit that acquires a RAW signal output from a simultaneous imaging device having a color filter by imaging an imaging target using an endoscope;
A demosaic processing unit that performs demosaic processing on the RAW signal to generate an RGB-RAW signal;
An endoscope image generation unit that generates an endoscope image for display based on the RGB-RAW signal;
The RGB- and have use of the RAW signal, and a color numerical information calculation unit for calculating a color numerical information obtained by digitizing the color information of the imaging object,
The demosaic processing unit
When generating an endoscopic image for display, performing the demosaic process for performing an interpolation process using RAW signals output from a plurality of elements constituting the simultaneous imaging element,
When calculating the color numerical value information, the demosaicing process is performed by replacing with a RAW signal of an element having a color filter of the same color component adjacent among a plurality of elements constituting the simultaneous imaging element. An endoscopic image signal processing apparatus.

前記ＲＧＢ−ＲＡＷ信号に対して色補正処理を施す色補正処理部を備え、
該色補正処理部が、前記表示用の内視鏡画像を生成する場合と前記色数値情報を算出する場合とで異なるパラメータを用いて前記色補正処理を施す請求項１記載の内視鏡画像信号処理装置。 A color correction processing unit that performs color correction processing on the RGB-RAW signal;
The color correction processing unit, when generating an endoscopic image and an endoscopic image with at using different parameters subjected to the color correction processing according to claim 1, wherein when calculating the color numerical information for the display Signal processing device.

内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得するＲＡＷ信号取得部と、
前記ＲＡＷ信号に対してデモザイク処理を施してＲＧＢ−ＲＡＷ信号を生成するデモザイク処理部と、
前記ＲＧＢ−ＲＡＷ信号に基づいて、前記撮像対象の色情報以外の画像情報を数値化した画像数値情報を算出する画像数値情報算出部と、
前記ＲＧＢ−ＲＡＷ信号を用いて、前記撮像対象の色情報を数値化した色数値情報を算出する色数値情報算出部とを備え、
前記デモザイク処理部が、
前記画像数値情報を算出する場合には、前記同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行う前記デモザイク処理を行い、
前記色数値情報を算出する場合には、前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによって前記デモザイク処理を行うことを特徴とする内視鏡画像信号処理装置。 A RAW signal acquisition unit that acquires a RAW signal output from a simultaneous imaging device having a color filter by imaging an imaging target using an endoscope;
A demosaic processing unit that performs demosaic processing on the RAW signal to generate an RGB-RAW signal;
Based on the RGB-RAW signal, an image numerical information calculation unit that calculates image numerical information obtained by quantifying image information other than the color information of the imaging target;
A color value information calculation unit that calculates color value information obtained by digitizing the color information of the imaging target using the RGB-RAW signal,
The demosaic processing unit
When calculating the image numerical information, performing the demosaicing process that performs an interpolation process using RAW signals output from a plurality of elements constituting the simultaneous imaging element,
To calculate the color numerical information, characterized in that the demosaic processing by replacing the RAW signal element having the color filters of the same color component adjacent ones of the plurality of elements constituting the co-type image pickup element An endoscopic image signal processing apparatus.

前記ＲＧＢ−ＲＡＷ信号に対して色補正処理を施す色補正処理部を備え、
該色補正処理部が、前記画像数値情報を算出する場合と前記色数値情報を算出する場合とで異なるパラメータを用いて前記色補正処理を施す請求項３記載の内視鏡画像信号処理装置。 A color correction processing unit that performs color correction processing on the RGB-RAW signal;
The endoscope image signal processing apparatus according to claim 3, wherein the color correction processing unit performs the color correction processing using different parameters depending on whether the image numerical value information is calculated or the color numerical value information is calculated.

前記画像数値情報算出部が、鮮鋭度の情報およびノイズの情報の少なくとも１つを前記画像数値情報として算出する請求項３または４記載の内視鏡画像信号処理装置。 The endoscope image signal processing apparatus according to claim 3 or 4, wherein the image numerical information calculation unit calculates at least one of sharpness information and noise information as the image numerical information.

内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得するＲＡＷ信号取得部と、
前記撮像対象の色情報を数値化した色数値情報を算出する色数値情報算出部と、
前記同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行うデモザイク処理をして第１のＲＧＢ−ＲＡＷ信号を生成し、かつ前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによってデモザイク処理をして第２のＲＧＢ−ＲＡＷ信号を生成するデモザイク処理部と、
前記第１のＲＧＢ−ＲＡＷ信号に基づいて、表示用の内視鏡画像を生成する内視鏡画像生成部と、
前記表示用の内視鏡画像を表示部に表示させる表示制御部と、
前記表示部に表示された内視鏡画像上における関心領域を特定する関心領域特定部とを備え、
前記色数値情報算出部が、前記内視鏡画像上において特定された関心領域内の前記ＲＡＷ信号または前記第２のＲＧＢ−ＲＡＷ信号を用いて前記色数値情報を算出することを特徴とする内視鏡画像信号処理装置。 A RAW signal acquisition unit that acquires a RAW signal output from a simultaneous imaging device having a color filter by imaging an imaging target using an endoscope;
A color value information calculation unit for calculating color value information obtained by digitizing the color information of the imaging target;
A demosaicing process that performs an interpolation process using RAW signals output from a plurality of elements that constitute the simultaneous imaging element is generated to generate a first RGB-RAW signal, and a plurality that constitutes the simultaneous imaging element A demosaic processing unit that generates a second RGB-RAW signal by performing demosaic processing by replacing with a RAW signal of an element having a color filter of the same color component adjacent among the elements ,
An endoscope image generation unit that generates an endoscope image for display based on the first RGB-RAW signal ;
A display control unit for displaying the endoscope image for display on a display unit;
A region of interest specifying unit that specifies a region of interest on the endoscopic image displayed on the display unit,
It said color numerical information calculating unit is characterized that you calculate the color numerical information using the RAW signal or the second RGB-RAW signal in a region of interest specified on the endoscopic image the endoscope image signal processing apparatus.

前記第１のＲＧＢ−ＲＡＷ信号と前記関心領域内の第２のＲＧＢ−ＲＡＷ信号に対して色補正処理を施す色補正処理部を備え、
該色補正処理部が、前記第１のＲＧＢ−ＲＡＷ信号と前記関心領域内の第２のＲＧＢ−ＲＡＷ信号に対してそれぞれ異なるパラメータを用いて前記色補正処理を施す請求項６記載の内視鏡画像信号処理装置。 A color correction processing unit configured to perform color correction processing on the first RGB-RAW signal and the second RGB-RAW signal in the region of interest;
The internal vision according to claim 6, wherein the color correction processing unit performs the color correction processing using different parameters for the first RGB-RAW signal and the second RGB-RAW signal in the region of interest. Mirror image signal processing device.

前記デモザイク処理の施されたＲＡＷ信号と、前記デモザイク処理前のＲＡＷ信号とを記憶する記憶部を備えた請求項２から７いずれか１項記載の内視鏡画像信号処理装置。 The endoscope image signal processing apparatus according to any one of claims 2 to 7, further comprising a storage unit that stores the RAW signal subjected to the demosaic process and the RAW signal before the demosaic process.

前記ＲＡＷ信号に対してシェーディング補正を施すシェーディング補正部を備えた請求項１から８いずれか１項記載の内視鏡画像信号処理装置。 Endoscopic image signal processing apparatus shading correction unit according to claim 1 to 8 to any one of claims with a performing shading correction on the RAW signal.

前記色数値情報算出部が、前記撮像対象の色相および彩度の少なくとも１つを前記色数値情報として算出する請求項１から９いずれか１項記載の内視鏡画像信号処理装置。 The endoscopic image signal processing device according to any one of claims 1 to 9, wherein the color numerical information calculation unit calculates at least one of a hue and saturation of the imaging target as the color numerical information.

前記同時式撮像素子が、ＲＧＢの前記カラーフィルタを備えた請求項１から１０いずれか１項記載の内視鏡画像信号処理装置。 The simultaneous type imaging device, an endoscopic image signal processing apparatus of claims 1, wherein 10 any one provided with the color filter of RGB.

内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得するＲＡＷ信号取得部と、
前記撮像対象の色相および彩度の少なくとも１つを色数値情報として算出する色数値情報算出部と、
前記ＲＡＷ信号に対してデモザイク処理を施してＲＧＢ−ＲＡＷ信号を生成するデモザイク処理部とを備え、
前記デモザイク処理部が、表示用の内視鏡画像を生成する場合には、前記同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行う前記デモザイク処理を行い、前記色数値情報を算出する場合には、前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによって前記デモザイク処理を行い、
前記色数値情報算出部が、前記色数値情報を算出する場合のデモザイク処理後のＲＧＢ−ＲＡＷ信号を用いて前記色数値情報を算出することを特徴とする内視鏡画像信号処理装置。 A RAW signal acquisition unit that acquires a RAW signal output from a simultaneous imaging device having a color filter by imaging an imaging target using an endoscope;
A color numerical value information calculation unit for calculating at least one of hue and saturation of the imaging target as color numerical value information;
A demosaic processing unit that performs demosaic processing on the RAW signal to generate an RGB-RAW signal,
When the demosaic processing unit generates an endoscopic image for display, the demosaic processing performs the demosaic processing that performs interpolation processing using RAW signals output from a plurality of elements constituting the simultaneous imaging device, When calculating the color numerical information, the demosaicing process is performed by replacing with a raw signal of an element having a color filter of the same color component adjacent among a plurality of elements constituting the simultaneous imaging element ,
An endoscope image signal processing apparatus, wherein the color numerical value information calculation unit calculates the color numerical value information using an RGB-RAW signal after demosaic processing when calculating the color numerical value information.

内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得するＲＡＷ信号取得部と、
前記ＲＡＷ信号を用いて、前記撮像対象の色相および彩度の少なくとも１つを色数値情報として算出する色数値情報算出部と、
前記ＲＡＷ信号に対してデモザイク処理を施してＲＧＢ−ＲＡＷ信号を生成するデモザイク処理部と、
前記ＲＧＢ−ＲＡＷ信号に基づいて、前記撮像対象の画像の鮮鋭度の情報およびノイズの情報の少なくとも１つを画像数値情報として算出する画像数値情報算出部とを備え、
前記デモザイク処理部が、前記画像数値情報を算出する場合には、前記同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行う前記デモザイク処理を行い、前記色数値情報を算出する場合には、前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによって前記デモザイク処理を行い、
前記色数値情報算出部が、前記色数値情報を算出する場合のデモザイク処理後のＲＧＢ−ＲＡＷ信号を用いて前記色数値情報を算出し、
前記画像数値情報算出部が、前記補間処理を行うデモザイク処理後のＲＧＢ−ＲＡＷ信号を用いて前記画像数値情報を算出することを特徴とする内視鏡画像信号処理装置。 A RAW signal acquisition unit that acquires a RAW signal output from a simultaneous imaging device having a color filter by imaging an imaging target using an endoscope;
And said have use a RAW signal, the color numerical information calculation unit for calculating at least one as the color numerical information of hue and saturation of the imaging target,
A demosaic processing unit for generating the RGB-RAW signal by performing demosaic processing for the previous SL RAW signal,
An image numerical information calculation unit that calculates at least one of sharpness information and noise information of the image to be imaged as image numerical information based on the RGB-RAW signal ,
When the demosaic processing unit calculates the image numerical information, the demosaic processing is performed to perform interpolation processing using RAW signals output from a plurality of elements constituting the simultaneous imaging device, and the color numerical values When calculating information, the demosaicing process is performed by replacing with a raw signal of an element having a color filter adjacent to the same color component among a plurality of elements constituting the simultaneous imaging element ,
The color value information calculation unit calculates the color value information using an RGB-RAW signal after demosaic processing in the case of calculating the color value information,
The endoscope image signal processing apparatus, wherein the image numerical information calculation unit calculates the image numerical information using an RGB-RAW signal after demosaic processing for performing the interpolation processing.

内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得するＲＡＷ信号取得部と、
前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによって、前記撮像対象の色相および彩度の少なくとも１つを色数値情報として算出する色数値情報算出部と、
前記同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行うデモザイク処理をして第１のＲＧＢ−ＲＡＷ信号を生成し、かつ前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによってデモザイク処理をして第２のＲＧＢ−ＲＡＷ信号を生成するデモザイク処理部と、
前記第１のＲＧＢ−ＲＡＷ信号に基づいて、表示用の内視鏡画像を生成する内視鏡画像生成部と、
前記表示用の内視鏡画像を表示部に表示させる表示制御部と、
前記表示部に表示された内視鏡画像上における関心領域を特定する関心領域特定部とを備え、
前記色数値情報算出部が、前記内視鏡画像上において特定された関心領域内の前記ＲＡＷ信号または前記第２のＲＧＢ−ＲＡＷ信号を用いて前記色数値情報を算出することを特徴とする内視鏡画像信号処理装置。 A RAW signal acquisition unit that acquires a RAW signal output from a simultaneous imaging device having a color filter by imaging an imaging target using an endoscope;
By replacing with a RAW signal of an adjacent element having a color filter of the same color component among a plurality of elements constituting the simultaneous imaging element , at least one of hue and saturation of the imaging target is calculated as color numerical information A color numerical value information calculating unit,
A demosaicing process that performs an interpolation process using RAW signals output from a plurality of elements that constitute the simultaneous imaging element is generated to generate a first RGB-RAW signal, and a plurality that constitutes the simultaneous imaging element A demosaic processing unit that generates a second RGB-RAW signal by performing demosaic processing by replacing with a RAW signal of an element having a color filter of the same color component adjacent among the elements ,
An endoscope image generation unit that generates an endoscope image for display based on the first RGB-RAW signal ;
A display control unit for displaying the endoscope image for display on a display unit;
A region of interest specifying unit that specifies a region of interest on the endoscopic image displayed on the display unit,
The color value information calculation unit calculates the color value information using the RAW signal or the second RGB-RAW signal in the region of interest specified on the endoscopic image. Endoscopic image signal processing apparatus.

内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得し、
前記ＲＡＷ信号に対してデモザイク処理を施してＲＧＢ−ＲＡＷ信号を生成し、
前記ＲＧＢ−ＲＡＷ信号に基づいて、表示用の内視鏡画像を生成し、
前記ＲＧＢ−ＲＡＷ信号を用いて、前記撮像対象の色情報を数値化した色数値情報を算出する内視鏡画像信号処理装置の作動方法であって、
前記デモザイク処理を施す際に、
前記表示用の内視鏡画像を生成する場合には、前記同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行う前記デモザイク処理を行い、
前記色数値情報を算出する場合には、前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによって前記デモザイク処理を行うことを特徴とする内視鏡画像信号処理装置の作動方法。 By capturing an image of an imaging target using an endoscope, a RAW signal output from a simultaneous image sensor having a color filter is obtained,
An RGB-RAW signal is generated by performing demosaic processing on the RAW signal,
Based on the RGB-RAW signal, an endoscopic image for display is generated,
And have use the RGB- RAW signal, a method of operating the endoscopic image signal processing apparatus for calculating a color numerical information obtained by digitizing the color information of the imaging object,
When performing the demosaicing process,
When generating an endoscopic image for display, performing the demosaic process for performing an interpolation process using RAW signals output from a plurality of elements constituting the simultaneous imaging element,
When calculating the color numerical value information, the demosaicing process is performed by replacing with a RAW signal of an element having a color filter of the same color component adjacent among a plurality of elements constituting the simultaneous imaging element. operation method of the endoscopic image signal processing apparatus according to.

コンピュータを、内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得するＲＡＷ信号取得部と、
前記ＲＡＷ信号に対してデモザイク処理を施してＲＧＢ−ＲＡＷ信号を生成するデモザイク処理部と、
前記ＲＧＢ−ＲＡＷ信号に基づいて、表示用の内視鏡画像を生成する内視鏡画像生成部と、
前記ＲＧＢ−ＲＡＷ信号を用いて、前記撮像対象の色情報を数値化した色数値情報を算出する色数値情報算出部として機能させる内視鏡画像信号処理プログラムであって、
前記デモザイク処理部が、
前記表示用の内視鏡画像を生成する場合には、前記同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行う前記デモザイク処理を行い、
前記色数値情報を算出する場合には、前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する一の素子のＲＡＷ信号で置き換えることによって前記ＲＡＷ信号を直接用いた前記デモザイク処理を行うことを特徴とする内視鏡画像信号処理プログラム。 A RAW signal acquisition unit that acquires a RAW signal output from a simultaneous image pickup device having a color filter by imaging an imaging target using an endoscope;
A demosaic processing unit that performs demosaic processing on the RAW signal to generate an RGB-RAW signal;
An endoscope image generation unit that generates an endoscope image for display based on the RGB-RAW signal;
The RGB- and have use of the RAW signal, an endoscopic image signal processing program to function as the color numerical information calculation unit for calculating a color numerical information obtained by digitizing the color information of the imaging object,
The demosaic processing unit
When generating an endoscopic image for display, performing the demosaic process for performing an interpolation process using RAW signals output from a plurality of elements constituting the simultaneous imaging element,
When calculating the color numerical information, the RAW signal is directly used by replacing it with a RAW signal of one element having a color filter of the same color component adjacent among a plurality of elements constituting the simultaneous imaging element. An endoscope image signal processing program characterized by performing the demosaic processing.

内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得し、By capturing an image of an imaging target using an endoscope, a RAW signal output from a simultaneous image sensor having a color filter is obtained,
前記ＲＡＷ信号に対してデモザイク処理を施してＲＧＢ−ＲＡＷ信号を生成し、An RGB-RAW signal is generated by performing demosaic processing on the RAW signal,
前記ＲＧＢ−ＲＡＷ信号に基づいて、前記撮像対象の色情報以外の画像情報を数値化した画像数値情報を算出し、Based on the RGB-RAW signal, image numerical information obtained by quantifying image information other than the color information of the imaging target is calculated,
前記ＲＧＢ−ＲＡＷ信号を用いて、前記撮像対象の色情報を数値化した色数値情報を算出する内視鏡画像信号処理装置の作動方法であって、An operation method of an endoscope image signal processing apparatus that calculates color numerical value information obtained by digitizing color information of the imaging target using the RGB-RAW signal,
前記デモザイク処理部を施す際に、When applying the demosaic processing unit,
前記画像数値情報を算出する場合には、前記同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行う前記デモザイク処理を行い、When calculating the image numerical information, performing the demosaicing process that performs an interpolation process using RAW signals output from a plurality of elements constituting the simultaneous imaging element,
前記色数値情報を算出する場合には、前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによって前記デモザイク処理を行うことを特徴とする内視鏡画像信号処理装置の作動方法。When calculating the color numerical value information, the demosaicing process is performed by replacing with a RAW signal of an element having a color filter of the same color component adjacent among a plurality of elements constituting the simultaneous imaging element. An operation method of the endoscope image signal processing apparatus.

コンピュータを、内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得するＲＡＷ信号取得部と、A RAW signal acquisition unit that acquires a RAW signal output from a simultaneous image pickup device having a color filter by imaging an imaging target using an endoscope;
前記ＲＡＷ信号に対してデモザイク処理を施してＲＧＢ−ＲＡＷ信号を生成するデモザイク処理部と、A demosaic processing unit that performs demosaic processing on the RAW signal to generate an RGB-RAW signal;
前記ＲＧＢ−ＲＡＷ信号に基づいて、前記撮像対象の色情報以外の画像情報を数値化した画像数値情報を算出する画像数値情報算出部と、Based on the RGB-RAW signal, an image numerical information calculation unit that calculates image numerical information obtained by quantifying image information other than the color information of the imaging target;
前記ＲＧＢ−ＲＡＷ信号を用いて、前記撮像対象の色情報を数値化した色数値情報を算出する色数値情報算出部として機能させるための内視鏡画像信号処理プログラムであって、An endoscope image signal processing program for functioning as a color value information calculation unit that calculates color value information obtained by digitizing the color information of the imaging target using the RGB-RAW signal,
前記デモザイク処理部が、The demosaic processing unit
前記画像数値情報を算出する場合には、前記同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行う前記デモザイク処理を行い、When calculating the image numerical information, performing the demosaicing process that performs an interpolation process using RAW signals output from a plurality of elements constituting the simultaneous imaging element,
前記色数値情報を算出する場合には、前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによって前記ＲＡＷ信号を直接用いた前記デモザイク処理を行うことを特徴とする内視鏡画像信号処理プログラム。When calculating the color numerical information, the RAW signal is directly used by replacing it with a RAW signal of an element having a color filter of the same color component adjacent among a plurality of elements constituting the simultaneous imaging element. An endoscope image signal processing program characterized by performing demosaic processing.

内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得し、
前記撮像対象の色情報を数値化した色数値情報を算出し、
前記同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行うデモザイク処理をして第１のＲＧＢ−ＲＡＷ信号を生成し、かつ前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによってデモザイク処理をして第２のＲＧＢ−ＲＡＷ信号を生成し、
前記第１のＲＧＢ−ＲＡＷ信号に基づいて、表示用の内視鏡画像を生成し、
前記表示用の内視鏡画像を表示部に表示し、
前記表示部に表示された内視鏡画像上における関心領域を特定する内視鏡画像信号処理装置の作動方法であって、
前記色数値情を算出する際に、前記内視鏡画像上において特定された関心領域内の前記ＲＡＷ信号または前記第２のＲＧＢ−ＲＡＷ信号を用いて前記色数値情報を算出することを特徴とする内視鏡画像信号処理装置の作動方法。 By capturing an image of an imaging target using an endoscope, a RAW signal output from a simultaneous image sensor having a color filter is obtained,
Calculating color numerical information obtained by digitizing the color information of the imaging target;
A demosaicing process that performs an interpolation process using RAW signals output from a plurality of elements that constitute the simultaneous imaging element is generated to generate a first RGB-RAW signal, and a plurality that constitutes the simultaneous imaging element To generate a second RGB-RAW signal by demosaicing by replacing with a RAW signal of an element having a color filter of the same color component adjacent among the elements of
Based on the first RGB-RAW signal, an endoscope image for display is generated,
Displaying the endoscopic image for display on a display unit;
An operation method of an endoscopic image signal processing device for specifying a region of interest on an endoscopic image displayed on the display unit,
When calculating the color numerical information, the color numerical information is calculated using the RAW signal or the second RGB-RAW signal in the region of interest specified on the endoscopic image. Method of operating an endoscope image signal processing apparatus .

コンピュータを、内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得するＲＡＷ信号取得部と、A RAW signal acquisition unit that acquires a RAW signal output from a simultaneous image pickup device having a color filter by imaging an imaging target using an endoscope;
前記撮像対象の色情報を数値化した色数値情報を算出する色数値情報算出部と、A color value information calculation unit for calculating color value information obtained by digitizing the color information of the imaging target;
前記同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行うデモザイク処理をして第１のＲＧＢ−ＲＡＷ信号を生成し、かつ前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによってデモザイク処理をして第２のＲＧＢ−ＲＡＷ信号を生成するデモザイク処理部と、A demosaicing process that performs an interpolation process using RAW signals output from a plurality of elements that constitute the simultaneous imaging element is generated to generate a first RGB-RAW signal, and a plurality that constitutes the simultaneous imaging element A demosaic processing unit that generates a second RGB-RAW signal by performing demosaic processing by replacing with a RAW signal of an element having a color filter of the same color component adjacent among the elements,
前記第１のＲＧＢ−ＲＡＷ信号に基づいて、表示用の内視鏡画像を生成する内視鏡画像生成部と、An endoscope image generation unit that generates an endoscope image for display based on the first RGB-RAW signal;
前記表示用の内視鏡画像を表示部に表示させる表示制御部と、A display control unit for displaying the endoscope image for display on a display unit;
前記表示部に表示された内視鏡画像上における関心領域を特定する関心領域特定部として機能させるための内視鏡画像信号処理プログラムであって、An endoscope image signal processing program for functioning as a region of interest specifying unit that specifies a region of interest on an endoscopic image displayed on the display unit,
前記色数値情報算出部が、前記内視鏡画像上において特定された関心領域内の前記ＲＡＷ信号または前記第２のＲＧＢ−ＲＡＷ信号を用いて前記色数値情報を算出することを特徴とする内視鏡画像信号処理プログラム。The color value information calculation unit calculates the color value information using the RAW signal or the second RGB-RAW signal in the region of interest specified on the endoscopic image. Endoscopic image signal processing program.

内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得し、By capturing an image of an imaging target using an endoscope, a RAW signal output from a simultaneous image sensor having a color filter is obtained,
前記撮像対象の色相および彩度の少なくとも１つを色数値情報として算出し、Calculating at least one of hue and saturation of the imaging target as color numerical information,
前記ＲＡＷ信号に対してデモザイク処理を施してＲＧＢ−ＲＡＷ信号を生成する内視鏡画像信号処理装置の作動方法であって、An operation method of an endoscope image signal processing apparatus that performs demosaic processing on the RAW signal to generate an RGB-RAW signal,
前記デモザイク処理を施す際に、表示用の内視鏡画像を生成する場合には、前記同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行う前記デモザイク処理を行い、前記色数値情報を算出する場合には、前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによって前記デモザイク処理を行い、When generating an endoscopic image for display when performing the demosaic process, the demosaic process for performing an interpolation process using RAW signals output from a plurality of elements constituting the simultaneous imaging element is performed. When the color numerical value information is calculated, the demosaicing process is performed by replacing with a raw signal of an element having a color filter of an adjacent same color component among a plurality of elements constituting the simultaneous imaging element,
前記色数値情報を算出する際に、前記色数値情報を算出する場合のデモザイク処理後のＲＧＢ−ＲＡＷ信号を用いて前記色数値情報を算出することを特徴とする内視鏡画像信号処理装置の作動方法。An endoscope image signal processing apparatus characterized in that, when calculating the color value information, the color value information is calculated using an RGB-RAW signal after demosaic processing when the color value information is calculated. Actuation method.

コンピュータを、内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得するＲＡＷ信号取得部と、A RAW signal acquisition unit that acquires a RAW signal output from a simultaneous image pickup device having a color filter by imaging an imaging target using an endoscope;
前記撮像対象の色相および彩度の少なくとも１つを色数値情報として算出する色数値情報算出部と、A color numerical value information calculation unit for calculating at least one of hue and saturation of the imaging target as color numerical value information;
前記ＲＡＷ信号に対してデモザイク処理を施してＲＧＢ−ＲＡＷ信号を生成するデモザイク処理部として機能させるために内視鏡画像信号処理プログラムであって、An endoscope image signal processing program for performing a demosaic process on the RAW signal to function as a demosaic processing unit that generates an RGB-RAW signal,
前記デモザイク処理部が、表示用の内視鏡画像を生成する場合には、前記同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行う前記デモザイク処理を行い、前記色数値情報を算出する場合には、前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによって前記デモザイク処理を行い、When the demosaic processing unit generates an endoscopic image for display, the demosaic processing performs the demosaic processing that performs interpolation processing using RAW signals output from a plurality of elements constituting the simultaneous imaging device, When calculating the color numerical information, the demosaicing process is performed by replacing with a raw signal of an element having a color filter of the same color component adjacent among a plurality of elements constituting the simultaneous imaging element,
前記色数値情報算出部が、前記色数値情報を算出する場合のデモザイク処理後のＲＧＢ−ＲＡＷ信号を用いて前記色数値情報を算出することを特徴とする内視鏡画像信号処理プログラム。An endoscope image signal processing program, wherein the color numerical value information calculation unit calculates the color numerical value information using an RGB-RAW signal after demosaic processing when calculating the color numerical value information.

内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得し、
前記ＲＡＷ信号を用いて、前記撮像対象の色相および彩度の少なくとも１つを色数値情報として算出し、
前記ＲＡＷ信号に対してデモザイク処理を施してＲＧＢ−ＲＡＷ信号を生成し、
前記ＲＧＢ−ＲＡＷ信号に基づいて、前記撮像対象の画像の鮮鋭度の情報およびノイズの情報の少なくとも１つを画像数値情報として算出する内視鏡画像信号処理装置の作動方法であって、
前記デモザイク処理を施す際に、前記画像数値情報を算出する場合には、前記同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行う前記デモザイク処理を行い、前記色数値情報を算出する場合には、前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによって前記デモザイク処理を行い、
前記色数値情報を算出する際に、前記色数値情報を算出する場合のデモザイク処理後のＲＧＢ−ＲＡＷ信号を用いて前記色数値情報を算出し、
前記画像数値情報を算出する際に、前記補間処理を行うデモザイク処理後のＲＧＢ−ＲＡＷ信号を用いて前記画像数値情報を算出することを特徴とする内視鏡画像信号処理装置の作動方法。 By capturing an image of an imaging target using an endoscope, a RAW signal output from a simultaneous image sensor having a color filter is obtained,
Using the RAW signal, calculate at least one of the hue and saturation of the imaging target as color numerical information,
An RGB-RAW signal is generated by performing demosaic processing on the RAW signal,
An operation method of an endoscopic image signal processing device that calculates at least one of sharpness information and noise information of the image to be imaged as image numerical information based on the RGB-RAW signal,
When calculating the image numerical information when performing the demosaicing process, the demosaicing process is performed to perform an interpolation process using RAW signals output from a plurality of elements constituting the simultaneous imaging element, When calculating color numerical information, the demosaicing process is performed by replacing with a raw signal of an element having a color filter of the same color component adjacent among a plurality of elements constituting the simultaneous imaging element,
When calculating the color numerical information, the color numerical information is calculated using an RGB-RAW signal after demosaic processing when calculating the color numerical information,
A method of operating an endoscopic image signal processing apparatus, wherein when calculating the image numerical information, the image numerical information is calculated using an RGB-RAW signal after demosaic processing for performing the interpolation processing .

コンピュータを、内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得するＲＡＷ信号取得部と、A RAW signal acquisition unit that acquires a RAW signal output from a simultaneous image pickup device having a color filter by imaging an imaging target using an endoscope;
前記ＲＡＷ信号を用いて、前記撮像対象の色相および彩度の少なくとも１つを色数値情報として算出する色数値情報算出部と、A color numerical value information calculating unit that calculates at least one of hue and saturation of the imaging target as color numerical value information using the RAW signal;
前記ＲＡＷ信号に対してデモザイク処理を施してＲＧＢ−ＲＡＷ信号を生成するデモザイク処理部と、A demosaic processing unit that performs demosaic processing on the RAW signal to generate an RGB-RAW signal;
前記ＲＧＢ−ＲＡＷ信号に基づいて、前記撮像対象の画像の鮮鋭度の情報およびノイズの情報の少なくとも１つを画像数値情報として算出する画像数値情報算出部として機能させるための内視鏡画像信号処理プログラムであって、Endoscopic image signal processing for functioning as an image numerical information calculation unit that calculates at least one of sharpness information and noise information of the image to be imaged as image numerical information based on the RGB-RAW signal A program,
前記デモザイク処理部が、前記画像数値情報を算出する場合には、前記同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行う前記デモザイク処理を行い、前記色数値情報を算出する場合には、前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによって前記デモザイク処理を行い、When the demosaic processing unit calculates the image numerical information, the demosaic processing is performed to perform interpolation processing using RAW signals output from a plurality of elements constituting the simultaneous imaging device, and the color numerical values When calculating information, the demosaicing process is performed by replacing with a raw signal of an element having a color filter adjacent to the same color component among a plurality of elements constituting the simultaneous imaging element,
前記色数値情報算出部が、前記色数値情報を算出する場合のデモザイク処理後のＲＧＢ−ＲＡＷ信号を用いて前記色数値情報を算出し、The color value information calculation unit calculates the color value information using an RGB-RAW signal after demosaic processing in the case of calculating the color value information,
前記画像数値情報算出部が、前記補間処理を行うデモザイク処理後のＲＧＢ−ＲＡＷ信号を用いて前記画像数値情報を算出することを特徴とする内視鏡画像信号処理プログラム。An endoscope image signal processing program, wherein the image numerical information calculation unit calculates the image numerical information using an RGB-RAW signal after demosaic processing for performing the interpolation processing.

内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得し、
前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによって、前記撮像対象の色相および彩度の少なくとも１つを色数値情報として算出し、
前記同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行うデモザイク処理をして第１のＲＧＢ−ＲＡＷ信号を生成し、かつ前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによってデモザイク処理をして第２のＲＧＢ−ＲＡＷ信号を生成し、
前記第１のＲＧＢ−ＲＡＷ信号に基づいて、表示用の内視鏡画像を生成し、
前記表示用の内視鏡画像を表示部に表示させ、
前記表示部に表示された内視鏡画像上における関心領域を特定する内視鏡画像信号処理装置の作動方法であって、
前記色数値情報を算出する際に、前記内視鏡画像上において特定された関心領域内の前記ＲＡＷ信号または前記第２のＲＧＢ−ＲＡＷ信号を用いて前記色数値情報を算出することを特徴とすることを特徴とする内視鏡画像信号処理装置の作動方法。 By capturing an image of an imaging target using an endoscope, a RAW signal output from a simultaneous image sensor having a color filter is obtained,
By replacing with a RAW signal of an adjacent element having a color filter of the same color component among a plurality of elements constituting the simultaneous imaging element, at least one of hue and saturation of the imaging target is calculated as color numerical information And
A demosaicing process that performs an interpolation process using RAW signals output from a plurality of elements that constitute the simultaneous imaging element is generated to generate a first RGB-RAW signal, and a plurality that constitutes the simultaneous imaging element To generate a second RGB-RAW signal by demosaicing by replacing with a RAW signal of an element having a color filter of the same color component adjacent among the elements of
Based on the first RGB-RAW signal, an endoscope image for display is generated,
Displaying the endoscope image for display on the display unit;
An operation method of an endoscopic image signal processing device for specifying a region of interest on an endoscopic image displayed on the display unit,
When calculating the color numerical information, the color numerical information is calculated using the RAW signal or the second RGB-RAW signal in the region of interest specified on the endoscopic image. An operation method of an endoscope image signal processing apparatus characterized by:

コンピュータを、内視鏡を用いて撮像対象を撮像することによって、カラーフィルタを有する同時式撮像素子から出力されたＲＡＷ信号を取得するＲＡＷ信号取得部と、A RAW signal acquisition unit that acquires a RAW signal output from a simultaneous image pickup device having a color filter by imaging an imaging target using an endoscope;
前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによって、前記撮像対象の色相および彩度の少なくとも１つを色数値情報として算出する色数値情報算出部と、By replacing with a RAW signal of an adjacent element having a color filter of the same color component among a plurality of elements constituting the simultaneous imaging element, at least one of hue and saturation of the imaging target is calculated as color numerical information A color numerical value information calculating unit,
前記同時式撮像素子を構成する複数の素子から出力されたＲＡＷ信号を用いた補間処理を行うデモザイク処理をして第１のＲＧＢ−ＲＡＷ信号を生成し、かつ前記同時式撮像素子を構成する複数の素子のうち隣接する同じ色成分のカラーフィルタを有する素子のＲＡＷ信号で置き換えることによってデモザイク処理をして第２のＲＧＢ−ＲＡＷ信号を生成するデモザイク処理部と、A demosaicing process that performs an interpolation process using RAW signals output from a plurality of elements that constitute the simultaneous imaging element is generated to generate a first RGB-RAW signal, and a plurality that constitutes the simultaneous imaging element A demosaic processing unit that generates a second RGB-RAW signal by performing demosaic processing by replacing with a RAW signal of an element having a color filter of the same color component adjacent among the elements,
前記第１のＲＧＢ−ＲＡＷ信号に基づいて、表示用の内視鏡画像を生成する内視鏡画像生成部と、An endoscope image generation unit that generates an endoscope image for display based on the first RGB-RAW signal;
前記表示用の内視鏡画像を表示部に表示させる表示制御部と、A display control unit for displaying the endoscope image for display on a display unit;
前記表示部に表示された内視鏡画像上における関心領域を特定する関心領域特定部として機能させるための内視鏡画像信号処理プログラムであって、An endoscope image signal processing program for functioning as a region of interest specifying unit that specifies a region of interest on an endoscopic image displayed on the display unit,
前記色数値情報算出部が、前記内視鏡画像上において特定された関心領域内の前記ＲＡＷ信号または前記第２のＲＧＢ−ＲＡＷ信号を用いて前記色数値情報を算出することを特徴とする内視鏡画像信号処理プログラム。The color value information calculation unit calculates the color value information using the RAW signal or the second RGB-RAW signal in the region of interest specified on the endoscopic image. Endoscopic image signal processing program.