JP2022112542A - Production device, image processing device, production method, image processing method, and program - Google Patents
Production device, image processing device, production method, image processing method, and program Download PDFInfo
- Publication number
- JP2022112542A JP2022112542A JP2021008363A JP2021008363A JP2022112542A JP 2022112542 A JP2022112542 A JP 2022112542A JP 2021008363 A JP2021008363 A JP 2021008363A JP 2021008363 A JP2021008363 A JP 2021008363A JP 2022112542 A JP2022112542 A JP 2022112542A
- Authority
- JP
- Japan
- Prior art keywords
- information
- image
- key
- unit
- useful
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004519 manufacturing process Methods 0.000 title claims description 35
- 238000003672 processing method Methods 0.000 title claims 2
- 238000003860 storage Methods 0.000 claims abstract description 105
- 238000007689 inspection Methods 0.000 claims abstract description 32
- 238000010276 construction Methods 0.000 claims abstract description 14
- 238000009825 accumulation Methods 0.000 claims description 15
- 238000001514 detection method Methods 0.000 claims description 15
- 239000012634 fragment Substances 0.000 abstract description 19
- 206010028980 Neoplasm Diseases 0.000 description 32
- 201000011510 cancer Diseases 0.000 description 32
- 238000000034 method Methods 0.000 description 29
- 230000006870 function Effects 0.000 description 24
- 238000010586 diagram Methods 0.000 description 21
- 239000013598 vector Substances 0.000 description 16
- 230000003247 decreasing effect Effects 0.000 description 5
- 210000004027 cell Anatomy 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 238000002599 functional magnetic resonance imaging Methods 0.000 description 2
- 238000003709 image segmentation Methods 0.000 description 2
- 238000007639 printing Methods 0.000 description 2
- 238000002604 ultrasonography Methods 0.000 description 2
- 206010027476 Metastases Diseases 0.000 description 1
- 208000019425 cirrhosis of liver Diseases 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000002059 diagnostic imaging Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 210000001165 lymph node Anatomy 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
Description
本発明は、対象画像から目的とするカテゴリの領域を検出する画像処理装置等に関するものである。 The present invention relates to an image processing apparatus and the like for detecting a target category area from a target image.
従来、ガン領域であるか否かの２値を示す識別する識別器に関する技術があった（例えば、特許文献１参照）。 Conventionally, there has been a technology related to a discriminator that identifies a binary value indicating whether or not it is a cancerous region (see, for example, Patent Document 1).
しかしながら、従来技術においては、２以上のカテゴリを含む対象画像から目的カテゴリの領域を精度高く検出するための情報を得ることが困難であった。 However, in the prior art, it is difficult to obtain information for accurately detecting a target category area from a target image containing two or more categories.
さらに具体的には、従来技術においては、ガン領域であるか否かの２値の識別しかできなかったので、医師に検出された領域を見ることを強いるー方、誤検出・未検出は避けられないため、医師はしばしば医療経験上は無視できる領域を診断することを強いられていた。 More specifically, in the prior art, since only binary discrimination of whether or not the cancerous area was possible, it is possible to force the doctor to look at the detected area, thereby avoiding erroneous detection and non-detection. Due to lack of control, physicians were often forced to diagnose areas that could be ignored from medical experience.
本第一の発明の有用キー領域情報の生産装置は、画像が格納される画像格納部と、キー条件を満たす１以上のキー領域を画像から決定するキー領域決定部と、目的カテゴリの領域を決定する能力に関する情報であり、キー領域決定部が決定した１以上の各キー領域に関する情報である情報量を取得する情報量取得部と、情報量取得部が取得した情報量を用いて、有用なキー領域を選択するための選択条件を満たす１以上の有用キー領域を決定する有用キー領域決定部と、有用キー領域決定部が決定した１以上の有用キー領域に関する有用キー領域情報を蓄積する蓄積部とを具備する有用キー領域情報の生産装置である。 The apparatus for producing useful key region information according to the first aspect of the present invention comprises an image storage unit for storing images, a key region determining unit for determining one or more key regions that satisfy key conditions from the images, and regions for target categories. an information amount acquisition unit for acquiring an amount of information that is information on the ability to determine and is information on each of the one or more key areas determined by the key area determination unit; a useful key region determination unit for determining one or more useful key regions satisfying selection conditions for selecting a key region of interest; and useful key region information relating to the one or more useful key regions determined by the useful key region determination unit. and an accumulation unit.
かかる構成により、２以上のカテゴリを含む対象画像から目的カテゴリの領域を精度高く検出するための情報を得るための有用な情報を取得できる。 With such a configuration, it is possible to acquire useful information for obtaining information for accurately detecting an area of a target category from a target image including two or more categories.
また、本第二の発明の生産装置は、第一の発明に対して、目的カテゴリの領域を含む画像である１以上の目的参照画像と、目的カテゴリの領域を含まない画像である１以上の他目的参照画像とが格納される参照画像格納部をさらに具備し、情報量取得部は、キー領域決定部が決定した１以上の各キー領域に対応する領域が１以上の各目的参照画像に存在するか否かの検査である第一検査、およびキー領域決定部が決定した１以上の各キー領域に対応する領域が１以上の各他参照画像に存在するか否かの検査である第二検査を行い、第一検査および第二検査の結果を用いて、１以上の各キー領域の情報量を取得する、請求項１記載の生産装置である。
In addition, in the production apparatus of the second invention, in contrast to the first invention, there are one or more target reference images that are images including the target category area and one or more images that are images that do not include the target category area. and a reference image storage unit for storing the other purpose reference image, and the information amount acquisition unit stores the area corresponding to each of the one or more key areas determined by the key area determination unit in each of the one or more purpose reference images. The first inspection is to inspect whether or not the key area exists, and the second inspection is to inspect whether or not the area corresponding to each of the one or more key areas determined by the key area determination unit exists in each of the one or more other reference images. 2. The production apparatus according to
かかる構成により、２以上のカテゴリを含む対象画像から目的カテゴリの領域を精度高く検出するための情報を得るための有用な情報を取得できる。 With such a configuration, it is possible to acquire useful information for obtaining information for accurately detecting an area of a target category from a target image including two or more categories.
また、本第三の発明の生産装置は、第一または第二の発明に対して、有用キー領域決定部は、情報量取得部が取得した情報量を用いて、１以上の各キー領域の識別価値を取得し、識別価値が選択条件を満たす１以上の有用領域を決定する、生産装置である。 Further, in the production apparatus of the third invention, in contrast to the first or second invention, the useful key area determination unit uses the amount of information acquired by the information amount acquisition unit to determine one or more key areas. A production device that obtains an identification value and determines one or more useful areas where the identification value satisfies a selection condition.
かかる構成により、２以上のカテゴリを含む対象画像から目的カテゴリの領域を精度高く検出するための情報を得るための有用な情報を取得できる。 With such a configuration, it is possible to acquire useful information for obtaining information for accurately detecting an area of a target category from a target image including two or more categories.
また、本第四の発明の画像処理装置は、１以上の有用キー領域情報が格納される有用キー領域情報格納部と、処理対象の画像である対象画像が格納される対象画像格納部と、対象画像を分割し、２以上の小画像片を取得する画像分割部と、画像分割部が取得した２以上の小画像片ごとに、１以上のキー領域を決定するキー領域決定部と、キー領域決定部が決定した１以上の各キー領域に関するキー領域情報と、有用キー領域情報格納部に格納されている各有用キー領域情報とが類似するか否かを検査し、検査結果に応じた小画像片情報量を、２以上の小画像片ごとに取得する小画像片情報量取得部と、小画像片情報量取得部が取得した２以上の小画像片情報量を反映させた情報を出力する出力部とを具備する画像処理装置である。 Further, the image processing apparatus of the fourth aspect of the present invention includes a useful key area information storage unit storing one or more pieces of useful key area information, a target image storage unit storing a target image which is an image to be processed, an image dividing unit that divides a target image and obtains two or more small image pieces; a key region determination unit that determines one or more key regions for each of the two or more small image pieces obtained by the image dividing unit; It is checked whether or not the key area information about one or more key areas determined by the area determination unit is similar to each useful key area information stored in the useful key area information storage unit, and a determination is made according to the inspection result. A small image piece information amount acquisition unit that acquires the small image piece information amount for each of two or more small image pieces, and information that reflects the two or more small image piece information amounts acquired by the small image piece information amount acquisition unit. and an output unit for outputting.
かかる構成により、２以上のカテゴリを含む対象画像から目的カテゴリの領域を精度高く検出するための情報が得られる。 With such a configuration, information for accurately detecting a target category area from a target image including two or more categories can be obtained.
また、本第五の発明の画像処理装置は、第四の発明に対して、小画像片情報量取得部が取得した２以上の小画像片情報量を反映させた出力画像を構成する画像構成部をさらに具備し、小画像片情報量取得部が取得した２以上の小画像片情報量を反映させた情報は、出力画像である、画像処理装置である。 Further, in the image processing apparatus of the fifth invention, in contrast to the fourth invention, an image configuration for forming an output image reflecting the two or more small image piece information amounts acquired by the small image piece information amount acquisition unit and the information reflecting the two or more small image piece information amounts acquired by the small image piece information amount acquisition unit is an output image.
かかる構成により、２以上のカテゴリを含む対象画像から目的カテゴリの領域を精度高く検出するための画像が得られる。 With such a configuration, an image for accurately detecting an area of a target category from a target image including two or more categories can be obtained.
また、本第六の発明の画像処理装置は、第四または第五の発明に対して、小画像片情報量取得部が取得した２以上の小画像片情報量を用いて、小画像片の識別価値である小画像片識別価値を取得する小画像片識別価値取得部をさらに具備し、出力部は、対象画像に対して、２以上の小画像片情報量に加えて、または２以上の小画像片情報量に代えて、小画像片識別価値取得部が取得した２以上の小画像片識別価値を反映させた情報を出力する、画像処理装置である。 Further, in the image processing apparatus of the sixth aspect of the present invention, in contrast to the fourth or fifth aspect, the small image piece information amount is obtained by using the two or more small image piece information amounts acquired by the small image piece information amount acquisition unit. a small image piece identification value obtaining unit for obtaining a small image piece identification value, which is an identification value; An image processing apparatus for outputting information reflecting two or more small image piece identification values acquired by a small image piece identification value acquiring unit instead of the small image piece information amount.
かかる構成により、２以上のカテゴリを含む対象画像から目的カテゴリの領域をより精度高く検出するための情報が得られる。 With such a configuration, information for more accurately detecting the region of the target category from the target image including two or more categories is obtained.
また、本第七の発明の画像処理装置は、第四から第六いずれか１つの発明に対して、小画像片情報量取得部は、類似条件の変更が受け付けられた場合に、当該変更された類似条件に基づいて、キー領域決定部が決定した１以上の各キー領域に関するキー領域情報と、有用キー領域情報格納部に格納されている各有用キー領域情報とが類似するか否かを検査し、当該検査結果に応じた新たな小画像片情報量を、２以上の小画像片ごとに取得し、出力部は、新たな小画像片情報量を反映させた情報を出力する、画像処理装置である。 Further, in the image processing apparatus of the seventh invention, in the image processing apparatus of any one of the fourth to sixth inventions, when a change of the similarity condition is received, the small image piece information amount acquisition unit Based on the similarity condition, it is determined whether or not the key region information related to one or more key regions determined by the key region determination unit is similar to each useful key region information stored in the useful key region information storage unit. a new small image piece information amount corresponding to the inspection result is obtained for each of two or more small image pieces, and an output unit outputs information reflecting the new small image piece information amount; processing equipment.
かかる構成により、受け付けられた類似条件の変更に応じて、動的に、出力画像を変更できる。 With such a configuration, it is possible to dynamically change the output image according to the change of the received similarity condition.
また、本第八の発明の画像処理装置は、第四から第七のいずれかの発明に対して、有用キー領域情報格納部には、１以上の目的有用キー領域情報と１以上の他有用キー領域情報とが格納され小画像片情報量取得部は、キー領域決定部が決定した１以上の各キー領域に関するキー領域情報と、有用キー領域情報格納部に格納されている各目的有用キー領域情報とが類似するか否かを検査し、当該検査結果に応じた目的小画像片情報量を、２以上の小画像片ごとに取得し、かつキー領域決定部が決定した１以上の各キー領域に関するキー領域情報と、有用キー領域情報格納部に格納されている各他有用キー領域情報とが類似するか否かを検査し、当該検査結果に応じた他小画像片情報量を、２以上の小画像片ごとに取得し、出力部は、対象画像に対して、小画像片ごとの、小画像片情報量取得部が取得した目的小画像片情報量と他小画像片情報量とを反映させた情報を出力する、画像処理装置である。 Further, in the image processing apparatus of the eighth invention, in contrast to any one of the fourth to seventh inventions, the useful key area information storage unit stores one or more purpose useful key area information and one or more other useful key area information. Key region information is stored, and a small image piece information amount acquisition unit stores key region information related to one or more key regions determined by the key region determination unit, and each purpose useful key stored in the useful key region information storage unit It inspects whether or not the area information is similar, acquires the target small image piece information amount according to the inspection result for each of the two or more small image pieces, and obtains one or more each of the key area determination unit Inspecting whether or not the key area information on the key area is similar to each other useful key area information stored in the useful key area information storage unit, and calculating the other small image piece information amount according to the inspection result, Each of two or more small image pieces is obtained, and the output unit calculates the target small image piece information amount and the other small image piece information amount obtained by the small image piece information amount obtaining unit for each small image piece with respect to the target image. It is an image processing device that outputs information reflecting the above.
かかる構成により、２以上のカテゴリを含む医用画像から目的カテゴリの領域をより精度高く検出するための情報が得られる。 With such a configuration, information for detecting the region of the target category with higher accuracy from a medical image containing two or more categories can be obtained.
また、本第九の発明の画像処理装置は、第四から第八のいずれかの発明に対して、小画像片情報量取得部が取得した小画像片情報量と閾値とを比較し、小画像片情報量が閾値より大きい場合に検知信号を取得する検知信号取得部をさらに具備し、
出力部は、検知信号を出力する、画像処理装置である。
In addition, the image processing apparatus of the ninth invention compares the small image piece information amount acquired by the small image piece information amount acquiring unit with a threshold, further comprising a detection signal acquisition unit that acquires a detection signal when the image piece information amount is greater than a threshold;
The output unit is an image processing device that outputs a detection signal.
かかる構成により、２以上のカテゴリを含む医用画像から目的カテゴリの領域をより精度高く検出するための情報が得られる。 With such a configuration, information for detecting the region of the target category with higher accuracy from a medical image containing two or more categories can be obtained.
また、本第十の発明の画像処理装置は、第四から第九のいずれかの発明に対して、対象画像は、医用画像である、画像処理装置である。 Further, the image processing apparatus of the tenth invention is an image processing apparatus, in contrast to any one of the fourth to ninth inventions, wherein the target image is a medical image.
かかる構成により、２以上のカテゴリを含む医用画像から目的カテゴリ（例えば、癌）の領域を精度高く検出するための画像が得られる。 With such a configuration, it is possible to obtain an image for accurately detecting a region of a target category (for example, cancer) from a medical image containing two or more categories.
本発明による画像処理装置によれば、２以上のカテゴリを含む対象画像から目的カテゴリの領域を精度高く検出するための画像が得られる。 According to the image processing apparatus of the present invention, it is possible to obtain an image for accurately detecting an area of a target category from a target image including two or more categories.
以下、画像処理装置等の実施形態について図面を参照して説明する。なお、実施の形態において同じ符号を付した構成要素は同様の動作を行うので、再度の説明を省略する場合がある。 Embodiments of an image processing apparatus and the like will be described below with reference to the drawings. It should be noted that, since components denoted by the same reference numerals in the embodiments perform similar operations, repetitive description may be omitted.
（実施の形態１）
本実施の形態において、画像からキー領域を決定し、当該キー領域の情報量を取得し、当該情報量を用いて、有用キー領域を決定し、当該有用キー領域情報を蓄積する有用キー領域情報の生産装置について説明する。なお、本実施の形態において、情報量を用いて、識別価値を取得し、情報量に基づく当該識別価値を用いて、有用キー領域を決定することは好適である。
(Embodiment 1)
In the present embodiment, useful key area information for determining a key area from an image, obtaining the amount of information of the key area, determining the useful key area using the amount of information, and accumulating the useful key area information production equipment will be described. In the present embodiment, it is preferable to obtain an identification value using the amount of information, and determine a useful key region using the identification value based on the amount of information.
また、本実施の形態において、処理対象の画像を分割し、取得した２以上の各小画像片ごとに、１以上のキー領域を決定し、当該１以上の各キー領域のキー領域情報が有用キー領域情報に類似するか否かを判断し、判断結果に応じた各小画像片の画像を含む出力画像を構成し、出力する画像処理装置について説明する。 Further, in the present embodiment, the image to be processed is divided, one or more key regions are determined for each of two or more acquired small image pieces, and the key region information of each of the one or more key regions is useful. An image processing apparatus that determines whether or not the image is similar to the key area information, constructs and outputs an output image including the image of each small image piece according to the determination result will be described.
なお、判断結果に応じた各小画像片の画像を含む出力画像は、例えば、類似する有用キー領域情報の数に応じた小画像片ごとの情報量を反映させた出力画像である。また、判断結果に応じた各小画像片の画像を含む出力画像は、例えば、小画像片ごとの情報量を用いて取得された識別価値を反映させた出力画像である。また、判断結果に応じた各小画像片の画像を含む出力画像は、例えば、情報量と識別価値とを反映させた出力画像である。 The output image including the image of each small image piece according to the judgment result is, for example, an output image reflecting the amount of information for each small image piece according to the number of similar useful key region information. Also, the output image including the image of each small image piece according to the judgment result is, for example, an output image reflecting the identification value obtained using the amount of information for each small image piece. Also, the output image including the image of each small image piece according to the determination result is, for example, an output image reflecting the amount of information and the identification value.
図１は、本実施の形態における生産装置１のブロック図である。なお、生産装置１は、後述する有用キー領域情報を取得し、蓄積する装置である。また、有用キー領域情報は、通常、実施の形態２で説明する画像処理装置が使用する情報である。
FIG. 1 is a block diagram of a
生産装置１は、第一格納部１１、第一受付部１２、第一処理部１３、および第一出力部１４を備える。第一格納部１１は、画像格納部１１１、参照画像格納部１１２、条件格納部１１３、および有用キー領域情報格納部１１４を備える。第一処理部１３は、キー領域決定部１３１、情報量取得部１３２、有用キー領域決定部１３３、および蓄積部１３４を備える。
The
図２は、本実施の形態における画像処理装置２のブロック図である。画像処理装置２は、第二格納部２１、第二受付部２２、第二処理部２３、および第二出力部２４を備える。第二格納部２１は、有用キー領域情報格納部１１４、および対象画像格納部２１１を備える。第二処理部２３は、画像分割部２３１、キー領域決定部２３２、小画像片情報量取得部２３３、小画像片識別価値取得部２３４、および画像構成部２３５を備える。第二出力部２４は、画像出力部２４１を備える。
FIG. 2 is a block diagram of the image processing device 2 in this embodiment. The image processing device 2 includes a second storage section 21 , a
なお、生産装置１と画像処理装置２とは、一体の装置でも良い。また、生産装置１と画像処理装置２とが実現する処理を、３以上の装置で分担して行っても良い。
Note that the
生産装置１を構成する第一格納部１１には、各種の情報が格納される。各種の情報とは、例えば、後述する画像、後述する判断条件、後述する有用キー領域情報である。
Various types of information are stored in the first storage unit 11 that constitutes the
画像格納部１１１は、１または２以上の画像が格納される。ここでの画像は、後述する有用キー領域情報を取得する元になる画像である。画像は、例えば、医用画像である。画像は、例えば、ｆＭＲＩ画像、ＰＥＴ画像、超音波画像等であり、その種類やデータ構造等は問わない。 The image storage unit 111 stores one or more images. The image here is an image from which useful key region information, which will be described later, is obtained. The image is, for example, a medical image. The image is, for example, an fMRI image, a PET image, an ultrasound image, etc., and its type and data structure are not limited.
参照画像格納部１１２は、２以上の参照画像が格納される。参照画像は、キー領域の情報量を取得する際に使用される画像である。２以上の各参照画像は、２以上のカテゴリのうちのいずれかのカテゴリに対応付いている。２以上の各参照画像には、カテゴリを識別するカテゴリ識別子が対応付いている。例えば、カテゴリが「ガン」または「正常」である場合、２以上の各参照画像は、「ガン」の画像であるか、「正常」である画像である。
The reference
キー領域とは、画像の中の領域であり、情報量の多い領域である。キー領域は、例えば、画像から取得されたＳＩＦＴ特徴量を用いて取得されるキーポイントである。なお、領域とは、１つの画素または２以上の画素の集合である。キー領域は、対象画像の前記カテゴリを区別するために有用な少領域であればよく、例えば、歩行者、車両認識に用いられるViola-Jones法のモザイク状の特徴画像であってもよい。 A key area is an area in an image and has a large amount of information. A key region is, for example, a keypoint obtained using a SIFT feature obtained from an image. A region is one pixel or a set of two or more pixels. The key region may be a small region useful for distinguishing the categories of the target image, and may be, for example, a mosaic feature image of the Viola-Jones method used for pedestrian and vehicle recognition.
カテゴリとは、画像の中の一部の領域の種類である。カテゴリは、例えば、「ガン」の領域、「正常」である細胞の領域である。また、カテゴリは、２でも良いし、３以上でも良い。カテゴリが３以上である場合は、例えば、「ガン」「肝硬変」「正常」である。なお、ここで、検出対象のカテゴリ（例えば、「ガン」の領域）を、適宜、目的カテゴリと言う。また、検出対象以外のカテゴリ（例えば、「正常」の領域）を、適宜、他カテゴリと言う。 A category is a type of some area in an image. The categories are, for example, a “cancer” region and a “normal” cell region. Also, the number of categories may be two, or three or more. If there are three or more categories, for example, they are "cancer", "liver cirrhosis", and "normal". Here, the category to be detected (for example, the area of "cancer") is appropriately called a target category. In addition, categories other than the detection target (for example, “normal” regions) are appropriately referred to as other categories.
参照画像は、例えば、目的参照画像、または他参照画像である。目的参照画像は、目的カテゴリの画像（例えば、「ガン」の領域からなる画像）であり、目的カテゴリに対応付く参照画像である。他参照画像は、他カテゴリの画像（例えば、「正常」の領域からなる画像）であり、他カテゴリに対応付く参照画像である。 The reference image is, for example, a target reference image or other reference image. The target reference image is an image of the target category (for example, an image consisting of a “cancer” area) and is a reference image associated with the target category. The other reference image is an image of another category (for example, an image consisting of a “normal” area), and is a reference image associated with the other category.
条件格納部１１３には、１以上の条件が格納される。条件は、例えば、キー条件、選択条件、後述する類似条件である。
One or more conditions are stored in the
キー条件は、画像からキー領域を決定するための条件である。キー条件は、例えば、画像から取得されたＳＩＦＴ特徴量を用いて取得されるキーポイントであると判断されるための条件である。 A key condition is a condition for determining a key area from an image. The key condition is, for example, a condition for determining that the keypoint is acquired using the SIFT feature amount acquired from the image.
選択条件は、キー領域から、後述する有用キー領域を選択するための条件である。選択条件は、例えば、後述する識別価値が閾値以上であること、後述する識別価値が閾値より大きいことである。 The selection condition is a condition for selecting a useful key area, which will be described later, from the key areas. The selection condition is, for example, that the later-described identification value is equal to or greater than a threshold, or that the later-described identification value is greater than the threshold.
有用キー領域情報格納部１１４には、１または２以上の有用キー領域情報が格納される。有用キー領域情報は、蓄積部１３４が蓄積した情報である。
The useful key area
有用キー領域情報は、有用キー領域に関する情報である。有用キー領域情報は、例えば、有用キー領域の２以上の特徴量の集合である特徴量ベクトルである。特徴量ベクトルを構成する２以上の特徴量は、例えば、画像から取得される１以上のＳＩＦＴ特徴量を含む。特徴量ベクトルを構成する２以上の特徴量は、例えば、画像から取得される１以上のＨＯＧ特徴量を含む。有用キー領域は、キー領域の中で、目的カテゴリの領域（例えば、ガン領域）を識別するために有用な領域である。 The useful key area information is information about useful key areas. The useful key region information is, for example, a feature quantity vector that is a set of two or more feature quantities of useful key regions. The two or more feature amounts forming the feature amount vector include, for example, one or more SIFT feature amounts obtained from the image. The two or more feature amounts forming the feature amount vector include, for example, one or more HOG feature amounts obtained from the image. A useful key region is a region that is useful for identifying a target category region (eg, a cancer region) among key regions.
有用キー領域情報格納部１１４には、１以上の目的有用キー領域情報と、１以上の他有用キー領域情報とが格納されることは好適である。なお、目的カテゴリを識別する能力の高い有用キー領域の有用キー領域情報を目的有用キー領域情報と言う。また、他カテゴリを識別する能力の高い有用キー領域の有用キー領域情報を他有用キー領域情報と言う。
It is preferable that the useful key area
第一受付部１２は、各種の指示や情報を受け付ける。各種の指示や情報は、例えば、開始指示、画像、参照画像、類似条件である。開始指示とは、有用キー領域情報の取得の開始の指示である。
The
類似条件の受け付けとは、２つのベクトルが類似するか否かを判断する際の閾値の受け付けでも良い。また、類似条件の受け付けは、例えば、数値である閾値の受け付け、スライダーバーによる閾値の受け付け等であり、受け付け方法は問わない。 Acceptance of a similarity condition may be acceptance of a threshold for determining whether or not two vectors are similar. Acceptance of a similarity condition is, for example, acceptance of a numerical threshold value, acceptance of a threshold value by a slider bar, or the like, and any acceptance method is acceptable.
なお、ここで、受け付けとは、キーボードやマウス、タッチパネルなどの入力デバイスから入力された情報の受け付け、有線もしくは無線の通信回線を介して送信された情報の受信、光ディスクや磁気ディスク、半導体メモリなどの記録媒体から読み出された情報の受け付けなどを含む概念である。 Here, reception means reception of information input from an input device such as a keyboard, mouse, or touch panel, reception of information transmitted via a wired or wireless communication line, optical disk, magnetic disk, semiconductor memory, etc. This is a concept including acceptance of information read from the recording medium.
また、各種の指示や情報の入力手段は、タッチパネルやキーボードやマウスやメニュー画面によるもの等、何でも良い。 Also, any means such as a touch panel, a keyboard, a mouse, or a menu screen may be used as means for inputting various instructions and information.
第一処理部１３は、各種の処理を行う。各種の処理とは、例えば、キー領域決定部１３１、情報量取得部１３２、有用キー領域決定部１３３、蓄積部１３４が行う処理である。
The
キー領域決定部１３１は、条件格納部１１３のキー条件を満たす１以上のキー領域を画像から決定する。なお、画像は、画像格納部１１１の画像である。キー領域を決定することは、キー領域情報を取得すること、キー領域を特定する情報（例えば、画像内の１以上の座標値）を取得することである。キー領域情報とは、キー領域に関する情報である。キー領域情報は、例えば、キー領域の２以上の特徴量の集合である特徴量ベクトルである。特徴量ベクトルを構成する２以上の特徴量は、例えば、画像から取得される１以上のＳＩＦＴ特徴量を含む。特徴量ベクトルを構成する２以上の特徴量は、例えば、画像から取得される１以上のＨＯＧ特徴量を含む。
The key
キー領域決定部１３１は、１または２以上のキーポイントを画像から決定する。なお、画像からキーポイントを決定する処理は公知技術であるので、ここでの詳細な説明は省略する。また、キー領域決定部１３１は、例えば、対象となる画像から、キーポイントのキー領域情報を取得する。
The key
情報量取得部１３２は、キー領域決定部１３１が決定した１以上の各キー領域の情報量を取得する。
The information
情報量とは、キー領域に関する情報である。情報量は、目的カテゴリの領域を決定する能力に関する情報である。 The amount of information is information about the key area. The amount of information is information about the ability to determine the domain of the target category.
情報量取得部１３２は、例えば、第一検査と第二検査とを行い、第一検査の結果と第二検査の結果とを用いて、１以上の各キー領域の情報量を取得する、
The information
第一検査とは、キー領域決定部１３１が決定した１以上の各キー領域に対応する領域が１以上の各目的参照画像に存在するか否かの検査である。
The first inspection is an inspection as to whether or not an area corresponding to each of the one or more key areas determined by the key
第二検査とは、キー領域決定部１３１が決定した１以上の各キー領域に対応する領域が１以上の各他参照画像に存在するか否かの検査である。
The second inspection is an inspection of whether or not an area corresponding to one or more key areas determined by the key
なお、キー領域に対応する領域とは、キー領域情報に類似する領域情報に対する領域である。キー領域に対応する領域とは、例えば、キー領域情報と類似条件を満たす領域情報に対する領域である。類似条件は、２つの領域情報（例えば、ベクトル）の類似度が閾値以上であること、または閾値より大きいことである。類似条件は、条件格納部１１３に格納されている。
Note that the area corresponding to the key area is an area for area information similar to the key area information. The area corresponding to the key area is, for example, the area for the area information that satisfies the key area information and the similarity condition. The similarity condition is that the degree of similarity between two pieces of region information (for example, vectors) is equal to or greater than a threshold. Similar conditions are stored in the
情報量取得部１３２は、例えば、第一検査の結果、キー領域に対応する領域が存在する目的参照画像が多いほど、当該キー領域に対して、大きな情報量を取得する。
For example, the information
情報量取得部１３２は、例えば、第二検査の結果、キー領域に対応する領域が存在する他参照画像が多いほど、当該キー領域に対して、大きい情報量を取得する。情報量取得部１３２は、例えば、第二検査の結果、キー領域に対応する領域が存在する他参照画像が多いほど、当該キー領域に対して、小さい情報量を取得しても良い。
For example, the information
情報量取得部１３２は、例えば、１以上の各目的参照画像に対して、キー領域情報と最も類似する領域情報を取得し、かかる類似度をパラメータとする増加関数（例えば、加算）により、情報量を取得する。
For example, the information
情報量取得部１３２は、例えば、１以上の各他参照画像に対して、キー領域情報と最も類似する領域情報を取得し、かかる類似度をパラメータとする増加関数により、情報量を取得する。情報量取得部１３２は、例えば、１以上の各他参照画像に対して、キー領域情報と最も類似する領域情報を取得し、かかる類似度をパラメータとする減少関数（例えば、減算）により、情報量を取得する。
The information
情報量取得部１３２は、例えば、以下の数式１、数式２、数式３を用いて、キー領域に対応する情報量を算出する。
The information
ここで、上記の数式において、「Ki」「Ki’」は、ｉ番目のキー領域（例えば、ｉ番目のキーポイント）である。「h(Ki)」は、ｉ番目のキー領域の情報量である。「C」「C’」は、カテゴリである。ここで、カテゴリは、例えれば、「ガン」は「C=1」、「正常」は「C=2」である。また、「p(Ki，C)」は、キー領域
??
??
のカテゴリCについての確率分布である。「q(C)」は、キー領域全体のカテゴリCについての確率分布である。数式３において、「q(C)」は、参照画像を一枚選んだ時に、それがカテゴリCの画像である確率である。「Nc」は、対象とするカテゴリの数である。例えば、ガンと正常の識別の場合は、「Nc=2」である。もカテゴリである。「N(Ki,C)」は、カテゴリCの参照画像の内、キー領域に類似するキー領域がある画像の枚数である。
Here, in the above formula, 'K i ' and 'K i' ' are the i-th key region (for example, the i-th key point). "h(K i )" is the amount of information in the i-th key area. "C" and "C'" are categories. Here, the categories are, for example, "C=1" for "cancer" and "C=2" for "normal". Also, ``p(K i , C)'' is the key region
??
??
is the probability distribution for category C of "q(C)" is the probability distribution for category C over the key region. In Equation 3, "q(C)" is the probability that one reference image is an image of category C when it is selected. " Nc " is the number of categories of interest. For example, for cancer/normal discrimination, "N c =2". is also a category. “N(K i , C)” is the number of images among reference images of category C that have key regions similar to the key region.
なお、情報量取得部１３２は、数式３に代えて、数式４、数式５により、「q(C)」を算出しても良い。
Note that the information
数式４、５を用いて「q(C)」を算出する方法は、キー領域「Ki」に類似するキー領域がある画像の枚数を用いて計算する方法である。数式４、５では、「n(C)」の代わりに、カテゴリの参照画像の内、キー領域に類似するキー領域がある画像の枚数を全てのキー領域について足し上げた枚数「Nk(C)」（数式４参照）を使用して、情報量取得部１３２は、「q(C)」を算出する（数式５参照）。
A method of calculating 'q(C)' using
有用キー領域決定部１３３は、情報量取得部１３２が取得した情報量を用いて、有用なキー領域を選択するための選択条件を満たす１以上の有用キー領域を決定する。
The useful key
有用キー領域決定部１３３は、例えば、情報量取得部１３２が取得した情報量を用いて、１以上の各キー領域の識別価値を取得し、識別価値が選択条件を満たす１以上の有用領域を決定する。なお、識別価値とは、目的カテゴリを識別する能力に関する情報である。なお、一のキー領域の識別価値を取得する際に用いる情報量は、当該一のキー領域の情報量である。
The useful key
また、選択条件は、例えば、識別価値が閾値以上、識別価値が閾値より大きいこと、識別価値が上位Ｎ個のキー領域であること等である。 The selection conditions are, for example, that the identification value is equal to or greater than a threshold value, that the identification value is greater than the threshold value, that the identification value is among the top N key regions, and the like.
なお、有用キー領域決定部１３３は、例えば、以下の数式６を用いて、識別価値「v(Ki,C)」を算出する。
Note that the useful key
ここで、採り得るカテゴリCが「ガン」「正常」の２つである場合、有用キー領域「Ki」の「ガン」を識別する識別価値「v(Ki,ガン)」は、以下の数式７により算出され得る。
Here, if there are two possible categories C, ``cancer'' and ``normal'', the identification value ``v(K i , cancer)'' for identifying ``cancer'' in the useful key region ``K i '' is as follows: It can be calculated by
有用キー領域決定部１３３は、例えば、目的参照情報が大きいほど、大きな識別価値を取得する。有用キー領域決定部１３３は、例えば、目的参照情報をパラメータとする増加関数により識別価値を取得する。なお、目的参照情報とは、キー領域に対応する領域を有する目的参照画像に関する情報である。目的参照情報は、例えば、キー領域に対応する領域を有する目的参照画像の数をパラメータとする増加関数により算出される数である。目的参照情報は、例えば、上述した「p(Ki，目的カテゴリ)」（数式２）である。
For example, the useful key
有用キー領域決定部１３３は、例えば、他参照情報が小さいほど、大きな識別価値を取得する。有用キー領域決定部１３３は、例えば、他参照情報をパラメータとする減少関数により識別価値を取得する。なお、他参照情報とは、キー領域に対応する領域を有する他参照画像に関する情報である。他参照情報は、例えば、キー領域に対応する領域を有する他参照画像の数をパラメータとする増加関数により算出される数である。他参照情報は、例えば、上述した「p(Ki，他カテゴリ)」（数式２）である。
For example, the useful key
有用キー領域決定部１３３は、情報量取得部１３２が取得した情報量が選択条件を満たす１以上の有用領域を決定しても良い。かかる場合、選択条件は、例えば、情報量が閾値以上であること、情報量が閾値より大きいことである。なお、かかる場合の情報量は、キー領域に対応する領域が存在する目的参照画像が多いほど大きな情報量であり、キー領域に対応する領域が存在する他参照画像が多いほど小さな情報量となる情報である。
The useful key
有用キー領域決定部１３３は、上記では、目的カテゴリを識別する能力の高い有用キー領域を決定した。しかし、有用キー領域決定部１３３は、他カテゴリを識別する能力の高い有用キー領域を決定しても良い。有用キー領域決定部１３３は、目的カテゴリと他カテゴリとを入れ替えて、上述した処理を行えば、有用キー領域決定部１３３は、他カテゴリを識別する能力の高い有用キー領域を決定できる。３以上のカテゴリが存在する場合、有用キー領域決定部１３３は、カテゴリごとに、当該カテゴリを識別する能力の高い有用キー領域を決定することは好適である。
The useful key
蓄積部１３４は、有用キー領域決定部１３３が決定した１以上の有用キー領域に関する有用キー領域情報を蓄積する。蓄積部１３４は、例えば、有用キー領域情報を有用キー領域情報格納部１１４に蓄積する。
The
蓄積部１３４は、有用キー領域情報を、情報量取得部１３２が取得した情報量に対応付けて蓄積することは好適である。また、蓄積部１３４は、有用キー領域情報を、有用キー領域決定部１３３が取得した識別価値に対応付けて蓄積することは好適である。
It is preferable that the
蓄積部１３４は、１以上の目的有用キー領域情報と、１以上の他有用キー領域情報とを蓄積することは好適である。かかる場合、蓄積部１３４は、カテゴリ識別子に対応付けて有用キー領域情報を蓄積することは好適である。なお、カテゴリは３以上でも良い。
The
第一出力部１４は、各種の情報を出力する。各種の情報は、例えば、有用キー領域情報、処理が終了した旨の情報である。
The
ここで、出力とは、ディスプレイへの表示、プロジェクターを用いた投影、プリンタでの印字、音出力、外部の装置への送信、記録媒体への蓄積、他の処理装置や他のプログラムなどへの処理結果の引渡しなどを含む概念である。 Here, output means display on a display, projection using a projector, printing on a printer, sound output, transmission to an external device, storage on a recording medium, and transmission to another processing device or other program. This is a concept that includes delivery of processing results.
画像処理装置２を構成する第二格納部２１には、各種の情報が格納される。各種の情報とは、例えば、後述する対象画像、有用キー領域情報である。なお、有用キー領域情報格納部１１４の１または２以上の有用キー領域情報は、生産装置１が取得した有用キー領域情報であることは好適である。
Various types of information are stored in the second storage unit 21 that constitutes the image processing apparatus 2 . Various types of information are, for example, a target image and useful key area information, which will be described later. One or more pieces of useful key area information in useful key area
対象画像格納部２１１には、１または２以上の対象画像が格納される。対象画像とは、処理対象の画像である。対象画像は、後述する出力画像の元になる画像である。対象画像は、例えば、医用画像である。対象画像は、例えば、ガンの領域を含む医用画像である。対象画像は、例えば、ｆＭＲＩ画像、ＰＥＴ画像、超音波画像等であり、その種類は問わない。対象画像は、例えば、ＴＩＦＦ、ＰＮＧ、ＪＰＥＧ等の画像であるが、そのデータ構造等は問わない。 One or more target images are stored in the target image storage unit 211 . A target image is an image to be processed. The target image is an image from which an output image, which will be described later, is based. The target image is, for example, a medical image. The target image is, for example, a medical image including a cancer region. The target image is, for example, an fMRI image, a PET image, an ultrasound image, or the like, and any type of image can be used. The target image is, for example, an image of TIFF, PNG, JPEG, etc., but its data structure is not limited.
第二受付部２２は、各種の指示や情報を受け付ける。各種の指示や情報は、例えば、開始指示、対象画像、有用キー領域情報、変更される類似条件である。開始指示とは、出力画像の出力処理の開始の指示である。
The
各種の指示や情報の入力手段は、タッチパネルやキーボードやマウスやメニュー画面によるもの等、何でも良い。 Any means such as a touch panel, a keyboard, a mouse, or a menu screen may be used as means for inputting various instructions and information.
第二処理部２３は、各種の処理を行う。各種の処理とは、例えば、画像分割部２３１、キー領域決定部２３２、小画像片情報量取得部２３３、小画像片識別価値取得部２３４、画像構成部２３５が行う処理である。
The
第二処理部２３は、例えば、後述する小画像片情報量取得部２３３が取得した小画像片情報量と閾値とを比較し、小画像片情報量が閾値より大きい場合に検知信号を取得する。かかる検知信号の取得処理は、図示しない検知信号取得部が行っても良い。また、検知信号は、例えば、小画像片が目的カテゴリに該当することを示す情報である。なお、閾値は、第二格納部２１に格納されている。
For example, the
画像分割部２３１は、対象画像を分割し、２以上の小画像片を取得する。対象画像の分割方法は問わない。小画像片は、対象画像が分割された結果の一の部分である。小画像片は、固定サイズ（例えば、ｘドット×ｙドットのサイズ（ｘ，ｙは自然数））であることは好適であるが、固定のサイズでなくても良い。小画像片のサイズも問わない。小画像片は、２以上の画素を有する。また、小画像片は、矩形であることは好適であるが、その形状は問わない。
The
キー領域決定部２３２は、画像分割部２３１が取得した２以上の小画像片ごとに、１以上のキー領域を決定する。キー領域決定部２３２が、画像からキー領域を決定する処理は、キー領域決定部１３１と同じ処理で良い。
The key
小画像片情報量取得部２３３は、キー領域決定部２３２が決定した１以上の各キー領域に関するキー領域情報と、有用キー領域情報格納部１１４に格納されている各有用キー領域情報とが類似するか否かを検査し、検査結果に応じた小画像片情報量を、２以上の小画像片ごとに取得する。小画像片情報量とは、小画像片の情報量である。
The small image piece information
なお、類似することは、通常、類似条件を満たすことである。ここでの類似条件は、例えば、「類似度が閾値以上であること」「類似度が閾値より大きいこと」である。 It should be noted that being similar usually means satisfying a similarity condition. The similarity condition here is, for example, "the degree of similarity is equal to or greater than the threshold" and "the degree of similarity is greater than the threshold".
また、小画像片情報量取得部２３３は、通常、キー領域情報と有用キー領域情報格納部１１４に格納されている１以上の各有用キー領域情報との類似度を算出し、類似度が類似条件を満たすか否かにより、類似するか否かを判断する。
In addition, the small image piece information
小画像片情報量取得部２３３は、例えば、上記の検査の結果、類似する有用キー領域情報が多いほど、大きな小画像片情報量を取得する。
The small image piece information
小画像片情報量取得部２３３は、例えば、小画像片の中の１以上の各キー領域のキー領域情報のうち、いずれかの有用キー領域情報と類似するキー領域情報が多いほど、大きな小画像片情報量を取得する。
For example, the small image piece information
小画像片情報量取得部２３３は、例えば、小画像片の中の１以上の各キー領域のキー領域情報のうち、いずれかの有用キー領域情報と類似すると判断した１以上の各キー領域情報の情報量をパラメータとする増加関数により、小画像片情報量を算出する。なお、かかる増加関数は、例えば、加算である。
For example, the small image piece information
小画像片情報量取得部２３３は、例えば、小画像片の中の１以上の各キー領域のキー領域情報と類似する１以上の各有用キー領域情報と対になる情報量を有用キー領域情報格納部１１４から取得し、当該情報量をパラメータとする増加関数（例えば、加算）により、小画像片情報量を算出する。
For example, the small image piece information
小画像片情報量取得部２３３は、２以上の小画像片ごとに、目的小画像片情報量と他小画像片情報量とを取得することは好適である。つまり、小画像片情報量取得部２３３は、キー領域決定部２３２が決定した１以上の各キー領域に関するキー領域情報と、有用キー領域情報格納部１１４に格納されている各目的有用キー領域情報とが類似するか否かを検査し、当該検査結果に応じた目的小画像片情報量を、２以上の小画像片ごとに取得し、かつキー領域決定部２３２が決定した１以上の各キー領域に関するキー領域情報と、有用キー領域情報格納部１１４に格納されている各他有用キー領域情報とが類似するか否かを検査し、当該検査結果に応じた他小画像片情報量を、２以上の小画像片ごとに取得することは好適である。
It is preferable that the small image piece information
小画像片識別価値取得部２３４は、小画像片ごとに、小画像片情報量取得部２３３が取得した小画像片情報量を用いて、小画像片の識別価値である小画像片識別価値を取得する。
The small image piece identification
小画像片識別価値取得部２３４は、例えば、小画像片の中の１以上の各キー領域のキー領域情報のうち、いずれかの有用キー領域情報と類似すると判断した１以上の各キー領域情報の識別価値をパラメータとする増加関数により、小画像片情報量を算出する。なお、かかる増加関数は、例えば、加算である。
The small image piece identification
また、小画像片識別価値取得部２３４は、例えば、小画像片の中の１以上の各キー領域のキー領域情報と類似する１以上の各有用キー領域情報と対になる識別価値を有用キー領域情報格納部１１４から取得し、当該識別価値をパラメータとする増加関数（例えば、加算）により、小画像片識別価値を算出する。
In addition, the small image fragment identification
また、小画像片識別価値取得部２３４は、例えば、小画像片情報量をパラメータとする増加関数により、小画像片識別価値を算出する。
In addition, the small image piece identification
小画像片識別価値取得部２３４は、例えば、小画像片ごとに、目的小画像片情報量と他小画像片情報量との差異に関する情報（例えば、差、比）を算出し、当該差異に関する情報を用いて小画像片識別価値を取得する。なお、小画像片識別価値は、差異に関する情報でも良い。小画像片識別価値取得部２３４は、例えば、小画像片ごとに、目的小画像片情報量をパラメータとする増加関数であり、他小画像片情報量をパラメータとする減少関数を用いて、小画像片識別価値を算出する。
For example, for each small image piece, the small image piece identification
画像構成部２３５は、小画像片情報量取得部２３３が取得した２以上の小画像片情報量を反映させた出力画像を構成する。画像構成部２３５は、例えば、小画像片ごとに、小画像片情報量を反映させた出力画像を構成する。
The
なお、小画像片情報量を反映させた出力画像とは、小画像片識別価値を反映させた出力画像でも良い。画像構成部２３５は、例えば、小画像片識別価値取得部２３４が取得した２以上の小画像片識別価値を反映させた出力画像を構成する。
The output image reflecting the small image piece information amount may be an output image reflecting the small image piece identification value. The
画像構成部２３５は、例えば、小画像片情報量取得部２３３が取得した２以上の小画像片情報量、および小画像片識別価値取得部２３４が取得した２以上の小画像片識別価値を反映させた出力画像を構成する。小画像片の小画像片情報量、または／および小画像片識別価値を反映させた出力画像とは、当該小画像片の小画像片情報量に対応する画像パラメータ、または／および当該小画像片の小画像片識別価値に対応する画像パラメータを有する小画像片を配置した出力画像である。画像パラメータとは、画像のパラメータであり、例えば、輝度、明度、彩度、色である。
The
画像構成部２３５は、対象画像に対して、小画像片ごとの小画像片情報量または小画像片識別価値を反映させた出力画像を構成しても良い。
The
第二出力部２４は、各種の情報を出力する。各種の情報とは、例えば、小画像片情報量取得部２３３が取得した２以上の小画像片情報量を反映させた情報である。小画像片情報量取得部２３３が取得した２以上の小画像片情報量を反映させた情報は、上述した小画像片識別価値を反映させた情報でも良い。また、かかる小画像片情報量取得部２３３が取得した２以上の小画像片情報量を反映させた情報は、例えば、出力画像である。また、かかる小画像片情報量取得部２３３が取得した２以上の小画像片情報量を反映させた情報は、例えば、検知信号である。なお、第二出力部２４が出力画像を出力しない場合、画像構成部２３５や画像出力部２４１は不要である。
The
画像出力部２４１は、画像構成部２３５が構成した出力画像を出力する。ここで、出力とは、ディスプレイへの表示、プロジェクターを用いた投影、プリンタでの印字、外部の装置への送信、記録媒体への蓄積、他の処理装置や他のプログラムなどへの処理結果の引渡しなどを含む概念である。
The
第一格納部１１、画像格納部１１１、参照画像格納部１１２、条件格納部１１３、有用キー領域情報格納部１１４、第二格納部２１、および対象画像格納部２１１は、不揮発性の記録媒体が好適であるが、揮発性の記録媒体でも実現可能である。
The first storage unit 11, the image storage unit 111, the reference
第一格納部１１等に情報が記憶される過程は問わない。例えば、記録媒体を介して情報が第一格納部１１等で記憶されるようになってもよく、通信回線等を介して送信された情報が第一格納部１１等で記憶されるようになってもよく、あるいは、入力デバイスを介して入力された情報が第一格納部１１等で記憶されるようになってもよい。 It does not matter how the information is stored in the first storage unit 11 or the like. For example, information may be stored in the first storage section 11 or the like via a recording medium, and information transmitted via a communication line or the like may be stored in the first storage section 11 or the like. Alternatively, information input via an input device may be stored in the first storage unit 11 or the like.
第一受付部１２、および第二受付部２２は、タッチパネルやキーボード等の入力手段のデバイスドライバーや、メニュー画面の制御ソフトウェア等で実現され得る。
The
第一処理部１３、キー領域決定部１３１、情報量取得部１３２、有用キー領域決定部１３３、蓄積部１３４、第二処理部２３、画像分割部２３１、キー領域決定部２３２、小画像片情報量取得部２３３、小画像片識別価値取得部２３４、および画像構成部２３５は、通常、プロセッサやメモリ等から実現され得る。第一処理部１３等の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。なお、プロセッサは、例えば、ＣＰＵ、ＭＰＵ、ＧＰＵ等であり、その種類は問わない。
First processing
第一出力部１４、第二出力部２４、および画像出力部２４１は、ディスプレイやスピーカー等の出力デバイスを含むと考えても含まないと考えても良い。第一出力部１４は、出力デバイスのドライバーソフトまたは、出力デバイスのドライバーソフトと出力デバイス等で実現され得る。
The
次に、生産装置１の動作例について、図３のフローチャートを用いて説明する。なお、例えば、第一受付部１２が開始指示を受け付けた場合に、ステップＳ３０１以降の処理が行われる。
Next, an operation example of the
（ステップＳ３０１）第二処理部２３は、カウンタｉに１を代入する。
(Step S301) The
（ステップＳ３０２）第二処理部２３は、画像格納部１１１にｉ番目の画像が存在するか否かを判断する。ｉ番目の画像が存在する場合はステップＳ３０３に行き、ｉ番目の画像が存在しない場合は処理を終了する。
(Step S302) The
（ステップＳ３０３）キー領域決定部１３１は、画像格納部１１１からｉ番目の画像を取得する。
(Step S<b>303 ) The key
（ステップＳ３０４）キー領域決定部１３１は、ステップＳ３０３で取得したｉ番目の画像から１以上のキー領域情報を取得し、図示しないバッファに一時蓄積する。なお、画像からキー領域情報を取得する処理は公知技術により可能である。
(Step S304) The key
（ステップＳ３０５）第二処理部２３は、カウンタｊに１を代入する。
(Step S305) The
（ステップＳ３０６）第二処理部２３は、図示しないバッファに、ｊ番目のキー領域情報が存在するか否かを判断する。ｊ番目のキー領域情報が存在する場合はステップＳ３０７に行き、存在しない場合はステップＳ３１２に行く。
(Step S306) The
（ステップＳ３０７）情報量取得部１３２は、ｊ番目のキー領域情報の情報量を取得する。かかる情報量取得処理の例について、図４のフローチャートを用いて説明する。
(Step S307) The information
（ステップＳ３０８）有用キー領域決定部１３３は、ｊ番目のキー領域情報の識別価値を取得する。かかる識別価値取得処理の例について、図５のフローチャートを用いて説明する。
(Step S308) The useful key
（ステップＳ３０９）有用キー領域決定部１３３は、条件格納部１１３から選択条件を取得する。有用キー領域決定部１３３は、ステップＳ３０８で取得した識別価値が選択条件を満たすか否かを判断する。選択条件を満たす場合はステップＳ３１０に行き、選択条件を満たさない場合はステップＳ３１１に行く。
(Step S<b>309 ) The useful key
（ステップＳ３１０）蓄積部１３４は、ｊ番目のキー領域情報と、ｊ番目のキー領域情報の情報量と、ｊ番目のキー領域情報の識別価値とを対応付けて、有用キー領域情報格納部１１４に蓄積する。
(Step S310) The
（ステップＳ３１１）第二処理部２３は、カウンタｊを１、インクリメントする。ステップＳ３０６に戻る。
(Step S311) The
（ステップＳ３１２）第二処理部２３は、カウンタｉを１、インクリメントする。ステップＳ３０２に戻る。
(Step S312) The
次に、ステップＳ３０７の情報量取得処理の例について、図４のフローチャートを用いて説明する。 Next, an example of information amount acquisition processing in step S307 will be described using the flowchart of FIG.
（ステップＳ４０１）情報量取得部１３２は、初期化の処理を行う。つまり、情報量取得部１３２は、変数「目的参照情報」、変数「他参照情報」に０を代入する。
(Step S401) The information
なお、変数「目的参照情報」は、目的参照画像から取得される情報であり、対象となるキー領域の情報量を取得するための元になる情報である。変数「目的参照情報」は、例えば、対象となるキー領域情報と類似する（類似条件を満たす）キー領域情報を有する目的参照画像の数である。変数「目的参照情報」は、例えば、対象となるキー領域情報と類似するキー領域情報を有する目的参照画像における、類似するキー領域情報の類似度を加算した値である。 Note that the variable “purpose reference information” is information acquired from the purpose reference image, and serves as a basis for acquiring the amount of information of the target key region. The variable “target reference information” is, for example, the number of target reference images having key region information similar (satisfying a similarity condition) to the target key region information. The variable “target reference information” is, for example, a value obtained by adding the similarity of similar key region information in a target reference image having key region information similar to the target key region information.
変数「他参照情報」は、他参照画像から取得される情報であり、対象となるキー領域の情報量を取得するための元になる情報である。変数「他参照情報」は、例えば、対象となるキー領域情報と類似する（類似条件を満たす）キー領域情報を有する他参照画像の数である。変数「他参照情報」は、例えば、対象となるキー領域情報と類似するキー領域情報を有する他参照画像における、類似するキー領域情報の類似度を加算した値である。 The variable “other reference information” is information acquired from other reference images, and is information that is the basis for acquiring the information amount of the target key region. The variable “other reference information” is, for example, the number of other reference images having key region information similar (satisfying a similarity condition) to the target key region information. The variable “other reference information” is, for example, a value obtained by adding the similarity of similar key region information in another reference image having key region information similar to the target key region information.
（ステップＳ４０２）情報量取得部１３２は、カウンタｉに１を代入する。
(Step S402) The information
（ステップＳ４０３）情報量取得部１３２は、ｉ番目の目的参照画像が参照画像格納部１１２に存在するか否かを判断する。ｉ番目の目的参照画像が存在する場合はステップＳ４０４に行き、存在しない場合はステップＳ４１３に行く。
(Step S<b>403 ) The information
（ステップＳ４０４）情報量取得部１３２は、ｉ番目の目的参照画像を参照画像格納部１１２から取得する。
(Step S<b>404 ) The information
（ステップＳ４０５）キー領域決定部１３１は、ステップＳ４０４で取得されたｉ番目の目的参照画像から、キー領域情報である１以上の参照キー領域情報を取得する。
(Step S405) The key
（ステップＳ４０６）情報量取得部１３２は、カウンタｊに１を代入する。
(Step S406) The information
（ステップＳ４０７）情報量取得部１３２は、ステップＳ４０５で取得した参照キー領域情報のうち、ｊ番目の参照キー領域情報が存在するか否かを判断する。ｊ番目の参照キー領域情報が存在する場はステップＳ４０８に行き、存在しない場合はステップＳ４１１に行く。
(Step S407) The information
（ステップＳ４０８）情報量取得部１３２は、対象となるキー領域情報とｊ番目の参照キー領域情報との類似度を算出する。
(Step S408) The information
（ステップＳ４０９）情報量取得部１３２は、ステップＳ４０８で算出した類似度が類似条件を満たすか否かを判断する。類似条件を満たす場合（類似する場合）はステップＳ４１０に行き、類似条件を満たさない場合（類似しない場合）はステップＳ４１２に行く。
(Step S409) The information
（ステップＳ４１０）情報量取得部１３２は、変数「目的参照情報」を更新する。なお、情報量取得部１３２は、通常、変数「目的参照情報」を増加させる。情報量取得部１３２は、例えば、変数「目的参照情報」に１を加える。情報量取得部１３２は、例えば、変数「目的参照情報」に、ステップＳ４０８で算出した類似度を加える。
(Step S410) The information
なお、次に、ステップＳ４１１に移行せずに、キー領域情報と、ｉ番目の目的参照画像のすべての参照キー領域情報との類似度を取得し、当該類似度を用いて、当該キー領域情報の目的参照情報を取得しても良い。 Next, without proceeding to step S411, the degree of similarity between the key region information and all the reference key region information of the i-th target reference image is obtained, and the degree of similarity is used to obtain the key region information You may acquire the purpose reference information of
（ステップＳ４１１）情報量取得部１３２は、カウンタｉを１、インクリメントする。ステップＳ４０２に戻る。
(Step S411) The information
（ステップＳ４１２）情報量取得部１３２は、カウンタｊを１、インクリメントする。ステップＳ４０７に戻る。
(Step S412) The information
（ステップＳ４１３）情報量取得部１３２は、カウンタｋに１を代入する。
(Step S413) The information
（ステップＳ４１４）情報量取得部１３２は、ｋ番目の他参照画像が参照画像格納部１１２に存在するか否かを判断する。ｋ番目の他参照画像が存在する場合はステップＳ４１５に行き、存在しない場合はステップＳ４２４に行く。
(Step S<b>414 ) The information
（ステップＳ４１５）情報量取得部１３２は、ｋ番目の他参照画像を参照画像格納部１１２から取得する。
(Step S<b>415 ) The information
（ステップＳ４１６）キー領域決定部１３１は、ステップＳ４１５で取得されたｋ番目の他参照画像から、キー領域情報である１以上の参照キー領域情報を取得する。
(Step S416) The key
（ステップＳ４１７）情報量取得部１３２は、カウンタｌに１を代入する。
(Step S417) The information
（ステップＳ４１８）情報量取得部１３２は、ステップＳ４１６で取得した参照キー領域情報のうち、ｌ番目の参照キー領域情報が存在するか否かを判断する。ｌ番目の参照キー領域情報が存在する場はステップＳ４１９に行き、存在しない場合はステップＳ４２２に行く。
(Step S418) The information
（ステップＳ４１９）情報量取得部１３２は、対象となるキー領域情報とｌ番目の参照キー領域情報との類似度を算出する。
(Step S419) The information
（ステップＳ４２０）情報量取得部１３２は、ステップＳ４１９で算出した類似度が類似条件を満たすか否かを判断する。類似条件を満たす場合はステップＳ４２１に行き、類似条件を満たさない場合はステップＳ４２３に行く。
(Step S420) The information
（ステップＳ４２１）情報量取得部１３２は、変数「他参照情報」を更新する。なお、情報量取得部１３２は、通常、変数「他参照情報」を増加させる。情報量取得部１３２は、例えば、変数「他参照情報」に１を加える。情報量取得部１３２は、例えば、変数「他参照情報」に、ステップＳ４０８で算出した類似度を加える。
(Step S421) The information
なお、次に、ステップＳ４２２に移行せずに、キー領域情報と、ｉ番目の他参照画像のすべての参照キー領域情報との類似度を取得し、当該類似度を用いて、当該キー領域情報の他参照情報を取得しても良い。 Next, without proceeding to step S422, the degree of similarity between the key region information and all the reference key region information of the i-th other reference image is acquired, and the degree of similarity is used to obtain the key region information Other reference information may be acquired.
（ステップＳ４２２）情報量取得部１３２は、カウンタｋを１、インクリメントする。ステップＳ４１４に戻る。
(Step S422) The information
（ステップＳ４２３）情報量取得部１３２は、カウンタｌを１、インクリメントする。ステップＳ４１８に戻る。
(Step S423) The information
（ステップＳ４２４）情報量取得部１３２は、変数「目的参照情報」と変数「他参照情報」とを用いて、情報量を算出する。上位処理にリターンする。なお、情報量取得部１３２は、通常、変数「目的参照情報」の値をパラメータとする増加関数により、情報量を算出する。また、情報量取得部１３２は、通常、変数「他参照情報」の値をパラメータとする減少関数により、情報量を算出する。なお、「目的参照情報」と「他参照情報」は一方が大きくなれば他方が小さくなるという性質を持っているから、カテゴリを区別する効果を得るために、情報量取得部１３２は、変数「他参照情報」の値をパラメータとする増加関数により、情報量を算出しても良い。
(Step S424) The information
次に、ステップＳ４０８の識別価値取得処理の例について、図５のフローチャートを用いて説明する。 Next, an example of the identification value acquisition process in step S408 will be described using the flowchart of FIG.
（ステップＳ５０１）有用キー領域決定部１３３は、変数「目的参照情報」の値を取得する。
(Step S501) The useful key
（ステップＳ５０２）有用キー領域決定部１３３は、変数「他参照情報」の値を取得する。
(Step S502) The useful key
（ステップＳ５０３）有用キー領域決定部１３３は、変数「目的参照情報」の値と変数「他参照情報」の値とを用いて、識別価値を算出し、当該識別価値を、対象とするキー領域情報に対応付け、図示しないバッファに一時蓄積する。上位処理にリターンする。
(Step S503) The useful key
なお、有用キー領域決定部１３３は、常、変数「目的参照情報」の値をパラメータとする増加関数により、識別価値を算出する。また、有用キー領域決定部１３３は、例えば、変数「他参照情報」の値をパラメータとする減少関数により、識別価値を算出する。
Note that the useful key
次に、画像処理装置２の動作例について、図６のフローチャートを用いて説明する。なお、ここでは、一の対象画像から出力画像を取得する処理について説明する。 Next, an operation example of the image processing device 2 will be described using the flowchart of FIG. Here, processing for obtaining an output image from one target image will be described.
（ステップＳ６０１）画像分割部２３１は、対象画像格納部２１１から対象画像を取得する。
(Step S<b>601 ) The
（ステップＳ６０２）画像分割部２３１は、ステップＳ６０１で取得した対象画像を分割し、２以上の小画像片を取得する。
(Step S602) The
（ステップＳ６０３）第二処理部２３は、カウンタｉに１を代入する。
(Step S603) The
（ステップＳ６０４）第二処理部２３は、初期化処理を行う。初期化処理は、変数「小画像片情報量」に０を代入する処理、および変数「小画像片識別価値」に０を代入する処理である。
(Step S604) The
（ステップＳ６０５）キー領域決定部２３２は、ステップＳ６０２で取得された小画像片の中に、ｉ番目の小画像片が存在するか否かを判断する。ｉ番目の小画像片が存在する場合はステップＳ６０６に行き、存在しない場合はステップＳ６２０に行く。
(Step S605) The key
（ステップＳ６０６）キー領域決定部２３２は、ｉ番目の小画像片の中の１以上のキー領域情報を取得する。
(Step S606) The key
（ステップＳ６０７）第二処理部２３は、カウンタｊに１を代入する。
(Step S607) The
（ステップＳ６０８）第二処理部２３は、ステップＳ６０６で取得されたキー領域情報の中に、ｊ番目のキー領域情報が存在するか否かを判断する。ｊ番目のキー領域情報が存在する場合はステップＳ６０９に行き、存在しない場合はステップＳ６１７に行く。
(Step S608) The
（ステップＳ６０９）第二処理部２３は、カウンタｋに１を代入する。
(Step S609) The
（ステップＳ６１０）第二処理部２３は、有用キー領域情報格納部１１４に、ｋ番目の有用キー領域情報が存在するか否かを判断する。ｋ番目の有用キー領域情報が存在する場合はステップＳ６１１に行き、存在しない場合はステップＳ６１６に行く。
(Step S<b>610 ) The
（ステップＳ６１１）小画像片情報量取得部２３３は、ｊ番目のキー領域情報とｋ番目の有用キー領域情報との類似度を算出する。
(Step S611) The small image piece information
（ステップＳ６１２）小画像片情報量取得部２３３は、ステップＳ６１１で算出した類似度が類似条件を満たすか否かを判断する。類似条件を満たす場合はステップＳ６１３に行き、類似条件を満たさない場合はステップＳ６１５に行く。
(Step S612) The small image piece information
（ステップＳ６１３）小画像片情報量取得部２３３は、変数「小画像片情報量」を更新する。小画像片情報量取得部２３３は、例えば、変数「小画像片情報量」に、ｋ番目の有用キー領域情報と対になる情報量を加算する。小画像片情報量取得部２３３は、例えば、変数「小画像片情報量」に１を加算する。
(Step S613) The small image piece information
（ステップＳ６１４）小画像片識別価値取得部２３４は、変数「小画像片識別価値」を更新する。小画像片情報量取得部２３３は、例えば、変数「小画像片識別価値」に、ｋ番目の有用キー領域情報と対になる識別価値を加算する。小画像片識別価値取得部２３４は、例えば、変数「小画像片識別価値」に１を加算する。
(Step S614) The small image piece identification
（ステップＳ６１５）カウンタｋを１、インクリメントする。ステップＳ６１０に戻る。 (Step S615) The counter k is incremented by 1. Return to step S610.
（ステップＳ６１６）カウンタｊを１、インクリメントする。ステップＳ６０８に戻る。 (Step S616) The counter j is incremented by 1. Return to step S608.
（ステップＳ６１７）画像構成部２３５は、ｉ番目の小画像片に対する変数「小画像片情報量」と変数「小画像片識別価値」との値を用いて、対象画像内のｉ番目の小画像片の画像を取得する。なお、画像構成部２３５は、例えば、対象画像内のｉ番目の小画像片の輝度や明度や色等の属性値を、変数「小画像片情報量」または／および変数「小画像片識別価値」の値を用いて決定し、ｉ番目の小画像片の画像を構成する。
(Step S617) The
（ステップＳ６１８）画像構成部２３５は、ステップＳ６１７で取得したｉ番目の小画像片の画像を、ｉ番目の小画像片の位置に配置する。
(Step S618) The
（ステップＳ６１９）第二処理部２３は、カウンタｉを１、インクリメントする。ステップＳ６０５に戻る。
(Step S619) The
（ステップＳ６２０）画像出力部２４１は、ステップＳ６１８における処理により構成された出力画像を出力する。処理を終了する。
(Step S620) The
なお、図６のフローチャートにおいて、小画像片情報量取得部２３３は、小画像片ごとに、目的小画像片情報量と他小画像片情報量とを取得しても良い。
In the flowchart of FIG. 6, the small image piece information
また、図６のフローチャートにおいて、小画像片識別価値取得部２３４は、小画像片ごとに、目的小画像片情報量と他小画像片情報量とを用いて、小画像片識別価値を取得しても良い。
Further, in the flowchart of FIG. 6, the small image piece identification
以下、本実施の形態における生産装置１の具体的な動作例について説明する。
A specific operation example of the
生産装置１の画像格納部１１１には、１または２以上の医用画像が格納されている、とする。医用画像は、ガンの領域と正常な領域とを含む、とする。
It is assumed that one or more medical images are stored in the image storage unit 111 of the
また、参照画像格納部１１２には、カテゴリ識別子「ガン」に対応付いた２以上の参照画像が格納されている、とする。かかる参照画像は、ガン細胞の領域の画像である。また、参照画像格納部１１２には、カテゴリ識別子「正常」に対応付いた２以上の参照画像が格納されている、とする。かかる参照画像は、正常な細胞の領域の画像である。
It is also assumed that the reference
かかる状況において、ユーザは、生産装置１に対して、開始指示を入力した、とする。次に、生産装置１の第一受付部１２は、開始指示を受け付ける。
Assume that the user inputs a start instruction to the
すると、画像格納部１１１の１以上の各医用画像に対して、以下のような処理が行われ、多数の有用キー領域情報が有用キー領域情報格納部１１４に蓄積される。
Then, one or more medical images in the image storage unit 111 are processed as follows, and a large amount of useful key region information is accumulated in the useful key region
つまり、まず、キー領域決定部１３１は、画像格納部１１１から医用画像（以下、適宜「画像」と言う）を取得する。
That is, first, the key
次に、キー領域決定部１３１は、取得した画像から、１以上のキーポイント（キー領域の一例）を決定する。好ましい画像特徴量としてS I F Tを用いて説明すると、、キー領域決定部１３１は、図７に示すように、取得した画像７０１に対して、異なるスケール（σ、ｋ１σ、ｋ２σ、ｋ３σ、ｋ４σ・・・（σ、ｋｘは正の数、ｘは自然数）の平滑化画像を取得する。次に、キー領域決定部１３１は、スケールが隣接する２つの平滑化画像の差分の画像であるＤｏｃ画像を取得する（図７参照）。
Next, the key
次に、キー領域決定部１３１は、各Ｄｏｃ画像から極値を検出する。キー領域決定部１３１は、注目画素のＤｏＧ値を画像スケール空間の２６近傍と比較する。その２６近傍よりも極大・極小の場合、その点をキーポイントの候補とする（図８参照）。なお、図８において、キー領域決定部１３１は、注目画素（３枚１組のＤｏｃ画像の真ん中のＤｏｃ画像の中の色付きの画素の中央の画素）のＤｏＧ値と、当該注目画素に隣接する画素のＤｏＧ値、および３枚１組のＤｏｃ画像の上のＤｏｃ画像と下のＤｏｃ画像の中の対応する画素（上のＤｏｃ画像と下のＤｏｃ画像の中の色付きの画素）のＤｏｃ画像とを比較し、注目画素のＤｏＧ値が比較対象の他の画素のＤｏＧ値よりも極大または極小の場合、当該注目画素をキーポイントの候補とする。
Next, the key
また、キー領域決定部１３１は、キーポイントの候補から、エッジ上の点やＤｏＧ値が小さいもの（例えば、０．０３以下のもの）を除外すること等により、キーポイントの候補の絞り込みを行う。なお、キー領域決定部１３１は、サブピクセル位置推定、およびコントラストの閾値処理を行うことは好適である。
In addition, the key
次に、キー領域決定部１３１は、残った１以上の各キーポイントが持つスケールに対応する領域から、勾配方向を算出する。かかる概念図は図９である。また、キー領域決定部１３１は、ガウス窓と勾配強度を掛け合わせた重みを、３６方向の勾配方向ヒストグラムに加算する。また、キー領域決定部１３１は、ヒストグラムの最大値から、ここでは、例えば、８０％以上となるピークを、キーポイントのオリエンテーションとして割り当てる（図１０参照）。かかる割り当てられたキーポイントが、選択されたキーポイントである。なお、キーポイントによっては、オリエンテーションが２つとなる場合もある。
Next, the key
次に、キー領域決定部１３１は、検出されたオリエンテーションをもとにして、キー領域情報として、１２８次元の特徴量のベクトルを取得する。まず、キー領域決定部１３１は、特徴量を記述する領域をキーポイントがもつオリエンテーションに合わせて回転させる。特徴量のベクトルは、キーポイント周辺の勾配情報を要素とする。この勾配情報は、キーポイントを中心として、そのキーポイントがもつスケールを半径とした円から求められる情報である。この領域は４×４のブロックに分割した各ブロック単位となり、１つのブロックは８つの方向からなるため、領域には、合計して１２８次元の特徴量が存在することとなる。キー領域決定部１３１は、この特徴量を用いて、図１１のような勾配方向ヒストグラムを作成する。その際、キー領域決定部１３１は、１２８次元の特徴ベクトルの長さをベクトルの総和で正規化する。これにより、キー領域決定部１３１は、照明変化に耐性のあるＳＩＦＴ特徴量ベクトルを取得することとなる。
Next, the key
以上の処理もしくはカテゴリの違いを評価するために有用な小さな画像領域を抽出できる他の処理を、複数の医用画像に対して行うことにより、多数のキー領域情報が取得される。キー領域情報は、ここでは、ＳＩＦＴ特徴量として計算された１２８次元の特徴ベクトルである。 A large amount of key region information is obtained by performing the above processing or other processing capable of extracting useful small image regions for evaluating differences in categories on a plurality of medical images. The key region information here is a 128-dimensional feature vector calculated as a SIFT feature amount.
次に、情報量取得部１３２ キー領域決定部１３１により取得された１以上の各キー領域情報の情報量を、上述した数式１、数式２、数式３を用いて、算出する。
Next, the information
次に、有用キー領域決定部１３３は、１以上の各キー領域情報の情報量を上述した数式７（数式６とも言える）に代入し、当該数式７を実行することにより、１以上の各キー領域情報の「ガン」を識別する識別価値「v(Ki,ガン)」を算出する。
Next, the useful key
次に、有用キー領域決定部１３３は、１以上の各キー領域情報の識別価値が、選択条件に合致するか否かを判断し、選択条件に合致しる１以上の各キー領域情報を、有用キー領域情報として取得する。
Next, the useful key
次に、蓄積部１３４は、１以上の各有用キー領域情報と、各有用キー領域情報の情報量と、各有用キー領域情報の識別価値とを対応付けて、有用キー領域情報格納部１１４に蓄積する。
Next, the
以上の処理により、生産装置１は、「ガン」を識別する能力の高い多数の有用キー領域情報を蓄積できた。なお、ここで、「ガン」を識別する能力の高い有用キー領域情報を目的有用キー領域情報と言う。
By the above processing, the
また、上記の処理と同じアルゴリズムの処理を行い、生産装置１は、「正常」を識別する能力の高い多数の有用キー領域情報を蓄積できた、とする。なお、ここで、「ガン」の画像と、「正常」の画像とを入れ替えて、上記と同じアルゴリズムで生産装置１が動作すれば、「正常」を識別する能力の高い多数の有用キー領域情報を蓄積できる。また、ここで、「正常」を識別する能力の高い有用キー領域情報を他有用キー領域情報と言う。
Further, it is assumed that the same algorithm processing as the above processing is performed, and that the
次に、画像処理装置２は、以下に示す処理により、生産装置１が蓄積した多数の有用キー領域情報を用いて、ガン領域を含む医用画像から出力画像を構成し、出力する。なお、画像処理装置２の有用キー領域情報格納部１１４には、生産装置１が取得した多数の目的有用キー領域情報と多数の他有用キー領域情報とが蓄積されている、とする。また、対象画像格納部２１１には、ガン領域を含む医用画像（以下、適宜、「対象画像」と言う。）が格納されている、とする。
Next, the image processing apparatus 2 uses a large amount of useful key area information accumulated by the
かかる状況において、ユーザは、画像処理装置２に対して、開始指示を入力した、とする。すると、画像処理装置２の第二受付部２２は、開始指示を受け付ける。
Assume that the user inputs a start instruction to the image processing apparatus 2 in such a situation. Then, the
次に、画像分割部２３１は、対象画像格納部２１１から対象画像を取得する。次に、画像分割部２３１は、取得した対象画像を分割し、２以上の小画像片を取得する。
Next, the
次に、キー領域決定部２３２は、例えば、２以上の各小画像片ごとに、キーポイントのキー領域情報を取得する。なお、ここで、キー領域情報は、ＳＩＦＴ特徴量のベクトルである、とする。
Next, the key
次に、小画像片情報量取得部２３３は、２以上の各小画像片ごとに、キー領域決定部２３２が取得した１以上の各キー領域情報に対応する目的有用キー領域情報を決定する。そして、小画像片情報量取得部２３３は、２以上の各小画像片ごとに、目的有用キー領域情報に対応するキー領域情報の数を算出する。なお、キー領域情報に対応する有用キー領域情報とは、キー領域情報に対して類似条件を満たす有用キー領域情報である。また、キー領域情報と目的有用キー領域情報とが対応する概念を、図１２に示す。図１２の（ａ）は、「ガン」を識別する能力の高い目的有用キー領域を含む画像であり、（ｂ）は対象画像である。対象画像の中の（ａ）の画像との対応が良く付いている領域は「ガン」細胞のある領域である、と判断できる。
Next, the small image piece information
また、小画像片情報量取得部２３３が行う処理のイメージを図１３に示す。図１３の１３０１は、「ガン」を識別する能力の高い目的有用キー領域情報（キーポイントのベクトル）に対応する画像（「ガン」の領域の画像）である。また、１３０１の○は、目的有用キー領域情報である。また、１３０２は、対象画像であり、多数の小画像片を有する。そして、１３０３は、小画像片ごとの目的有用キー領域情報に対応するキー領域情報の数である。かかる数が小画像片情報量である。つまり、小画像片情報量取得部２３３は、小画像片ごとに、目的有用キー領域情報に対応するキー領域情報の数を算出する。
Also, FIG. 13 shows an image of processing performed by the small image piece information
なお、ここで、小画像片情報量取得部２３３が取得した小画像片ごとの目的有用キー領域情報を用いて構成される画像の例は、図１４である。図１４の１４０１は、目的有用キー領域情報に対応する画像であり、ガン領域の標本画像である。１４０２は、対象画像である。対象画像は、ガン領域と正常領域とが含まれる。そして、図１３の１３０３の小画像片ごとの数値（目的有用キー領域情報に対応するキー領域情報の数）が大きいほど濃い色となる小画像片を配置した画像が１４０３である。１４０３は、ガンらしさが認められる小画像片が明示された画像である。
Here, FIG. 14 shows an example of an image configured using purpose useful key region information for each small image piece acquired by the small image piece information
次に、小画像片情報量取得部２３３は、２以上の各小画像片ごとに、キー領域決定部２３２が取得した１以上の各キー領域情報に対応する他有用キー領域情報を決定する。そして、小画像片情報量取得部２３３は、２以上の各小画像片ごとに、他有用キー領域情報に対応するキー領域情報の数を算出する。
Next, the small image piece information
なお、ここで、小画像片情報量取得部２３３が取得した小画像片ごとの目的有用キー領域情報を用いて構成される画像の例は、図１５である。図１５の１５０１は、他有用キー領域情報に対応する画像であり、正常領域の標本画像である。１５０２は、対象画像である。対象画像は、ガン領域と正常領域とが含まれる。そして、小画像片ごとの数値（他有用キー領域情報に対応するキー領域情報の数）が大きいほど濃い色となる小画像片を配置した画像が１５０３である。１５０３は、正常らしさが認められる小画像片が明示された画像である。
Here, FIG. 15 shows an example of an image configured using purpose useful key region information for each small image piece acquired by the small image piece information
次に、小画像片識別価値取得部２３４は、２以上の各小画像片ごとに、目的有用キー領域情報に対応するキー領域情報の数と他有用キー領域情報に対応するキー領域情報の数との差を算出する。なお、かかる差が、各小画像片ごとの小画像片識別価値である。
Next, the small image piece identification
次に、画像構成部２３５は、各小画像片ごとの小画像片識別価値を用いて、出力画像を構成する。
Next, the
次に、画像出力部２４１は、当該出力画像を出力する。
Next, the
なお、小画像片識別価値取得部２３４と画像出力部２４１の動作を説明する図は、図１６である。図１６の１６０１は、ガンらしさが認められる小画像片が明示された画像であり、１４０３と同じである。１６０２は、正常らしさが認められる小画像片が明示された画像であり、１５０３と同じである。そして、１６０３は、ガンらしさから正常らしさを除いた図であり、１４０３よりガンらしい領域の小画像片の色が濃くなっており、人がガン領域を認識し易い画像になっている。
FIG. 16 is a diagram for explaining the operations of the small image fragment identification
なお、画像処理装置２の出力を、画像ではなく、閾値より大きい小画像片情報量を持つ対象画像中の小画像片位置とする簡便な構成をとることも可能である。なお、閾値は、例えば、予め格納されている情報、または入力され、第二受付部２２が受け付けた情報である。また、小画像片位置は、一つの座標、領域を表す長方形の対角の２点の座標、円の中心と半径等であっても良い。
It is also possible to employ a simple configuration in which the output of the image processing device 2 is not the image but the position of the small image piece in the target image having the information amount of the small image piece larger than the threshold value. Note that the threshold is, for example, information stored in advance or information that is input and received by the
以上、本実施の形態の生産装置１によれば、２以上のカテゴリを含む対象画像から目的カテゴリの領域を精度高く検出するための画像を得るための有用な情報を取得できる。
As described above, according to the
また、本実施の形態の画像処理装置２によれば、２以上のカテゴリを含む対象画像から目的カテゴリの領域を精度高く検出するための画像が得られる。 Further, according to the image processing apparatus 2 of the present embodiment, an image for accurately detecting the area of the target category from the target image including two or more categories is obtained.
さらに、本実施の形態の画像処理装置２によれば、受け付けられた類似条件の変更に応じて、動的に、出力画像を変更できる。 Furthermore, according to the image processing apparatus 2 of the present embodiment, it is possible to dynamically change the output image according to the received similarity condition change.
なお、本実施の形態における処理は、ソフトウェアで実現しても良い。そして、このソフトウェアをソフトウェアダウンロード等により配布しても良い。また、このソフトウェアをＣＤ－ＲＯＭなどの記録媒体に記録して流布しても良い。なお、このことは、本明細書における他の実施の形態においても該当する。なお、本実施の形態における生産装置１を実現するソフトウェアは、以下のようなプログラムである。つまり、このプログラムは、コンピュータを、キー条件を満たす１以上のキー領域を画像から決定するキー領域決定部と、目的カテゴリの領域を決定する能力に関する情報であり、前記キー領域決定部が決定した前記１以上の各キー領域に関する情報である情報量を取得する情報量取得部と、前記情報量取得部が取得した情報量を用いて、有用なキー領域を選択するための選択条件を満たす１以上の有用キー領域を決定する有用キー領域決定部と、前記有用キー領域決定部が決定した１以上の有用キー領域に関する有用キー領域情報を蓄積する蓄積部として機能させるためのプログラムである。
Note that the processing in this embodiment may be realized by software. Then, this software may be distributed by software download or the like. Also, this software may be recorded on a recording medium such as a CD-ROM and distributed. Note that this also applies to other embodiments in this specification. The software that implements the
また、画像処理装置２を実現するソフトウェアは、以下のようなプログラムである。つまり、このプログラムは、１以上の有用キー領域情報が格納される有用キー領域情報格納部と、処理対象の画像である対象画像が格納される対象画像格納部とにアクセス可能なコンピュータを、前記対象画像を分割し、２以上の小画像片を取得する画像分割部と、前記画像分割部が取得した２以上の小画像片ごとに、１以上のキー領域を決定するキー領域決定部と、前記キー領域決定部が決定した１以上の各キー領域に関するキー領域情報と、前記有用キー領域情報格納部に格納されている各有用キー領域情報とが類似するか否かを検査し、当該検査結果に応じた小画像片情報量を、２以上の小画像片ごとに取得する小画像片情報量取得部と、前記小画像片情報量取得部が取得した２以上の小画像片情報量を反映させた情報を出力する出力部として機能させるためのプログラムである。 Also, the software that implements the image processing apparatus 2 is the following program. That is, the program provides a computer capable of accessing a useful key region information storage section storing one or more pieces of useful key region information and a target image storage section storing a target image, which is an image to be processed. an image dividing unit that divides a target image and obtains two or more small image pieces; a key region determination unit that determines one or more key regions for each of the two or more small image pieces obtained by the image dividing unit; inspecting whether or not the key area information related to one or more key areas determined by the key area determination unit is similar to each useful key area information stored in the useful key area information storage unit; a small image piece information amount acquiring unit for acquiring a small image piece information amount according to the result for each of two or more small image pieces; This is a program for functioning as an output unit that outputs reflected information.
また、図１７は、本明細書で述べたプログラムを実行して、上述した種々の実施の形態の生産装置１、画像処理装置２を実現するコンピュータの外観を示す。上述の実施の形態は、コンピュータハードウェア及びその上で実行されるコンピュータプログラムで実現され得る。図１７は、このコンピュータシステム３００の概観図であり、図１８は、システム３００のブロック図である。
Also, FIG. 17 shows the appearance of a computer that executes the programs described in this specification and implements the
図１７において、コンピュータシステム３００は、ＣＤ－ＲＯＭドライブを含むコンピュータ３０１と、キーボード３０２と、マウス３０３と、モニタ３０４とを含む。
In FIG. 17,
図１８において、コンピュータ３０１は、ＣＤ－ＲＯＭドライブ３０１２に加えて、ＭＰＵ３０１３と、ＣＤ－ＲＯＭドライブ３０１２等に接続されたバス３０１４と、ブートアッププログラム等のプログラムを記憶するためのＲＯＭ３０１５と、ＭＰＵ３０１３に接続され、アプリケーションプログラムの命令を一時的に記憶するとともに一時記憶空間を提供するためのＲＡＭ３０１６と、アプリケーションプログラム、システムプログラム、及びデータを記憶するためのハードディスク３０１７とを含む。ここでは、図示しないが、コンピュータ３０１は、さらに、ＬＡＮへの接続を提供するネットワークカードを含んでも良い。
18, a
コンピュータシステム３００に、上述した実施の形態の画像処理装置２等の機能を実行させるプログラムは、ＣＤ－ＲＯＭ３１０１に記憶されて、ＣＤ－ＲＯＭドライブ３０１２に挿入され、さらにハードディスク３０１７に転送されても良い。これに代えて、プログラムは、図示しないネットワークを介してコンピュータ３０１に送信され、ハードディスク３０１７に記憶されても良い。プログラムは実行の際にＲＡＭ３０１６にロードされる。プログラムは、ＣＤ－ＲＯＭ３１０１またはネットワークから直接、ロードされても良い。
A program that causes the
プログラムは、コンピュータ３０１に、上述した実施の形態の画像処理装置２等の機能を実行させるオペレーティングシステム（ＯＳ）、またはサードパーティープログラム等は、必ずしも含まなくても良い。プログラムは、制御された態様で適切な機能（モジュール）を呼び出し、所望の結果が得られるようにする命令の部分のみを含んでいれば良い。コンピュータシステム３００がどのように動作するかは周知であり、詳細な説明は省略する。
The program does not necessarily include an operating system (OS) or a third party program that causes the
なお、上記プログラムにおいて、情報を送信するステップや、情報を受信するステップなどでは、ハードウェアによって行われる処理、例えば、送信ステップにおけるモデムやインターフェースカードなどで行われる処理（ハードウェアでしか行われない処理）は含まれない。 In the above program, the step of transmitting information, the step of receiving information, etc. are performed by hardware. processing) are not included.
また、上記プログラムを実行するコンピュータは、単数であってもよく、複数であってもよい。すなわち、集中処理を行ってもよく、あるいは分散処理を行ってもよい。 Also, the number of computers that execute the above programs may be singular or plural. That is, centralized processing may be performed, or distributed processing may be performed.
また、上記各実施の形態において、各処理は、単一の装置によって集中処理されることによって実現されてもよく、あるいは、複数の装置によって分散処理されることによって実現されてもよい。 Further, in each of the above embodiments, each process may be implemented by centralized processing by a single device, or may be implemented by distributed processing by a plurality of devices.
分散処理の一例として、以下が挙げられる。つまり、十分な通信帯域の確保が難しい離島と拠点診断センターとにおいて分散処理を行う場合は、離島に対象画像を入力する遠隔入力部（図示しない）と異常画像小片位置受信部（図示しない）とをおき、前記画像処理装置２の出力を異常画像小片の位置だけとすることにより、拠点診断センターから離島への出力結果の送信を素早く行うことができる。 An example of distributed processing is as follows. In other words, when distributed processing is performed on a remote island where it is difficult to secure a sufficient communication band and a base diagnosis center, a remote input unit (not shown) that inputs the target image to the remote island and an abnormal image piece position reception unit (not shown) are used. , and the output of the image processing device 2 is limited to the position of the abnormal image piece, the output result can be quickly transmitted from the base diagnostic center to the remote island.
本発明は、以上の実施の形態に限定されることなく、種々の変更が可能であり、それらも本発明の範囲内に包含されるものであることは言うまでもない。 It goes without saying that the present invention is not limited to the above-described embodiments, and that various modifications are possible and are also included within the scope of the present invention.
以上のように、本発明にかかる画像処理装置は、２以上のカテゴリを含む対象画像から目的カテゴリの領域を精度高く検出するための画像が得られるという効果を有し、画像処理装置等として有用である。 INDUSTRIAL APPLICABILITY As described above, the image processing apparatus according to the present invention has the effect of obtaining an image for accurately detecting an area of a target category from a target image including two or more categories, and is useful as an image processing apparatus or the like. is.
１ 生産装置
２ 画像処理装置
１１ 第一格納部
１２ 第一受付部
１３ 第一処理部
１４ 第一出力部
２１ 第二格納部
２２ 第二受付部
２３ 第二処理部
２４ 第二出力部
１１１ 画像格納部
１１２ 参照画像格納部
１１３ 条件格納部
１１４ 有用キー領域情報格納部
１３１、２３２ キー領域決定部
１３２ 情報量取得部
１３３ 有用キー領域決定部
１３４ 蓄積部
２１１ 対象画像格納部
２３１ 画像分割部
２３３ 小画像片情報量取得部
２３４ 小画像片識別価値取得部
２３５ 画像構成部
２４１ 画像出力部
1 production device 2 image processing device 11
Claims (14)
キー条件を満たす１以上のキー領域を前記画像から決定するキー領域決定部と、
目的カテゴリの領域を決定する能力に関する情報であり、前記キー領域決定部が決定した前記１以上の各キー領域に関する情報である情報量を取得する情報量取得部と、
前記情報量取得部が取得した情報量を用いて、有用なキー領域を選択するための選択条件を満たす１以上の有用キー領域を決定する有用キー領域決定部と、
前記有用キー領域決定部が決定した１以上の有用キー領域に関する有用キー領域情報を蓄積する蓄積部とを具備する有用キー領域情報の生産装置。 an image storage unit in which images are stored;
a key region determination unit that determines one or more key regions satisfying key conditions from the image;
an information amount acquisition unit that acquires an amount of information that is information related to the ability to determine an area of a target category and that is information related to each of the one or more key areas determined by the key area determination unit;
a useful key region determination unit that determines one or more useful key regions that satisfy a selection condition for selecting a useful key region using the amount of information acquired by the information amount acquisition unit;
a useful key area information production apparatus comprising: an accumulation unit for accumulating useful key area information relating to one or more useful key areas determined by the useful key area determination unit.
前記情報量取得部は、
前記キー領域決定部が決定した前記１以上の各キー領域に対応する領域が前記１以上の各目的参照画像に存在するか否かの検査である第一検査、および前記キー領域決定部が決定した前記１以上の各キー領域に対応する領域が前記１以上の各他参照画像に存在するか否かの検査である第二検査を行い、当該第一検査および当該第二検査の結果を用いて、前記１以上の各キー領域の情報量を取得する、請求項１記載の生産装置。 further comprising a reference image storage unit for storing one or more target reference images that are images containing target category regions and one or more other-purpose reference images that are images that do not include target category regions;
The information amount acquisition unit
a first inspection for inspecting whether or not an area corresponding to each of the one or more key areas determined by the key area determination unit exists in each of the one or more target reference images; and determination by the key area determination unit. performing a second inspection for inspecting whether or not an area corresponding to each of the one or more key areas exists in each of the one or more other reference images, and using the results of the first inspection and the second inspection 2. The production apparatus according to claim 1, wherein the amount of information of each of the one or more key areas is obtained by
前記情報量取得部が取得した情報量を用いて、前記１以上の各キー領域の識別価値を取得し、当該識別価値が前記選択条件を満たす１以上の有用領域を決定する、請求項１または請求項２記載の生産装置。 The useful key region determining unit
2. The identification value of each of the one or more key areas is obtained using the information amount obtained by the information amount obtaining unit, and the one or more useful areas whose identification value satisfies the selection condition are determined. 3. The production apparatus according to claim 2.
処理対象の画像である対象画像が格納される対象画像格納部と、
前記対象画像を分割し、２以上の小画像片を取得する画像分割部と、
前記画像分割部が取得した２以上の小画像片ごとに、１以上のキー領域を決定するキー領域決定部と、
前記キー領域決定部が決定した１以上の各キー領域に関するキー領域情報と、前記有用キー領域情報格納部に格納されている各有用キー領域情報とが類似するか否かを検査し、当該検査結果に応じた小画像片情報量を、２以上の小画像片ごとに取得する小画像片情報量取得部と、
前記小画像片情報量取得部が取得した２以上の小画像片情報量を反映させた情報を出力する出力部とを具備する画像処理装置。 a useful key region information storage unit storing one or more useful key region information;
a target image storage unit that stores a target image that is an image to be processed;
an image dividing unit that divides the target image and acquires two or more small image pieces;
a key region determining unit that determines one or more key regions for each of the two or more small image pieces acquired by the image dividing unit;
inspecting whether or not the key area information related to one or more key areas determined by the key area determination unit is similar to each useful key area information stored in the useful key area information storage unit; a small image piece information amount acquisition unit that acquires a small image piece information amount according to the result for each of two or more small image pieces;
and an output unit that outputs information reflecting the two or more small image piece information amounts acquired by the small image piece information amount acquisition unit.
前記小画像片情報量取得部が取得した２以上の小画像片情報量を反映させた情報は、前記出力画像である、請求項４記載の画像処理装置。 further comprising an image construction unit that constructs an output image that reflects the two or more small image piece information amounts acquired by the small image piece information amount acquisition unit;
5. The image processing apparatus according to claim 4, wherein the output image is the information reflecting the two or more small image piece information amounts acquired by the small image piece information amount acquisition unit.
前記出力部は、
前記対象画像に対して、前記２以上の小画像片情報量に加えて、または前記２以上の小画像片情報量に代えて、前記識別価値取得部が取得した２以上の小画像片識別価値を反映させた情報を出力する、請求項４または請求項５記載の画像処理装置。 further comprising a small image piece identification value obtaining unit for obtaining a small image piece identification value, which is an identification value of the small image piece, using the two or more small image piece information amounts obtained by the small image piece information amount obtaining unit. ,
The output unit
two or more small image piece identification values obtained by the identification value obtaining unit in addition to the two or more small image piece information amounts or in place of the two or more small image piece information amounts for the target image; 6. The image processing apparatus according to claim 4, which outputs information reflecting the above.
類似条件の変更が受け付けられた場合に、当該変更された類似条件に基づいて、前記キー領域決定部が決定した１以上の各キー領域に関するキー領域情報と、前記有用キー領域情報格納部に格納されている各有用キー領域情報とが類似するか否かを検査し、当該検査結果に応じた新たな小画像片情報量を、２以上の小画像片ごとに取得し、
前記出力部は、
前記新たな小画像片情報量を反映させた情報を出力する、請求項４から請求項６いずれか一項に記載の画像処理装置。 The small image piece information amount acquisition unit
When a change of the similarity condition is accepted, the key region information about one or more key regions determined by the key region determination unit and stored in the useful key region information storage unit based on the changed similarity condition. inspecting whether or not each useful key region information is similar, and obtaining a new small image piece information amount according to the inspection result for each of the two or more small image pieces;
The output unit
7. The image processing apparatus according to any one of claims 4 to 6, wherein information reflecting the new small image piece information amount is output.
１以上の目的有用キー領域情報と１以上の他有用キー領域情報とが格納され
前記小画像片情報量取得部は、
前記キー領域決定部が決定した１以上の各キー領域に関するキー領域情報と、前記有用キー領域情報格納部に格納されている各目的有用キー領域情報とが類似するか否かを検査し、当該検査結果に応じた目的小画像片情報量を、２以上の小画像片ごとに取得し、かつ
前記キー領域決定部が決定した１以上の各キー領域に関するキー領域情報と、前記有用キー領域情報格納部に格納されている各他有用キー領域情報とが類似するか否かを検査し、当該検査結果に応じた他小画像片情報量を、２以上の小画像片ごとに取得し、
前記出力部は、
前記対象画像に対して、小画像片ごとの、前記小画像片情報量取得部が取得した目的小画像片情報量と他小画像片情報量とを反映させた情報を出力する、請求項４から請求項７いずれか一項に記載の画像処理装置。 In the useful key region information storage unit,
One or more purpose useful key area information and one or more other useful key area information are stored, and the small image piece information amount acquiring unit
It is checked whether or not the key area information related to one or more key areas determined by the key area determination unit is similar to each purpose useful key area information stored in the useful key area information storage unit, and A target small image piece information amount corresponding to an inspection result is obtained for each of two or more small image pieces, and key area information on each of the one or more key areas determined by the key area determining unit, and the useful key area information. inspecting whether each other useful key region information stored in the storage unit is similar, and acquiring the other small image piece information amount corresponding to the inspection result for each of the two or more small image pieces;
The output unit
5. Outputting information reflecting the target small image piece information amount and the other small image piece information amount acquired by the small image piece information amount acquiring unit for each small image piece, with respect to the target image. 8. The image processing apparatus according to any one of claims 7 to 7.
前記出力部は、前記検知信号を出力する、請求項４から請求項８いずれか一項に記載の画像処理装置。 a detection signal acquisition unit that compares the small image piece information amount acquired by the small image piece information amount acquisition unit with a threshold value and acquires a detection signal when the small image piece information amount is greater than the threshold value;
The image processing apparatus according to any one of claims 4 to 8, wherein the output section outputs the detection signal.
前記キー領域決定部が、キー条件を満たす１以上のキー領域を画像から決定するキー領域決定ステップと、
前記情報量取得部が、目的カテゴリの領域を決定する能力に関する情報であり、前記キー領域決定ステップで決定された前記１以上の各キー領域に関する情報である情報量を取得する情報量取得ステップと、
前記有用キー領域決定部が、前記情報量取得ステップで取得された情報量を用いて、有用なキー領域を選択するための選択条件を満たす１以上の有用キー領域を決定する有用キー領域決定ステップと、
前記蓄積部が、前記有用キー領域決定ステップで決定された１以上の有用キー領域に関する有用キー領域情報を蓄積する蓄積ステップとを具備する有用キー領域情報の生産方法。 A method for producing useful key region information realized by a key region determination unit, an information amount acquisition unit, a useful key region determination unit, and a storage unit,
a key region determination step in which the key region determination unit determines one or more key regions satisfying key conditions from an image;
an information amount acquisition step of acquiring an information amount, which is information related to the ability of the information amount acquisition unit to determine the area of the target category and information related to each of the one or more key areas determined in the key area determination step; ,
A useful key area determination step in which the useful key area determination unit determines one or more useful key areas that satisfy a selection condition for selecting a useful key area, using the information amount acquired in the information amount acquisition step. When,
A method for producing useful key area information, comprising an accumulation step in which the accumulation unit accumulates useful key area information relating to one or more useful key areas determined in the useful key area determination step.
前記画像分割部が、前記対象画像を分割し、２以上の小画像片を取得する画像分割ステップと、
前記キー領域決定部が、前記画像分割ステップで取得された２以上の小画像片ごとに、１以上のキー領域を決定するキー領域決定ステップと、
前記小画像片情報量取得部が、前記キー領域決定ステップで決定された１以上の各キー領域に関するキー領域情報と、前記有用キー領域情報格納部に格納されている各有用キー領域情報とが類似するか否かを検査し、当該検査結果に応じた小画像片情報量を、２以上の小画像片ごとに取得する小画像片情報量取得ステップと、
前記出力部が、前記小画像片情報量取得ステップで取得された２以上の小画像片情報量を反映させた情報を出力する出力ステップとを具備する画像処理方法。 A useful key region information storage unit storing one or more pieces of useful key region information, a target image storage unit storing a target image that is an image to be processed, an image dividing unit, a key region determination unit, and a small image. An image processing method implemented by a piece information acquisition unit, an image construction unit, and an output unit,
an image dividing step in which the image dividing unit divides the target image to obtain two or more small image pieces;
a key region determination step in which the key region determination unit determines one or more key regions for each of the two or more small image pieces acquired in the image division step;
The small image piece information amount acquisition unit acquires key area information related to one or more key areas determined in the key area determination step and useful key area information stored in the useful key area information storage unit. a small image piece information amount acquiring step of inspecting whether or not there is similarity, and acquiring the small image piece information amount corresponding to the inspection result for each of two or more small image pieces;
and an output step in which the output unit outputs information reflecting the two or more small image piece information amounts obtained in the small image piece information amount obtaining step.
キー条件を満たす１以上のキー領域を画像から決定するキー領域決定部と、
目的カテゴリの領域を決定する能力に関する情報であり、前記キー領域決定部が決定した前記１以上の各キー領域に関する情報である情報量を取得する情報量取得部と、
前記情報量取得部が取得した情報量を用いて、有用なキー領域を選択するための選択条件を満たす１以上の有用キー領域を決定する有用キー領域決定部と、
前記有用キー領域決定部が決定した１以上の有用キー領域に関する有用キー領域情報を蓄積する蓄積部として機能させるためのプログラム。 the computer,
a key region determination unit that determines one or more key regions that satisfy key conditions from an image;
an information amount acquisition unit that acquires an amount of information that is information related to the ability to determine an area of a target category and that is information related to each of the one or more key areas determined by the key area determination unit;
a useful key region determination unit that determines one or more useful key regions that satisfy a selection condition for selecting a useful key region using the amount of information acquired by the information amount acquisition unit;
A program for functioning as an accumulation section for accumulating useful key area information relating to one or more useful key areas determined by the useful key area determination section.
前記対象画像を分割し、２以上の小画像片を取得する画像分割部と、
前記画像分割部が取得した２以上の小画像片ごとに、１以上のキー領域を決定するキー領域決定部と、
前記キー領域決定部が決定した１以上の各キー領域に関するキー領域情報と、前記有用キー領域情報格納部に格納されている各有用キー領域情報とが類似するか否かを検査し、当該検査結果に応じた小画像片情報量を、２以上の小画像片ごとに取得する小画像片情報量取得部と、
前記小画像片情報量取得部が取得した２以上の小画像片情報量を反映させた情報を出力する出力部として機能させるためのプログラム。 A computer capable of accessing a useful key region information storage unit storing one or more pieces of useful key region information and a target image storage unit storing a target image that is an image to be processed,
an image dividing unit that divides the target image and acquires two or more small image pieces;
a key region determining unit that determines one or more key regions for each of the two or more small image pieces acquired by the image dividing unit;
inspecting whether or not the key area information related to one or more key areas determined by the key area determination unit is similar to each useful key area information stored in the useful key area information storage unit; a small image piece information amount acquisition unit that acquires a small image piece information amount according to the result for each of two or more small image pieces;
A program for functioning as an output unit for outputting information reflecting two or more small image piece information amounts acquired by the small image piece information amount acquiring unit.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021008363A JP2022112542A (en) | 2021-01-22 | 2021-01-22 | Production device, image processing device, production method, image processing method, and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021008363A JP2022112542A (en) | 2021-01-22 | 2021-01-22 | Production device, image processing device, production method, image processing method, and program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2022112542A true JP2022112542A (en) | 2022-08-03 |
Family
ID=82657175
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021008363A Pending JP2022112542A (en) | 2021-01-22 | 2021-01-22 | Production device, image processing device, production method, image processing method, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2022112542A (en) |
-
2021
- 2021-01-22 JP JP2021008363A patent/JP2022112542A/en active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11842556B2 (en) | Image analysis method, apparatus, program, and learned deep learning algorithm | |
| US20200066407A1 (en) | Method and System for Assisting Pathologist Identification of Tumor Cells in Magnified Tissue Images | |
| JP6422198B2 (en) | Image processing apparatus, image processing method, and image processing program | |
| JP5576775B2 (en) | Image processing apparatus, image processing method, and image processing program | |
| JP5442542B2 (en) | Pathological diagnosis support device, pathological diagnosis support method, control program for pathological diagnosis support, and recording medium recording the control program | |
| TWI254891B (en) | Face image detection method, face image detection system, and face image detection program | |
| JP2006153742A (en) | Pathological diagnosis support device, pathological diagnosis support program, pathological diagnosis support method and pathological diagnosis support system | |
| US10956795B2 (en) | Predicting recurrence in early stage non-small cell lung cancer (NSCLC) using spatial arrangement of clusters of tumor infiltrating lymphocytes and cancer nuclei | |
| CN111656393A (en) | Histological image analysis | |
| Hossain et al. | Tissue artifact segmentation and severity assessment for automatic analysis using wsi | |
| US20170367677A1 (en) | Analysis method for breast image and electronic apparatus using the same | |
| JP6733984B2 (en) | Image analysis device | |
| JP4804742B2 (en) | Image processing apparatus and image processing program | |
| JP2016058018A (en) | Image processing method, image processing program and image processor | |
| Arar et al. | High-quality immunohistochemical stains through computational assay parameter optimization | |
| JP2022112542A (en) | Production device, image processing device, production method, image processing method, and program | |
| CN114372970B (en) | Surgical reference information generation method and device | |
| JP6546385B2 (en) | IMAGE PROCESSING APPARATUS, CONTROL METHOD THEREOF, AND PROGRAM | |
| JP2019170881A (en) | Computer program, classification device, classification method, image output device, and operation method of image output device | |
| JP2015156894A (en) | Medical image processor, medical object area extraction method thereof and medical object area extraction processing program | |
| CN111260606B (en) | Diagnostic device and diagnostic method | |
| CN115393246A (en) | Image segmentation system and image segmentation method | |
| JP2024014265A (en) | Production device, image processing device, production method, image processing method and program | |
| JP5910637B2 (en) | Biological image analysis system, biological image analysis method, and biological image analysis program | |
| JP7426712B2 (en) | Image processing device, image processing method, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20231225 |