JP2014050527A - Image processor and image processing method - Google Patents
Image processor and image processing method Download PDFInfo
- Publication number
- JP2014050527A JP2014050527A JP2012196246A JP2012196246A JP2014050527A JP 2014050527 A JP2014050527 A JP 2014050527A JP 2012196246 A JP2012196246 A JP 2012196246A JP 2012196246 A JP2012196246 A JP 2012196246A JP 2014050527 A JP2014050527 A JP 2014050527A
- Authority
- JP
- Japan
- Prior art keywords
- image
- metastasis
- tissue
- image data
- organ
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims description 5
- 210000000056 organ Anatomy 0.000 claims abstract description 207
- 206010027476 Metastases Diseases 0.000 claims abstract description 189
- 230000009401 metastasis Effects 0.000 claims abstract description 189
- 206010028980 Neoplasm Diseases 0.000 claims abstract description 102
- 210000001519 tissue Anatomy 0.000 claims abstract description 62
- 210000002751 lymph Anatomy 0.000 claims abstract description 41
- 238000012545 processing Methods 0.000 claims description 98
- 230000001394 metastastic effect Effects 0.000 claims description 76
- 206010061289 metastatic neoplasm Diseases 0.000 claims description 76
- 210000000988 bone and bone Anatomy 0.000 claims description 65
- 238000004364 calculation method Methods 0.000 claims description 56
- 210000004204 blood vessel Anatomy 0.000 claims description 55
- 238000000605 extraction Methods 0.000 claims description 54
- 239000002131 composite material Substances 0.000 claims description 51
- 210000001365 lymphatic vessel Anatomy 0.000 claims description 45
- 238000012546 transfer Methods 0.000 claims description 42
- 210000001165 lymph node Anatomy 0.000 claims description 41
- 230000003902 lesion Effects 0.000 claims description 39
- 230000002194 synthesizing effect Effects 0.000 claims description 6
- 239000000284 extract Substances 0.000 claims description 5
- 230000015572 biosynthetic process Effects 0.000 abstract description 3
- 238000003786 synthesis reaction Methods 0.000 abstract description 3
- 238000006073 displacement reaction Methods 0.000 description 60
- 230000006870 function Effects 0.000 description 59
- 230000036626 alertness Effects 0.000 description 52
- 238000010586 diagram Methods 0.000 description 40
- 238000002591 computed tomography Methods 0.000 description 33
- 208000007433 Lymphatic Metastasis Diseases 0.000 description 23
- 238000000034 method Methods 0.000 description 15
- 238000002600 positron emission tomography Methods 0.000 description 15
- 239000013598 vector Substances 0.000 description 15
- 230000002980 postoperative effect Effects 0.000 description 13
- 230000007704 transition Effects 0.000 description 13
- 210000004072 lung Anatomy 0.000 description 10
- 238000001356 surgical procedure Methods 0.000 description 7
- 201000011510 cancer Diseases 0.000 description 6
- 230000008859 change Effects 0.000 description 6
- 238000003745 diagnosis Methods 0.000 description 6
- 210000002429 large intestine Anatomy 0.000 description 6
- 230000001926 lymphatic effect Effects 0.000 description 6
- 210000004185 liver Anatomy 0.000 description 4
- 230000009466 transformation Effects 0.000 description 4
- 208000013210 hematogenous Diseases 0.000 description 3
- 238000002595 magnetic resonance imaging Methods 0.000 description 3
- 239000000203 mixture Substances 0.000 description 3
- 206010006187 Breast cancer Diseases 0.000 description 2
- 208000026310 Breast neoplasm Diseases 0.000 description 2
- 206010009944 Colon cancer Diseases 0.000 description 2
- 210000004027 cell Anatomy 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000010968 computed tomography angiography Methods 0.000 description 2
- 230000034994 death Effects 0.000 description 2
- 231100000517 death Toxicity 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 210000003734 kidney Anatomy 0.000 description 2
- 238000012706 support-vector machine Methods 0.000 description 2
- 208000001333 Colorectal Neoplasms Diseases 0.000 description 1
- 208000023146 Pre-existing disease Diseases 0.000 description 1
- 238000001574 biopsy Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 210000001072 colon Anatomy 0.000 description 1
- 208000029742 colonic neoplasm Diseases 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 210000001621 ilium bone Anatomy 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000000696 magnetic material Substances 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000009206 nuclear medicine Methods 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 238000004393 prognosis Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 210000001562 sternum Anatomy 0.000 description 1
- 210000000689 upper leg Anatomy 0.000 description 1
- 238000011179 visual inspection Methods 0.000 description 1
Landscapes
- Measurement Of Radiation (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Nuclear Medicine (AREA)
- Processing Or Creating Images (AREA)
Abstract
Description
本発明の一態様としての本実施形態は、腫瘍（癌）を含む画像データを表示する画像処理装置及び画像処理方法に関する。 The present embodiment as one aspect of the present invention relates to an image processing apparatus and an image processing method for displaying image data including a tumor (cancer).
日本人の癌の罹患率・死亡率は非常に高く、現在も増加し続けている。癌は日本人の死因の第１位で、総死亡の３割を占めており、医療現場におけるがん治療のニーズは高い。転移・再発による死亡率が原発巣によるものより高く、原発巣だけでなく、癌細胞の転移・再発部位を診断し、外科手術や科学治療等の適切な治療を行なう必要がある。 Japanese cancer morbidity and mortality are very high and continue to increase. Cancer is the leading cause of death among Japanese people, accounting for 30% of all deaths, and the need for cancer treatment in the medical field is high. The mortality rate due to metastasis / recurrence is higher than that caused by the primary lesion, and it is necessary to diagnose not only the primary lesion but also the cancer cell metastasis / recurrence site and perform appropriate treatment such as surgery and scientific treatment.
癌細胞の転移には、リンパ節転移（リンパ行性転移）、血行性転移、播種性転移、及び接触性転移があり、原発巣の位置により、転移しやすい部位があることが知られている。リンパ節転移し易い癌として、例えば、大腸癌や乳癌等がある。 Cancer cell metastasis includes lymph node metastasis (lymphatic metastasis), hematogenous metastasis, disseminated metastasis, and contact metastasis, and it is known that there is a site that is likely to metastasize depending on the location of the primary lesion. . Examples of cancers that tend to metastasize to lymph nodes include colon cancer and breast cancer.
大腸癌及び乳癌のいずれの場合も、画像診断だけでなく、生検や術中にリンパ節を直接目視することで、転移の有無が確認される。しかしながら、超早期のため腫瘍が小さすぎる場合は画像に写らず、また、写ったとしてもコントラストが低いので視認され難い。これにより、転移・再発の診断が確定できない場合がある。また、画像上で視認可能な大きさとなった腫瘍は、短期間で急激に増殖・転移するため、術後の予後観察が重要となる。 In both cases of colorectal cancer and breast cancer, the presence or absence of metastasis is confirmed not only by image diagnosis but also by direct visual inspection of lymph nodes during biopsy or surgery. However, if the tumor is too small for the very early stage, it will not appear in the image, and even if it appears, it will be difficult to see because the contrast is low. As a result, the diagnosis of metastasis / recurrence may not be confirmed. In addition, a tumor that has become visible on the image grows and metastasizes rapidly in a short period of time, so postoperative prognostic observation is important.
腫瘍のある臓器とリンパ節転移、遠隔転移があるかを検索し、それら経過観察結果を記載したレポートを自動で作成するシステムが開示されている（例えば、特許文献１参照）。そして、初期診断から予後観察間で、時間経過による腫瘍の変化が比較される。 A system that searches for organs with tumors, lymph node metastasis, and distant metastasis and automatically creates a report that describes the results of their follow-up observation is disclosed (for example, see Patent Document 1). Then, changes in the tumor over time are compared between the initial diagnosis and prognostic observation.
術前・術後の画像診断において、診断のたびに全身の組織を含む画像から転移先の腫瘍を確認することは、医師の負担も大きく、画像上の転移・再発の見落としの可能性も高くなる。 In pre- and post-operative image diagnosis, checking the tumor at the metastasis destination from an image that includes tissue throughout the body at each diagnosis is a heavy burden on the doctor, and there is a high possibility of oversight of metastasis and recurrence on the image. Become.
また、前述したとおり、腫瘍が画像上に写る大きさになってから短期間で急激に腫瘍が増殖・転移するため、可能な限り早い段階で腫瘍を転移・再発を見つけ治療する必要があるにもかかわらず、早期の腫瘍は視認され難い。 In addition, as described above, since the tumor grows and metastasizes rapidly in a short period after the size of the tumor appears on the image, it is necessary to detect and treat the tumor as soon as possible. Nevertheless, early tumors are difficult to see.
以上より、全身の組織を含む画像のうち、医師が診断・予後観察時により注意して診るように腫瘍の転移先候補を予測して、転移先候補の情報を提示する技術が必要となる。しかしながら、従来技術によると、既に腫瘍がある、または転移している場合を想定しており、転移先候補の情報を提示するものではない。 As described above, a technique for predicting a tumor metastasis destination candidate and presenting information on the metastasis destination candidate is necessary so that a doctor can more carefully examine an image including whole body tissue during diagnosis and prognosis observation. However, according to the prior art, it is assumed that the tumor is already present or has metastasized, and information on the candidate for the metastasis destination is not presented.
本実施形態の画像処理装置は、上述した課題を解決するために、画像データに、組織に関する腫瘍の転移警戒情報を合成して合成画像データを生成する合成画像データ生成手段と、前記合成画像データを表示装置に表示させる表示制御手段と、を有する。 In order to solve the above-described problems, the image processing apparatus according to the present embodiment synthesizes tumor metastasis warning information about tissue with image data to generate composite image data, and the composite image data Display control means for displaying on a display device.
本実施形態の画像処理方法は、上述した課題を解決するために、記憶装置に記憶された画像データを取得し、前記画像データに、組織に関する腫瘍の転移警戒情報を合成して合成画像データを生成し、前記合成画像データを表示装置に表示させる。 In order to solve the above-described problem, the image processing method according to the present embodiment acquires image data stored in a storage device, and synthesizes the metastasis warning information of the tumor related to the tissue with the image data to generate composite image data. And generating and displaying the composite image data on a display device.
本実施形態の画像処理装置及び画像処理方法について、添付図面を参照して説明する。 An image processing apparatus and an image processing method of this embodiment will be described with reference to the accompanying drawings.
（第１実施形態）
第１実施形態の画像処理装置は、腫瘍が、リンパ節転移によって原発巣組織以外の組織に転移する可能性（転移警戒情報）を術前画像に基づいて算出し、転移警戒情報を術前画像に重畳して表示する技術に関する。第１実施形態の画像処理装置では、原発巣組織以外の組織をリンパ管、臓器、及びリンパ節とする。
(First embodiment)
The image processing apparatus according to the first embodiment calculates the possibility that a tumor may metastasize to a tissue other than the primary tissue by lymph node metastasis (metastasis alert information) based on the preoperative image, and the metastasis alert information is obtained from the preoperative image. The present invention relates to a technique for superimposing and displaying on the screen. In the image processing apparatus according to the first embodiment, tissues other than the primary tissue are lymph vessels, organs, and lymph nodes.
図１は、第１実施形態の画像処理装置を含むシステム構成を示す概略図である。 FIG. 1 is a schematic diagram illustrating a system configuration including an image processing apparatus according to the first embodiment.
図１は、画像生成装置（モダリティ）８、画像管理装置（画像サーバ）９、及び第１実施形態の画像処理装置（ｗｏｒｋ ｓｔａｔｉｏｎ）１０を設ける。なお、複数の画像処理装置１０が設けられてもよい。 1 includes an image generation device (modality) 8, an image management device (image server) 9, and an image processing device (work station) 10 according to the first embodiment. A plurality of image processing apparatuses 10 may be provided.
画像生成装置８、画像管理装置９、及び画像処理装置１０は、コンピュータをベースとして構成されている。また、画像生成装置８、画像管理装置９、及び画像処理装置１０は、病院基幹のＬＡＮ（ｌｏｃａｌ ａｒｅａ ｎｅｔｗｏｒｋ）等のネットワークＮによって相互通信可能に接続されている。なお、画像処理装置１０は、ネットワークＮ網に相互通信可能に接続されていなくても構わない。 The image generation device 8, the image management device 9, and the image processing device 10 are configured based on a computer. In addition, the image generation device 8, the image management device 9, and the image processing device 10 are connected to each other via a network N such as a hospital backbone LAN (local area network). The image processing apparatus 10 may not be connected to the network N so as to be capable of mutual communication.
画像生成装置８としては、超音波診断装置、Ｘ線ＣＴ（ｃｏｍｐｕｔｅｄ ｔｏｍｏｇｒａｐｈｙ）装置、ＭＲＩ（ｍａｇｎｅｔｉｃ ｒｅｓｏｎａｎｃｅ ｉｍａｇｉｎｇ）装置、核医学装置、及びアンギオ装置等が挙げられ、一般的には、ネットワークＮ網に複数の画像生成装置８が接続されている。画像生成装置８は、患者の撮像部位等の被検体に関する画像データを、付帯情報を関連付けて生成する。 Examples of the image generating apparatus 8 include an ultrasonic diagnostic apparatus, an X-ray CT (computed tomography) apparatus, an MRI (magnetic resonance imaging) apparatus, a nuclear medicine apparatus, an angio apparatus, and the like. A plurality of image generation apparatuses 8 are connected. The image generation device 8 generates image data related to a subject such as an imaging region of a patient in association with incidental information.
画像管理装置９は、画像生成装置８によって生成される画像データを、ネットワークＮを介して受信して保管するＤＢ（ｄａｔａ ｂａｓｅ）サーバである。 The image management device 9 is a DB (data base) server that receives and stores the image data generated by the image generation device 8 via the network N.
図２は、第１実施形態の画像処理装置１０のハードウェア構成の一例を示す図である。 FIG. 2 is a diagram illustrating an example of a hardware configuration of the image processing apparatus 10 according to the first embodiment.
図２は、画像処理装置１０のハードウェア構成を示し、その画像処理装置１０は、大きくは、制御装置としてのＣＰＵ（ｃｅｎｔｒａｌ ｐｒｏｃｅｓｓｉｎｇ ｕｎｉｔ）２１、メモリ２２、ＨＤＤ（ｈａｒｄ ｄｉｓｃ ｄｒｉｖｅ）２３、ＩＦ（ｉｎｔｅｒｆａｃｅ）２４、入力装置２５、及び表示装置２６等の基本的なハードウェアから構成される。ＣＰＵ２１は、共通信号伝送路としてのバスＢを介して、画像処理装置１０をそれぞれ構成する各ハードウェア構成要素に相互接続されている。 FIG. 2 shows a hardware configuration of the image processing apparatus 10. The image processing apparatus 10 mainly includes a CPU (central processing unit) 21, a memory 22, an HDD (hard disc drive) 23, an IF (IF) (control device). interface) 24, input device 25, display device 26, and the like. The CPU 21 is interconnected to each hardware component constituting the image processing apparatus 10 via a bus B as a common signal transmission path.
ＣＰＵ２１は、半導体で構成された電子回路が複数の端子を持つパッケージに封入されている集積回路（ＬＳＩ）の構成をもつ制御装置である。ＣＰＵ２１は、メモリ２２に記憶しているプログラムを実行する。又は、ＣＰＵ２１は、ＨＤＤ２３に記憶しているプログラム、ネットワークＮから転送されＩＦ２４で受信されてＨＤＤ２３にインストールされたプログラム等を、メモリ２２にロードして実行する機能を有する。 The CPU 21 is a control device having a configuration of an integrated circuit (LSI) in which an electronic circuit made of a semiconductor is enclosed in a package having a plurality of terminals. The CPU 21 executes a program stored in the memory 22. Alternatively, the CPU 21 has a function of loading a program stored in the HDD 23, a program transferred from the network N, received by the IF 24 and installed in the HDD 23 into the memory 22 and executing the program.
メモリ２２は、ＲＯＭ（ｒｅａｄ ｏｎｌｙ ｍｅｍｏｒｙ）及びＲＡＭ（ｒａｎｄｏｍ ａｃｃｅｓｓ ｍｅｍｏｒｙ）等を含む記憶装置である。メモリ２２は、ＩＰＬ（ｉｎｉｔｉａｌ ｐｒｏｇｒａｍ ｌｏａｄｉｎｇ）、ＢＩＯＳ（ｂａｓｉｃ ｉｎｐｕｔ／ｏｕｔｐｕｔ ｓｙｓｔｅｍ）及びデータを記憶したり、ＣＰＵ２１のワークメモリやデータの一時的な記憶に用いたりする機能を有する。 The memory 22 is a storage device including a read only memory (ROM) and a random access memory (RAM). The memory 22 has a function of storing an initial program loading (IPL), a BIOS (basic input / output system), and data, and a work memory of the CPU 21 and a temporary storage of data.
ＨＤＤ２３は、磁性体を塗布又は蒸着した金属のディスクが読み取り装置（図示しない）に着脱不能で内蔵されている構成をもつ記憶装置である。ＨＤＤ２３は、画像処理装置１０にインストールされたプログラム（アプリケーションプログラムの他、ＯＳ（ｏｐｅｒａｔｉｎｇ ｓｙｓｔｅｍ）等も含まれる）や各種データを記憶する機能を有する。 The HDD 23 is a storage device having a configuration in which a metal disk coated or vapor-deposited with a magnetic material is incorporated in a reading device (not shown) in a non-detachable manner. The HDD 23 has a function of storing a program installed in the image processing apparatus 10 (including an OS (operating system) in addition to an application program) and various data.
ＩＦ２４は、パラレル接続仕様やシリアル接続仕様に合わせたコネクタによって構成される。ＩＦ２４は、各規格に応じた通信制御を行ない、電話回線を通じてネットワークＮに接続することができる機能を有しており、これにより、画像処理装置１０をネットワークＮ網に接続させる。 The IF 24 includes a connector that conforms to a parallel connection specification or a serial connection specification. The IF 24 has a function of performing communication control according to each standard and connecting to the network N through a telephone line, thereby connecting the image processing apparatus 10 to the network N network.
入力装置２５としては、医師等の読影者（操作者）によって操作が可能なキーボード及びマウス等によって構成される。入力装置２５の操作に従った入力信号はバスＢを介してＣＰＵ２１に送られる。 The input device 25 includes a keyboard and a mouse that can be operated by an interpreter (operator) such as a doctor. An input signal according to the operation of the input device 25 is sent to the CPU 21 via the bus B.
表示装置２６としては、図示しないＤ／Ａ（ｄｉｇｉｔａｌ ｔｏ ａｎａｌｏｇ）変換回路及びモニタ等によって構成される。 The display device 26 includes a D / A (digital to analog) conversion circuit and a monitor (not shown).
図３及び図４は、第１実施形態の画像処理装置１０の機能を示すブロック図である。 3 and 4 are block diagrams illustrating functions of the image processing apparatus 10 according to the first embodiment.
ＣＰＵ２１（図２に示す）によってプログラムが実行されることによって、図３及び図４に示すように、画像処理装置１０は、インターフェース部４１、臓器画像取得部４２、腫瘍画像取得部４３、リンパ管・節画像取得部４４、転移リンパ節画像取得部４５、臓器領域抽出部４６、腫瘍領域抽出部４７、第１変位演算部４８、腫瘍画像変形部４９、リンパ管・節領域抽出部５０、第２変位演算部５１、臓器画像変形部５２、リンパ節鑑別部５３、原発巣臓器設定部５４、転移警戒リンパ管設定部５５、転移警戒臓器抽出部５６、転移警戒度演算部５７、オーバーレイ生成部５８、及び合成部５９として機能する。なお、図３及び図４に示す構成要素が、ソフトウェア的に機能する場合を例に挙げて説明するが、それら構成要素の一部又は全部は、画像処理装置１０にハードウェア的にそれぞれ設けられるものであってもよい。 When the program is executed by the CPU 21 (shown in FIG. 2), as shown in FIGS. 3 and 4, the image processing apparatus 10 includes an interface unit 41, an organ image acquisition unit 42, a tumor image acquisition unit 43, a lymph vessel Node image acquisition unit 44, metastatic lymph node image acquisition unit 45, organ region extraction unit 46, tumor region extraction unit 47, first displacement calculation unit 48, tumor image deformation unit 49, lymphatic vessel / node region extraction unit 50, first 2. Displacement calculation unit 51, organ image deformation unit 52, lymph node discrimination unit 53, primary lesion organ setting unit 54, metastasis alert lymphatic vessel setting unit 55, metastasis alert organ extraction unit 56, metastasis alert organ calculation unit 57, overlay generation unit 58 and the combining unit 59. 3 and FIG. 4 will be described by taking as an example a case where the components shown in FIG. 3 and FIG. 4 function as software, but some or all of these components are provided in the image processing apparatus 10 as hardware. It may be a thing.
図３及び図４に示すインターフェース部４１は、図３及び図４に示す構成要素と、入力装置２５及び表示装置２６とを媒介するＧＵＩ（ｇｒａｐｈｉｃａｌ ｕｓｅｒ ｉｎｔｅｒｆａｃｅ）等のインターフェースである。 The interface unit 41 illustrated in FIGS. 3 and 4 is an interface such as a GUI (Graphical User Interface) that mediates the components illustrated in FIGS. 3 and 4, the input device 25, and the display device 26.
図３に示す臓器画像取得部４２は、入力装置２５を介してキー情報（患者識別情報及びスタディ識別情報等）が入力されると、ＩＦ２４を介して画像管理装置９から、キー情報に対応する付帯情報が付帯された、所要患者に関する全身の臓器を含む臓器画像（ボリュームデータ）、例えばＣＴ画像を取得する機能を有する。 When key information (patient identification information, study identification information, etc.) is input via the input device 25, the organ image acquisition unit 42 illustrated in FIG. 3 corresponds to the key information from the image management device 9 via the IF 24. It has a function of acquiring an organ image (volume data) including a whole body organ related to a required patient, for example, a CT image, with accompanying information.
腫瘍画像取得部４３は、入力装置２５を介してキー情報が入力されると、ＩＦ２４を介して画像管理装置９から、キー情報に対応する付帯情報が付帯された、所要患者に関する腫瘍を含む腫瘍画像（ボリュームデータ）、例えばＰＥＴ（ｐｏｓｉｔｒｏｎ ｅｍｉｓｓｉｏｎ ｔｏｍｏｇｒａｐｈｙ）画像を取得する機能を有する。 When the key information is input via the input device 25, the tumor image acquisition unit 43 includes a tumor related to the required patient, with additional information corresponding to the key information from the image management device 9 via the IF 24. It has a function of acquiring an image (volume data), for example, a PET (Positron Emission Tomography) image.
リンパ管・節画像取得部４４は、入力装置２５を介してキー情報が入力されると、ＩＦ２４を介して画像管理装置９から、キー情報に対応する付帯情報が付帯された、所要患者に関するリンパ管・節を含むリンパ管・節画像（ボリュームデータ）、例えばＴ１Ｗ（縦緩和強調）画像を取得する機能を有する。 When the key information is input via the input device 25, the lymph vessel / node image acquisition unit 44 receives lymphatic information related to the required patient to which additional information corresponding to the key information is attached from the image management device 9 via the IF 24. It has a function of acquiring lymphatic vessel / node images (volume data) including tubes and nodes, for example, T1W (longitudinal relaxation emphasis) images.
転移リンパ節画像取得部４５は、入力装置２５を介してキー情報が入力されると、ＩＦ２４を介して画像管理装置９から、キー情報に対応する付帯情報が付帯された、所要患者に関する転移リンパ節を含む転移リンパ節画像（ボリュームデータ）、例えばＴ２Ｗ（横緩和強調）画像を取得する機能を有する。 When the key information is input via the input device 25, the metastatic lymph node image acquisition unit 45 receives the metastatic lymph related to the required patient from the image management device 9 via the IF 24, with the additional information corresponding to the key information. It has a function of acquiring a metastatic lymph node image (volume data) including a node, for example, a T2W (lateral relaxation emphasis) image.
臓器領域抽出部４６は、臓器画像取得部４２によって取得されたＣＴ画像に基づいて臓器領域を抽出する機能を有する。 The organ region extraction unit 46 has a function of extracting an organ region based on the CT image acquired by the organ image acquisition unit 42.
腫瘍領域抽出部４７は、腫瘍画像取得部４３によって取得されたＰＥＴ画像（ＰＥＴ−ＣＴ画像）に基づいて腫瘍領域を抽出する機能を有する。また、腫瘍領域抽出部４７は、ＰＥＴ画像以外のＣＴ画像／ＭＲＩ画像に基づいて腫瘍領域を抽出してもよい。 The tumor region extraction unit 47 has a function of extracting a tumor region based on the PET image (PET-CT image) acquired by the tumor image acquisition unit 43. The tumor region extraction unit 47 may extract a tumor region based on a CT image / MRI image other than the PET image.
第１変位演算部４８は、臓器画像取得部４２によって取得されたＣＴ画像を基準とする、腫瘍画像取得部４３によって取得されたＰＥＴ画像の変位を第１変位として算出する機能を有する。第１変位演算部４８は、ＣＴ画像とＰＥＴ画像とにおける解剖学的同一点の位置の差をベクトルで表し、ベクトルの集合をベクトル場として表現したワープフィールド（Ｗａｒｐ Ｆｉｅｌｄ）を算出する。 The first displacement calculation unit 48 has a function of calculating the displacement of the PET image acquired by the tumor image acquisition unit 43 with the CT image acquired by the organ image acquisition unit 42 as a reference as the first displacement. The first displacement calculator 48 calculates a warp field (Warp Field) in which the difference between the positions of the same anatomical points in the CT image and the PET image is expressed as a vector, and a set of vectors is expressed as a vector field.
腫瘍画像変形部４９は、第１変位演算部４８によって算出された第１変位に基づいて、臓器画像取得部４２によって取得されたＣＴ画像を基準として、腫瘍画像取得部４３によって取得されたＰＥＴ画像を変形させる機能を有する。腫瘍画像変形部４９によるＰＥＴ画像の変形によって、腫瘍領域抽出部４７によって抽出された腫瘍領域が変形される。なお、第１変位演算部４８は、腫瘍画像取得部４３によって取得されたＰＥＴ画像を基準とする、臓器画像取得部４２によって取得されたＣＴ画像の変位を算出してもよい。 The tumor image deforming unit 49 uses the CT image acquired by the organ image acquiring unit 42 as a reference based on the first displacement calculated by the first displacement calculating unit 48, and the PET image acquired by the tumor image acquiring unit 43. Has a function of deforming. Due to the deformation of the PET image by the tumor image deforming unit 49, the tumor region extracted by the tumor region extracting unit 47 is deformed. Note that the first displacement calculation unit 48 may calculate the displacement of the CT image acquired by the organ image acquisition unit 42 with the PET image acquired by the tumor image acquisition unit 43 as a reference.
なお、第１変位演算部４８及び腫瘍画像変形部４９は、ＣＴ画像及びＰＥＴ画像を位置合わせするものであり、ＰＥＴ画像をＣＴ画像に合わせる場合に限られず、ＣＴ画像をＰＥＴ画像に合わせる場合であってもよい。 The first displacement calculator 48 and the tumor image deforming unit 49 align the CT image and the PET image. The first displacement calculator 48 and the tumor image deforming unit 49 are not limited to the case where the PET image is aligned with the CT image, but the case where the CT image is aligned with the PET image. There may be.
リンパ管・節領域抽出部５０は、リンパ管・節画像取得部４４によって取得されたＴ１Ｗ画像に基づいてリンパ管領域及びリンパ節領域を抽出する機能を有する。リンパ管・節領域抽出部５０は、血管抽出技術を応用してリンパ管・節を抽出してもよい。 The lymph vessel / node region extraction unit 50 has a function of extracting a lymph vessel region and a lymph node region based on the T1W image acquired by the lymph vessel / node image acquisition unit 44. The lymph vessel / node region extraction unit 50 may extract lymph vessels / nodes by applying a blood vessel extraction technique.
第２変位演算部５１は、リンパ管・節画像取得部４４によって取得されたＴ１Ｗ画像を基準とする、臓器画像取得部４２によって取得されたＣＴ画像の変位を第２変位として算出する機能を有する。第２変位演算部５１は、ＣＴ画像とＴ１Ｗ画像とにおける解剖学的同一点の位置の差をベクトルで表し、ベクトルの集合をベクトル場として表現したワープフィールドを算出する。 The second displacement calculation unit 51 has a function of calculating the displacement of the CT image acquired by the organ image acquisition unit 42 based on the T1W image acquired by the lymph vessel / node image acquisition unit 44 as the second displacement. . The second displacement calculation unit 51 calculates a warp field in which the difference between the positions of the same anatomical points in the CT image and the T1W image is expressed as a vector, and the set of vectors is expressed as a vector field.
臓器画像変形部５２は、第２変位演算部５１によって算出された第２変位に基づいて、リンパ管・節画像取得部４４によって取得されたＴ１Ｗ画像を基準として、臓器画像取得部４２によって取得されたＣＴ画像を変形させる機能を有する。臓器画像変形部５２によるＣＴ画像の変形によって、臓器領域抽出部４６によって抽出された臓器領域が変形される。 The organ image deforming unit 52 is acquired by the organ image acquiring unit 42 based on the T1W image acquired by the lymph vessel / node image acquiring unit 44 based on the second displacement calculated by the second displacement calculating unit 51. A function of deforming the CT image. Due to the deformation of the CT image by the organ image deforming unit 52, the organ region extracted by the organ region extracting unit 46 is deformed.
なお、第２変位演算部５１及び臓器画像変形部５２は、ＣＴ画像及びＴ１Ｗ画像を位置合わせするものであり、ＣＴ画像をＴ１Ｗ画像に合わせる場合に限られず、Ｔ１Ｗ画像をＣＴ画像に合わせる場合であってもよい。 The second displacement calculation unit 51 and the organ image deformation unit 52 align the CT image and the T1W image. The second displacement calculation unit 51 and the organ image deformation unit 52 are not limited to aligning the CT image with the T1W image, but when aligning the T1W image with the CT image. There may be.
リンパ節鑑別部５３は、転移リンパ節画像取得部４５によって取得されたＴ２Ｗ画像と、リンパ管・節領域抽出部５０によって抽出されたリンパ節領域とに基づいて、転移しているか否かリンパ節を鑑別する機能を有する。リンパ節鑑別部５３は、リンパ節に腫瘍が転移している場合にリンパ節が大きくなることを利用し、リンパ管・節領域抽出部５０によって抽出されたリンパ節領域のうち、閾値以上の大きさのリンパ節領域を転移リンパ節として設定する。 Based on the T2W image acquired by the metastatic lymph node image acquisition unit 45 and the lymph node region extracted by the lymph vessel / node region extraction unit 50, the lymph node discrimination unit 53 determines whether the lymph node has metastasized. It has the function to distinguish. The lymph node discrimination unit 53 utilizes the fact that the lymph node becomes large when the tumor has metastasized to the lymph node, and the lymph node region extracted by the lymph vessel / node region extraction unit 50 is larger than the threshold value. The lymph node area is set as a metastatic lymph node.
原発巣臓器設定部５４は、臓器領域抽出部４６によって抽出された臓器領域のＣＴ画像上における位置情報と、腫瘍画像変形部４９によって変形後のＰＥＴ画像上における腫瘍領域の位置情報とに基づいて、腫瘍領域に対応する位置の臓器領域の臓器を原発巣臓器として設定する機能を有する。 The primary lesion organ setting unit 54 is based on the positional information on the CT image of the organ region extracted by the organ region extracting unit 46 and the positional information of the tumor region on the PET image deformed by the tumor image deforming unit 49. In addition, it has a function of setting an organ in an organ region at a position corresponding to a tumor region as a primary focal organ.
図４の説明に移って、転移警戒リンパ管抽出部５５は、リンパ管・節抽出部５０によって抽出されたＴ１Ｗ画像上のリンパ管の位置情報と、臓器画像変形部５２によって変形後の臓器領域のうち原発巣臓器設定部５４によって設定された原発巣臓器の位置情報とに基づいて、原発巣臓器に接合されるリンパ管を転移警戒リンパ管（転移先候補のリンパ管）として抽出する機能を有する。 Moving to the description of FIG. 4, the metastatic alert lymphatic vessel extraction unit 55 includes the location information of the lymphatic vessel on the T1W image extracted by the lymphatic vessel / node extraction unit 50, and the organ region deformed by the organ image transformation unit 52. Based on the position information of the primary lesion organ set by the primary lesion organ setting unit 54, the function of extracting lymphatic vessels joined to the primary lesion organ as metastatic alert lymphatic vessels (metastasis destination candidate lymphatic vessels) Have.
図５は、転移警戒リンパ管の抽出方法を説明するための模式図である。 FIG. 5 is a schematic diagram for explaining a method for extracting metastatic alert lymphatic vessels.
図５に示すように、大腸に腫瘍領域Ｓが存在し、大腸が原発巣臓器として設定されている場合、原発巣臓器としての大腸に接合される全てのリンパ管が転移警戒リンパ管Ｌとして設定される。 As shown in FIG. 5, when the tumor region S exists in the large intestine and the large intestine is set as the primary focal organ, all the lymph vessels joined to the large intestine as the primary focal organ are set as the metastatic caution lymphatic vessels L. Is done.
図４の説明に戻って、転移警戒臓器抽出部５６は、臓器画像変形部５２によって変形後の臓器領域のうち原発巣臓器設定部５４によって設定された原発巣臓器以外の臓器の位置情報と、転移警戒リンパ管抽出部５５によって設定された転移警戒リンパ管の位置情報とを比較し、転移警戒リンパ管に接合される臓器を転移警戒臓器（転移先候補の臓器）として抽出する機能を有する。 Returning to the explanation of FIG. 4, the metastatic vigilance organ extracting unit 56 includes position information of organs other than the primary focal organ set by the primary focal organ setting unit 54 among the organ regions deformed by the organ image deforming unit 52, and It has a function of comparing the position information of the metastatic caution lymphatic vessel set by the metastatic cautionary lymphatic vessel extraction unit 55 and extracting an organ joined to the metastatic cautionary lymphatic vessel as a metastatic alerting organ (an organ of a metastasis destination candidate).
図６は、転移警戒臓器の抽出方法を説明するための模式図である。 FIG. 6 is a schematic diagram for explaining a method of extracting a metastatic alert organ.
図６に示すように、原発巣臓器としての大腸以外の臓器で、転移警戒リンパ管Ｌを含む全ての臓器が転移警戒臓器Ｏ（肝臓、右肺、及び左肺）として設定される。 As shown in FIG. 6, all organs other than the large intestine as the primary organ, including the metastatic alert lymphatic vessel L, are set as metastatic alert organs O (liver, right lung, and left lung).
図４の説明に戻って、転移警戒度演算部５７は、リンパ管転移警戒度演算部１０１、臓器転移警戒度演算部１０２、及びリンパ節転移警戒度演算部１０３を有する。 Returning to the description of FIG. 4, the metastasis alert level calculator 57 includes a lymphatic metastasis alert level calculator 101, an organ metastasis alert level calculator 102, and a lymph node metastasis alert level calculator 103.
リンパ管転移警戒度演算部１０１は、腫瘍画像変形部４９によって変形後の腫瘍領域を第２変位演算部５１によって算出された第２変位に基づいてさらに変形後の腫瘍領域の位置情報と、転移警戒リンパ管抽出部５５によって設定された各転移警戒リンパ管の位置情報とに基づいて、腫瘍領域と各転移警戒リンパ管との距離を算出し、距離に応じて各転移警戒リンパ管の転移警戒度を算出する機能を有する。 The lymphatic metastasis warning level calculation unit 101 further converts the tumor region after the tumor image deformed by the tumor image deforming unit 49 based on the second displacement calculated by the second displacement calculating unit 51, and the metastasis Based on the position information of each metastatic alert lymphatic vessel set by the alert lymphatic vessel extraction unit 55, the distance between the tumor area and each metastatic alert lymphatic vessel is calculated, and the metastatic alert of each metastatic alerting lymphatic vessel is calculated according to the distance. It has a function to calculate the degree.
図７は、リンパ管転移警戒度の算出方法を説明するための模式図である。 FIG. 7 is a schematic diagram for explaining a method of calculating a lymphatic vessel metastasis alertness level.
図７では、転移警戒リンパ管Ｌの転移警戒度を濃淡によって表現している。転移警戒度の高い転移警戒リンパ管Ｌの濃淡を濃く表現し、転移警戒度の低い転移警戒リンパ管Ｌの濃淡を薄く表現している。 In FIG. 7, the metastatic alertness of the metastatic alert lymphatic vessel L is expressed by shading. The density of the metastatic caution lymphatic vessel L having a high metastatic alertness level is expressed deeply, and the density of the metastatic cautionary lymphatic vessel L having a low metastatic alertness level is expressed lightly.
腫瘍領域Ｓ内には複数のボクセル［Ｓｘ（ｉ），Ｓｙ（ｉ），Ｓｚ（ｉ）］が存在する。そこで、次の式（１）を用いて、腫瘍領域Ｓ内の複数のボクセル［Ｓｘ（ｉ），Ｓｙ（ｉ），Ｓｚ（ｉ）］と、各転移警戒リンパ管Ｌ及び原発巣臓器（腫瘍領域Ｓを含む臓器）の接合部Ｃのボクセル［Ｌｘ，Ｌｙ，Ｌｚ］との直線距離ｄ（ｉ）がそれぞれ算出される。そして、各転移警戒リンパ管Ｌにおける複数の直線距離ｄ（ｉ）の中の最小の直線距離ｄｍｉｎが、腫瘍領域Ｓと各転移警戒リンパ管Ｌとの距離ＤＬＳとされる。 Within the tumor region S, there are a plurality of voxels [Sx (i), Sy (i), Sz (i)]. Therefore, using the following formula (1), a plurality of voxels [Sx (i), Sy (i), Sz (i)] in the tumor region S, each metastatic alert lymphatic vessel L, and the primary focal organ (tumor) The linear distance d (i) with the voxel [Lx, Ly, Lz] at the junction C of the organ including the region S is calculated. The minimum straight line distance dmin of the plurality of linear distance d (i) for each transition vigilance lymphatic L is a distance D LS of the tumor area S and the transition vigilance lymphatic L.
又は、次の式（２）を用いて、腫瘍領域Ｓの重心のボクセル［ＳＧｘ，ＳＧｙ，ＳＧｚ］と、各転移警戒リンパ管Ｌ及び原発巣臓器の接合部Ｃのボクセル［Ｌｘ，Ｌｙ，Ｌｚ］との直線距離が、腫瘍領域Ｓと各転移警戒リンパ管Ｌとの距離ＤＬＳとして算出される。 Or, using the following equation (2), the voxel [SGx, SGy, SGz] of the center of gravity of the tumor region S and the voxel [Lx, Ly, Lz of each metastatic alert lymphatic vessel L and the junction C of the primary organ of origin] ] Is calculated as a distance D LS between the tumor region S and each metastatic alert lymphatic vessel L.
なお、上記式（１），（２）を用いて算出される距離ＤＬＳは、腫瘍領域Ｓの位置情報と、各接合部Ｃのボクセルとの直線距離を用いて算出されるが、その場合に限定されるものではない。例えば、距離ＤＬＳは、腫瘍領域Ｓのボクセルと、各接合部Ｃのボクセルとの解剖学的な距離であってもよい。 Note that the distance D LS calculated using the above formulas (1) and (2) is calculated using the positional information of the tumor region S and the linear distance between the voxels of each joint C. In this case, It is not limited to. For example, the distance D LS may be an anatomical distance between the voxel of the tumor region S and the voxel of each joint C.
ここで、リンパ管転移警戒度演算部１０１によって算出される各転移警戒リンパ管Ｌの転移警戒度は、「距離○○ｍｍ以上△△ｍｍ未満」のように複数の閾値を用いて分類される。又は、リンパ管転移警戒度演算部１０１によって算出される各転移警戒リンパ管Ｌの転移警戒度は、図８に示すグラフに基づいて分類されてもよい。 Here, the metastasis alert level of each metastasis alert lymph vessel L calculated by the lymphatic metastasis alert level calculation unit 101 is classified using a plurality of thresholds such as “distance XX mm or more and less than △ Δ mm”. . Alternatively, the metastasis alert level of each metastasis alert lymph vessel L calculated by the lymphatic metastasis alert level calculator 101 may be classified based on the graph shown in FIG.
図８は、転移警戒リンパ管の転移警戒度を求めるためのグラフを示す図である。 FIG. 8 is a diagram showing a graph for determining the metastatic alertness of the metastatic alert lymphatic vessel.
図８に示すように、各転移警戒リンパ管の転移警戒度は、腫瘍領域と各転移警戒リンパ管との距離ＤＬＳが遠くなるにつれて、転移警戒リンパ管の転移警戒度が小さくなる。 As shown in FIG. 8, the metastasis alertness of each metastasis alert lymphatic vessel becomes smaller as the distance DLS between the tumor region and each metastasis alert lymphatic vessel becomes longer.
図４の説明に戻って、臓器転移警戒度演算部１０２は、転移警戒リンパ管抽出部５５によって設定された転移警戒リンパ管の位置情報と、転移警戒臓器抽出部５６によって抽出された転移警戒臓器の位置情報と、リンパ管転移警戒度演算部１０１によって算出された、各転移警戒リンパ管の転移警戒度とに基づいて、各転移警戒臓器の転移警戒度を算出する機能を有する。 Returning to the description of FIG. 4, the organ metastasis alert level calculation unit 102 includes the metastasis alert lymphatic vessel position information set by the metastasis alert lymphatic vessel extraction unit 55 and the metastasis alert organ extraction unit 56. And the metastatic alertness of each metastatic alerting lymph, calculated by the lymphatic metastasis alerting degree calculation unit 101, the function of calculating the metastasis alerting degree of each metastatic alert organ.
臓器転移警戒度演算部１０２は、転移警戒臓器に接合された１又は複数の転移警戒リンパ管Ｌが、１つの接合部Ｃで原発巣臓器に接合されている場合、１又は複数の転移警戒リンパ管の転移警戒度（１の転移警戒度）を当該転移警戒臓器の転移警戒度として適用する。又は、臓器転移警戒度演算部１０２は、転移警戒臓器に接合された複数の転移警戒リンパ管Ｌが、複数の接合部Ｃで原発巣臓器に接合されている場合、複数の転移警戒リンパ管の転移警戒度（１又は複数の転移警戒度）のうち最も高い転移警戒度を当該転移警戒臓器の転移警戒度として適用する。 The organ metastasis alert level calculation unit 102, when one or more metastasis alert lymph vessels L joined to the metastasis alert organ is joined to the primary organ at one junction C, one or more metastasis alert lymphs. The tube transfer warning level (1 transfer warning level) is applied as the transfer warning level of the transfer warning organ. Alternatively, the organ metastasis alert level calculation unit 102, when a plurality of metastasis alert lymph vessels L joined to the metastasis alert organ is joined to the primary organ at a plurality of junctions C, The highest transfer warning level among the transfer warning levels (one or more transfer warning levels) is applied as the transfer warning level of the transfer warning organ.
図９は、臓器転移警戒度の算出方法を説明するための模式図である。 FIG. 9 is a schematic diagram for explaining a method of calculating an organ metastasis alert level.
図９では、転移警戒臓器Ｏの転移警戒度を濃淡によって表現している。転移警戒度の高い転移警戒臓器Ｏの輪郭の濃淡を濃く表現し、転移警戒度の低い転移警戒臓器Ｏの輪郭の濃淡を薄く表現している。 In FIG. 9, the metastasis alert level of the metastasis alert organ O is expressed by shading. The contour of the metastasis alert organ O with a high metastasis alertness level is expressed darkly, and the contour of the metastasis alert organ O with a low metastasis alertness level is expressed lightly.
転移警戒臓器Ｏとしての左肺（右に図示の肺）に接合された２つの転移警戒リンパ管Ｌが１の接合部Ｃで原発巣臓器（大腸）に接合されているので、２つの転移警戒リンパ管Ｌの転移警戒度を左肺の転移警戒度として適用する。転移警戒臓器Ｏとしての右肺（左に図示の肺）に接合された２つの転移警戒リンパ管Ｌが１の接合部Ｃで原発巣臓器に接合されているので、２つの転移警戒リンパ管Ｌの転移警戒度を右肺の転移警戒度として適用する。転移警戒臓器Ｏとしての肝臓に接合された２つの転移警戒リンパ管Ｌが１の接合部Ｃで原発巣臓器に接合されているので、２つの転移警戒リンパ管Ｌの転移警戒度を肝臓の転移警戒度として適用する。 Since the two metastatic alert lymphatic vessels L joined to the left lung (the lung shown on the right) as the metastatic alert organ O are joined to the primary organ (colon) at the junction C, the two metastasis alerts The metastatic alertness of the lymph vessel L is applied as the metastatic alertness of the left lung. Since the two metastatic alert lymphatic vessels L joined to the right lung (the lung shown on the left) as the metastatic alert organ O are joined to the primary organ at the junction C, the two metastatic alert lymph vessels L Is used as the right lung metastasis alertness. Since the two metastatic alert lymphatic vessels L joined to the liver as the metastatic alert organ O are joined to the primary focal organ at the junction C, the metastasis level of the metastasis of the two metastatic alert lymphatic vessels L is transferred to the liver. Applies as a vigilance.
図４の説明に戻って、リンパ節転移警戒度演算部１０３は、リンパ管転移警戒度演算部１０１によって算出される各転移警戒リンパ管の転移警戒度を、それに含まれる全てのリンパ節の転移警戒度として算出する機能を有する。 Returning to the explanation of FIG. 4, the lymph node metastasis alert level calculator 103 calculates the metastasis alert level of each metastasis alert lymph vessel calculated by the lymph vessel metastasis alert level calculator 101 and the metastasis of all the lymph nodes included therein. It has a function to calculate the alertness.
図１０は、リンパ節転移警戒度の第１の算出方法を説明するための模式図である。 FIG. 10 is a schematic diagram for explaining a first method of calculating a lymph node metastasis alertness level.
図１０では、リンパ節Ｋの転移警戒度を濃淡によって表現している。転移警戒度の高いリンパ節Ｋの濃淡を濃く表現し、転移警戒度の低いリンパ節Ｋの濃淡を薄く表現している。 In FIG. 10, the metastatic alertness of the lymph node K is expressed by shading. The density of the lymph node K having a high degree of metastasis alertness is expressed darkly, and the density of the lymph node K having a low metastasis alertness is expressed lightly.
又は、リンパ節転移警戒度演算部１０３は、腫瘍画像変形部４９によって変形後の腫瘍領域を第２変位演算部５１によって算出された第２変位に基づいてさらに変形後の腫瘍領域の位置情報と、リンパ節鑑別部５３によって鑑別された転移リンパ節の位置情報とに基づいて、各リンパ節の転移警戒度を算出してもよい。 Alternatively, the lymph node metastasis alert level calculation unit 103 may further convert the tumor region after deformation by the tumor image deformation unit 49 based on the second displacement calculated by the second displacement calculation unit 51 and the position information of the tumor region after deformation. Based on the position information of the metastatic lymph nodes identified by the lymph node discrimination unit 53, the metastatic alertness of each lymph node may be calculated.
図１１は、リンパ節転移警戒度の第２の算出方法を説明するための模式図である。 FIG. 11 is a schematic diagram for explaining a second method of calculating a lymph node metastasis alertness level.
図１１では、リンパ節Ｋのうち転移リンパ節Ｋ１以外のリンパ節Ｋ２の転移警戒度を濃淡によって表現している。転移警戒度の高いリンパ節Ｋ２の濃淡を濃く表現し、転移警戒度の低いリンパ節Ｋ２の濃淡を薄く表現している。 In FIG. 11, the metastatic alertness of lymph nodes K2 other than the metastatic lymph node K1 among the lymph nodes K is expressed by shading. The lightness and darkness of the lymph node K2 having a high degree of metastasis warning is expressed darkly, and the lightness and darkness of the lymph node K2 having a low precaution for metastasis is expressed lightly.
図１１に示すように、リンパ節Ｋ２の転移警戒度は、腫瘍領域Ｓからの距離や、転移リンパ節Ｋ１からの距離に応じて算出される。 As shown in FIG. 11, the metastatic alertness of the lymph node K2 is calculated according to the distance from the tumor region S and the distance from the metastatic lymph node K1.
図４の説明に戻って、オーバーレイ生成部５８は、腫瘍画像変形部４９によって変形後の腫瘍領域を第２変位演算部５１によって算出された第２変位に基づいてさらに変形後の腫瘍領域の位置情報と、転移警戒度演算部５７によって算出された組織の位置情報及びその転移警戒度に基づいて、オーバーレイ用のボリュームデータを生成する機能を有する。オーバーレイ用のボリュームデータは、組織のセグメント領域に、転移警戒度演算部５７によって算出された転移警戒度の情報を対応付けてなる。 Returning to the description of FIG. 4, the overlay generation unit 58 further converts the tumor region after deformation by the tumor image deformation unit 49 based on the second displacement calculated by the second displacement calculation unit 51. Based on the information, the position information of the tissue calculated by the transfer warning level calculator 57 and the transfer warning level, it has a function of generating volume data for overlay. The volume data for overlay is formed by associating information on the transfer warning level calculated by the transfer warning level calculator 57 with the segment area of the tissue.
オーバーレイ生成部５８によって生成されたオーバーレイ用のボリュームデータは、対応する付帯情報（患者識別情報及びスタディ識別情報等）が付帯され、ＩＦ２４を介して画像管理装置９（図１に図示）に送信され、画像管理装置９に保管される。 The overlay volume data generated by the overlay generator 58 is accompanied by corresponding supplementary information (patient identification information, study identification information, etc.) and transmitted to the image management apparatus 9 (shown in FIG. 1) via the IF 24. Stored in the image management device 9.
合成部５９は、リンパ管・節画像取得部４４によって取得されたＴ１Ｗ画像に、オーバーレイ生成部５８によって生成されたオーバーレイ用のボリュームデータに基づく２次元画像データ（ＳＶＲ（ｓｈａｄｅｄ ｖｏｌｕｍｅ ｒｅｎｄｅｒｉｎｇ）や、ＭＩＰ（ｍａｘｉｍｕｍ ｉｎｔｅｎｓｉｔｙ ｐｒｏｊｅｃｔｉｏｎ）、及びＭＰＲ（ｍｕｌｔｉ ｐｌａｎｅｒ ｒｅｃｏｎｓｔｒｕｃｔｉｏｎ）画像等）を合成（フュージョン）処理して合成画像を生成する機能を有する。合成部５９は、合成画像を表示装置２６に表示させる。 The synthesizing unit 59 adds, to the T1W image acquired by the lymph vessel / node image acquiring unit 44, two-dimensional image data (SVR (shaded volume rendering) based on the volume data for overlay generated by the overlay generating unit 58, MIP (Maximum intensity projection) and MPR (multi-planar reconstruction) images, etc.) are combined (fused) to generate a composite image. The composition unit 59 displays the composite image on the display device 26.
ここで、図３に示す臓器画像取得部４２によって取得されたＣＴ画像がＴ１Ｗ画像に位置合わせされ、腫瘍画像取得部４３によって取得されたＰＥＴ画像がＣＴ画像を介してＴ１Ｗ画像に位置合わせされるため、Ｔ１Ｗ画像上にオーバーレイ用のデータを重畳することが好ましい。しかしながら、ＰＥＴ画像及びＴ１Ｗ画像をそれぞれＣＴ画像に位置合わせして、ＣＴ画像上にオーバーレイ用のデータを重畳してもよい。 Here, the CT image acquired by the organ image acquisition unit 42 shown in FIG. 3 is aligned with the T1W image, and the PET image acquired by the tumor image acquisition unit 43 is aligned with the T1W image via the CT image. Therefore, it is preferable to overlay overlay data on the T1W image. However, the PET image and the T1W image may be aligned with the CT image, and overlay data may be superimposed on the CT image.
図１２は、第１実施形態の画像処理装置１０を用いて表示される合成画像の第１例を示す図である。 FIG. 12 is a diagram illustrating a first example of a composite image displayed using the image processing apparatus 10 according to the first embodiment.
図１２に示す合成画像は、所要患者のＴ１Ｗ画像に、オーバーレイ用のボリュームデータに基づく２次元画像が重畳されたものである。重畳される２次元画像は、腫瘍領域Ｓと、転移警戒リンパ管の転移警戒度（図７に図示）の情報と、転移警戒臓器の転移警戒度（図９に図示）の情報と、転移警戒リンパ節の転移警戒度（図１０に図示）の情報とを含む。図１２に示す合成画像において、転移警戒度に応じてグレースケール表示がされている。 The composite image shown in FIG. 12 is obtained by superimposing a two-dimensional image based on overlay volume data on a T1W image of a required patient. The superimposed two-dimensional image includes tumor area S, metastasis alert lymphatic metastasis alert information (shown in FIG. 7), metastasis alert organ metastasis alert information (shown in FIG. 9), and metastasis alert. Information on the metastatic alertness of the lymph nodes (shown in FIG. 10). In the composite image shown in FIG. 12, gray scale display is performed according to the transfer warning degree.
図１２に示す合成画像では便宜上、転移警戒度に応じたグレースケール表示としているが、グレースケールの輝度値の変化をカラーで表現するカラー表示することが好適である。 In the composite image shown in FIG. 12, for convenience, grayscale display corresponding to the transition alertness is used. However, it is preferable to perform color display that expresses a change in grayscale luminance value in color.
なお、臓器転移警戒度演算部１０２によって算出された転移警戒臓器の転移警戒度は、転移警戒臓器内の位置によっても転移警戒度を分類することも可能である。 Note that the metastasis alert level of the metastasis alert organ calculated by the organ metastasis alert level calculator 102 can also classify the metastasis alert level according to the position within the metastasis alert organ.
図１３は、第１実施形態の画像処理装置１０を用いて表示される合成画像の第２例を示す図である。 FIG. 13 is a diagram illustrating a second example of a composite image displayed using the image processing apparatus 10 according to the first embodiment.
図１３に示す合成画像は、所要患者のＴ１Ｗ画像に、オーバーレイ用のボリュームデータに基づく２次元画像が重畳されたものである。重畳される２次元画像は、腫瘍領域Ｓと、転移警戒リンパ管の転移警戒度（図７に図示）の情報と、転移警戒リンパ節の転移警戒度（図１０に図示）の情報とを含み、また、転移警戒臓器内のボクセル毎に分類された転移警戒度の情報を含む。また、オーバーレイ用のボリュームデータに腫瘍領域Ｓを含む原発巣臓器の位置情報を含む場合、原発巣臓器内のボクセル毎に分類された、腫瘍領域Ｓからの距離の情報を含む。図１３に示す合成画像において、転移警戒度や距離に応じてグレースケール表示がされている。 The composite image shown in FIG. 13 is obtained by superimposing a two-dimensional image based on volume data for overlay on a T1W image of a required patient. The two-dimensional image to be superimposed includes the tumor region S, information on the metastasis warning level of the metastatic caution lymphatic vessel (shown in FIG. 7), and information on the metastasis warning level of the metastatic caution lymph node (shown in FIG. 10). Moreover, the information of the metastasis alert level classified for every voxel in the metastasis alert organ is included. When the overlay volume data includes the position information of the primary lesion organ including the tumor region S, the overlay volume data includes the distance information from the tumor region S classified for each voxel in the primary lesion organ. In the composite image shown in FIG. 13, grayscale display is performed according to the transfer warning level and the distance.
図１３に示す合成画像では便宜上、転移警戒度や距離に応じたグレースケール表示としているが、グレースケールの輝度値の変化をカラーで表現するカラー表示することが好適である。 In the composite image shown in FIG. 13, for the sake of convenience, gray scale display corresponding to the transition alertness and distance is used, but it is preferable to perform color display that expresses a change in gray scale luminance value in color.
なお、第１実施形態の画像処理装置１０で合成画像を生成する場合について説明したが、画像管理装置９で合成画像を生成してもよい。 Although the case where the composite image is generated by the image processing apparatus 10 of the first embodiment has been described, the composite image may be generated by the image management apparatus 9.
第１実施形態の画像処理装置１０によると、転移警戒度を表示することで、転移警戒度の低い臓器やリンパ管・節に対して高いそれらを優先的に着目すべきことを促すことができるので、転移警戒度の高い臓器やリンパ管・節内の腫瘍を視認し易い画像を提供することができる。 According to the image processing apparatus 10 of the first embodiment, by displaying the metastasis alertness level, it is possible to promote that attention should be given to the organs and lymph vessels / nodes with a low metastasis alertness priority. Therefore, it is possible to provide an image in which an organ with a high degree of metastasis alertness and a tumor in a lymph vessel / node can be easily seen.
（第２実施形態）
第２実施形態の画像処理装置は、腫瘍が、リンパ節転移によって原発巣組織以外の組織に転移する可能性（転移警戒情報）を術前画像に基づいて算出し、転移警戒情報を術後画像に重畳して表示する技術に関する。第２実施形態の画像処理装置では、原発巣組織以外の組織をリンパ管、臓器、及びリンパ節とする。
(Second Embodiment)
The image processing apparatus according to the second embodiment calculates the possibility that a tumor will metastasize to a tissue other than the primary lesion tissue due to lymph node metastasis (metastasis alert information) based on the preoperative image, and the metastasis alert information is obtained as a postoperative image. The present invention relates to a technique for superimposing and displaying on the screen. In the image processing apparatus of the second embodiment, tissues other than the primary tissue are lymphatic vessels, organs, and lymph nodes.
第２実施形態の画像処理装置を含むシステム構成は、図１に示す第１実施形態の画像処理装置を含むシステム構成と同一であるので説明を省略する。また、第２実施形態の画像処理装置の構成は、図２に示す第１実施形態の画像処理装置の構成と同一であるので説明を省略する。 Since the system configuration including the image processing apparatus of the second embodiment is the same as the system configuration including the image processing apparatus of the first embodiment shown in FIG. The configuration of the image processing apparatus according to the second embodiment is the same as that of the image processing apparatus according to the first embodiment shown in FIG.
図１４及び１５は、第２実施形態の画像処理装置１０Ａの機能を示すブロック図である。 14 and 15 are block diagrams illustrating functions of the image processing apparatus 10A according to the second embodiment.
ＣＰＵ２１（図２に示す）によってプログラムが実行されることによって、画像処理装置１０Ａは、インターフェース部４１Ａ、臓器画像取得部４２、腫瘍画像取得部４３、リンパ管・節画像取得部４４、転移リンパ節画像取得部４５、臓器領域抽出部４６、腫瘍領域抽出部４７、第１変位演算部４８、腫瘍画像変形部４９、リンパ管・節領域抽出部５０、第２変位演算部５１、臓器画像変形部５２、リンパ節鑑別部５３、原発巣臓器設定部５４、転移警戒リンパ管抽出部５５、転移警戒臓器抽出部５６、転移警戒度演算部５７、オーバーレイ生成部５８、合成部５９Ａ、第３変位演算部６１、オーバーレイ取得部６２、及びオーバーレイ変形部６３として機能する。なお、図１４及び図１５に示す構成要素が、ソフトウェア的に機能する場合を例に挙げて説明するが、それら構成要素の一部又は全部は、画像処理装置１０Ａにハードウェア的にそれぞれ設けられるものであってもよい。 When the program is executed by the CPU 21 (shown in FIG. 2), the image processing apparatus 10A includes an interface unit 41A, an organ image acquisition unit 42, a tumor image acquisition unit 43, a lymph vessel / node image acquisition unit 44, and a metastatic lymph node. Image acquisition unit 45, organ region extraction unit 46, tumor region extraction unit 47, first displacement calculation unit 48, tumor image deformation unit 49, lymphatic vessel / node region extraction unit 50, second displacement calculation unit 51, organ image deformation unit 52, lymph node discrimination part 53, primary lesion organ setting part 54, metastasis alert lymphatic vessel extraction part 55, metastasis alert organ extraction part 56, metastasis alert degree calculation part 57, overlay generation part 58, composition part 59A, third displacement calculation Functions as a unit 61, an overlay acquisition unit 62, and an overlay deformation unit 63. 14 and FIG. 15 will be described by taking as an example the case where the components shown in FIG. 14 function as software, but some or all of the components are provided in hardware in the image processing apparatus 10A. It may be a thing.
なお、図１４及び図１５に示す第２実施形態の画像処理装置１０Ａにおいて、図３及び図４に示す第１実施形態の画像処理装置１０と同一部材には同一符号を付して説明を省略する。 In addition, in the image processing apparatus 10A of the second embodiment shown in FIGS. 14 and 15, the same members as those of the image processing apparatus 10 of the first embodiment shown in FIGS. To do.
画像管理装置９は、第１実施形態の画像処理装置１０によって生成されたオーバーレイ用のボリュームデータ及びその付帯情報を保管しているものとする。 It is assumed that the image management apparatus 9 stores the volume data for overlay generated by the image processing apparatus 10 of the first embodiment and its accompanying information.
図１４及び図１５に示すインターフェース部４１Ａは、図１４及び図１５に示す構成要素と、入力装置２５及び表示装置２６とを媒介するＧＵＩ等のインターフェースである。 The interface unit 41A illustrated in FIGS. 14 and 15 is an interface such as a GUI that mediates the components illustrated in FIGS. 14 and 15, the input device 25, and the display device 26.
図１５に示す第３変位演算部６１は、リンパ管・節画像取得部４４によって取得された術後のＴ１Ｗ画像を基準とする、リンパ管・節画像取得部４４によって取得された術前のＴ１Ｗ画像の変位を第３変位として算出する機能を有する。第３変位演算部６１は、術前のＴ１Ｗ画像と術後のＴ１Ｗ画像とにおける解剖学的同一点の位置の差をベクトルで表し、ベクトルの集合をベクトル場として表現したワープフィールドを算出する。 The third displacement calculation unit 61 illustrated in FIG. 15 uses the postoperative T1W image acquired by the lymphatic / node image acquisition unit 44 as a reference, and the preoperative T1W acquired by the lymphatic / node image acquisition unit 44. It has a function of calculating the displacement of the image as the third displacement. The third displacement calculator 61 calculates a warp field in which the difference between the positions of the same anatomical points in the pre-operative T1W image and the post-operative T1W image is expressed as a vector, and a set of vectors is expressed as a vector field.
オーバーレイ取得部６２は、入力装置２５を介してキー情報が入力されると、ＩＦ２４を介して画像管理装置９から、キー情報に対応する付帯情報が付帯された、所要患者に関するオーバーレイ用のボリュームデータを取得する機能を有する。 When the key information is input via the input device 25, the overlay acquisition unit 62 receives volume information for overlay related to the required patient, with additional information corresponding to the key information from the image management device 9 via the IF 24. It has the function to acquire.
オーバーレイ変形部６３は、第３変位演算部６１によって算出された第３変位に基づいて、術後のＴ１Ｗ画像を基準として、オーバーレイ取得部６２によって取得されたオーバーレイ用のボリュームデータを変形させる機能を有する。 The overlay deforming unit 63 has a function of deforming the overlay volume data acquired by the overlay acquiring unit 62 on the basis of the post-operative T1W image based on the third displacement calculated by the third displacement calculating unit 61. Have.
合成部５９Ａは、リンパ管・節画像取得部４４によって取得された術後のＴ１Ｗ画像に、オーバーレイ変形部６３によって変形後のオーバーレイ用のボリュームデータに基づく２次元画像データを合成処理して合成画像を生成する機能を有する。合成部５９Ａは、合成画像を表示装置２６に表示させる。 The synthesizing unit 59A synthesizes the post-operative T1W image acquired by the lymph vessel / node image acquiring unit 44 with the two-dimensional image data based on the volume data for the overlay after the deformation by the overlay deforming unit 63, and performs the composite image It has the function to generate. The compositing unit 59A causes the display device 26 to display the composite image.
図１６は、第２実施形態の画像処理装置１０Ａを用いて表示される合成画像の第１例を示す図である。 FIG. 16 is a diagram illustrating a first example of a composite image displayed using the image processing apparatus 10A of the second embodiment.
図１６に示す合成画像は、所要患者の術後のＴ１Ｗ画像に、術前に生成されたオーバーレイ用のボリュームデータに基づく２次元画像が重畳されたものである。重畳される２次元画像は、術前に算出された転移警戒リンパ管の転移警戒度（図７に図示）の情報と、転移警戒臓器の転移警戒度（図９に図示）の情報と、転移警戒リンパ節の転移警戒度（図１０に図示）の情報とを含む。図１６に示す合成画像において、転移警戒度に応じてグレースケール表示がされている。 The synthesized image shown in FIG. 16 is obtained by superimposing a two-dimensional image based on overlay volume data generated before surgery on a post-operative T1W image of a required patient. The two-dimensional image to be superimposed includes information on metastasis warning lymphatic metastasis level (shown in FIG. 7) calculated before surgery, metastasis alert organ metastasis alert level (shown in FIG. 9), and metastasis And information on the warning level of metastasis of the alert lymph node (shown in FIG. 10). In the composite image shown in FIG. 16, grayscale display is performed according to the transfer warning level.
図１６に示す合成画像では便宜上、転移警戒度に応じたグレースケール表示としているが、グレースケールの輝度値の変化をカラーで表現するカラー表示することが好適である。 In the composite image shown in FIG. 16, for convenience, the gray scale display corresponding to the transfer warning level is used. However, it is preferable to perform color display that expresses a change in gray scale luminance value in color.
図１７は、第２実施形態の画像処理装置１０Ａを用いて表示される合成画像の第２例を示す図である。 FIG. 17 is a diagram illustrating a second example of a composite image displayed using the image processing apparatus 10A of the second embodiment.
図１７に示す合成画像は、所要患者の術後のＴ１Ｗ画像に、術前に生成されたオーバーレイ用のボリュームデータに基づく２次元画像が重畳されたものである。重畳される２次元画像は、術前に算出された転移警戒リンパ管の転移警戒度（図７に図示）の情報と、転移警戒リンパ節の転移警戒度（図１０に図示）の情報とを含み、また、術前に算出された、転移警戒臓器内のボクセル毎に分類された転移警戒度の情報を含む。また、オーバーレイ用のボリュームデータに腫瘍領域を含む原発巣臓器の位置情報を含む場合、原発巣臓器内のボクセル毎に分類された、腫瘍領域からの距離の情報を含む。図１７に示す合成画像において、転移警戒度や距離に応じてグレースケール表示がされている。 The composite image shown in FIG. 17 is obtained by superimposing a two-dimensional image based on overlay volume data generated before surgery on a post-operative T1W image of a required patient. The two-dimensional image to be superimposed includes information on the metastasis warning lymph node metastasis warning level (shown in FIG. 7) calculated before surgery and metastasis alert lymph node metastasis warning level information (shown in FIG. 10). In addition, information on metastatic alertness classified for each voxel in the metastatic alert organ calculated before surgery is included. When the overlay volume data includes position information of the primary lesion organ including the tumor area, the overlay volume data includes information on the distance from the tumor area classified for each voxel in the primary lesion organ. In the composite image shown in FIG. 17, gray scale display is performed according to the transfer warning level and the distance.
図１７に示す合成画像では便宜上、転移警戒度や距離に応じたグレースケール表示としているが、グレースケールの輝度値の変化をカラーで表現するカラー表示することが好適である。 In the composite image shown in FIG. 17, for convenience, the grayscale display corresponding to the transition alertness and the distance is used. However, it is preferable to perform color display that expresses the change in grayscale luminance value in color.
図１５の説明に戻って、原発巣臓器設定部５４は、転移警戒度の高い転移警戒臓器Ｏを原発巣臓器と仮定することができる。その場合、術後画像に基づいて転移警戒リンパ管・節、転移警戒臓器が抽出され、リンパ管転移警戒度、臓器転移警戒度、及びリンパ節転移警戒度が新たに算出される。 Returning to the description of FIG. 15, the primary lesion organ setting unit 54 can assume that the metastatic alert organ O having a high metastasis alertness is the primary lesion organ. In that case, a metastatic caution lymph vessel / node and a metastasis alert organ are extracted based on the postoperative image, and a lymph vessel metastasis alert level, an organ metastasis alert level, and a lymph node metastasis alert level are newly calculated.
なお、第２実施形態の画像処理装置１０Ａで合成画像を生成する場合について説明したが、画像管理装置９で合成画像を生成してもよい。 Although the case where the composite image is generated by the image processing apparatus 10A of the second embodiment has been described, the composite image may be generated by the image management apparatus 9.
第２実施形態の画像処理装置１０Ａによると、転移警戒度を表示することで、転移警戒度の低い臓器やリンパ管・節に対して高いそれらを優先的に着目すべきことを促すことができるので、転移警戒度の高い臓器やリンパ管・節内の腫瘍を視認し易い画像を提供することができる。 According to the image processing apparatus 10A of the second embodiment, by displaying the metastasis alertness level, it is possible to promote that attention should be given to organs and lymphatic vessels / nodes with a low metastasis alertness priority. Therefore, it is possible to provide an image in which an organ with a high degree of metastasis alertness and a tumor in a lymph vessel / node can be easily seen.
（第３実施形態）
第３実施形態の画像処理装置は、腫瘍が、血行性転移によって原発巣組織以外の組織に転移する可能性（転移警戒情報）を術前画像に基づいて算出し、転移警戒情報を術前画像に重畳して表示する技術に関する。第３実施形態の画像処理装置では、原発巣組織以外の組織を臓器及び骨とする。なお、術前画像に基づいて算出された転移警戒情報を術後画像に重畳して表示することも可能である。
(Third embodiment)
The image processing apparatus according to the third embodiment calculates the possibility that the tumor will metastasize to a tissue other than the primary tissue by hematogenous metastasis (metastasis alert information) based on the preoperative image, and the metastasis alert information is calculated as the preoperative image. The present invention relates to a technique for superimposing and displaying on the screen. In the image processing apparatus of the third embodiment, tissues other than the primary lesion tissue are organs and bones. In addition, it is also possible to display the metastasis warning information calculated based on the preoperative image superimposed on the postoperative image.
第３実施形態の画像処理装置を含むシステム構成は、図１に示す第１実施形態の画像処理装置を含むシステム構成と同一であるので説明を省略する。また、第３実施形態の画像処理装置の構成は、図２に示す第１実施形態の画像処理装置の構成と同一であるので説明を省略する。 The system configuration including the image processing apparatus according to the third embodiment is the same as the system configuration including the image processing apparatus according to the first embodiment shown in FIG. The configuration of the image processing apparatus according to the third embodiment is the same as that of the image processing apparatus according to the first embodiment shown in FIG.
図１８及び図１９は、第３実施形態の画像処理装置１０Ｂの機能を示すブロック図である。 18 and 19 are block diagrams illustrating functions of the image processing apparatus 10B according to the third embodiment.
ＣＰＵ２１（図２に示す）によってプログラムが実行されることによって、図１８及び図１９に示すように、画像処理装置１０Ｂは、インターフェース部４１Ｂ、腫瘍画像取得部４３、リンパ管・節画像取得部４４、腫瘍領域抽出部４７、第１変位演算部４８、腫瘍画像変形部４９、原発巣臓器設定部５４、転移警戒度演算部５７Ｂ、オーバーレイ生成部５８、合成部５９、臓器・骨画像取得部７１、血管画像取得部７２、臓器・骨領域抽出部７３、第４変位演算部７４、臓器・骨画像変形部７５、血管領域抽出部７６、第５変位演算部７７、血管画像変形部７８、転移警戒臓器抽出部７９、及び転移警戒骨抽出部８０として機能する。なお、図１８及び図１９に示す構成要素が、ソフトウェア的に機能する場合を例に挙げて説明するが、それら構成要素の一部又は全部は、画像処理装置１０Ｂにハードウェア的にそれぞれ設けられるものであってもよい。 When the program is executed by the CPU 21 (shown in FIG. 2), the image processing apparatus 10B includes an interface unit 41B, a tumor image acquisition unit 43, and a lymph vessel / node image acquisition unit 44 as shown in FIGS. , Tumor region extraction unit 47, first displacement calculation unit 48, tumor image deformation unit 49, primary lesion organ setting unit 54, metastasis alert level calculation unit 57B, overlay generation unit 58, synthesis unit 59, organ / bone image acquisition unit 71 , Blood vessel image acquisition unit 72, organ / bone region extraction unit 73, fourth displacement calculation unit 74, organ / bone image deformation unit 75, blood vessel region extraction unit 76, fifth displacement calculation unit 77, blood vessel image deformation unit 78, metastasis It functions as a vigilance organ extraction unit 79 and a metastasis vigilance bone extraction unit 80. In addition, although the case where the components shown in FIGS. 18 and 19 function as software will be described as an example, some or all of the components are respectively provided in hardware in the image processing apparatus 10B. It may be a thing.
なお、図１８及び図１９に示す第３実施形態の画像処理装置１０Ｂにおいて、図３及び図４に示す第１実施形態の画像処理装置１０と同一部材には同一符号を付して説明を省略する。 In the image processing apparatus 10B according to the third embodiment shown in FIGS. 18 and 19, the same members as those in the image processing apparatus 10 according to the first embodiment shown in FIGS. To do.
図１８及び図１９に示すインターフェース部４１Ｂは、図１８及び図１９に示す構成要素と、入力装置２５及び表示装置２６とを媒介するＧＵＩ等のインターフェースである。 The interface unit 41B illustrated in FIGS. 18 and 19 is an interface such as a GUI that mediates the components illustrated in FIGS. 18 and 19, the input device 25, and the display device 26.
図１８に示す臓器・骨画像取得部７１は、ＩＦ２４を介して画像管理装置９から、所要患者に関する臓器及び骨を含む臓器・骨画像（ボリュームデータ）、例えばＣＴ画像を取得する機能を有する。 The organ / bone image acquisition unit 71 illustrated in FIG. 18 has a function of acquiring an organ / bone image (volume data) including an organ and a bone related to a required patient, such as a CT image, from the image management apparatus 9 via the IF 24.
血管画像取得部７２は、ＩＦ２４を介して画像管理装置９から、所要患者に関する血管を含む血管画像（ボリュームデータ）、例えばＭＲＡ（ｍａｇｎｅｔｉｃ ｒｅｓｏｎａｎｃｅ ａｎｇｉｏｇｒａｍ）画像を取得する機能を有する。又は、血管画像取得部７２は、血管画像として、ＣＴＡ（ｃｏｍｐｕｔｅｄ ｔｏｍｏｇｒａｐｈｙ ａｎｇｉｏｇｒａｐｈｙ）画像を取得してもよい。 The blood vessel image acquisition unit 72 has a function of acquiring a blood vessel image (volume data) including blood vessels related to a required patient, for example, an MRA (magnetic resonance angiogram) image, from the image management apparatus 9 via the IF 24. Or the blood vessel image acquisition part 72 may acquire a CTA (computed tomography angiography) image as a blood vessel image.
臓器・骨領域抽出部７３は、臓器・骨画像取得部７１によって取得されたＣＴ画像に基づいて臓器領域及び骨領域をそれぞれ抽出する機能を有する。 The organ / bone region extracting unit 73 has a function of extracting an organ region and a bone region based on the CT image acquired by the organ / bone image acquiring unit 71.
第４変位演算部７４は、リンパ管・節画像取得部４４によって取得されたＴ１Ｗ画像を基準とする、臓器・骨画像取得部７１によって取得されたＣＴ画像の変位を第４変位として算出する機能を有する。第４変位演算部７４は、ＣＴ画像とＴ１Ｗ画像とにおける解剖学的同一点の位置の差をベクトルで表し、ベクトルの集合をベクトル場として表現したワープフィールドを算出する。 The fourth displacement calculation unit 74 calculates a displacement of the CT image acquired by the organ / bone image acquisition unit 71 based on the T1W image acquired by the lymph vessel / node image acquisition unit 44 as a fourth displacement. Have The fourth displacement calculation unit 74 calculates a warp field in which the difference between the positions of the same anatomical points in the CT image and the T1W image is expressed as a vector, and the set of vectors is expressed as a vector field.
臓器・骨画像変形部７５は、第４変位演算部７４によって算出された第４変位に基づいて、リンパ管・節画像取得部４４によって取得されたＴ１Ｗ画像を基準として、臓器・骨画像取得部７１によって取得されたＣＴ画像を変形させる機能を有する。臓器・骨画像変形部７５によるＣＴ画像の変形によって、臓器・骨領域抽出部７３によって抽出された臓器領域及び骨領域が変形される。 The organ / bone image deforming unit 75 uses the T1W image acquired by the lymph vessel / node image acquiring unit 44 as a reference based on the fourth displacement calculated by the fourth displacement calculating unit 74. 71 has a function of deforming the CT image acquired by 71. By the deformation of the CT image by the organ / bone image deforming unit 75, the organ region and the bone region extracted by the organ / bone region extracting unit 73 are deformed.
なお、第４変位演算部７４及び臓器・骨画像変形部７５は、ＣＴ画像及びＴ１Ｗ画像を位置合わせするものであり、ＣＴ画像をＴ１Ｗ画像に合わせる場合に限られず、Ｔ１Ｗ画像をＣＴ画像に合わせる場合であってもよい。 The fourth displacement calculating unit 74 and the organ / bone image deforming unit 75 align the CT image and the T1W image. The fourth displacement calculating unit 74 and the organ / bone image deforming unit 75 are not limited to aligning the CT image with the T1W image, but align the T1W image with the CT image. It may be the case.
血管領域抽出部７６は、血管画像取得部７２によって取得されたＭＲＡ画像に基づいて血管領域を抽出する機能を有する。また、血管領域抽出部７６は、ＭＲＡ画像に基づいて、血管径が閾値より大きい大血管の血管領域のみを抽出してもよい。 The blood vessel region extraction unit 76 has a function of extracting a blood vessel region based on the MRA image acquired by the blood vessel image acquisition unit 72. Further, the blood vessel region extraction unit 76 may extract only a blood vessel region of a large blood vessel having a blood vessel diameter larger than a threshold value based on the MRA image.
第５変位演算部７７は、リンパ管・節画像取得部４４によって取得されたＴ１Ｗ画像を基準とする、血管画像取得部７２によって取得されたＭＲＡ画像の変位を第５変位として算出する機能を有する。第５変位演算部７７は、ＭＲＡ画像とＴ１Ｗ画像とにおける解剖学的同一点の位置の差をベクトルで表し、ベクトルの集合をベクトル場として表現したワープフィールドを算出する。 The fifth displacement calculation unit 77 has a function of calculating the displacement of the MRA image acquired by the blood vessel image acquisition unit 72 based on the T1W image acquired by the lymph vessel / node image acquisition unit 44 as the fifth displacement. . The fifth displacement calculation unit 77 calculates a warp field in which the difference between the positions of the same anatomical points in the MRA image and the T1W image is expressed as a vector, and the set of vectors is expressed as a vector field.
血管画像変形部７８は、第５変位演算部７７によって算出された第５変位に基づいて、リンパ管・節画像取得部４４によって取得されたＴ１Ｗ画像を基準として、血管画像取得部７２によって取得されたＭＲＡ画像を変形させる機能を有する。血管画像変形部７８によるＭＲＡ画像の変形によって、血管領域抽出部７６によって抽出された血管領域が変形される。 The blood vessel image deforming unit 78 is acquired by the blood vessel image acquiring unit 72 on the basis of the T1W image acquired by the lymph vessel / node image acquiring unit 44 based on the fifth displacement calculated by the fifth displacement calculating unit 77. A function of deforming the MRA image. The blood vessel region extracted by the blood vessel region extracting unit 76 is deformed by the deformation of the MRA image by the blood vessel image deforming unit 78.
なお、第５変位演算部７７及び血管画像変形部７８は、ＭＲＡ画像及びＴ１Ｗ画像を位置合わせするものであり、ＭＲＡ画像をＴ１Ｗ画像に合わせる場合に限られず、Ｔ１Ｗ画像をＭＲＡ画像に合わせる場合であってもよい。 The fifth displacement calculation unit 77 and the blood vessel image deformation unit 78 align the MRA image and the T1W image, and are not limited to the case where the MRA image is aligned with the T1W image, but when the T1W image is aligned with the MRA image. There may be.
図１９の説明に移って、転移警戒臓器抽出部７９は、臓器・骨画像変形部７５によって変形後の臓器領域のうち原発巣臓器設定部５４によって設定された原発巣臓器以外の臓器の位置情報と、血管画像変形部７８によって変形後の血管領域の位置情報とを比較し、原発巣臓器に接合される血管に接合される臓器を転移警戒臓器として設定する機能を有する。 Moving to the explanation of FIG. 19, the metastatic vigilance organ extracting unit 79 includes position information of organs other than the primary lesion organ set by the primary lesion organ setting unit 54 among the organ regions deformed by the organ / bone image deforming unit 75. And the position information of the deformed blood vessel region by the blood vessel image deformation unit 78, and has a function of setting an organ joined to the blood vessel joined to the primary focal organ as a metastatic alert organ.
図２０は、転移警戒臓器の抽出方法を説明するための模式図である。 FIG. 20 is a schematic diagram for explaining a method for extracting a metastatic alert organ.
図２０に示すように、原発巣臓器以外の臓器で、血管領域Ｖを含む全ての臓器が転移警戒臓器Ｏ（肝臓、右肺、左肺、心臓、右腎、及び左腎）として抽出される。 As shown in FIG. 20, all organs including the blood vessel region V are extracted as metastatic alert organs O (liver, right lung, left lung, heart, right kidney, and left kidney) in organs other than the primary organ. .
図１９の説明に戻って、転移警戒骨抽出部８０は、臓器・骨画像変形部７５によって変形後の骨領域の位置情報と、血管画像変形部７８によって変形後の血管領域の位置情報とに基づいて、原発巣臓器に接合される血管を抽出する機能を有する。骨への転移は、大血管付近の骨に転移しやすい傾向があるため、「○○ｍｍ以上の血管」という閾値を設定してもよい。また、抽出された血管領域に近接する全ての骨領域を抽出してもよいし、血管領域から「○○ｍｍ以内の領域」に含まれる骨領域を抽出してもよい。 Returning to the explanation of FIG. 19, the metastasis warning bone extraction unit 80 converts the bone region position information deformed by the organ / bone image deformation unit 75 and the blood vessel region position information deformed by the blood vessel image deformation unit 78. Based on this, it has a function of extracting a blood vessel joined to the primary organ. Since metastasis to bone tends to metastasize to bone in the vicinity of a large blood vessel, a threshold of “blood vessels of OO mm or more” may be set. Further, all the bone regions close to the extracted blood vessel region may be extracted, or the bone region included in “region within XX mm” may be extracted from the blood vessel region.
図２１は、転移警戒骨の抽出方法を説明するための模式図である。 FIG. 21 is a schematic diagram for explaining a method of extracting a metastatic alert bone.
図２１に示すように、原発巣臓器以外の臓器で、血管領域Ｖに近接する骨領域が転移警戒骨Ｂ（胸骨、腰椎、仙骨、腸骨、及び大腿骨）として抽出される。 As shown in FIG. 21, in an organ other than the primary lesion organ, a bone region close to the blood vessel region V is extracted as a metastatic warning bone B (sternum, lumbar vertebra, sacrum, iliac bone, and femur).
図１９の説明に戻って、移転警戒度演算部５７Ｂは、臓器移転警戒度演算部１０４及び骨転移警戒度演算部１０５を有する。 Returning to the description of FIG. 19, the transfer warning level calculator 57B includes an organ transfer warning level calculator 104 and a bone metastasis warning level calculator 105.
臓器移転警戒度演算部１０４は、臓器画像変形部５２によって変形後の臓器領域のうち原発巣臓器設定部５４によって設定された原発巣臓器の位置情報と、転移警戒臓器抽出部７９によって抽出された転移警戒臓器の位置情報とに基づいて、転移警戒臓器の転移警戒度を算出する機能を有する。臓器移転警戒度演算部１０４は、原発巣臓器と転移警戒臓器との間の血管の長さが短いほど転移警戒度を高くし、当該血管径が太いほど転移警戒度を高くする。臓器移転警戒度演算部１０４は、当該血管の長さに対する転移警戒度Ｌｅｎｇｔｈ及びその重みａ（０≦ａ≦１）と、当該血管の太さに対する転移警戒度Ｄｉａｍｅｔｅｒ及びその重みｂ（ｂ＝１−ａ）とに基づいて、次の式（３）に従って転移警戒臓器の転移警戒度Ｗｏを算出する。 The organ relocation warning level calculation unit 104 extracts the position information of the primary focus organ set by the primary focus organ setting unit 54 in the organ region after the deformation by the organ image deformation unit 52 and the transfer warning vigilance organ extraction unit 79. Based on the position information of the metastatic alert organ, it has a function of calculating the metastasis alert level of the metastatic alert organ. The organ relocation warning level calculation unit 104 increases the metastasis warning level as the blood vessel length between the primary organ and the metastasis warning organ is shorter, and increases the metastasis warning level as the blood vessel diameter is larger. The organ relocation warning level calculation unit 104 includes a transfer warning level Length and its weight a (0 ≦ a ≦ 1) for the blood vessel length, and a transfer warning level Diameter and its weight b (b = 1) for the blood vessel thickness. Based on -a), the metastasis warning degree Wo of the metastasis alert organ is calculated according to the following equation (3).
また、臓器移転警戒度演算部１０４は、各転移警戒臓器の重心と原発巣臓器との距離を算出し、近いほど転移警戒度を高くしてもよい。 Further, the organ relocation warning level calculation unit 104 may calculate the distance between the center of gravity of each metastasis warning organ and the primary focus organ, and may increase the metastasis warning level as the distance is closer.
臓器移転警戒度演算部１０４は、原発巣臓器が１つの血管と接合されている場合はその血管領域を基準として転移警戒度を算出する。一方、臓器移転警戒度演算部１０４は、原発巣臓器が複数の血管と接合されている場合は、各血管領域に基づく転移警戒度を算出し、最も高い転移警戒度を当該転移警戒臓器の転移警戒度とする。 When the primary lesion organ is joined to one blood vessel, the organ relocation warning level calculation unit 104 calculates a transfer warning level based on the blood vessel region. On the other hand, when the primary lesion organ is joined to a plurality of blood vessels, the organ relocation alert level calculation unit 104 calculates a metastasis alert level based on each blood vessel region, and the highest metastasis alert level is assigned to the metastasis alert organ. Use alertness.
骨転移警戒度演算部１０５は、血管画像変形部７８によって変形後の血管領域の位置情報と、転移警戒骨抽出部８０によって抽出された転移警戒骨の位置情報とに基づいて、転移警戒骨の転移警戒度を算出する機能を有する。大血管付近の骨に転移しやすい傾向があるため、骨転移警戒度演算部１０５は、血管との距離が短いほど転移警戒度を高くし、当該血管径が太いほど転移警戒度を高くする。骨移転警戒度演算部１０５は、当該血管との距離に対する転移警戒度Ｄｉｓｔａｎｃｅ及びその重みｃ（０≦ｃ≦１）と、当該血管の太さに対する転移警戒度Ｄｉａｍｅｔｅｒ及びその重みｄ（ｄ＝１−ｃ）とに基づいて、次の式（４）に従って転移警戒骨の転移警戒度Ｗｂを算出する。 Based on the position information of the blood vessel region deformed by the blood vessel image deforming unit 78 and the position information of the metastatic alert bone extracted by the metastasis alert bone extracting unit 80, the bone metastasis alert level calculating unit 105 It has a function to calculate the transfer warning level. Since there is a tendency to easily metastasize to bone near the large blood vessel, the bone metastasis alert level calculation unit 105 increases the metastasis alert level as the distance from the blood vessel is shorter, and increases the metastasis alert level as the blood vessel diameter is thicker. The bone relocation warning level calculation unit 105 includes a transfer warning degree distance and its weight c (0 ≦ c ≦ 1) with respect to the distance to the blood vessel, and a transfer warning level Diameter with respect to the thickness of the blood vessel and its weight d (d = 1). Based on -c), the metastasis warning degree Wb of the metastasis warning bone is calculated according to the following equation (4).
図２２は、第３実施形態の画像処理装置１０Ｂを用いて表示される合成画像の第１例を示す図である。 FIG. 22 is a diagram illustrating a first example of a composite image displayed using the image processing device 10B of the third embodiment.
図２２に示す合成画像は、所要患者の術後のＴ１Ｗ画像に、オーバーレイ用のボリュームデータに基づく２次元画像が重畳されたものである。重畳される２次元画像は、転移警戒臓器の転移警戒度の情報と、転移警戒骨の転移警戒度の情報とを含む。図２２に示す合成画像において、転移警戒度に応じてグレースケール表示がされている。 The composite image shown in FIG. 22 is obtained by superimposing a two-dimensional image based on overlay volume data on a post-operative T1W image of a required patient. The superimposed two-dimensional image includes information on the degree of metastasis of the metastasis alert organ and information on the alertness of the metastasis of the metastasis alert bone. In the composite image shown in FIG. 22, grayscale display is performed according to the transfer warning degree.
図２２に示す合成画像では便宜上、転移警戒度に応じたグレースケール表示としているが、グレースケールの輝度値の変化をカラーで表現するカラー表示することが好適である。 In the composite image shown in FIG. 22, for convenience, grayscale display corresponding to the transition alertness is used. However, it is preferable to perform color display that expresses a change in grayscale luminance value in color.
図２３は、第３実施形態の画像処理装置１０Ｂを用いて表示される合成画像の第２例を示す図である。 FIG. 23 is a diagram illustrating a second example of a composite image displayed using the image processing apparatus 10B according to the third embodiment.
図２３に示す合成画像は、所要患者のＴ１Ｗ画像に、オーバーレイ用のボリュームデータに基づく２次元画像が重畳されたものである。重畳される２次元画像は、転移警戒臓器内のボクセル毎に分類された転移警戒度の情報と、転移警戒骨内のボクセル毎に分類された転移警戒度の情報とを含む。また、オーバーレイ用のボリュームデータに腫瘍領域Ｓを含む原発巣臓器の位置情報を含む場合、原発巣臓器内のボクセル毎に分類された、腫瘍領域Ｓからの距離の情報を含む。図２３に示す合成画像において、転移警戒度や距離に応じてグレースケール表示がされている。 The composite image shown in FIG. 23 is obtained by superimposing a two-dimensional image based on volume data for overlay on a T1W image of a required patient. The superimposed two-dimensional image includes information on the degree of metastasis classified for each voxel in the metastasis alert organ and information on the degree of metastasis alert classified for each voxel in the metastasis alert bone. When the overlay volume data includes the position information of the primary lesion organ including the tumor region S, the overlay volume data includes the distance information from the tumor region S classified for each voxel in the primary lesion organ. In the composite image shown in FIG. 23, grayscale display is performed according to the transfer warning level and the distance.
図２３に示す合成画像では便宜上、転移警戒度や距離に応じたグレースケール表示としているが、グレースケールの輝度値の変化をカラーで表現するカラー表示することが好適である。 In the composite image shown in FIG. 23, for convenience, the gray scale display according to the transition warning level and the distance is used. However, it is preferable to perform color display that expresses the change in gray scale luminance value in color.
なお、第３実施形態の画像処理装置１０Ｂで合成画像を生成する場合について説明したが、画像管理装置９で合成画像を生成してもよい。 Although the case where the composite image is generated by the image processing apparatus 10B of the third embodiment has been described, the composite image may be generated by the image management apparatus 9.
また、第３実施形態の画像処理装置１０Ｂによって術前に生成されたオーバーレイ用のボリュームデータと、術後のＴ１Ｗ画像データとに基づいて合成画像を生成してもよい。 Further, a composite image may be generated based on the overlay volume data generated before the operation by the image processing apparatus 10B of the third embodiment and the post-operative T1W image data.
第３実施形態の画像処理装置１０Ｂによると、転移警戒度を表示することで、転移警戒度の低い臓器や骨に対して高いそれらを優先的に着目すべきことを促すことができるので、転移警戒度の高い臓器や骨内の腫瘍を視認し易い画像を提供することができる。 According to the image processing apparatus 10B of the third embodiment, by displaying the metastasis alertness level, it is possible to promote that attention should be given to those organs and bones with a low metastasis alertness level with priority. It is possible to provide an image in which an organ with high alertness and a tumor in a bone can be easily visually recognized.
（第４実施形態）
第４実施形態の画像処理装置は、腫瘍が、原発巣組織以外の組織に転移する可能性（転移警戒情報）を原発巣臓器毎に予め記憶し、転移警戒情報を画像に重畳して表示する技術に関する。第４実施形態の画像処理装置では、原発巣組織以外の組織を臓器及び骨とし、リンパ節転移及び血行性転移に限られず、播種性転移や接触性転移にも有効である。
(Fourth embodiment)
The image processing apparatus according to the fourth embodiment stores in advance the possibility that a tumor will metastasize to a tissue other than the primary lesion tissue (metastasis alert information) for each primary lesion organ, and displays the metastasis alert information superimposed on the image. Regarding technology. In the image processing apparatus according to the fourth embodiment, tissues other than the primary tissue are organs and bones and are not limited to lymph node metastasis and hematogenous metastasis, but are also effective for disseminated metastasis and contact metastasis.
第４実施形態の画像処理装置を含むシステム構成は、図１に示す第１実施形態の画像処理装置を含むシステム構成と同一であるので説明を省略する。また、第４実施形態の画像処理装置の構成は、図２に示す第１実施形態の画像処理装置の構成と同一であるので説明を省略する。 The system configuration including the image processing apparatus according to the fourth embodiment is the same as the system configuration including the image processing apparatus according to the first embodiment shown in FIG. The configuration of the image processing apparatus according to the fourth embodiment is the same as that of the image processing apparatus according to the first embodiment shown in FIG.
図２４及び２５は、第４実施形態の画像処理装置１０Ｃの機能を示すブロック図である。 24 and 25 are block diagrams illustrating functions of the image processing apparatus 10C according to the fourth embodiment.
ＣＰＵ２１（図２に示す）によってプログラムが実行されることによって、画像処理装置１０Ｃは、インターフェース部４１Ｃ、腫瘍画像取得部４３、リンパ管・節画像取得部４４、腫瘍領域抽出部４７、第１変位演算部４８、腫瘍画像変形部４９、原発巣臓器設定部５４、転移警戒度演算部５７Ｃ、オーバーレイ生成部５８、合成部５９、臓器・骨画像取得部７１、臓器・骨領域抽出部７３、第４変位演算部７４、臓器・骨画像変形部７５、転移履歴取得部９１、及び転移警戒臓器・骨抽出部９２として機能する。なお、図２４及び図２５に示す構成要素が、ソフトウェア的に機能する場合を例に挙げて説明するが、それら構成要素の一部又は全部は、画像処理装置１０Ｃにハードウェア的にそれぞれ設けられるものであってもよい。 When the program is executed by the CPU 21 (shown in FIG. 2), the image processing apparatus 10C includes an interface unit 41C, a tumor image acquisition unit 43, a lymph vessel / node image acquisition unit 44, a tumor region extraction unit 47, a first displacement. Calculation unit 48, tumor image transformation unit 49, primary lesion organ setting unit 54, metastasis alert level calculation unit 57C, overlay generation unit 58, synthesis unit 59, organ / bone image acquisition unit 71, organ / bone region extraction unit 73, It functions as a 4-displacement calculation unit 74, an organ / bone image deformation unit 75, a metastasis history acquisition unit 91, and a metastasis alert organ / bone extraction unit 92. In addition, although the case where the components shown in FIGS. 24 and 25 function as software will be described as an example, some or all of the components are respectively provided in hardware in the image processing apparatus 10C. It may be a thing.
なお、図２４及び図２５に示す第４実施形態の画像処理装置１０Ｃにおいて、図３及び図４に示す第１実施形態の画像処理装置１０と同一部材には同一符号を付して説明を省略する。 In addition, in the image processing apparatus 10C according to the fourth embodiment shown in FIGS. 24 and 25, the same members as those in the image processing apparatus 10 according to the first embodiment shown in FIGS. To do.
画像管理装置９は、患者属性情報（年齢、性別、身長、体重、及び既往症等）と、それに対応する原発巣臓器（腫瘍位置）及び転移履歴（転移先の組織（転移先臓器及び転移先骨等））とを保管しているものとする。 The image management device 9 includes patient attribute information (age, gender, height, weight, pre-existing disease, etc.), corresponding primary organ (tumor position), and metastasis history (metastasis destination tissue (metastasis destination organ and metastasis destination bone). Etc))).
図２４及び図２５に示すインターフェース部４１Ｃは、図２４及び図２５に示す構成要素と、入力装置２５及び表示装置２６とを媒介するＧＵＩ等のインターフェースである。 The interface unit 41 </ b> C illustrated in FIGS. 24 and 25 is an interface such as a GUI that mediates the components illustrated in FIGS. 24 and 25, the input device 25, and the display device 26.
図２４に示す転移履歴取得部９１は、ＩＦ２４を介して画像管理装置９から、所要患者の属性情報と、原発巣臓器設定部５４によって設定された原発巣臓器とに対応する転移履歴を取得する機能を有する。例えば、転移履歴取得部９１は、所要患者の属性情報としての年齢が２５歳で、性別が男で、原発巣臓器が大腸の場合、年齢が２０歳台の男で、原発巣臓器が大腸の場合における転移履歴を取得する。 The metastasis history acquisition unit 91 illustrated in FIG. 24 acquires the metastasis history corresponding to the attribute information of the required patient and the primary lesion organ set by the primary lesion organ setting unit 54 from the image management apparatus 9 via the IF 24. It has a function. For example, the metastasis history acquisition unit 91, when the age as the attribute information of the required patient is 25 years old, the gender is male, and the primary focal organ is the large intestine, the male is the age of 20 years old, and the primary focal organ is the large intestine. Get transition history in case.
転移警戒臓器・骨抽出部９２は、転移履歴取得部９１によって取得された転移履歴と、サポートベクターマシン（ＳＶＮ：ｓｕｐｐｏｒｔ ｖｅｃｔｏｒ ｍａｃｈｉｎｅ）等のパターン認識手法を用いて、臓器・骨画像変形部７５によって変形後の臓器領域及び骨領域のうち、最もパターンが近い臓器領域及び骨領域を、転移警戒臓器及び転移警戒骨として抽出する機能を有する。 The metastasis alert organ / bone extraction unit 92 uses the metastasis history acquired by the metastasis history acquisition unit 91 and a pattern recognition technique such as a support vector machine (SVN) to perform the organ / bone image deformation unit 75. Among the organ region and bone region after deformation, the organ region and bone region having the closest pattern are extracted as a metastasis alert organ and metastasis alert bone.
図２５に示す転移警戒度演算部５７Ｃは、転移警戒臓器・骨抽出部９２によって抽出された転移警戒臓器及び転移警戒骨の転移警戒度を算出する機能を有する。転移警戒度演算部５７Ｃによって算出される、臓器と骨との転移警戒度は同じになる。又は、転移警戒度演算部５７Ｃは、入力装置２５からの入力情報に基づいて近いパターンを複数挙げ、類似度を転移警戒度としてもよい。 25 has a function of calculating the metastasis alert level of the metastasis alert organ and the metastasis alert bone extracted by the metastasis alert organ / bone extraction unit 92. The metastasis alert level between the organ and the bone calculated by the metastasis alert level calculator 57C is the same. Alternatively, the transfer warning level calculator 57C may list a plurality of close patterns based on the input information from the input device 25, and use the similarity as the transfer warning level.
第４実施形態の画像処理装置１０Ｃで生成される合成画像は、図１２、図１３、図１６、図１７、図２２、及び図２３に示すものと同等であるので説明を省略する。 The composite image generated by the image processing apparatus 10C of the fourth embodiment is the same as that shown in FIGS. 12, 13, 16, 17, 17, and 23, and a description thereof will be omitted.
なお、第４実施形態の画像処理装置１０Ｃで合成画像を生成する場合について説明したが、画像管理装置９で合成画像を生成してもよい。 Although the case where the composite image is generated by the image processing apparatus 10C of the fourth embodiment has been described, the composite image may be generated by the image management apparatus 9.
第４実施形態の画像処理装置１０Ｃによると、転移警戒度を表示することで、転移警戒度の低い臓器や骨に対して高いそれらを優先的に着目すべきことを促すことができるので、転移警戒度の高い臓器や骨内の腫瘍を視認し易い画像を提供することができる。 According to the image processing apparatus 10 </ b> C of the fourth embodiment, by displaying the metastasis alertness level, it is possible to promote that attention should be given to those organs and bones with a low metastasis alertness level with priority. It is possible to provide an image in which an organ with high alertness and a tumor in a bone can be easily visually recognized.
（表示方法）
第１乃至第４実施形態の画像処理装置では、Ｔ１Ｗ画像上にオーバーレイ用のボリュームデータを重畳して合成画像を生成したが、その場合に限定されるものではない。例えば、Ｔ１Ｗ画像に、転移警戒度が高い組織とその転移警戒度とを示すテキスト又は表を合成して合成画像を生成してもよい。
(Display method)
In the image processing apparatuses according to the first to fourth embodiments, a composite image is generated by superimposing overlay volume data on a T1W image. However, the present invention is not limited to this case. For example, a composite image may be generated by synthesizing a T1W image with a text or table indicating a tissue having a high degree of transfer warning and the transfer warning level.
図２６は、Ｔ１Ｗ画像に合成される、転移警戒度が高い組織とその転移警戒度とを示す表を示す図である。 FIG. 26 is a diagram illustrating a table that is synthesized with the T1W image and indicates a tissue having a high level of transfer warning and the level of transfer warning.
図２６に示すような表（転移候補リスト）をＴ１Ｗ画像に合成して表示することで、重畳による合成画像を表示する場合と同様の効果が得られる。なお、Ｔ１Ｗ画像に、表ではなく、転移警戒度が高い組織とその転移警戒度とを示すテキスト（コメント）を合成してもよい。 By synthesizing and displaying the table (transfer candidate list) as shown in FIG. 26 on the T1W image, the same effect as in the case of displaying the synthesized image by superposition can be obtained. In addition, you may synthesize | combine the text (comment) which shows the structure | tissue with high metastasis alertness, and its metastasis alertness, not a table | surface to a T1W image.
また、オーバーレイ用のボリュームデータにより隠されＴ１Ｗ画像が視認しづらくなる場合がある。そこで、操作者によってＴ１Ｗ画像上、又は、図２６に示す表から選択（クリック）された特定の転移警戒臓器（転移警戒骨）のみを合成処理してもよい。 In addition, the T1W image may be difficult to view because it is hidden by the volume data for overlay. Accordingly, only a specific metastasis alert organ (metastasis alert bone) selected (clicked) on the T1W image or the table shown in FIG. 26 by the operator may be synthesized.
さらに、操作者によってＴ１Ｗ画像上、又は、図２６に示す表から選択（クリック）された（転移警戒骨）に対して最適なＷＬ（ｗｉｎｄｏｗ ｌｅｖｅｌ）／ＷＷ（ｗｉｎｄｏｗ ｗｉｄｔｈ）のＬＵＴ（ｌｏｏｋ ｕｐ ｔａｂｌｅ）を作成し、合成画像全体に適用してもよい。 Furthermore, the LUT (look up table) of the optimum WL (window level) / WW (window width) is selected (clicked) on the T1W image or the table shown in FIG. 26 by the operator (transition warning bone). ) May be created and applied to the entire composite image.
以上、本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で種々の省略、置き換え、変更を行なうことができる。これらの実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 Although several embodiments of the present invention have been described above, these embodiments are presented as examples and are not intended to limit the scope of the invention. These novel embodiments can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the scope of the invention. These embodiments and modifications thereof are included in the scope and gist of the invention, and are included in the invention described in the claims and the equivalents thereof.
１０，１０Ａ，１０Ｂ，１０Ｃ 画像処理装置
２１ ＣＰＵ
２６ 表示装置
４２ 臓器画像取得部
４３ 腫瘍画像取得部
４４ リンパ管・節画像取得部
４５ 転移リンパ節画像取得部
４６ 臓器領域抽出部
４７ 腫瘍領域抽出部
４８ 第１変位演算部
４９ 腫瘍画像変形部
５０ リンパ管・節領域抽出部
５１ 第２変位演算部
５２ 臓器画像変形部
５３ リンパ節鑑別部
５４ 原発巣臓器設定部
５５ 転移警戒リンパ管抽出部
５６ 転移警戒臓器抽出部
５７，５７Ｂ，５７Ｃ 転移警戒度演算部
５８ オーバーレイ生成部
５９，５９Ａ 合成部
６１ 第３変位演算部
６２ オーバーレイ取得部
６３ オーバーレイ変形部
７１ 臓器・骨画像取得部
７２ 血管画像取得部
７３ 臓器・骨領域抽出部
７４ 第４変位演算部
７５ 臓器・骨画像変形部
７６ 血管領域抽出部
７７ 第５変位演算部
７８ 血管画像変形部
７９ 転移警戒臓器抽出部
８０ 転移警戒骨抽出部
９１ 転移履歴取得部
９２ 転移警戒臓器・骨抽出部
10, 10A, 10B, 10C Image processing device 21 CPU
26 display device 42 organ image acquisition unit 43 tumor image acquisition unit 44 lymph vessel / node image acquisition unit 45 metastatic lymph node image acquisition unit 46 organ region extraction unit 47 tumor region extraction unit 48 first displacement calculation unit 49 tumor image deformation unit 50 Lymphatic / node region extraction unit 51 Second displacement calculation unit 52 Organ image deformation unit 53 Lymph node discrimination unit 54 Primary focus organ setting unit 55 Metastasis alert lymphatic vessel extraction unit 56 Metastasis alert organ extraction unit 57, 57B, 57C Metastasis alertness Calculation unit 58 Overlay generation unit 59, 59A Composition unit 61 Third displacement calculation unit 62 Overlay acquisition unit 63 Overlay deformation unit 71 Organ / bone image acquisition unit 72 Blood vessel image acquisition unit 73 Organ / bone region extraction unit 74 Fourth displacement calculation unit 75 Organ / bone image transformation unit 76 Blood vessel region extraction unit 77 Fifth displacement calculation unit 78 Blood vessel image transformation unit 79 Metastasis warning organ extraction unit 80 Metastasis戒骨 extraction unit 91 transition history acquisition unit 92 transition vigilance organs and bone extraction unit
Claims (10)
前記合成画像データを表示装置に表示させる表示制御手段と、
を有する画像処理装置。 Synthetic image data generation means for generating composite image data by synthesizing tumor metastasis warning information about tissue with image data;
Display control means for displaying the composite image data on a display device;
An image processing apparatus.
前記画像データから腫瘍を抽出する腫瘍抽出手段と、
前記組織のうち前記腫瘍を含む組織を前記原発巣組織として設定する原発巣組織設定手段と、をさらに有し、
前記演算手段は、前記原発巣組織以外の組織の位置情報に基づいて、前記転移警戒情報を算出する請求項２に記載の画像処理装置。 A tissue extraction means for extracting a tissue included in the image data;
A tumor extraction means for extracting a tumor from the image data;
A primary lesion tissue setting means for setting a tissue containing the tumor among the tissues as the primary lesion tissue,
The image processing apparatus according to claim 2, wherein the calculation unit calculates the metastasis warning information based on position information of a tissue other than the primary lesion tissue.
前記合成画像データ生成手段は、前記画像データに、前記所要の原発巣組織に対応する原発巣組織以外の組織の転移警戒情報を合成する請求項１に記載の画像処理装置。 An acquisition means for acquiring metastasis warning information of a tissue other than the primary tissue corresponding to a desired primary tissue from a storage device that stores and stores the metastasis warning information of a tissue other than the primary tissue in association with the primary tissue. In addition,
The image processing apparatus according to claim 1, wherein the composite image data generation unit synthesizes metastasis warning information of a tissue other than the primary tissue corresponding to the required primary tissue with the image data.
前記演算手段は、前記原発巣組織以外の組織の位置情報と、前記抽出されたリンパ管及び血管のうち少なくとも１つの位置情報とに基づいて前記転移警戒情報を算出する請求項１乃至６のうち少なくとも一項に記載の画像処理装置。 The tissue extraction means extracts at least one of an organ, a lymph node, and a bone, and at least one of a lymph vessel and a blood vessel as a tissue included in the image data,
The calculation means calculates the metastasis warning information based on position information of a tissue other than the primary lesion tissue and position information of at least one of the extracted lymphatic vessels and blood vessels. The image processing apparatus according to at least one item.
前記合成画像データを表示装置に表示させる画像処理方法。 Obtaining image data stored in a storage device, and generating synthesized image data by synthesizing tumor metastasis warning information related to tissue with the image data;
An image processing method for displaying the composite image data on a display device.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012196246A JP2014050527A (en) | 2012-09-06 | 2012-09-06 | Image processor and image processing method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012196246A JP2014050527A (en) | 2012-09-06 | 2012-09-06 | Image processor and image processing method |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2014050527A true JP2014050527A (en) | 2014-03-20 |
Family
ID=50609603
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012196246A Pending JP2014050527A (en) | 2012-09-06 | 2012-09-06 | Image processor and image processing method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2014050527A (en) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2017158781A (en) * | 2016-03-09 | 2017-09-14 | 富士フイルム株式会社 | Image display control apparatus and method, and program |
| CN112076398A (en) * | 2019-06-13 | 2020-12-15 | 佳能医疗***株式会社 | Radiation therapy system, treatment planning support method, and treatment planning method |
| JP2021511138A (en) * | 2018-01-18 | 2021-05-06 | コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． | Medical analysis method for predicting metastasis in test tissue samples |
| US11244458B2 (en) | 2018-01-29 | 2022-02-08 | Fujifilm Corporation | Image processing apparatus, image processing method, and program |
| US11462311B2 (en) * | 2014-05-09 | 2022-10-04 | Acupath Laboratories, Inc. | Biopsy mapping tools |
-
2012
- 2012-09-06 JP JP2012196246A patent/JP2014050527A/en active Pending
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11462311B2 (en) * | 2014-05-09 | 2022-10-04 | Acupath Laboratories, Inc. | Biopsy mapping tools |
| JP2017158781A (en) * | 2016-03-09 | 2017-09-14 | 富士フイルム株式会社 | Image display control apparatus and method, and program |
| JP2021511138A (en) * | 2018-01-18 | 2021-05-06 | コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． | Medical analysis method for predicting metastasis in test tissue samples |
| JP7304866B2 (en) | 2018-01-18 | 2023-07-07 | コーニンクレッカ フィリップス エヌ ヴェ | Medical analytical methods for predicting metastases in test tissue samples |
| US11244458B2 (en) | 2018-01-29 | 2022-02-08 | Fujifilm Corporation | Image processing apparatus, image processing method, and program |
| CN112076398A (en) * | 2019-06-13 | 2020-12-15 | 佳能医疗***株式会社 | Radiation therapy system, treatment planning support method, and treatment planning method |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9401047B2 (en) | Enhanced visualization of medical image data | |
| Park et al. | Annotated normal CT data of the abdomen for deep learning: Challenges and strategies for implementation | |
| US9471987B2 (en) | Automatic planning for medical imaging | |
| US9024941B2 (en) | Sequentially displaying virtual endoscopic images by setting an observation path to compensate for a curved region of the tubular structure | |
| US20110054295A1 (en) | Medical image diagnostic apparatus and method using a liver function angiographic image, and computer readable recording medium on which is recorded a program therefor | |
| EP1947606A1 (en) | Medical image processing apparatus and medical image processing method | |
| US11030748B2 (en) | Automatic CT detection and visualization of active bleeding and blood extravasation | |
| US10219767B2 (en) | Classification of a health state of tissue of interest based on longitudinal features | |
| EP3136338A1 (en) | Projection images processing apparatus, projection images processing method, and program | |
| JP2015508301A (en) | Chest image processing and display | |
| JP2009106530A (en) | Medical image processing apparatus, medical image processing method, and medical image diagnostic apparatus | |
| JP2007151645A (en) | Medical diagnostic imaging support system | |
| JP2014050527A (en) | Image processor and image processing method | |
| US9361684B2 (en) | Feature validation using orientation difference vector | |
| JP2016174735A (en) | Diagnosis aiding image generation apparatus, diagnosis aiding image generation method, and diagnosis aiding image generation program | |
| Kita et al. | A CAD system for the 3D location of lesions in mammograms | |
| JP2019208903A (en) | Medical image processor, medical image processing method, medical image processing program | |
| JP6755468B2 (en) | Medical image processing device | |
| US9449383B2 (en) | Determination of a physically-varying anatomical structure | |
| US9585569B2 (en) | Virtual endoscopic projection image generating device, method and program | |
| JP2006334140A (en) | Display method of abnormal shadow candidate and medical image processing system | |
| WO2022209889A1 (en) | Medical image processing device, method for operating medical image processing device, and operation program for medical image processing device | |
| JP2011067594A (en) | Medical image diagnostic apparatus and method using liver function angiographic image, and program | |
| US20110242096A1 (en) | Anatomy diagram generation method and apparatus, and medium storing program | |
| Zhang et al. | Mesenteric vasculature-guided small bowel segmentation on high-resolution 3D CT angiography scans |