JP7332362B2 - Medical image processing apparatus, medical image processing system, and medical image processing method - Google Patents

Medical image processing apparatus, medical image processing system, and medical image processing method Download PDF

Info

Publication number
JP7332362B2
JP7332362B2 JP2019126353A JP2019126353A JP7332362B2 JP 7332362 B2 JP7332362 B2 JP 7332362B2 JP 2019126353 A JP2019126353 A JP 2019126353A JP 2019126353 A JP2019126353 A JP 2019126353A JP 7332362 B2 JP7332362 B2 JP 7332362B2
Authority
JP
Japan
Prior art keywords
images
disease state
change
disease
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019126353A
Other languages
Japanese (ja)
Other versions
JP2020028706A (en
Inventor
康太 青柳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Medical Systems Corp
Original Assignee
Canon Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Medical Systems Corp filed Critical Canon Medical Systems Corp
Priority to US16/541,248 priority Critical patent/US11195272B2/en
Publication of JP2020028706A publication Critical patent/JP2020028706A/en
Application granted granted Critical
Publication of JP7332362B2 publication Critical patent/JP7332362B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Magnetic Resonance Imaging Apparatus (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Description

本発明の実施形態は、医用画像処理装置、医用画像処理システム、及び、医用画像処理方法に関する。 TECHNICAL FIELD Embodiments of the present invention relate to a medical image processing apparatus, a medical image processing system, and a medical image processing method.

今日、X線CT(Computed Tomography)装置、MRI(Magnetic Resonance Imaging)装置、或いは超音波診断装置等のモダリティで被検体を撮像して生成された画像データを解析することにより、種々の疾患の診断が行われている。 Today, various diseases can be diagnosed by analyzing image data generated by imaging a subject with a modality such as an X-ray CT (Computed Tomography) device, an MRI (Magnetic Resonance Imaging) device, or an ultrasonic diagnostic device. is being done.

例えば、X線画像やX線CT画像を用いて、びまん性肺疾患の診断が行われている。びまん性肺疾患は、病変が左右の肺に比較的均等に広がっている肺疾患の総称であり、びまん性肺疾患には、様々の疾患が含まれる。間質性肺炎は、びまん性肺疾患の代表格であるが、この他にも、感染症や腫瘍等によるびまん性肺疾患もある。また、間質性肺炎といってもひとつの病気ではなく、最も多い特発性間質性肺炎のほか、膠原病や過敏性肺炎、じん肺・職業性肺疾患なども、広義の間質性肺炎に含まれる。このように、びまん性肺疾患は、いくつかの個別の疾患の種類に分類することができ、これらの個別の疾患種類を、以下では疾患原因と呼ぶ場合がある。 For example, X-ray images and X-ray CT images are used to diagnose diffuse lung disease. Diffuse lung disease is a general term for lung diseases in which lesions spread relatively evenly in the left and right lungs, and includes various diseases. Interstitial pneumonia is a typical diffuse lung disease, but there are other diffuse lung diseases caused by infections, tumors, and the like. In addition, interstitial pneumonia is not a single disease. In addition to idiopathic interstitial pneumonia, which is the most common, connective tissue disease, hypersensitivity pneumonitis, pneumoconiosis, and occupational lung disease are also included in the broad definition of interstitial pneumonia. included. Diffuse lung disease can thus be classified into several distinct disease types, and these distinct disease types may hereinafter be referred to as disease causes.

一方、びまん性肺疾患のX線CT画像は、いくつかのテクスチャパタンの種類に分類されることが知られている。また、肺のX線CT画像に対してテクスチャ解析を行って肺野内をいくつかのテクスチャパタンに分類し、各テクスチャパタンの肺野全体に対する体積割合や、その経時変化を表示する方法が提案されている。 On the other hand, X-ray CT images of diffuse lung disease are known to be classified into several types of texture patterns. In addition, a method has been proposed in which texture analysis is performed on lung X-ray CT images to classify the lung field into several texture patterns, and the volume ratio of each texture pattern to the entire lung field and its change over time are displayed. ing.

しかしながら、これらの従来の技術では、肺等の組織の局所的な領域が、回復方向にあるのか、或いは、増悪方向にあるのかといった、組織の局所的な領域における疾患状態の変化を把握することができなかった。 However, with these conventional techniques, it is difficult to grasp changes in the disease state in a local region of tissue, such as whether the local region of tissue such as the lung is in the direction of recovery or in the direction of exacerbation. I couldn't do it.

米国特許出願公開第2014/0184608号明細書U.S. Patent Application Publication No. 2014/0184608

Uchiyama Y, Katsuragawa S, Abe H, et al. Quantitative computerized analysis of diffuse lung disease in high-resolution computed tomography. Med Phys. AAPM; 2003;30(9):2440-2454.Uchiyama Y, Katsuragawa S, Abe H, et al. Quantitative computerized analysis of diffuse lung disease in high-resolution computed tomography. Med Phys. AAPM; 2003;30(9):2440-2454.

本発明が解決しようとする課題は、医用画像から、組織の局所的な領域における疾患状態の変化を容易に把握できるようにすることである。 The problem to be solved by the present invention is to make it possible to easily grasp changes in disease states in localized regions of tissues from medical images.

実施形態に係る医用画像処理装置は、取得部と、解析部と、推定部とを備える。取得部は、同一被検体を撮像した画像であって、撮像時刻が異なる複数の画像を取得する。解析部は、前記複数の画像の夫々の領域の画素値に基づいて前記被検体の組織性状の解析を行うことで前記被検体の組織性状を複数の組織性状クラスに分類し、分類された前記組織性状クラスを、前記複数の画像の夫々の領域へ割り当てる。推定部は、前記複数の画像の夫々の対応領域における前記組織性状クラスの変化から、前記被検体の疾患状態の変化を推定する。 A medical image processing apparatus according to an embodiment includes an acquisition unit, an analysis unit, and an estimation unit. The acquiring unit acquires a plurality of images obtained by imaging the same subject at different imaging times. The analysis unit classifies the tissue properties of the subject into a plurality of tissue property classes by analyzing the tissue properties of the subject based on the pixel values of the respective regions of the plurality of images, and classifying the classified tissue properties of the subject. A tissue attribute class is assigned to each region of the plurality of images. The estimating unit estimates changes in the disease state of the subject from changes in the tissue attribute class in corresponding regions of the plurality of images.

第1の実施形態に係る医用画像処理装置を含む医用画像診断システムの構成例を示す図。1 is a diagram showing a configuration example of a medical image diagnostic system including a medical image processing apparatus according to a first embodiment; FIG. 第1の実施形態に係る医用画像処理装置の構成例を示すブロック図。1 is a block diagram showing a configuration example of a medical image processing apparatus according to a first embodiment; FIG. 第1の実施形態の医用画像処理装置の動作例を示すフローチャート。4 is a flowchart showing an operation example of the medical image processing apparatus of the first embodiment; 第1画像及び第2画像の一例を示す模式図。4A and 4B are schematic diagrams showing an example of a first image and a second image; FIG. 図3のフローチャートのステップST102乃至ステップST105の処理概念を説明する図。FIG. 4 is a view for explaining the processing concept of steps ST102 to ST105 in the flowchart of FIG. 3; 異なる種類のテクスチャパタンの例を示す図。4A and 4B are diagrams showing examples of different types of texture patterns; FIG. 左右の肺の領域が複数のテクスチャパタンの種類に分類された例を示す図。FIG. 4 is a diagram showing an example in which left and right lung regions are classified into a plurality of texture pattern types; 状態変化方向の推定用のルックアップテーブルの一例を示す図。The figure which shows an example of the lookup table for estimation of a state change direction. 疾患状態変化マップの一例を示す図。The figure which shows an example of a disease state change map. 第1の実施形態の変形例に係る医用画像処理装置の動作例を示すフローチャート。6 is a flow chart showing an example of the operation of the medical image processing apparatus according to the modified example of the first embodiment; 疾患状態の変化の方向と変化の速度を推定するためのルックアップテーブルの一例を示す図。FIG. 11 shows an example of a lookup table for estimating the direction and speed of change in disease state. 疾患状態の変化の方向及び速度を描出した疾患状態変化マップの一例を示す図。FIG. 4 is a diagram showing an example of a disease state change map that depicts the direction and speed of disease state change. 第2の実施形態の医用画像処理装置の動作例を示すフローチャート。8 is a flowchart showing an operation example of the medical image processing apparatus according to the second embodiment; 疾患原因毎の状態変化方向の推定用ルックアップテーブルの例を示す図。FIG. 4 is a diagram showing an example of a lookup table for estimating the state change direction for each disease cause; 第2の実施形態の変形例に係る医用画像処理装置の動作例を示すフローチャート。10 is a flowchart showing an operation example of a medical image processing apparatus according to a modified example of the second embodiment; テクスチャパタンの種類の変化から疾患原因を推定する処理の動作概念を説明する図。FIG. 10 is a diagram for explaining the operation concept of processing for estimating the cause of a disease from changes in the type of texture pattern;

実施形態に係る医用画像処理装置について、添付図面を参照して説明する。なお、以下の実施形態では、同一の参照符号を付した部分は同様の動作をするものとして、重複する説明を適宜省略する。 A medical image processing apparatus according to an embodiment will be described with reference to the accompanying drawings. It should be noted that, in the following embodiments, portions denoted by the same reference numerals operate in the same manner, and overlapping descriptions will be omitted as appropriate.

図1は、実施形態に係る医用画像処理装置100を含む、医用画像処理システムの一構成例を示す図である。医用画像処理システムは、例えば、病院内において、医用画像を取得し、画像処理し、保存し、利用する、医用画像に関する一連の処理システムである。 FIG. 1 is a diagram showing a configuration example of a medical image processing system including a medical image processing apparatus 100 according to an embodiment. A medical image processing system is a series of medical image processing systems that acquire, process, store, and use medical images, for example, in a hospital.

医用画像処理システムは、患者等の被検体から医用画像を取得するX線CT装置511、MRI装置512、超音波診断装置513などのモダリティ510(即ち、医用画像診断装置510)のほか、画像サーバや、医用画像処理装置100を有している。これらの各装置は、各種のデータや医用画像を授受できるように、例えば病院内のネットワーク500を介して互いに接続されている。 The medical image processing system includes a modality 510 (that is, a medical image diagnostic device 510) such as an X-ray CT device 511, an MRI device 512, and an ultrasonic diagnostic device 513 for acquiring medical images from a subject such as a patient, as well as an image server. and the medical image processing apparatus 100 . These devices are connected to each other via, for example, a hospital network 500 so as to exchange various data and medical images.

(第1の実施形態の構成)
図2は、第1の実施形態に係る医用画像処理装置100の構成例を示すブロック図である。医用画像処理装置100は、例えば、入力インターフェース回路10、処理回路20、記憶回路30、入力デバイス40、及び、ディスプレイ50を備えて構成される。医用画像処理装置100は、例えば、所謂ワークステーション、或いは、高性能パーソナルコンピュータとして構成される。
(Configuration of the first embodiment)
FIG. 2 is a block diagram showing a configuration example of the medical image processing apparatus 100 according to the first embodiment. The medical image processing apparatus 100 includes an input interface circuit 10, a processing circuit 20, a memory circuit 30, an input device 40, and a display 50, for example. The medical image processing apparatus 100 is configured as, for example, a so-called workstation or a high performance personal computer.

入力インターフェース回路10は、有線又は無線のネットワーク、或いは、専用又は汎用の通信回線を介してデータを入力したり、光ディスクやUSBメモリ等の記憶媒体を介してデータを入力したりするインターフェース回路である。第1の実施形態の医用画像処理装置100では、入力インターフェース回路10を介して、X線CT装置511等のモダリティ510で撮像された第1画像及び第2画像、或いは、画像サーバに保存されている第1画像及び第2画像を取得する。 The input interface circuit 10 is an interface circuit for inputting data via a wired or wireless network, a dedicated or general-purpose communication line, or inputting data via a storage medium such as an optical disk or a USB memory. . In the medical image processing apparatus 100 of the first embodiment, through the input interface circuit 10, a first image and a second image captured by a modality 510 such as an X-ray CT apparatus 511, or stored in an image server. A first image and a second image are obtained.

ここで、第1画像及び第2画像は、同一被検体を、異なる日時に撮像した画像である。例えば、第2画像は、第1画像の撮像日よりも後の日時に撮像された画像である。第1画像及び第2画像に関しては、さらに詳しく後述する。 Here, the first image and the second image are images of the same subject taken on different dates and times. For example, the second image is an image captured on a date and time later than the date on which the first image was captured. The first image and the second image will be described in more detail later.

記憶回路30は、ROM(Read Only Memory)やRAM(Random Access Memory)の他、HDD(Hard Disk Drive)や光ディスク装置等の外部記憶装置を含む記憶媒体である。記憶回路30は、後述するルックアップテーブル31を含む各種の情報やデータを記憶する他、処理回路20が具備するプロセッサが実行する各種のプログラムを記憶する。 The storage circuit 30 is a storage medium including a ROM (Read Only Memory), a RAM (Random Access Memory), and an external storage device such as an HDD (Hard Disk Drive) and an optical disk device. The storage circuit 30 stores various information and data including a lookup table 31 to be described later, and also stores various programs executed by the processor included in the processing circuit 20 .

入力デバイス40は、例えば、マウス、キーボード、トラックボール、タッチパネル等であり、各種の情報やデータを操作者が入力するための種々のデバイスを含む。 The input device 40 is, for example, a mouse, keyboard, trackball, touch panel, etc., and includes various devices for the operator to input various information and data.

ディスプレイ50は、液晶ディスプレイパネル、プラズマディスプレイパネル、有機ELパネル等の表示デバイスである。 The display 50 is a display device such as a liquid crystal display panel, plasma display panel, or organic EL panel.

処理回路20は、例えば、CPUや、専用又は汎用のプロセッサを備える回路である。プロセッサは、記憶回路30に記憶した各種のプログラムを実行することによって、後述する各種の機能を実現する。処理回路20は、FPGA(field programmable gate array)やASIC(application specific integrated circuit)等のハードウェアで構成してもよい。これらのハードウェアによっても後述する各種の機能を実現することができる。また、処理回路20は、プロセッサとプログラムによるソフトウェア処理と、ハードウェア処理とを組み合わせて、各種の機能を実現することもできる。 The processing circuit 20 is, for example, a circuit including a CPU or a dedicated or general-purpose processor. The processor implements various functions described later by executing various programs stored in the storage circuit 30 . The processing circuit 20 may be configured by hardware such as FPGA (field programmable gate array) or ASIC (application specific integrated circuit). These hardware can also realize various functions described later. The processing circuit 20 can also implement various functions by combining software processing by a processor and a program and hardware processing.

また、複数の独立したプロセッサを組み合わせて処理回路20を構成し、各プロセッサが各機能を実現してもよい。また、プロセッサが複数設けられる場合、プログラムを記憶する記憶媒体は、プロセッサごとに個別に設けられてもよいし、1つの記憶媒体が全てのプロセッサの機能に対応するプログラムを一括して記憶してもよい。 Alternatively, the processing circuit 20 may be configured by combining a plurality of independent processors, and each processor may realize each function. Further, when a plurality of processors are provided, a storage medium for storing programs may be provided individually for each processor, or a single storage medium may collectively store programs corresponding to the functions of all processors. good too.

(第1の実施形態の動作)
第1の実施形態の処理回路20は、図2に示す各機能、即ち、画像データ取得機能21、テクスチャ解析機能22、疾患状態変化推定機能23、疾患状態変化マップ生成機能24、及び、表示制御機能25を実現する。これらの各機能は、例えば、処理回路20が具備するプロセッサが、記憶回路30に記憶される所定のプログラムを実行することによって実現される。
(Operation of the first embodiment)
The processing circuit 20 of the first embodiment has the functions shown in FIG. Implement function 25. Each of these functions is realized, for example, by a processor included in the processing circuit 20 executing a predetermined program stored in the storage circuit 30 .

画像データ取得機能21は、同一被検体を撮像した画像であって、撮像時刻が異なる複数の画像を取得する。例えば、第1の日時に撮像した第1画像と、第1の日時よりも後の第2の日時に撮像した第2画像とを取得する。第1画像及び第2画像は、特に限定するものではないが、例えば、肺を撮像したX線画像や、X線CT画像である。 The image data acquisition function 21 acquires a plurality of images obtained by imaging the same subject at different imaging times. For example, a first image captured at a first date and time and a second image captured at a second date and time later than the first date and time are acquired. Although the first image and the second image are not particularly limited, they are, for example, an X-ray image of lungs or an X-ray CT image.

テクスチャ解析機能22は、画像データ取得機能21が取得した複数の画像の夫々の領域を、複数のテクスチャパタンの種類に分類する。例えば、テクスチャ解析機能22は、画像データ取得機能21が取得した第1画像及び第2画像に対して、公知のテクスチャ解析を行って、第1画像及び第2画像の夫々の領域を、複数のテクスチャパタンの種類に分類する。 The texture analysis function 22 classifies each region of the plurality of images acquired by the image data acquisition function 21 into a plurality of texture pattern types. For example, the texture analysis function 22 performs a known texture analysis on the first image and the second image acquired by the image data acquisition function 21, and divides each region of the first image and the second image into a plurality of Categorized into types of texture patterns.

疾患状態変化推定機能23は、テクスチャ解析機能22によって分類された、複数の画像の互いに対応する領域間におけるテクスチャパタンの種類の変化から、被検体の疾患状態の変化を推定する。例えば、疾患状態変化推定機能23は、第1画像及び第2画像の互いに対応する局所領域におけるテクスチャパタンの種類の変化から、局所領域における被検体の疾患状態の変化の方向が、a)回復方向、b)増悪方向、及び、c)変化なし、の少なくともいずれかであることを推定する。なお、対応する領域(即ち、対応領域)、或いは、対応する局所領域とは、例えば、複数画像間において解剖学的に対応する領域(或いは、局所領域)のことを意味している。 The disease state change estimating function 23 estimates changes in the disease state of the subject from changes in texture pattern types between corresponding regions of the plurality of images classified by the texture analysis function 22 . For example, the disease state change estimation function 23 determines the direction of change in the disease state of the subject in the local region based on the change in the type of texture pattern in the corresponding local regions of the first image and the second image. , b) direction of exacerbation, and/or c) no change. Note that the corresponding region (that is, corresponding region) or corresponding local region means, for example, an anatomically corresponding region (or local region) between a plurality of images.

疾患状態変化マップ生成機能24は、対応する領域ごとに、疾患状態の変化を識別可能とする画素値を割り当てたマップ画像を生成する。より具体的には、疾患状態変化マップ生成機能24は、疾患状態変化推定機能23によって推定された疾患状態の変化の方向が、ピクセル単位、又は、2ピクセル以上から構成されるピクセルグループ単位で描出された疾患状態変化マップを生成する。例えば、疾患状態変化マップ生成機能24は、疾患状態の変化の方向が、ピクセル単位、又は、ピクセルグループ単位ごとに、異なる色、異なる濃度、異なる数字、及び、異なる記号の少なくとも1つを含む異なる態様によって、識別可能に描出されるように疾患状態変化マップを生成する。 The disease state change map generation function 24 generates a map image in which pixel values that enable identification of disease state changes are assigned to each corresponding region. More specifically, the disease state change map generation function 24 draws the direction of change in the disease state estimated by the disease state change estimation function 23 in units of pixels or in units of pixel groups composed of two or more pixels. generate a modified disease state change map. For example, the disease state change map generation function 24 may determine that the direction of disease state change is different, including at least one of different colors, different densities, different numbers, and different symbols, for each pixel or each group of pixels. According to an aspect, a disease state change map is generated to be identifiably delineated.

表示制御機能25は、生成された疾患状態変化マップを、例えば、ユーザの指示に応じて、ディスプレイ50に表示させる。 The display control function 25 causes the display 50 to display the generated disease state change map, for example, according to a user's instruction.

図3は、第1の実施形態の医用画像処理装置100の動作例を示すフローチャートである。また、図4乃至図9は、第1の実施形態の医用画像処理装置100の動作概念を説明する図である。以下、図3のフローに沿って、図4乃至図9を参照しつつ、医用画像処理装置100の動作をより具体的に説明していく。 FIG. 3 is a flow chart showing an operation example of the medical image processing apparatus 100 of the first embodiment. 4 to 9 are diagrams for explaining the operation concept of the medical image processing apparatus 100 of the first embodiment. Hereinafter, the operation of the medical image processing apparatus 100 will be described more specifically along the flow of FIG. 3 and with reference to FIGS. 4 to 9. FIG.

まず、図3のステップST100で第1画像を取得し、ステップST101で第2画像を取得する。図4は、第1画像、及び、第2画像の一例を示す模式図である。第1画像、及び、第2画像は、同一の被検体を撮像した画像であるが、互いに撮像時期が異なっている。第1画像は、例えば、2018年5月8日に行われた検査1において撮像された画像であり、第2画像は、検査1よりも後に行なわれた検査2において、例えば、2018年8月8日に行われた検査2において撮像された画像である。 First, the first image is acquired in step ST100 of FIG. 3, and the second image is acquired in step ST101. FIG. 4 is a schematic diagram showing an example of the first image and the second image. Although the first image and the second image are images of the same subject, they are captured at different times. The first image is, for example, an image captured in Examination 1 performed on May 8, 2018, and the second image is an image captured in Examination 2 performed after Examination 1, for example, in August 2018. It is an image captured in Examination 2 performed on the 8th.

第1画像の撮像日と、第2画像の撮像日の間隔は、上記の例では3カ月となっているが、これはあくまで一例であり、1週間、1カ月、6カ月、12カ月、等、医師の判断によって定められるものである。また、撮像回数も2回に限定されるものではなく、3以上の複数回の撮像日に撮像された複数の画像から、撮像日の異なる所望の2つの画像を選択して、撮像日の早い一方の画像を第1画像とし、他方の画像を第2画像としてもよい。 In the above example, the interval between the date when the first image was captured and the date when the second image was captured is 3 months, but this is just an example, and may be 1 week, 1 month, 6 months, 12 months, etc. , is determined by a physician's judgment. In addition, the number of times of imaging is not limited to two, and two desired images on different imaging dates are selected from a plurality of images taken on a plurality of imaging dates of three or more times, and two images on earlier imaging dates are selected. One image may be the first image and the other image may be the second image.

なお、図4に示す第1、第2画像は、あくまでも本実施形態の医用画像処理装置100の動作を説明するための模式図であることに留意されたい。第1、第2画像は、例えば、X線CT装置511で、被検体の肺野部を撮像した3次元画像を、あるコロナル断面で切り取った2次元画像である。 Note that the first and second images shown in FIG. 4 are merely schematic diagrams for explaining the operation of the medical image processing apparatus 100 of this embodiment. The first and second images are, for example, two-dimensional images obtained by cutting out a three-dimensional image of the lung field of the subject with the X-ray CT apparatus 511 at a certain coronal cross section.

前述したように、X線画像やX線CT画像を用いて、例えば、びまん性肺疾患の診断が行われている。びまん性肺疾患の治療は主にステロイド薬や免疫抑制剤などの薬剤治療である。治療効果を判定するために、X線CT画像の陰影パタン、即ち、テクスチャパタンの経時変化をモニタリングすることは極めて重要である。 As described above, X-ray images and X-ray CT images are used to diagnose, for example, diffuse lung disease. Diffuse lung disease is mainly treated with drugs such as steroids and immunosuppressants. In order to determine the therapeutic effect, it is extremely important to monitor the shadow pattern of X-ray CT images, that is, the change in texture pattern over time.

一方、びまん性肺疾患の疾患部のX線CT画像は、いくつかのテクスチャパタンの種類に分類されることが知られている。また、疾患が初期状態から増悪方向に進むにつれて、テクスチャパタンの種類が変化することも知られている。また逆に、治療効果が上がり、疾患が増悪状態から回復方向に向かう場合にも、テクスチャパタンの種類が変化することも知られている。 On the other hand, it is known that X-ray CT images of lesions of diffuse lung disease are classified into several types of texture patterns. It is also known that the type of texture pattern changes as the disease progresses from the initial state to the exacerbation direction. Conversely, it is also known that the type of texture pattern changes when the therapeutic effect increases and the disease goes from an exacerbated state to a recovery direction.

図4は、このようなテクスチャパタンの経時変化を、第1画像と第2画像に模式的に示したものである。第1、第2画像の夫々の肺野部の背景(周辺部を含む)の濃い領域は、疾患のない、正常な領域を示している。一方、図4では、背景の濃い領域以外に、淡い色のハッチングで示す複数の領域が図示されている。図4では、これらの、淡い色のハッチング領域が、疾患部の領域に該当するものとしている。また、図4における異なるハッチングパタンは、X線CT画像における異なる陰影パタン(テクスチャパタン)に該当するものとしている。 FIG. 4 schematically shows the temporal change of such texture patterns in the first image and the second image. The dark regions in the background (including the periphery) of the lung fields in each of the first and second images indicate normal, disease-free regions. On the other hand, in FIG. 4, a plurality of light-colored hatched areas are illustrated in addition to the dark-background area. In FIG. 4, these light-colored hatched areas correspond to diseased areas. Also, different hatching patterns in FIG. 4 correspond to different shadow patterns (texture patterns) in the X-ray CT image.

図4に示す例では、この被検体の左右の肺のうち、右肺(図4において左側の肺)上部には、第1画像と第2画像との間で淡い色の同じ種類のテクスチャパタンが観られるものの、第1画像の右肺におけるテクスチャパタンの領域よりも、第2画像の右肺におけるテクスチャパタンの領域の方が大きくなっている。このことは、第1画像を取得した2018年5月8日時点よりも、第2画像を取得した2018年8月8日時点(第1画像取得時の3カ月後)の方が、右肺における疾患部の領域が拡大しており、右肺に関しては、疾患が増悪方向にあることを意味している。 In the example shown in FIG. 4, of the left and right lungs of the subject, the upper part of the right lung (the left lung in FIG. 4) has the same type of light-colored texture pattern between the first image and the second image. However, the area of the texture pattern in the right lung of the second image is larger than the area of the texture pattern in the right lung of the first image. This indicates that the number of right lung lung lesions was higher as of August 8, 2018, when the second image was obtained (three months after the first image was obtained) than as of May 8, 2018, when the first image was obtained. In the right lung, the disease area is expanding, which means that the disease is in the process of exacerbation.

一方、左肺(図4において右側の肺)に関しては、第1画像において、右肺とは異なる種類のテクスチャパタンが広い範囲に亘って発生しているものの、このテクスチャパタンの種類に対応する疾患領域は、第2画像においては縮小している。その一方で、第2画像においては、左肺の下部に、上記2つの種類とは異なる種類のテクスチャパタンが発生している。このことは、左肺に関しては、回復方向にある領域と、増悪方向にある領域とが混在していることを意味している。 On the other hand, regarding the left lung (the lung on the right side in FIG. 4), in the first image, a texture pattern of a type different from that of the right lung occurs over a wide range. The area has shrunk in the second image. On the other hand, in the second image, a texture pattern different from the above two types occurs in the lower part of the left lung. This means that areas in the direction of recovery and areas in the direction of deterioration coexist in the left lung.

従来、このようなX線CT画像におけるテクスチャパタンの変化は、医師の主観的な評価に委ねられている場合が多かった。これに対して、本実施形態の医用画像処理装置100では、以下に説明するように、テクスチャパタンの種類の局所的な変化を検出し、テクスチャパタンの種類の局所的な変化から、疾患が増悪方向に向かっているのか、或いは、回復方向に向かっているのかといった疾患状態の変化の方向を、装置が客観的に推定することを可能としている。 Conventionally, changes in texture patterns in such X-ray CT images have often been subjectively evaluated by doctors. On the other hand, the medical image processing apparatus 100 of the present embodiment detects local changes in the type of texture pattern and aggravates the disease from the local change in the type of texture pattern, as described below. It enables the device to objectively estimate the direction of change in the disease state, whether it is moving in the direction of recovery or moving in the direction of recovery.

図3に戻り、ステップST102では、取得した第1画像のテクスチャ解析を行い、ステップST103では、テクスチャ解析に基づいて、第1画像の領域を、複数のテクスチャパタンの種類に分類する。同様に、ステップST104では、取得した第2画像のテクスチャ解析を行い、ステップST105では、テクスチャ解析に基づいて、第2画像の領域を、複数のテクスチャパタンの種類に分類する。 Returning to FIG. 3, in step ST102, texture analysis is performed on the obtained first image, and in step ST103, the regions of the first image are classified into a plurality of texture pattern types based on the texture analysis. Similarly, in step ST104, texture analysis of the obtained second image is performed, and in step ST105, regions of the second image are classified into a plurality of texture pattern types based on the texture analysis.

図5は、ステップST102乃至ステップST105の処理概念を説明する図である。図5の第2画像の中に示した四角の破線で囲んだ領域が、テクスチャ解析の判定ウィンドである。テクスチャ解析では、例えば、この判定ウィンド内の画素値(解析対象画像がX線CT画像の場合は、画素毎のCT値でもよい)を解析することにより、当該対象領域の特徴量を算出する。例えば、画素値の平均値、標準偏差等の統計量、画素値のヒストグラム分布や、スペクトラム分布に関するパラメータ等を、特徴量として算出する。 FIG. 5 is a diagram for explaining the concept of processing from steps ST102 to ST105. A rectangular area surrounded by a broken line shown in the second image of FIG. 5 is a determination window for texture analysis. In texture analysis, for example, the feature amount of the target region is calculated by analyzing the pixel values within this determination window (or the CT value for each pixel if the image to be analyzed is an X-ray CT image). For example, statistics such as the average value and standard deviation of pixel values, histogram distribution of pixel values, parameters related to spectrum distribution, and the like are calculated as feature amounts.

判定ウィンドを、例えば、図5に例示したように、左右上下方向にシフトさせることにより、画像全体の特徴量の分布を算出することができる。シフトのステップ幅は、ピクセル単位でもよいし、複数ピクセル単位でもよい。或いは、画像全体を予め判定ウィンドの大きさの網目で分割しておき、各網目内の特徴量を順次に、或いは並行して、算出してもよい。 By shifting the determination window in the left, right, up, and down directions as illustrated in FIG. 5, for example, the distribution of the feature amount of the entire image can be calculated. The shift step width may be in units of pixels or in units of multiple pixels. Alternatively, the entire image may be divided in advance into meshes each having the size of the determination window, and the feature amount in each mesh may be calculated sequentially or in parallel.

更に、ステップST103、ST105では、算出した特徴量に基づいて第1、及び第2画像の夫々の領域を複数のテクスチャパタンの種類に分類する。例えば、非特許文献1に開示されているように、びまん性肺疾患などの疾患部の医用画像(例えば、X線CT画像)を、複数種類のテクスチャパタンに分類する。 Further, in steps ST103 and ST105, the regions of the first and second images are classified into a plurality of texture pattern types based on the calculated feature amount. For example, as disclosed in Non-Patent Document 1, medical images (for example, X-ray CT images) of diseased areas such as diffuse lung disease are classified into multiple types of texture patterns.

例えば、ステップST103、ST105では、第1画像及び第2画像を、図6に示すように、正常なテクスチャパタン(種類「A」)と、5種類の異常なテクスチャパタン(種類「B」、種類「C」、種類「D」、種類「E」、及び、種類「F」)に分類する。 For example, in steps ST103 and ST105, as shown in FIG. 6, the first image and the second image are divided into normal texture patterns (type "A") and five types of abnormal texture patterns (type "B", type "C", type "D", type "E", and type "F").

例えば、テクスチャパタンを、種類「A」の「正常」パタン(normal)、種類「B」の「すりガラス状」パタン(ground-glass opacities)、種類「C」の「網状」パタン(reticular and linear opacities)、種類「D」の「結節状」パタン(nodular opacities)、種類「E」の「蜂巣状」パタン(honeycombing)、種類「F」の「浸潤影」パタン(consolidation)等の異なる種類に分類する。 For example, the texture pattern is a type “A” “normal” pattern, a type “B” “ground-glass” pattern (ground-glass opacities), a type “C” “reticular and linear opacities” pattern. ), type 'D' 'nodular opacities', type 'E' 'honeycombing' pattern, type 'F' 'consolidation' pattern, etc. do.

なお、図6における夫々のテクスチャパタンは、あくまでも本実施形態の動作を説明するために例示したものであり、医学的な正しさや正確性を意図するものではない。 Each texture pattern in FIG. 6 is merely an example for explaining the operation of this embodiment, and is not intended to be medical correctness or accuracy.

図7は、ステップST103及びステップST105の処理によって、第1画像、及び第2画像の夫々の左右の肺の領域が、複数のテクスチャパタンの種類に分類された例を示す図である。 FIG. 7 is a diagram showing an example in which the left and right lung regions of the first image and the second image are classified into a plurality of texture pattern types by the processing in steps ST103 and ST105.

第1画像に示す例では、右肺の上部が、「すりガラス状」パタンを示す種類「B」のテクスチャパタンに分類され、右肺の他の領域は、「正常」パタンを示す種類「A」のテクスチャパタンに分類されている。また第1画像の左肺の大部分は、種類「C」の「網状」パタンを示すテクスチャパタンに分類されている。 In the example shown in the first image, the upper part of the right lung is classified with a texture pattern of type 'B', which indicates a 'frosted glass' pattern, and the rest of the right lung is classified as type 'A', which indicates a 'normal' pattern. are classified as texture patterns. Also, most of the left lung in the first image is classified as a texture pattern indicating a type "C" "reticular" pattern.

一方、第2画像に示す例では、右肺のかなりの部分が、「すりガラス状」パタンを示す種類「B」のテクスチャパタンに分類されている。また、第2画像の左肺は、種類「C」の「網状」パタンを示すテクスチャパタンと、種類「D」の「結節状」パタンを示すテクスチャパタンとに分類されている。 On the other hand, in the example shown in the second image, a significant portion of the right lung is classified as a texture pattern of type "B" indicating a "frosted glass" pattern. The left lung of the second image is classified into a texture pattern indicating a type "C" "reticulated" pattern and a texture pattern indicating a type "D" "nodular" pattern.

図7に示す例では、複数のピクセルグループ(例えば、5×5ピクセルグループ)からなる正方形のメッシュによって、左右の肺の領域が、テクスチャパタンの夫々の種類に分類されている。しかしながら、前述したように、所定の大きさの判定ウィンドを、ピクセル単位で左右上下方向にシフトさせることにより、ピクセル単位で特徴量の分布を算出することも可能である。この場合、テクスチャパタンの種類の分布を、ピクセル単位の滑らかさで求めることも可能である。 In the example shown in FIG. 7, a square mesh of pixel groups (eg, 5×5 pixel groups) classifies the left and right lung regions into respective types of texture patterns. However, as described above, it is also possible to calculate the distribution of the feature quantity in pixel units by shifting the determination window of a predetermined size in the horizontal and vertical directions in pixel units. In this case, it is also possible to obtain the distribution of types of texture patterns in terms of pixel-by-pixel smoothness.

図3に戻り、ステップST106では、必要に応じて第1画像と第2画像との位置合わせを行った後、第1画像と第2画像の互いに対応する局所領域における、テクスチャパタンの種類の変化から、疾患状態の変化の方向を推定する。 Returning to FIG. 3, in step ST106, the first image and the second image are aligned as necessary, and then the texture pattern changes in the corresponding local regions of the first image and the second image. , the direction of change in disease state is estimated.

ここで、「疾患状態の変化の方向を推定する」とは、疾患状態、即ち、疾患部の病状が、a)回復方向、b)増悪方向、及び、c)変化なし、の少なくともいずれかであることを推定することである。例えば、テクスチャパタンの種類の遷移と、疾患状態の変化の方向(即ち、当該疾患部が、回復方向にあるのか、増悪方向にあるのか、或いは、変化が見られない、のいずれかの方向)とが関連付けられたルックアップテーブル31を参照することにより、疾患状態の変化の方向を推定することができる。このルックアップテーブル31は、例えば、記憶回路30に保存されている。処理回路20の疾患状態変化推定機能23は、このルックアップテーブル31を記憶回路30から読み出して、ステップST106の処理に利用する。 Here, "estimating the direction of change in the disease state" means that the disease state, that is, the disease state of the diseased area, is in at least one of a) recovery direction, b) exacerbation direction, and c) no change. It is to presume that there is For example, the transition of the type of texture pattern and the direction of change in the disease state (that is, whether the diseased area is in the direction of recovery, in the direction of exacerbation, or in which direction no change is observed) By referring to the lookup table 31 associated with , the direction of change in disease state can be estimated. This lookup table 31 is stored in the storage circuit 30, for example. The disease state change estimating function 23 of the processing circuit 20 reads this lookup table 31 from the storage circuit 30 and uses it for the processing of step ST106.

図8の上部に、上述した状態変化方向の推定用のルックアップテーブル31の一例を示す。また、図8の下部に、疾患状態の変化の方向と、テクスチャパタンの種類の遷移を示している。 An example of the lookup table 31 for estimating the state change direction is shown in the upper portion of FIG. In addition, the direction of change in the disease state and the transition of texture pattern types are shown in the lower part of FIG.

図8の下部の図は、患部のテクスチャパタンの種類が、「A」から「B」へ、「B」から「C」へ、「C」から「D」へと遷移するにつれて、疾患状態が、正常な状態から症状が重くなる方向へ(即ち、増悪方向へ)変化することを示している。また、逆に、図8の下部の図は、患部のテクスチャパタンの種類が、「D」から「C」へ、「C」から「B」へ、「B」から「A」へと遷移するにつれて、疾患状態が、症状が重い状態から正常な状態へ(即ち、回復方向へ)変化することを示している。 The diagram at the bottom of FIG. 8 shows that as the type of texture pattern of the affected area transitions from 'A' to 'B', from 'B' to 'C', and from 'C' to 'D', the disease state changes. , indicates a change from a normal state to a direction in which symptoms become severe (that is, to aggravation). Conversely, in the diagram at the bottom of FIG. 8, the type of texture pattern of the affected area transitions from 'D' to 'C', from 'C' to 'B', and from 'B' to 'A'. As the disease progresses, the disease state changes from a severe state to a normal state (that is, toward recovery).

図8の下部に示す疾患状態の変化の方向とテクスチャパタンの種類の遷移との関係は、従来からの、多数の医用画像の蓄積と、当該医用画像に基づく、医師による当該疾患の診断結果とその経過情報の蓄積等のデータベースから取得することができる。 The relationship between the direction of change in the disease state and the transition of texture pattern types shown in the lower part of FIG. It can be acquired from a database such as accumulation of progress information.

図8の上部のルックアップテーブルは、図8の下部に示す疾患状態の変化の方向とテクスチャパタンの種類の遷移との関係から生成することができる。 The lookup table in the upper part of FIG. 8 can be generated from the relationship between the direction of change in the disease state and the transition of texture pattern type shown in the lower part of FIG.

例えば、図8のルックアップテーブルでは、ある被検体の検査1で撮像された画像(第1画像)のテクスチャパタンの種類「A」、「B」、「C」、「D」と、同一被検体の検査1よりも後に行なわれた検査2で撮像された画像(第2画像)のテクスチャパタンの種類「A」、「B」、「C」、「D」とが、疾患状態の変化を示す3つの指標(即ち、「変化なし」、「増悪」及び「回復」の3つ指標)によって、互いに関連付けられている。 For example, in the lookup table of FIG. Types "A", "B", "C", and "D" of the texture patterns of the image (second image) captured in the examination 2 performed after the examination 1 of the specimen indicate changes in the disease state. They are related to each other by the three indicators shown (ie "no change", "worsening" and "recovery").

このルックアップテーブルを参照することにより、第1画像及び第2画像の互いに対応する局所領域におけるテクスチャパタンの種類の変化から、当該局所領域における被検体の疾患状態の変化の方向が、a)回復方向、b)増悪方向、及び、c)変化なし、の少なくともいずれかであることを推定することができる。例えば、第1画像において、テクスチャパタンの種類が「C」であった局所領域が、第2画像において、テクスチャパタンの種類「A」又は「B」に変化した場合は、当該局所領域は回復方向にあると推定される一方、テクスチャパタンの種類「D」に変化した場合は、当該局所領域は増悪方向にあると推定される。 By referring to this lookup table, the direction of change in the disease state of the subject in the local region can be a) recovered from the change in the type of texture pattern in the local region corresponding to each other in the first image and the second image. direction, b) direction of exacerbation, and/or c) no change. For example, when a local region whose texture pattern type is “C” in the first image changes to texture pattern type “A” or “B” in the second image, the local region is restored. On the other hand, if the texture pattern changes to type "D", it is estimated that the local region is in the direction of aggravation.

なお、前述したように、びまん性肺疾患は複数の疾患原因を有することが知られており、疾患原因毎に、テクスチャパタンの種類の遷移と、疾患状態の変化の方向との関係が異なる可能性がある。そこで、ある特定の疾患原因(例えば、特発性間質性肺炎)によるびまん性肺疾患に対応するものであることを示すために、図8に示すルックアップテーブルには、疾患原因を特定するための付帯情報(図8の例では、疾患原因(ア))が関連付けられている。 As described above, diffuse lung disease is known to have multiple disease causes, and the relationship between the transition of the texture pattern type and the direction of change in the disease state may differ for each disease cause. have a nature. Therefore, in order to show that it corresponds to diffuse lung disease caused by a specific disease cause (for example, idiopathic interstitial pneumonia), the lookup table shown in FIG. (Cause of disease (a) in the example of FIG. 8) is associated.

また、図8のルックアップテーブルでは、「変化なし」、「増悪」及び「回復」の3つの指標の夫々に対して、3つの記号「0」、「+」及び「-」のいずれかを併記している。これら3つの記号「0」、「+」及び「-」は、図9に例示する「疾患状態変化マップ」との対応付けを判り易く説明するためのものであり、ルックアップテーブル自体に、必ずしもこれら3つの記号「0」、「+」及び「-」の情報を含ませる必要はない。 In addition, in the lookup table of FIG. 8, one of the three symbols "0", "+" and "-" is assigned to each of the three indicators of "no change", "exacerbation" and "recovery". It is written together. These three symbols "0", "+" and "-" are for easy understanding of the correspondence with the "disease state change map" illustrated in FIG. It is not necessary to include the information of these three symbols '0', '+' and '-'.

図3に戻り、ステップST107では、局所領域における疾患状態の変化を描出した疾患状態変化マップを生成する。ステップST107の処理は、図2の疾患状態変化マップ生成機能24に対応する処理である。 Returning to FIG. 3, in step ST107, a disease state change map that depicts changes in disease state in local regions is generated. The process of step ST107 is a process corresponding to the disease state change map generation function 24 of FIG.

図9は、疾患状態変化マップの一例を示す図である。図9に示す疾患状態変化マップは、「A」、「B」、「C」、「D」等のテクスチャパタンの種類に分類された後の2つの画像、即ち、図7に示す第1画像及び第2画像と、図8に示すルックアップテーブルに基づいて生成されたものである。 FIG. 9 is a diagram showing an example of a disease state change map. The disease state change map shown in FIG. 9 is divided into two images after being classified into types of texture patterns such as "A", "B", "C", and "D", that is, the first image shown in FIG. and the second image and the lookup table shown in FIG.

図9において、「+」の記号で描出された局所領域は、検査1での撮像日から検査2の撮像日の期間に増悪したと推定される局所領域を示しており、「-」の記号で描出された局所領域は、逆に、検査1での撮像日から検査2の撮像日の期間に回復したと推定される局所領域を示している。一方、「0」の記号で描出された局所領域は、検査1での撮像日から検査2の撮像日の期間に、疾患状態が変化していないと推定される局所領域を示している。 In FIG. 9 , the local regions drawn with the “+” symbol indicate local regions that are presumed to have deteriorated during the period from the imaging date of Examination 1 to the imaging date of Examination 2, and the “−” symbol Conversely, the local region depicted in ( ) indicates a local region that is estimated to have recovered during the period from the imaging date of Examination 1 to the imaging date of Examination 2 . On the other hand, the local regions drawn with the symbol “0” indicate local regions in which the disease state is estimated to have not changed during the period from the imaging date of Examination 1 to the imaging date of Examination 2 .

疾患状態変化マップの解像度に関しても、図7に示したテクスチャパタンの種類分類後の第1画像及び第2画像と同様に、ピクセル単位の解像度で描出してもよいし、或いは、2ピクセル以上から構成されるピクセルグループ単位の解像度で描出してもよい。 As for the resolution of the disease state change map, like the first and second images after texture pattern type classification shown in FIG. It may be rendered at a resolution per configured pixel group.

また、図9に例示した疾患状態変化マップでは、疾患状態の変化の方向を、「+」、「-」、「0」等の異なる記号で識別しているが、これに限定されるものではない。例えば、疾患状態の変化の方向を、異なる色、異なる濃度、異なる数字、及び、異なる記号の少なくとも1つを含む異なる態様によって、識別可能に描出することにより、疾患状態変化マップを生成することができる。 In addition, in the disease state change map illustrated in FIG. 9, the direction of change in disease state is identified by different symbols such as "+", "-", and "0", but it is not limited to this. do not have. For example, a disease state change map can be generated by identifiably delineating the direction of change in disease state by different aspects including at least one of different colors, different densities, different numbers, and different symbols. can.

生成された疾患状態変化マップは、ステップST108で、本医用画像処理装置100が具備するディスプレイ50に表示される。或いは、生成された疾患状態変化マップを、ネットワーク500を介してX線CT装置511等のモダリティ510に送信し、モダリティ510が有するディスプレイに表示させてもよい。 The generated disease state change map is displayed on the display 50 provided in the medical image processing apparatus 100 in step ST108. Alternatively, the generated disease state change map may be transmitted to the modality 510 such as the X-ray CT apparatus 511 via the network 500 and displayed on the display of the modality 510 .

以上説明してきた第1の実施形態の医用画像処理装置100によれば、肺等の組織の局所的な領域が、回復方向にあるのか、或いは、増悪方向にあるのかといった、組織の局所的な領域における疾患状態の変化を容易に把握することができる。 According to the medical image processing apparatus 100 of the first embodiment described above, the local region of the tissue such as the lung is in the direction of recovery or in the direction of deterioration. Changes in disease status in the area can be easily grasped.

(第1の実施形態の変形例)
図10は、第1の実施形態の変形例に係る医用画像処理装置100の動作例を示すフローチャートである。第1の実施形態との相違点はステップST200の処理であり、それ以外の処理は第1の実施形態と同じである。
(Modification of the first embodiment)
FIG. 10 is a flow chart showing an operation example of the medical image processing apparatus 100 according to the modification of the first embodiment. The difference from the first embodiment is the processing of step ST200, and other processing is the same as that of the first embodiment.

ステップST200では、第1画像と第2画像の互いに対応する局所領域におけるテクスチャパタンの種類の変化から、疾患状態の変化の方向だけでなく、疾患状態の変化の速度をさらに推定する。即ち、該当する組織の疾患が、徐々に増悪しているのか、急激に増悪しているのかといった増悪速度や、逆に、該当する組織の疾患が、徐々に回復しているのか、急激に回復しているのかといった回復速度を推定する。 In step ST200, not only the direction of change in the disease state but also the speed of change in the disease state are further estimated from the change in texture pattern types in the local regions corresponding to each other in the first image and the second image. That is, the rate of exacerbation, such as whether the disease in the relevant tissue is gradually exacerbating or rapidly exacerbating, and conversely, whether the disease in the relevant tissue is gradually recovering or rapidly recovering. Estimate the recovery speed, such as whether or not

第1の実施形態の変形例では、疾患状態の変化の速度を推定するために、状態変化方向の推定用のルックアップテーブル(図8)に変化速度に関する情報を付加したルックアップテーブル(図11)を用いる。 In the modification of the first embodiment, in order to estimate the rate of change in the disease state, a lookup table (FIG. 11) obtained by adding information on the change rate to the lookup table (FIG. 8) for estimating the state change direction. ) is used.

図11に示すルックアップテーブルでは、例えば、検査1の第1画像におけるテクスチャパタンの種類「A」が、第2画像において、種類「A」のままの場合は「変化なし」、種類「B」に遷移した場合は「増悪」方向でかつ増悪速度は「小」であると判定し、種類「C」に遷移した場合は「増悪」方向でかつ増悪速度は「中」であると判定し、種類「D」に遷移した場合は「増悪」方向でかつ増悪速度は「大」であると判定する。 In the lookup table shown in FIG. 11, for example, if the texture pattern type "A" in the first image of the inspection 1 remains as the type "A" in the second image, "no change", type "B" If it transitions to type "C", it is determined that it is in the direction of "exacerbation" and the rate of exacerbation is "small", and if it transitions to type "C", it is determined that it is in the direction of "exacerbation" and the rate of exacerbation is "medium", In the case of transition to type "D", it is determined that the direction is "aggravation" and the rate of aggravation is "high".

また、例えば、検査1の第1画像におけるテクスチャパタンの種類「D」が、第2画像において、種類「D」のままの場合は「変化なし」、種類「C」に遷移した場合は「回復」方向でかつ回復速度は「小」であると判定し、種類「B」に遷移した場合は「回復」方向でかつ回復速度は「中」であると判定し、種類「A」に遷移した場合は「回復」方向でかつ回復速度は「大」であると判定する。 Further, for example, if the texture pattern type "D" in the first image of the examination 1 remains as the type "D" in the second image, "no change", and if it transitions to the type "C", "recovery direction and the recovery speed is "small", and when the transition to type "B" is made, it is determined that the direction is "recovery" and the recovery speed is "medium", and the transition is made to type "A". In the case, it is determined that the direction is "recovery" and the recovery speed is "high".

このように、図11に示すルックアップテーブルにおける疾患状態の変化の速度は、図11の下部に示すテクスチャパタンの種類の互いの遷移距離に基づいて定められている。 Thus, the rate of disease state change in the lookup table shown in FIG. 11 is determined based on the transition distance between the types of texture patterns shown at the bottom of FIG.

なお、図11に示すルックアップテーブルでは、増悪方向の速度を、小さい方から大きい方の順に、「+1」、「+2」、「+3」の正の符号の数字で表し、回復方向の速度を、小さい方から大きい方の順に、「-1」、「-2」、「-3」の負の符号の数字で表している。 In the lookup table shown in FIG. 11, the velocity in the direction of exacerbation is represented by numbers with positive signs "+1", "+2", and "+3" in order from the smallest to the largest, and the velocity in the recovery direction is , in order from the smallest to the largest, represented by numbers with negative signs “-1”, “-2”, and “-3”.

図9に示す疾患状態変化マップにおける「+」、「-」、「0」といった記号を、上記の「+1」、「+2」、「+3」、「-1」、「-2」、「-3」及び「0」のような符号付数字によって置き換えることによって、疾患状態の変化の方向に加えて、変化の速度も描出された疾患状態変化マップを生成することができる。 The symbols such as "+", "-" and "0" in the disease state change map shown in FIG. By substituting signed numbers such as 3' and '0', a disease state change map can be generated that depicts the rate of change in addition to the direction of change in disease state.

図12は、記号や数字以外の識別情報を用いて、疾患状態の変化の方向及び速度を描出した疾患状態変化マップの一例を示す図である。図12に示す疾患状態変化マップでは、疾患状態の変化の方向と速度を、ハッチングのパタンの種類とハッチングの濃淡で描出している。 FIG. 12 is a diagram showing an example of a disease state change map that depicts the direction and speed of disease state change using identification information other than symbols and numbers. In the disease state change map shown in FIG. 12, the direction and speed of change in the disease state are depicted by the type of hatching pattern and the shade of hatching.

第1の実施形態の変形例によれば、「増悪」、「回復」、「変化なし」といった疾患状態の変化の方向に加えて、増悪速度や回復速度が疾患状態変化マップに描出されるため、客観的で精度の高い診断が可能となる。 According to the modified example of the first embodiment, in addition to the direction of change in the disease state such as “aggravation”, “recovery”, and “no change”, the exacerbation speed and recovery speed are depicted on the disease state change map. , an objective and highly accurate diagnosis is possible.

なお、上記の説明では、増悪速度や回復速度等の疾患状態変化の速度を、テクスチャパタンの種類の互いの遷移距離に基づいて求めたが、検査1における第1画像の撮像日と、検査2における第2画像の撮像日との間の期間の長さに基づいて、疾患状態変化の速度を推定することもできる。さらに、テクスチャパタンの種類の互いの遷移距離と、検査1における第1画像の撮像日と、検査2における第2画像の撮像日との間の期間の長さの双方に基づいて、疾患状態変化の速度を推定することもできる。 In the above description, the rate of disease state change, such as exacerbation rate and recovery rate, was obtained based on the mutual transition distance between texture pattern types. The rate of disease state change can also be estimated based on the length of time between the capture date of the second image at . Furthermore, based on both the transition distance of texture pattern types from each other and the length of the period between the capture date of the first image in exam 1 and the capture date of the second image in exam 2, the disease state change It is also possible to estimate the velocity of

例えば、第1画像の撮像日と第2画像の撮像日との間隔が3カ月であったときに、検査1の第1画像におけるテクスチャパタンの種類「A」が種類「B」に遷移した場合は「増悪」方向でかつ増悪速度は「小」であると判定するものの、第1画像の撮像日と第2画像の撮像日との間隔が1カ月であったときには、検査1の第1画像におけるテクスチャパタンの種類「A」が種類「B」に遷移した場合であっても、増悪速度は「小」ではなく、「中」又は「大」であると判定する。 For example, when the interval between the imaging date of the first image and the imaging date of the second image is three months, the texture pattern type “A” in the first image of the examination 1 transitions to the type “B”. is in the direction of "exacerbation" and the rate of exacerbation is "small", but when the interval between the imaging date of the first image and the imaging date of the second image is one month, the first image of examination 1 Even if the type "A" of the texture pattern in Fig. 2 is changed to the type "B", it is determined that the exacerbation speed is not "low" but "medium" or "large".

(第2の実施形態)
図13は、第2の実施形態の医用画像処理装置100の動作例を示すフローチャートである。前述したように、びまん性肺疾患は複数の疾患原因を有することが知られており、疾患原因毎に、テクスチャパタンの種類の遷移と、疾患状態の変化の方向との関係が異なる可能性がある。そこで、第2の実施形態の医用画像処理装置100では、疾患原因毎に状態変化方向推定用のルックアップテーブルを保有する構成としている。
(Second embodiment)
FIG. 13 is a flow chart showing an operation example of the medical image processing apparatus 100 of the second embodiment. As described above, diffuse lung disease is known to have multiple disease causes, and the relationship between the transition of texture pattern types and the direction of change in disease state may differ for each disease cause. be. Therefore, the medical image processing apparatus 100 of the second embodiment has a lookup table for estimating the state change direction for each disease cause.

第2の実施形態では、図13のステップST300と、ステップST301が第1の実施形態と異なっている。ステップST300では、医師等のユーザによって指定された疾患原因を取得する。例えば、マウスやキーボード等の入力デバイス40を用いて、ユーザが、びまん性肺疾患の疾患原因として、疾患原因(ア)(例えば、特発性間質性肺炎)、疾患原因(イ)(例えば、膠原病)、疾患原因(ウ)(例えば、過敏性肺炎)、疾患原因(エ)(例えば、じん肺・職業性肺疾患)等を指定し、処理回路20の疾患状態変化推定機能23が、指定された疾患原因を取得する。 In the second embodiment, steps ST300 and ST301 in FIG. 13 are different from the first embodiment. In step ST300, the disease cause designated by a user such as a doctor is obtained. For example, using the input device 40 such as a mouse or a keyboard, the user can identify the cause of diffuse lung disease as disease cause (a) (e.g., idiopathic interstitial pneumonia), disease cause (b) (e.g., Collagen disease), disease cause (c) (for example, hypersensitivity pneumonitis), disease cause (d) (for example, pneumoconiosis, occupational lung disease), etc., and the disease state change estimation function 23 of the processing circuit 20 specifies Get the cause of the disease.

ステップST301では、第1画像と第2画像の互いに対応する局所領域におけるテクスチャパタンの種類の変化と、指定された疾患原因に対応する状態変化方向推定用のルックアップテーブルとから、疾患状態の変化の方向を推定する。 In step ST301, a change in disease state is determined from a change in texture pattern type in local regions corresponding to each other in the first image and the second image, and a lookup table for estimating the state change direction corresponding to the specified disease cause. Estimate the direction of

図14は、疾患原因毎に異なる4つの状態変化方向推定用ルックアップテーブルの例を示している。図14の左上の疾患原因(ア)に対応するルックアップテーブルから判るように、疾患原因(ア)に対応する疾患のテクスチャパタンの種類として、「A」、「B」、「C」、「D」を想定している。 FIG. 14 shows an example of four lookup tables for estimating the direction of state change that are different for each disease cause. As can be seen from the lookup table corresponding to the cause of disease (A) in the upper left of FIG. I'm assuming D.

一方、図14の左下の疾患原因(イ)に対応するルックアップテーブルから判るように、疾患原因(イ)に対応する疾患のテクスチャパタンの種類としては、「A」、「B」、「E」、「F」を想定している。また、図14の右側の各ルックアップテーブルから判るように、疾患原因(ウ)に対応する疾患のテクスチャパタンの種類としては、「A」、「B」、「H」、「J」を想定し、疾患原因(エ)に対応する疾患のテクスチャパタンの種類としては、「A」、「B」、「K」、「F」を想定している。 On the other hand, as can be seen from the lookup table corresponding to disease cause (b) in the lower left of FIG. ”, and “F”. Also, as can be seen from each lookup table on the right side of FIG. 14, "A", "B", "H", and "J" are assumed as the types of disease texture patterns corresponding to disease cause (c). As types of disease texture patterns corresponding to disease cause (d), "A", "B", "K", and "F" are assumed.

このように、疾患原因の種類によって、想定されるテクスチャパタンの種類も異なってくると考えられている。したがって、テクスチャパタンの種類の変化から、疾患状態の変化の方向や速度を推定する際には、疾患原因の種類を考慮するのが好ましい。 In this way, it is believed that the types of assumed texture patterns differ depending on the types of disease causes. Therefore, when estimating the direction and speed of change in the disease state from the change in the type of texture pattern, it is preferable to consider the type of cause of the disease.

第2の実施形態の医用画像処理装置100では、疾患原因別の複数のルックアップテーブルの中から、医師などのユーザによって指定された疾患原因に対応する疾患原因別のルックアップテーブルを参照することにより、被検体の疾患状態の変化の方向を推定している。この結果、高精度で、疾患状態変化の方向を推定することができ、信頼性の高い診断に資することが可能となる。 In the medical image processing apparatus 100 of the second embodiment, a lookup table for each cause of disease corresponding to a cause of disease specified by a user such as a doctor is referred from among a plurality of lookup tables for each cause of disease. estimates the direction of change in the subject's disease state. As a result, the direction of change in disease state can be estimated with high accuracy, which contributes to highly reliable diagnosis.

(第2の実施形態の変形例)
図15は、第2の実施形態の変形例に係る医用画像処理装置100の動作例を示すフローチャートである。第2の実施形態の変形例の動作では、第2の実施形態の処理(図13に示すフローチャート)に対して、更に、ステップST400を付加した処理が行われている。ステップST400では、テクスチャパタンの種類の変化から、疾患原因を推定する。
(Modification of Second Embodiment)
FIG. 15 is a flow chart showing an operation example of the medical image processing apparatus 100 according to the modification of the second embodiment. In the operation of the modified example of the second embodiment, the process in which step ST400 is added to the process of the second embodiment (the flow chart shown in FIG. 13) is performed. In step ST400, the cause of the disease is estimated from the change in texture pattern type.

図16は、ステップST400の処理の概念を説明する図である。図16の中央部には、疾患原因推定用のルックアップテーブルを例示している。このルックアップテーブルは、図14に示す4つのルックアップテーブルと実質的に同じものであり、相互の変換可能である。 FIG. 16 is a diagram explaining the concept of the process of step ST400. The central part of FIG. 16 illustrates a lookup table for disease cause estimation. This lookup table is substantially the same as the four lookup tables shown in FIG. 14, and is mutually convertible.

前述したように、疾患の進行によって変化しうるテクスチャパタンの種類は、疾患原因によって異なることがあり、疾患の進行によって変化しうるテクスチャパタンの種類の全てが必ずしも同一というわけではない。例えば、図16の疾患原因推定用のルックアップテーブルに示すように、テクスチャパタンの種類「A」から「B」への変化は、4つの疾患原因(ア)乃至疾患原因(エ)において共通に生じ得るものの、テクスチャパタンの種類「B」から「H」への変化は、疾患原因(ウ)のみによって生じ得る。 As described above, the types of texture patterns that may change with disease progression may differ depending on the cause of the disease, and not all types of texture patterns that may change with disease progression are the same. For example, as shown in the lookup table for disease cause estimation in FIG. Although it can occur, the change from texture pattern type 'B' to 'H' can only be caused by disease cause (c).

そこで、第2の実施形態の変形例では、ステップST301の処理に使用されるテクスチャパタンの変化の方向と、疾患原因推定用のルックアップテーブルとから、疾患原因を推定する。例えば、図16の左部に示すように、被検体(例えば、患者 甲)のテクスチャパタンの変化が、ある局所領域において種類「A」から種類「B」へ変化し、他の局所領域において種類「B」から「種類H」に変化したとする。この場合、ステップST400の処理は、患者 甲の疾患原因は、疾患原因(ウ)である、と推定する。 Therefore, in the modified example of the second embodiment, the cause of disease is estimated from the direction of change of the texture pattern used in the process of step ST301 and the lookup table for estimating the cause of disease. For example, as shown in the left part of FIG. 16, the change in the texture pattern of the subject (for example, the patient's back) changes from type "A" to type "B" in a certain local region, and changes to type "B" in another local region. Suppose that it changes from "B" to "Type H". In this case, the process of step ST400 presumes that the disease cause of patient A is disease cause (c).

このように、第2の実施形態の変形例では、テクスチャパタンの種類の変化から、疾患原因を推定することが可能となるため、診断上、より有用な情報をユーザに提供することが可能となる。 As described above, in the modified example of the second embodiment, it is possible to estimate the cause of a disease from the change in the type of texture pattern, so that it is possible to provide the user with more useful diagnostic information. Become.

なお、ここまで、図8、図11、図14、及び、図16に、いくつかのルックアップテーブルを例示したが、これらのルックアップテーブルは、ユーザによって、その内容を作成し、編集し、或いは、変更することが可能となるように構成されている。 8, 11, 14, and 16 have exemplified some lookup tables, but the contents of these lookup tables are created, edited, and edited by the user. Alternatively, it is configured to be changeable.

(その他の実施形態)
ここまでは、主に、複数の画像(例えば、前述した第1画像と第2画像)の夫々の領域の画素値に基づいてテクスチャ解析を行うことにより、夫々の領域を複数のテクスチャパタンのいずれかに分類する実施形態を説明してきた。しかしながら、本発明の実施形態はこれらに限定されるものではなく、例えば、a)複数の画像の夫々の領域の画素値に基づいて被検体の組織性状の解析を行うことでその解析結果から被検体の組織性状を複数の組織性状クラスに分類し、b)分類された組織性状クラスを、複数の画像の夫々の領域へ割り当て、c)複数の画像の夫々の対応領域における組織性状クラスの変化から、被検体の疾患状態の変化を推定する、実施形態を含む。
(Other embodiments)
Up to this point, the texture analysis is mainly performed based on the pixel values of each region of a plurality of images (for example, the first image and the second image described above), so that each region is selected from one of a plurality of texture patterns. Embodiments have been described that classify However, embodiments of the present invention are not limited to these. Classifying the tissue properties of the specimen into a plurality of tissue properties classes, b) assigning the classified tissue properties classes to respective regions of the plurality of images, and c) changing the tissue properties class in respective corresponding regions of the plurality of images. estimating a change in a subject's disease state from

例えば、被検体の組織性状の解析の例として、上述したテクスチャ解析の他、TIC(Time-Intensity Curve)解析(例えば、造影濃度の時間変化の解析)が挙げられる。この実施形態では、TIC解析を行い、その結果から得られるTICのカーブを複数のタイプ、すなわち組織性状クラスに分類し、TICカーブのタイプの変化から被検体の疾患状態の変化を推定する。例えば正常な肝臓内に肝細胞癌がある被検体に対して造影CT撮影を行った場合、正常な組織のTICカーブに比べ早期相(動脈相)のカーブ立ち上がりが早く、また後期相(平衡相)においてはWash outしカーブが立ち下がる。この立ち上がり・立ち下がりの程度・時期を元に組織をパタン分類することで、各組織が正常組織から癌のパタンに近づいている(増悪している)のか、あるいはその逆なのかの遷移を推定することができる。 For example, as an example of analysis of tissue properties of a subject, in addition to the texture analysis described above, there is TIC (Time-Intensity Curve) analysis (for example, analysis of temporal change in contrast density). In this embodiment, TIC analysis is performed, TIC curves obtained from the analysis are classified into a plurality of types, ie, tissue characterization classes, and changes in the disease state of the subject are estimated from changes in TIC curve types. For example, when contrast-enhanced CT is performed on a subject with hepatocellular carcinoma in a normal liver, the TIC curve in the early phase (arterial phase) rises faster than the TIC curve in normal tissue, and the TIC curve in the late phase (equilibrium phase) rises earlier. ), wash out and the curve falls. By classifying the tissue pattern based on the degree and timing of this rise and fall, it is possible to estimate the transition whether each tissue is approaching (aggravating) the pattern of cancer from normal tissue or vice versa. can do.

また例えば、被検体の組織性状の解析の例として、画像の領域内の輝度値を解析する例が挙げられる。この実施形態では、輝度値の解析によって、例えば、輝度値のヒストグラムを算出し、ヒストグラムの形状を複数のタイプ、すなわち組織性状クラスに分類する。例えば、ヒストグラム形状のピークの鋭さを表わす尖度、ヒストグラムのピークの数、ヒストグラムのピークに対応する輝度値等のパラメータを用いてヒストグラムの形状を複数のタイプに分類し、ヒストグラムの形状のタイプの変化から被検体の疾患状態の変化を推定する。例えば肺結節を持つ被検体に対してCT撮影を行った場合、肺結節となる領域では正常な領域と組織の密度が異なるため、CT撮影を行った場合の輝度値分布、すなわちヒストグラムが異なる。先の結節の例では正常組織に比べ低濃度部分の割合が減少する一方で高濃度部分の割合が増加する。このヒストグラムの形状を元に組織をパタン分類することで、各組織が正常組織か結節のパタンに近づいている(増悪している)のか否かの変化を推定することができる。 Further, for example, an example of analysis of the tissue characterization of a subject includes an example of analyzing luminance values within an image region. In this embodiment, by analyzing the luminance values, for example, a histogram of luminance values is calculated and the shape of the histogram is classified into a plurality of types, ie, tissue attribute classes. For example, the histogram shape can be classified into multiple types using parameters such as kurtosis, which represents the sharpness of the histogram peaks, the number of histogram peaks, and the luminance value corresponding to the histogram peaks. A change in the subject's disease state is inferred from the change. For example, when CT imaging is performed on a subject having a pulmonary nodule, the luminance value distribution, that is, the histogram, is different in the area of the pulmonary nodule because the tissue density is different from that in the normal area. In the previous nodule example, the proportion of the low-density portion decreases while the proportion of the high-density portion increases compared to normal tissue. By classifying the tissue pattern based on the shape of this histogram, it is possible to estimate the change in whether each tissue is approaching (aggravating) the pattern of normal tissue or nodule.

また例えば、被検体の組織性状の解析の例として、画像の領域内の複数種類の指標値を解析する例が挙げられる。複数種類の指標値は、例えば、領域内の輝度値と機能指標値である。また、機能指標値は、例えば、壁運動解析から取得する、或いは、心筋シンチグラフィ等の心臓核医学検査から取得する、組織の機能を示す指標値である。この実施形態では、例えば、輝度値と機能指標値の2つの値から、領域を複数のグループに分類する。例えば、輝度値が高くて機能指標値も高いグループを「グループ1」に、輝度値が高くて機能指標値が低いグループを「グループ2」に、輝度値が低く機能指標値も低いグループを「グループ3」に分類し、そして、分類したグループの変化から被検体の疾患状態の変化を推定する。 Further, for example, as an example of analysis of tissue properties of a subject, there is an example of analyzing a plurality of types of index values within an image region. The multiple types of index values are, for example, luminance values and function index values in the region. Also, the function index value is an index value indicating the function of a tissue, for example, obtained from wall motion analysis or from cardiac nuclear medicine examination such as myocardial scintigraphy. In this embodiment, for example, regions are classified into a plurality of groups based on two values, a luminance value and a function index value. For example, a group with a high luminance value and a high function index value is designated as "group 1", a group with a high luminance value and a low function index value is designated as "group 2", and a group with a low luminance value and a low function index value is designated as "group 1". Group 3”, and the change in the subject's disease state is estimated from the change in the classified group.

以上説明した少なくとも1つの実施形態によれば、医用画像から、組織の局所的な領域における疾患状態の変化を容易に把握できるようにすることができる。 According to at least one embodiment described above, it is possible to easily comprehend a change in disease state in a localized region of tissue from a medical image.

ここまで説明してきた各実施形態や変形例では、図2に例示した各機能21~25を、1つの医用画像処理装置100で実現するものとして説明してきたが、これに限定されるものではない。例えば、複数の医用画像処理装置100がネットワークによって連接された医用画像処理システム(図示せず)によって、図2に例示した各機能21~25を分散処理するようにしてもよい。例えば、第1及び第2の医用画像処理装置100A、100Bで医用画像処理システムを構成し、図2に示した各機能21~25のうち、一部の機能を第1の医用画像処理装置100Aで処理し、残りの機能を第2の医用画像処理装置100Bで処理するようにしてもよい。医用画像処理システム内の複数の医用画像処理装置100の夫々はネットワークを介して互いに連接されているため、各医用画像処理装置100を異なる場所に設置することができる。 In the embodiments and modifications described so far, the functions 21 to 25 illustrated in FIG. 2 have been described as being realized by one medical image processing apparatus 100, but the present invention is not limited to this. . For example, a medical image processing system (not shown) in which a plurality of medical image processing apparatuses 100 are connected via a network may perform distributed processing of the functions 21 to 25 illustrated in FIG. For example, the first and second medical image processing apparatuses 100A and 100B constitute a medical image processing system, and some of the functions 21 to 25 shown in FIG. , and the remaining functions may be processed by the second medical image processing apparatus 100B. Since the plurality of medical image processing apparatuses 100 in the medical image processing system are connected to each other via a network, each medical image processing apparatus 100 can be installed at different locations.

なお、各実施形態の記載における記憶回路、画像データ取得機能、テクスチャ解析機能、疾患状態変化推定機能、疾患状態変化マップ生成機能、及び、表示制御機能は、夫々、特許請求の範囲の記載における記憶部、取得部、解析部、推定部、生成部、及び、表示制御部の一例である。 Note that the storage circuit, image data acquisition function, texture analysis function, disease state change estimation function, disease state change map generation function, and display control function in the description of each embodiment are the storage circuits in the claims. It is an example of a unit, an acquisition unit, an analysis unit, an estimation unit, a generation unit, and a display control unit.

なお、本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 It should be noted that although several embodiments of the invention have been described, these embodiments are provided by way of example and are not intended to limit the scope of the invention. These novel embodiments can be implemented in various other forms, and various omissions, replacements, and modifications can be made without departing from the scope of the invention. These embodiments and modifications thereof are included in the scope and gist of the invention, and are included in the scope of the invention described in the claims and equivalents thereof.

10 入力インターフェース回路
20 処理回路
21 画像データ取得機能
22 テクスチャ解析機能
23 疾患状態変化推定機能
24 疾患状態変化マップ生成機能
25 表示制御機能
30 記憶回路
31 ルックアップテーブル
40 入力デバイス
50 ディスプレイ
100 医用画像処理装置
500 ネットワーク
511 X線CT装置
512 MRI装置
513 超音波診断装置
10 Input interface circuit 20 Processing circuit 21 Image data acquisition function 22 Texture analysis function 23 Disease state change estimation function 24 Disease state change map generation function 25 Display control function 30 Storage circuit 31 Lookup table 40 Input device 50 Display 100 Medical image processing apparatus 500 network 511 X-ray CT device 512 MRI device 513 ultrasonic diagnostic device

Claims (14)

同一被検体を撮像した画像であって、撮像時刻が異なる複数の画像を取得する取得部と、
前記複数の画像の夫々の領域の画素値に基づいて前記被検体の組織性状の解析を行うことで前記被検体の組織性状を複数の組織性状クラスに分類し、分類された前記組織性状クラスを、前記複数の画像の夫々の領域へ割り当てる解析部と、
前記複数の画像の夫々の対応領域における前記組織性状クラスの変化から、前記被検体の疾患状態の変化を推定する推定部と、を備え、
前記解析部は、前記複数の画像の夫々の領域の画素値に基づいてテクスチャ解析を行うことで、夫々の領域を複数のテクスチャパタンのいずれかに分類し、分類された前記テクスチャパタンを、前記複数の画像の夫々の領域に割り当て、
前記推定部は、前記複数の画像の夫々の対応領域における前記テクスチャパタンの変化から、前記対応領域における前記疾患状態の変化、及び前記疾患状態の変化速度を推定する、
医用画像処理装置。
an acquisition unit that acquires a plurality of images obtained by imaging the same subject at different imaging times;
By analyzing the tissue properties of the subject based on the pixel values of the respective regions of the plurality of images, the tissue properties of the subject are classified into a plurality of tissue property classes, and the classified tissue property classes are classified into , an analysis unit that allocates to each region of the plurality of images;
an estimating unit that estimates changes in the disease state of the subject from changes in the tissue attribute class in corresponding regions of the plurality of images ,
The analysis unit performs texture analysis based on pixel values of each region of the plurality of images, classifies each region into one of a plurality of texture patterns, and classifies the classified texture patterns as the assigned to each region of a plurality of images,
The estimating unit estimates the change in the disease state in the corresponding region and the rate of change in the disease state from the change in the texture pattern in the corresponding region of each of the plurality of images.
Medical image processing equipment.
前記複数の画像のうちのいずれかにおいて、前記対応領域ごとに、前記疾患状態の変化を識別可能とする画素値を割り当てたマップ画像を生成する生成部、を更に備える、
請求項1記載の医用画像処理装置。
a generating unit that generates a map image in any of the plurality of images in which a pixel value that enables identification of a change in the disease state is assigned to each of the corresponding regions;
The medical image processing apparatus according to claim 1 .
前記画像は、前記被検体の肺野の画像であって、
前記テクスチャパタンは、すりガラス状、網状、結節状、蜂巣状、及び浸潤影の少なくともいずれかを含む、
請求項1又は2に記載の医用画像処理装置。
The image is an image of the lung field of the subject,
The texture pattern includes at least one of ground glass, net, nodule, honeycomb, and infiltration,
The medical image processing apparatus according to claim 1 or 2 .
前記取得部は、第1の日時に撮像した第1画像と、前記第1の日時よりも後の第2の日時に撮像した第2画像とを取得し、
前記解析部は、前記第1画像及び第2画像の夫々の領域を、前記複数のテクスチャパタンの種類に分類し、
前記推定部は、前記第1画像及び第2画像の互いに対応する局所領域における、前記テクスチャパタンの種類の変化から、前記局所領域における前記被検体の疾患状態の変化の方向が、a)回復方向、b)増悪方向、及び、c)変化なし、のいずれかであることを推定する、
請求項1乃至3のいずれか1項に記載の医用画像処理装置。
The acquisition unit acquires a first image captured at a first date and time and a second image captured at a second date and time later than the first date and time,
The analysis unit classifies each region of the first image and the second image into types of the plurality of texture patterns,
The estimating unit determines, based on changes in types of texture patterns in local regions corresponding to each other in the first image and the second image, that a direction of change in the disease state of the subject in the local region is a) a recovery direction , b) direction of exacerbation, and c) no change,
The medical image processing apparatus according to any one of claims 1 to 3 .
前記推定部は、前記疾患状態の変化の方向を、ピクセル単位、又は、2ピクセル以上から構成されるピクセルグループ単位、で推定する、
請求項4に記載の医用画像処理装置。
The estimating unit estimates the direction of change in the disease state in units of pixels or in units of pixel groups composed of two or more pixels.
The medical image processing apparatus according to claim 4 .
ディスプレイと、
前記推定部で推定される前記疾患状態の変化の方向が、ピクセル単位、又は、2ピクセル以上から構成されるピクセルグループ単位で描出された、疾患状態変化マップ、を生成する生成部と、
前記疾患状態変化マップを前記ディスプレイに表示させる表示制御部と、
をさらに備える、
請求項4に記載の医用画像処理装置。
a display;
a generating unit for generating a disease state change map in which the direction of change in the disease state estimated by the estimating unit is drawn in units of pixels or in units of pixel groups composed of two or more pixels;
a display control unit for displaying the disease state change map on the display;
further comprising
The medical image processing apparatus according to claim 4 .
前記生成部は、前記疾患状態の変化の方向が、前記ピクセル単位、又は、前記ピクセルグループ単位ごとに、異なる色、異なる濃度、異なる数字、及び、異なる記号の少なくとも1つを含む異なる態様によって、識別可能に描出されるように、前記疾患状態変化マップを生成する、
請求項6に記載の医用画像処理装置。
wherein the direction of change in the disease state includes at least one of different colors, different densities, different numbers, and different symbols for each pixel unit or each pixel group unit; generating the disease state change map so that it is identifiably delineated;
The medical image processing apparatus according to claim 6 .
前記テクスチャパタンの種類と、前記疾患状態の進行の程度とが関連付けられたルックアップテーブルを記憶する記憶部、を更に備え、
前記推定部は、前記ルックアップテーブルを参照することにより、前記被検体の疾患状態の変化の方向を推定する、
請求項4乃至7のいずれか1項に記載の医用画像処理装置。
a storage unit that stores a lookup table in which the type of the texture pattern and the degree of progression of the disease state are associated;
The estimation unit estimates the direction of change in the disease state of the subject by referring to the lookup table.
The medical image processing apparatus according to any one of claims 4 to 7 .
同一被検体を撮像した画像であって、撮像時刻が異なる複数の画像を取得する取得部と、
前記複数の画像の夫々の領域の画素値に基づいて前記被検体の組織性状の解析を行うことで前記被検体の組織性状を複数の組織性状クラスに分類し、分類された前記組織性状クラスを、前記複数の画像の夫々の領域へ割り当てる解析部と、
前記複数の画像の夫々の対応領域における前記組織性状クラスの変化から、前記被検体の疾患状態の変化を推定する推定部と、を備え、
前記解析部は、前記複数の画像の夫々の領域の画素値に基づいてテクスチャ解析を行うことで、夫々の領域を複数のテクスチャパタンのいずれかに分類し、分類された前記テクスチャパタンを、前記複数の画像の夫々の領域に割り当て、
前記推定部は、前記複数の画像の夫々の対応領域における前記テクスチャパタンの変化から、前記対応領域における前記疾患状態の変化、及び前記疾患状態の変化速度を推定し、
前記推定部は、さらに、前記テクスチャパタンの種類と、前記疾患状態の進行の程度とが関連付けられたルックアップテーブルを参照することにより、回復方向における回復速度、及び、増悪方向における増悪速度、の少なくとも一方を更に推定する、
医用画像処理装置。
an acquisition unit that acquires a plurality of images obtained by imaging the same subject at different imaging times;
By analyzing the tissue properties of the subject based on the pixel values of the respective regions of the plurality of images, the tissue properties of the subject are classified into a plurality of tissue property classes, and the classified tissue property classes are classified into , an analysis unit that allocates to each region of the plurality of images;
an estimating unit that estimates changes in the disease state of the subject from changes in the tissue attribute class in corresponding regions of the plurality of images,
The analysis unit performs texture analysis based on pixel values of each region of the plurality of images, classifies each region into one of a plurality of texture patterns, and classifies the classified texture patterns as the assigned to each region of a plurality of images,
The estimating unit estimates a change in the disease state in the corresponding region and a change speed of the disease state from the change in the texture pattern in the corresponding region of each of the plurality of images,
The estimating unit further refers to a lookup table in which the type of texture pattern and the degree of progress of the disease state are associated to determine the speed of recovery in the direction of recovery and the speed of exacerbation in the direction of exacerbation. further estimate at least one
Medical image processing equipment.
同一被検体を撮像した画像であって、撮像時刻が異なる複数の画像を取得する取得部と、
前記複数の画像の夫々の領域の画素値に基づいてテクスチャ解析を行うことで、夫々の領域を複数のテクスチャパタンのいずれかに分類し、分類された前記テクスチャパタンを、前記複数の画像の夫々の領域に割り当てる解析部と、
前記複数の画像の夫々の対応領域における組織性状クラスの変化から、前記被検体の疾患状態の変化を推定する推定部と、
異なる疾患原因に夫々対応する疾患原因別のルックアップテーブルであって、疾患原因毎に、前記テクスチャパタンの種類と前記疾患状態の進行の程度とが関連付けられた複数のルックアップテーブルを記憶する記憶部と、を備え、
前記推定部は、疾患原因別の前記複数のルックアップテーブルの中から、ユーザによって指定された疾患原因に対応する前記疾患原因別のルックアップテーブルを参照することにより、前記被検体の疾患状態の変化の方向を推定する、
医用画像処理装置。
an acquisition unit that acquires a plurality of images obtained by imaging the same subject at different imaging times;
By performing texture analysis based on pixel values of respective regions of the plurality of images, each region is classified into one of a plurality of texture patterns, and the classified texture patterns are assigned to each of the plurality of images. an analysis unit that allocates to the region of
an estimating unit for estimating changes in the disease state of the subject from changes in tissue attribute classes in corresponding regions of each of the plurality of images;
A memory for storing a plurality of lookup tables that are disease cause-specific lookup tables respectively corresponding to different disease causes and in which the type of the texture pattern and the degree of progression of the disease state are associated for each disease cause. and
The estimating unit estimates the disease state of the subject by referring to the lookup table for each disease cause corresponding to the cause of disease specified by the user from among the plurality of lookup tables for each disease cause. estimating the direction of change,
Medical image processing equipment.
同一被検体を撮像した画像であって、撮像時刻が異なる複数の画像を取得する取得部と、
前記複数の画像の夫々の領域の画素値に基づいてテクスチャ解析を行うことで、夫々の領域を複数のテクスチャパタンのいずれかに分類し、分類された前記テクスチャパタンを、前記複数の画像の夫々の領域に割り当てる解析部と、
前記複数の画像の夫々の対応領域における組織性状クラスの変化から、前記被検体の疾患状態の変化を推定する推定部と、
異なる疾患原因に夫々対応する疾患原因別のルックアップテーブルであって、疾患原因毎に、前記テクスチャパタンの種類と前記疾患状態の進行の程度とが関連付けられた複数のルックアップテーブルを記憶する記憶部と、を備え
前記推定部は、疾患原因別の前記複数のルックアップテーブルの中から、ユーザによって指定された疾患原因に対応する前記疾患原因別のルックアップテーブルを参照することにより、前記被検体の疾患状態の変化の方向を推定し、
前記推定部は、前記複数の画像の互いに対応する局所領域における、前記テクスチャパタンの種類の変化から、前記被検体の疾患原因を更に推定する、
医用画像処理装置。
an acquisition unit that acquires a plurality of images obtained by imaging the same subject at different imaging times;
By performing texture analysis based on pixel values of respective regions of the plurality of images, each region is classified into one of a plurality of texture patterns, and the classified texture patterns are assigned to each of the plurality of images. an analysis unit that allocates to the region of
an estimating unit for estimating changes in the disease state of the subject from changes in tissue attribute classes in corresponding regions of each of the plurality of images;
A memory for storing a plurality of lookup tables that are disease cause-specific lookup tables respectively corresponding to different disease causes and in which the type of the texture pattern and the degree of progression of the disease state are associated for each disease cause. and
The estimating unit estimates the disease state of the subject by referring to the lookup table for each disease cause corresponding to the cause of disease specified by the user from among the plurality of lookup tables for each disease cause. Estimate the direction of change,
The estimating unit further estimates the cause of the disease of the subject from changes in the types of the texture patterns in the local regions corresponding to each other in the plurality of images .
Medical image processing equipment.
前記ルックアップテーブルは、ユーザによって、その内容を作成し、編集し、或いは、変更することが可能となるように構成されている、
請求項8乃至11のいずれか1項に記載の医用画像処理装置。
the lookup table is configured to allow its contents to be created, edited or changed by a user;
The medical image processing apparatus according to any one of claims 8 to 11 .
同一被検体を撮像した画像であって、撮像時刻が異なる複数の画像を取得する取得部と、
前記複数の画像の夫々の領域の画素値に基づいて前記被検体の組織性状の解析を行うことで前記被検体の組織性状を複数の組織性状クラスに分類し、分類された前記組織性状クラスを、前記複数の画像の夫々の領域へ割り当てる解析部と、
前記複数の画像の夫々の対応領域における前記組織性状クラスの変化から、前記被検体の疾患状態の変化を推定する推定部と、を備え、
前記解析部は、前記複数の画像の夫々の領域の画素値に基づいてテクスチャ解析を行うことで、夫々の領域を複数のテクスチャパタンのいずれかに分類し、分類された前記テクスチャパタンを、前記複数の画像の夫々の領域に割り当て、
前記推定部は、前記複数の画像の夫々の対応領域における前記テクスチャパタンの変化から、前記対応領域における前記疾患状態の変化、及び前記疾患状態の変化速度を推定する、
医用画像処理システム。
an acquisition unit that acquires a plurality of images obtained by imaging the same subject at different imaging times;
By analyzing the tissue properties of the subject based on the pixel values of the respective regions of the plurality of images, the tissue properties of the subject are classified into a plurality of tissue property classes, and the classified tissue property classes are classified into , an analysis unit that allocates to each region of the plurality of images;
an estimating unit that estimates changes in the disease state of the subject from changes in the tissue attribute class in corresponding regions of the plurality of images ,
The analysis unit performs texture analysis based on pixel values of each region of the plurality of images, classifies each region into one of a plurality of texture patterns, and classifies the classified texture patterns as the assigned to each region of a plurality of images,
The estimating unit estimates the change in the disease state in the corresponding region and the rate of change in the disease state from the change in the texture pattern in the corresponding region of each of the plurality of images.
Medical image processing system.
処理回路を備える医用画像処理装置の制御方法であって、
前記処理回路が、
同一被検体を撮像した画像であって、撮像時刻が異なる複数の画像を取得し、
前記複数の画像の夫々の領域の画素値に基づいて前記被検体の組織性状の解析を行うことで前記被検体の組織性状を複数の組織性状クラスに分類し、
分類された前記組織性状クラスを、前記複数の画像の夫々の領域へ割り当て、
前記複数の画像の夫々の対応領域における前記組織性状クラスの変化から、前記被検体の疾患状態の変化を推定し、
前記複数の画像の夫々の領域の画素値に基づいてテクスチャ解析を行うことで、夫々の領域を複数のテクスチャパタンのいずれかに分類し、分類された前記テクスチャパタンを、前記複数の画像の夫々の領域に割り当て、
前記複数の画像の夫々の対応領域における前記テクスチャパタンの変化から、前記対応領域における前記疾患状態の変化、及び前記疾患状態の変化速度を推定する、
ように、前記処理回路を制御する、
医用画像処理装置の制御方法
A control method for a medical image processing apparatus comprising a processing circuit, comprising:
The processing circuit is
Acquiring a plurality of images obtained by imaging the same subject at different imaging times,
classifying the tissue properties of the subject into a plurality of tissue property classes by analyzing the tissue properties of the subject based on the pixel values of the respective regions of the plurality of images;
assigning the classified tissue attribute classes to respective regions of the plurality of images;
estimating a change in the disease state of the subject from a change in the tissue attribute class in the corresponding region of each of the plurality of images ;
By performing texture analysis based on pixel values of respective regions of the plurality of images, each region is classified into one of a plurality of texture patterns, and the classified texture patterns are assigned to each of the plurality of images. allocated to the area of
estimating the change in the disease state in the corresponding region and the rate of change in the disease state from the change in the texture pattern in the corresponding region of each of the plurality of images;
controlling the processing circuitry to
A control method for a medical image processing apparatus .
JP2019126353A 2018-08-21 2019-07-05 Medical image processing apparatus, medical image processing system, and medical image processing method Active JP7332362B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/541,248 US11195272B2 (en) 2018-08-21 2019-08-15 Medical image processing apparatus, medical image processing system, and medical image processing method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018154776 2018-08-21
JP2018154776 2018-08-21

Publications (2)

Publication Number Publication Date
JP2020028706A JP2020028706A (en) 2020-02-27
JP7332362B2 true JP7332362B2 (en) 2023-08-23

Family

ID=69623307

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019126353A Active JP7332362B2 (en) 2018-08-21 2019-07-05 Medical image processing apparatus, medical image processing system, and medical image processing method

Country Status (1)

Country Link
JP (1) JP7332362B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7452847B2 (en) 2020-05-12 2024-03-19 株式会社アドダイス State change estimation system

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050207630A1 (en) 2002-02-15 2005-09-22 The Regents Of The University Of Michigan Technology Management Office Lung nodule detection and classification

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050207630A1 (en) 2002-02-15 2005-09-22 The Regents Of The University Of Michigan Technology Management Office Lung nodule detection and classification

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Marios Anthimopoulos,Lung Pattern Classification for Interstitial Lung Diseases Using a Deep Convolutional Neural Network,IEEE TRANSACTIONS ON MEDICAL IMAGING,2016年,VOL. 35, NO. 5,pp.1207-1216
玉城 仁,間質性肺炎の診断と治療,沖縄医報,2010年,Vol.46 No.12,pp.55-64

Also Published As

Publication number Publication date
JP2020028706A (en) 2020-02-27

Similar Documents

Publication Publication Date Title
US11666298B2 (en) Apparatus and system for rule based visualization of digital breast tomosynthesis and other volumetric images
JP5345934B2 (en) Data set selection from 3D rendering for viewing
US8244010B2 (en) Image processing device and a control method and control program thereof
US8077948B2 (en) Method for editing 3D image segmentation maps
US10188361B2 (en) System for synthetic display of multi-modality data
JP6789933B2 (en) Visualization of imaging uncertainty
JP2012071122A (en) Display apparatus
JP7179521B2 (en) MEDICAL IMAGE PROCESSING APPARATUS, IMAGE GENERATION METHOD, AND IMAGE GENERATION PROGRAM
US9361711B2 (en) Lesion-type specific reconstruction and display of digital breast tomosynthesis volumes
JP2007151645A (en) Medical diagnostic imaging support system
JP2021077331A (en) Data processing device and data processing method
JP7332362B2 (en) Medical image processing apparatus, medical image processing system, and medical image processing method
US10324582B2 (en) Medical image display apparatus, method for controlling the same
JP2005185405A (en) Medical image processor, region-of-interest extraction method and program
JP2016001372A (en) Information processing device, information processing method and program
GB2515634A (en) System and methods for efficient assessment of lesion development
US11195272B2 (en) Medical image processing apparatus, medical image processing system, and medical image processing method
JP5592655B2 (en) Image processing device
US20230270399A1 (en) Apparatus and system for rule based visualization of digital breast tomosynthesis and other volumetric images
US20230223124A1 (en) Information processing apparatus, information processing method, and information processing program
JP6424147B2 (en) Image processing apparatus, method, and program
Opposits et al. Automated procedure assessing the accuracy of HRCT–PET registration applied in functional virtual bronchoscopy
JP2021189962A (en) Medical information processing device, medical information processing system, medical information processing method, and program
JP6068883B2 (en) Image processing apparatus and region extraction method
Reeves A Development Methodology for Automated Measurement of Quantitative Image Biomarkers: Analysis of Chest CT Images

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220519

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230228

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230314

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230427

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230718

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230810

R150 Certificate of patent or registration of utility model

Ref document number: 7332362

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150