JP2013022154A - Image processing system, device and method, and medical image diagnostic apparatus - Google Patents
Image processing system, device and method, and medical image diagnostic apparatus Download PDFInfo
- Publication number
- JP2013022154A JP2013022154A JP2011158223A JP2011158223A JP2013022154A JP 2013022154 A JP2013022154 A JP 2013022154A JP 2011158223 A JP2011158223 A JP 2011158223A JP 2011158223 A JP2011158223 A JP 2011158223A JP 2013022154 A JP2013022154 A JP 2013022154A
- Authority
- JP
- Japan
- Prior art keywords
- image
- image data
- dimensional image
- vibration frequency
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 180
- 238000000034 method Methods 0.000 title abstract description 64
- 239000000284 extract Substances 0.000 claims description 6
- 230000002123 temporal effect Effects 0.000 claims description 6
- 230000036962 time dependent Effects 0.000 claims description 5
- 238000003672 processing method Methods 0.000 claims 1
- 230000032683 aging Effects 0.000 abstract 2
- 238000009877 rendering Methods 0.000 description 81
- 238000010586 diagram Methods 0.000 description 28
- 238000002591 computed tomography Methods 0.000 description 22
- 230000008569 process Effects 0.000 description 19
- 230000033001 locomotion Effects 0.000 description 18
- 210000000056 organ Anatomy 0.000 description 14
- 238000002091 elastography Methods 0.000 description 9
- 238000004891 communication Methods 0.000 description 8
- 239000011521 glass Substances 0.000 description 8
- 238000003702 image correction Methods 0.000 description 8
- 238000002595 magnetic resonance imaging Methods 0.000 description 8
- 238000012937 correction Methods 0.000 description 7
- 239000004973 liquid crystal related substance Substances 0.000 description 7
- 238000007781 pre-processing Methods 0.000 description 7
- 230000009466 transformation Effects 0.000 description 7
- 230000011218 segmentation Effects 0.000 description 6
- 230000009467 reduction Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 230000004927 fusion Effects 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 238000002603 single-photon emission computed tomography Methods 0.000 description 3
- 229920000298 Cellophane Polymers 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 210000004204 blood vessel Anatomy 0.000 description 2
- 230000003902 lesion Effects 0.000 description 2
- 230000005855 radiation Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 206010028980 Neoplasm Diseases 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000002059 diagnostic imaging Methods 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 210000002216 heart Anatomy 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 210000004072 lung Anatomy 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000010287 polarization Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000011946 reduction process Methods 0.000 description 1
- 239000000523 sample Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Landscapes
- Apparatus For Radiation Diagnosis (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
Abstract
Description
本発明の実施形態は、画像処理システム、装置、方法及び医用画像診断装置に関する。 Embodiments described herein relate generally to an image processing system, apparatus, method, and medical image diagnostic apparatus.
従来、立体視用メガネ等の専用機器を用いて、２つの視点から撮影された２視差画像を立体視可能なモニタが実用化されている。また、近年、レンチキュラーレンズ等の光線制御子を用いて、複数の視点から撮影された多視差画像（例えば、９視差画像）を裸眼にて立体視可能なモニタが実用化されている。なお、立体視可能なモニタにて表示される２視差画像や９視差画像は、１視点から撮影された画像の奥行き情報を推定し、推定した情報を用いた画像処理により生成される場合もある。 Conventionally, a monitor capable of stereoscopically viewing a two-parallax image taken from two viewpoints using a dedicated device such as stereoscopic glasses has been put into practical use. In recent years, monitors that can stereoscopically view multi-parallax images (for example, 9 parallax images) taken from a plurality of viewpoints using a light beam controller such as a lenticular lens have been put into practical use. Note that a 2-parallax image or a 9-parallax image displayed on a stereoscopically viewable monitor may be generated by estimating the depth information of an image taken from one viewpoint and performing image processing using the estimated information. .
一方、Ｘ線ＣＴ（Computed Tomography）装置やＭＲＩ（Magnetic Resonance Imaging）装置、超音波診断装置等の医用画像診断装置では、３次元の医用画像データ（以下、ボリュームデータ）を生成可能な装置が実用化されている。従来、かかる医用画像診断装置により生成されたボリュームデータは、種々の画像処理により２次元画像とされ、汎用モニタ上にて２次元表示される。例えば、医用画像診断装置により生成されたボリュームデータは、ボリュームレンダリング処理により３次元の情報を反映した２次元画像とされ、汎用モニタ上にて２次元表示される。しかしながら、従来技術では、表示対象物の状態を感覚的に把握することが困難になる場合があった。 On the other hand, a medical image diagnostic apparatus such as an X-ray CT (Computed Tomography) apparatus, an MRI (Magnetic Resonance Imaging) apparatus, or an ultrasonic diagnostic apparatus is practically capable of generating three-dimensional medical image data (hereinafter referred to as volume data). It has become. Conventionally, volume data generated by such a medical image diagnostic apparatus is converted into a two-dimensional image by various image processing and displayed two-dimensionally on a general-purpose monitor. For example, volume data generated by a medical image diagnostic apparatus is converted into a two-dimensional image reflecting three-dimensional information by volume rendering processing, and is displayed two-dimensionally on a general-purpose monitor. However, in the prior art, it may be difficult to sensuously grasp the state of the display object.
本発明が解決しようとする課題は、表示対象物の状態を感覚的に把握することができる画像処理システム、装置、方法及び医用画像診断装置を提供することである。 The problem to be solved by the present invention is to provide an image processing system, apparatus, method, and medical image diagnostic apparatus that can sensuously grasp the state of a display object.
実施形態の画像処理システムは、設定手段と、生成手段と、表示制御手段とを備える。設定手段は、３次元画像データに含まれるボクセルごとの特徴量に基づいて、当該ボクセルに任意の振動が加えられた場合の振動周波数をボクセルごとに設定する。生成手段は、
前記設定手段によって設定された振動周波数により前記ボクセルそれぞれを移動させた場合の経時的な３次元画像データを生成する。表示制御手段は、前記生成手段によって生成された経時的な３次元画像データに含まれる各時相の３次元画像データからそれぞれ生成された視差画像群を時系列順に表示させる。
The image processing system according to the embodiment includes a setting unit, a generation unit, and a display control unit. The setting means sets, for each voxel, a vibration frequency when an arbitrary vibration is applied to the voxel based on the feature amount for each voxel included in the three-dimensional image data. The generation means is
Three-dimensional image data over time when each of the voxels is moved with the vibration frequency set by the setting means is generated. The display control means displays the parallax image groups generated from the three-dimensional image data of each time phase included in the temporal three-dimensional image data generated by the generating means in time series order.
以下、添付図面を参照して、画像処理システム、装置、方法及び医用画像診断装置の実施形態を詳細に説明する。なお、以下では、画像処理装置としての機能を有するワークステーションを含む画像処理システムを実施形態として説明する。ここで、以下の実施形態で用いる用語について説明すると、「視差画像群」とは、ボリュームデータに対して、所定の視差角ずつ視点位置を移動させてボリュームレンダリング処理を行なうことで生成された画像群のことである。すなわち、「視差画像群」は、「視点位置」が異なる複数の「視差画像」から構成される。また、「視差角」とは、「視差画像群」を生成するために設定された各視点位置のうち隣接する視点位置とボリュームデータによって表される空間内の所定位置（例えば、空間の中心）とにより定まる角度のことである。また、「視差数」とは、立体表示モニタにて立体視されるために必要となる「視差画像」の数のことである。また、以下で記載する「９視差画像」とは、９つの「視差画像」から構成される「視差画像群」のことである。また、以下で記載する「２視差画像」とは、２つの「視差画像」から構成される「視差画像群」のことである。 Hereinafter, embodiments of an image processing system, an apparatus, a method, and a medical image diagnostic apparatus will be described in detail with reference to the accompanying drawings. In the following, an image processing system including a workstation having a function as an image processing apparatus will be described as an embodiment. Here, the terms used in the following embodiments will be described. The “parallax image group” is an image generated by performing volume rendering processing by moving the viewpoint position by a predetermined parallax angle with respect to volume data. It is a group. That is, the “parallax image group” includes a plurality of “parallax images” having different “viewpoint positions”. The “parallax angle” is a predetermined position in the space represented by the volume data and an adjacent viewpoint position among the viewpoint positions set to generate the “parallax image group” (for example, the center of the space) It is an angle determined by. The “parallax number” is the number of “parallax images” necessary for stereoscopic viewing on the stereoscopic display monitor. The “9 parallax images” described below is a “parallax image group” composed of nine “parallax images”. The “two-parallax image” described below is a “parallax image group” composed of two “parallax images”.
（第１の実施形態）
まず、第１の実施形態に係る画像処理システムの構成例について説明する。図１は、第１の実施形態に係る画像処理システムの構成例を説明するための図である。
(First embodiment)
First, a configuration example of the image processing system according to the first embodiment will be described. FIG. 1 is a diagram for explaining a configuration example of an image processing system according to the first embodiment.
図１に示すように、第１の実施形態に係る画像処理システム１は、医用画像診断装置１１０と、画像保管装置１２０と、ワークステーション１３０と、端末装置１４０とを有する。図１に例示する各装置は、例えば、病院内に設置された院内ＬＡＮ（Local Area Network）２により、直接的、又は間接的に相互に通信可能な状態となっている。例えば、画像処理システム１にＰＡＣＳ（Picture Archiving and Communication System）が導入されている場合、各装置は、ＤＩＣＯＭ（Digital Imaging and Communications in Medicine）規格に則って、医用画像等を相互に送受信する。
As shown in FIG. 1, the
かかる画像処理システム１は、医用画像診断装置１１０により生成された３次元の医用画像データであるボリュームデータから視差画像群を生成し、この視差画像群を立体視可能なモニタに表示することで、病院内に勤務する医師や検査技師に立体視可能な医用画像を提供する。具体的には、第１の実施形態においては、ワークステーション１３０が、ボリュームデータに対して種々の画像処理を行ない、視差画像群を生成する。また、ワークステーション１３０及び端末装置１４０が、立体視可能なモニタを有し、ワークステーション１３０にて生成された視差画像群をこのモニタに表示する。また、画像保管装置１２０は、医用画像診断装置１１０にて生成されたボリュームデータや、ワークステーション１３０にて生成された視差画像群を保管する。すなわち、ワークステーション１３０や端末装置１４０は、この画像保管装置１２０からボリュームデータや視差画像群を取得し、これを処理したり、モニタに表示したりする。以下、各装置を順に説明する。
The
医用画像診断装置１１０は、Ｘ線診断装置、Ｘ線ＣＴ（Computed Tomography）装置、ＭＲＩ（Magnetic Resonance Imaging）装置、超音波診断装置、ＳＰＥＣＴ（Single Photon Emission Computed Tomography）装置、ＰＥＴ（Positron Emission computed Tomography）装置、ＳＰＥＣＴ装置とＸ線ＣＴ装置とが一体化されたＳＰＥＣＴ−ＣＴ装置、ＰＥＴ装置とＸ線ＣＴ装置とが一体化されたＰＥＴ−ＣＴ装置、又はこれらの装置群等である。また、第１の実施形態に係る医用画像診断装置１１０は、３次元の医用画像データ（ボリュームデータ）を生成可能である。 The medical image diagnostic apparatus 110 includes an X-ray diagnostic apparatus, an X-ray CT (Computed Tomography) apparatus, an MRI (Magnetic Resonance Imaging) apparatus, an ultrasonic diagnostic apparatus, a SPECT (Single Photon Emission Computed Tomography) apparatus, and a PET (Positron Emission computed Tomography). ) Apparatus, a SPECT-CT apparatus in which a SPECT apparatus and an X-ray CT apparatus are integrated, a PET-CT apparatus in which a PET apparatus and an X-ray CT apparatus are integrated, or a group of these apparatuses. Further, the medical image diagnostic apparatus 110 according to the first embodiment can generate three-dimensional medical image data (volume data).
具体的には、第１の実施形態に係る医用画像診断装置１１０は、被検体を撮影することによりボリュームデータを生成する。例えば、医用画像診断装置１１０は、被検体を撮影することにより投影データやＭＲ信号等のデータを収集し、収集したデータから、被検体の体軸方向に沿った複数のアキシャル面の医用画像データを再構成することで、ボリュームデータを生成する。例えば、医用画像診断装置１１０は、５００枚のアキシャル面の医用画像データを再構成する。この５００枚のアキシャル面の医用画像データ群が、ボリュームデータである。なお、医用画像診断装置１１０により撮影された被検体の投影データやＭＲ信号等自体をボリュームデータとしても良い。 Specifically, the medical image diagnostic apparatus 110 according to the first embodiment generates volume data by imaging a subject. For example, the medical image diagnostic apparatus 110 collects data such as projection data and MR signals by imaging the subject, and medical image data of a plurality of axial surfaces along the body axis direction of the subject from the collected data. By reconfiguring, volume data is generated. For example, the medical image diagnostic apparatus 110 reconstructs 500 pieces of medical image data on the axial plane. The 500 axial medical image data groups are volume data. In addition, the projection data of the subject imaged by the medical image diagnostic apparatus 110, the MR signal, or the like may be used as the volume data.
また、第１の実施形態に係る医用画像診断装置１１０は、生成したボリュームデータを画像保管装置１２０に送信する。なお、医用画像診断装置１１０は、ボリュームデータを画像保管装置１２０に送信する際に、付帯情報として、例えば、患者を識別する患者ＩＤ、検査を識別する検査ＩＤ、医用画像診断装置１１０を識別する装置ＩＤ、医用画像診断装置１１０による１回の撮影を識別するシリーズＩＤ等を送信する。
Further, the medical image diagnostic apparatus 110 according to the first embodiment transmits the generated volume data to the
画像保管装置１２０は、医用画像を保管するデータベースである。具体的には、第１の実施形態に係る画像保管装置１２０は、医用画像診断装置１１０から送信されたボリュームデータを記憶部に格納し、これを保管する。また、第１の実施形態においては、ワークステーション１３０が、ボリュームデータから視差画像群を生成し、生成した視差画像群を画像保管装置１２０に送信する。このため、画像保管装置１２０は、ワークステーション１３０から送信された視差画像群を記憶部に格納し、これを保管する。なお、本実施形態は、大容量の画像を保管可能なワークステーション１３０を用いることで、図１に例示するワークステーション１３０と画像保管装置１２０とが統合される場合であっても良い。すなわち、本実施形態は、ワークステーション１３０そのものにボリュームデータもしくは視差画像群を記憶させる場合であっても良い。
The
なお、第１の実施形態において、画像保管装置１２０に保管されたボリュームデータや視差画像群は、患者ＩＤ、検査ＩＤ、装置ＩＤ、シリーズＩＤ等と対応付けて保管される。このため、ワークステーション１３０や端末装置１４０は、患者ＩＤ、検査ＩＤ、装置ＩＤ、シリーズＩＤ等を用いた検索を行なうことで、必要なボリュームデータや視差画像群を画像保管装置１２０から取得する。
In the first embodiment, the volume data and the parallax image group stored in the
ワークステーション１３０は、医用画像に対して画像処理を行なう画像処理装置である。具体的には、第１の実施形態に係るワークステーション１３０は、画像保管装置１２０から取得したボリュームデータに対して種々のレンダリング処理を行ない、視差画像群を生成する。視差画像群とは、複数の視点から撮影された複数の視差画像のことであり、例えば、９視差画像を裸眼にて立体視可能なモニタにて表示される視差画像群とは、視点位置が異なる９つの視差画像のことである。
The workstation 130 is an image processing apparatus that performs image processing on medical images. Specifically, the workstation 130 according to the first embodiment performs various rendering processes on the volume data acquired from the
また、第１の実施形態に係るワークステーション１３０は、表示部として、立体視可能なモニタ（以下、立体表示モニタ）を有する。ワークステーション１３０は、視差画像群を生成し、生成した視差画像群を立体表示モニタに表示する。この結果、ワークステーション１３０の操作者は、立体表示モニタに表示された立体視可能な医用画像を確認しながら、視差画像群生成のための操作を行なうことができる。 In addition, the workstation 130 according to the first embodiment includes a stereoscopically visible monitor (hereinafter, stereoscopic display monitor) as a display unit. The workstation 130 generates a parallax image group and displays the generated parallax image group on the stereoscopic display monitor. As a result, the operator of the workstation 130 can perform an operation for generating a parallax image group while confirming a stereoscopically visible medical image displayed on the stereoscopic display monitor.
また、ワークステーション１３０は、生成した視差画像群を画像保管装置１２０に送信する。なお、ワークステーション１３０は、視差画像群を画像保管装置１２０に送信する際に、付帯情報として、例えば、患者ＩＤ、検査ＩＤ、装置ＩＤ、シリーズＩＤ等を送信する。また、視差画像群を画像保管装置１２０に送信する際に送信される付帯情報としては、視差画像群に関する付帯情報も挙げられる。視差画像群に関する付帯情報としては、視差画像の枚数（例えば、「９」）や、視差画像の解像度（例えば、「４６６×３５０画素」）等がある。
Further, the workstation 130 transmits the generated parallax image group to the
端末装置１４０は、病院内に勤務する医師や検査技師に医用画像を閲覧させるための装置である。例えば、端末装置１４０は、病院内に勤務する医師や検査技師により操作されるＰＣ（Personal Computer）やタブレット式ＰＣ、ＰＤＡ（Personal Digital Assistant）、携帯電話等である。具体的には、第１の実施形態に係る端末装置１４０は、表示部として立体表示モニタを有する。また、端末装置１４０は、画像保管装置１２０から視差画像群を取得し、取得した視差画像群を立体表示モニタに表示する。この結果、観察者である医師や検査技師は、立体視可能な医用画像を閲覧することができる。
The
ここで、ワークステーション１３０や端末装置１４０が有する立体表示モニタについて説明する。現在最も普及している一般的な汎用モニタは、２次元画像を２次元で表示するものであり、２次元画像を立体表示することができない。仮に、観察者が汎用モニタにて立体視を要望する場合、汎用モニタに対して画像を出力する装置は、平行法や交差法により観察者が立体視可能な２視差画像を並列表示させる必要がある。又は、汎用モニタに対して画像を出力する装置は、例えば、左目用の部分に赤色のセロハンが取り付けられ、右目用の部分に青色のセロハンが取り付けられたメガネを用いて余色法により観察者が立体視可能な画像を表示する必要がある。
Here, the stereoscopic display monitor included in the workstation 130 and the
一方、立体表示モニタとしては、立体視用メガネ等の専用機器を用いることで、２視差画像（両眼視差画像とも称する）を立体視可能とするものがある。 On the other hand, as a stereoscopic display monitor, there is a stereoscopic display monitor that enables a stereoscopic view of a two-parallax image (also referred to as a binocular parallax image) by using dedicated equipment such as stereoscopic glasses.
図２は、２視差画像により立体表示を行なう立体表示モニタの一例を説明するための図である。図２に示す一例は、シャッター方式により立体表示を行なう立体表示モニタであり、モニタを観察する観察者が装着する立体視用メガネとしてシャッターメガネが用いられる。かかる立体表示モニタは、モニタにて２視差画像を交互に出射する。例えば、図２の（Ａ）に示すモニタは、左目用の画像と右目用の画像を、１２０Ｈｚにて交互に出射する。ここで、モニタには、図２の（Ａ）に示すように、赤外線出射部が設置され、赤外線出射部は、画像が切り替わるタイミングに合わせて赤外線の出射を制御する。 FIG. 2 is a diagram for explaining an example of a stereoscopic display monitor that performs stereoscopic display using two parallax images. An example shown in FIG. 2 is a stereoscopic display monitor that performs stereoscopic display by a shutter method, and shutter glasses are used as stereoscopic glasses worn by an observer who observes the monitor. Such a stereoscopic display monitor emits two parallax images alternately on the monitor. For example, the monitor shown in FIG. 2A alternately emits a left-eye image and a right-eye image at 120 Hz. Here, as shown in FIG. 2A, the monitor is provided with an infrared emitting unit, and the infrared emitting unit controls the emission of infrared rays in accordance with the timing at which the image is switched.
また、赤外線出射部から出射された赤外線は、図２の（Ａ）に示すシャッターメガネの赤外線受光部により受光される。シャッターメガネの左右それぞれの枠には、シャッターが取り付けられており、シャッターメガネは、赤外線受光部が赤外線を受光したタイミングに合わせて左右のシャッターそれぞれの透過状態及び遮光状態を交互に切り替える。以下、シャッターにおける透過状態及び遮光状態の切り替え処理について説明する。 Moreover, the infrared rays emitted from the infrared ray emitting portion are received by the infrared ray receiving portion of the shutter glasses shown in FIG. A shutter is attached to each of the left and right frames of the shutter glasses, and the shutter glasses alternately switch the transmission state and the light shielding state of the left and right shutters according to the timing when the infrared light receiving unit receives the infrared rays. Hereinafter, the switching process between the transmission state and the light shielding state in the shutter will be described.
各シャッターは、図２の（Ｂ）に示すように、入射側の偏光板と出射側の偏光板とを有し、更に、入射側の偏光板と出射側の偏光板との間に液晶相を有する。また、入射側の偏光板と出射側の偏光板とは、図２の（Ｂ）に示すように、互いに直交している。ここで、図２の（Ｂ）に示すように、電圧が印加されていない「ＯＦＦ」の状態では、入射側の偏光板を通った光は、液晶層の作用により９０度回転し、出射側の偏光板を透過する。すなわち、電圧が印加されていないシャッターは、透過状態となる。 As shown in FIG. 2B, each shutter has an incident-side polarizing plate and an output-side polarizing plate, and further, a liquid crystal phase is interposed between the incident-side polarizing plate and the output-side polarizing plate. Have Further, as shown in FIG. 2B, the incident-side polarizing plate and the outgoing-side polarizing plate are orthogonal to each other. Here, as shown in FIG. 2B, in the “OFF” state where no voltage is applied, the light that has passed through the polarizing plate on the incident side is rotated by 90 ° by the action of the liquid crystal layer, and is emitted on the outgoing side. Is transmitted through the polarizing plate. That is, a shutter to which no voltage is applied is in a transmissive state.
一方、図２の（Ｂ）に示すように、電圧が印加された「ＯＮ」の状態では、液晶層の液晶分子による偏光回転作用が消失するため、入射側の偏光板を通った光は、出射側の偏光板で遮られてしまう。すなわち、電圧が印加されたシャッターは、遮光状態となる。 On the other hand, as shown in FIG. 2B, in the “ON” state where a voltage is applied, the polarization rotation action caused by the liquid crystal molecules in the liquid crystal layer disappears. It will be blocked by the polarizing plate on the exit side. That is, the shutter to which the voltage is applied is in a light shielding state.
そこで、例えば、赤外線出射部は、モニタ上に左目用の画像が表示されている期間、赤外線を出射する。そして、赤外線受光部は、赤外線を受光している期間、左目のシャッターに電圧を印加せず、右目のシャッターに電圧を印加させる。これにより、図２の（Ａ）に示すように、右目のシャッターが遮光状態となり、左目のシャッターが透過状態となるため、観察者の左目に左目用の画像が入射する。一方、赤外線出射部は、モニタ上に右目用の画像が表示されている期間、赤外線の出射を停止する。そして、赤外線受光部は、赤外線が受光されない期間、右目のシャッターに電圧を印加せず、左目のシャッターに電圧を印加させる。これにより、左目のシャッターが遮光状態となり、右目のシャッターが透過状態であるため、観察者の右目に右目用の画像が入射する。このように、図２に示す立体表示モニタは、モニタに表示される画像とシャッターの状態を連動させて切り替えることで、観察者が立体視可能な画像を表示させる。なお、２視差画像を立体視可能な立体表示モニタとしては、上記のシャッター方式以外にも、偏光メガネ方式を採用したモニタも知られている。 Therefore, for example, the infrared emitting unit emits infrared rays during a period in which an image for the left eye is displayed on the monitor. The infrared light receiving unit applies a voltage to the right-eye shutter without applying a voltage to the left-eye shutter during a period of receiving the infrared light. Accordingly, as shown in FIG. 2A, the right-eye shutter is in a light-shielding state and the left-eye shutter is in a transmissive state, so that an image for the left eye is incident on the left eye of the observer. On the other hand, the infrared ray emitting unit stops emitting infrared rays while the right-eye image is displayed on the monitor. The infrared light receiving unit applies a voltage to the left-eye shutter without applying a voltage to the right-eye shutter during a period in which no infrared light is received. Accordingly, the left-eye shutter is in a light-shielding state and the right-eye shutter is in a transmissive state, so that an image for the right eye is incident on the right eye of the observer. As described above, the stereoscopic display monitor illustrated in FIG. 2 displays an image that can be viewed stereoscopically by the observer by switching the image displayed on the monitor and the state of the shutter in conjunction with each other. As a stereoscopic display monitor capable of stereoscopically viewing a two-parallax image, a monitor adopting a polarized glasses method is also known in addition to the shutter method described above.
更に、近年実用化された立体表示モニタとしては、レンチキュラーレンズ等の光線制御子を用いることで、例えば、９視差画像等の多視差画像を観察者が裸眼にて立体視可能とするものがある。かかる立体表示モニタは、両眼視差による立体視を可能とし、更に、観察者の視点移動に合わせて観察される映像も変化する運動視差による立体視も可能とする。 Furthermore, as a stereoscopic display monitor that has been put into practical use in recent years, there is a stereoscopic display monitor that allows a viewer to stereoscopically view a multi-parallax image such as a 9-parallax image with the naked eye by using a light controller such as a lenticular lens. . Such a stereoscopic display monitor enables stereoscopic viewing based on binocular parallax, and also enables stereoscopic viewing based on motion parallax that also changes the image observed in accordance with the viewpoint movement of the observer.
図３は、９視差画像により立体表示を行なう立体表示モニタの一例を説明するための図である。図３に示す立体表示モニタには、液晶パネル等の平面状の表示面２００の前面に、光線制御子が配置される。例えば、図３に示す立体表示モニタには、光線制御子として、光学開口が垂直方向に延びる垂直レンチキュラーシート２０１が表示面２００の前面に貼り付けられている。
FIG. 3 is a diagram for explaining an example of a stereoscopic display monitor that performs stereoscopic display using nine parallax images. In the stereoscopic display monitor shown in FIG. 3, a light beam controller is arranged on the front surface of a
表示面２００には、図３に示すように、縦横比が３：１であり、縦方向にサブ画素である赤（Ｒ）、緑（Ｇ）、青（Ｂ）の３つが配置された画素２０２がマトリクス状に配置される。図３に示す立体表示モニタは、９つの画像により構成される９視差画像を、所定フォーマット（例えば格子状）に配置した中間画像に変換したうえで、表示面２００に出力する。すなわち、図３に示す立体表示モニタは、９視差画像にて同一位置にある９つの画素それぞれを、９列の画素２０２に割り振って出力させる。９列の画素２０２は、視点位置の異なる９つの画像を同時に表示する単位画素群２０３となる。
As shown in FIG. 3, the
表示面２００において単位画素群２０３として同時に出力された９視差画像は、例えば、ＬＥＤ（Light Emitting Diode）バックライトにより平行光として放射され、更に、垂直レンチキュラーシート２０１により、多方向に放射される。９視差画像の各画素の光が多方向に放射されることにより、観察者の右目及び左目に入射する光は、観察者の位置（視点の位置）に連動して変化する。すなわち、観察者の見る角度により、右目に入射する視差画像と左目に入射する視差画像とは、視差角が異なる。これにより、観察者は、例えば、図３に示す９つの位置それぞれにおいて、撮影対象を立体的に視認できる。また、観察者は、例えば、図３に示す「５」の位置において、撮影対象に対して正対した状態で立体的に視認できるとともに、図３に示す「５」以外それぞれの位置において、撮影対象の向きを変化させた状態で立体的に視認できる。なお、図３に示す立体表示モニタは、あくまでも一例である。９視差画像を表示する立体表示モニタは、図３に示すように、「ＲＲＲ・・・、ＧＧＧ・・・、ＢＢＢ・・・」の横ストライプ液晶である場合であっても良いし、「ＲＧＢＲＧＢ・・・」の縦ストライプ液晶である場合であっても良い。また、図３に示す立体表示モニタは、図３に示すように、レンチキュラーシートが垂直となる縦レンズ方式である場合であっても良いし、レンチキュラーシートが斜めとなる斜めレンズ方式である場合であっても良い。
The nine parallax images simultaneously output as the
ここまで、第１の実施形態に係る画像処理システム１の構成例について簡単に説明した。なお、上述した画像処理システム１は、ＰＡＣＳが導入されている場合にその適用が限られるものではない。例えば、画像処理システム１は、医用画像が添付された電子カルテを管理する電子カルテシステムが導入されている場合にも、同様に適用される。この場合、画像保管装置１２０は、電子カルテを保管するデータベースである。また、例えば、画像処理システム１は、ＨＩＳ（Hospital Information System）、ＲＩＳ（Radiology Information System）が導入されている場合にも、同様に適用される。また、画像処理システム１は、上述した構成例に限られるものではない。各装置が有する機能やその分担は、運用の形態に応じて適宜変更されてよい。
So far, the configuration example of the
次に、第１の実施形態に係るワークステーションの構成例について図４を用いて説明する。図４は、第１の実施形態に係るワークステーションの構成例を説明するための図である。なお、以下において、「視差画像群」とは、ボリュームデータに対してボリュームレンダリング処理を行なうことで生成された立体視用の画像群のことである。また、「視差画像」とは、「視差画像群」を構成する個々の画像のことである。すなわち、「視差画像群」は、視点位置が異なる複数の「視差画像」から構成される。 Next, a configuration example of the workstation according to the first embodiment will be described with reference to FIG. FIG. 4 is a diagram for explaining a configuration example of the workstation according to the first embodiment. In the following description, the “parallax image group” is a group of stereoscopic images generated by performing volume rendering processing on volume data. Further, the “parallax image” is an individual image constituting the “parallax image group”. That is, the “parallax image group” includes a plurality of “parallax images” having different viewpoint positions.
第１の実施形態に係るワークステーション１３０は、画像処理等に適した高性能なコンピュータであり、図４に示すように、入力部１３１と、表示部１３２と、通信部１３３と、記憶部１３４と、制御部１３５と、レンダリング処理部１３６とを有する。なお、以下では、ワークステーション１３０が画像処理等に適した高性能なコンピュータである場合を用いて説明するが、これに限定されるものではなく、任意の情報処理装置であって良い。例えば、任意のパーソナルコンピュータであっても良い。
The workstation 130 according to the first embodiment is a high-performance computer suitable for image processing and the like, and as illustrated in FIG. 4, an input unit 131, a
入力部１３１は、マウス、キーボード、トラックボール等であり、ワークステーション１３０に対する各種操作の入力を操作者から受け付ける。具体的には、第１の実施形態に係る入力部１３１は、レンダリング処理の対象となるボリュームデータを画像保管装置１２０から取得するための情報の入力を受け付ける。例えば、入力部１３１は、患者ＩＤ、検査ＩＤ、装置ＩＤ、シリーズＩＤ等の入力を受け付ける。また、第１の実施形態に係る入力部１３１は、レンダリング処理に関する条件（以下、レンダリング条件）の入力を受け付ける。
The input unit 131 is a mouse, a keyboard, a trackball, or the like, and receives input of various operations on the workstation 130 from an operator. Specifically, the input unit 131 according to the first embodiment receives input of information for acquiring volume data to be subjected to rendering processing from the
表示部１３２は、立体表示モニタとしての液晶パネル等であり、各種情報を表示する。具体的には、第１の実施形態に係る表示部１３２は、操作者から各種操作を受け付けるためのＧＵＩ（Graphical User Interface）や、視差画像群等を表示する。通信部１３３は、ＮＩＣ（Network Interface Card）等であり、他の装置との間で通信を行う。
The
記憶部１３４は、ハードディスク、半導体メモリ素子等であり、各種情報を記憶する。具体的には、第１の実施形態に係る記憶部１３４は、通信部１３３を介して画像保管装置１２０から取得したボリュームデータを記憶する。また、第１の実施形態に係る記憶部１３４は、レンダリング処理中のボリュームデータや、レンダリング処理により生成された視差画像群、及び、２次元表示用の画像等を記憶する。また、記憶部１３４は、後述する制御部１３５によって用いられる振動周波数設定テーブルを記憶する。なお、振動周波数設定テーブルについては、後に詳述する。
The storage unit 134 is a hard disk, a semiconductor memory element, or the like, and stores various types of information. Specifically, the storage unit 134 according to the first embodiment stores volume data acquired from the
制御部１３５は、ＣＰＵ（Central Processing Unit）やＭＰＵ（Micro Processing Unit）等の電子回路、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）等の集積回路であり、ワークステーション１３０の全体制御を行なう。
The
例えば、第１の実施形態に係る制御部１３５は、表示部１３２に対するＧＵＩの表示や視差画像群の表示を制御する。また、例えば、制御部１３５は、画像保管装置１２０との間で通信部１３３を介して行なわれるボリュームデータや視差画像群の送受信を制御する。また、例えば、制御部１３５は、レンダリング処理部１３６によるレンダリング処理を制御する。また、例えば、制御部１３５は、ボリュームデータの記憶部１３４からの読み込みや、視差画像群の記憶部１３４への格納を制御する。
For example, the
レンダリング処理部１３６は、制御部１３５による制御の下、画像保管装置１２０から取得したボリュームデータに対して種々のレンダリング処理を行ない、視差画像群を生成する。なお、レンダリング処理部１３６の処理については、後に詳述する。
The
レンダリング処理部１３６は、制御部１３５による制御の下、画像保管装置１２０から取得したボリュームデータに対して種々のレンダリング処理を行ない、視差画像群を生成する。具体的には、第１の実施形態に係るレンダリング処理部１３６は、記憶部１３４からボリュームデータを読み込み、このボリュームデータに対して、まず前処理を行なう。次に、レンダリング処理部１３６は、前処理後のボリュームデータに対してボリュームレンダリング処理を行ない、視差画像群を生成する。続いて、レンダリング処理部１３６は、各種情報（目盛り、患者名、検査項目等）が描出された２次元画像を生成し、これを視差画像群それぞれに対して重畳することで、出力用の２次元画像を生成する。そして、レンダリング処理部１３６は、生成した視差画像群や出力用の２次元画像を記憶部１３４に格納する。なお、第１の実施形態において、レンダリング処理とは、ボリュームデータに対して行なう画像処理全体のことであり、ボリュームレンダリング処理とは、レンダリング処理の内、３次元の情報を反映した２次元画像を生成する処理のことである。レンダリング処理により生成される医用画像とは、例えば、視差画像が該当する。
The
図５は、図４に示すレンダリング処理部の構成例を説明するための図である。図５に示すように、レンダリング処理部１３６は、前処理部１３６１と、３次元画像処理部１３６２と、２次元画像処理部１３６３とを有する。前処理部１３６１が、ボリュームデータに対する前処理を行い、３次元画像処理部１３６２が、前処理後のボリュームデータから視差画像群を生成し、２次元画像処理部１３６３が、視差画像群に各種情報が重畳された出力用の２次元画像を生成する。以下、各部を順に説明する。
FIG. 5 is a diagram for explaining a configuration example of the rendering processing unit shown in FIG. As illustrated in FIG. 5, the
前処理部１３６１は、ボリュームデータに対してレンダリング処理を行なう際に、種々の前処理を行なう処理部であり、画像補正処理部１３６１ａと、３次元物体フュージョン部１３６１ｅと、３次元物体表示領域設定部１３６１ｆとを有する。
The
画像補正処理部１３６１ａは、２種類のボリュームデータを１つのボリュームデータとして処理する際に画像補正処理を行なう処理部であり、図５に示すように、歪み補正処理部１３６１ｂ、体動補正処理部１３６１ｃ及び画像間位置合わせ処理部１３６１ｄを有する。例えば、画像補正処理部１３６１ａは、ＰＥＴ−ＣＴ装置により生成されたＰＥＴ画像のボリュームデータとＸ線ＣＴ画像のボリュームデータとを１つのボリュームデータとして処理する際に画像補正処理を行なう。或いは、画像補正処理部１３６１ａは、ＭＲＩ装置により生成されたＴ１強調画像のボリュームデータとＴ２強調画像のボリュームデータとを１つのボリュームデータとして処理する際に画像補正処理を行なう。
The image correction processing unit 1361a is a processing unit that performs image correction processing when processing two types of volume data as one volume data, and as shown in FIG. 5, a distortion correction processing unit 1361b, a body motion correction processing unit, 1361c and an inter-image
また、歪み補正処理部１３６１ｂは、個々のボリュームデータにおいて、医用画像診断装置１１０によるデータ収集時の収集条件に起因するデータの歪みを補正する。また、体動補正処理部１３６１ｃは、個々のボリュームデータを生成するために用いられたデータの収集時期における被検体の体動に起因する移動を補正する。また、画像間位置合わせ処理部１３６１ｄは、歪み補正処理部１３６１ｂ及び体動補正処理部１３６１ｃによる補正処理が行なわれた２つのボリュームデータ間で、例えば、相互相関法等を用いた位置合わせ（Registration）を行なう。
In addition, the distortion correction processing unit 1361b corrects the data distortion caused by the collection conditions at the time of data collection by the medical image diagnostic apparatus 110 in each volume data. Further, the body motion correction processing unit 1361c corrects the movement caused by the body motion of the subject at the time of collecting the data used for generating the individual volume data. Further, the inter-image
３次元物体フュージョン部１３６３ｅは、画像間位置合わせ処理部１３６１ｄにより位置合わせが行なわれた複数のボリュームデータをフュージョンさせる。なお、画像補正処理部１３６１ａ及び３次元物体フュージョン部１３６１ｅの処理は、単一のボリュームデータに対してレンダリング処理を行なう場合、省略される。
The three-dimensional object fusion unit 1363e fuses a plurality of volume data that has been aligned by the inter-image
３次元物体表示領域設定部１３６１ｆは、操作者により指定された表示対象臓器に対応する表示領域を設定する処理部であり、セグメンテーション処理部１３６１ｇを有する。セグメンテーション処理部１３６１ｇは、操作者により指定された心臓、肺、血管等の臓器を、例えば、ボリュームデータの画素値（ボクセル値）に基づく領域拡張法により抽出する処理部である。
The three-dimensional object display region setting unit 1361f is a processing unit that sets a display region corresponding to the display target organ designated by the operator, and includes a
なお、セグメンテーション処理部１３６１ｇは、操作者により表示対象臓器が指定されなかった場合、セグメンテーション処理を行なわない。また、セグメンテーション処理部１３６１ｇは、操作者により表示対象臓器が複数指定された場合、該当する複数の臓器を抽出する。また、セグメンテーション処理部１３６１ｇの処理は、レンダリング画像を参照した操作者の微調整要求により再度実行される場合もある。
Note that the
３次元画像処理部１３６２は、前処理部１３６１が処理を行なった前処理後のボリュームデータに対してボリュームレンダリング処理を行なう。ボリュームレンダリング処理を行なう処理部として、３次元画像処理部１３６２は、投影方法設定部１３６２ａと、３次元幾何変換処理部１３６２ｂと、３次元物体アピアランス処理部１３６２ｆと、３次元仮想空間レンダリング部１３６２ｋとを有する。
The 3D
投影方法設定部１３６２ａは、視差画像群を生成するための投影方法を決定する。例えば、投影方法設定部１３６２ａは、ボリュームレンダリング処理を平行投影法により実行するか、透視投影法により実行するかを決定する。 The projection method setting unit 1362a determines a projection method for generating a parallax image group. For example, the projection method setting unit 1362a determines whether to execute the volume rendering process by the parallel projection method or the perspective projection method.
３次元幾何変換処理部１３６２ｂは、ボリュームレンダリング処理が実行されるボリュームデータを３次元幾何学的に変換するための情報を決定する処理部であり、平行移動処理部１３６２ｃ、回転処理部１３６２ｄ及び拡大縮小処理部１３６２ｅを有する。平行移動処理部１３６２ｃは、ボリュームレンダリング処理を行なう際の視点位置が平行移動された場合に、ボリュームデータを平行移動させる移動量を決定する処理部であり、回転処理部１３６２ｄは、ボリュームレンダリング処理を行なう際の視点位置が回転移動された場合に、ボリュームデータを回転移動させる移動量を決定する処理部である。また、拡大縮小処理部１３６２ｅは、視差画像群の拡大や縮小が要求された場合に、ボリュームデータの拡大率や縮小率を決定する処理部である。
The three-dimensional geometric
３次元物体アピアランス処理部１３６２ｆは、３次元物体色彩処理部１３６２ｇ、３次元物体不透明度処理部１３６２ｈ、３次元物体材質処理部１３６２ｉ及び３次元仮想空間光源処理部１３６２ｊを有する。３次元物体アピアランス処理部１３６２ｆは、これらの処理部により、例えば、操作者の要求に応じて、表示される視差画像群の表示状態を決定する処理を行なう。
The three-dimensional object
３次元物体色彩処理部１３６２ｇは、ボリュームデータにてセグメンテーションされた各領域に対して着色される色彩を決定する処理部である。３次元物体不透明度処理部１３６２ｈは、ボリュームデータにてセグメンテーションされた各領域を構成する各ボクセルの不透過度（Opacity）を決定する処理部である。なお、ボリュームデータにおいて不透過度が「１００％」とされた領域の後方の領域は、視差画像群において描出されないこととなる。また、ボリュームデータにおいて不透過度が「０％」とされた領域は、視差画像群において描出されないこととなる。
The three-dimensional object
３次元物体材質処理部１３６２ｉは、ボリュームデータにてセグメンテーションされた各領域の材質を決定することで、この領域が描出される際の質感を調整する処理部である。３次元仮想空間光源処理部１３６２ｊは、ボリュームデータに対してボリュームレンダリング処理を行なう際に、３次元仮想空間に設置する仮想光源の位置や、仮想光源の種類を決定する処理部である。仮想光源の種類としては、無限遠から平行な光線を照射する光源や、視点から放射状の光線を照射する光源等が挙げられる。
The three-dimensional object
３次元仮想空間レンダリング部１３６２ｋは、ボリュームデータに対してボリュームレンダリング処理を行ない、視差画像群を生成する。また、３次元仮想空間レンダリング部１３６２ｋは、ボリュームレンダリング処理を行なう際、必要に応じて、投影方法設定部１３６２ａ、３次元幾何変換処理部１３６２ｂ、３次元物体アピアランス処理部１３６２ｆにより決定された各種情報を用いる。
The three-dimensional virtual
ここで、３次元仮想空間レンダリング部１３６２ｋによるボリュームレンダリング処理は、レンダリング条件に従って行なわれることになる。例えば、レンダリング条件は、「平行投影法」又は「透視投影法」である。また、例えば、レンダリング条件は、「基準の視点位置及び視差角」である。また、例えば、レンダリング条件は、「視点位置の平行移動」、「視点位置の回転移動」、「視差画像群の拡大」、「視差画像群の縮小」である。また、例えば、レンダリング条件は、「着色される色彩」、「透過度」、「質感」、「仮想光源の位置」、「仮想光源の種類」である。このようなレンダリング条件は、入力部１３１を介して操作者から受け付ける場合や、初期設定される場合が考えられる。いずれの場合も、３次元仮想空間レンダリング部１３６２ｋは、制御部１３５からレンダリング条件を受け付け、このレンダリング条件に従って、ボリュームデータに対するボリュームレンダリング処理を行なう。また、このとき、上述した投影方法設定部１３６２ａ、３次元幾何変換処理部１３６２ｂ、３次元物体アピアランス処理部１３６２ｆが、このレンダリング条件に従って必要な各種情報を決定するので、３次元仮想空間レンダリング部１３６２ｋは、決定されたこれらの各種情報を用いて視差画像群を生成する。
Here, the volume rendering process by the three-dimensional virtual
図６は、第１の実施形態に係るボリュームレンダリング処理の一例を説明するための図である。例えば、３次元仮想空間レンダリング部１３６２ｋが、図６の「９視差画像生成方式（１）」に示すように、レンダリング条件として、平行投影法を受け付け、更に、基準の視点位置（５）と視差角「１度」とを受け付けたとする。かかる場合、３次元仮想空間レンダリング部１３６２ｋは、視差角が「１度」おきとなるように、視点の位置を（１）〜（９）に平行移動して、平行投影法により視差角（視線方向間の角度）が１度ずつ異なる９つの視差画像を生成する。なお、平行投影法を行なう場合、３次元仮想空間レンダリング部１３６２ｋは、視線方向に沿って無限遠から平行な光線を照射する光源を設定する。
FIG. 6 is a diagram for explaining an example of volume rendering processing according to the first embodiment. For example, as shown in “9 parallax image generation method (1)” in FIG. 6, the three-dimensional virtual
或いは、３次元仮想空間レンダリング部１３６２ｋが、図６の「９視差画像生成方式（２）」に示すように、レンダリング条件として、透視投影法を受け付け、更に、基準の視点位置（５）と視差角「１度」とを受け付けたとする。かかる場合、３次元仮想空間レンダリング部１３６２ｋは、ボリュームデータの中心（重心）を中心に視差角が「１度」おきとなるように、視点の位置を（１）〜（９）に回転移動して、透視投影法により視差角が１度ずつ異なる９つの視差画像を生成する。なお、透視投影法を行なう場合、３次元仮想空間レンダリング部１３６２ｋは、視線方向を中心に光を３次元的に放射状に照射する点光源や面光源を各視点にて設定する。また、透視投影法を行なう場合、レンダリング条件によっては、視点（１）〜（９）は、平行移動される場合であってもよい。
Alternatively, as shown in “9-parallax image generation method (2)” in FIG. 6, the three-dimensional virtual
なお、３次元仮想空間レンダリング部１３６２ｋは、表示されるボリュームレンダリング画像の縦方向に対しては、視線方向を中心に光を２次元的に放射状に照射し、表示されるボリュームレンダリング画像の横方向に対しては、視線方向に沿って無限遠から平行な光線を照射する光源を設定することで、平行投影法と透視投影法とを併用したボリュームレンダリング処理を行なってもよい。
Note that the three-dimensional virtual
このようにして生成された９つの視差画像が、視差画像群である。第１の実施形態において、９つの視差画像は、例えば制御部１３５により所定フォーマット（例えば格子状）に配置した中間画像に変換され、立体表示モニタとしての表示部１３２に出力される。すると、ワークステーション１３０の操作者は、立体表示モニタに表示された立体視可能な医用画像を確認しながら、視差画像群生成のための操作を行なうことができる。
The nine parallax images generated in this way are a parallax image group. In the first embodiment, the nine parallax images are converted into intermediate images arranged in a predetermined format (for example, a lattice shape) by the
なお、図６の例では、レンダリング条件として、投影方法、基準の視点位置及び視差角を受け付けた場合を説明したが、レンダリング条件として、他の条件を受け付けた場合も同様に、３次元仮想空間レンダリング部１３６２ｋは、それぞれのレンダリング条件を反映しつつ、視差画像群を生成する。
In the example of FIG. 6, the case where the projection method, the reference viewpoint position, and the parallax angle are received as the rendering conditions has been described. However, the three-dimensional virtual space is similarly applied when other conditions are received as the rendering conditions. The
また、３次元仮想空間レンダリング部１３６２ｋは、ボリュームレンダリングだけでなく、任意の平面（例えば、アキシャル面、サジタル面、コロナル面など）の平面画像を再構成する。例えば、３次元仮想空間レンダリング部１３６２ｋは、断面再構成法（ＭＰＲ：Multi Planer Reconstruction）を行なってボリュームデータからＭＰＲ画像を再構成する。なお、３次元仮想空間レンダリング部１３６２ｋは、「Curved MPR」を行なう機能や、「Intensity Projection」を行なう機能も有する。
The three-dimensional virtual
続いて、３次元画像処理部１３６２がボリュームデータから生成した視差画像群は、アンダーレイ（Underlay）とされる。そして、各種情報（目盛り、患者名、検査項目等）が描出されたオーバーレイ（Overlay）がアンダーレイに対して重畳されることで、出力用の２次元画像とされる。２次元画像処理部１３６３は、オーバーレイ及びアンダーレイに対して画像処理を行なうことで、出力用の２次元画像を生成する処理部であり、図５に示すように、２次元物体描画部１３６３ａ、２次元幾何変換処理部１３６３ｂ及び輝度調整部１３６３ｃを有する。例えば、２次元画像処理部１３６３は、出力用の２次元画像の生成処理に要する負荷を軽減するために、９枚の視差画像（アンダーレイ）のそれぞれに対して１枚のオーバーレイを重畳することで、出力用の２次元画像を９枚、生成する。
Subsequently, the parallax image group generated from the volume data by the three-dimensional
２次元物体描画部１３６３ａは、オーバーレイに描出される各種情報を描画する処理部であり、２次元幾何変換処理部１３６３ｂは、オーバーレイに描出される各種情報の位置を平行移動処理又は回転移動処理したり、オーバーレイに描出される各種情報の拡大処理又は縮小処理したりする処理部である。 The two-dimensional object drawing unit 1363a is a processing unit that draws various information drawn on the overlay, and the two-dimensional geometric transformation processing unit 1363b performs parallel movement processing or rotational movement processing on the position of the various information drawn on the overlay. Or a processing unit that performs an enlargement process or a reduction process of various types of information drawn on the overlay.
また、輝度調整部１３６３ｃは、輝度変換処理を行なう処理部であり、例えば、出力先の立体表示モニタの諧調や、ウィンドウ幅（ＷＷ：Window Width）、ウィンドウレベル（ＷＬ：Window Level）等の画像処理用のパラメータに応じて、オーバーレイ及びアンダーレイの輝度を調整する処理部である。 The luminance adjustment unit 1363c is a processing unit that performs luminance conversion processing. For example, the gradation of an output destination stereoscopic display monitor, an image such as a window width (WW: Window Width), a window level (WL: Window Level), or the like. This is a processing unit that adjusts the brightness of the overlay and the underlay according to the processing parameters.
このようにして生成された出力用の２次元画像は、例えば制御部１３５により一旦記憶部１３４に格納され、その後、通信部１３３を介して画像保管装置１２０に送信される。例えば、端末装置１４０が、画像保管装置１２０からこの出力用の２次元画像を取得し、所定フォーマット（例えば格子状）に配置した中間画像に変換した上で立体表示モニタに表示すると、観察者である医師や検査技師は、各種情報（目盛り、患者名、検査項目等）が描出された状態で、立体視可能な医用画像を閲覧することができる。
The output two-dimensional image generated in this way is temporarily stored in the storage unit 134 by the
以上、第１の実施形態に係る画像処理システム１及びワークステーション１３０の構成について説明した。かかる構成のもと、第１の実施形態に係るワークステーション１３０は、以下、詳細に説明する制御部１３５の処理により、表示対象物の状態を感覚的に把握することを可能とするように構成されている。具体的には、第１の実施形態に係るワークステーション１３０は、表示対象物のボリュームデータに含まれるボクセルごとの特徴量に応じて、表示対象物を任意の方向及び強度で振動させる。
The configurations of the
図７は、第１の実施形態に係る制御部１３５の構成例を説明するための図である。図７に示すように、制御部１３５は、振動周波数設定部１３５１と、画像データ生成部１３５２と、表示制御部１３５３とを有する。振動周波数設定部１３５１は、３次元画像データに含まれるボクセルごとの特徴量に応じて、当該ボクセルに任意の振動を加えた場合の振動周波数をボクセルごとに算出する。具体的には、振動周波数設定部１３５１は、記憶部１３４によって記憶された振動周波数設定テーブルを参照して、ボクセルごとの振動周波数を設定する。
FIG. 7 is a diagram for explaining a configuration example of the
ここで、まず、記憶部１３４によって記憶される振動周波数設定テーブルについて説明する。図８は、第１の実施形態に係る記憶部１３４によって記憶される振動周波数設定テーブルの一例を示す図である。図８に示すように、記憶部１３４は、モダリティごとに、硬度情報に振動周波数を対応付けた振動周波数設定テーブルを記憶する。例えば、記憶部１３４は、図８に示すように、超音波診断装置の振動周波数設定テーブルとして、エラストグラフィ（Elastography）により取得される組織の歪みの情報であるＦＬＲ（Fat Lesion Ratio）に振動周波数を対応付けたテーブルを記憶する。ここで、エラストグラフィとは、組織に対して外圧をかけた際の組織の歪みの値を算出して当該組織の硬度を調べる技術である。また、ＦＬＲとは、脂肪と病変との歪みの比を示す。なお、図１３においては、エラストグラフィにより取得される組織の歪みの情報としてＦＬＲを用いているが、実施形態はこれに限定されるものではなく、任意の情報を用いることが可能である。例えば、音響放射圧で組織に歪みを与えてその変化を見るＡＲＦＩ（Acoustic Radiation Force Impulse）や、横波を用いて組織の歪みを見るＳｈａｒｅ Ｗａｖｅなどを組織の歪みの情報として用いる場合であってもよい。 Here, first, the vibration frequency setting table stored in the storage unit 134 will be described. FIG. 8 is a diagram illustrating an example of a vibration frequency setting table stored by the storage unit 134 according to the first embodiment. As illustrated in FIG. 8, the storage unit 134 stores a vibration frequency setting table in which vibration frequency is associated with hardness information for each modality. For example, as shown in FIG. 8, the storage unit 134 uses a vibration frequency setting table of FLR (Fat Lesion Ratio), which is information on tissue distortion acquired by elastography, as a vibration frequency setting table of the ultrasonic diagnostic apparatus. Is stored. Here, elastography is a technique for examining the hardness of a tissue by calculating the value of the strain of the tissue when an external pressure is applied to the tissue. FLR indicates a distortion ratio between fat and lesion. In FIG. 13, FLR is used as tissue strain information acquired by elastography. However, the embodiment is not limited to this, and arbitrary information can be used. For example, even when ARFI (Acoustic Radiation Force Impulse) for distorting a tissue with acoustic radiation pressure and viewing the change, or Share Wave for observing the tissue distortion using a transverse wave, is used as the tissue strain information. Good.
また、例えば、記憶部１３４は、図８に示すように、Ｘ線ＣＴ装置の振動周波数設定テーブルとして、ＣＴ値（ＨＵ：Hounsfield unit）に振動周波数を対応付けたテーブルを記憶する。同様に、記憶部１３４は、ＭＲＩ装置の振動周波数設定テーブルを記憶する。ＭＲＩ装置の振動周波数設定テーブルに用いられる硬度情報としては、例えば、エラストグラフィにより取得される組織の歪みの情報などである。なお、モダリティごとの振動周波数設定テーブルは、予め操作者により設定され、記憶部１３４に格納される。 Further, for example, as illustrated in FIG. 8, the storage unit 134 stores a table in which a vibration frequency is associated with a CT value (HU: Hounsfield unit) as a vibration frequency setting table of the X-ray CT apparatus. Similarly, the storage unit 134 stores a vibration frequency setting table of the MRI apparatus. The hardness information used in the vibration frequency setting table of the MRI apparatus is, for example, information on tissue strain acquired by elastography. The vibration frequency setting table for each modality is set in advance by the operator and stored in the storage unit 134.
例えば、振動周波数設定部１３５１は、振動モードがＯＮである場合に、ボリュームデータに含まれるボクセルごとの硬度情報を取得する。そして、振動周波数設定部１３５１は、記憶部１３４によって記憶された振動周波数設定テーブルを参照して、ボクセルごとに振動周波数を設定する。以下、エラストグラフィにより取得される歪みに関する情報を用いる場合を一例に挙げて説明する。
For example, when the vibration mode is ON, the vibration
図９は、第１の実施形態に係る振動周波数設定部１３５１による処理の一例を説明するための図である。ここで、図９の（Ａ）においては、エラストグラフィを用いることで調べられた硬度に応じてカラー表示した臓器を示している。例えば、超音波診断装置にエラストグラフィを用いる場合には、超音波プローブを利用して超音波の送信方向に組織を圧迫することで、組織の硬さに応じた歪みの値を取得し、取得した歪みの値からＦＬＲを算出して、臓器をカラー表示する。
FIG. 9 is a diagram for explaining an example of processing by the vibration
振動周波数設定部１３５１は、エラストグラフィにより取得されたＦＬＲを用いて、ボリュームデータのボクセルごとに振動周波数を設定する。例えば、振動周波数設定部１３５１は、図９の（Ｂ）に示す領域３００の奥行き方向のボクセル３０１〜３０３それぞれのＦＬＲを取得する。そして、振動周波数設定部１３５２１は、図８に示す超音波診断装置の振動周波数設定テーブルを参照して、ボクセルごとに振動周波数を設定する。
The vibration
図１０は、第１の実施形態に係る振動周波数設定部１３５２１の処理結果の一例を示す図である。ここで、図１０に示す「ボクセルＩＤ」とは、振動の対象となる対象物を示すボリュームデータに含まれるボクセルを一意に識別するための識別子であり、振動周波数設定部１３５１によってシーケンシャルに付与される。例えば、振動周波数設定部１３５１は、図１０に示すように、「ボクセルＩＤ：３０１」の「振動周波数（Ｈｚ）」として「２０」を設定する。同様に、振動周波数設定部１３５１は、「ボクセルＩＤ：３０２」及び「ボクセルＩＤ：３０３」に対して、それぞれ「振動周波数：１８」及び「振動周波数：１０」を設定する。振動周波数設定部１３５２１は、ボリュームデータに含まれる全てのボクセルに対して振動周波数を設定して、処理結果を記憶部１３４に格納する。
FIG. 10 is a diagram illustrating an example of a processing result of the vibration frequency setting unit 13521 according to the first embodiment. Here, the “voxel ID” shown in FIG. 10 is an identifier for uniquely identifying the voxel included in the volume data indicating the object to be vibrated, and is sequentially assigned by the vibration
図７に戻って、画像データ生成部１３５２は、振動周波数設定部１３５１によって設定された振動周波数によりボクセルそれぞれを移動させた場合の経時的な３次元画像データを生成する。具体的には、画像データ生成部１３５２は、振動周波数設定部１３５１によって設定された振動周波数に、振動の方向、強度及び時間のうち少なくとも一つの条件を反映させた経時的な３次元画像データを生成する。
Returning to FIG. 7, the image
図１１は、第１の実施形態に係る画像データ生成部１３５２による処理の一例を説明するための図である。例えば、画像データ生成部１３５２は、図１１の（Ｂ）に示すように、図１１の（Ａ）に示すボリュームデータに含まれるすべてのボクセルを、設定された振動周波数で任意の方向（上下、左右又は前後など）に移動させた場合のボリュームデータを時系列に沿って生成する。なお、図１１の（Ｂ）に示す「ｔ１」〜「ｔｎ」は、ボリュームデータが生成された時相を示し、「ｔ１」から順に「ｎ」個目の時相までボリュームデータが生成されたことを示す。
FIG. 11 is a diagram for explaining an example of processing by the image
一例として、図１１の（Ａ）に示す臓器を所定の強度で左右方向に振動させる場合について説明する。かかる場合には、まず、画像データ生成部１３５２は、元のボリュームデータに対して直交三断面となる座標を設定する。そして、画像データ生成部１３５２は、ボリュームデータに含まれる全てのボクセルを、振動周波数設定部１３５１により設定された振動周波数で左右方向に交互に振動させる。そして、画像データ生成部１３５２は、予め設定された所定の時間（例えば、ｔ１＝０．５秒）後の座標にボクセルを移動させたボリュームデータを生成する。画像データ生成部１３５２は、上述した処理をｎ回繰り返し実行することで、ｎ時相分のボリュームデータを生成する。なお、振動の強度（ボクセルの移動量）は、予め任意に設定される。また、画像データ生成部１３５２により生成されたｎ時相分のボリュームデータは、記憶部１３４によって記憶される。
As an example, a case where the organ shown in FIG. 11A is vibrated in the left-right direction with a predetermined intensity will be described. In such a case, first, the image
図７に戻って、表示制御部１３５３は、画像データ生成部１３５２によって生成された経時的なボリュームデータに含まれる各時相のボリュームデータからそれぞれ生成された視差画像群を時系列順に表示させる。具体的には、表示制御部１３５３は、画像データ生成部１３５２によって生成された各時相のボリュームデータに対して同一視点から９視差分の画像を生成させ、生成させた９視差画像を表示部１３２にて時系列順に表示させる。
Returning to FIG. 7, the
ここで、表示制御部１３５３は、振動周波数設定部１３５１によって設定された振動周波数が所定の閾値以下となるボクセルが集合した領域を抽出し、抽出した領域を含む視点位置からの視差画像群を、各時相のボリュームデータからそれぞれ生成させるように制御し、当該各時相のボリュームデータからそれぞれ生成させた視差画像群を時系列順に表示させる。例えば、表示制御部１３５３は、振動周波数設定部１３５１によって設定された振動周波数が「５Ｈｚ」以下となるボクセルが集合した領域を関心領域として抽出する。そして、表示制御部１３５３は、各時相のボリュームデータを対象として、抽出した関心領域が見やすい方向を視点位置としたボリュームレンダリング処理をレンダリング処理部１３６に実行させる。
Here, the
図１２は、第１の実施形態に係る表示制御部１３５３による処理の一例を説明するための図である。例えば、表示制御部１３５３は、図１２の（Ａ）に示す「ｔ１」〜「ｔｎ」までのｎ時相分のボリュームデータそれぞれから、関心領域が前面に示される視点位置で９視差画像を生成させる。そして、表示制御部１３５３は、生成された９視差画像それぞれを時系列順に表示部１３２に表示させる。
FIG. 12 is a diagram for explaining an example of processing by the
その結果、表示制御部１３５３は、例えば、図１２の（Ｂ）の領域４００に示すように、振動周波数が低い領域がほとんど振動せず、表示部分が鮮明に観察できる立体視可能な画像を表示部１３２から表示させることとなる。言い換えると、表示される臓器において、硬い部分が鮮明に観察されることとなり、表示対象物の状態を感覚的に把握することが可能である。
As a result, the
次に、図１３を用いて、第１の実施形態に係るワークステーション１３０の処理について説明する。図１３は、第１の実施形態に係るワークステーション１３０による処理の手順を示すフローチャートである。図１３に示すように、第１の実施形態に係るワークステーション１３０においては、振動モードがＯＮの場合には（ステップＳ１０１肯定）、振動周波数設定部１３５１は、硬度情報を取得する（ステップＳ１０２）。
Next, processing of the workstation 130 according to the first embodiment will be described with reference to FIG. FIG. 13 is a flowchart illustrating a processing procedure performed by the workstation 130 according to the first embodiment. As shown in FIG. 13, in the workstation 130 according to the first embodiment, when the vibration mode is ON (Yes at Step S101), the vibration
そして、振動周波数設定部１３５１は、振動周波数設定テーブルを参照して、取得した硬度情報からボクセルごとに振動周波数を設定する（ステップＳ１０３）。その後、画像データ生成部１３５２は、振動周波数に応じてボクセルを移動させた場合の経時的なボリュームデータを生成する（ステップＳ１０４）。
And the vibration
続いて、表示制御部１３５３は、振動周波数が所定の閾値よりも低い領域が前面になる視点位置を決定し（ステップＳ１０５）、経時的なボリュームデータそれぞれに対して、決定した視点位置からボリュームレンダリングを実行させ（ステップＳ１０６）、視差画像群を生成させる。そして、表示制御部１３５３は、経時的なボリュームデータからそれぞれ生成した視差画像群を時系列順に表示部１３２にて表示させる（ステップＳ１０７）。なお、第１の実施形態に係るワークステーション１３０は、振動モードがＯＮになるまで待機状態である（ステップＳ１０１否定）。
Subsequently, the
上述したように、第１の実施形態によれば、振動周波数設定部１３５１が、３次元画像データに含まれるボクセルごとの特徴量に基づいて、当該ボクセルに任意の振動が加えられた場合の振動周波数をボクセルごとに設定する。そして、画像データ生成部１３５２が、振動周波数設定部１３５１によって設定された振動周波数に応じて、ボクセルそれぞれを移動させた場合の経時的な３次元画像データを生成する。そして、表示制御部１３５３が、画像データ生成部１３５２によって生成された経時的な３次元画像データに含まれる各時相の３次元画像データからそれぞれ生成された視差画像群を時系列順に表示させる。従って、第１の実施形態に係るワークステーション１３０は、特徴量に応じて振動が異なる画像を観察することができ、表示対象物の状態を感覚的に把握することを可能にする。
As described above, according to the first embodiment, vibration when the vibration
また、第１の実施形態によれば、振動周波数設定部１３５１が、特徴量として、ボクセルごとの硬度情報を用いる。従って、第１の実施形態に係るワークステーション１３０は、表示対象物の部分的な硬さや周囲の組織との関係を直感的に把握することを可能にする。その結果、第１の実施形態に係るワークステーション１３０は、例えば、血管と実質との関係や、腫瘍の癒着具合などを容易に把握することを可能にする。
According to the first embodiment, the vibration
また、第１の実施形態によれば、画像データ生成部１３５２は、振動周波数設定部１３５１によって設定された振動周波数に加え、振動の方向、強度及び時間のうち少なくとも一つの条件を反映させた経時的な３次元画像データを生成する。従って、第１の実施形態に係るワークステーション１３０は、観察者が加えた任意の振動に対する表示対象物の振動の状態を画像として表示させることができ、種々の情報を得ることを可能にする。
In addition, according to the first embodiment, the image
また、第１の実施形態によれば、表示制御部１３５３は、振動周波数設定部１３５１によって設定された振動周波数が所定の閾値以下となるボクセルが集合した領域を抽出し、抽出した領域を含む視点位置からの視差画像群を各時相の３次元画像データからそれぞれ生成させるように制御し、当該各時相の３次元画像データからそれぞれ生成させた視差画像群を時系列順に表示させる。従って、第１の実施形態に係るワークステーション１３０は、振動しにくい領域が見やすい画像を自動で観察者に表示することができ、表示対象物の部分的な硬さや周囲の組織との関係を容易に把握させることを可能にする。
In addition, according to the first embodiment, the
（第２の実施形態）
上述した第１の実施形態では、立体視可能な画像を振動させる場合について説明した。第２の実施形態では、関心領域を含む２次元画像を生成し、生成した２次元画像を振動させる場合ついて説明する。なお、第２の実施形態では、図７に示す第１の実施形態に係る制御部１３５と同一の構成を有する。そこで、第２の実施形態においては、関心領域を含む２次元画像を生成し、生成した２次元画像を振動させる制御部を表示制御部１３５３ａとして説明する。すなわち、表示制御部１３５３ａは、図７に示す表示制御部１３５３に新たな処理が追加されたものである。
(Second Embodiment)
In the first embodiment described above, the case where a stereoscopically viewable image is vibrated has been described. In the second embodiment, a case where a two-dimensional image including a region of interest is generated and the generated two-dimensional image is vibrated will be described. Note that the second embodiment has the same configuration as the
表示制御部１３５３ａは、関心領域を含む２次元画像データを各時相の３次元画像データからそれぞれ生成させるように制御し、当該各時相の３次元画像データからそれぞれ生成させた２次元画像データを時系列順に表示させる。図１４は、第２の実施形態に係る表示制御部１３５３ａによる処理の一例を説明するための図である。図１４においては、図１２に示す臓器のボリュームデータから２次元画像データを生成する場合について示す。 The display control unit 1353a controls the two-dimensional image data including the region of interest to be generated from the three-dimensional image data at each time phase, and the two-dimensional image data generated from the three-dimensional image data at each time phase. Are displayed in chronological order. FIG. 14 is a diagram for explaining an example of processing by the display control unit 1353a according to the second embodiment. FIG. 14 shows a case where two-dimensional image data is generated from the volume data of the organ shown in FIG.
例えば、表示制御部１３５３ａは、図１４の（Ａ）に示す関心領域４００を含むＭＰＲ画像を各時相のボリュームデータからそれぞれ生成させる。なお、関心領域４００は、振動周波数設定部１３５１によって設定された振動周波数が所定の閾値よりも低いボクセルが集合した領域である。
For example, the display control unit 1353a generates an MPR image including the region of
ここで、表示制御部１３５３ａは、任意の断面でＭＰＲ画像を生成させることが可能である。具体的には、表示制御部１３５３ａによって生成されるＭＰＲ画像の断面の角度や深さは、操作者によって予め任意に設定することが可能である。例えば、表示制御部１３５３ａは、図１４の（Ａ）に示すように、表示部１３２にて立体視可能な画像を振動させて表示させている際に、２次元画像モードをＯＮにするための「ＭＰＲ画像」ボタンが操作者によって押下されると、図１４の（Ｂ）に示すように、予め設定された条件で、各時相のボリュームデータからＭＰＲ画像を生成させる。そして、表示制御部１３５３ａは、生成されたＭＰＲ画像を時系列順に表示部１３２にて表示させる。これにより、表示制御部１３５３ａは、関心領域の振動の状態をより高精細に描出した画像を観察者に表示することができる。
Here, the display control unit 1353a can generate an MPR image with an arbitrary cross section. Specifically, the angle and depth of the cross section of the MPR image generated by the display control unit 1353a can be arbitrarily set in advance by the operator. For example, when the display control unit 1353a vibrates and displays a stereoscopically visible image on the
なお、上述した第２の実施形態では、立体視可能な画像が表示部１３２にて表示された後に、「ＭＰＲ画像」ボタンが押下され、２次元画像を表示する場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、振動モードがＯＮにされた後、即座に「ＭＰＲ画像」ボタンが押下された場合に、装置内で処理を実行させ、表示部１３２にＭＰＲ画像のみを表示させることも可能である。
In the second embodiment described above, the case where the two-dimensional image is displayed by pressing the “MPR image” button after the stereoscopic image is displayed on the
次に、図１５を用いて、第２の実施形態に係るワークステーション１３０の処理について説明する。図１５は、第２の実施形態に係るワークステーション１３０による処理の手順を示すフローチャートである。なお、図１５は、表示部１３２にて立体視可能な画像を表示させた後の処理を示す。
Next, processing of the workstation 130 according to the second embodiment will be described with reference to FIG. FIG. 15 is a flowchart illustrating a processing procedure performed by the workstation 130 according to the second embodiment. FIG. 15 shows processing after displaying a stereoscopically visible image on the
図１５に示すように、第２の実施形態に係るワークステーション１３０においては、２次元画像モードがＯＮにされると（ステップＳ２０１肯定）、表示制御部１３５３ａは、関心領域の断面を描出したＭＰＲ画像を経時的なボリュームデータそれぞれから生成させる（ステップＳ２０２）。 As shown in FIG. 15, in the workstation 130 according to the second embodiment, when the two-dimensional image mode is turned on (Yes in step S201), the display control unit 1353a displays the MPR depicting the cross section of the region of interest. An image is generated from each temporal volume data (step S202).
そして、表示制御部１３５３ａは、生成させたＭＰＲ画像を時系列順に表示させる（ステップＳ２０３）。なお、２次元画像モードがＯＮにされるまでは、表示制御部１３５３ａは、立体視可能な画像を継続して表示させる（ステップＳ２０１否定）。 Then, the display control unit 1353a displays the generated MPR images in chronological order (step S203). Until the two-dimensional image mode is turned on, the display control unit 1353a continuously displays a stereoscopically visible image (No at Step S201).
上述したように、第２の実施形態によれば、表示制御部１３５３ａは、関心領域を含む２次元画像データを各時相の３次元画像データからそれぞれ生成させるように制御し、当該各時相の３次元画像データからそれぞれ生成させた２次元画像データを時系列順に表示させる。従って、第２の実施形態に係るワークステーション１３０は、関心領域の振動の状態をより高精細に描出した画像を観察者に表示することを可能にする。 As described above, according to the second embodiment, the display control unit 1353a controls the two-dimensional image data including the region of interest to be generated from the three-dimensional image data of each time phase, and each time phase. Two-dimensional image data generated from each of the three-dimensional image data is displayed in chronological order. Therefore, the workstation 130 according to the second embodiment makes it possible to display an image depicting the state of vibration of the region of interest with higher definition to the observer.
（第３の実施形態）
さて、これまで第１及び第２の実施形態について説明したが、上述した第１及び第２の実施形態以外にも、種々の異なる形態にて実施されてよいものである。
(Third embodiment)
Although the first and second embodiments have been described so far, the present invention may be implemented in various different forms other than the first and second embodiments described above.
上述した実施形態においては、エラストグラフィを用いることで取得される歪みの情報を硬度情報として用いる場合について説明した。しかしながら、実施形態はこれに限定されるものではなく、例えば、Ｘ線ＣＴ装置により取得されるボクセルごとのＣＴ値を用いる場合であってもよい。かかる場合には、近年、開発が進められているフォトンカウンティング方式の検出器を用いるＸ線ＣＴ装置（フォトンカウンティングＣＴ）が利用される。 In the above-described embodiment, the case has been described in which the strain information acquired by using elastography is used as the hardness information. However, the embodiment is not limited to this. For example, the CT value for each voxel acquired by the X-ray CT apparatus may be used. In such a case, an X-ray CT apparatus (photon counting CT) using a photon counting detector, which has been developed in recent years, is used.
フォトンカウンティングＣＴは、フォトンカウンティング方式の検出器により、被検体を透過したＸ線を検出する。具体的には、フォトンカウンティングＣＴは、フォトンカウンティング方式の検出器により被検体を透過したＸ線のエネルギー値を検出素子ごとにカウントする。これにより、フォトンカウンティングＣＴは、Ｘ線が透過した被検体の人体内組織を構成する元素を推定することが可能となるスペクトラムをＸ線投影データとして収集することができる。その結果、フォトンカウンティングＣＴは、元素レベルの違いが詳細に描出されたＸ線ＣＴ画像を再構成することができる。 The photon counting CT detects X-rays that have passed through the subject using a photon counting detector. Specifically, the photon counting CT counts, for each detection element, the energy value of X-rays transmitted through the subject by a photon counting type detector. As a result, the photon counting CT can collect a spectrum that enables estimation of the elements constituting the human body tissue of the subject through which X-rays have passed, as X-ray projection data. As a result, the photon counting CT can reconstruct an X-ray CT image in which the difference in element level is depicted in detail.
また、４Ｄデータが収集された場合には、４Ｄデータに含まれる情報を用いて、振動周波数を設定することも可能である。図１６は、変形例を説明するための図である。図１６においては、記憶部１３４に記憶されるＸ線ＣＴ装置の振動周波数設定テーブルを示す。例えば、記憶部１３４は、図１６に示すように、Ｘ線ＣＴ装置の振動周波数設定テーブルとして、移動量（ピクセル）に振動周波数を対応付けた情報を記憶する。 When 4D data is collected, the vibration frequency can be set using information included in the 4D data. FIG. 16 is a diagram for explaining a modification. In FIG. 16, the vibration frequency setting table of the X-ray CT apparatus memorize | stored in the memory | storage part 134 is shown. For example, as illustrated in FIG. 16, the storage unit 134 stores information in which the vibration frequency is associated with the movement amount (pixel) as a vibration frequency setting table of the X-ray CT apparatus.
ここで、図６に示す「移動量（ピクセル）」とは、４Ｄデータにおいて、各ボクセルが移動するピクセルの数を示す。すなわち、４Ｄデータを収集した場合に、実際の臓器の動きを振動周波数に変換して、それに応じて、臓器を振動させた画像を表示する。これにより、例えば、４Ｄデータの収集時間が短時間であっても、任意の長さの４Ｄデータを生成することができ、被爆量を低減することを可能にする。なお、上記した変形例では、モダリティがＸ線ＣＴ装置である場合について説明したが、実施形態はこれに限定されるものではなく、ＭＲＩ装置や、超音波診断装置などにも適用可能である。すなわち、各モダリティにおいて、４Ｄデータが収集された場合には、実際の臓器の動きを振動周波数に変換して、それに応じて、臓器を振動させた画像を表示させることが可能である。 Here, the “movement amount (pixel)” shown in FIG. 6 indicates the number of pixels to which each voxel moves in 4D data. That is, when 4D data is collected, the actual movement of the organ is converted into a vibration frequency, and an image obtained by vibrating the organ is displayed accordingly. Thereby, for example, even when the collection time of 4D data is short, 4D data having an arbitrary length can be generated, and the amount of exposure can be reduced. In the above-described modification, the case where the modality is the X-ray CT apparatus has been described. However, the embodiment is not limited to this, and can be applied to an MRI apparatus, an ultrasonic diagnostic apparatus, and the like. That is, in each modality, when 4D data is collected, it is possible to convert an actual organ motion into a vibration frequency and display an image in which the organ is vibrated accordingly.
上述した実施形態においては、視差画像群を生成する際の視点位置や、ＭＰＲ画像を生成する際の断面などが自動で設定される場合について説明した。しかしながら、実施形態はこれに限定されるものでなく、操作者が任意に設定することが可能である。例えば、操作者が、立体画像上でカーソルを用いて、視点位置や、振動方向や、振動の強度を変えたり、ＭＰＲ画像上でカーソルを用いて、断面の向きや、断面の深さを変えたりすることが可能である。 In the above-described embodiment, the case where the viewpoint position when generating the parallax image group, the cross section when generating the MPR image, and the like are automatically set has been described. However, the embodiment is not limited to this, and can be arbitrarily set by the operator. For example, the operator uses the cursor on the stereoscopic image to change the viewpoint position, vibration direction, and vibration intensity, or uses the cursor on the MPR image to change the direction of the cross section and the depth of the cross section. It is possible to
上述した実施形態においては、ワークステーション１３０が、表示対象物を振動させた画像を生成して表示する場合について説明した。しかしながら、開示の技術がこれに限定されるものではなく、例えば、医用画像診断装置１１０が表示対象物を振動させた画像を生成して表示する場合であってもよい。また、医用画像診断装置１１０又はワークステーション１３０が表示対象物を振動させた画像を生成して、端末装置１４０が、画像を表示する場合であってもよい。
In the above-described embodiment, the case where the workstation 130 generates and displays an image obtained by vibrating the display target object has been described. However, the disclosed technique is not limited to this, and for example, the medical image diagnostic apparatus 110 may generate and display an image in which a display target is vibrated. Alternatively, the medical image diagnostic apparatus 110 or the workstation 130 may generate an image obtained by vibrating the display object, and the
また、上述した実施形態においては、端末装置１４０は、画像保管装置１２０から取得した医用画像等を表示等するものとして説明した。しかしながら、開示の技術はこれに限定されるものではなく、例えば、端末装置１４０は、医用画像診断装置１１０又はワークステーション１３０に直接接続される場合であってもよい。
In the above-described embodiment, the
また、上述した実施形態においては、ワークステーション１３０は、画像保管装置１２０からボリュームデータを取得し、このボリュームデータから表示対象物を振動させた画像を生成して表示する場合について説明した。しかしながら、開示の技術はこれに限定されるものではなく、例えば、ワークステーション１３０は、医用画像診断装置１１０からボリュームデータを取得し、このボリュームデータから表示対象物を振動させた画像を生成して表示する場合であってもよい。
Further, in the above-described embodiment, the case has been described in which the workstation 130 acquires volume data from the
上述した実施形態においては、端末装置１４０が、画像保管装置１２０から画像を取得しして表示する場合について説明した。しかしながら、開示の技術はこれに限定されるものではなく、例えば、端末装置１４０が、医用画像診断装置１１０から画像を取得して表示する場合であってもよい。
In the above-described embodiment, the case where the
以上説明したとおり、実施形態によれば、本実施形態の画像処理システム、装置、方法及び医用画像診断装置は、表示対象物の状態を感覚的に把握することを可能にする。 As described above, according to the embodiment, the image processing system, the apparatus, the method, and the medical image diagnostic apparatus of the present embodiment make it possible to sensuously grasp the state of the display object.
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。 Although several embodiments of the present invention have been described, these embodiments are presented by way of example and are not intended to limit the scope of the invention. These embodiments can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the spirit of the invention. These embodiments and their modifications are included in the scope and gist of the invention, and are also included in the invention described in the claims and the equivalents thereof.
１１０ 医用画像診断装置
１２０ 画像保管装置
１３０ ワークステーション
１３５ 制御部
１３５１ 振動周波数設定部
１３５２ 画像データ生成部
１３５３、１３５３ａ 表示制御部
１４０ 端末装置
DESCRIPTION OF SYMBOLS 110 Medical
Claims (8)
前記設定手段によって設定された振動周波数に応じて、前記ボクセルそれぞれを移動させた場合の経時的な３次元画像データを生成する生成手段と、
前記生成手段によって生成された経時的な３次元画像データに含まれる各時相の３次元画像データからそれぞれ生成された視差画像群を時系列順に表示させる表示制御手段と、
を備えたことを特徴とする画像処理システム。 Setting means for setting, for each voxel, a vibration frequency when an arbitrary vibration is applied to the voxel based on a feature amount for each voxel included in the three-dimensional image data;
Generating means for generating three-dimensional image data over time when each of the voxels is moved according to the vibration frequency set by the setting means;
Display control means for displaying the parallax image groups respectively generated from the three-dimensional image data of each time phase included in the time-dependent three-dimensional image data generated by the generating means, in chronological order;
An image processing system comprising:
前記設定手段によって設定された振動周波数に応じて、前記ボクセルそれぞれを移動させた場合の経時的な３次元画像データを生成する生成手段と、
前記生成手段によって生成された経時的な３次元画像データに含まれる各時相の３次元画像データからそれぞれ生成された視差画像群を時系列順に表示させる表示制御手段と、
を備えたことを特徴とする画像処理装置。 Setting means for setting, for each voxel, a vibration frequency when an arbitrary vibration is applied to the voxel based on a feature amount for each voxel included in the three-dimensional image data;
Generating means for generating three-dimensional image data over time when each of the voxels is moved according to the vibration frequency set by the setting means;
Display control means for displaying the parallax image groups respectively generated from the three-dimensional image data of each time phase included in the time-dependent three-dimensional image data generated by the generating means, in chronological order;
An image processing apparatus comprising:
前記設定工程によって設定された振動周波数に応じて、前記ボクセルそれぞれを移動させた場合の経時的な３次元画像データを生成する生成工程と、
前記生成工程によって生成された経時的な３次元画像データに含まれる各時相の３次元画像データからそれぞれ生成された視差画像群を時系列順に表示させる表示制御工程と、
を含んだことを特徴とする画像処理方法。 A setting step for setting, for each voxel, a vibration frequency when an arbitrary vibration is applied to the voxel based on a feature amount for each voxel included in the three-dimensional image data;
A generation step of generating three-dimensional image data over time when each of the voxels is moved according to the vibration frequency set by the setting step;
A display control step of displaying a group of parallax images generated from the three-dimensional image data of each time phase included in the temporal three-dimensional image data generated by the generation step in chronological order;
An image processing method comprising:
前記設定手段によって設定された振動周波数に応じて、前記ボクセルそれぞれを移動させた場合の経時的な３次元画像データを生成する生成手段と、
前記生成手段によって生成された経時的な３次元画像データに含まれる各時相の３次元画像データからそれぞれ生成された視差画像群を時系列順に表示させる表示制御手段と、
を備えたことを特徴とする医用画像診断装置。 Setting means for setting, for each voxel, a vibration frequency when an arbitrary vibration is applied to the voxel based on a feature amount for each voxel included in the three-dimensional image data;
Generating means for generating three-dimensional image data over time when each of the voxels is moved according to the vibration frequency set by the setting means;
Display control means for displaying the parallax image groups respectively generated from the three-dimensional image data of each time phase included in the time-dependent three-dimensional image data generated by the generating means, in chronological order;
A medical image diagnostic apparatus comprising:
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011158223A JP5835975B2 (en) | 2011-07-19 | 2011-07-19 | Image processing system, apparatus, method, and medical image diagnostic apparatus |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011158223A JP5835975B2 (en) | 2011-07-19 | 2011-07-19 | Image processing system, apparatus, method, and medical image diagnostic apparatus |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2013022154A true JP2013022154A (en) | 2013-02-04 |
| JP5835975B2 JP5835975B2 (en) | 2015-12-24 |
Family
ID=47781178
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011158223A Expired - Fee Related JP5835975B2 (en) | 2011-07-19 | 2011-07-19 | Image processing system, apparatus, method, and medical image diagnostic apparatus |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5835975B2 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2021145969A (en) * | 2020-03-19 | 2021-09-27 | 株式会社リコー | Information processor, information processing method, program and living body signal measuring system |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1998015226A1 (en) * | 1996-10-08 | 1998-04-16 | Hitachi Medical Corporation | Method and apparatus for forming and displaying image from a plurality of sectional images |
| JP2001319220A (en) * | 2000-05-03 | 2001-11-16 | Ge Medical Systems Global Technology Co Llc | Extraction of related data from medical image data volume |
| JP2007014474A (en) * | 2005-07-06 | 2007-01-25 | Ziosoft Inc | Image processing method |
| US20090148012A1 (en) * | 2007-12-05 | 2009-06-11 | Andres Claudio Altmann | Anatomical modeling from a 3-d image and a surface mapping |
-
2011
- 2011-07-19 JP JP2011158223A patent/JP5835975B2/en not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1998015226A1 (en) * | 1996-10-08 | 1998-04-16 | Hitachi Medical Corporation | Method and apparatus for forming and displaying image from a plurality of sectional images |
| JP2001319220A (en) * | 2000-05-03 | 2001-11-16 | Ge Medical Systems Global Technology Co Llc | Extraction of related data from medical image data volume |
| JP2007014474A (en) * | 2005-07-06 | 2007-01-25 | Ziosoft Inc | Image processing method |
| US20090148012A1 (en) * | 2007-12-05 | 2009-06-11 | Andres Claudio Altmann | Anatomical modeling from a 3-d image and a surface mapping |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2021145969A (en) * | 2020-03-19 | 2021-09-27 | 株式会社リコー | Information processor, information processing method, program and living body signal measuring system |
Also Published As
| Publication number | Publication date |
|---|---|
| JP5835975B2 (en) | 2015-12-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5909055B2 (en) | Image processing system, apparatus, method and program | |
| JP6058306B2 (en) | Image processing system, apparatus, method, and medical image diagnostic apparatus | |
| JP5306422B2 (en) | Image display system, apparatus, method, and medical image diagnostic apparatus | |
| JP6005905B2 (en) | Image processing system, image processing apparatus, and image processing method | |
| JP6430149B2 (en) | Medical image processing device | |
| JP5972533B2 (en) | Image processing system and method | |
| JP2013006022A (en) | Medical image diagnostic apparatus, medical image processing apparatus, and method | |
| JP2012217591A (en) | Image processing system, device, method and program | |
| JP5173053B2 (en) | Image processing system, apparatus, method, and medical image diagnostic apparatus | |
| JP5797485B2 (en) | Image processing apparatus, image processing method, and medical image diagnostic apparatus | |
| US9210397B2 (en) | Image processing system, apparatus, and method | |
| JP5804760B2 (en) | Image processing system and method | |
| JP6058301B2 (en) | Image processing apparatus, image processing method, and medical image diagnostic apparatus | |
| JP6017124B2 (en) | Image processing system, image processing apparatus, medical image diagnostic apparatus, image processing method, and image processing program | |
| JP5835975B2 (en) | Image processing system, apparatus, method, and medical image diagnostic apparatus | |
| JP2012244420A (en) | Image processing system, device, and method | |
| JP5832990B2 (en) | Image display system | |
| JP6005913B2 (en) | Notification device, notification method, and medical image diagnostic device | |
| JP6104982B2 (en) | Image processing apparatus, image processing method, and medical image diagnostic apparatus | |
| JP5813986B2 (en) | Image processing system, apparatus, method and program | |
| JP2013017056A (en) | Image processing system, image processing method, and medical image diagnostic device | |
| JP5974235B2 (en) | Image processing apparatus, image processing method, image processing system, and medical image diagnostic apparatus | |
| JP5868051B2 (en) | Image processing apparatus, image processing method, image processing system, and medical image diagnostic apparatus | |
| JP2013013552A (en) | Medical image diagnostic apparatus, and medical image processing device and method | |
| JP2013122770A (en) | Image processing system, device, method, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140708 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150225 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150303 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150507 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20151006 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20151102 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5835975 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313117 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| LAPS | Cancellation because of no payment of annual fees |