JP4389081B2 - Region-of-interest tracking control method, diagnostic imaging apparatus using the method, and region-of-interest tracking control program - Google Patents
Region-of-interest tracking control method, diagnostic imaging apparatus using the method, and region-of-interest tracking control program Download PDFInfo
- Publication number
- JP4389081B2 JP4389081B2 JP2003311409A JP2003311409A JP4389081B2 JP 4389081 B2 JP4389081 B2 JP 4389081B2 JP 2003311409 A JP2003311409 A JP 2003311409A JP 2003311409 A JP2003311409 A JP 2003311409A JP 4389081 B2 JP4389081 B2 JP 4389081B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- interest
- region
- movement
- reference point
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
- 238000000034 method Methods 0.000 title claims description 76
- 238000002059 diagnostic imaging Methods 0.000 title claims description 10
- 230000033001 locomotion Effects 0.000 claims description 125
- 238000005259 measurement Methods 0.000 claims description 31
- 238000010586 diagram Methods 0.000 claims description 17
- 238000012545 processing Methods 0.000 claims description 14
- 238000004364 calculation method Methods 0.000 claims description 12
- 238000003384 imaging method Methods 0.000 claims description 11
- 239000000284 extract Substances 0.000 claims description 9
- 238000003745 diagnosis Methods 0.000 claims description 8
- 230000004044 response Effects 0.000 claims description 6
- 230000008054 signal transmission Effects 0.000 claims description 5
- 230000005484 gravity Effects 0.000 claims description 3
- 210000001519 tissue Anatomy 0.000 description 45
- 210000004165 myocardium Anatomy 0.000 description 26
- 230000017531 blood circulation Effects 0.000 description 19
- 238000011156 evaluation Methods 0.000 description 10
- 208000010125 myocardial infarction Diseases 0.000 description 7
- 239000002872 contrast media Substances 0.000 description 5
- 238000012937 correction Methods 0.000 description 5
- 210000001715 carotid artery Anatomy 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000004217 heart function Effects 0.000 description 3
- 210000004204 blood vessel Anatomy 0.000 description 2
- 238000002595 magnetic resonance imaging Methods 0.000 description 2
- 210000000056 organ Anatomy 0.000 description 2
- 210000004369 blood Anatomy 0.000 description 1
- 239000008280 blood Substances 0.000 description 1
- 230000008602 contraction Effects 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 210000002837 heart atrium Anatomy 0.000 description 1
- 210000001308 heart ventricle Anatomy 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 210000004115 mitral valve Anatomy 0.000 description 1
- 230000002107 myocardial effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 208000024891 symptom Diseases 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Landscapes
- Apparatus For Radiation Diagnosis (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
Description
本発明は、超音波診断画像、磁気共鳴画像又はＸ線ＣＴ画像の動きのある生体組織に設定される関心領域の追従制御方法、その方法を用いた画像診断装置及び関心領域の追従制御プラグラムの技術に属する。 The present invention relates to a method for controlling the follow-up of a region of interest set in a living tissue in which an ultrasonic diagnostic image, a magnetic resonance image, or an X-ray CT image is moving, an image diagnostic apparatus using the method, and a follow-up control program for a region of interest. Belongs to technology.
超音波診断装置、磁気共鳴イメージング（ＭＲＩ）装置、及びＸ線ＣＴ装置等の画像診断装置は、いずれも被検体の検査部位に係る断層像などをモニタに表示して診断に供するものである。例えば、心臓や血管等の循環器系及びその他の動きのある臓器の場合、それらを構成する生体組織（以下、組織と総称する）の動きを断層像により観察して、それら臓器等の機能を診断することが行なわれている。 Image diagnostic apparatuses such as an ultrasonic diagnostic apparatus, a magnetic resonance imaging (MRI) apparatus, and an X-ray CT apparatus are all provided for diagnosis by displaying a tomographic image relating to the examination site of the subject on a monitor. For example, in the case of a circulatory system such as the heart and blood vessels and other organs with movement, the movement of living tissues (hereinafter referred to as tissues) constituting them is observed by a tomographic image, and the functions of the organs and the like are observed. Diagnosis is going on.
特に、心臓などの機能を定量的に評価できれば、診断の精度が一層向上することが期待されている。例えば、従来、超音波診断装置により得られた画像から心壁の輪郭を抽出し、その心壁輪郭に基づいて心室等の面積、体積、それらの変化率等から心機能（心臓ポンプ機能）を評価したり、局所の壁運動を評価して診断することが試みられている（特許文献１）。また、ドプラ信号等の計測信号に基づいて組織の変位を計測して、例えば局所的収縮又は弛緩の分布を撮像し、これに基づいて心室の運動が活性化している場所を正確に決定したり、あるいは収縮期の心臓壁の厚さを計測する等、定量的に測定する方法が提案されている（特許文献２）。さらに、時々刻々変化する心房や心室の輪郭を抽出して、その輪郭を画像に重ねて表示するとともに、これに基づいて心室等の容量を求める技術が提案されている（特許文献３）。 In particular, if the function of the heart or the like can be quantitatively evaluated, the accuracy of diagnosis is expected to be further improved. For example, conventionally, the contour of the heart wall is extracted from the image obtained by the ultrasonic diagnostic apparatus, and the heart function (heart pump function) is calculated based on the heart wall contour based on the area, volume, change rate, etc. of the ventricle. Attempts have been made to evaluate and diagnose local wall motion (Patent Document 1). In addition, the displacement of the tissue is measured based on a measurement signal such as a Doppler signal, and for example, the distribution of local contraction or relaxation is imaged. Based on this, the location where the motion of the ventricle is activated can be accurately determined. Alternatively, a method for quantitative measurement such as measuring the thickness of the heart wall during systole has been proposed (Patent Document 2). Furthermore, a technique has been proposed in which the contours of the atria and ventricles that change from time to time are extracted, the contours are superimposed on the image, and the volume of the ventricles and the like is calculated based on the contours (Patent Document 3).
ところで、心臓の心筋内の血流量や冠血流を計測して心筋梗塞等を正確かつ的確に診断する方法が望まれている。例えば、被検体に造影剤を投与した後、心臓の心筋の画面上で観測すべき範囲である関心領域を指定し、指定した関心領域内の画素値に基づいて輝度、輝度平均、輝度変化などの計測情報を取得する。取得した計測情報から心筋内の血流量や冠血流を定量的に算出し、算出した血流量に基づいて心筋梗塞などを正確かつ的確に診断する試みがなされている。 By the way, there is a demand for a method for accurately and accurately diagnosing myocardial infarction and the like by measuring the blood flow volume and coronary blood flow in the heart muscle. For example, after administering a contrast agent to the subject, specify the region of interest that is the range to be observed on the heart's myocardium screen, and brightness, brightness average, brightness change, etc. based on the pixel values in the specified region of interest Get measurement information. Attempts have been made to quantitatively calculate the blood flow volume and coronary blood flow in the myocardium from the acquired measurement information, and to accurately and accurately diagnose myocardial infarction based on the calculated blood flow volume.
しかしながら、例えば、心筋の動きにより心筋と関心領域との相対位置が変化して、心筋の全部又は一部が関心領域外に外れることがある。その結果、関心領域において計測された輝度、輝度平均、輝度変化という評価指標の信頼性が損なわれ、有効な評価指標にならないという問題がある。 However, for example, the relative position between the myocardium and the region of interest may change due to the movement of the myocardium, and all or part of the myocardium may be out of the region of interest. As a result, there is a problem in that the reliability of evaluation indexes such as luminance, luminance average, and luminance change measured in the region of interest is impaired and the evaluation index is not effective.
本発明の課題は、生体組織の動きに合わせて関心領域を追従させることを課題とする。 The subject of this invention makes it a subject to make a region of interest track according to the motion of a biological tissue.
本発明は、次に述べる手段により、上記課題を解決するものである。 The present invention solves the above problems by the following means.
本発明の画像診断装置は、被検体の断層像を撮像する撮像手段と、前記撮像手段により得られる動画像を表示する表示部とを備えた画像診断装置において、前記断層像に関心領域を指定する操作部と、前記関心領域の少なくとも一部に対応する前記断層像の動き追跡して前記関心領域を前記断層像の動きに追従させる追従手段を備えることを特徴とする。この場合において、撮像手段を切り離して設けるようにすることができる。また、追従手段は、画像部位の動きを追跡して関心領域の表示位置を移動させるようにすることができる。また、追従手段は、関心領域に１又は複数の基準点を設定し、この基準点に対応する１又は複数の画像部位を抽出してその画像部位の動きを追跡する追跡手段と、その画像部位に対応する基準点の動きに合せて表示部に表示される関心領域を追従表示させる制御手段とを備えて成るものとすることができる。 An image diagnostic apparatus according to the present invention includes: an imaging unit that captures a tomographic image of a subject; and a display unit that displays a moving image obtained by the imaging unit. And an operation unit for tracking the movement of the tomographic image corresponding to at least a part of the region of interest to cause the region of interest to follow the movement of the tomographic image. In this case, the imaging means can be provided separately. The follow-up means can track the movement of the image part and move the display position of the region of interest. The tracking unit sets one or more reference points in the region of interest, extracts one or more image parts corresponding to the reference points, and tracks the movement of the image part, and the image part Control means for following and displaying the region of interest displayed on the display unit in accordance with the movement of the reference point corresponding to.
また、本発明の関心領域の追従制御方法は、被検体を撮影してなる動画像に重ねて表示される関心領域を前記動画像上の生体組織の動きに合せて追従させる制御方法であって、前記動画像の一のフレーム画像を表示する第１ステップと、該表示された前記一のフレーム画像の生体組織に関心領域を規定する目印を重ねて表示させる指令を入力する第２ステップと、前記関心領域に対応させて基準点を定め、該基準点を含むサイズの切出し画像を前記一のフレーム画像に設定する第３ステップと、前記動画像の他のフレーム画像を検索して前記切出し画像と画像の一致度が最も高い同一サイズの局所画像を抽出する第４ステップと、該一致度が最も高い局所画像と前記切出し画像の座標差に基づいて前記基準点の移動先座標を求めて記憶する第５ステップと、該記憶された前記基準点の移動先座標に基づいて前記関心領域を規定する前記目印の移動先座標を求めて前記動画像の他のフレーム画像に重ねて表示する第６ステップとを含んでなることを特徴とする。 The region-of-interest follow-up control method of the present invention is a control method for causing a region of interest displayed superimposed on a moving image obtained by imaging a subject to follow the movement of a living tissue on the moving image. A first step of displaying one frame image of the moving image; and a second step of inputting a command for displaying a mark defining a region of interest superimposed on the living tissue of the displayed one frame image; A third step of determining a reference point corresponding to the region of interest, and setting a cut-out image having a size including the reference point as the one frame image; and searching for another frame image of the moving image to extract the cut-out image A fourth step of extracting a local image of the same size having the highest degree of coincidence with the image, and determining and storing a destination coordinate of the reference point based on a coordinate difference between the local image having the highest degree of coincidence and the cut-out image First And a sixth step of obtaining a destination coordinate of the mark that defines the region of interest based on the stored destination coordinate of the reference point, and displaying it over the other frame images of the moving image. It is characterized by comprising.
すなわち、動きのある生体組織に関心領域を設定する場合、動画像の一のフレーム画像（静止画像）上に、マウス等の入力手段を操作して、関心領域を規定する目印を重ねて表示させることにより設定する。この場合の目印は、例えば、矩形、円形、楕円形などの枠体、あるいは対向する２本の線体などが一般に適用される。しかし、本発明はこれらに限られるものではない。 That is, when a region of interest is set in a moving biological tissue, an input means such as a mouse is operated on a frame image (still image) of a moving image so that a mark defining the region of interest is displayed in an overlapping manner. Set by As the mark in this case, for example, a frame such as a rectangle, a circle, or an ellipse, or two opposing linear bodies are generally applied. However, the present invention is not limited to these.
次に、関心領域に対応させて定める基準点は、関心領域の重心、中心、あるいは目印上の少なくとも１点、又は複数点を設定できる。そして、各基準点を含む予め定めたサイズの切出し画像を一のフレーム画像に自動的に、又はその静止画像上において枠を入力することにより設定する。この切出し画像が続くフレーム画像のどこに移動したかを、切出し画像と画像の一致度が最も高い同一サイズの局所画像を検索する、いわゆるブロックマッチング法等の画像相関処理によって追跡する。これによって、画像の一致度が最も高い局所画像の位置を、切出し画像の移動先として追跡できる。この移動前後の切出し画像の座標差が、基準点の移動前後の座標差に相当するから、基準点の移動方向及び移動量、つまり関心領域の移動方向及び移動量を計測することができる。 Next, as the reference point determined in correspondence with the region of interest, at least one point or a plurality of points on the center of gravity, center, or landmark of the region of interest can be set. Then, a cut-out image having a predetermined size including each reference point is set as one frame image automatically or by inputting a frame on the still image. The location where the extracted image has moved is tracked by image correlation processing such as a so-called block matching method for searching for a local image of the same size having the highest degree of matching between the extracted image and the image. As a result, the position of the local image having the highest degree of coincidence of images can be tracked as the movement destination of the cut image. Since the coordinate difference between the extracted images before and after the movement corresponds to the coordinate difference before and after the movement of the reference point, the movement direction and movement amount of the reference point, that is, the movement direction and movement amount of the region of interest can be measured.
このような追跡処理を、検索により抽出された画像の一致度が最も高い局所画像局所画像を新たな切出し画像として、動画像のさらに他のフレーム画像に対して画像相関法を適用することにより、関心領域の基準点の移動先座標を順次求めることができる。そして、基準点の移動先座標を記憶しておき、その移動先の座標位置に関心領域の目印を動画像に重ねて表示することにより、生体組織の動きに合せて関心領域を追従させることができる。その結果、動きを伴う生体組織を関心領域の範囲内に常に位置させることができるので、信頼性の高い生体組織に関する計測情報を得ることができる。 By applying such an image correlation method to a still image of a moving image, a local image local image having the highest degree of coincidence of images extracted by the search is applied as a new cut-out image. The movement destination coordinates of the reference point of the region of interest can be obtained sequentially. Then, by storing the movement destination coordinates of the reference point and displaying the landmark of the region of interest superimposed on the moving image at the coordinate position of the movement destination, the region of interest can follow the movement of the living tissue. it can. As a result, the living tissue with movement can be always positioned within the range of the region of interest, so that highly reliable measurement information related to the living tissue can be obtained.
例えば、被検体に造影剤を投与した後の心筋内の血流を観察する場合、心筋内に関心領域を設定して、その関心領域内の画素値から評価指標である輝度、輝度平均、輝度変化等を計測することが行なわれる。この場合、本発明によれば、心筋の動きに追従して関心領域が移動するため、心筋と関心領域の相対位置が変化しない。その結果、関心領域内の画素値から算出される評価指標である輝度、輝度平均、輝度変化等の計測値の信頼性が高いことから、その評価指標に基づいて心筋の血流量を定量的に把握することにより、心筋梗塞の程度などを的確に診断することができる。さらに、これらの計測情報の変化例えば輝度変化を線図で表示部に表示させることにより、観者は、輝度変化の割合を視覚的に把握することができるため、一層診断の精度を向上させることができる。 For example, when observing blood flow in the myocardium after the contrast agent is administered to the subject, a region of interest is set in the myocardium, and the luminance, luminance average, and luminance are evaluation indices from the pixel values in the region of interest. Changes are measured. In this case, according to the present invention, since the region of interest moves following the movement of the myocardium, the relative position of the myocardium and the region of interest does not change. As a result, the reliability of measured values such as luminance, luminance average, and luminance change, which are evaluation indexes calculated from pixel values in the region of interest, is high. By grasping, the degree of myocardial infarction and the like can be accurately diagnosed. Furthermore, by displaying these changes in the measurement information, for example, the luminance change on the display unit as a diagram, the viewer can visually grasp the ratio of the luminance change, thereby further improving the accuracy of diagnosis. Can do.
このような生体組織の動きに関心領域を追従させる処理は、検索により抽出された画像の一致度が最も高い局所画像局所画像を新たな切出し画像として、動画像のさらに他のフレーム画像に対して画像相関法を適用することにより、関心領域の指定部位の移動先座標を順次求めることができる。そして、指定部位の移動先座標から関心領域の移動先座標を算出することができる。これにより、動画像の生体組織の動きに合わせて関心領域を追従制御することができる。 The process of causing the region of interest to follow the movement of the living tissue is performed by using the local image with the highest degree of coincidence of the images extracted by the search as a new cut-out image and further frame images of the moving image. By applying the image correlation method, it is possible to sequentially obtain the movement destination coordinates of the designated part of the region of interest. Then, the destination coordinate of the region of interest can be calculated from the destination coordinate of the designated part. Accordingly, the region of interest can be controlled to follow the movement of the living tissue in the moving image.
また、生体組織に関心領域を少なくとも２つ設定し、その２つの関心領域の移動先領域を記憶しておき、その２つの関心領域における輝度、輝度平均、輝度変化などの計測情報をそれぞれ求めることにより、２つの関心領域の計測情報を相対的に把握することができる。したがって、例えば、心臓の心筋に２ヶ所の関心領域を設定し、設定した関心領域において輝度、輝度平均、輝度変化をそれぞれ求めることにより、その２つの関心領域内の心筋内血流量を相対的に把握することができる。この場合において、それらの心臓に係る計測値の線図と心電波形とを時間軸を関連させて表示することにより、心機能に対比して心筋の血流量を把握することができる。 Further, at least two regions of interest are set in the biological tissue, the destination regions of the two regions of interest are stored, and measurement information such as luminance, luminance average, and luminance change in the two regions of interest is obtained. Thus, the measurement information of the two regions of interest can be relatively grasped. Therefore, for example, two regions of interest are set in the heart muscle of the heart, and by calculating the luminance, the luminance average, and the luminance change in the set regions of interest, the blood flow in the myocardium in the two regions of interest is relatively determined. I can grasp it. In this case, it is possible to grasp the blood flow of the myocardium in comparison with the cardiac function by displaying the diagram of the measurement values related to the heart and the electrocardiographic waveform in association with the time axis.
ここで、画像の追跡処理の精度をさらに向上させるため、動画像が超音波撮影法により撮影したものである場合は、動画像に対応するＲＦ信号を記憶しておいて、ＲＦ信号による補正を加えることができる。この場合、上述した一致度が最も高い局所画像と切出し画像の座標差に基づいて指定部位の移動先座標を求め、この移動先座標の周辺に対応する複数の前記ＲＦ信号を抽出し、該抽出した複数のＲＦ信号の相互相関をとり、該相互相関の最大値の位置に応じて前記移動先座標を補正する。 Here, in order to further improve the accuracy of the image tracking processing, when the moving image is taken by an ultrasonic imaging method, an RF signal corresponding to the moving image is stored, and correction by the RF signal is performed. Can be added. In this case, the movement destination coordinates of the designated part are obtained based on the coordinate difference between the local image having the highest degree of coincidence and the cut image, and a plurality of the RF signals corresponding to the periphery of the movement destination coordinates are extracted, The cross-correlation of the plurality of RF signals is taken, and the movement destination coordinates are corrected according to the position of the maximum value of the cross-correlation.
さらに、切出し画像と画像の一致度が最も高い同一サイズの局所画像を抽出する処理時間を短縮するため、その検索範囲を切出し画像よりも設定画素数（例えば、上下左右に例えば３~１０画素）大きい領域に設定することが好ましい。すなわち、生体組織の動きの範囲は、一般に、狭い領域に限られるからである。 Furthermore, in order to shorten the processing time for extracting the local image of the same size with the highest degree of matching between the clipped image and the image, the search range is set to a set number of pixels (for example, 3 to 10 pixels vertically and horizontally). It is preferable to set a large area. That is, the range of movement of the living tissue is generally limited to a narrow region.
一方、上述の場合において、切出し画像のサイズは、基準点の生体組織とは異なる生体組織を含む大きさの領域に設定することが好ましい。切出し画像のサイズが小さすぎると一致する局所画像が多く出現し、真の移動先を特定できない場合が生じたり、逆に大きすぎると動画像の画像領域からはみ出して計測できない場合が生ずるからである。 On the other hand, in the above-described case, it is preferable that the size of the cut-out image is set in a region having a size including a living tissue different from the living tissue at the reference point. This is because if the size of the cutout image is too small, many matching local images will appear, and the true movement destination may not be specified, or conversely, if it is too large, the image may not be measured because it protrudes from the image area of the moving image. .
本発明の画像診断装置は、被検体の断層像を撮影してなる動画像が格納される記憶部と、前記動画像を表示可能な表示部と、指令を入力する操作部と、前記表示部に表示される前記動画像の生体組織の動きを追従する自動追従部と、前記記憶部と前記表示部と前記操作部と前記自動追従部とを接続してなる信号伝送路とを有してなり、前記操作部は、前記記憶部に格納された前記動画像の一のフレーム画像を前記表示部に表示させる指令と、該指令に応じて表示された前記一のフレーム画像の生体組織に関心領域を規定する目印を重ねて表示させる指令を入力する手段を備え、前記自動追従部は、前記表示部に表示された前記一のフレーム画像の前記目印に対応させて基準点を定め、該基準点を含むサイズの切出し画像を前記一のフレーム画像に設定する切出し画像設定手段と、前記記憶部から前記動画像の他のフレーム画像を読み出して、前記切出し画像と画像の一致度が最も高い同一サイズの局所画像を抽出する切出し画像追跡手段と、該一致度が最も高い局所画像と前記切出し画像の座標差を求める移動量演算手段と、該座標差に基づいて前記基準点の移動先座標を求めて記憶する移動追跡手段と、該記憶された前記基準点の移動先座標に基づいて前記関心領域を規定する前記目印の移動先座標を求めて前記動画像の他のフレーム画像に重ねて表示する表示制御手段とを備えて構成することができる。 The diagnostic imaging apparatus of the present invention includes a storage unit that stores a moving image obtained by capturing a tomographic image of a subject, a display unit that can display the moving image, an operation unit that inputs a command, and the display unit An automatic tracking unit that follows the movement of the living tissue of the moving image displayed on the display, and a signal transmission path that connects the storage unit, the display unit, the operation unit, and the automatic tracking unit. The operation unit is interested in a command to display one frame image of the moving image stored in the storage unit on the display unit and a living tissue of the one frame image displayed in response to the command. Means for inputting a command for displaying a mark defining the region in an overlapping manner, wherein the automatic tracking unit determines a reference point corresponding to the mark of the one frame image displayed on the display unit; The cut out image having a size including a point is converted into the one frame image. A cut-out image setting unit for setting the cut-out image, and a cut-out image tracking unit for reading out other frame images of the moving image from the storage unit and extracting a local image of the same size having the highest degree of matching between the cut-out image and the image; A movement amount calculating means for obtaining a coordinate difference between the local image having the highest degree of coincidence and the cut-out image; a movement tracking means for obtaining and storing a movement destination coordinate of the reference point based on the coordinate difference; and Display control means for obtaining the movement destination coordinates of the mark that defines the region of interest based on the movement destination coordinates of the reference point, and displaying the movement coordinates on another frame image. .
また、本発明の関心領域の追従制御プラグラムは、操作卓からの指令に応じて記憶部から被検体の断層像を撮影してなる動画像の一のフレーム画像を読み出して表示部に表示させる第１ステップと、該表示された前記一のフレーム画像の生体組織に関心領域を規定する目印を重ねて表示させる指令の入力を要求する第２ステップと、該要求に応じて操作卓から入力設定された前記目印に対応する生体組織の関心領域に関連させて基準点を定める第３ステップと、前記基準点を含むサイズの切出し画像を前記一のフレーム画像に設定する第３ステップと、前記動画像の他のフレーム画像を検索して前記切出し画像と画像の一致度が最も高い同一サイズの局所画像を抽出する第４ステップと、該一致度が最も高い局所画像と前記切出し画像の座標差に基づいて前記基準点の移動先座標を求めて記憶する第５ステップと、該記憶された前記基準点の移動先座標に基づいて前記関心領域を規定する前記目印の移動先座標を求めて前記動画像の他のフレーム画像に重ねて表示させる第６ステップとを含んでなることを特徴とする。 The region-of-interest tracking control program of the present invention reads out one frame image of a moving image obtained by capturing a tomographic image of a subject from a storage unit in response to a command from the console and displays the frame image on the display unit. 1 step, a second step for requesting input of a command for displaying a mark defining the region of interest superimposed on the living tissue of the displayed one frame image, and input setting from the console in response to the request A third step of determining a reference point in relation to the region of interest of the living tissue corresponding to the landmark, a third step of setting a cut-out image having a size including the reference point as the one frame image, and the moving image fourth step and the coordinates of the cut image the degree of coincidence with the highest local image matching degree of the cut image and the image searching for another frame image is extracted local image of highest identity size A fifth step of obtaining and storing a destination coordinate of the reference point based on the reference point, and obtaining a destination coordinate of the mark that defines the region of interest based on the stored destination coordinate of the reference point. And a sixth step of displaying a moving image superimposed on another frame image.
本発明によれば、生体組織の動きに合わせて関心領域を追従させることができる。 According to the present invention, it is possible to cause the region of interest to follow the movement of the living tissue.
（実施の形態１）
本発明の関心領域の追従制御方法を適用してなる一実施の形態の画像診断装置について、図１〜図４を用いて説明する。図１は本実施形態の関心領域の追従制御方法における手順を示し、図２は図１の関心領域の追従制御方法を適用してなる画像診断装置のブロック構成図である。図２に示すように、画像診断装置は、被検体の断層像を撮影してなる動画像が格納される画像記憶部１と、動画像を表示可能な表示部２と、関心領域を画成する指令を入力する操作卓３と、表示部２に表示される動画像の生体組織の動きに関心領域を追従させる自動追従部４と、自動追従部４により追従させる関心領域の各種の計測情報例えば画素の輝度、輝度平均、輝度変化を算出する関心領域計測情報算出部５と、これらを接続してなる信号伝送路６を含んで構成されている。画像記憶部１には、破線で示した診断画像撮像装置７から被検体の断層像を撮影してなる動画像がオンライン又はオフラインで格納されるようになっている。診断画像撮像装置７としては、超音波診断装置、磁気共鳴イメージング（ＭＲＩ）装置及びＸ線ＣＴ装置等の診断装置が適用可能である。
(Embodiment 1)
An image diagnostic apparatus according to an embodiment to which the region-of-interest tracking control method of the present invention is applied will be described with reference to FIGS. FIG. 1 shows a procedure in the region-of-interest tracking control method of the present embodiment, and FIG. 2 is a block diagram of an image diagnostic apparatus to which the region-of-interest tracking control method of FIG. 1 is applied. As shown in FIG. 2, the diagnostic imaging apparatus defines an
操作卓３は、画像記憶部１に格納された動画像の一のフレーム画像を表示部２に表示させる指令を入力可能に形成されている。
The console 3 is formed so that a command for displaying one frame image of a moving image stored in the
自動追従部４は、画像診断装置全体を制御する制御手段８と、表示部２に表示された一のフレーム画像の前記関心領域の基準点を含むサイズの切出し画像を設定する切出し画像設定手段９と、画像記憶部１から動画像の他のフレーム画像を読み出して、切出し画像と画像の一致度が最も高い同一サイズの局所画像を抽出する切出し画像追跡手段１０と、一致度が最も高い局所画像と切出し画像の座標差を求める移動量演算手段１１と、その座標差に基づいて関心領域２３の基準点２３ａの移動先座標を求める移動追跡手段１２と、その基準点の移動先座標に基づいて求められた関心領域を動画像の他のフレーム画像に重ねて表示する表示制御手段１４とを備えている。
The automatic follow-up
関心領域計測情報算出部５は、自動追従部４により移動された関心領域において、計測情報例えば関心領域内の画素値に基づいて輝度、輝度平均、輝度変化等を定量的に求めるとともに、これらの計測情報を線図で表示部２に表示させる機能を有して構成されている。
The region-of-interest measurement information calculation unit 5 quantitatively obtains luminance, luminance average, luminance change, and the like based on measurement information, for example, pixel values in the region of interest, in the region of interest moved by the
次に、本実施形態の画像診断装置の詳細な機能構成について、図１に示した処理手順に従って動作とともに説明する。まず、関心領域の追従制御方法は、操作卓３から組織の動き追従モードを選択する指令が入力されることによって開始する（Ｓ１）。自動追従部４の制御手段８は、画像記憶部１から動画像の最初のフレーム画像ｆt(t=0)を読み出して表示部２に表示させる（Ｓ２）。例えば、最初のフレーム画像ｆ0として図３に示す心臓の心室２１の断層像が表示されたものとする。図３において、操作者が観察したい生体組織の関心領域２３として、心筋２２の特定の範囲を選択する。このとき、操作者は操作部３のマウスなどを操作してフレーム画像ｆ０上に例えば円形、矩形、楕円形の関心領域２３を描出する指令を入力する。その指令に基づいて表示された一のフレーム画像において生体組織の関心領域する目印（マーク）を重畳表示する。そして、画像上の関心領域に対応する基準点２３ａを定める。このとき、基準点２３ａとして、関心領域の重心、中心、又は目印上の少なくとも１点、又は複数点、あるいは関心領域から所定の距離を離れた点等を手動設定又は自動設定させる。なお、図３において、符号２４は僧帽弁である。
Next, the detailed functional configuration of the diagnostic imaging apparatus of the present embodiment will be described along with the operation according to the processing procedure shown in FIG. First, the region-of-interest tracking control method starts when a command for selecting a tissue motion tracking mode is input from the console 3 (S1). The control means 8 of the
関心領域２３の基準点２３ａが設定されると、制御手段８はフレーム画像ｆ0上の基準点２３ａの座標を取込み、切出し画像設定手段９に送る（Ｓ３）。切出し画像設定手段９は、図４（ａ）に示す様に、基準点２３ａの画像を中心として、縦横２(Ａ+１)画素（但しＡは自然数）のサイズの矩形領域を切出し画像２５として設定する（Ｓ４）。ここで、切出し画像２５のサイズは、基準点２３ａの生体組織とは異なる生体組織を含む大きさの領域に設定することが好ましい。例えば、これは、切出し画像２５のサイズが小さすぎると一致する局所画像が多く出現し、真の移動先を特定できない場合が生じたり、逆に大きすぎるとフレーム画像ｆ0の画像領域からはみ出して計測できない場合が生ずるからである。
When the
切出し画像追跡手段１０は、画像記憶部１から動画像の次のフレーム画像ｆ1を読み出し、切出し画像２５と画像の一致度が最も高い同一サイズの局所画像を抽出する（Ｓ５）。この抽出処理は、いわゆるブロックマッチング法と称される画像相関法を適用する。この抽出処理をフレーム画像ｆ1の全領域について行なうと、処理時間がかかり過ぎる。そこで、抽出処理時間を短縮するため、本実施形態では、フレーム画像ｆ1よりも十分に小さい、図４（ｂ）に示す検索領域２６について行なうようにしている。つまり、検索領域２６は、切出し画像２５に対して上下左右に一定の振り幅の画素数Ｂを付加した矩形領域とする。この画素数Ｂは、関心領域内の組織の移動量よりも大きく、例えば３〜１０画素に設定する。これは、心臓などの循環器系の動く範囲は、通常の視野において、狭い領域に限られるからである。このようにして、検索領域２６内の同一サイズの局所画像２７を順次ずらして切出し画像２５との画像の一致度を求める。
The cutout image tracking means 10 reads the next frame image f1 of the moving image from the
次に、検索した複数の局所画像２７の内で画像の一致度が最も高い局所画像２７maxを抽出し、局所画像２７maxを切出し画像２５の移動先とし、局所画像２７maxの座標を求める（Ｓ６）。これらの画像の座標は、中心画素の座標、あるいは矩形領域の何れかの角の座標で代表する。そして、局所画像２７maxと切出し画像２５の座標差から基準点２３ａの移動先座標を求め、これに基づいて基準点２３ａの移動先座標を求めて記憶するとともに、その基準点２３ａの移動先座標に基づいて関心領域２３を表示制御手段１４により移動操作して所望の生体組織の部位に重畳表示する（Ｓ７）。なお、局所画像２７maxと切出し画像２５における基準点２３ａの相対位置は変化しないものとして扱っている。
Next, a local image 27max having the highest image matching degree is extracted from the plurality of searched
そして、Ｓ７で求められた基準点２３ａの移動先座標に基づいて移動された関心領域２３において、各種の計測情報例えば関心領域２３内の画素値の輝度、輝度平均、輝度変化を関心領域計測情報算出部５により算出させる（Ｓ８）。すなわち、移動前後の関心領域２３内の輝度平均に計測させることにより、動きを伴う心筋内の血流量を正確かつ定量的に計測することができる。また、診断画像上の関心領域内の画素値から、輝度、輝度平均、輝度変化等に関する物理量である計測情報を定量的に求めることができる。
Then, in the region of
このようにして求めた計測情報に基づいて、さらに関心領域計測情報算出部５は、関心領域２３内の画素値の輝度、輝度平均、輝度変化等をグラフで表示部２に表示させる（Ｓ９）。これにより、観者は、関心領域２３内の生体組織例えば心筋に流れる血流量を視覚的かつ定量的に把握することができる。
Based on the measurement information thus obtained, the region-of-interest measurement information calculation unit 5 further displays the luminance, average luminance, luminance change, and the like of the pixel values in the region of
次に、ステップＳ１０に進み、動画像の全てのフレーム画像について関心領域２３の追従が終了したか否か判断し、未処理のフレーム画像があれば、ステップＳ５に戻ってＳ５~Ｓ１０の処理を繰り返す。全てのフレーム画像について関心領域２３の追従が終了した場合は、追従処理動作を終了する。
Next, the process proceeds to step S10, where it is determined whether or not the tracking of the region of
上述したように、本実施形態によれば、画像相関法を適用することにより、生体組織の動きに関心領域２３の基準点２３ａの移動先の座標を順次求めることができるから、関心領域２３を生体組織の動きに追従させて表示することができる。その結果、診断画像上の関心領域２３の目印と生体組織との相対位置が変化することを回避できるから、計測すべき生体組織を確実に関心領域２３の目印内に確実に位置させることができるので、関心領域２３において計測される評価指標の信頼性が向上する。
As described above, according to the present embodiment, by applying the image correlation method, the coordinates of the movement destination of the
ここで、上記実施形態を用いて、生体組織の指定部位の動きを計測してなる具体例について図５〜図７を用いて説明する。図５（ａ）は図３に示した関心領域２３を心筋の画像に１つ重畳表示させた画像例であり、同図（ｂ）は被検体に造影剤を投与した後、診断画像上の関心領域２３内の画素値に基づいて輝度平均差をグラフで表した画像例である。グラフの横軸は時間を、縦軸は輝度平均差を表しており、輝度平均差の算出方法は、時間輝度曲線など公知の方法を用いている。このグラフを参照することにより、関心領域２３内の心筋内の血流量を視覚的かつ定量的に把握することができ、心筋梗塞などの診断を的確に行うことができる。
Here, the specific example formed by measuring the movement of the designated site | part of a biological tissue using the said embodiment is demonstrated using FIGS. FIG. 5A is an image example in which the region of
一方、図６（ａ）は図３に示した関心領域２３を心筋２２の心壁を挟んで２つ重畳表示させた画像例であり、同図（ｂ）は被検体に造影剤を投与した後、関心領域２３内の画素値に基づいて輝度平均差をそれぞれグラフで表した画像例である。グラフの横軸は時間を、縦軸は輝度平均差を現しており、輝度平均差の算出方法は、時間輝度曲線など公知の方法を用いている。このグラフを参照することにより、例えば心筋内の血流量を他の部位の血流量と比較することで相対的に把握することができるので、心筋梗塞の発症場所などを的確に把握できる可能性が高まる。この場合において、それらの心臓に係る計測値のグラフと、ＥＣＧ波形、心音波形、などの情報を表示部２に時間軸を関連させて表示することも好ましい。これにより、心機能に対比しながら心筋の血流量を把握することができる。
On the other hand, FIG. 6A is an example of an image in which the region of
また、図７は、図１で関心領域の表示態様例を示している。同図（ａ）は楕円形の枠体で関心領域２３Ａを画成した表示態様例であり、同図（ｂ）は円形の枠体で関心領域２３Ｂを画成した表示態様例であり、また同図（ｃ）は矩形の枠体で関心領域２３Ｃを画成した表示態様例であり、さらに同図（ｄ）は対向する２本の線体により関心領域２３Ｄを画成した表示態様例である。これらの関心領域２３Ａ〜２３Ｄはそれぞれ操作卓３のマウス等からの指令に基づいて表示部２に重畳表示させる。この場合において、目印の表示態様はこれらに限られるものではなく、任意の表示態様を設定することができる。
（実施形態２）
図１の実施形態では、１つのフレーム画像についての関心領域２３の基準点２３ａの追従が終了する度に（Ｓ７）、その基準点２３ａの移動に基づいて関心領域２３を画面上に移動させ、移動した関心領域２３に規定される組織に関する各種情報を算出させるとともに（Ｓ８）、それらの情報を表示部に表示させる（Ｓ９）ようにした例を説明した。本発明はこれに限らず、図８に示すように、図１のステップＳ１０をステップＳ７の後に配置し、全てのフレーム画像についての基準点２３ａの追跡が終了した後に、ステップＳ８、９の処理を実行するようにしてもよい。
FIG. 7 shows an example of the display mode of the region of interest in FIG. FIG. 4A is an example of a display mode in which the region of
(Embodiment 2)
In the embodiment of FIG. 1, each time the tracking of the
ここで、画像相関法による画像追跡処理の具体例を、図９を用いて説明する。図示例は、説明を簡単にするために、切出し画像２５のサイズを矩形の９画素領域とし、検索領域２６についても矩形の２５画素領域として説明する。つまり、同図（ａ）に示す切出し画像２５は、基準点２３ａの画素を中心としてＡ＝１画素に設定した例であり、同図（ｂ）に示す検索領域２６はＢ＝１画素に設定した例である。これによれば、同図（ｂ）に示す様に、９個の局所領域２７について相関値を求め、相関が最も大きい位置が移動先座標に相当することになる。
（実施形態３）
本実施形態は、超音波撮影法により撮影して得られる動画像による生体組織の追跡処理に適用できるものである。特に、動画像に対応するＲＦ信号を記憶しておき、画像相関法により求めた画像の一致度が最も高い局所画像の位置を、ＲＦ信号を用いて補正することにより、生体組織の動きを追従する関心領域２３の基準点２３ａの移動先を一層精度よく求めることができる。
Here, a specific example of the image tracking process by the image correlation method will be described with reference to FIG. In the illustrated example, in order to simplify the description, the size of the cut-out
(Embodiment 3)
The present embodiment can be applied to a biological tissue tracking process using a moving image obtained by ultrasonic imaging. In particular, the RF signal corresponding to the moving image is stored, and the position of the local image having the highest degree of image matching obtained by the image correlation method is corrected by using the RF signal to follow the movement of the living tissue. The movement destination of the
図１０に示すように、超音波診断装置１７から動画像、及びその動画像の再構成に用いたＲＦ信号（超音波エコー信号を受信処理した信号）が、それぞれオンライン又は記録媒体を介して画像記憶部１及びＲＦ信号記憶部１８に格納されるようになっている。ＲＦ信号記憶部１８は、信号伝送路６を介して自動追従部４に接続されている。また、自動追従部４に移動量補正部１３が設けられている。
As shown in FIG. 10, a moving image from the ultrasound
図１１に、本実施形態の主要部の処理手順を示す。本実施形態の追跡処理の基本は、図８のステップＳ６で求めた切出し画像の移動先座標を取込み、基準点２３ａの移動先座標を算出する（Ｓ２１）。次に、切出し画像２５の基準点２３ａの座標と、一致度が最も高い局所画像２７maxの基準点２３ａの座標の周辺の画像に係るＲＦ信号をＲＦ信号記憶部１８から抽出する（Ｓ２２）。つまり、移動前後の関心領域２３の基準点２３ａの周辺画像のＲＦ信号を抽出する。そして、移動前後のＲＦ信号の相互相関をとり、その相関値を求める（Ｓ２３）。この場合、まず、移動前後の何れかのＲＦ信号を画像相関法で求めた移動量（画素数）に対応する分だけ時間軸をずらし、両者の相互相関（例えば、積和演算）をとりながら、移動前後の何れかのＲＦ信号をずらす。そして、求めた相互相関値が最大値となるずれ量τが、ＲＦ信号による移動量の補正値として求められる（Ｓ２４）。そして、先に画像相関法で求めた基準点２３ａの移動量に、ＲＦ信号を用いて求めた基準点２３ａの移動量を加算して、基準点２３ａの移動量を補正する（Ｓ２５）。
FIG. 11 shows the processing procedure of the main part of this embodiment. The basis of the tracking process of the present embodiment is to capture the movement destination coordinates of the cut-out image obtained in step S6 of FIG. 8, and calculate the movement destination coordinates of the
ここで、移動前後のＲＦ信号の相互相関値の最大値が、基準点２３ａの移動量の相関すること、及びそれにより基準点２３ａの移動量を補正することにより、位置の計測精度が向上する理由を、図１２を用いて説明する。なお、図１２（ａ）においては、移動前の基準点周辺のＲＦ信号４１と、移動後の基準点周辺のＲＦ信号４２の時間軸を、画像相関法で求めた移動量に基づいてずらした状態で示している。そして、例えば、ＲＦ信号４１の時間軸を正負何れかの方向にずらしながらＲＦ信号４２との相互相関を計算すると、同図（ｂ）に示す最大値を示す相互相関値４３が得られる。このＲＦ信号４１とＲＦ信号４２のずらした位相差をτとすると、この移動量τが画像相関法の移動量に加えて補正すべき移動量に相当する。これにより、画像相関法の移動量の計測精度を向上できる。
Here, the maximum value of the cross-correlation value of the RF signal before and after the movement correlates with the movement amount of the
以上説明したように、本発明の各実施形態によれば、診断画像上の関心領域を生体組織に動きに精度よく追従させることができるので、生体組織の動きにより生体組織と関心領域との相対位置が変化することを回避できる。すなわち、動きを伴う生体組織を関心領域内に常に位置させることができので、その関心領域において計測される計測情報の信頼性が向上する。 As described above, according to each embodiment of the present invention, the region of interest on the diagnostic image can be made to accurately follow the movement of the living tissue, so that the relative movement between the living tissue and the region of interest is determined by the movement of the living tissue. A change in position can be avoided. That is, since a living tissue with movement can always be positioned in the region of interest, the reliability of measurement information measured in the region of interest is improved.
例えば、心筋内の血流量を観察する場合、被検体に造影剤を投与した後、心筋内に関心領域を設定して、その関心領域の目印内の画素値から評価指標である輝度、輝度平均、輝度変化等を計測し、計測した評価指標に基づいて心筋内の血流量を把握することにより心筋梗塞等の診断を行うことが行われる。この場合、本発明によれば、関心領域が常に心筋の動きに追従して移動するため確実に関心領域の目印内の画素値から評価指標である輝度、輝度平均、輝度変化等を求めることができ、評価指標の信頼性を向上させることができる。その評価指標に基づいて心筋の血流量を定量的に把握することにより、心筋梗塞の発症場所や症状の程度などを正確かつ的確に診断できる可能性が高まる。さらに、これらの計測情報を線図で表示部に表示させることにより、観者は、計測情報を視覚的に把握することができるため、容易に診断を行うことが可能となる。 For example, when observing blood flow in the myocardium, a contrast agent is administered to the subject, a region of interest is set in the myocardium, and the luminance and luminance averages that are evaluation indices are determined from the pixel values in the landmark of the region of interest. Diagnosis of myocardial infarction or the like is performed by measuring a change in luminance or the like and grasping a blood flow volume in the myocardium based on the measured evaluation index. In this case, according to the present invention, since the region of interest always moves following the movement of the myocardium, it is possible to reliably obtain the evaluation index, such as the luminance, the luminance average, and the luminance change, from the pixel value within the landmark of the region of interest. And the reliability of the evaluation index can be improved. By quantitatively grasping the blood flow rate of the myocardium based on the evaluation index, the possibility of accurately and accurately diagnosing the onset location of the myocardial infarction and the degree of symptoms increases. Further, by displaying these pieces of measurement information on the display unit in a diagram, the viewer can visually grasp the measurement information, and thus can easily make a diagnosis.
また、本発明は、心臓の心筋内の血流量を計測することに限らず、生体組織の動きを伴う部位であれば、どのような部位の生体組織にも適用できることは明らかである。例えば、頚動脈などの大血管壁の血流量の計測に適用できる。この場合、頚動脈の境界を含む関心領域を重畳表示し、表示された関心領域の目印を頚動脈の動きに自動追従させ、その関心領域内の画素値の輝度、輝度平均、輝度変化に基づいて血流量を計測することができる。 Further, the present invention is not limited to measuring the blood flow in the myocardium of the heart, but it is obvious that the present invention can be applied to any part of the living tissue as long as it is a part accompanying the movement of the living tissue. For example, the present invention can be applied to the measurement of the blood flow volume of a large blood vessel wall such as a carotid artery. In this case, the region of interest including the boundary of the carotid artery is displayed in a superimposed manner, the mark of the displayed region of interest is automatically followed by the movement of the carotid artery, and blood based on the luminance, luminance average, and luminance change of the pixel values in the region of interest. The flow rate can be measured.
また、上述の実施形態は、オフラインで行なう例について説明したが、ブロックマッチング法の処理に係る速度を向上すれば、オンラインあるいはリアルタイムの動画像にも適用できる。 Moreover, although the above-mentioned embodiment demonstrated the example performed offline, if the speed concerning the process of a block matching method is improved, it can apply also to an online or real-time moving image.
また、上述の実施形態は、２次元の断層像を例に説明したが、３次元断層像にも適用できることはいうまでもない。 Moreover, although the above-described embodiment has been described by taking a two-dimensional tomographic image as an example, it is needless to say that it can also be applied to a three-dimensional tomographic image.
また、画像相関法は、切出し画像と局所画像の対応する画像の一致度を算出する方法であれば公知の技術を用いることができる。例えば、一般に知られている切出し画像と局所画像の対応する画素ごとに画素値の積を求め、その絶対値の総和をもって相関値とする2次元相互相関法、切出し画像と局所画像の各画素値の平均値を画素ごとの画素値から引き、その積を求め、その絶対値の総和をもって相関値とする2次元正規化相互相関法、画素ごとに画素値の差の絶対値を求め、その絶対値の総和をもって相関値とするＳＡＤ法、画素ごとの画素値の差の二乗値を求め、その二乗値の総和をもって相関値とするＳＳＤ法などを適用できる。このとき、相関最大である局所画像を選ぶためには2次元相互相関法と２次元正規化相互相関法では相関値が最大の、また、ＳＡＤ法、ＳＳＤ法では相関値が最小の局所画像を画像の一致度が最も高い局所画像とすればよい。この相関最大（相関値が最大又は最小）である局所画像を選び出すことに画像相関法の特徴がある。 As the image correlation method, a known technique can be used as long as it is a method for calculating the degree of coincidence between corresponding images of the cut-out image and the local image. For example, the two-dimensional cross-correlation method that calculates the product of pixel values for each corresponding pixel of the cut-out image and local image that are generally known, and uses the sum of the absolute values as the correlation value, each pixel value of the cut-out image and the local image The two-dimensional normalized cross-correlation method that subtracts the average value of each pixel from the pixel value for each pixel, finds the product, and uses the sum of the absolute values as the correlation value, finds the absolute value of the pixel value difference for each pixel, and calculates the absolute value The SAD method that uses the sum of the values as the correlation value, the SSD method that calculates the square value of the difference between the pixel values for each pixel, and uses the sum of the square values as the correlation value can be applied. At this time, in order to select a local image having the maximum correlation, the local image having the maximum correlation value in the two-dimensional cross-correlation method and the two-dimensional normalized cross-correlation method and the minimum correlation value in the SAD method and the SSD method are selected. What is necessary is just to make it a local image with the highest coincidence degree of images. A feature of the image correlation method is that a local image having the maximum correlation (maximum or minimum correlation value) is selected.
１ 画像記憶部
２ 表示部
３ 操作卓
４ 自動追従部
５ 動態情報演算部
６ 信号伝送路
７ 診断画像撮像装置
８ 制御手段
９ 切出し画像設定手段
１０ 切出し画像追跡手段
１１ 移動量演算手段
１２ 移動追跡手段
１４ 表示制御手段
DESCRIPTION OF
Claims (25)
前記追従手段は、前記関心領域に１又は複数の基準点を設定し、該基準点に対応する１又は複数の画像部位を抽出して該画像部位の動きを追跡する追跡手段と、前記画像部位に対応する前記基準点の動きに合せて前記表示部に表示される前記関心領域を追従表示させる制御手段とを備えて成る画像診断装置。 A display unit for displaying a moving image obtained by capturing a tomographic image of a subject, an operation unit for designating a region of interest in the tomographic image, and an image portion of the tomographic image corresponding to at least a part of the region of interest. extracted, e Bei tracking means for moving the display position of the ROI to track the movement of the image portion,
The tracking means sets one or more reference points in the region of interest, extracts one or more image parts corresponding to the reference points, and tracks the movement of the image parts; and the image parts And a control unit that displays the region of interest displayed on the display unit in accordance with the movement of the reference point corresponding to the reference point.
前記第５ステップは、前記一致度が最も高い局所画像と前記切出し画像の座標差に基づいて前記基準点の移動先座標を求め、該移動先座標の周辺に対応する複数の前記ＲＦ信号を抽出し、該抽出した複数のＲＦ信号の相互相関をとり、該相互相関の最大値の位置に応じて前記移動先座標を補正することを特徴とする請求項２に記載の関心領域の追従制御方法。 The moving image is imaged by an ultrasonic imaging method, and an RF signal corresponding to the moving image is stored,
The fifth step obtains a destination coordinate of the reference point based on a coordinate difference between the local image having the highest degree of coincidence and the extracted image, and extracts a plurality of the RF signals corresponding to the periphery of the destination coordinate 3. The region-of-interest tracking control method according to claim 2 , wherein the extracted plurality of RF signals are cross-correlated and the destination coordinate is corrected according to the position of the maximum value of the cross-correlation. .
前記操作部は、前記記憶部に格納された前記動画像の一のフレーム画像を前記表示部に表示させる指令と、該指令に応じて表示された前記一のフレーム画像の生体組織に関心領域を規定する目印を重ねて表示させる指令を入力する手段を備え、
前記自動追従部は、前記表示部に表示された前記一のフレーム画像の前記目印に対応させて基準点を定め、該基準点を含むサイズの切出し画像を前記一のフレーム画像に設定する切出し画像設定手段と、前記記憶部から前記動画像の他のフレーム画像を読み出して、前記切出し画像と画像の一致度が最も高い同一サイズの局所画像を抽出する切出し画像追跡手段と、該一致度が最も高い局所画像と前記切出し画像の座標差を求める移動量演算手段と、該座標差に基づいて前記基準点の移動先座標を求めて記憶する移動追跡手段と、該記憶された前記基準点の移動先座標に基づいて前記関心領域を規定する前記目印の移動先座標を求めて前記動画像の他のフレーム画像に重ねて表示する表示制御手段とを備えてなる画像診断装置。 A storage unit storing a moving image obtained by capturing a tomographic image of a subject, a display unit capable of displaying the moving image, an operation unit for inputting a command, and the moving image displayed on the display unit An automatic follower that follows the movement of the living tissue, and a signal transmission path that connects the storage unit, the display unit, the operation unit, and the automatic follower,
The operation unit includes a command for displaying one frame image of the moving image stored in the storage unit on the display unit, and a region of interest in the living tissue of the one frame image displayed in response to the command. A means for inputting a command to display a specified mark in a superimposed manner,
The automatic tracking unit determines a reference point corresponding to the mark of the one frame image displayed on the display unit, and sets a cut image having a size including the reference point as the one frame image. A setting unit; and a clipped image tracking unit that reads out another frame image of the moving image from the storage unit and extracts a local image of the same size having the highest matching degree between the cutting image and the image; and the matching degree is the highest. Movement amount calculating means for obtaining a coordinate difference between a high local image and the cut-out image, movement tracking means for obtaining and storing a movement destination coordinate of the reference point based on the coordinate difference, and movement of the stored reference point An image diagnostic apparatus comprising: a display control unit that obtains a movement destination coordinate of the mark that defines the region of interest based on the previous coordinate and displays the moving image on another frame image.
前記移動追跡手段は、前記座標差に基づいて前記基準点の移動先座標を求め、該基準点の移動先座標の周辺に対応する複数の前記ＲＦ信号を抽出し、該抽出した複数のＲＦ信号の相互相関をとり、該相互相関の最大値の位置に応じて前記移動先座標を補正することを特徴とする請求項１４に記載の画像診断装置。 The moving image stored in the storage unit is captured by ultrasonic imaging, and an RF signal corresponding to the moving image is stored in the storage unit,
The movement tracking unit obtains a movement destination coordinate of the reference point based on the coordinate difference, extracts a plurality of the RF signals corresponding to the periphery of the movement destination coordinate of the reference point, and extracts the plurality of extracted RF signals. The image diagnosis apparatus according to claim 14 , wherein the cross-correlation is calculated and the movement destination coordinates are corrected according to the position of the maximum value of the cross-correlation.
前記第５ステップは、前記一致度が最も高い局所画像と前記切出し画像の座標差に基づいて前記基準点の移動先座標を求め、該移動先座標の周辺に対応する複数の前記ＲＦ信号を抽出し、該抽出した複数のＲＦ信号の相互相関をとり、該相互相関の最大値の位置に応じて前記基準点の移動先座標を補正することを特徴とする請求項２２に記載の関心領域の追従制御プログラム。 The moving image is captured by an ultrasonic imaging method, and an RF signal corresponding to the moving image is stored in the storage unit,
The fifth step obtains a destination coordinate of the reference point based on a coordinate difference between the local image having the highest degree of coincidence and the extracted image, and extracts a plurality of the RF signals corresponding to the periphery of the destination coordinate and, taking the cross-correlation of a plurality of RF signals the extracted, the region of interest according to claim 22, characterized in that to correct the movement destination coordinates of the reference point according to the position of the maximum value of the cross correlation Follow-up control program.
Priority Applications (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003311409A JP4389081B2 (en) | 2002-09-12 | 2003-09-03 | Region-of-interest tracking control method, diagnostic imaging apparatus using the method, and region-of-interest tracking control program |
| EP03795425.2A EP1543773B1 (en) | 2002-09-12 | 2003-09-12 | Biological tissue motion trace method and image diagnosis device using the trace method |
| CNB038213168A CN100393283C (en) | 2002-09-12 | 2003-09-12 | Biological tissue motion trace method and image diagnosis device using the trace method |
| US10/527,744 US8167802B2 (en) | 2002-09-12 | 2003-09-12 | Biological tissue motion trace method and image diagnosis device using the trace method |
| PCT/JP2003/011701 WO2004024003A1 (en) | 2002-09-12 | 2003-09-12 | Biological tissue motion trace method and image diagnosis device using the trace method |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002267071 | 2002-09-12 | ||
| JP2003311409A JP4389081B2 (en) | 2002-09-12 | 2003-09-03 | Region-of-interest tracking control method, diagnostic imaging apparatus using the method, and region-of-interest tracking control program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2004121835A JP2004121835A (en) | 2004-04-22 |
| JP4389081B2 true JP4389081B2 (en) | 2009-12-24 |
Family
ID=32301601
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003311409A Expired - Lifetime JP4389081B2 (en) | 2002-09-12 | 2003-09-03 | Region-of-interest tracking control method, diagnostic imaging apparatus using the method, and region-of-interest tracking control program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4389081B2 (en) |
Families Citing this family (27)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005305024A (en) * | 2004-04-26 | 2005-11-04 | Toshiba Corp | Computed tomographic apparatus |
| JP4536419B2 (en) * | 2004-05-19 | 2010-09-01 | 株式会社日立メディコ | Ultrasonic diagnostic equipment |
| JP2006102125A (en) * | 2004-10-05 | 2006-04-20 | Toshiba Corp | Method for identifying region of interest with time in medical image processing apparatus and medical image processing apparatus |
| US7609876B2 (en) * | 2004-10-22 | 2009-10-27 | Siemens Medical Solutions Usa, Inc. | Virtual grid alignment of sub-volumes |
| JP4537300B2 (en) * | 2005-09-14 | 2010-09-01 | アロカ株式会社 | Ultrasonic diagnostic equipment |
| JP2007125152A (en) * | 2005-11-02 | 2007-05-24 | Hitachi Medical Corp | Ultrasonic diagnostic apparatus |
| JP4945273B2 (en) * | 2006-04-24 | 2012-06-06 | 株式会社東芝 | Ultrasonic diagnostic apparatus and control program for ultrasonic diagnostic apparatus |
| JP5415669B2 (en) * | 2006-09-25 | 2014-02-12 | 株式会社日立メディコ | Ultrasonic diagnostic equipment |
| JP5591440B2 (en) * | 2007-01-17 | 2014-09-17 | 株式会社東芝 | Medical image display device |
| JP2010094181A (en) * | 2008-10-14 | 2010-04-30 | Toshiba Corp | Ultrasonic diagnostic apparatus and data processing program of the same |
| JP5364334B2 (en) * | 2008-10-24 | 2013-12-11 | 株式会社東芝 | Medical image processing device |
| JP5523791B2 (en) | 2008-10-27 | 2014-06-18 | 株式会社東芝 | X-ray diagnostic apparatus and image processing apparatus |
| JP5459832B2 (en) * | 2009-06-02 | 2014-04-02 | 東芝メディカルシステムズ株式会社 | Ultrasonic diagnostic equipment |
| JP5498185B2 (en) * | 2010-02-03 | 2014-05-21 | 株式会社東芝 | Ultrasonic diagnostic apparatus and ultrasonic image display program |
| JP5501813B2 (en) * | 2010-03-17 | 2014-05-28 | ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー | Ultrasonic diagnostic apparatus and control program therefor |
| JP5789599B2 (en) * | 2010-04-15 | 2015-10-07 | 株式会社日立メディコ | Ultrasonic diagnostic equipment |
| JP2012143358A (en) * | 2011-01-11 | 2012-08-02 | Toshiba Corp | Ultrasonic diagnostic equipment and program |
| JP6085435B2 (en) * | 2012-09-05 | 2017-02-22 | 株式会社日立製作所 | Image processing apparatus and region of interest setting method |
| JP2013135974A (en) * | 2013-04-10 | 2013-07-11 | Hitachi Aloka Medical Ltd | Ultrasonic diagnosis apparatus |
| JP6199791B2 (en) * | 2013-04-23 | 2017-09-20 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ | Pet health examination apparatus, pet health examination method and program |
| WO2015030091A1 (en) * | 2013-09-02 | 2015-03-05 | 株式会社 日立メディコ | X-ray imaging device and method for displaying x-ray fluoroscopic image |
| JP5663640B2 (en) * | 2013-09-04 | 2015-02-04 | 株式会社日立メディコ | Ultrasonic diagnostic equipment |
| JP6510193B2 (en) * | 2014-07-18 | 2019-05-08 | キヤノンメディカルシステムズ株式会社 | Magnetic resonance imaging apparatus and image processing apparatus |
| JP2018011807A (en) * | 2016-07-22 | 2018-01-25 | 株式会社日立製作所 | Image display device, x-image diagnostic apparatus and image display method |
| EP3494884A4 (en) * | 2016-08-03 | 2020-07-29 | Shimadzu Corporation | X-ray fluoroscopic imaging apparatus |
| EP3698722A4 (en) | 2017-10-17 | 2020-12-23 | FUJIFILM Corporation | Acoustic wave diagnostic apparatus and method for controlling acoustic wave diagnostic apparatus |
| JP7262968B2 (en) * | 2018-10-19 | 2023-04-24 | キヤノンメディカルシステムズ株式会社 | Medical image processing device, X-ray diagnostic device and medical image processing program |
-
2003
- 2003-09-03 JP JP2003311409A patent/JP4389081B2/en not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| JP2004121835A (en) | 2004-04-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4389081B2 (en) | Region-of-interest tracking control method, diagnostic imaging apparatus using the method, and region-of-interest tracking control program | |
| US8167802B2 (en) | Biological tissue motion trace method and image diagnosis device using the trace method | |
| US6994673B2 (en) | Method and apparatus for quantitative myocardial assessment | |
| JP4348383B2 (en) | Device for displaying curved anatomical M-mode of biological structures | |
| JP4596759B2 (en) | Image diagnostic apparatus and method of operating image diagnostic apparatus | |
| US20030171668A1 (en) | Image processing apparatus and ultrasonic diagnosis apparatus | |
| EP3003161A1 (en) | Method and system for 3d acquisition of ultrasound images | |
| JP2004514526A (en) | Method for capturing, analyzing, and displaying an ultrasonic diagnostic heart image | |
| JP4321121B2 (en) | Method for tracking movement of biological tissue in diagnostic image and diagnostic imaging apparatus using the method | |
| EP2059173B1 (en) | System and method for measuring left ventricular torsion | |
| WO2017006236A1 (en) | Ultrasound systems and methods for automatic determination of heart chamber characteristics | |
| US20060100518A1 (en) | Automated diastolic function analysis with ultrasound | |
| JP4359749B2 (en) | Movement display method and diagnostic imaging apparatus for living tissue | |
| JP4503238B2 (en) | Movement display method and diagnostic imaging apparatus for living tissue | |
| JP4847684B2 (en) | Diagnostic imaging equipment | |
| CN113487665B (en) | Method, device, equipment and medium for measuring cavity gap | |
| JP2005087594A (en) | Image diagnostic apparatus | |
| JP5508035B2 (en) | Diagnostic imaging equipment | |
| JP2004283583A (en) | Operation method of image forming medical inspection system | |
| JP2010505494A (en) | Medical imaging system | |
| JP4492107B2 (en) | Diagnostic imaging equipment | |
| CN110236652A (en) | Puncture needle enhances display device, method and storage medium | |
| US20090076386A1 (en) | Method and system for acquiring volume of interest based on positional information | |
| JP4352212B2 (en) | Biological tissue motion tracking display method and diagnostic imaging apparatus |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060620 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090707 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090806 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090901 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090917 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121016 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 4389081 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121016 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131016 Year of fee payment: 4 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
| S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| EXPY | Cancellation because of completion of term |