JPH10143652A - 医用画像合成装置 - Google Patents

医用画像合成装置

Info

Publication number
JPH10143652A
JPH10143652A JP8303270A JP30327096A JPH10143652A JP H10143652 A JPH10143652 A JP H10143652A JP 8303270 A JP8303270 A JP 8303270A JP 30327096 A JP30327096 A JP 30327096A JP H10143652 A JPH10143652 A JP H10143652A
Authority
JP
Japan
Prior art keywords
image
dimensional
medical image
dimensional medical
dimensional image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP8303270A
Other languages
English (en)
Other versions
JP3910239B2 (ja
Inventor
Hiroko Tanaka
裕子 田中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Canon Medical Systems Corp
Original Assignee
Toshiba Corp
Toshiba Medical Systems Engineering Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp, Toshiba Medical Systems Engineering Co Ltd filed Critical Toshiba Corp
Priority to JP30327096A priority Critical patent/JP3910239B2/ja
Publication of JPH10143652A publication Critical patent/JPH10143652A/ja
Application granted granted Critical
Publication of JP3910239B2 publication Critical patent/JP3910239B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Landscapes

  • Image Analysis (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)

Abstract

(57)【要約】 【課題】 3次元医用画像と2次元画像とを同時表示す
る際に、2次元画像に起因する画像間のズレを安価に解
消する医用画像合成装置を提供する。 【解決手段】 3次元医用画像と2次元画像とを同時表
示する際に、2次元画像に起因する画像間のズレを、3
次元医用画像を補正することにより無くす。従って、術
者等は一見して被検体(患者)の所望患部のズレの無い
有用情報を得ることができる。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、医用画像合成装置
に係り、特に3次元医用画像と2次元画像とを合成表示
する医用画像合成装置に関する。
【0002】
【従来の技術】近年、外科手術を支援する目的で、手術
の進入位置を前もって撮影された医用画像上にマーキン
グして表示する医用ナビゲーションシステムの開発が進
められている。一方、脳外科,耳鼻科領域では、顕微鏡
下での手術が行われ、また、患者への侵襲が少ないとい
う理由から内視鏡下での手術も普及してきている。
【0003】これら顕微鏡下,内視鏡下の手術では、術
者の視野が限定されることもあり、手術中に、現時点の
手術の進入位置がどこであるかをリアルタイムで確認す
ることが、手術の安全性,確実性といった点から要求さ
れる。本願発明の発明者は、このような内視鏡下,顕微
鏡下の手術を支援する目的の医用ナビゲーションシステ
ムを、特願平7−337256号(名称「医用ナビゲー
ションシステム」)で提案した。該提案は、内視鏡,顕
微鏡,ビデオカメラ等により得た画像と、前もって撮影
された医用画像(X線CT装置,MRI装置,核医学装
置等の3次元医用画像)との位置関係を随時算出し、同
位置,同方向の画像を表示するものである。
【0004】
【発明が解決しようとする課題】ところで、内視鏡,顕
微鏡,ビデオカメラ等で撮影した2次元画像には、光学
レンズの特性等により、前記2次元画像に歪みが存在す
ることがある。従って、前記ビデオカメラ等の2次元画
像と医用画像から作成した3次元医用画像,断面画像を
重ね合わせたり、合成して表示する際には、ズレが生じ
ることがある。
【0005】このズレをなくす手段として、「レンズ,
カメラの製造段階で歪みを無くす」ということが考えら
れる。しかし、この手段は膨大なコストを必要とし、ビ
デオカメラ等が高価になってしまう。
【0006】また、術者の視野を広げるためにビデオカ
メラ等による2次元画像を故意に歪める場合があり、こ
の場合も前記重ね合せを行うとズレが生じる。そこで、
本発明の目的は、3次元医用画像と2次元画像とを同時
表示する際に、2次元画像に起因する画像間のズレを安
価に解消する医用画像合成装置を提供することである。
【0007】
【課題を解決するための手段】前記課題を解決するため
に、請求項1記載の発明は、医用画像診断装置によって
撮影された被検体の3次元医用画像を記憶する3次元医
用画像記憶手段と、前記被験体と同一被検体の2次元画
像を供給する2次元画像供給手段と、該2次元画像供給
手段から供給される2次元画像の前記被検体に対する位
置を検出する位置検出手段と、該位置検出手段が検出し
た前記被検体の位置に対して、同位置になるように前記
3次元医用画像記憶手段に記憶された前記被検体の3次
元医用画像を座標変換する座標変換手段と、前記2次元
画像供給手段から供給される2次元画像の固有の光学的
歪みに関するデータを記憶する歪みデータ記憶手段と、
該歪みデータ記憶手段に記憶された歪みデータに基づ
き、前記座標変換後の3次元医用画像を歪み補正する3
次元医用画像補正手段と、該3次元医用画像補正手段に
より補正された3次元医用画像と前記2次元画像供給手
段から供給される2次元画像とを同時に表示する表示手
段とを備えたことを特徴とする。
【0008】請求項1記載の発明によれば、位置検出手
段は、2次元画像供給手段から供給される2次元画像の
被検体に対する位置を検出する。座標変換手段は、検出
された前記2次元画像の被検体の位置に対して、同一の
位置になるように3次元医用画像記憶手段に記憶された
同一被検体の3次元医用画像を座標変換する。3次元医
用画像補正手段は、歪みデータ記憶手段に記憶された2
次元画像固有の光学的歪みに関するデータに基づき、座
標変換後の3次元医用画像を補正する。表示手段は、補
正後の3次元医用画像と、2次元画像供給手段から供給
される2次元画像とを同時に表示する。
【0009】また、請求項2記載の発明は、前記2次元
画像供給手段は、2次元画像を記憶する2次元画像記憶
手段であることを特徴とする。請求項2記載の発明によ
れば、2次元画像供給手段は2次元画像を記憶する2次
元画像記憶手段なので、過去に記憶した2次元画像をも
手術等に活用することができる。
【0010】また、請求項3記載の発明は、前記2次元
画像供給手段は、2次元画像を撮影し供給する2次元画
像撮影手段であることを特徴とする。請求項3記載の発
明によれば、2次元画像供給手段は2次元画像を撮影し
供給する2次元画像撮影手段(例えば、ビデオカメラ)
なので、リアルタイムの2次元画像を手術等に活用でき
る。
【0011】また、請求項4記載の発明は、前記表示手
段に前記2次元画像と補正後の3次元医用画像とを同時
表示する際に、前記2次元画像と補正後の3次元医用画
像との合成領域を任意に設定する合成領域設定手段を備
えたことを特徴とする。請求項4記載の発明によれば、
例えば、図7(A)に示すように、2次元画像と補正後
の3次元医用画像との合成領域を任意に設定できる。
【0012】また、請求項5記載の発明は、前記表示手
段に前記2次元画像と補正後の3次元医用画像とを重ね
合せて表示する際に、前記2次元画像と補正後の3次元
医用画像との合成割合を任意に設定する合成割合設定手
段を備えたことを特徴とする。請求項5記載の発明によ
れば、2次元画像と補正後の3次元医用画像との合成割
合(例えば、濃度,色等)を任意に設定できる。
【0013】また、請求項6記載の発明は、前記表示手
段に前記2次元画像と補正後の3次元医用画像とを同時
表示する際に、前記2次元画像と補正後の3次元医用画
像のいずれか一方の画像上で特定の部位を指定した場合
に、該特定の部位に対応する他方の画像上にマークを表
示させるマーク表示制御手段を備えたことを特徴とす
る。請求項6記載の発明によれば、例えば、図7(B)
に示すように、ビデオカメラ画像に対して所望の箇所を
マウスカーソルで指示すると、対応する3次元医用画像
に基づく表面表示画像上の箇所にマーク(例えば、+マ
ーク)が表示される。
【0014】
【発明の実施の形態】以下、本発明の医用画像合成装置
を図示の実施形態例に基づいて説明する。
【0015】(I)ハードウエア構成 図1は本実施形態例のハードウェア構成を示すブロック
図である。図1に示すように、医用画像合成装置IG
は、システム全体を管理するシステムコントローラ(C
PU)1と、顕微鏡画像,内視鏡画像,ビデオカメラ画
像等の2次元画像を撮影する2次元画像撮影部2と、該
2次元画像撮影部2が被検体に対してどの位置にあるか
を検出する位置検出部3と、前記2次元画像撮影部(例
えば、ビデオカメラ)の固有の光学的歪みデータを記憶
した歪みデータ記憶部4と、X線CT装置,MRI装
置,SPECT装置,核医学装置等の医用画像診断装置
12が撮影した3次元の医用画像データを保存する画像
記憶部5とを備えている。
【0016】更に医用画像合成装置IGは、前記画像記
憶部5に保存された3次元医用画像データから次に説明
する画像合成に用いられる表面表示画像,断面画像(M
PR画像)を作成する画像処理部6と、前記2次元画像
撮影部2が撮影した2次元画像の撮影位置に対し、同一
撮影位置になるように画像記憶部5に保存された3次元
医用画像(医用画像データ)を座標変換する座標変換部
7と、座標変換後の3次元医用画像を、前記光学的歪み
データに基づいて歪み補正すると共に、前記2次元画像
と歪み補正後の3次元医用画像との画像合成を行う画像
合成部8と、該画像合成部8が合成した画像を表示する
画像表示部9と、該画像表示部9に表示された画像の合
成領域の選択(次に説明する)等を行うマウス10と、
各装置を接続するバス11等を備えている。前記医用画
像診断装置12は、医用画像合成装置IGに対してオン
ラインで接続されている。
【0017】(II)動作説明 以下、本実施形態例の動作を、(1)座標変換、(2)
カメラ画像の歪み、(3)合成画像の作成、(4)画像
表示例に分けて説明する。
【0018】(1)座標変換 本座標変換の概要趣旨は次の通りである。例えば、同一
被検体の同一箇所(例えば、頭部)の3次元医用画像と
2次元画像とを比較表示する。該2次元画像が例えば側
頭部画像であると仮定すると、3次元医用画像も同一方
向から撮影した側頭部画像でないと、比較をするのが困
難である。そこで、3次元医用画像から抽出した画像
が、2次元画像に対して同一位置(例えば、側頭部)か
ら見た画像になるように、画像変換する。
【0019】図2は、医用画像(3次元医用画像)TD
が、ビデオカメラ画像(2次元画像)SDと同一位置か
ら見た画像となるように、座標変換を行う場合の概念図
である。図2に示すように、医用画像診断装置12(図
1参照)は、被検体Hを連続した断層像として撮影する
(3次元医用画像)。該3次元医用画像に対して、符号
U1 に示すように、「X−Y−Z」の座標系を設定す
る。一方、2次元画像撮影部2としてビデオカメラ2a
を使用した場合に、該カメラ2aの設置位置に対して
も、符号V1 に示すように、「X’−Y’−Z’」の座
標系を設定する。該カメラ2aのZ’軸を被検体Hの方
向にとれば、被検体Hの画像(この図では側頭部画像)
は、符号V2 に示すように、「X’−Y’」座標上に存
在する。
【0020】医用画像(3次元医用画像)TDもカメラ
画像(2次元画像)SDも、同一被験体Hに対して得ら
れた画像であるので、「X−Y−Z」座標と「X’−
Y’−Z’」座標との間で所定の座標変換を行えば、3
次元医用画像に基づき、例えばビデオカメラ画像に相当
する2次元画像を抽出することができる。この座標変換
については、前記特願平7−337256号で提案した
方式で行う。
【0021】ここで、特願平7−337256号の座標
変換を、本実施形態例に適用する方法を説明する。座標
変換部7は3次元医用画像TDから被検体Hの側頭部の
外形形状(外形輪郭)を抽出し(図3(B)参照)、こ
の抽出画像と、ビデオカメラ2aでリアルタイムで撮影
中の被検体Hの外形形状(形状情報)(図3(A)参
照)との相関を求めることによって、3次元医用画像T
Dと2次元画像SDとの位置関係を求める。
【0022】次に、この位置関係の求め方を説明する。
先ず、3次元医用画像TDからの被検体Hの外形輪郭
(図3(B))の抽出を行うには、3次元医用画像TD
を対象として閾値によって被検体Hの実体部分とその他
の背景(空気)の部分を区別する。閾値の決定には、3
次元医用画像TDのヒストグラム(画像の信号値に対す
る画素数の分布をグラフ化したもの)を求め、背景部分
のモード値と背景部分のピークの半値幅より次式によっ
て算出する。
【0023】
【数1】閾値=背景部分のモード値+k×背景部分のピ
ーク値の半値幅 k:経験値 被検体Hの実体部分の信号値が背景の信号値よりも大き
い場合は、k=2.5である。
【0024】3次元医用画像TD中で閾値より高い値を
もつ画素に“1”、閾値よりも低い値をもつ画素に
“0”を割り当てることによって、被検体Hの実体部分
と背景(空気)部分が“1”または“0”の値で区別さ
れる。“1”または“0”で表された3次元医用画像T
Dの“1”と“0”の境界を抽出することにより、被検
体Hの外形抽出が可能となる(図3(B)参照)。な
お、境界抽出法については、画像処理関連の文献に多々
紹介されている。
【0025】抽出された被検体Hの外形輪郭(図3
(B)参照)は、3次元医用画像TD上の画素の集合と
して表現される。この輪郭画素の座標は3次元医用画像
TDのもつ座標系に従って以下のように求められる。図
4に示すように、画像の第一画素の座標(0x、0y、
0z)と列方向の1
【外1】 目、行方向でj番目の位置にある場合、この画素の座標
【数2】(0x+Cx*i+Rx*j,0y+Cy*i
+Ry*j,0z+Cz*i+Rz*j) となる。
【0026】画像上の外形形状と被検体Hの外形形状と
の相関は、画像上の各外形輪郭点から一番近い計測外形
形状までの点間の距離の平均或いは平均二乗和として計
算する。従って、相関値が小さいほど2つの外形形状が
一致することになる。
【0027】このとき注意しなくてはならないのが、比
較,相関をとる領域が同一でなくてはならないことであ
る。例えば、3次元医用画像TDの撮影領域が下顎部分
から頭頂まで頭全体にわたるのに対して、鼻から頭頂に
かける頭の前方部分の限られた領域しか形状計測ができ
なかった場合等では、3次元医用画像TDから抽出した
輪郭点に対応する形状情報が無い場合がある。このとき
は、計測した形状情報に対応させるため、相関の計算を
行う輪郭点の制限が必要となる。
【0028】これには、用いる3次元医用画像TDから
作成した三次元表面表示画像(図4参照)を画像処理部
6にて作成し、操作者が画像表示部9に表示されたこの
三次元表面表示画像を見ながら領域の選択を行うように
する。領域の選択手段としては、図1中に示すマウス1
0によって画像表示部9上の(円形、矩形、自由形状)
領域を指定するようにする。
【0029】次に、以上のようにして求めた形状の相関
に基づき、3次元医用画像TDと2次元画像SDとの位
置関係を次のようにして導き出す。3次元医用画像TD
は医用画像診断装置12に基づく座標系(X−Y−Z)
に存在し、2次元画像SDはカメラ2aに基づく座標系
(X’−Y’−Z’)に存在する。
【0030】
【外2】 標系がいずれも実寸法の座標系である場合には、変換行
列は、三軸方向の回転と三軸方向の平行移動によって表
現される。
【0031】
【外3】 ここで、3次元医用画像TDから抽出された輪郭画素を
i 、この画素の座標を位置ベク
【外4】 た点の座標に一番近い計測外形の点を探索し、2つの点
間の距離を計算する。
【0032】この処理を指定された領域内にある全ての
輪郭画素について全て求め相関値Cを算出する。
【0033】
【外5】 は最適化と呼ばれ、現在までに最急降下法、やきなまし
法、滑降シンプレックス法等様々な方法が提案されてい
る。最適化の方法としてこれら既に提案されている方法
のいずれを用いてもよい。
【0034】(2)カメラ画像の歪み カメラ画像(2次元画像)SDにはレンズ系の歪みと焦
点位置によって決定される透視投影による歪み(例え
ば、遠くは小さく見え、近くは大きく見える)が存在す
る。従って、3次元医用画像TDの座標系とカメラ画像
SDの座標系間の座標変換は、単純な回転,平行移動で
きまる変換とはならず、歪みの補正が含まれた変換とな
る。一般に、カメラ画像SDの幾何補正は、写真計測,
ロボットの目等のコンピュータビジョンの分野で様々な
方式が提案されている。これらの多くは、各カメラの焦
点距離毎に既知のパターンを撮影し、写ったパターンの
形状から、補正パラメータを数学的に求める方法がとら
れている(カメラキャリブレーションと称されてい
る)。この方法については、一般的な方法であるので、
本実施形態例では特に方式を限定しない。
【0035】(3)合成画像の作成 図5は本実施形態例の合成画像作成の流れを示すフロー
チャートである。予め、使用する顕微鏡,内視鏡,ビデ
オカメラ等のレンズ系の歪みの補正パラメータを各焦点
距離毎に求めておき、図6に示すカメラ情報テーブルと
して歪みデータ記憶部4に記憶しておく。
【0036】図5に示すように、位置検出部3により2
次元画像撮影部(ビデオカメラ)2aの位置が検出さ
れ、その位置情報が入力されると(ステップS1)、座
標変換部7が3次元医用画像TDの座標系(X−Y−
Z)とビデオカメラ2aの座標系(X’−Y’−Z’)
間の変換行列を算出する(ステップS2)。この算出は
前記[(1)座標変換]に記載した方法による。
【0037】次いで、カメラの焦点情報の入力が指示さ
れると(ステップS3)、予め作成してあったカメラ情
報テーブル(図6参照)から補正パラメータを読み出し
(ステップS4)、この補正パラメータに基づき3次元
医用画像TDの歪みの補正を行ない、補正後の3次元医
用画像TDH を生成する(前述の如く歪み補正の方法は
一般的なものでよい)。補正後の3次元医用画像TDH
とカメラ画像SDとを画像合成部8で重ね合せ処理を行
って合成画像を作成する(ステップS7)。
【0038】(4)画像表示例 以上のような流れにより画像合成部8で補正後の3次元
医用画像TDH とカメラ画像SDとの重ね合せ処理を行
い、更に画像表示部9に表示する具体例について説明す
る。
【0039】 図7(A),(B)は、前述の座標変
換と歪み補正を行って作成した3次元医用画像(医用画
像)TDに基づく表面表示画像(斜線で示す)と、カメ
ラ画像(2次元画像)SDとの合成表示例である。
【0040】図7(A)は、表面表示画像とカメラ画像
(2次元画像)の両画像を重ね合せて表示した例で、重
ね合せる領域はマウスカーソルによる指定で設定する。
重ね合せ領域の形状は矩形,円形,多角形等の任意に設
定でき、重ね合せ領域は両画像の半透明合成画像として
表示する。両画像の透明度/不透明度は合成レベルスラ
イダ21を左右に移動操作することにより、連続的変化
が可能である。
【0041】図7(B)は、両画像を並べて表示した例
である。いずれか一方の画像上でマウスカーソルを移動
させると、他方の画像上にマウスカーソルと同一位置を
示すマークが表示される(+マークで示す)。このよう
にすれば、両画像の位置関係が一目で分かる。
【0042】 図8(A),(B)は、座標変換と歪
み補正を行って作成した3次元医用画像に基づく断面表
示画像と、カメラ画像との合成表示例である。
【0043】図8(A)は両画像を重ね合せて表示した
例で、重ね合せる領域はマウスカーソルとxyz軸にそ
れぞれ対応したスライダ22a,22b,22cによっ
て設定する。図8(A)においては、切り出す断面の形
状をハコ型(立方体)としているが、円柱形等の形状で
もよい。また、合成領域はマウスのドラッキングによっ
て回転させることが可能である。
【0044】図8(B)は両画像を並べて表示する例で
ある。図8(B)において、カメラ画像上にマウスカー
ソルを移動させると、マウスカーソルで指定した位置を
通る直交断面A,B(A断面,B断面)とカメラ画像の
方向に垂直な断面が同時に表示される(斜線で示す)。
また、垂直断面の位置(図2においてカメラ2aからの
遠さ)は、スライダ23を操作することで設定できる。
更に、各断面にはマウスカーソルに相当する位置にマー
ク(この例の場合、+印)が表示される。
【0045】 図9は、カメラ画像と断面画像あるい
は表面表示画像との重ね合せ表示の場合に(符号L1 で
示す)、カメラの向きと合成領域の位置,深さを示すガ
イド画面(符号M1 で示す)を同時に表示した例であ
る。
【0046】図9において、重ね合せ画面L1 の医用画
像(斜線で示す。この場合は断面画像)では被検体の頭
部を目・鼻の方向から見て、どの程度の深さであるのか
不明である。そこで、ガイド画面M1 として側頭部の表
面表示画像を用意し、カメラ2aの設置方向を矢印で示
すと共に、コの字状マークK1 により断面画像の深さを
符号K11により示す。このようにすれば、医用画像(表
面表示画像または断面画像)の深さがどの程度であるか
を一目で知ることができる。
【0047】 図10は、カメラ画像と表面表示画像
との並列表示の際に(符号L2 とM2)、いずれか一方
の画像上で、例えば手術の予定線31を描画したとき、
他方の画像上にも、同じ予定線32が描かれる例であ
る。以上の〜で説明したような表示によって、カメ
ラ2aで得られた被検体Hの画像(2次元画像)と、予
め撮影された医用画像(3次元医用画像)TDとをズレ
や誤差なく関連して対応づけて観察することができるの
で、手術の支援に有効である。
【0048】なお、本実施形態例では2次元画像撮影部
(ビデオカメラ)2で撮影したリアルタイムの2次元画
像と、画像記憶部4に記憶済みの3次元医用画像との合
成処理について説明した。しかし、リアルタイムの2次
元画像の代わりに、2次元画像撮影手段(内視鏡,顕微
鏡,ビデオカメラ等)で撮影した2次元画像を予め2次
元画像記憶手段(図示せず)に記憶しておき、該2次元
画像記憶手段から2次元画像を取り出して3次元医用画
像と前述の合成処理をしてもよい。
【0049】
【発明の効果】以上説明したように各請求項記載の発明
によれば、3次元医用画像と2次元画像とを同時表示す
る際に、2次元画像に起因する画像間のズレを、3次元
医用画像を補正することにより無くしているので、術者
等が一見して被検体(患者)の所望患部の有用情報を得
ることができる。
【図面の簡単な説明】
【図1】本発明の実施形態例のシステム構成図である。
【図2】同実施形態例における座標変換を示す概念図で
ある。
【図3】同実施形態例における被検体の図であって、
(A)はビデオカメラで撮影した形状情報を示す図、
(B)は3次元医用画像から抽出した外形輪郭を示す図
である。
【図4】前記先願における医用画像の座標系を示す図で
ある。
【図5】同実施形態例において合成画像の生成過程を示
すフローチャートである。
【図6】同実施形態例におけるカメラの補正用の情報テ
ーブルの例である。
【図7】同実施形態例におけるカメラ画像と表面表示画
像との合成を説明する図である。
【図8】同実施形態例におけるカメラ画像と断面画像と
の合成を説明する図である。
【図9】同実施形態例におけるカメラ画像と医用画像
(断面画像)とを合成した際に、表面表示画像ではどの
程度の深さの断面画像であるかを説明する図である。
【図10】同実施形態例におけるカメラ画像に対して手
術予定線を描いた場合に、対応する表面表示画像にも手
術予定線が自動的に描かれる様子を説明する図である。
【符号の説明】 1 システムコントローラ 2 2次元画像撮影部 3 位置検出部 4 歪みデータ記憶部 5 画像記憶部 6 画像処理部 7 座標変換部 8 画像合成部 9 画像表示部 10 マウス 11 バス 12 医用画像診断装置

Claims (6)

    【特許請求の範囲】
  1. 【請求項1】 医用画像診断装置によって撮影された被
    検体の3次元医用画像を記憶する3次元医用画像記憶手
    段と、 前記被験体と同一被検体の2次元画像を供給する2次元
    画像供給手段と、 該2次元画像供給手段から供給される2次元画像の前記
    被検体に対する位置を検出する位置検出手段と、 該位置検出手段が検出した前記被検体の位置に対して、
    同位置になるように前記3次元医用画像記憶手段に記憶
    された前記被検体の3次元医用画像を座標変換する座標
    変換手段と、 前記2次元画像供給手段から供給される2次元画像の固
    有の光学的歪みに関するデータを記憶する歪みデータ記
    憶手段と、 該歪みデータ記憶手段に記憶された歪みデータに基づ
    き、前記座標変換後の3次元医用画像を歪み補正する3
    次元医用画像補正手段と、 該3次元医用画像補正手段により補正された3次元医用
    画像と前記2次元画像供給手段から供給される2次元画
    像とを同時に表示する表示手段とを備えたことを特徴と
    する医用画像合成装置。
  2. 【請求項2】 前記2次元画像供給手段は、2次元画像
    を記憶する2次元画像記憶手段であることを特徴とする
    請求項1記載の医用画像合成装置。
  3. 【請求項3】 前記2次元画像供給手段は、2次元画像
    を撮影し供給する2次元画像撮影手段であることを特徴
    とする請求項1記載の医用画像合成装置。
  4. 【請求項4】 前記表示手段に前記2次元画像と補正後
    の3次元医用画像とを同時表示する際に、前記2次元画
    像と補正後の3次元医用画像との合成領域を任意に設定
    する合成領域設定手段を備えたことを特徴とする請求項
    1乃至請求項3記載の医用画像合成装置。
  5. 【請求項5】 前記表示手段に前記2次元画像と補正後
    の3次元医用画像とを重ね合せて表示する際に、前記2
    次元画像と補正後の3次元医用画像との合成割合を任意
    に設定する合成割合設定手段を備えたことを特徴とする
    請求項1乃至請求項3記載の医用画像合成装置。
  6. 【請求項6】 前記表示手段に前記2次元画像と補正後
    の3次元医用画像とを同時表示する際に、前記2次元画
    像と補正後の3次元医用画像のいずれか一方の画像上で
    特定の部位を指定した場合に、該特定の部位に対応する
    他方の画像上にマークを表示させるマーク表示制御手段
    を備えたことを特徴とする請求項1乃至請求項3記載の
    医用画像合成装置。
JP30327096A 1996-11-14 1996-11-14 医用画像合成装置 Expired - Lifetime JP3910239B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP30327096A JP3910239B2 (ja) 1996-11-14 1996-11-14 医用画像合成装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP30327096A JP3910239B2 (ja) 1996-11-14 1996-11-14 医用画像合成装置

Publications (2)

Publication Number Publication Date
JPH10143652A true JPH10143652A (ja) 1998-05-29
JP3910239B2 JP3910239B2 (ja) 2007-04-25

Family

ID=17918944

Family Applications (1)

Application Number Title Priority Date Filing Date
JP30327096A Expired - Lifetime JP3910239B2 (ja) 1996-11-14 1996-11-14 医用画像合成装置

Country Status (1)

Country Link
JP (1) JP3910239B2 (ja)

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000041132A1 (fr) * 1999-01-06 2000-07-13 Hitachi Medical Corporation Affichage d'images
JP2000308628A (ja) * 1999-03-22 2000-11-07 General Electric Co <Ge> 曲率を用いた表面のレジスタリング方法
JP2001022964A (ja) * 1999-06-25 2001-01-26 Terarikon Inc 三次元画像表示装置
JP2001224586A (ja) * 2000-02-11 2001-08-21 Toshiba Corp 画像マッピング方法及びシステム
JP2002159489A (ja) * 2000-11-24 2002-06-04 Toshiba Corp 医用画像診断システム、x線画像診断システム、並びにx線画像撮影装置、ct像撮影装置及び画像に係るデータ交換装置
JP2002224138A (ja) * 2001-02-02 2002-08-13 Olympus Optical Co Ltd 手術ナビゲーション装置
JP2002360564A (ja) * 2001-06-05 2002-12-17 Imagunooshisu Kk 医用三次元画像の表示制御装置および表示用プログラム
JP2004008398A (ja) * 2002-06-05 2004-01-15 Hitachi Medical Corp 医療画像診断装置
JP2004105734A (ja) * 2002-09-17 2004-04-08 Siemens Ag 3d対象物のコンピュータ支援表示方法
JP2007244746A (ja) * 2006-03-17 2007-09-27 Olympus Medical Systems Corp 観察システム
JP2009273521A (ja) * 2008-05-12 2009-11-26 Niigata Univ 関節鏡手術ナビゲーションシステム
JP2011525271A (ja) * 2008-05-23 2011-09-15 ザ オーストラリアン ナショナル ユニヴァーシティ 画像データ処理
JP2014121596A (ja) * 2012-11-22 2014-07-03 Toshiba Corp 画像処理装置、磁気共鳴イメージング装置及び画像処理方法
JP2015221217A (ja) * 2010-04-20 2015-12-10 イメージング・サイエンシィズ・インターナショナル・エルエルシー 表面走査情報を用いることによる歯科用3次元x線データセットからのアーチファクトの低減及び除去
JP2016007277A (ja) * 2014-06-23 2016-01-18 公立大学法人公立はこだて未来大学 手術支援装置および手術支援システム
JP2016195759A (ja) * 2015-04-03 2016-11-24 デンタル・イメージング・テクノロジーズ・コーポレーション ボリューム画像を表示するためのシステムおよび方法
US9684952B2 (en) 2010-04-20 2017-06-20 Dental Imaging Technologies Corporation Alignment of mixed-modality data sets for reduction and removal of imaging artifacts
CN111093505A (zh) * 2017-10-10 2020-05-01 株式会社日立制作所 放射线拍摄装置、图像处理方法以及图像处理程序
JP2021100607A (ja) * 2015-09-18 2021-07-08 アルコン インコーポレイティド 硝子体網膜手術中のスキャン像の制御
US11805969B2 (en) 2019-04-01 2023-11-07 Ricoh Company, Ltd. Biological information measuring apparatus, biological information measurement method, and recording medium

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000041132A1 (fr) * 1999-01-06 2000-07-13 Hitachi Medical Corporation Affichage d'images
JP2000308628A (ja) * 1999-03-22 2000-11-07 General Electric Co <Ge> 曲率を用いた表面のレジスタリング方法
JP2001022964A (ja) * 1999-06-25 2001-01-26 Terarikon Inc 三次元画像表示装置
JP2011078822A (ja) * 2000-02-11 2011-04-21 Toshiba Corp 画像マッピング方法及びシステム
JP2001224586A (ja) * 2000-02-11 2001-08-21 Toshiba Corp 画像マッピング方法及びシステム
JP2002159489A (ja) * 2000-11-24 2002-06-04 Toshiba Corp 医用画像診断システム、x線画像診断システム、並びにx線画像撮影装置、ct像撮影装置及び画像に係るデータ交換装置
JP2002224138A (ja) * 2001-02-02 2002-08-13 Olympus Optical Co Ltd 手術ナビゲーション装置
JP2002360564A (ja) * 2001-06-05 2002-12-17 Imagunooshisu Kk 医用三次元画像の表示制御装置および表示用プログラム
JP4603195B2 (ja) * 2001-06-05 2010-12-22 イマグノーシス株式会社 医用三次元画像の表示制御装置および表示用プログラム
JP2004008398A (ja) * 2002-06-05 2004-01-15 Hitachi Medical Corp 医療画像診断装置
JP2004105734A (ja) * 2002-09-17 2004-04-08 Siemens Ag 3d対象物のコンピュータ支援表示方法
JP4510415B2 (ja) * 2002-09-17 2010-07-21 シーメンス アクチエンゲゼルシヤフト 3d対象物のコンピュータ支援表示方法
JP2007244746A (ja) * 2006-03-17 2007-09-27 Olympus Medical Systems Corp 観察システム
JP2009273521A (ja) * 2008-05-12 2009-11-26 Niigata Univ 関節鏡手術ナビゲーションシステム
JP2011525271A (ja) * 2008-05-23 2011-09-15 ザ オーストラリアン ナショナル ユニヴァーシティ 画像データ処理
US9886748B2 (en) 2010-04-20 2018-02-06 Dental Imaging Technologies Corporation Alignment of mixed-modality data sets for reduction and removal of imaging artifacts
JP2015221217A (ja) * 2010-04-20 2015-12-10 イメージング・サイエンシィズ・インターナショナル・エルエルシー 表面走査情報を用いることによる歯科用3次元x線データセットからのアーチファクトの低減及び除去
US10096094B2 (en) 2010-04-20 2018-10-09 Dental Imaging Technologies Corporation Alignment of mixed-modality data sets for reduction and removal of imaging artifacts
JP2017060842A (ja) * 2010-04-20 2017-03-30 イメージング・サイエンシィズ・インターナショナル・エルエルシー 表面走査情報を用いることによる歯科用3次元x線データセットからのアーチファクトの低減及び除去
US9684952B2 (en) 2010-04-20 2017-06-20 Dental Imaging Technologies Corporation Alignment of mixed-modality data sets for reduction and removal of imaging artifacts
CN104812298A (zh) * 2012-11-22 2015-07-29 株式会社东芝 图像处理装置、磁共振成像装置以及图像处理方法
JP2014121596A (ja) * 2012-11-22 2014-07-03 Toshiba Corp 画像処理装置、磁気共鳴イメージング装置及び画像処理方法
JP2016007277A (ja) * 2014-06-23 2016-01-18 公立大学法人公立はこだて未来大学 手術支援装置および手術支援システム
JP2016195759A (ja) * 2015-04-03 2016-11-24 デンタル・イメージング・テクノロジーズ・コーポレーション ボリューム画像を表示するためのシステムおよび方法
JP2021100607A (ja) * 2015-09-18 2021-07-08 アルコン インコーポレイティド 硝子体網膜手術中のスキャン像の制御
CN111093505A (zh) * 2017-10-10 2020-05-01 株式会社日立制作所 放射线拍摄装置、图像处理方法以及图像处理程序
CN111093505B (zh) * 2017-10-10 2023-06-27 富士胶片医疗健康株式会社 放射线拍摄装置以及图像处理方法
US11805969B2 (en) 2019-04-01 2023-11-07 Ricoh Company, Ltd. Biological information measuring apparatus, biological information measurement method, and recording medium

Also Published As

Publication number Publication date
JP3910239B2 (ja) 2007-04-25

Similar Documents

Publication Publication Date Title
JP3910239B2 (ja) 医用画像合成装置
EP3939509A2 (en) C-arm-based medical imaging system, and method for matching 2d image and 3d space
CN107735016B (zh) 用于扫描解剖结构且用于显示扫描结果的***和方法
JP4434890B2 (ja) 画像合成方法及び装置
Helferty et al. Videoendoscopic distortion correction and its application to virtual guidance of endoscopy
US8611988B2 (en) Projection image generation apparatus and method, and computer readable recording medium on which is recorded program for the same
CN100488451C (zh) 具有医学图像测量功能的医学图像处理装置
US20140218366A1 (en) Method and device for displaying an object
US20090295797A1 (en) Image processing apparatus
JP4834424B2 (ja) 情報処理装置、情報処理方法、及びプログラム
WO2003081894A2 (en) Augmented tracking using video and sensing technologies
JP5430138B2 (ja) 形状測定装置およびプログラム
US8086013B2 (en) Image processing apparatus and image processing method
JPH0919441A (ja) 術式支援用画像表示装置
IL293233A (en) Image registration with a tracking system
JP5652994B2 (ja) X線診断装置
WO2001059708A1 (en) Method of 3d/2d registration of object views to a surface model
KR100346363B1 (ko) 자동 의료 영상 분할을 통한 3차원 영상 데이터 구축방법/장치, 및 그를 이용한 영상유도 수술 장치
US20210128243A1 (en) Augmented reality method for endoscope
CN110650686B (zh) 用于提供实况2d x射线图像中介入设备的空间信息的设备和对应方法
US20170091554A1 (en) Image alignment device, method, and program
JP2000020696A (ja) 医用画像合成装置
KR102534981B1 (ko) 표면 영상유도 기반의 환자 위치 정렬 및 모니터링 시스템
KR20220020634A (ko) 피부 마커를 이용한 손목 관절경 수술의 증강현실 네비게이션 시스템 및 그 방법
Wang et al. Endoscopic video texture mapping on pre-built 3-D anatomical objects without camera tracking

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20050427

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20050620

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20060915

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060926

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061127

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070123

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070124

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100202

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110202

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120202

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130202

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140202

Year of fee payment: 7

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313115

Free format text: JAPANESE INTERMEDIATE CODE: R313117

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

EXPY Cancellation because of completion of term