JP6887745B2 - 医用画像表示装置 - Google Patents

医用画像表示装置 Download PDF

Info

Publication number
JP6887745B2
JP6887745B2 JP2014264620A JP2014264620A JP6887745B2 JP 6887745 B2 JP6887745 B2 JP 6887745B2 JP 2014264620 A JP2014264620 A JP 2014264620A JP 2014264620 A JP2014264620 A JP 2014264620A JP 6887745 B2 JP6887745 B2 JP 6887745B2
Authority
JP
Japan
Prior art keywords
marker
pointer
unit
feature
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014264620A
Other languages
English (en)
Other versions
JP2016126407A (ja
JP2016126407A5 (ja
Inventor
大静 森島
大静 森島
泰輔 岩村
泰輔 岩村
恵太 三森
恵太 三森
陽介 大久保
陽介 大久保
誉史 近藤
誉史 近藤
明彦 吉田
明彦 吉田
山崎 裕之
裕之 山崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Medical Systems Corp
Original Assignee
Canon Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Medical Systems Corp filed Critical Canon Medical Systems Corp
Priority to JP2014264620A priority Critical patent/JP6887745B2/ja
Publication of JP2016126407A publication Critical patent/JP2016126407A/ja
Publication of JP2016126407A5 publication Critical patent/JP2016126407A5/ja
Application granted granted Critical
Publication of JP6887745B2 publication Critical patent/JP6887745B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本発明の実施形態は、医用画像表示装置に関する。
医用画像表示装置を用いた読影診断において、所見や診断の根拠となる画像に対して矢印や矩形などを用いて注目すべき領域を指示した状態を、セカンダリ画像やその画像をモニタに表示するときの付加情報(Grayscale Softcopy Presentation State :GSPS)等として保存しておき、読影依頼を行った依頼医など第三者が参照した際に確認ができるようにしている。なお、注目すべき領域を関心領域(Region of Interest :ROI)という場合がある。
また、一般撮影装置で深吸気時の胸部を正面から撮影することにより取得された画像に基づいて、胸郭の幅に対する心臓の幅が占める割合である心胸郭比の計測を行い、その結果を基に診断を行うことが一般的となっている。
近年タブレットをはじめとする可搬型端末の普及により、画像の参照をこの可搬型端末により行うようになってきている。そのため、画像の参照や簡易的な計測処理、注目領域のマーキング及び簡単な所見の記録を可搬型端末にて実施可能としている。可搬型端末を利用するにあたっては、一般的に手指またはタッチペンを使用しての操作となるが、特に手術室などの医用現場においては衛生面や片手での操作が必要なため、ペンよりも直接、指で操作することは多い。そのため、指でのより簡便で正確な操作インターフェースが求められている。なお、手指及びタッチペンを「指針」という場合がある。
しかし指針による操作では、指針が触れた指針位置に表示されたカーソルを、指針(例えば指腹部)で遮るため、見づらいという課題があり、下記のような解決策が提案されている。
計測やマーキングなどの処理においてドラッグ操作を行う際、指針が最初に触れた指針開始位置にカーソルを表示させ、指針を移動することで指針位置が移動したとき、指針位置が指針開始位置から一定の距離以内で移動している間はカーソルを指針開始位置に留めておき、指針位置が一定の距離を超えて移動したとき、カーソルを指針開始位置から移動させ、その後は指針位置とカーソル位置との間を一定の距離に保った状態で、カーソルによる描画(トレース)が行われる技術がある(例えば、特許文献1)。これによりドラッグ操作を行っている最中に、指針によりカーソル位置が見えない状態となることを回避する。
特開2014−44605号公報
しかしながら、先に挙げた特許文献では、描画(トレース)の開始位置はあくまでも、指針が最初に触れた指針開始位置であるため、描画の開始位置を精度よく指定することが難しい。画像上で描画(特に距離計測)するにあたり、特に注意して描画の開始位置を指定する必要がある。描画の開始位置を精度よく指定することができないと、計測精度の低下を来すおそれがあるため、描画精度の向上が求められる。
この実施形態は、上記の問題を解決するものであり、描画精度を向上することが可能な医用画像表示装置を提供することを目的とする。
上記課題を解決するために、実施形態の医用画像表示装置は、指針検出手段と、関心領域を設定する手段と、特徴部抽出部と、マーカ生成部とを有する。指針検出手段は、表示部に指針が触れた指針位置を検出する。関心領域を設定する手段は、前記指針位置を中心とする関心領域を設定する。特徴部抽出部は、前記関心領域における医用画像の特徴部を抽出する。マーカ生成部は、前記指針位置から前記特徴部へ向かう方向にマーカを移動させ、前記特徴部に到達したとき、前記マーカの移動を停止させ、前記指針が表示部に触れた状態で移動されたとき、前記マーカを前記指針位置から所定方向に一定の距離を保ちながら移動させる。
第1の実施形態に係る医用画像表示装置のブロック図。 指針位置に配置されたマーカを示す図。 指針位置から連続的に所定方向に移動されたマーカを示す図。 指針位置を検出してから第2の位置を求めるまでの一連の動作を示すタイミングチャート。 複数の特徴部が存在するとき、特徴部の各位置に停止させたマーカを示す図。 複数の特徴部が存在するとき、特徴部の任意の位置に停止させたマーカを示す図。 第2の実施形態に係る医用画像表示装置において、指針位置を検出してから第2の位置を求めるまでの一連の動作を示すタイミングチャート。 指針位置から連続的に所定方向に移動されたマーカを示す図。 第3の実施形態に係る医用画像表示装置において、指針位置を検出してから第2の位置を求めるまでの一連の動作を示すタイミングチャート。 指針位置から離間した位置に付されたマーカを示す図。
本実施形態では、表示部に指針が触れた指針位置から離間した位置にマーカを配置し、表示部に触れた状態で指針が移動されたとき、マーカを指針位置から一定の距離を保ちながら描画の開始位置に移動させるように構成する。このような構成では、指針位置と描画の開始位置とが離間しているため、描画の開始位置が指針に遮られない。
「指針位置から離間した位置にマーカを配置する」とは、一定の時間内に最終的にマーカを離間した位置に配置することを意味し、(1)マーカを指針位置の側から離間した位置の側の所定方向に連続的に移動させて配置すること、(2)マーカを一度に離間した位置に配置することを含む。さらに、「指針位置から離間した位置」は、指針位置からの方向線上の位置により定められ、方向線上の位置は、(3)画像(後述する特徴部)に基づいて定められたものと、(4)ユーザにより任意に定められたものとを含む。
指針位置から離間した位置にマーカを配置する構成として、上記(1)及び(3)を組み合わせたものを、第1の実施形態として説明する。さらに、上記(1)及び(4)を組み合わせたものを、第2の実施形態として説明する。さらに、上記(2)及び(4)を組み合わせたものを第3の実施形態として説明する。
これら第1、第2、第3の各実施形態を第1、第2、第3のモードとし、図1におけるモード判断部33が外部からのモード指示mを受けて、図1における第1マーカ設定部31を第1のモード〜第3のモードのうちのいずれに切り替えるものとする。これらの実施形態(モード)の内、一つだけ実施する場合は、モード判断部33は不要である。
<第1の実施形態>
第1の実施形態の医用画像表示装置について各図を参照して説明する。
図1は医用画像表示装置のブロック図である。
図1に示すように、医用画像表示装置は、表示部1と、表示部1に指針(手指、タッチペン)が触れた指針位置p1を検出する指針検出手段2と、検出された指針位置p1を受けて、指針が静止している期間に指針位置から離間した位置にマーカを配置させるマーカ生成部30と、記憶部(図示しない)から医用画像gを受けて、表示部1に医用画像gを表示させる画像表示処理部40と、モード判断部33と、を有する。
医用画像gにおける各位置は画像座標で定められる。さらに、表示部1における各位置は画面座標で定められる。画像座標で定められた位置を「画像上の位置」といい、画面座標で定められた位置を「画面上の位置」という場合がある。
マーカ生成部30は、第1マーカ設定部31及び第2マーカ設定部32を有する。
さらに、画像表示処理部40は、特徴部検出部41、判断部42、画像縮尺部43、及び、計測部44を有する。
(第1マーカ設定部31)
図2は、指針位置p1に配置されたマーカを示す図である。図2では、マーカMKを白抜きの矢印で示し、指針を省略する。
第1マーカ設定部31は、実行モードが第1のモード(前述する(1)マーカを指針位置の側から離間した位置の側の所定方向に連続的に移動させて配置すること、(3)画像(後述する特徴部)に基づいて定められたものとを組み合わせたモード)であることを受けて、また、倍率bを受けて、指針が指針位置p1に静止している期間内に、倍率bに応じた単位時間当たりの移動変化量でマーカを指針位置p1(図2参照)から所定方向に連続的に移動させる。それにより、どのような倍率bであっても、ユーザはマーカの移動を容易に視認することが可能となる。所定方向は、マーカが表示部1の画面に沿って進むべき方向であって、内部メモリ(図示しない)に予め記憶される。さらに、所定方向は、操作部(図示しない)の操作を受けて、変更可能、あるいは選択可能な構成にしてもよい。
選択可能な構成の一例としては、指針位置p1の周囲上の各位置に、各位置から指針位置p1とは反対の方向(放射方向)を示す矢印を選択可能に表示させた構成がある。
操作者は、表示されている医用画像gを見ながら計測したい箇所(特徴部)の付近に指針を設定する。例えば、所定方向が45度の場合、操作者は表示されている医用画像を見ながら、計測したい箇所(特徴部)の45度下の近傍に指針を設定する。
(特徴部検出部41)
特徴部検出部41は、指針位置p1に対応する医用画像g上の位置を中心とした所定の大きさを有する関心領域(ROI)に含まれる画素の画素値を基に特徴部を抽出する。特徴部の抽出には、画素値の平均値μや標準偏差σなど、画素値に関する統計値を算出することによって行われる特徴解析(例えば、特開2010-119831号に記載された技術)が用いられる。この特徴解析によれば、その偏差値が所定範囲内にある画素値を有する画素を抽出することで、病変部などの特徴部が抽出される。「所定の大きさ」は、指針(例えば、指腹部)の大きさの数倍に相当し、予め定められ、内部メモリ(図示しない)に予め記憶される。さらに、所定の大きさは、操作者の操作を受けて、変更/選択可能に構成される。
(画像縮尺部43、判断部42)
画像縮尺部43は、記憶部から受けた医用画像gを所定の倍率bで拡大/縮小させ、拡大/縮小させた医用画像gを表示部1に出力する。倍率bは、操作部(図示しない)による操作を受けて、医用画像表示装置の内部メモリ(図示しない)に記憶される。
判断部42は、後述する特徴部検出部41から受けた特徴部の情報に基づいて、指針位置p1及び所定方向(後述するマーカの移動方向)を参照して、所定方向の直線(マーカの移動軌跡)と特徴部との交点(以下、「画像上の特徴部の位置」という)を求める。
判断部42は、画面上のマーカの位置と画像上の特徴部の位置との両方の位置が一致したかどうかを判断し、判断結果を第1マーカ設定部31に出力する。第1マーカ設定部31は、両方の位置が一致しないことを示す信号を受けた場合は、マーカを所定方向に移動させ、両方の位置が一致したことを示す停止指示aを受けた場合は、マーカの移動を停止させる。図1に、マーカを停止させた位置(画面上の特徴部の位置)p2を示す。なお、以下の説明において、画像上の位置及び大きさと、画面上の位置及び大きさとは、画像縮尺部43により倍率bに応じて関係づけられるものとして説明する。
図3は、指針位置p1から離間した位置p2に移動されたマーカを示す。図3では、マーカMKの移動軌跡を破線で示し、特徴部Cgの外形を形作っている線(輪郭)を破線で示す。
さらに、第1マーカ設定部31は、静止している期間において、判断部42からの停止指示a(前述する)を受けたとき、マーカの移動を停止させるとともに、静止している期間の終了とする。マーカの移動を停止させた位置(画面上の特徴部の位置)p2が「離間した位置」となる。
以上の構成によれば、マーカが指針位置p1から離間した位置p2に配置されるため、指針でマーカが見づらいことがなく、描画の開始位置を精度よく指定でき、描画精度が向上する。
(第2マーカ設定部32、計測部44)
離間した位置p2が計測対象の一例である。計測対象としては、位置の他に、長さ及び面積が含まれる。
次に、画面上の長さ及び面積を計測する手段の一例について説明する。
第2マーカ設定部32は、指針検出手段2が指針が表示部1に触れ、静止したことを検出したときから、次に指針が表示部1に触れた状態で移動したことによる指針の移動を検出したとき、指針の移動に応じて、指針から所定方向に一定の距離を保った状態でマーカが移動させる。
さらに、第2マーカ設定部32は、希望した位置でマーカを静止させて、操作部(図示しない)の操作による第1の指定を受けて、静止した位置について、マーカの画面上の第1の位置p21(図1及び図4参照)を取得し、次の希望した位置にマーカを移動させて静止させて、第2の指定を受けて、静止した位置について、マーカの画面上の第2の位置p22(図1及び図4参照)を取得する。なお、第1の位置p21は、離間した位置p2であってもよい。なお、図1では、第1マーカ設定部31と第2マーカ設定部32とは機能的に理解し易いように別ブロックで記載したが、一緒にすることもできる。
計測部44は、第1の位置p21と第2の位置p22とを結ぶ直線の画面上の長さ(描画長という)Lを求める。また、計測部44は、画像領域の形状(例えば、ひし形、円、楕円など)の種類が選択されたことを受けて、例えば、第1の位置p21と第2の位置p22とを結ぶ描画長Lを有する直線を対角線、直径及び長軸とするひし形(正方形を含む)、円及び楕円の画像領域の画面上の面積(描画面積という)Xを求める。
表示部1の医用画像を表示する画像表示エリアの面積Sに対する描画面積Xの割合(X/S)が小さいとき、描画面積Xを有する画像領域とその周囲との境界線の太さに対して描画面積Xが小さいため、境界線により画像領域がつぶれて、正確な描画ができず、計測精度が低下する要因となる。
次に、正確な描画であるかどうかを判断する構成の一例を示す。
計測部44は、割合(X/S)を求め、求めた割合が許容値α(例えば、α=0.1)
以上であるかどうかを判断する。計測部44は、割合(X/S)が許容値α以上である(予め定められた範囲にある)と判断したとき、後述する計測結果r1を出力し、計測結果r1を表示部1に表示させる。一方で、計測部44は、割合(X/S)が許容値α未満である(予め定められた範囲にない)と判断したとき、その旨の情報r2を表示部1、及び、画像縮尺部43に出力する。それにより、表示部1に再計測を促すメッセージが表示される。また、画像縮尺部43は、情報r2を受けて、倍率bを調整する。倍率bが調整されることにより、画像が拡大表示され、それに応じて、画像領域の描画面積Xが大きくなるため、境界線によって画像領域がつぶれず、正確な描画が可能となる。なお、許容値αは、操作部による操作を受けて設定される。
以上は、画像表示エリアの面積Sに対する描画面積Xの割合を求めたが、画像表示エリアの面積Sと描画長Lとは、次元が異なるため、対比できない。
そこで、描画長Lに基づいて正確な描画であるかどうかを判断するには、次のように構成する。
計測部44は、描画長Lを有する直線を斜辺とする直角二等辺三角形の面積X´(=L*L/2)を求め、さらに、画像表示エリアの面積Sに対する面積X´の割合(X´/S)を求め、割合(X´/S)が許容値α以上であるかどうかを判断する。
以上のようにして、正確な描画ができたとき、次に、例えば、画像上の長さLgを計測する。
以下に、画像上の長さを計測する手段の一例について説明する。
判断部42は、倍率bを参照して、画面上の第1の位置p21及び第2の位置p22に対応する画像上の各位置を求める。計測部44は、画像上の各位置に基づいて、画像上の長さLgを計測する。計測結果としての長さLgが表示部1に表示される。
また、計測部44は、画像表示エリアのピクセル数に対する画像領域のピクセル数の割合及び倍率bに基づいて、画像上の画像領域の面積Sgを計測する。計測結果としての面積Sgが表示部1に表示される。
(動作)
次に、指針位置p1を検出してからマーカを指針位置p1から離間した位置p2に配置するまでの一連の動作について、図4を参照して説明する。図4は、指針位置p1を検出してから第2の位置p22を求めるまでの一連の動作を示すタイミングチャートである。
図4に示すように、モード判断部33は、操作部(図示しない)によるモード指示mを受けて、実行モードが第1モードであると判断し、第1マーカ設定部31(図4ではマーカ生成部30)を第1モードに切り替える。指針検出手段2が指針位置p1を検出すると、第1マーカ設定部31に指針位置p1を出力する。第1マーカ設定部31は、指針位置p1を表示部1に配置する(図2参照)。
特徴部検出部41(図4では画像表示処理部40)は、指針位置p1を受けて、関心領域を設定するとともに、関心領域における特徴部を抽出する。
判断部42(図4では画像表示処理部40)は、特徴部の情報を基に、倍率b、指針位置p1及び所定方向を参照して、指針位置p1から所定方向に沿った直線と特徴部との交点である位置(画像上の特徴部の位置)を求める。
次に、第1マーカ設定部31は、マーカを指針位置p1から所定方向に連続的に移動させる。マーカを移動させたときのマーカの画面上の位置が判断部42に送られる。判断部42は、倍率bを参照して、マーカの画面上の位置と、画像上の特徴部の位置との両方の位置が一致するかどうかを即時(リアルタイム)に判断し、判断結果を第1マーカ設定部31に出力する。第1マーカ設定部31は、両方の位置が一致しないとの判断結果を受けて、マーカを所定方向に移動させる。一方、第1マーカ設定部31は、両方の位置が一致するとの判断結果である停止指示aを受けて、マーカの移動を停止する(図3参照)。
次に、第1の位置p21を指定してから計測結果を出力するまでの一連の動作について、図4を参照して説明する。
図4に示すように、指針が移動されると、指針検出手段2により検出された指針の検出位置に基づいて、第2マーカ設定部32(図4ではマーカ生成部30)は、指針位置から所定方向に一定の距離だけ離間した状態を保ちながらマーカを移動させる。
第2マーカ設定部32は、希望した位置でマーカを静止させて、操作部(図示しない)による指定を受けて、静止した位置について、第1の位置p21を取得し、描画線の始端を第1の位置p21に表示させる。さらに、第2マーカ設定部32は、第1の位置p21を計測部44に送り、計測部44は、画像上の第1の位置を求める。
さらに、指針が移動されると、第2マーカ設定部32は、マーカを移動させる。このとき、マーカの移動軌跡が描画線として表示される。
第2マーカ設定部32は、希望した位置でマーカを静止させて、操作部の指示を受けて、静止した位置について、第2の位置p22を取得し、描画線の終端を第2の位置p22に表示させる。以上により、位置p21から位置p22までの線が表示部1に描画される。さらに、第2マーカ設定部32は、第2の位置p22を計測部44に送り、計測部44は、画像上の第2の位置を求める。
次に、計測部44は、第1の位置p21及び第2の位置p22に基づいて、描画長(画面上の長さ)Lを求め、求めた描画長Lを有する直線を斜辺とする直角二等辺三角形の面積X´を求める。さらに、計測部44は、画像表示エリアの面積Sに対する面積X´の割合(X´/S)が許容値α以上であるかどうかを判断し、許容値α以上であると判断したとき、第1の位置p21及び第2の位置p22に基づいて、倍率bを参照して画像上の長さLgを計測し、計測結果r1としての長さLgを、表示部1に表示させる。計測部44は、割合(X´/S)が許容値α未満であると判断したとき、その旨の情報r2を表示部1に出力し、再計測すべき旨のメッセージmsgを表示部1に表示させる。
描画長Lが「表示されている画像上の距離」の一例である。さらに、面積X´が「画像上の領域の面積」の一例である。なお、面積X´は、描画長Lを有する直線を斜辺とする直角二等辺三角形の面積に限らず、第1の位置p21及び第2の位置p22を領域の外周上の点とする領域の面積であればよい。
<変形例1>
次に、第1の実施形態の変形例1について図5を参照して説明する。図5は、複数の特徴部Cgが存在するとき、特徴部Cgの各位置p2に停止させたマーカMKを示す図である。図5に特徴部Cgとしての特異線を破線で示す。ここで、「特異線」とは、特徴部の外形を形づくっている線をいう。
上記の実施形態では、第1マーカ設定部31がマーカMKを指針位置p1から所定方向に沿って移動させ、マーカMKが特徴部Cgの位置p2に達したことを検出したとき、マーカMKの移動を停止させるものを示した。
これに対し、変形例1では、特徴部検出部41は、複数の特徴部Cgを検出したとき、判断部42に画像上の特徴部Cgの位置を出力する。なお、特徴部検出部41は、特異線を識別するためのラインLNを表示部1に表示させない(これに対し、図6で示す変形例2ではラインLNを表示させる)。ラインLNを表示させない理由は、ラインLNによって特異線が見づらくなることを防ぐためである。
第1マーカ設定部31は、マーカMKを指針位置p1から所定方向に沿って移動させる。マーカMKが指針位置p1に対し最も近い位置にある特徴部Cgの位置p2に達したとき、判断部42は、停止指示aを第1マーカ設定部31に出力する。第1マーカ設定部31は、停止指示aを受けて、特徴部Cgの位置p2に停止させる。
次に、特徴部Cgの位置p2(現位置という)に停止させたマーカMKを次の特徴部Cgの位置(次の位置という)に向けて移動させる構成について説明する。
マーカMKを現位置から次の位置に移動させるために、操作者による指針のタップがされる。ここで、「指針のタップ」とは、表示部1の同一位置において所定時間内に指針が複数回触れることをいう。
(a)操作者による指針のタップがされる。
(b)指針検出手段2が指針のタップを検出する。
(c)第1マーカ設定部31は、現位置を記憶する。
(d)第1マーカ設定部31は、マーカMKを現位置から所定方向に移動させる。
(e)判断部42が、マーカMKが次の位置に達したことを判断したとき、第1マーカ設定部31に停止指示aを出力する。
(f)第1マーカ設定部31は、停止指示aを受けて、次の位置でマーカMKの移動を停止させる。
つまり、操作者による指針のタップがされることで、マーカMKを現位置から移動させ、かつ、次の位置でその移動を停止させることができる。
<変形例2>
次に、第1の実施形態の変形例2について図6を参照して説明する。図6は、複数の特徴部Cgが存在するとき、特徴部Cgの任意の位置p2に停止させたマーカMKを示す図である。
変形例1では、特徴部検出部41は、特異線を識別するためのラインLNを表示部1に表示させなかった。
これに対し、変形例2では、特徴部検出部41は、特異線を識別するためのラインLNを表示部1に表示させる(これに対し、図5に示す変形例1ではラインLNを表示させない)。ラインLNを表示させる理由は、測定対象となる特異線と対象とならない他の特異線とを明確に視認するためである。特異線を明確に視認できることで、測定対象となる特異線を任意に選択することができる。例えば、測定対象となる特異線から所定距離だけ所定方向と反対の方向に離れた位置を指針位置p1とすることができる。それにより、第1マーカ設定部31は、指針位置p1から測定対象となる特異線に向かって所定方向にマーカを移動させ、特異線上でマーカの移動を停止させることが可能となる。
<第2の実施形態>
第2の実施形態の医用画像表示装置について図7及び図8を参照して説明する。
なお、第2の実施形態においては、第1の実施形態の医用画像表示装置と異なる構成について主に説明し、同じ構成については同一番号を付してその説明を省略する。
第2の実施形態では、第2モード(前述する(1)マーカを指針位置の側から離間した位置の側の所定方向に連続的に移動させて配置することと、(4)ユーザにより任意に定められたものとを組み合わせたモード)で実行される。
ここで、「静止している期間」とは、指針検出手段2が指針が表示部1に触れたことを検出したときから、次に指針が表示部1に触れた状態で移動したこと、又は、表示部1から離れたことによる指針の移動を検出するまでの間である。
第1の実施形態では、第1マーカ設定部31がマーカを指針位置p1から所定方向に沿って移動させ、特徴部検出部41が指針位置p1に基づいて特徴部を抽出し、判断部42が、マーカが画像上の特徴部の位置に達したことを検出したとき、第1マーカ設定部31がマーカの移動を停止させるものを示した。
これに対し、第2の実施形態では、第1マーカ設定部31がマーカを指針位置p1から所定方向に沿って移動させ、指針が表示部1から離れたことによる指針の移動を検出したとき、マーカの移動を停止させる。
図7は、指針位置を検出してから第2の位置を求めるまでの一連の動作を示すタイミングチャートである。図7では、医用画像を表示させる画像表示処理部40を省略する。図8は、指針位置p1から連続的に所定方向に移動されたマーカMKを示す図である。図8に、マーカMKの移動を破線で示し、指針位置p1から離間した位置p2に配置されたマーカMKを白抜きの矢印で示す。
図7に示すように、モード判断部33は、操作部(図示しない)によるモード指示mを受けて、実行モードが第2モードであると判断し、第1マーカ設定部31(図7ではマーカ生成部30)を第2モードに切り替える。
指針検出手段2が指針位置p1を検出すると、第1マーカ設定部31に指針位置p1を出力する。
次に、第1マーカ設定部31は、マーカを指針位置p1から所定方向に沿って連続的に移動させる。指針検出手段2が、指針が表示部1から離れたことによる指針の移動を検出したとき、第1マーカ設定部31は、マーカの移動を停止する。停止したマーカの位置が離間した位置p2となる。
なお、画像表示処理部40が計測部44を有し、計測部44が、第1の位置p21及び第2の位置に基づいて描画長Lを求め、さらに、描画長Lから面積Sを求める構成については、第1の実施形態と同様であるため、その説明を省略する。
第2の実施形態に係る医用画像表示装置によれば、指針位置p1から所定方向に沿った線上における、ユーザの任意の位置にマーカを停止させることができる。また、マーカを停止させた位置は、指針位置p1から離間した位置p2であるため、指針によってマーカが遮らないため、マーカで描画の開始位置を精度よく指定することができる。
なお、第2の実施形態では、第1マーカ設定部31が、指針が表示部1から離れたことによる指針の移動を検出したとき、マーカの移動を停止させたが、これに限らない。つまり、第1マーカ設定部31が、指針が表示部1に触れた状態で移動したことによる指針の移動を検出したとき、マーカの移動を停止させてもよい。
<第3の実施形態>
第3の実施形態の医用画像表示装置について図9及び図10を参照して説明する。
なお、第3の実施形態においては、第1の実施形態の医用画像表示装置と異なる構成について主に説明し、同じ構成については同一番号を付してその説明を省略する。
第3の実施形態では、第3モード(前述する(2)マーカを一度に離間した位置に配置することと(4)ユーザにより任意に定められたものとを組み合わせたモード)で実行される。
第1の実施形態では、第1マーカ設定部31がマーカを指針位置p1から所定方向に沿って移動させ、特徴部検出部41が指針位置p1に基づいて特徴部を抽出し、判断部42が、マーカが画像上の特徴部の位置に達したことを検出したとき、第1マーカ設定部31がマーカの移動を停止させるものを示した。
これに対し、第3の実施形態では、第1マーカ設定部31が指針位置p1に基づいて離間した位置p2を求め、離間した位置p2にマークを配置させる。
図9は、指針位置を検出してから第2の位置を求めるまでの一連の動作を示すタイミングチャート、図9では、医用画像を表示させる画像表示処理部40を省略する。図10は、指針位置p1から離間した位置p2に付されたマーカMKを示す図である。
図9に示すように、モード判断部33は、操作部(図示しない)によるモード指示mを受けて、実行モードが第3モードであると判断し、第1マーカ設定部(図9では、マーカ生成部30)を第3モードに切り替える。指針検出手段2が指針位置p1を検出すると、第1マーカ設定部31に指針位置p1を出力する。
次に、第1マーカ設定部31は、指針位置p1に基づいて、所定方向及び指針位置p2からの距離を参照して、離間した位置p2を求める。図10に示すように、第1マーカ設定部31は、マーカを離間した位置p2に表示させる。
なお、画像表示処理部40が計測部44を有し、計測部44が、第1の位置p21及び第2の位置に基づいて描画長Lを求め、さらに、描画長Lから面積Sを求める構成については、第1の実施形態と同様であるため、その説明を省略する。
第3の実施形態に係る医用画像表示装置によれば、マーカを表示させた位置は、指針位置p1から離間した位置p2であるため、指針によってマーカが遮らないため、マーカで描画の開始位置を精度よく指定することができる。
<他の実施形態>
なお、前記実施形態においては、マーカが指針位置p1から移動する方向を、所定方向として内部メモリに予め記憶させた。これに限らず、指針位置p1を中心とする関心領域を設定し、関心領域における医用画像から特徴部を抽出し、マーカが指針位置p1から移動する方向を、指針位置p1及び特徴部の位置を基に求めてもよい。
関心領域に複数の特徴部が含まれたときは、複数の特徴部のうちから指針位置p1に最も近い特徴部を、マーカが指針位置p1から移動する方向とする。それにより、画面上の特徴部の近傍位置に指針を触れるだけで、マーカが測定対象とすべき特徴部の位置にマーカが自動的に配置させるため、使い勝手がよい。
関心領域に複数の特徴部が密集しているとき、マーカが指針位置p1から移動する方向を選択可能に構成すればよい。それにより、移動する方向と反対の方向であって、測定対象とすべき特徴部の近傍位置に指針を触れるだけで、その特徴部の位置にマーカが自動的に配置させることができる。
また、前記実施形態では、正確な描画であるかどうかを判断する構成の一例として、計測部44が画像表示エリアの面積Sに対する描画面積Xの割合(X/S)が許容値α以上であるかどうかを判断した。同様に、描画長Lにおいても、計測部44が割合(X´/S)が許容値α以上であるかどうかを判断した。しかし、これに限らず、計測部44は、描画面積Xや描画長Lが予め定められた範囲にあるかどうかを判断してもよい。
また、前記実施形態では、マーカとして、画面上の位置を示すためのカーソル(矢印)を示したが、これに限らない。関心領域(ROI)を示すもの、参照ラインを示すもの、注釈(コメント)の入力範囲を示すものであってもよい。
また、第1及び第2の実施形態において、第1マーカ設定部31によりマーカが移動されるとき、マーカの移動開始位置と指針位置p1とが一致したものを示した。これに限らず、マーカの移動開始位置を指針位置p1の近傍にしてもよい。それにより、マーカの移動開始位置が指針位置p1からずれるため、マーカの移動中や移動終了時ばかりでなく、マーカの移動開始時においてもマーカの位置を正確に視認することができる。
さらに、前記実施形態では、マーカを一度に離間した位置に配置する上記(2)の構成と、距離が画像(特徴部)に基づいて定められた上記(3)の構成とを組み合わせて、マーカを指針位置から離間した位置に配置されるようにしてもよい。
さらに、前記実施形態においては、第1の位置p21と第2の位置p22とを結ぶ描画長Lを有する直線を対角線とするひし形(正方形を含む)の面積Xを求めたが、これに限らない。例えば、第1の位置p21及び第2の位置p22を領域の外周上の点とする当該領域の面積を求めてもよい。
上記実施形態において説明した医用画像表示装置の構成は、可搬型端末に限らず、固定型端末にも適用することができる。
本発明のいくつかの実施形態を説明したが、これら実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
a 停止指示
b 倍率
g 医用画像
m モード指示
p1 指針位置
p2 配置位置
p21 第1の位置
p22 第2の位置
r1 計測結果
r2 許容範囲外の情報
1 表示部
2 指針検出手段
30 マーカ生成部
31 第1マーカ設定部
32 第2マーカ設定部
33 モード判断部
40 画像表示処理部
41 特徴部検出部
42 判断部
43 画像縮尺部
44 計測部

Claims (3)

  1. 表示部に指針が触れた指針位置を検出する指針検出手段と、
    前記指針位置を中心とする関心領域を設定する手段と、
    前記関心領域における医用画像の特徴部を抽出する特徴部抽出部と、
    前記指針位置から前記特徴部へ向かう方向にマーカを移動させ、前記特徴部に到達したとき、前記マーカの移動を停止させ、前記指針が前記表示部に触れた状態で移動されたとき、前記マーカを前記指針位置から所定方向に一定の距離を保ちながら移動させるマーカ生成部と、
    を有することを特徴とする医用画像表示装置。
  2. 前記マーカ生成部は、前記指針位置及び前記特徴部の位置を基に前記方向を求めることを特徴とする請求項1に記載の医用画像表示装置。
  3. 前記マーカ生成部は、前記特徴部に向かう方向を選択可能にされ、前記選択された前記特徴部に向かう方向に前記マーカを移動させることを特徴とする請求項1に記載の医用画像表示装置。
JP2014264620A 2014-12-26 2014-12-26 医用画像表示装置 Active JP6887745B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014264620A JP6887745B2 (ja) 2014-12-26 2014-12-26 医用画像表示装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014264620A JP6887745B2 (ja) 2014-12-26 2014-12-26 医用画像表示装置

Publications (3)

Publication Number Publication Date
JP2016126407A JP2016126407A (ja) 2016-07-11
JP2016126407A5 JP2016126407A5 (ja) 2018-01-25
JP6887745B2 true JP6887745B2 (ja) 2021-06-16

Family

ID=56359487

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014264620A Active JP6887745B2 (ja) 2014-12-26 2014-12-26 医用画像表示装置

Country Status (1)

Country Link
JP (1) JP6887745B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6828575B2 (ja) 2017-04-26 2021-02-10 コニカミノルタ株式会社 医用画像表示装置及びプログラム

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05189152A (ja) * 1992-01-09 1993-07-30 Hitachi Ltd ポインティングデバイスによるカーソル制御方法
CA2174336A1 (en) * 1993-10-20 1995-04-27 Leo M. Cortjens Adaptive videoconferencing system
JP2002008005A (ja) * 2000-06-20 2002-01-11 Fuji Photo Film Co Ltd 医用画像出力方法および装置
JP4716747B2 (ja) * 2005-02-16 2011-07-06 オリンパス株式会社 医療用立体画像観察装置
JP5301970B2 (ja) * 2008-12-08 2013-09-25 オリンパス株式会社 顕微鏡用デジタルカメラシステム及び顕微鏡システム
JP2011019768A (ja) * 2009-07-16 2011-02-03 Kyushu Institute Of Technology 画像処理装置、画像処理方法、及び画像処理プログラム
JP5713400B2 (ja) * 2011-09-26 2015-05-07 Kddi株式会社 ポインタを用いた指による操作が可能なユーザインタフェース装置、動作発動方法及びプログラム
JP5811780B2 (ja) * 2011-11-07 2015-11-11 富士通株式会社 情報処理装置およびその入力制御プログラム
JP5882754B2 (ja) * 2012-01-24 2016-03-09 キヤノン株式会社 カーソル制御方法及び画像観察装置
JP2014044605A (ja) * 2012-08-28 2014-03-13 Fujifilm Corp タッチ検知ディスプレイにおける入力制御装置および方法並びにプログラム
JP6199024B2 (ja) * 2012-11-26 2017-09-20 東芝メディカルシステムズ株式会社 医用画像表示装置

Also Published As

Publication number Publication date
JP2016126407A (ja) 2016-07-11

Similar Documents

Publication Publication Date Title
EP3151197B1 (en) Automatic measurement of objects in images
US11096668B2 (en) Method and ultrasound apparatus for displaying an object
CN105243676B (zh) 显示超声图像的方法及其所用的超声设备
US8977028B2 (en) Method of displaying virtual ruler on separate image or medical image of object, medical image obtaining apparatus, and method and apparatus for displaying separate image or medical image with virtual ruler
US20200352655A1 (en) Methods, devices, and systems for augmented reality guidance of medical devices into soft tissue
EP2849157A2 (en) Image processing apparatus, image processing method, and computer-readable storage medium
US9974618B2 (en) Method for determining an imaging specification and image-assisted navigation as well as device for image-assisted navigation
US9261953B2 (en) Information processing apparatus for displaying virtual object and method thereof
US10964044B2 (en) Method of operating measurement device, measurement device, and recording medium
US11099724B2 (en) Context sensitive magnifying glass
US9807383B2 (en) Wearable video headset and method for calibration
US20230309954A1 (en) System for visualization and control of surgical devices utilizing a graphical user interface
CN114246557A (zh) 用于近红外脑功能成像装置的定位方法、设备及存储介质
JP5900914B1 (ja) コピー映像提供方法、及びそのための超音波装置
JP2016174656A (ja) 画像処理装置及びプログラム
JP2017533017A5 (ja)
JP6887745B2 (ja) 医用画像表示装置
CN105608668B (zh) 一种信息处理方法及装置
CN112055841A (zh) 标记在显示器上的精确定位
US8705823B2 (en) Software product for breast examination result mapping, recording, comparing, and/or tracking
KR102605152B1 (ko) 객체 표시 방법 및 이를 위한 초음파 장치
KR101629134B1 (ko) 증강현실을 이용한 측정 장치 및 증강현실을 이용한 측정 방법
JPWO2019206670A5 (ja)

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20160527

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171207

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20171207

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20181126

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181218

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190214

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20190528

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190827

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20190827

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20190904

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20190910

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20191025

C211 Notice of termination of reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C211

Effective date: 20191029

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20200511

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20200609

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20200707

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20201006

C19 Decision taken to dismiss amendment

Free format text: JAPANESE INTERMEDIATE CODE: C19

Effective date: 20201222

C30A Notification sent

Free format text: JAPANESE INTERMEDIATE CODE: C3012

Effective date: 20201222

C13 Notice of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: C13

Effective date: 20210105

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210202

C23 Notice of termination of proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C23

Effective date: 20210316

C03 Trial/appeal decision taken

Free format text: JAPANESE INTERMEDIATE CODE: C03

Effective date: 20210420

C30A Notification sent

Free format text: JAPANESE INTERMEDIATE CODE: C3012

Effective date: 20210420

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210519

R150 Certificate of patent or registration of utility model

Ref document number: 6887745

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150