JP7331749B2 - 医用画像生成装置及び医用画像生成プログラム - Google Patents

医用画像生成装置及び医用画像生成プログラム Download PDF

Info

Publication number
JP7331749B2
JP7331749B2 JP2020053092A JP2020053092A JP7331749B2 JP 7331749 B2 JP7331749 B2 JP 7331749B2 JP 2020053092 A JP2020053092 A JP 2020053092A JP 2020053092 A JP2020053092 A JP 2020053092A JP 7331749 B2 JP7331749 B2 JP 7331749B2
Authority
JP
Japan
Prior art keywords
image
breast
information
interest
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020053092A
Other languages
English (en)
Other versions
JP2020163137A (ja
JP2020163137A5 (ja
Inventor
知晃 竹村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Inc
Original Assignee
Konica Minolta Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Inc filed Critical Konica Minolta Inc
Publication of JP2020163137A publication Critical patent/JP2020163137A/ja
Publication of JP2020163137A5 publication Critical patent/JP2020163137A5/ja
Application granted granted Critical
Publication of JP7331749B2 publication Critical patent/JP7331749B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Apparatus For Radiation Diagnosis (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Description

本開示は、乳癌の検査において医療従事者が超音波併用検査を遂行する際に参照する***正面模式図を生成する医用画像生成装置及び医用画像生成プログラムに関する。
乳癌腫瘍の診断においては、癌と疑われる腫瘍を探すスクリーニング検査において、従来より、***Ｘ線検査（マンモグラフィー）に基づき、***内の乳管内石灰化や、乳管拡張、嚢胞や腫瘤等、手がかりとなる被検体組織内の構造物を検出するスクリーニング検査が行われている。
近年では、マンモグラフィーによりＭＬＯ(Medio-Lateral Oblique（内外斜位方向）)
及びＣＣ(Cranio-Caudal（頭尾方向）)の***の全体像を取得して専門医により読影する
とともに、マンモグラフィー画像に基づき抽出した乳癌腫瘍の可能性がある被検体組織内の組織構造物を含む注目領域について、さらに、超音波検査を行うことにより、組織構造物の属性について両画像に基づく総合判定を行う超音波併用検査が主流となっている。その際、マンモグラフィーの読影医と超音波検査を遂行する医療従事者（以後、「超音波操作者」とする）とは通常異なることから、マンモグラフィー画像における注目領域を、超音波操作者に伝達するための手段が必要となる。
こうしたなか、マンモグラフィー画像（ＭＬＯ及びＣＣ）における注目領域の位置に基づき、超音波検査用の***正面模式図（シェーマ）中に、マンモグラフィー画像の注目領域の位置を大まかに表示する医用情報システムが提案されている（例えば、特許文献１、２、３）。これにより、超音波操作者は、マンモグラフィー画像における注目領域の位置を、超音波検査用のシェーマ画像により大まかに把握して超音波走査を行うことができる。
特開２０１５－１０４４６４号公報 特開２０１５－１０４４６５号公報 特開２０１５－２７４５０号公報
しかしながら、上記した従来の医用情報システムによれば、超音波操作者は注目領域の***の奥行方向の位置をシェーマ画像から把握することは困難であった。そのため、超音波操作者は、超音波検査の際にマンモグラフィー画像（ＭＬＯ及びＣＣ）を読み出して注目領域の奥行方向の位置を直接、マンモグラフィー画像から確認する必要があり、操作が煩雑で手間を要し、操作者の作業負担が増し検査の効率化が難しかった。
本開示は、上記課題に鑑みてなされたものであり、超音波併用検査において、超音波操作者がマンモグラフィー画像における注目領域の***の奥行方向の位置を、シェーマ画像から把握することできる医用画像生成装置、及び医用画像生成プログラムを提供することを目的とする。
本開示の一態様に係る医用画像生成装置は、マンモグラフィー画像と注目領域の情報とに基づきシェーマ画像を生成する医用画像生成装置であって、前記マンモグラフィー画像及び前記注目領域の情報を取得する画像及び情報取得部と、取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の正面方向における範囲を表す正面情報を算出する正面情報算出部と、取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の奥行方向における位置を表す奥行情報を算出する奥行情報算出部と、前記正面情報と前記奥行情報とを反映してシェーマ画像を生成するシェーマ画像生成部と、前記シェーマ画像を表示装置に表示させる表示制御部とを備え、前記シェーマ画像生成部は、前記シェーマ画像における前記正面情報を反映した識別部の態様を、前記奥行情報の内容に応じて異ならせたシェーマ画像を生成する。
本開示の一態様に係る医用画像生成装置、及び医用画像生成プログラムによれば、超音波操作者は、超音波検査の際に注目領域の***の奥行方向の位置をシェーマ画像から把握することができる。そのため、超音波検査の際に超音波操作者がマンモグラフィー画像を読み出して注目領域の奥行方向の位置を確認する作業を無くし、超音波操作者の作業負担を軽減して検査効率を向上することができる。
実施の形態に係る医用画像保管通信システム１０を含む医用画像システムのシステム構成図である。 診断支援装置（ＣＡＤ）３の機能的構成を示す機能ブロック図である。 医用画像生成装置を構成するサーバー装置４の機能的構成を示す機能ブロック図である。 サーバー装置４の制御部４１の機能的構成を示す機能ブロック図である。 乳癌検査における併用検査の流れを示す工程図の一例である。 （ａ）～（ｃ）は、併用検査における読影・走査位置確認の工程の詳細を示す工程図の一例である。 医用画像生成装置における医用画像生成処理のフローチャートである。 図７のステップＳ７における注目領域の正面情報の算出処理の詳細を示すフローチャートである。 ＭＬＯ画像における注目領域及びＣＣ画像における注目領域の情報から、正面方向のシェーマ画像における注目領域の範囲を表す正面情報の算出方法を説明するための模式図である。 図７のステップＳ８における注目領域の奥行方向深さに関する奥行情報の算出処理の詳細を示すフローチャートである。 （ａ）～（ｄ）は、ＭＬＯ画像又はＣＣ画像における注目領域の情報から、注目領域の奥行方向深さに関する奥行情報の算出方法を説明するための模式図である。 図７のステップＳ９における注目領域の奥行方向厚みに関する奥行情報の算出処理の詳細を示すフローチャートである。 （ａ）～（ｃ）は、ＭＬＯ画像又はＣＣ画像における注目領域の情報から、注目領域の奥行方向厚みに関する奥行情報の算出方法を説明するための模式図である。 （ａ）～（ｃ）は、注目領域の奥行方向深さが異なるマンモグラフィー画像の一例である。 （ａ）～（ｃ）は、図１４（ａ）～（ｃ）に対応する注目領域の奥行方向深さが異なる奥行情報を反映したシェーマ画像の一例である。 （ａ）～（ｃ）は、図１４（ａ）～（ｃ）に対応する注目領域の奥行方向深さが異なる奥行情報を反映したシェーマ画像の別の一例である。 （ａ）～（ｃ）の上図は、注目領域ＲＩの奥行方向深さが異なるマンモグラフィー画像（ＭＬＯ、ＣＣ）の一例である。下図は、注目領域ＲＩの奥行方向深さが異なる奥行情報を反映したシェーマ画像の別の態様を示す一例である。 上図は、注目領域ＲＩの奥行方向深さが異なるマンモグラフィー画像（ＭＬＯ、ＣＣ）、下図は、注目領域ＲＩの奥行方向深さが異なる奥行情報を反映したシェーマ画像の別の態様を示す別の一例である。 （ａ）～（ｃ）は、注目領域の奥行方向厚みが異なるマンモグラフィー画像の一例である。 （ａ）～（ｃ）は、図１９（ａ）～（ｃ）に対応する注目領域の奥行方向の深さと厚みが異なる奥行情報を反映したシェーマ画像の別の一例である。 ＭＬＯ画像（欄内左側）及びＣＣ画像（欄内右側）における注目領域の指定方法の分類を示す図である。 図２１における注目領域の指定方法の分類に応じて奥行情報を反映の仕方を異ならせたシェーマ画像の一例である。 変形例に係る医用画像生成装置における医用画像生成処理のフローチャートである。 （ａ）の上図は、実施の形態２の医用画像生成装置におけるマンモグラフィー画像（ＭＬＯ、ＣＣ）、下図は、シェーマ画像の態様を示す一例であり、（ｂ）の上図は、操作者による修正が施された後の、実施の形態２の医用画像生成装置における同じくマンモグラフィー画像（ＭＬＯ、ＣＣ）、下図は、同じくシェーマ画像の態様を示す一例である。 上図は、操作者による修正が施された後の、実施の形態２の医用画像生成装置における同じくマンモグラフィー画像（ＭＬＯ、ＣＣ）、下図は、同じくシェーマ画像の態様を示す別の一例である。 実施の形態３の医用画像生成装置におけるサーバー装置の制御部４１Ａの機能的構成を示す機能ブロック図である。 （ａ）は、ＭＬＯ画像に含まれる***画像における注目領域に基づき、ＣＣ画像に含まれる***画像における参照候補範囲を特定する方法を説明するための模式図、（ｂ）はＭＬＯ画像に含まれる***画像における注目領域ＲＩと、ＣＣ画像に含まれる***画像における参照候補範囲の表示態様を示す模式図である。 （ａ）～（ｃ）は、ＭＬＯ画像に含まれる***画像における異なる位置に存在する注目領域対し、ＣＣ画像に含まれる***画像における参照候補範囲を特定した例を示す模式図である。 （ａ）（ｂ）は、ＭＬＯ画像に含まれる***画像における異なる位置に存在する注目領域対し、ＣＣ画像に含まれる***画像における参照候補範囲を特定した例を示す模式図である。 （ａ）は、ＣＣ画像における注目領域における注目領域の情報に基づき、ＭＬＯ画像における参照候補範囲を特定する方法を説明するための模式図、（ｂ）はＣＣ画像に含まれる***画像における注目領域ＲＩと、ＭＬＯ画像に含まれる***画像における参照候補範囲の表示態様を示す模式図である。 （ａ）～（ｃ）は、ＣＣ画像に含まれる***画像における異なる位置に存在する注目領域対し、ＭＬＯ画像に含まれる***画像における参照候補範囲を特定した例を示す模式図である。 （ａ）（ｂ）は、ＣＣ画像に含まれる***画像における異なる位置に存在する注目領域対し、ＭＬＯ画像に含まれる***画像における参照候補範囲を特定した例を示す模式図である。 （ａ）は、***画像に注目領域を表示したＣＣ画像の例、（ｂ）は、***画像に参照候補範囲を表示したＭＬＯ画像の例である。
≪実施の形態≫
＜医用画像システム１００の全体構成＞
以下、実施の形態１に係る医用画像システム１００について、図面を用いて詳細に説明する。図１は、実施の形態に係る医用画像システム１００のシステム構成図である。医用画像システム１００は、図１に示すように、乳癌腫瘍の診断に用いられ、マンモグラフィー装置１、超音波診断装置２、診断支援装置３（ＣＡＤ：Computer-Aided Diagnosis）、サーバー装置４、医用画像データベース５、表示装置６（ディスプレイ）を有する。さらに、位置推定機能を実行させるための専用端末としてゲートウェイ端末（不図示）を備えていてもよい。これらの装置は、ネットワークＮＴを介して相互に接続される。ネットワークＮＴは、ＤＩＣＯＭ（Digital Imaging and Communication in Medicine）規格が適用されている。
本実施形態においては、以上の構成からなる医用画像システム１００は、被写体部位をマンモグラフィー装置１により撮影し、得られたマンモグラフィー画像を医用画像データベース５に保存して管理する。併せて、読影医の指定に基づくマンモグラフィー画像上の注目領域の位置指定に係る操作入力を受け、診断支援装置３により注目領域の候補に関する情報を生成し、注目領域又はその候補に関する情報に基づき、注目領域の被検体の正面方向及び奥行方向における位置を推定して、それらを反映したシェーマ画像を生成する。そして、超音波診断装置２における超音波検査を支援するために、シェーマ画像を表示装置６に表示する。
ここで、「注目領域の位置」とは、注目領域から選択される任意の基準点の位置である。また、注目領域内の複数の点を基準点とし、それぞれの点の位置を注目領域の位置としてもよい。あるいは、注目領域が所定値以上の大きさの範囲であるとき、注目領域をカバーできる複数の点を基準点とし、それぞれの点の位置を注目領域の位置としてもよい。大きさを考慮した注目領域の位置の指定が可能となり、以後の処理において、注目領域の大きさを考慮した注目領域の位置の算出が可能となる。
＜医用画像システム１００の各部構成＞
以下、医用画像システム１００の各構成要素について説明する。
マンモグラフィー装置１は、被検体の***に既定された２方向（ＭＬＯ：;Medio-Lateral Oblique（内外斜位方向）、及びＣＣ（Cranio-Caudal（頭尾方向））から板状体で***全体を挟み込み圧縮した状態で、ＭＬＯ及びＣＣに沿ってＸ線を照射し、***を透過したＸ線を検出して、***全体をＭＬＯから撮影したマンモグラフィー画像（以後、「ＭＬＯ画像」とする）及び***全体をＣＣから撮影したマンモグラフィー画像（以後、「ＣＣ画像」とする）を生成するＸ線撮影装置である。マンモグラフィー装置１は、ＤＩＣＯＭ規格に準拠して生成したＭＬＯ画像及びＣＣ画像にその画像に関する被験者情報、検査情報等を付記して医用画像データベース５に出力して保存させる。
超音波診断装置２は、圧電素子アレイを備えた超音波探触子より被検体内に超音波を送信し、被検体組織内の音響インピーダンスの差異から生じる超音波の反射波を超音波探触子により受信し、得られた電気信号に基づいて被検体の内部組織の形状を示す超音波断層画像を生成して表示する装置である。超音波診断装置２は、ＤＩＣＯＭ規格に準拠して生成した超音波断層画像にその画像に関する被験者情報、検査情報、臨床情報等を付記して医用画像データベース５に出力して保存させる。
診断支援装置３は、マンモグラフィー装置１から供給されるＭＬＯ画像及びＣＣ画像の画像解析を行って乳癌腫瘍の疑いがある被検体内の組織構造物を含む注目領域の候補の検出処理を行う。注目領域の候補は、読影医がマンモグラフィー画像において注目領域を抽出するときの候補となる領域であり、診断支援装置３により乳癌腫瘍の候補となる被検体内の組織構造物が検出される領域である。
ここで、「組織構造物」とは、被検体の内部組織の特徴的な構造であり、被検体の所定部位が、***である本開示の場合、例えば、腫瘤、乳管拡張、嚢胞、石灰化、乳管等を指す。また、「注目領域」とは、被検体の***全体を表すＭＬＯ画像及びＣＣ画像に含まれる組織構造物が示された画像領域を指す。上述のとおり、乳癌と疑われる腫瘍を探すスクリーニング検査において、これらの構造物が存在するか否かが大きな手がかりとなる。そのため、乳癌腫瘍の診断のスクリーニング検査では、ＭＬＯ画像及びＣＣ画像に含まれる注目領域の検出が行われる。
図２は、診断支援装置３の機能的構成を示す機能ブロック図である。診断支援装置３は、図２に示すように、ＣＰＵ（Central Processing Unit）３１、メモリー３２、表示装置３３（ディスプレイ）、入出力部３４（インターフェイス）を有する。入出力部３４には、例えば、１０ＧＢＡＳＥ－Ｔ対応のインターフェースを用いることができ、医用画像データベース５から画像や情報を取得する。ＣＰＵ３１は、ＭＬＯ画像及びＣＣ画像の一部または全部をメモリー３２に記憶し、フィルタリング処理、テンプレートマッチング等のプログラムを実行し、乳癌腫瘍の候補となる被検体内の組織構造物を検出する。検出には、例えば、特開２０００－１２６１６３号公報、特開２００５－０９５５０１号公報等に記載された公知の検出アルゴリズムを用いることができる。ＣＰＵ３１は、検出された注目領域の候補に関する情報を参照元のＭＬＯ画像及びＣＣ画像に重畳させて表示装置３３に表示させることができる。
検出された注目領域の候補に関する情報を参照元のＭＬＯ画像及びＣＣ画像に付加して入出力部３４に出力し、注目領域の候補に関する情報は入出力部３４から医用画像データベース５に出力され保存される。また、ＭＬＯ画像及びＣＣ画像から検出された関連情報も付加する構成としてもよい。ＭＬＯ画像及びＣＣ画像それぞれに付加される情報としては、注目領域の位置、ニップル位置、***基底ラインの位置、***スキンラインの位置、***スキンラインの上端及び下端（ＣＣでは左端、右端）、ニップル軸の位置等が挙げられる。
サーバー装置４（医用画像生成装置）、医用画像データベース５、表示装置６は、医用画像保管通信システム１０（ＰＡＣＳ：Picture Archiving and Communication System、以後「ＰＡＣＳ」とする）を構成する。ＰＡＣＳ１０は、マンモグラフィー装置１、超音波診断装置２により取得された医用画像データ及び診断支援装置３からの診断支援情報を医用画像データベース５に保管して管理する。医用画像データベース５に保管された医用画像は、被験者情報、検査情報、臨床情報等に基づいて検索可能に構成され、選択された医用画像を表示装置６に表示することができる。また、読影医からの操作入力による指示に基づきシェーマ画像を生成するとともに、シェーマ画像と読影医が作成した読影レポートとを参照元のＭＬＯ画像及びＣＣ画像と関連付けて医用画像データベース５に保存して管理する。
医用画像データベース５は、コンピュータ読み取り可能な記録媒体であり、例えば、フレキシブルディスク、ハードディスク、ＭＯ、ＤＶＤ、ＤＶＤ－ＲＡＭ、ＢＤ、ＳＳＤ、半導体メモリー等を用いることができる。マンモグラフィー装置１から出力されるＭＬＯ画像及びＣＣ画像、及び超音波診断装置２から出力される超音波断層画像、シェーマ画像等が保存される。
表示装置６は、いわゆる画像表示用の表示装置であって、後述する表示制御部４３からの画像出力に基づき、ＭＬＯ画像、ＣＣ画像、医師による注目領域の指定に関する情報、超音波断層画像、シェーマ画像、その他臨床に関する各種情報等を含む表示画像を画面に表示する。表示装置６には、液晶ディスプレイ、ＣＲＴ、有機ＥＬディスプレイ等を用いることができる。表示装置６は、サーバー装置４の表示制御部４３から画像を受信するためのインターフェースとして、例えば、ＤＶＩ、ＤｉｓｐｌａｙＰｏｒｔ等を備える。
サーバー装置４は、医用画像保管通信システム１０の主要部を構成する本体装置であり、本実施の形態では、ＭＬＯ画像及びＣＣ画像、及び読影医からの操作入力に係る注目領域、又は診断支援装置３からの注目領域の候補に関する情報を入力として、シェーマ画像を生成する医用画像生成装置として機能する。図３は、医用画像生成装置を構成するサーバー装置４の機能的構成を示す機能ブロック図である。サーバー装置４は、図３に示すように、制御部４１、メモリー４２、表示制御部４３、操作入力部４４、入出力部４５（インターフェイス）を有する。
制御部４１は、ＣＰＵやＧＰＧＰＵ（General-Purpose computing on Graphics Processing Unit）やプロセッサなどのプログラマブルデバイスとソフトウェアにより実現される。あるいは、ＦＰＧＡ（Field Programmable Gate Array）、ＡＳＩＣ（Application Specific Integrated Circuit)などのハードウェア回路により実現される構成であってもよい。制御部４１の詳細については後述する。
メモリー４２はＦＰＧＡ、ＡＳＩＣ、ＣＰＵやＧＰＧＰＵ内に構成された半導体メモリーを用いてもよい。あるいは、外部から接続された記憶装置であってもよく、医用画像データベース５の一部を用いてもよい。
表示制御部４３は、シェーマ画像を含む表示画面を作成して表示装置６に出力して表示装置６に表示画面を表示させる回路である。
入出力部４５は医用画像データベース５との情報の入出力を行うインターフェイスであり、例えば、１０ＧＢＡＳＥ－Ｔ対応のインタフェースカードを用いることができる。表示制御部４３は、制御部４１と同様に、ＦＰＧＡ、ＡＳＩＣ、ＣＰＵやＧＰＧＰＵ内に構成することができ、制御部４１と一体に構成してもよい。
これらの構成要素は一個の回路部品とすることができるし、複数の回路部品の集合体にすることもできる。また、複数の構成要素を組合せて一個の回路部品とすることができるし、複数の回路部品の集合体にすることもできる。
操作入力部４４は、操作者からの各種設定・操作等の各種操作入力を受け付け制御部４１に出力する。本実施の形態では、読影医がマンモグラフィー画像において注目領域として指定する領域指定に係る操作入力を受け、指定された注目領域に関する情報を制御部４１に出力する。操作入力部４４は、例えば、各種操作用のキーを有するキーボードや、各種操作用のボタン、レバー等を有する操作パネルやマウス等であってもよい。あるいは、操作入力部４４は、例えば、表示装置６と一体に構成されたタッチパネルであってもよい。この場合、読影医が表示装置６に表示されたマンモグラフィー画像に対してタッチ操作やドラッグ操作を行うことにより注目領域の指定を行うことができるよう構成される。
制御部４１が、ＭＬＯ画像及びＣＣ画像、及び注目領域又は注目領域の候補に関する情報を入力としてシェーマ画像を生成する医用画像生成処理のプロラムを実行することにより、サーバー装置４はシェーマ画像を生成する医用画像生成装置として機能する。図４は、制御部４１のシェーマ画像生成に係る機能的構成を示す機能ブロック図である。制御部４１は、図４に示すように、画像及び情報取得部４１１、正面情報算出部４１２、奥行情報算出部４１３、シェーマ画像生成部４１４を有する。
具体的には、画像及び情報取得部４１１は、医用画像データベース５から及び注目領域の情報を取得する。正面情報算出部４１２は、ＭＬＯ画像及びＣＣ画像の一部または全部をメモリー４２に記憶し、取得されたＭＬＯ画像及びＣＣ画像と注目領域の情報とに基づき、それぞれの画像に含まれる***画像における注目領域の正面方向における範囲を表す正面情報を算出する。奥行情報算出部４１３は、ＭＬＯ画像及びＣＣ画像の一部または全部をメモリー４２に記憶し、取得されたＭＬＯ画像及びＣＣ画像と注目領域の情報とに基づき、それぞれの画像に含まれる***画像における注目領域の奥行方向における範囲を表す奥行情報を算出する。シェーマ画像生成部４１４は、正面情報と奥行情報を反映してシェーマ画像を生成する。その際、シェーマ画像における正面情報の識別部の態様を、奥行情報の内容に応じて異ならせたシェーマ画像を生成する構成としてもよい。
各構成要素における、処理の詳細については後述する。
ここで、「奥行情報の内容」とは、奥行情報が複数の種類のパラメータからなるとき、パラメータの種別、及びパラメータの値の大きさの両方を指す。本実施の形態では、パラメータの種類として、例えば、注目領域の奥行方向の位置（深さ）、及び注目領域の奥行方向の厚みを示す。パラメータの値として、注目領域の奥行方向の位置（深さ）の値、及び注目領域の奥行方向の厚みの値を示す。
制御部４１は、生成されたシェーマ画像を参照元のＭＬＯ画像及びＣＣ画像と関連付けて入出力部４５に出力し、シェーマ画像は入出力部４５から医用画像データベース５に出力され保存される。制御部４１は、シェーマ画像と参照元のＭＬＯ画像及びＣＣ画像を表示制御部４３に出力し、表示制御部４３は、シェーマ画像を含む表示画面を作成して表示装置６に出力して表示装置６に表示させる。ＭＬＯ画像及び／又はＣＣ画像と共に表示装置６に表示させてもよい。
ゲートウェイ（不図示）は、位置推定機能を実行させるための専用端末であり、診断支援装置３（ＣＡＤ）から病変位置情報を取得し、医用画像保管通信システム１０（ＰＡＣＳ）から該当する検査画像を取得して位置推定を行い、その結果を医用画像保管通信システム１０へ送信する。
＜乳癌検査の流れ＞
先ず、乳癌の検査の流れの概要を説明する。乳癌の検査では、***内に乳癌腫瘍の疑いがある被検体内の組織構造物を、マンモグラフィー装置と超音波診断装置とを用いてスクリーニングする併用検査が行われる。図５は、乳癌検査における併用検査の流れを示す工程図の一例である。
先ず、被検体の***にＭＬＯ及びＣＣから板状体で***全体を挟み込み圧縮した状態で、ＭＬＯ及びＣＣに沿ってＸ線を照射し、***全体をＭＬＯから撮影したマＭＬＯ画像及びＣＣ画像を取得する。
次に、ＭＬＯ画像及びＣＣ画像を読影して組織構造物を検出し、超音波診断において超音波探触子を走査すべき位置の確認作業が行われる。図６（ａ）～（ｃ）は、読影・走査位置確認の工程の態様を示す工程図の一例である。
図６（ａ）に示す例では、先ず、読影医によるＭＬＯ画像及びＣＣ画像の読影が行われる。読影医はＭＬＯ画像及びＣＣ画像それぞれについて、乳癌腫瘍の疑いがある被検体内の組織構造物が存在するか否かを検査し、当該組織構造物が存在する領域を注目領域として捜査入力部４４を介してサーバー装置４に入力する。次に、サーバー装置４は係る注目領域に関する情報に基づき、注目領域の被検体の位置に対応する超音波探触子を走査すべき位置を表したシェーマ画像を生成する。
図６（ｂ）に示す例は、診断支援装置３により読影の支援を行う場合である。この場合、読影医による読影に先立って、検査技師に操作に基づき、診断支援装置３によりＭＬＯ画像及びＣＣ画像の画像解析を行って乳癌腫瘍の疑いがある被検体内の組織構造物を含む注目領域の候補の検出処理を行う。読影医は読影に際し、注目領域の候補に関する情報を参照してＭＬＯ画像及びＣＣ画像を読影し候補領域を特定する。
図６（ｃ）に示す例は、読影と超音波探触子を走査すべき位置の確認とを並行して行う場合である。この場合、診断支援装置３は図６（ｂ）の場合と同様にＭＬＯ画像及びＣＣ画像に基づき注目領域の候補の検出し、サーバー装置４は、診断支援装置３の出力に係る注目領域の候補に関する情報に基づき、注目領域の被検体の位置に対応する超音波探触子を走査すべき位置を表したシェーマ画像を生成する。
次に図５に戻り、超音波診断装置２により超音波検査が行われる。このとき、超音波診断装置２を操作する医師又は検査技師は、上記工程において確認された走査位置に超音波探触子を当てて走査して反射波を受信する。これにより、被検体***における注目領域に相当する部位近傍を走査することにより、当該部位からの反射波を感度良く受信して高解像度かつＳ／Ｎの高い超音波断層画像を得ることができる。
最後に、得られたＭＬＯ画像及びＣＣ画像及び超音波断層画像に基づく総合判定が行行われ、生体検査等の精密検査を行うべき被検体内の組織構造物の有無が判定される。
＜サーバー装置４（医用画像生成装置）の動作について＞
以上の構成からなる医用画像生成装置４における医用画像生成処理及び表示動作について説明する。
図７は、サーバー装置４（医用画像生成装置）における医用画像生成処理のフローチャートである。
先ず、画像及び情報取得部４１１は、操作入力部４４を介して、例えば、被験者情報、検査情報、臨床情報等、操作者からの各種設定・操作等の各種操作入力を受け付ける（ステップＳ１）。
情報が入力されると、画像及び情報取得部４１１は、入力された被験者情報、検査情報、臨床情報等に基づいてマンモグラフィー画像（ＭＬＯ画像及びＣＣ画像）を選択して医用画像データベース５から読み出して表示装置６に表示する（ステップＳ２）。さらに、マンモグラフィー画像に注目領域の候補に関する情報が不可されているか否かを判定し（ステップＳ３）、付加されている場合には、注目領域の候補に関する情報を参照元のＭＬＯ画像及びＣＣ画像に重畳させて表示装置６にアノテーション表示し（ステップＳ４）、付加されていない場合にはステップＳ４に進む。
次に、画像及び情報取得部４１１は、操作入力部４４を介して、読影医である操作者からの注目領域の指定に係る操作入力を受け付ける（ステップＳ５）。注目領域が指定されると、注目領域の指定入力を終了するか否かを確認し（ステップＳ６）、終了しない場合にはステップＳ５に戻り新たな注目領域の指定入力を受け付け、終了する場合にはステップＳ７に進む。
次に、正面情報算出部４１２は注目領域の正面情報を算出する（ステップＳ７）。図８は、ステップＳ７における注目領域の正面情報の算出処理の詳細を示すフローチャートである。図９は、ＭＬＯ画像Ｉｍ１における注目領域ＲＩ１及びＣＣ画像Ｉｍ２における注目領域ＲＩ２の情報から、正面方向のシェーマ画像Ｉｍ３における注目領域の範囲ＲＩ３を表す正面情報の算出方法を説明するための模式図である。図９では、正面方向のシェーマ画像Ｉｍ３における横方向、縦方向をＸ方向、Ｙ方向、ＭＬＯ画像Ｉｍ１における横方向、縦方向をＸ方向、Ｚ方向、ＣＣ画像Ｉｍ２における横方向、縦方向をＸ方向、Ｚ方向とする。また、正面情報の算出方法は、例えば、特開２０１５－１０４４６４号公報、特開２０１５－１０４４６５号公報等に記載された公知の方法を用いることができる。
先ず、正面情報算出部４１２は、マンモグラフィー画像（ＭＬＯ，ＣＣ）を画像解析して、スキンライン、ニップル位置、***基底ラインを検出する（ステップＳ７１）。
具体的には、図９に示すように、ＭＬＯ画像Ｉｍ１からスキンラインＳｌ１、ニップル位置Ｎｉ１、***基底ラインＣｗ１を、ＣＣ画像Ｉｍ２からスキンラインＳｌ２、ニップル位置Ｎｉ２、***基底ラインＣｗ２を検出する。ここで、本明細書では、ＭＬＯ画像Ｉｍ１及びＣＣ画像Ｉｍ２におけるニップル位置をニップル位置Ｎｉ、スキンラインＳｌ、***基底ラインＳｗに対し、それぞれ番号（１，２）を付して表記する。両画像の区別をしない場合には番号を省略する。
ここで、「***基底ライン」とは、マンモグラフィー画像中の***画像における***の基底部分における外縁を示すラインであり、「***画像における胸壁ライン」、「***画像の上端と下端とを結ぶ直線」、又は「マンモグラフィー画像におけるＸ軸正方向の端点を通りＹ軸に平行な直線」の何れかを用いることができる。
なお、スキンライン及び胸壁ライン又は***画像の上端と下端とを結ぶ直線を抽出する方法としては公知の技術を使用することができ、例えば、画像のヒストグラム解析を行い、***領域と非***領域との境界であるスキンラインの輝度値を求め、胸壁側から乳頭側に当該輝度値を有する画素を探索する方法を用いることができる。または、例えば、Ｓｏｂｅｌフィルタを用いて２つの画素間の輝度変化に対応する輪郭データを取得し、輪郭データを２値化して２値化された輪郭データを凸包処理することで、スキンライン及び胸壁ライン又は***画像の上端と下端とを結ぶ直線を抽出する。より具体的には、Ｓｏｂｅｌフィルタによって輝度値（Ｘ線強度）が変化する領域を取り出し、２値化によって輝度値の変化度合いが閾値以上である領域のみを抽出して輪郭抽出を行う。または、特開２０１１－１２５３６３号公報に開示されているように、断層画像をウェーブレット変換した後高周波成分のみを逆変換し、画素値に基づいて探索を行ってスキンラインを抽出するとしてもよい。また、ニップル位置の算出方法は、例えば、特開２０１５－１０４４６４号公報、特開２０１５－１０４４６５号公報等に記載された公知の方法を用いることができる。
次に、正面情報算出部４１２は、シェーマ画像に対しマンモグラフィー画像（ＭＬＯ，ＣＣ）を撮影角度、傾けてニップル軸を配置する（ステップＳ７２）。
具体的には、図９に示すように、ＭＬＯ画像Ｉｍ１を、ＭＬＯ画像Ｉｍ１のニップル位置Ｎｉ１を通り***基底ラインＣｗ１と垂直なニップル軸Ｎｌ１が、シェーマ画像Ｉｍ３のニップル位置Ｎｉ３を通り、かつ、ニップル軸Ｎｌ１がシェーマ画像Ｉｍ３のＹ方向に対し、ＭＬＯ画像Ｉｍ１の撮影角度θ（垂直方向を０°とする）だけ傾くように配置する。
また、ＣＣ画像Ｉｍ２を、ＣＣ画像Ｉｍ２のニップル位置Ｎｉ２を通り***基底ラインＣｗ２と垂直なニップル軸Ｎｌ２が、シェーマ画像Ｉｍ３のニップル位置Ｎｉ３を通り、かつ、ニップル軸Ｎｌ２がシェーマ画像Ｉｍ３のＹ方向に対し、ＣＣ画像Ｉｍ２の撮影角度０°となるように配置する。
なお、図９において、ＭＬＯ画像Ｉｍ１、ＣＣ画像Ｉｍ２における、***基底ラインＣｗ１、２を、それぞれＭＬＯ画像Ｉｍ１、ＣＣ画像Ｉｍ２のＸ方向として図示している。
次に、正面情報算出部４１２は、マンモグラフィー画像（ＭＬＯ，ＣＣ）を拡縮し、シェーマ画像外縁とのマンモグラフィー画像（ＭＬＯ，ＣＣ）端部とを合致させる（ステップＳ７３）。
具体的には、図９に示すように、ＣＣ画像Ｉｍ２のＸ方向の端点Ｘｍａｘ２が、シェーマ画像Ｉｍ３のＸ方向の端点Ｘｍａｘ３と一致するように、ＣＣ画像Ｉｍ２をニップル位置Ｎｉ２を基準に拡縮する。同時に、ＣＣ画像Ｉｍ２のＸ方向の端点Ｘｍｉｎ２が、シェーマ画像Ｉｍ３のＸ方向の端点Ｘｍｉｎ３と一致するように、ＣＣ画像Ｉｍ２を拡縮させてもよい。
また、ＭＬＯ画像Ｉｍ１のＸ方向の端点Ｘｍａｘ１が、シェーマ画像Ｉｍ３のＸ方向の端点Ｘｍａｘ３を通りニップル軸Ｎｌ１と平行な直線Ｎｌ１’がシェーマ画像Ｉｍ３と接するように、ＭＬＯ画像Ｉｍ１をニップル位置Ｎｉ１を基準に拡縮する。
次に、正面情報算出部４１２は、マンモグラフィー画像（ＭＬＯ，ＣＣ）各々の注目領域をシェーマ画像に投影、重複領域をシェーマ画像おける注目領域の範囲（正面情報）として算出し（ステップＳ７４）、正面情報をシェーマ画像生成部４１４に出力する（ステップＳ７５）。
具体的には、ＭＬＯ画像Ｉｍ１の注目領域ＲＩ１をシェーマ画像Ｉｍ３に投影し、ＣＣ画像Ｉｍ２の注目領域ＲＩ２をシェーマ画像Ｉｍ３に投影し、重複する領域を正面方向のシェーマ画像Ｉｍ３における注目領域の範囲ＲＩ３を表す正面情報として算出して出力する。
次に、奥行情報算出部４１３は、注目領域の深さに関する奥行情報を算出する（ステップＳ８）。図１０は、ステップＳ８における注目領域の奥行方向深さに関する奥行情報の算出処理の詳細を示すフローチャートである。図１１は、ＭＬＯ画像又はＣＣ画像における注目領域の情報から、注目領域の奥行方向深さに関する奥行情報の算出方法であって、（ａ）は第１の方法、（ｂ）は第２の方法、（ｃ）は第３の方法を説明するための模式図である。
先ず、奥行情報算出部４１３は、マンモグラフィー画像（ＭＬＯ，ＣＣ）において奥行き方向の***全厚みＤ１を算出する（ステップＳ８１）。第１の方法では、図１１（ａ）に示すように、マンモグラフィー画像（ＭＬＯ，ＣＣ）において、ニップル位置Ｎｉからマンモグラフィー画像における奥行方向軸（Ｚ方向）に沿った***基底ラインＣｗまでの距離を奥行き方向の***全厚みＤ１とする。
次に、奥行情報算出部４１３は、マンモグラフィー画像（ＭＬＯ，ＣＣ）においてニップル位置又はスキンラインから注目領域の基準位置までの距離（注目領域深さ）Ｄ２を算出する（ステップＳ８２）。第１の方法では、図１１（ａ）に示すように、注目領域ＲＩにおける基準点Ｐｔを通りマンモグラフィー画像における奥行方向軸（Ｚ方向）に平行な直線と、ニップル位置Ｎｉを通り奥行方向軸に垂直な直線Ｌ１との交点から基準点Ｐｔまでの距離を注目領域深さＤ２とする。
ここで、本例では、図１１（ａ）に示すように、注目領域ＲＩにおける奥行軸方向の最も浅い点を基準点Ｐｔとしている。しかしながら、基準点Ｐｔは注目領域ＲＩ内に存在する任意の点としてもよく、例えば、注目領域ＲＩの中心点、奥行軸方向の最も深いい点を基準点Ｐｔに選択してもよい。あるいは、複数の点からなる点群を基準点Ｐｔとしてもよい。例えば、矩形形状の注目領域ＲＩに対し、４つの頂点を基準点Ｐｔとして選択し、それぞれに対して注目領域深さＤ２を算出してもよい。注目領域ＲＩが所定値以上の大きさの範囲であるとき、注目領域ＲＩをカバーできる複数の点を基準点Ｐｔとして選択することにより、注目領域ＲＩの大きさを考慮した注目領域ＲＩの位置の算出が可能となる。
次に、奥行情報算出部４１３は、注目領域深さＤ２の***全厚みＤ１に対する比率Ｄ２／Ｄ１（注目領域相対深さ）を算出する（ステップＳ８３）。
次に、奥行情報算出部４１３は、ＭＬＯ画像、ＣＣ画像における注目領域相対深さからマンモグラフィー画像における注目領域相対深さの代表値を算出（ステップＳ８４）して、正面情報をシェーマ画像生成部４１４に注目領域相対深さを奥行情報としてシェーマ画像生成部４１４に出力して（ステップＳ８５）、図７に戻る。ＭＬＯ画像、ＣＣ画像の注目領域相対深さが異なる場合、代表値の算出は平均、何れかを選択、最大値を選択等の方法を用いてもよい。
なお、第２の方法を採る場合には、ステップＳ８１において、図１１（ｂ）に示すように、マンモグラフィー画像（ＭＬＯ，ＣＣ）において、注目領域ＲＩにおける基準点Ｐｔを通りマンモグラフィー画像における奥行方向軸（Ｚ方向）に平行な直線Ｌ２と***スキンラインＳｌとの交点から、直線Ｌ２と***基底ラインとの交点までの距離を奥行き方向の***全厚みＤ１とし、ステップＳ８２において、直線Ｌ２と***スキンラインＳｌとの交点から、基準点Ｐｔまでの距離を注目領域深さＤ２としてもよい。第２の方法では、図１１（ｂ）に示すように、注目領域ＲＩにおける奥行軸方向の最も浅い点を基準点Ｐｔとしている。しかしながら、基準点Ｐｔは注目領域ＲＩ内に存在する任意の点としてもよい。
また、第３の方法を採る場合には、ステップＳ８１において、図１１（ｃ）に示すように、注目領域ＲＩにおける基準点Ｐｔを通り、ニップル位置Ｎｉを通り***基底ラインＣｗへの法線であるニップル軸に平行な直線Ｌ３と***スキンラインＳｌとの交点から、直線Ｌ３と***基底ラインＣｗとの交点までの距離である距離を奥行き方向の***全厚みＤ１とし、ステップＳ８２において、図１１（ｃ）に示すように、直線Ｌ３と***スキンラインＳｌとの交点から、基準点Ｐｔまでの距離を注目領域深さＤ２としてもよい。係る構成により、シャーマ画像における奥行方向と***基底ラインの方向とが一致しない場合もおいても、注目領域の奥行方向の位置を算出できる。なお、第３の方法では、図１１（ｃ）に示すように、注目領域ＲＩにおけるニップル軸と平行な直線と注目領域ＲＩとの交点のうち、最も浅い点を基準点Ｐｔとしている。しかしながら、基準点Ｐｔは注目領域ＲＩ内に存在する任意の点としてもよい。
あるいは、第３の方法を採る場合には、図１１（ｄ）に示すように、ニップルＮｉの上端と下端とを通る直線Ｌ４としたとき、ニップル軸をニップル位置Ｎｉを通り直線Ｌ４と垂直な直線Ｎｉｌとし、図１１（ｃ）と同様の方法を用いて***全厚みＤ１及び注目領域深さＤ２を算出してもよい。
次に、奥行情報算出部４１３は、注目領域の厚みに関する奥行情報を算出する（ステップＳ９）。図１２は、ステップＳ９における注目領域の奥行方向厚みに関する奥行情報の算出処理の詳細を示すフローチャートである。図１３は、ＭＬＯ画像又はＣＣ画像における注目領域の情報から、注目領域の奥行方向厚みに関する奥行情報の算出方法であって、（ａ）は第１の方法、（ｂ）は第２の方法を説明するための模式図である。
先ず、奥行情報算出部４１３は、マンモグラフィー画像（ＭＬＯ，ＣＣ）において奥行き方向の***全厚みＤ３を算出する（ステップＳ９１）。第１の方法では、図１３（ａ）に示すように、注目領域ＲＩにおける基準点Ｐｔを通りマンモグラフィー画像における奥行方向軸（Ｚ方向）に平行な直線Ｌ２と***スキンラインＳｌとの交点から、直線Ｌ２と***基底ラインＣｗとの交点までの距離を奥行き方向の***全厚みＤ３とする。第１の方法では、図１３（ａ）に示すように、注目領域ＲＩにおける奥行軸方向の最も浅い点を基準点Ｐｔとしている。しかしながら、基準点Ｐｔは注目領域ＲＩ内に存在する任意の点としてもよい。
次に、奥行情報算出部４１３は、マンモグラフィー画像（ＭＬＯ，ＣＣ）において注目領域厚みＤ４を算出する（ステップＳ９２）。第１の方法では、図１１（ａ）に示すように、直線Ｌ２と注目領域の外縁との２つの交点間の距離を注目領域厚みＤ４とする。
次に、奥行情報算出部４１３は、注目領域厚みＤ４の***全厚みＤ３に対する比率Ｄ４／Ｄ３（注目領域相対厚み）を算出する（ステップＳ９３）。
次に、奥行情報算出部４１３は、ＭＬＯ画像、ＣＣ画像における注目領域相対厚みからマンモグラフィー画像における注目領域相対厚みの代表値を算出し（ステップＳ９４）、注目領域相対厚みを奥行情報としてシェーマ画像生成部４１４に出力して（ステップＳ９５）、図７に戻る。代表値を算出方法はステップＳ８４と同じである。
なお、以上の処理において、第２の方法を採る場合には、ステップＳ９１において、注目領域ＲＩにおける基準点Ｐｔを通り、ニップル位置Ｎｉを通り***基底ラインＣｗへの法線に平行な直線Ｌ３と***スキンラインＳｌとの交点から、直線Ｌ３と***基底ラインＣｗとの交点までの距離を奥行き方向の***全厚みＤ３としてもよく、ステップＳ９２において、直線Ｌ３と注目領域ＲＩの外縁との２つの交点間の距離を注目領域厚みＤ４としてもよい。係る構成により、シャーマ画像における奥行方向と***基底ラインの方向とが一致しない場合もおいても、注目領域の奥行方向の厚みを算出できる。なお、第２の方法では、図１３（ｂ）に示すように、注目領域ＲＩにおけるニップル軸と平行な直線と注目領域ＲＩとの交点のうち、最も浅い点を基準点Ｐｔとしている。しかしながら、基準点Ｐｔは注目領域ＲＩ内に存在する任意の点としてもよい。
あるいは、第２の方法を採る場合には、図１３（ｃ）に示すように、ニップルＮｉの上端と下端を通る直線Ｌ４としたとき、ニップル軸をニップル位置Ｎｉを通り直線Ｌ４と垂直な直線Ｎｉｌとし、図１３（ｂ）と同様の方法を用いて、***全厚みＤ３及び注目領域厚みＤ４を算出してもよい。
次に、シェーマ画像生成部４１４は、正面情報と奥行情報を反映して、シェーマ画像における正面情報の識別部の態様を、奥行情報の内容に応じて異ならせたシェーマ画像を生成し（ステップＳ１０）、表示制御部４３は、シェーマ画像を含む表示画面を作成して表示装置６に出力してＭＬＯ画像及び／又はＣＣ画像と共に表示装置６に表示させる（ステップＳ１１）。
次に、画像及び情報取得部４１１は、更なる注目領域の指定入力を終了するか否かを確認し（ステップＳ１２）、終了しない場合にはステップＳ５に戻り新たな注目領域の指定入力を受け付け、終了する場合には処理を終了する。
＜シェーマ画像の態様＞
サーバー装置４（医用画像生成装置）によって生成され表示されるシェーマ画像の例について、図面を用いて説明する。
（注目領域の奥行方向深さの反映）
図１４（ａ）～（ｃ）は、注目領域の奥行方向深さが異なるマンモグラフィー画像の一例である。図１５（ａ）～（ｃ）、図１６（ａ）～（ｃ）は、注目領域の奥行方向深さが異なる奥行情報を反映したシェーマ画像の一例である。図１５（ａ）～（ｃ）は、正面方向における注目領域の位置を表す棒状のインディケータバーＡｔ１を用いた例であり、インディケータバーＡｔ１とシェーマ画像と直角に交わる直径との交点がマンモグラフィー画像（ＭＬＯ，ＣＣ）における注目領域ＲＩのＸ方向の位置に相当する。また、図１６（ａ）～（ｃ）は、正面方向における注目領域の位置を表すために扇型のインディケータＡｔ２を用いた例であり、扇型がハイライトされているインディケータＡｔ２がマンモグラフィー画像（ＭＬＯ，ＣＣ）における注目領域ＲＩの存在範囲である。
シェーマ画像生成部４１４は、さらに、図１４（ａ）～（ｃ）に示すように、深さを「浅、中、深」に分類し、図１５（ａ）～（ｃ）あるいは、図１６（ａ）～（ｃ）に示すように、分類深さに対応して、正面方向における注目領域の位置を表すインディケータＡｔ１、Ａｔ２の色、濃度、輝度、透明度、テクスチャから選択される１以上の要素を異ならせることにより、奥行方向の深さが異なる奥行情報を反映したシェーマ画像を生成しても表示してもよい。
これにより、超音波操作者は、超音波検査の際に注目領域の***の奥行方向の位置をシェーマ画像からに把握することができる。超音波操作者は、被験者の対象部位と表示画面とを交互に見ながら診断を行うことが通例である。このとき、本実施の形態にかかる医用画像生成装置によれば、シェーマ画像自体の態様を異ならせて、注目領域の***の奥行方向の位置について情報伝達を行うことから、超音波操作者の視線移動の範囲が対象部位と表示画面との範囲内に抑制される。また、超音波操作者は、シェーマ画像自体のインディケータ部分の態様の変化から、視覚を通して操作者の感覚により近い状態で注目領域の***の奥行方向の位置を認識することができる。
そのため、超音波検査の際に超音波操作者がマンモグラフィー画像を読み出して注目領域の奥行方向の位置を確認する作業を無くし、超音波操作者の作業負担を軽減して検査効率を向上することができる。
（注目領域の奥行方向深さに基づく位置推定誤差の反映）
乳頭から注目領域ＲＩまでの距離が大きくなるほど、位置推定結果の誤差が大きくなり、正面方向における注目領域の位置を表すインディケータ位置の信頼性が低下する。これに対し、シェーマ画像において、注目領域ＲＩの奥行き情報（距離）に応じて注目領域ＲＩの存在可能性がある範囲をインディケータの範囲として表示させ、位置推定誤差を含めた表示機能を提供することができる。インディケータの大きさがマンモグラフィー画像（ＭＬＯ，ＣＣ）における注目領域ＲＩの存在可能性がある範囲となる。
図１７（ａ）～（ｃ）の上図は、注目領域ＲＩの奥行方向深さが異なるマンモグラフィー画像（ＭＬＯ、ＣＣ）の一例である。図１７（ａ）～（ｃ）それぞれの下図は、注目領域ＲＩの奥行方向深さが異なる奥行情報を反映したシェーマ画像の別の態様を示す一例である。
図１７（ａ）～（ｃ）の上図に示すように、注目領域ＲＩの深さを「浅、中、深」に分類し、それぞれの下図に示すように、分類深さに対応して、正面方向における注目領域の位置を表すインディケータＡｔ６の大きさを異ならせることにより、注目領域ＲＩの存在可能性がある範囲を反映したシェーマ画像を生成する。例えば、図１７（ａ）では、注目領域ＲＩの深さは浅く、位置推定結果の誤差は小さいため、正面方向における注目領域の位置を表すインディケータＡｔ６のサイズは小さく表示する。他方、図１７（ｃ）では、注目領域ＲＩの深さは大きく、位置推定結果の誤差は大きいため、インディケータＡｔ６のサイズは大きく表示する。
また、図１８の上図は、注目領域ＲＩの奥行方向深さが異なるマンモグラフィー画像（ＭＬＯ、ＣＣ）、下図は、注目領域ＲＩの奥行方向深さが異なる奥行情報を反映したシェーマ画像の別の態様を示す別の一例である。図１８においても、注目領域ＲＩの深さに対応して、注目領域ＲＩの位置を表すインディケータＡｔ７が平面視における***の中心付近にない場合でも、インディケータＡｔ７の大きさを異ならせて、注目領域ＲＩの存在可能性がある範囲を反映したシェーマ画像を生成する。
ここで、シェーマ画像における正面情報を反映した識別部の態様を、注目領域ＲＩ深さに対応する注目領域ＲＩの正面方向における存在可能性がある範囲の大きさに応じて異ならせてもよい。このとき、注目領域ＲＩの深さとインディケータＡｔ６の大きさとの関係は、深さと位置推定結果の誤差との関係に基づいて定められる。具体的には、注目領域ＲＩ深さが深いほど、注目領域ＲＩの正面方向における存在可能性がある範囲の大きさが大きい構成としてもよく、注目領域ＲＩ深さが深いほど、シェーマ画像における正面情報の識別部の幅、長さ又は面積から選択される何れかの要素が増加するように異ならせる構成としてもよい。本例では、注目領域ＲＩの深さに応じて、インディケータＡｔ６の直径が増加する構成とした。これにより、実際の位置推定結果の誤差の大きさに対応して、注目領域ＲＩの存在可能性がある範囲を的確に表示する誤差表示機能を実現できる。
以上のとおり、位置推定誤差の反映したシェーマ画像では、奥行き情報（距離）に応じて位置推定誤差を反映して、注目領域ＲＩの存在可能性がある範囲を示すシェーマ画像を表示することができる。これにより、注目領域ＲＩの存在可能性がある範囲を、操作者がより感覚的に認識し易い態様のインディケータにより、シェーマ画像を表示することができる。
（注目領域の奥行方向深さと厚みの反映）
図１９（ａ）～（ｃ）は、注目領域の奥行方向厚みが異なるマンモグラフィー画像の一例である。図２０（ａ）～（ｃ）は、図１９（ａ）～（ｃ）に対応する注目領域の奥行方向の深さと厚みが異なる奥行情報を反映したシェーマ画像の別の一例であり、正面方向における注目領域ＲＩの位置の表示方法は図１５（ａ）～（ｃ）と同じである。
シェーマ画像生成部４１４は、図１９（ａ）～（ｃ）に示すように、注目領域Ｒ１の奥行方向の厚みを「小、中、大」に分類し、図２０（ａ）～（ｃ）に示すように、分類深さに対応して、正面方向における注目領域の位置を表すインディケータＡｔ１、Ａｔ２の色、濃度、輝度、透明度、テクスチャから選択される１以上の要素を異ならせるとともに、分類厚みに対応して、正面方向における注目領域の位置を表すインディケータＡｔ３の幅、長さ、又は面積から選択される１以上の要素を異ならせることにより、奥行方向の深さと厚みの両方が異なる奥行情報を反映したシェーマ画像を生成しても表示してもよい。
これにより、超音波操作者は、超音波検査の際に注目領域の***の奥行方向の位置に加えて、注目領域の***の奥行方向の厚みを、シェーマ画像から把握することができる。ここでも、本実施の形態によれば、シェーマ画像自体の態様を異ならせて、注目領域の***の奥行方向の厚みについて情報伝達を行うことから、超音波操作者の視線移動が対象部位と表示画面との範囲内に抑制される。また、超音波操作者は、シェーマ画像自体のインディケータ部分の態様の変化から、視覚を通してより一層操作者の感覚に近い状態で注目領域の***の奥行方向の厚みを認識することができる。そのため、超音波検査の際に超音波操作者がマンモグラフィー画像を読み出して注目領域の奥行方向の厚みを確認する作業を無くし、超音波操作者の作業負担を軽減して検査効率を向上することができる。
なお、注目領域Ｒ１の正面方向の範囲の大きさに対応して、正面方向における注目領域の位置を表すインディケータＡｔ３の幅、長さ、又は面積から選択される１以上の要素を異ならせることにより、操作者の選択に応じて、奥行方向の厚みに替えて正面方向の範囲の大きさを反映させたシェーマ画像を生成しても表示してもよい。これにより操作者は、超音波検査の際に注目領域の***の奥行方向の位置に加えて、注目領域の正面方向の範囲の大きさを、シェーマ画像から把握することができる。
（注目領域の指定方法が異なる場合）
図２１は、読影医による、ＭＬＯ画像（欄内左側）及びＣＣ画像（欄内右側）における注目領域の指定方法の分類を示す図である。図２１の上欄は、ＭＬＯ画像及びＣＣ画像について注目領域Ｒ１が両方指定された場合、中欄は、ＭＬＯ画像又はＣＣ画像の片方について注目領域Ｒ１が選択指定された場合、下欄は、ＭＬＯ画像及びＣＣ画像のそれぞれについて注目領域Ｒ１が複数個所指定された場合を表す。また、図２１の左欄は、読影医が、例えば、石灰化等に対して狭い領域からなるポイント状の注目領域Ｒ１を指定した場合、右欄は、読影医が、例えば、腫瘤、乳管拡張、嚢胞、乳管等に対して所定以上の幅と高さを有する矩形形状の注目領域Ｒ１が指定した場合を表す。各画像は左右の***を横方向に背向させて表示したものである。
図２２は、図２１における注目領域の指定方法の分類に対応して、奥行情報を反映の仕方を異ならせたシェーマ画像の一例である。
図２２の上欄に示すように、ＭＬＯ画像及びＣＣ画像について注目領域Ｒ１が両方指定された場合には、それぞれに対応するインディケータバーＡｔ４の交点が、正面方向のシェーマ画像における注目領域の位置を表す。
左蘭は、ポイント状の注目領域Ｒ１が指定された場合のシェーマ画像であり、正面方向における注目領域の位置を表す棒状のインディケータバーＡｔ４を表示する。この場合、インディケータバーＡｔ４とシェーマ画像と直角に交わる直径との交点がマンモグラフィー画像（ＭＬＯ，ＣＣ）における注目領域ＲＩのＸ方向の位置に相当する。
右蘭は、所定以上の幅と高さを有する矩形形状の注目領域Ｒ１が指定された場合のシェーマ画像であり、正面方向における注目領域の位置を表す帯状のインディケータバンドＡｔ５を表示する。このとき、矩形形状の注目領域Ｒ１の中心をインディケータバンドＡｔ５の中心線と一致させてもよい。また、注目領域Ｒ１の幅と高さの内、大きい方の寸法とインディケータバンドＡｔ５の幅とが対応する構成としてもよい。このとき、注目領域Ｒ１の幅を***画像のＸ方向の全幅に対し正規化し、注目領域Ｒ１の高さを***画像のＺ方向の***全厚みに対して正規化して、インディケータバンドＡｔ５の幅と対応させてもよい。
これにより、マンモグラフィー画像における注目領域の大きさと、シェーマ画像におけるインディケータバンドＡｔ５の大きさとを、定量的に近似させた表示を行うことができ、超音波検査における走査すべき範囲の確認が容易になる。
また、図２２の上欄に示すように、ＭＬＯ画像又はＣＣ画像について注目領域Ｒ１が選択指定された場合には、表示された１本のインディケータバーＡｔ４が、正面方向のシェーマ画像における注目領域の存在可能性のある範囲を表す。
また、図２２の下欄に示すように、ＭＬＯ画像及びＣＣ画像のそれぞれについて注目領域Ｒ１が複数個所指定された場合には、それぞれの注目領域に対して２本のインディケータバーＡｔ４が表示され、その交点が、正面方向のシェーマ画像における注目領域の位置を表す。このとき、注目領域毎に、インディケータバーＡｔ４の色、濃度、輝度、透明度、テクスチャから選択される１以上の要素を異ならせてもよい。
これにより、異なる注目領域に対応するインディケータバーＡｔ４の区別が容易になり、同じ注目領域に対応する２本のインディケータバーＡｔ４の交点が容易に認識できる。
また、注目領域に関する情報に、読影医により腫瘤、乳管拡張、嚢胞、石灰化、乳管等の識別に関する所見が添付されている場合には、シェーマ画像におけるインディケータバーＡｔ４又はインディケータバンドＡｔ５を、所見に応じて異なる態様に表示してもよい。あるいは、インディケータバーＡｔ４又はインディケータバンドＡｔ５内又はその近傍に所見に関する情報をスクリプト表示させてもよい。
これにより、検査者は所見情報をシェーマ画像から把握することができる。
≪実施の形態２≫
以上、実施の形態１に係る医用画像生成装置４を説明したが、本開示は、その本質的な特徴的構成要素を除き、以上の実施の形態に何ら限定を受けるものではない。例えば、実施の形態に対して当業者が思いつく各種変形を施して得られる形態や、本発明の趣旨を逸脱しない範囲で各実施の形態における構成要素及び機能を任意に組み合わせることで実現される形態も本開示に含まれる。以下では、そのような形態の一例として、上記した実施の形態２を説明する。
上記実施の形態１では、ニップル位置は、上述のとおり、例えば、特開２０１５－１０４４６４号公報等に記載された公知の方法により算出できることを示した。しかしながら、マンモグラフィー画像におけるニップルが突起した状態でないなどの要因により、ニップル位置、ニップル軸の検出に失敗した場合、推定結果は誤差が生じ、誤った位置を操作者に提示する可能性がある。
これに対し、実施の形態２に係る医用画像生成装置では、医用画像生成装置４において、さらに、ニップル位置、***端、ニップル軸の検出結果を操作者に提示した状態で、操作者がこれらを修正可能な構成を採る。これにより、操作者から修正された検出結果に基づいて、推定されたより精度の高い注目領域ＲＩの位置及び厚みをシェーマ画像に反映して表示することができる。
具体的な態様として、実施の形態２に係る医用画像生成装置は、表示制御部４３は、マンモグラフィー画像を表示装置６に表示させ、さらに、マンモグラフィー画像が表示装置６に表示させた状態で、マンモグラフィー画像に含まれる***画像における、マンモグラフィー画像から検出された、ニップルの位置、***端、ニップル軸の傾き選択される何れかを変更する操作入力を操作者から受け付ける操作入力部４４を備え、正面情報算出部４１２は、マンモグラフィー画像、注目領域ＲＩの情報及び操作入力に基づき、注目領域ＲＩの正面方向における範囲を表す修正正面情報を算出し、奥行情報算出部４１３は、マンモグラフィー画像、注目領域ＲＩの情報及び操作入力に基づき、注目領域ＲＩの奥行方向における位置を表す修正奥行情報を算出し、シェーマ画像生成部４１４は、修正正面情報と修正奥行情報とを反映して修正シェーマ画像を生成し、表示制御部４３は、修正シェーマ画像を表示装置６に表示させる構成を採る。
図２３は、実施の形態２に係る医用画像生成装置における医用画像生成処理のフローチャートである。図２３において、実施の形態２に係る医用画像生成装置における医用画像生成処理では、ステップＳ１１におけるシェーマ画像を表示する処理を行った後に、ステップＳ２１～ステップＳ２３の処理を含む点で、実施の形態１と相違する。ステップＳ１～ステップＳ１２における処理は、図７における実施の形態１における処理と同じであるので、同一の番号を付して説明を省略する。
以下、ステップＳ２１～ステップＳ２３の処理について、図面を用いて説明する。
図２４（ａ）の上図は、実施の形態２の医用画像生成装置において、表示されるマンモグラフィー画像（ＭＬＯ、ＣＣ）、下図は、シェーマ画像の態様を示す一例である。
先ず、ステップＳ１１において、シェーマ画像を含む表示画面を作成して表示装置６に出力してＭＬＯ画像及び／又はＣＣ画像と共に表示装置６に表示させる。
次に、ステップＳ２１Ａにおいて、シェーマ画像の修正が必要か否かの操作入力を受け付ける（ステップＳ２１Ａ）。否（Ｎｏ）である場合には、ステップＳ１２に進み処理を継続する。
一方、修正要（Ｙｅｓ）である場合には、ステップＳ２２Ａに進み、ＭＬＯ画像（左側の図）における、ニップル位置Ｎｉ１、***端Ｂｒ１（図９におけるＭＬＯ画像Ｉｍ１のＸ方向の端点Ｘｍａｘ１に相当）、ニップル基準線（ニップル軸Ｎｌ１）を表示する。また、ＣＣ画像（右側の図）における、ニップル位置Ｎｉ２、***端Ｂｒ２１、Ｂｒ２２（それぞれ、図９におけるＣＣ画像Ｉｍ２のＸ方向の端点Ｘｍｉｎ２、Ｘｍａｘ２に相当）、ニップル基準線（ニップル軸Ｎｌ２）を表示する。
次に、ステップＳ２３Ａにおいて、ニップル基準線Ｎｌ１、Ｎｌ２の傾き、ニップル位置Ｎｉ１、Ｎｉ２、及び***端Ｂｒ１、ＸＢｒ２１、ＸＢｒ２２の位置から選択される１以上の条件について、操作者からの変更入力を受ける。ニップル基準線Ｎｌ１、Ｎｌ２の傾きの変更は、ニップル位置Ｎｉ１、Ｎｉ２を変更するか、又は、ニップル基準線Ｎｌ１、Ｎｌ２上における、ニップル位置Ｎｉ１、Ｎｉ２と***基底ラインとの間の任意の点を***基底点Ｎｌ１ｂ、Ｎｌ２ｂとして定義し、***基底点Ｎｌ１ｂ、Ｎｌ２ｂの位置を、***基底ラインに沿って移動してもよい。本例では、図２４（ａ）に示すように、***基底点Ｎｌ１ｂ、Ｎｌ２ｂを、ニップル基準線Ｎｌ１、Ｎｌ２と***基底ラインとの交点とし、***基底点Ｎｌ１ｂ、Ｎｌ２ｂの位置を***基底ラインに沿って移動する構成とした。
ここでも、***基底ラインとは、上述のとおり、「***画像における胸壁ライン」、「***画像の上端と下端とを結ぶ直線」、又は「マンモグラフィー画像におけるＸ軸正方向の端点を通りＹ軸に平行な直線」の何れかを用いることができる。
また、***基底点Ｎｌ２ｂは、***端Ｂｒ２１、Ｂｒ２２の中点としてもよい。
本例における修正箇所ＣＲは、ＭＬＯ画像の***基底点Ｎｌ１ｂである。
図２４（ｂ）は、操作者による修正が施された後の、実施の形態２の医用画像生成装置における同じくマンモグラフィー画像（ＭＬＯ、ＣＣ）、下図は、同じくシェーマ画像の態様を示す一例である。図２４（ｂ）に示すように、修正が施された箇所ＣＲ´では、Ｌ（左）側の***のＭＬＯ画像おける***基底点Ｎｌ１ｂを上方に移動されており（ＭＶ）、この修正に伴い、シェーマ画像における、Ｌ（左）側の***のＭＬＯ画像における注目領域ＲＩの位置を示すインディケータＡｔ４の位置が下方に移動する（ＭＶ）。
次に、ステップＳ７に戻り、修正された情報に基づいて、注目領域ＲＩの正面情報を、注目領域の深さに関する奥行情報（ステップＳ８）、注目領域の厚みに関する奥行情報（ステップＳ９）をそれぞれ算出し、修正が施された奥行情報の内容に応じて表示態様を異ならせたシェーマ画像を生成し（ステップＳ１０）、ＭＬＯ画像及び／又はＣＣ画像と共に修正が施されたシェーマ画像を表示させる（ステップＳ１１）。
これにより、ＭＬＯ画像及びＣＣ画像を表示させた状態で、操作者が、ＭＬＯ画像及びＣＣ画像における、ニップル基準線Ｎｌ１、Ｎｌ２、ニップル位置Ｎｉ１、Ｎｉ２、及び***端Ｂｒ１、Ｂｒ２１、Ｂｒ２２の検出位置ズレを修正することができ、シェーマ画像として表示される注目領域ＲＩの位置及び厚みの精度を向上することができる。
また、ステップＳ２２Ａにおける別の態様として、ＭＬＯ画像における、ニップル位置Ｎｉ１、ＣＣ画像における、ニップル位置Ｎｉ２を表示し、ステップＳ２３Ａにおいて、ニップル位置Ｎｉ１、Ｎｉ２の条件について、操作者からの変更入力を受ける構成としてもよい。これにより、ニップル基準線Ｎｌ１、Ｎｌ２、***端Ｂｒ１、Ｂｒ２１、Ｂｒ２２を非表示とすることにより、ＭＬＯ画像及びＣＣ画像の視認性を向上するとともに、ニップル位置Ｎｉ１、Ｎｉ２のみ修正可能とすることにより、操作性がよく、簡便かつ効果的な修正が可能となる。
なお、ステップＳ２２Ａにおける、さらに、別の態様として、ニップル軸Ｎｌ１、Ｎｌ２の傾きを変更する構成、あるいは、***端Ｂｒ１、Ｂｒ２１、Ｂｒ２２の位置を変更する構成としてもよい。
≪実施の形態３≫
実施の形態３に係る医用画像生成装置では、実施の形態１、２に係る医用画像生成装置４において、さらに、マンモグラフィー画像におけるＭＬＯ画像Ｉｍ１又はＣＣ画像Ｉｍ２のうち何れか一方の画像において指定された注目領域ＲＩに基づき、他方の画像における参照候補範囲ＲＬを算出し、他方の画像上に表示する点に特徴を有する。
＜構 成＞
以下、実施の形態３に係る医用画像生成装の構成について説明する。
実施の形態３に係る医用画像生成装は、図１に示した医用画像保管通信システム１０の主要部を構成するサーバー装置４により構築され、ＭＬＯ画像及びＣＣ画像、及び読影医からの操作入力に係る注目領域ＲＩに関する情報を入力として、参照候補範囲ＲＬを算出する医用画像生成装置として機能する。実施の形態１と同様に、シェーマ画像を生成する医用画像生成装置として機能してもよい。
実施の形態３に係る医用画像生成装は、図３に示した実施の形態１に係るサーバー装置４と同様の構成を採り、図３における制御部４１に替えて、あるいは、図３における制御部４１とともに、図２６に示した実施の形態３に係る制御部４１Ａを備えた点に特徴がある。
図２６は、実施の形態３の医用画像生成装置におけるサーバー装置の制御部４１Ａの機能的構成を示す機能ブロック図である。制御部４１Ａが、ＭＬＯ画像及びＣＣ画像、及び注目領域又は注目領域の候補に関する情報を入力として、参照候補範囲を算出する医用画像生成処理のプログラムを実行する。
制御部４１Ａは、図２６に示すように、画像及び情報取得部４１１、正面情報算出部４１２、奥行情報算出部４１３、参照候補範囲算出部４１４Ａを有する。このうち、画像及び情報取得部４１１、正面情報算出部４１２、奥行情報算出部４１３の構成及び動作は、実施の形態１にかかる制御部４１における、それぞれの要素と同じであるため、説明を省略する。
制御部４１Ａにおける参照候補範囲算出部４１４Ａは、正面情報算出部４１２から正面情報を、奥行情報算出部４１３から奥行情報を取得し、ＭＬＯ画像Ｉｍ１又はＣＣ画像Ｉｍ２のうち何れか一方の画像において指定された注目領域ＲＩに基づき、他方の画像における参照候補範囲ＲＬを算出する。
具体的には、参照候補範囲算出部４１４Ａは、ＭＬＯ画像Ｉｍ１に含まれる***画像、及びＣＣ画像Ｉｍ２に含まれる***画像に対応する仮想シェーマ画像Ｉｍ３´を定義し、ＭＬＯ画像Ｉｍ１又はＣＣ画像Ｉｍ２のうち一方の画像に含まれる***画像における注目領域ＲＩの、***画像の***基底ライン方向Ｃｗ１又はＣｗ２の相対位置を、仮想シェーマ画像Ｉｍ３´を介して他方の画像に含まれる***画像上に相対的に投影した、***画像の***基底ライン方向Ｃｗ２又はＣｗ１の範囲として参照候補範囲ＲＬを算出する。
＜動 作＞
以下、実施の形態３に係る医用画像生成装置における、参照候補範囲ＲＬを算出するための処理について、図面を用いて説明する。
（ＣＣ画像の注目領域に基づきＭＬＯ画像に参照候補範囲を表示する動作）
図２７（ａ）は、ＭＬＯ画像に含まれる***画像における注目領域に基づき、ＣＣ画像に含まれる***画像における参照候補範囲を特定する方法を説明するための模式図である。図２７（ａ）において、Ｉｍ１はＭＬＯ画像、Ｉｍ２はＣＣ画像を、Ｉｍ３´は仮想的なシェーマ画像である仮想シェーマ画像を表す。また、撮影角度θは、ＭＬＯ画像Ｉｍ１取得時の放射線照射方向が、垂直方向に対してなす角度（傾斜角度）である。Ｓｌ１、Ｓｌ２は***画像のスキンラインである。
ＭＬＯ画像Ｉｍ１中の***画像における注目領域ＲＩ基づく、ＣＣ画像Ｉｍ２中の***画像における参照候補範囲ＲＬは、以下のように算出される。
先ず、ＭＬＯ画像Ｉｍ１に含まれる***画像、及びＣＣ画像Ｉｍ２に含まれる***画像に対応する仮想シェーマ画像Ｉｍ３´を仮想空間に設定する。図２７（ａ）におけるＭＬＯ画像Ｉｍ１、ＣＣ画像Ｉｍ２、及び仮想シェーマ画像Ｉｍ３´の配置方法、図９におけるＭＬＯ画像Ｉｍ１、ＣＣ画像Ｉｍ２、及びシェーマ画像Ｉｍ３の配置方法と同じである。
次に、ＭＬＯ画像Ｉｍ１に含まれる***画像における注目領域ＲＩの***基底ラインＣｗ１方向の相対位置ｄ１を算出する。
次に、ＭＬＯ画像Ｉｍ１における相対位置ｄ1に対応して、仮想シェーマ画像Ｉｍ３´における相対位置ｄを示す直線Ｎｌ１’と仮想シェーマ画像Ｉｍ３´における***の外周線と交わる交点ｐ1、ｐ2を算出する。
ここで、シェーマ画像Ｉｍ３における相対位置ｄは、撮影角度θと平行な直線Ｎｌ１’のニップル軸Ｎｌ１からの距離として定義され、ＭＬＯ画像Ｉｍ１に含まれる***画像におけるニップル軸Ｎｌ１から***端までの距離をｄlowとしたとき、
ｄ ＝ｄ1／ｄlow
として算出される。
次に、交点ｐ1、ｐ2の、仮想シェーマ画像Ｉｍ３´における***基底ラインＣｗ２方向の相対位置ｄp1、ｄp2を算出する。
ここで、相対位置ｄp1、ｄp2は、交点ｐ1、ｐ2からニップル軸Ｎｌ２までの距離ｄ21、ｄ22として定義され、ＣＣ画像Ｉｍ２に含まれる***画像におけるニップル軸Ｎｌ２から***端までの距離をｄin、ｄoutとしたとき、
ｄ21＝ｄｐ1／ｄin
ｄ22＝ｄｐ2／ｄout
として算出される。
そして、ＣＣ画像Ｉｍ２における参照候補範囲ＲＬは、***基底ラインＣｗ２方向に規定される相対位置ｄ21及びｄ22に挟まれた範囲として規定される。本例では、参照候補範囲ＲＬは、長さｄ21＋ｄ22の２本の直線として表示される態様とした。
また、***基底ラインＣｗ２に垂直な奥行方向（Ｉｍ２におけるＺ方向）における２本の直線の位置は、ＭＬＯ画像Ｉｍ１における注目領域ＲＩの奥行方向（Ｉｍ１におけるＺ方向）における位置を表す奥行情報に基づき特定される構成としてもよい。具体的には、例えば、ニップル位置Ｎｉ１の***基底ラインＣｗ１からの距離をｚ1、注目領域ＲＩの奥行方向（Ｉｍ１におけるＺ方向）における中心の***基底ラインＣｗ１からの距離ｚRI、ニップル位置Ｎｉ２の***基底ラインＣｗ２からの距離をｚ2、参照候補範囲ＲＬの奥行方向（Ｉｍ２におけるＺ方向）における中心の***基底ラインＣｗ２からの距離ｚRLとしたとき、
ｚRL＝ｚRI×ｚ2／ｚ1
として算出してもよい。
また、ｚRLは、上記した算出方法に替えて、ＭＬＯ画像Ｉｍ１におけるニップル位置Ｎｉ１からＺＲ１までのＩｍ１におけるＺ方向の距離（Ｚ1－ＺRI）を算出し、ＣＣ画像Ｉｍ２におけるニップル位置Ｎｉ２からＩｍ２におけるＺ方向（胸壁方向）へ（Ｚ1－ＺRI）離れた位置を求め、当該位置のＺ方向の高さをＺRLとしてもよい。
これにより、図２７（ｂ）に示すように、ＭＬＯ画像に含まれる***画像における注目領域ＲＩと、ＣＣ画像に含まれる***画像における参照候補範囲ＲＬが表示される。
次に、ＭＬＯ画像に含まれる***画像における注目領域ＲＩの位置が異なるときの、ＣＣ画像に含まれる***画像に表示される参照候補範囲ＲＬの態様について説明する。
図２８（ａ）～（ｃ）、図２９（ａ）（ｂ）は、ＭＬＯ画像に含まれる***画像において異なる位置に存在する注目領域に対して、特定されたＣＣ画像に含まれる***画像における参照候補範囲の態様を示す模式図である。同図に示すように、ＭＬＯ画像における注目領域ＲＩの***基底ラインＣｗ１方向の位置に応じて、ＣＣ画像に表示される参照候補範囲ＲＬの***基底ラインＣｗ２方向の幅が異なって表示される。例えば、図２８（ａ）、（ｂ）、（ｃ）、あるいは、図２８（ａ）、図２９（ａ）、（ｂ）に示すように、ＭＬＯ画像中の***画像における注目領域ＲＩの位置が、***基底ラインＣｗ１方向において***端に近付くほど、ＣＣ画像に表示される参照候補範囲ＲＬの***基底ラインＣｗ２方向の幅が縮減する。この場合、操作者が参照すべき画像範囲を絞り込むことができ、検査効率が向上する。
（ＣＣ画像の注目領域に基づきＭＬＯ画像に参照候補範囲を表示する動作）
図３０（ａ）は、ＣＣ画像における注目領域における注目領域の情報に基づき、ＭＬＯ画像における参照候補範囲を特定する方法を説明するための模式図である。
ここでも、図２７（ａ）と同様に、ＣＣ画像Ｉｍ２の注目領域ＲＩ基づく、ＣＣ画像Ｉｍ１における参照候補範囲ＲＬが、以下のように算出される。
先ず、ＣＣ画像Ｉｍ２に含まれる***画像、及びＭＬＯ画像Ｉｍ１に含まれる***画像に対応する仮想シェーマ画像Ｉｍ３´を定義する。図３０（ａ）におけるＭＬＯ画像Ｉｍ１、ＣＣ画像Ｉｍ２、及び仮想シェーマ画像Ｉｍ３´の配置方法、図９におけるＭＬＯ画像Ｉｍ１、ＣＣ画像Ｉｍ２、及びシェーマ画像Ｉｍ３の配置方法と同じである。
次に、ＣＣ画像Ｉｍ２に含まれる***画像における注目領域ＲＩの第１の***基底ラインＣｗ２方向の相対位置ｄ21を算出する。
次に、ＣＣ画像Ｉｍ２における相対位置ｄ21に対応して、仮想シェーマ画像Ｉｍ３´における相対位置ｄを示す直線Ｎｌ２’と仮想シェーマ画像Ｉｍ３´における***の外周線と交わる交点ｐ1、ｐ2を算出する。
ここで、仮想シェーマ画像Ｉｍ３´における相対位置ｄはニップル軸Ｎｌ２と並行な直線Ｎｌ２’までの距離として定義され、ＣＣ画像Ｉｍ２に含まれる***画像におけるニップル軸Ｎｌ２から***端、までの距離をｄinとしたとき、
ｄ ＝ｄ21／ｄin
として算出される。
次に、交点ｐ1、ｐ2の、仮想シェーマ画像Ｉｍ３´における***基底ラインＣｗ１方向の相対位置ｄp1、ｄp2を算出する。
ここで、相対位置ｄp1、ｄp2は、交点ｐ1、ｐ2からニップル軸Ｎｌ１までの距離ｄ11、ｄ12として定義され、ＣＣ画像Ｉｍ１に含まれる***画像におけるニップル軸Ｎｌ１から***端までの距離をｄlowとしたとき、
ｄ11＝ｄp1／ｄlow
ｄ12＝ｄp2／ｄlow
として算出される。
そして、ＣＣ画像Ｉｍ１における参照候補範囲ＲＬは、***基底ラインＣｗ１方向に規定される相対位置ｄ11及びｄ12に挟まれた範囲として規定される。本例では、参照候補範囲ＲＬは、長さｄ11＋ｄ12の２本の直線として表示される態様とした。
また、図２７（ａ）と同様に、***基底ラインＣｗ１に垂直な奥行方向（Ｉｍ１におけるＺ方向）の２本の直線の位置は、ＭＬＯ画像Ｉｍ２における注目領域ＲＩの奥行方向（Ｉｍ１におけるＺ方向）における位置を表す奥行情報に基づき特定される構成としてもよい。例えば、注目領域ＲＩの奥行方向（Ｉｍ２におけるＺ方向）における中心の***基底ラインＣｗ２からの距離ｚRI、参照候補範囲ＲＬの奥行方向（Ｉｍ１におけるＺ方向）における中心の***基底ラインＣｗ１からの距離ｚRLとしたとき、
ｚRL＝ｚRI×ｚ1／ｚ2
として算出してもよい。
ここでも、ｚRLは、上記した算出方法に替えて、ＣＣ画像Ｉｍ２におけるニップル位置Ｎｉ２からＺＲ１までのＩｍ２におけるＺ方向の距離（Ｚ2－ＺRI）を算出し、ＭＬＯ画像Ｉｍ１におけるニップル位置Ｎｉ１からＩ１２におけるＺ方向（胸壁方向）へ（Ｚ2－ＺRI）離れた位置を求め、当該位置のＺ方向の高さをＺRLとしてもよい。
さらに、***基底ラインＣｗ２に垂直な方向の２本の直線の位置は、ＣＣ画像Ｉｍ２における注目領域ＲＩの奥行方向（Ｉｍ２におけるＺ方向）の存在範囲に基づき特定される構成としてもよい。
これにより、図３０（ｂ）に示すように、ＣＣ画像に含まれる***画像における注目領域ＲＩと、ＭＬＯ画像に含まれる***画像における参照候補範囲ＲＬが表示される。
ここでも、図３１（ａ）～（ｃ）、図３２（ａ）（ｂ）に示すように、ＣＣ画像における注目領域ＲＩの***基底ラインＣｗ２方向の位置に応じて、ＭＬＯ画像に表示される参照候補範囲ＲＬの幅が異なる。例えば、ＣＣ画像中の***画像における注目領域ＲＩの位置が、***基底ラインＣｗ２方向において***端に近いほど、ＭＬＯ画像に表示される参照候補範囲ＲＬの***基底ラインＣｗ１方向の幅が縮減する（図３１（ａ）、（ｂ）、（ｃ）、あるいは、図３１（ａ）、図３２（ａ）、（ｂ）参照）。
＜効 果＞
図３３（ａ）は、***画像に注目領域を表示したＣＣ画像の例、（ｂ）は、***画像に参照候補範囲ＲＬを表示したＭＬＯ画像の一例である。
このように、マンモグラフィー画像のＣＣ画像Ｉｍ２において、図３３（ａ）に示すように指定された注目領域ＲＩに基づき、図３３（ｂ）に示すように、ＭＬＯ画像Ｉｍ１に注目領域ＲＩから特定される参照候補範囲ＲＬが表示されることが見て取れる。
以上のとおり、実施の形態３に係る医用画像生成装置では、ＭＬＯ画像Ｉｍ１又はＣＣ画像Ｉｍ２で指定された注目領域ＲＩから、仮想シェーマ画像Ｉｍ３´を経由して算出される、他方の画像上における参照候補範囲ＲＬを絞り込むことがで、操作者が参照すべき画像範囲を絞り込み検査効率を向上することができる。
また、参照候補範囲ＲＬの奥行方向（Ｚ方向）の範囲を、マンモグラフィー画像における注目領域ＲＩの奥行方向（Ｚ方向）の存在範囲に基づき特定することにより、さらに奥行方向（Ｚ方向）に絞り込んだ参照候補範囲ＲＬを提示することが可能となり、操作者が参照すべき画像範囲をより一層絞り込み検査効率をさらに向上することができる。
なお、実施の形態１、２に係る医用画像生成装置４では、シェーマ画像生成部は、正面情報と奥行情報とを反映してシェーマ画像を生成し、表示制御部は、シェーマ画像を表示装置に表示させる構成とした。しかしながら、実施の形態３に係る医用画像生成装置では、マンモグラフィー画像におけるＭＬＯ画像Ｉｍ１又はＣＣ画像Ｉｍ２の何れか一方の画像において指定された注目領域ＲＩに基づき、他方の画像に参照候補範囲ＲＬが表示される構成としたうえで、シェーマ画像については、少なくとも正面情報を反映してシェーマ画像を生成し、正面情報に基づくシェーマ画像を表示させる構成としてもよい。
また、ＭＬＯ画像Ｉｍ１の撮影角度は、上記に限らず、例えば、ＭＬＯ画像Ｉｍ１取得時の放射線照射方向が、水平方向に対してなす角度と定義してもよいことは、言うまでもない。
≪変形例≫
以上、本開示を実施の形態に基づいて説明したが、本開示は上記実施の形態に限定されるものではなく種々の変更が可能である。
（１）上記した実施の形態では、医用画像生成装置の実施の形態を例に挙げて説明した。しかしながら、例えば、医用画像生成装置をコンピュータＰＣに実行させる医用画像生成プログラムとしてもよい。
（２）上記した実施の形態では、サーバー装置４により生成されたシャーマ画像は、医用画像保管通信システム１０（ＰＡＣＳ）を構成する表示装置６に表示される例を示して説明を行った。しかしながら、シェーマ画像は、例えば、超音波診断装置の表示画面、あるいは診断支援装置（ＣＡＤ）３の表示装置３３に表示される形態としてもよい。
また、上記した実施の形態では、シェーマ画像生成処理に係るプログラムを、サーバー装置４の制御部４１において実行する例を示して説明を行った。しかしながら、シェーマ画像生成処理を超音波診断装置において実行される構成としてもよい。
これにより、操作者は超音波診断装置の表示画面において超音波検査における走査位置を把握することができ、より一層操作が容易になる。
（３）上記した実施の形態では、シェーマ画像生成部４１４は、注目領域Ｒ１の深さを「浅、中、深」に分類し、奥行方向の厚みを「小、中、大」に分類して、分類深さや分類厚みに対応して、正面方向における注目領域の位置を表すインディケータの態様を異ならせる構成とした。しかしながら、注目領域Ｒ１の深さを「浅、深」に分類し、奥行方向の厚みを「小、大」に分類して、分類に対応して注目領域の位置を表すインディケータの態様を異ならせもよい。これにより、大まかな超音波検査における走査位置を把握することができる。あるいは、４以上の多段階に分類してもよい。より精度よく走査位置を把握することができる。
（４）上記した実施の形態では、読影医による注目領域の指定とシャーマ画像の生成及び表示とを連続する処理として行う構成を例示して説明を行った。しかしながら、本開示はこれに限定されるものではなく、読影医により指定された注目領域の情報をいったん、医用画像データベース等に保存することにより、読影医による注目領域の指定と、シャーマ画像の生成及び表示とが個別に行われる構成としてよい。
（５）上記した実施の形態では、医用画像生成の一例として、乳癌腫瘍の検査を例示して説明を行った。しかしながら、本開示はこれに限定されるものではなく、マンモグラフィーを用いた各種疾患に対するシェーマ画像の生成に適用してもよい。
（６）上記した実施の形態では、被検体のマンモグラフィー断層画像を撮影するためのモダリティとしてＸ線を用いたマンモグラフィーを例に挙げて説明した。断層画像情報として、陽電子断層撮影（ＰＥＴ：Positron Emission Tomography）を用いたマンモグラフィー等、被検体の断層画像を撮影するための各種モダリティによって取得されたマンモグラフィー断層画像情報等を用いてシェーマ画像を形成してもよい。
（７）上記実施の形態に係る医用画像生成装置では、記憶装置であるデータ格納部を医用画像保管通信システム（ＰＡＣＳ）内に含む構成としたが、記憶装置はこれに限定されず、半導体メモリー、ハードディスクドライブ、光ディスクドライブ、磁気記憶装置、等が、インターネットを介して医用画像保管通信システム（ＰＡＣＳ）に外部から接続される構成であってもよい。
（８）なお、本開示を上記実施の形態に基づいて説明してきたが、本開示は、上記の実施の形態に限定されず、以下のような場合も本発明に含まれる。
例えば、本発明は、マイクロプロセッサとメモリーを備えたコンピュータシステムであって、上記メモリーは、上記コンピュータプログラムを記憶しており、上記マイクロプロセッサは、上記コンピュータプログラムにしたがって動作するとしてもよい。例えば、本開示の医用画像生成方法のコンピュータプログラムを有しており、このプログラムに従って動作する（又は接続された各部位に動作を指示する）コンピュータシステムであってもよい。
また、上記医用画像生成装置の全部を、マイクロプロセッサ、ＲＯＭ、ＲＡＭ等の記録媒体、ハードディスクユニットなどから構成されるコンピュータシステムで構成した場合も本発明に含まれる。上記ＲＡＭ又はハードディスクユニットには、上記各装置と同様の動作を達成するコンピュータプログラムが記憶されている。上記マイクロプロセッサが、上記コンピュータプログラムにしたがって動作することにより、各装置はその機能を達成する。
また、上記の各装置を構成する構成要素の一部又は全部は、１つのシステムＬＳＩ（Large scale Integration（大規模集積回路））から構成されているとしてもよい。システムＬＳＩは、複数の構成部を１個のチップ上に集積して製造された超多機能ＬＳＩであり、具体的には、マイクロプロセッサ、ＲＯＭ、ＲＡＭなどを含んで構成されるコンピュータシステムである。これらは個別に１チップ化されてもよいし、一部又は全てを含むように１チップ化されてもよい。なお、ＬＳＩは、集積度の違いにより、ＩＣ、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。上記ＲＡＭには、上記各装置と同様の動作を達成するコンピュータプログラムが記憶されている。上記マイクロプロセッサが、上記コンピュータプログラムにしたがって動作することにより、システムＬＳＩは、その機能を達成する。例えば、本発明の医用画像生成方法がＬＳＩのプログラムとして格納されており、このＬＳＩがコンピュータ内に挿入され、所定のプログラム（医用画像生成方法）を実施する場合も本発明に含まれる。
なお、集積回路化の手法はＬＳＩに限るものではなく、専用回路または汎用プロセッサで実現してもよい。ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Field Programmable Gate Array）や、ＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサー（Reconfigurable Processor）を利用してもよい。
さらには、半導体技術の進歩または派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。
また、各実施の形態に係る、医用画像生成装置の機能の一部又は全てを、ＣＰＵ等のプロセッサがプログラムを実行することにより実現してもよい。上記医用画像生成装置の動作を実施させるプログラムが記録された非一時的なコンピュータ読み取り可能な記録媒体であってもよい。プログラムや信号を記録媒体に記録して移送することにより、プログラムを独立した他のコンピュータシステムにより実施するとしてもよい、また、上記プログラムは、インターネット等の伝送媒体を介して流通させることができるのは言うまでもない。
また、上記実施形態に係る医用画像生成装置の各構成要素は、ＣＰＵ（Central Processing Unit）やＧＰＵ（Graphics Processing Unit）やプロセッサなどのプログラマブルデバイスとソフトウェアにより実現される構成であってもよい。後者の構成は、いわゆるＧＰＧＰＵ（General-Purpose computing on Graphics Processing Unit）である。これらの構成要素は一個の回路部品とすることができるし、複数の回路部品の集合体にすることもできる。また、複数の構成要素を組合せて一個の回路部品とすることができるし、複数の回路部品の集合体にすることもできる。
また、ブロック図における機能ブロックの分割は一例であり、複数の機能ブロックを一つの機能ブロックとして実現したり、一つの機能ブロックを複数に分割したり、一部の機能を他の機能ブロックに移してもよい。また、類似する機能を有する複数の機能ブロックの機能を単一のハードウェア又はソフトウェアが並列又は時分割に処理してもよい。
また、上記のステップが実行される順序は、本発明を具体的に説明するために例示するためのものであり、上記以外の順序であってもよい。また、上記ステップの一部が、他のステップと同時（並列）に実行されてもよい。
また、各実施の形態に係る医用画像生成装置、及びその変形例の機能のうち少なくとも一部を組み合わせてもよい。更に上記で用いた数字は、全て本発明を具体的に説明するために例示するものであり、本発明は例示された数字に制限されない。
さらに、本実施の形態に対して当業者が思いつく範囲内の変更を施した各種変形例も本発明に含まれる。
≪まとめ≫
以上のとおり、実施の形態に係る医用画像生成装置は、マンモグラフィー画像と注目領域の情報とに基づきシェーマ画像を生成する医用画像生成装置であって、記憶媒体から前記マンモグラフィー画像及び前記注目領域の情報を取得する画像及び情報取得部と、取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の正面方向における範囲を表す正面情報を算出する正面情報算出部と、取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の奥行方向における位置を表す奥行情報を算出する奥行情報算出部と、前記正面情報と前記奥行情報とを反映してシェーマ画像を生成するシェーマ画像生成部と、前記シェーマ画像を表示装置に表示させる表示制御部とを備えたことを特徴とする。
また、別の態様では、上記の何れかの態様において、前記シェーマ画像生成部は、前記シェーマ画像における前記正面情報を反映した識別部の態様を、前記奥行情報の内容に応じて異ならせたシェーマ画像を生成する構成としてもよい。
係る構成により、超音波操作者は、超音波検査の際に注目領域の***の奥行方向の位置をシェーマ画像から把握することができる。このとき、シェーマ画像自体の態様を異ならせることにより、注目領域の***の奥行方向の位置を表示することから、操作者の視線移動が抑制されるとともに、操作者は、シェーマ画像自体のインディケータ部分の態様の変化から、視覚を通してより操作者の感覚に近い状態で注目領域の***の奥行方向の位置を認識することができる。そのため、超音波検査の際に超音波操作者がマンモグラフィー画像を読み出して注目領域の奥行方向の位置を確認する作業を無くし、超音波操作者の作業負担を軽減して検査効率を向上することができる。
また、別の態様では、上記の何れかの態様において、前記奥行情報算出部は、前記***画像の***全厚みと、前記***画像における前記注目領域の注目領域深さとを算出し、前記注目領域深さの前記***全厚みに対する比率を算出して、前記比率を奥行情報とする構成としてもよい。
係る構成により、超音波操作者は、超音波検査の際に注目領域の***の奥行方向の位置をシェーマ画像から把握することができる。
また、別の態様では、上記の何れかの態様において、前記奥行情報算出部は、さらに、前記***画像の***全厚みと、前記***画像における前記注目領域の注目領域厚みとを算出し、前記注目領域厚みの前記***全厚みに対する比率を算出して、前記比率を奥行情報とする構成としてもよい。
係る構成により、超音波操作者は、超音波検査の際に注目領域の***の奥行方向の位置に加えて、奥行方向の厚みをシェーマ画像から把握することができる。
また、別の態様では、上記の何れかの態様において、前記シェーマ画像生成部は、前記シェーマ画像における前記正面情報の識別部の態様を、前記奥行情報を構成するパラメータの種別、及び前記パラメータの値の大小に応じて異ならせる構成としてもよい。
係る構成により、超音波操作者は、超音波検査の際に注目領域の***の奥行方向の複数の種別のパラメータについて、シェーマ画像から把握することができる。
また、別の態様では、上記の何れかの態様において、前記シェーマ画像生成部は、前記シェーマ画像における前記正面情報の識別部の色、濃度、輝度、透明度、テクスチャ、幅、長さ、又は面積から選択される要素を、前記パラメータの種別に対応させ、対応させた要素を前記パラメータの値の大小に応じて異ならせる構成としてもよい。
係る構成により、超音波操作者は、超音波検査の際に注目領域の***の奥行方向の複数の種別のパラメータの値の大小を、パラメータの種別毎に対応したシェーマ画像の識別部における態様の変化から把握することができる。
また、別の態様では、上記の何れかの態様において、前記注目領域の情報が、前記マンモグラフィー画像における所定値未満の大きさの領域を示す情報であるとき、前記シェーマ画像生成部は、前記シェーマ画像における前記正面情報の識別部の態様を線状にする構成としてもよい。
また、別の態様では、上記の何れかの態様において、前記注目領域の情報が、前記マンモグラフィー画像における所定値以上の大きさの領域を示す情報であるとき、前記シェーマ画像生成部は、前記シェーマ画像における前記正面情報の識別部の幅、長さ、又は面積から選択される１以上の要素を、前記奥行情報の内容に応じて異ならせる構成としてもよい。
係る構成により、マンモグラフィー画像における注目領域の大きさと、シェーマ画像における識別部の大きさとを、定量的に近似させた表示を行うことができ、超音波検査における走査すべき範囲の確認が容易になる。
また、別の態様では、上記の何れかの態様において、前記注目領域の情報が、複数の注目領域に対応して複数存在するとき、前記シェーマ画像生成部は、前記シェーマ画像における前記正面情報の識別部の色、濃度、輝度、透明度、テクスチャ、幅、長さ、又は面積から選択される１以上の要素を、前記注目領域毎に異ならせる構成としてもよい。
係る構成により、異なる注目領域に対応するシェーマ画像における識別部の区別が容易になり、同じ注目領域に対応する一対の識別部の交点の認識容易になる。
また、別の態様では、上記の何れかの態様において、前記シェーマ画像生成部は、前記シェーマ画像における前記正面情報を反映した識別部の態様を、前記注目領域深さに対応する前記注目領域の正面方向における存在可能性がある範囲の大きさに応じて異ならせたシェーマ画像を生成する構成としてもよい。
係る構成により、実際の位置推定結果の誤差の大きさに対応して、注目領域ＲＩの存在可能性がある範囲を的確に表示する誤差表示機能を実現でき、奥行き情報（距離）に応じて位置推定誤差を反映して、注目領域ＲＩの存在可能性がある範囲を示すシェーマ画像を表示することができる。
また、別の態様では、上記の何れかの態様において、前記注目領域深さが深いほど、前記注目領域の正面方向における存在可能性がある範囲の大きさが大きい構成としてもよい。また、別の態様では、上記の何れかの態様において、前記シェーマ画像生成部は、前記注目領域深さが深いほど、前記シェーマ画像における前記正面情報の識別部の幅、長さ又は面積から選択される何れかの要素が増加するように異ならせる構成としてもよい。
係る構成により、注目領域ＲＩの存在可能性がある範囲を、操作者がより感覚的に認識し易い態様のインディケータにより、シェーマ画像を表示することができる。
また、別の態様では、上記の何れかの態様において、前記***全厚みは、前記***画像におけるニップルの位置から、ニップル位置を通り前記マンモグラフィー画像における奥行方向軸と***基底ラインとの交点までの距離であり、前記注目領域深さは、前記注目領域における基準点を通り奥行方向軸に平行な直線とニップル位置を通り奥行方向軸に垂直な直線との交点から、前記基準点までの距離である構成としてもよい。
また、別の態様では、上記の何れかの態様において、前記注目領域深さは、前記注目領域における基準点を通り前記マンモグラフィー画像における奥行方向軸に平行な直線と***スキンラインとの交点から、前記基準点までの距離であり、前記***全厚みは、前記直線と***スキンラインとの交点から、前記直線と***基底ラインとの交点までの距離である構成としてもよい。
係る構成により、注目領域の奥行方向の位置を算出することができる。
また、別の態様では、上記の何れかの態様において、前記注目領域深さは、前記注目領域における基準点を通り、ニップル位置を通り***基底ラインへの法線、又はニップルの上端と下端とを通る直線と垂直なニップル位置を通る直線に対し、平行な直線と、***スキンラインとの交点から、前記基準点までの距離であり、前記***全厚みは、前記直線と***スキンラインとの交点から、前記直線と***基底ラインとの交点までの距離である構成としてもよい。
係る構成により、シャーマ画像における奥行方向と***基底ラインの方向とが一致しない場合もおいても、注目領域の奥行方向の位置を算出できる。
また、別の態様では、上記の何れかの態様において、前記注目領域厚みは、前記注目領域における基準点を通り前記マンモグラフィー画像における奥行方向軸に平行な直線と前記注目領域の外縁との２つの交点間の距離であり、前記***全厚みは、前記直線と***スキンラインとの交点から、前記直線と***基底ラインとの交点までの距離である
構成としてもよい。
係る構成により、注目領域の奥行方向の厚みを算出することができる。
また、別の態様では、上記の何れかの態様において、前記注目領域厚みは、前記注目領域における基準点を通り、ニップル位置を通り***基底ラインへの法線、又はニップルの上端と下端とを通る直線と垂直なニップル位置を通る直線に対し、平行な直線と前記注目領域の外縁との２つの交点間の距離であり、前記***全厚みは、前記直線と***スキンラインとの交点から、前記直線と***基底ラインとの交点までの距離である構成としてもよい。
係る構成により、シャーマ画像における奥行方向と***基底ラインの方向とが一致しない場合もおいても、注目領域の奥行方向の厚みを算出できる。
また、別の態様では、上記の何れかの態様において、前記表示制御部は、前記マンモグラフィー画像を表示装置に表示させ、さらに、前記マンモグラフィー画像が前記表示装置に表示させた状態で、前記マンモグラフィー画像に含まれる***画像における、前記マンモグラフィー画像から検出された、ニップルの位置、***端、***端の中点位置から選択される何れかを変更する操作入力を操作者から受け付ける操作入力部を備え、前記正面情報算出部は、前記マンモグラフィー画像、前記注目領域の情報及び前記操作入力に基づき、前記注目領域の正面方向における範囲を表す修正正面情報を算出し、前記奥行情報算出部は、前記マンモグラフィー画像、前記注目領域の情報及び前記操作入力に基づき、前記注目領域の奥行方向における位置を表す修正奥行情報を算出し、前記シェーマ画像生成部は、前記修正正面情報と前記修正奥行情報とを反映して修正シェーマ画像を生成し、前記表示制御部は、前記修正シェーマ画像を表示装置に表示させる構成としてもよい。
係る構成により、操作者が、ＭＬＯ画像及びＣＣ画像からにおける、ニップル基準線、ニップル位置、及び***端の位置の検出位置ズレを修正することができ、シェーマ画像として表示される注目領域ＲＩの位置及び厚みの精度を向上することができる。これにより、操作者から修正された検出結果に基づいて、推定されたより精度の高い注目領域ＲＩの位置及び厚みをシェーマ画像に反映して表示することができる。
また、別の態様では、上記の何れかの態様において、前記操作入力部は、前記ニップルの位置を変更する操作入力を受け付ける構成としてもよい。
係る構成により、マンモグラフィー画像の視認性を向上するとともに、ニップル位置のみ修正可能とすることにより、操作性がよく、簡便かつ効果的な修正が可能となる。
また、別の態様では、上記の何れかの態様において、前記操作入力部は、前記ニップル基準線の傾きを変更する操作入力を受け付ける構成、あるいは、前記操作入力部は、前記***端の位置を変更する操作入力を受け付ける構成としてもよい。
ここで、前記ニップル基準線は、ニップルの位置を通り***基底ラインに垂直な直線、ニップルの位置を通りニップルの上端と下端とを通る直線と垂直な直線、ニップルの位置と***端の中点を通る直線、又は、前記マンモグラフィー画像におけるニップルの位置を通る前記マンモグラフィー画像における水平線の何れかとしてもよい。
また、別の態様では、上記の何れかの態様において、前記マンモグラフィー画像は、ＭＬＯ画像、ＣＣ画像を含む構成としてもよい。
係る構成により、ＭＬＯ画像、ＣＣ画像と注目領域の情報とに基づき、マンモグラフィー画像における注目領域について、注目領域の正面方向における範囲を算出することができる。
また、別の態様では、上記の何れかの態様において、前記注目領域の情報は、前記マンモグラフィー画像において読影医により指定された領域、又は、前記マンモグラフィー画像に基づきＣＡＤにより選択された領域の何れかである構成としてもよい。
係る構成により、マンモグラフィー画像とＣＡＤによる注目領域の情報とに基づき、マンモグラフィー画像における注目領域の奥行方向における位置を算出することができる。
また、別の態様では、ＭＬＯ画像とＣＣ画像を含むマンモグラフィー画像と注目領域の情報とに基づき参照候補範囲を算出する医用画像生成装置であって、
前記マンモグラフィー画像及び前記注目領域の情報を取得する画像及び情報取得部と、
取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の正面方向における範囲を表す正面情報を算出する正面情報算出部と、
前記正面情報を反映して、前記ＭＬＯ画像又は前記ＣＣ画像のうち何れか一方の画像において指定された前記注目領域に基づき、他方の画像における参照候補範囲を算出する参照候補範囲を算出する参照候補範囲算出部と、
前記マンモグラフィー画像と前記参照候補範囲を表示装置に表示させる表示制御部とを備えた構成としてもよい。
係る構成により、一方の画像で指定された注目領域ＲＩに基づいて、他方の画像上における参照候補範囲ＲＬを表示させて、操作者が参照すべき画像範囲を絞り込み検査効率を向上することができる。
また、別の態様では、上記の何れかの態様において、前記参照候補範囲算出部は、前記一方の画像に含まれる第１の***画像、及び前記他方の画像に含まれる第２の***画像に対応する仮想シェーマ画像を設定し、
前記第１の***画像における前記注目領域の、前記第１の***画像の第１の***基底ライン方向の相対位置を、前記仮想シェーマ画像を介して前記第２の***画像上に相対的に投影した、前記第２の***画像の第２の***基底ライン方向の範囲を前記参照候補範囲とする構成としてもよい。
また、別の態様では、上記の何れかの態様において、前記参照候補範囲算出部は、前記仮想シェーマ画像における、前記相対位置に対応する位置を通る直線と前記仮想シェーマ画像における***の外周線と交わる２つの交点を算出し、
前記２つ交点の、前記仮想シェーマ画像における前記第２の***基底ライン方向の２つの相対位置を算出し、
前記第２の***画像における、第２の***基底ライン方向に規定される前記２つの相対位置に挟まれた範囲を前記参照候補範囲として算出する構成としてもよい。
係る構成により、ＭＬＯ画像Ｉｍ１又はＣＣ画像Ｉｍ２で指定された注目領域ＲＩから、仮想シェーマ画像Ｉｍ３´を経由して算出される、他方の画像上における参照候補範囲ＲＬを求めることができ、他方の画像上に表示することができる。
また、別の態様では、上記の何れかの態様において、さらに、取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の奥行方向における位置を表す奥行情報を算出する奥行情報算出部を備え、
前記参照候補範囲算出部は、前記第２の***画像における前記参照候補範囲の奥行方向の範囲を、前記第１の***画像における前記注目領域の奥行方向における位置を表す奥行情報に基づき特定する構成としてもよい。
係る構成により、さらに高さ方向に絞り込んだ参照候補範囲ＲＬを提示することが可能となり、操作者が参照すべき画像範囲をより一層絞り込み検査効率をさらに向上することができる。
実施の形態に係る医用画像生成プログラムは、マンモグラフィー画像と当該マンモグラフィー画像における注目領域の情報とに基づき、シェーマ画像を生成する医用画像生成装置が実行する、医用画像生成処理をコンピュータに実行させる医用画像生成プログラムであって、医用画像生成処理は、記憶媒体から前記マンモグラフィー画像及び前記注目領域の情報を取得し、取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の正面方向における範囲を表す正面情報を算出し、取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の奥行方向における位置を表す奥行情報を算出し、前記正面情報と前記奥行情報とを反映してシェーマ画像を生成し、前記シェーマ画像を表示装置に表示させることを特徴とする。
また、別の態様では、上記の何れかの態様において、前記シェーマ画像の生成では、前記シェーマ画像における前記正面情報の識別部の態様を、前記奥行情報の内容に応じて異ならせたシェーマ画像を生成する構成としてもよい。
係る構成により、超音波操作者は、超音波検査の際に注目領域の***の奥行方向の位置をシェーマ画像から把握することができる医用画像生成装置を実現できる。そのため、超音波操作者の作業負担を軽減して検査効率を向上できるプログラムを実現できる。
また、別の態様では、医用画像生成プログラムにおいて、前記シェーマ画像の生成では、前記シェーマ画像における前記正面情報を反映した識別部の態様を、前記注目領域深さに対応する前記注目領域の正面方向における存在可能性がある範囲の大きさに応じて異ならせたシェーマ画像を生成する構成としてもよい。
係る構成により、実際の位置推定結果の誤差の大きさに対応して、奥行き情報（距離）に応じて位置推定誤差を反映して、注目領域ＲＩの存在可能性がある範囲を示すシェーマ画像を表示するプログラムを実現できる。
また、別の態様では、上記の何れかの態様の医用画像生成プログラムにおいて、
さらに、前記マンモグラフィー画像から検出された、前記マンモグラフィー画像に含まれる***画像における、ニップルの位置、***端、ニップル基準線が示された前記マンモグラフィー画像を表示装置に表示させ、
前記マンモグラフィー画像が前記表示装置に表示させた状態で、前記ニップルの位置、前記***端、前記ニップル基準線の傾きから選択される何れかを変更する操作入力を操作者から受け付け、
前記マンモグラフィー画像、前記注目領域の情報及び前記操作入力に基づき、前記注目領域の正面方向における範囲を表す修正正面情報を算出し、
前記マンモグラフィー画像、前記注目領域の情報及び前記操作入力に基づき、前記注目領域の奥行方向における位置を表す修正奥行情報を算出し、
前記修正正面情報と前記修正奥行情報とを反映して修正シェーマ画像を生成し、前記修正シェーマ画像を表示装置に表示させる構成としてもよい。
係る構成により、操作者から修正された検出結果に基づいて、推定されたより精度の高い注目領域ＲＩの位置及び厚みをシェーマ画像に反映して表示するプログラムを実現できる。
また、別の態様では、医用画像生成プログラムにおいて、ＭＬＯ画像とＣＣ画像を含むマンモグラフィー画像と当該マンモグラフィー画像における注目領域の情報とに基づき、参照候補範囲を算出する医用画像生成処理をコンピュータに実行させる医用画像生成プログラムであって、
医用画像生成処理は、
前記マンモグラフィー画像及び前記注目領域の情報を取得し、
取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の正面方向における範囲を表す正面情報を算出し、
前記正面情報を反映して、前記ＭＬＯ画像又は前記ＣＣ画像のうち何れか一方の画像において指定された前記注目領域に基づき、他方の画像における参照候補範囲を算出し、
前記マンモグラフィー画像と前記参照候補範囲を表示装置に表示させる構成としてもよい。
係る構成により、一方の画像で指定された注目領域ＲＩに基づいて、他方の画像上における参照候補範囲ＲＬを表示させて、操作者が参照すべき画像範囲を絞り込み検査効率を向上に資するプログラムを実現できる。
また、別の態様では、医用画像生成プログラムであって、さらに、取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の奥行方向における位置を表す奥行情報を算出し、前記他方の画像における前記参照候補範囲の奥行方向の範囲を、前記一方の画像における前記注目領域の奥行方向における位置を表す奥行情報に基づき特定する構成としてもよい。係る構成により、さらに高さ方向に絞り込んだ参照候補範囲ＲＬを提示することが可能となり、操作者が参照すべき画像範囲をより一層絞り込み検査効率をさらに向上できるプログラムを実現できる。
本開示の実施の形態に係る医用画像生成装置及び医用画像生成プログラムは、マンモグラフィー画像における注目領域の***の奥行方向の位置をシェーマ画像から把握することができることから、シェーマ画像を取り扱う医用画像管理通信システム（ＰＡＣＳ）に広く適用可能である。
１００ 医用画像システム
１０ 医用画像保管通信システム（ＰＡＣＳ）
１ マンモグラフィー装置
３ 診断支援装置（ＣＡＤ）
３１ＣＰＵ
３２メモリー
３３表示装置（ディスプレイ）
３４入出力部（インターフェイス）
４ サーバー装置、（医用画像生成装置）
４１、４１Ａ 制御部
４１１ 画像及び情報取得部
４１２ 正面情報算出部
４１３ 奥行情報算出部
４１４ シェーマ画像生成部
４１４Ａ 参照候補範囲算出部
４２ メモリー
４３ 表示制御部
４４ 操作入力部
４５入出力部（インターフェイス）
５ 医用画像データベース、
６ 表示装置（ディスプレイ）

Claims (21)

  1. マンモグラフィー画像と注目領域の情報とに基づきシェーマ画像を生成する医用画像生成装置であって、
    前記マンモグラフィー画像及び前記注目領域の情報を取得する画像及び情報取得部と、
    取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の正面方向における範囲を表す正面情報を算出する正面情報算出部と、
    取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の奥行方向における位置を表す奥行情報を算出する奥行情報算出部と、
    前記正面情報と前記奥行情報とを反映してシェーマ画像を生成するシェーマ画像生成部と、
    前記シェーマ画像を表示装置に表示させる表示制御部と、を備え、
    前記シェーマ画像生成部は、前記シェーマ画像における前記正面情報を反映した識別部の態様を、前記奥行情報の内容に応じて異ならせたシェーマ画像を生成する
    医用画像生成装置。
  2. マンモグラフィー画像と注目領域の情報とに基づきシェーマ画像を生成する医用画像生成装置であって、
    前記マンモグラフィー画像及び前記注目領域の情報を取得する画像及び情報取得部と、
    取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の正面方向における範囲を表す正面情報を算出する正面情報算出部と、
    取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の奥行方向における位置を表す奥行情報を算出する奥行情報算出部と、
    前記正面情報と前記奥行情報とを反映してシェーマ画像を生成するシェーマ画像生成部と、
    前記シェーマ画像を表示装置に表示させる表示制御部と、を備え、
    前記奥行情報算出部は、前記***画像の***全厚みと、前記***画像における前記注目領域の注目領域深さとを算出し、前記注目領域深さの前記***全厚みに対する比率を算出して、前記比率を奥行情報とする
    医用画像生成装置。
  3. 前記奥行情報算出部は、さらに、前記***画像の***全厚みと、前記***画像における前記注目領域の注目領域厚みとを算出し、前記注目領域厚みの前記***全厚みに対する比率を算出して、前記比率を奥行情報とする
    請求項２に記載の医用画像生成装置。
  4. 前記シェーマ画像生成部は、前記シェーマ画像における前記正面情報の識別部の態様を、前記奥行情報を構成するパラメータの種別、及び前記パラメータの値の大小に応じて異ならせる
    請求項１から３の何れか１項に記載の医用画像生成装置。
  5. 前記注目領域の情報が、前記マンモグラフィー画像における所定値未満の大きさの領域を示す情報であるとき、
    前記シェーマ画像生成部は、前記シェーマ画像における前記正面情報の識別部の態様を線状にする
    請求項１から３の何れか１項に記載の医用画像生成装置。
  6. 前記注目領域の情報が、前記マンモグラフィー画像における所定値以上の大きさの領域を示す情報であるとき、
    前記シェーマ画像生成部は、前記シェーマ画像における前記正面情報の識別部の幅、長さ、又は面積から選択される１以上の要素を、前記奥行情報の内容に応じて異ならせる
    請求項１から３の何れか１項に記載の医用画像生成装置。
  7. 前記注目領域の情報が、複数の注目領域に対応して複数存在するとき、
    前記シェーマ画像生成部は、前記シェーマ画像における前記正面情報の識別部の色、濃度、輝度、透明度、テクスチャ、幅、長さ、又は面積から選択される１以上の要素を、前記注目領域毎に異ならせる
    請求項１から３の何れか１項に記載の医用画像生成装置。
  8. 前記シェーマ画像生成部は、前記シェーマ画像における前記正面情報を反映した識別部の態様を、前記注目領域深さに対応する前記注目領域の正面方向における存在可能性がある範囲の大きさに応じて異ならせたシェーマ画像を生成する
    請求項２に記載の医用画像生成装置。
  9. 前記注目領域深さが深いほど、前記注目領域の正面方向における存在可能性がある範囲の大きさが大きい
    請求項８に記載の医用画像生成装置。
  10. 前記シェーマ画像生成部は、前記注目領域深さが深いほど、前記シェーマ画像における前記正面情報の識別部の幅、長さ又は面積から選択される何れかの要素が増加するように異ならせる
    請求項８又は９に記載の医用画像生成装置。
  11. 前記***全厚みは、前記***画像におけるニップルの位置から、ニップル位置を通り前記マンモグラフィー画像における奥行方向軸と***基底ラインとの交点までの距離であり、
    前記注目領域深さは、前記注目領域における基準点を通り奥行方向軸に平行な直線とニップル位置を通り奥行方向軸に垂直な直線との交点から、前記基準点までの距離である
    請求項２に記載の医用画像生成装置。
  12. 前記注目領域深さは、前記注目領域における基準点を通り前記マンモグラフィー画像における奥行方向軸に平行な直線と***スキンラインとの交点から、前記基準点までの距離であり、
    前記***全厚みは、前記直線と***スキンラインとの交点から、前記直線と***基底ラインとの交点までの距離である
    請求項２に記載の医用画像生成装置。
  13. 前記注目領域深さは、前記注目領域における基準点を通り、ニップル位置を通り***基底ラインへの法線、又はニップルの上端と下端とを通る直線と垂直なニップル位置を通る直線に対し、平行な直線と、***スキンラインとの交点から、前記基準点までの距離であり、
    前記***全厚みは、前記直線と***スキンラインとの交点から、前記直線と***基底ラインとの交点までの距離である
    請求項２に記載の医用画像生成装置。
  14. 前記注目領域厚みは、前記注目領域における基準点を通り前記マンモグラフィー画像における奥行方向軸に平行な直線と前記注目領域の外縁との２つの交点間の距離であり、
    前記***全厚みは、前記直線と***スキンラインとの交点から、前記直線と***基底ラインとの交点までの距離である
    請求項３に記載の医用画像生成装置。
  15. 前記注目領域厚みは、前記注目領域における基準点を通り、ニップル位置を通り***基底ラインへの法線、又はニップルの上端と下端とを通る直線と垂直なニップル位置を通る直線に対し、平行な直線と前記注目領域の外縁との２つの交点間の距離であり、
    前記***全厚みは、前記直線と***スキンラインとの交点から、前記直線と***基底ラインとの交点までの距離である
    請求項３に記載の医用画像生成装置。
  16. マンモグラフィー画像と注目領域の情報とに基づきシェーマ画像を生成する医用画像生成装置であって、
    前記マンモグラフィー画像及び前記注目領域の情報を取得する画像及び情報取得部と、
    取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の正面方向における範囲を表す正面情報を算出する正面情報算出部と、
    取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の奥行方向における位置を表す奥行情報を算出する奥行情報算出部と、
    前記正面情報と前記奥行情報とを反映してシェーマ画像を生成するシェーマ画像生成部と、
    前記シェーマ画像を表示装置に表示させる表示制御部と、を備え、
    前記表示制御部は、前記マンモグラフィー画像から検出された、前記マンモグラフィー画像に含まれる***画像における、ニップルの位置、***端、ニップル基準線が示された前記マンモグラフィー画像を表示装置に表示させ、
    さらに、前記マンモグラフィー画像が前記表示装置に表示させた状態で、前記ニップルの位置、前記***端、前記ニップル基準線の傾きから選択される何れかを変更する操作入力を操作者から受け付ける操作入力部を備え、
    前記正面情報算出部は、前記マンモグラフィー画像、前記注目領域の情報及び前記操作入力に基づき、前記注目領域の正面方向における範囲を表す修正正面情報を算出し、
    前記奥行情報算出部は、前記マンモグラフィー画像、前記注目領域の情報及び前記操作入力に基づき、前記注目領域の奥行方向における位置を表す修正奥行情報を算出し、
    前記シェーマ画像生成部は、前記修正正面情報と前記修正奥行情報とを反映して修正シェーマ画像を生成し、
    前記表示制御部は、前記修正シェーマ画像を表示装置に表示させる
    医用画像生成装置。
  17. ＭＬＯ画像とＣＣ画像を含むマンモグラフィー画像と注目領域の情報とに基づき参照候補範囲を算出する医用画像生成装置であって、
    前記マンモグラフィー画像及び前記注目領域の情報を取得する画像及び情報取得部と、
    取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の正面方向における範囲を表す正面情報を算出する正面情報算出部と、
    前記正面情報を反映して、前記ＭＬＯ画像又は前記ＣＣ画像のうち何れか一方の画像において指定された前記注目領域に基づき、他方の画像における参照候補範囲を算出する参照候補範囲を算出する参照候補範囲算出部と、
    前記マンモグラフィー画像と前記参照候補範囲を表示装置に表示させる表示制御部と、を備え、
    前記参照候補範囲算出部は、前記一方の画像に含まれる第１の***画像、及び前記他方の画像に含まれる第２の***画像に対応する仮想シェーマ画像を設定し、
    前記第１の***画像における前記注目領域の、前記第１の***画像の第１の***基底ライン方向の相対位置を、前記仮想シェーマ画像を介して前記第２の***画像上に相対的に投影した、前記第２の***画像の第２の***基底ライン方向の範囲を前記参照候補範囲とする
    医用画像生成装置。
  18. 前記参照候補範囲算出部は、前記仮想シェーマ画像における、前記相対位置に対応する位置を通る直線と前記仮想シェーマ画像における***の外周線と交わる２つの交点を算出し、
    前記２つ交点の、前記仮想シェーマ画像における前記第２の***基底ライン方向の２つの相対位置を算出し、
    前記第２の***画像における、第２の***基底ライン方向に規定される前記２つの相対位置に挟まれた範囲を前記参照候補範囲として算出する
    請求項１７に記載の医用画像生成装置。
  19. さらに、取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の奥行方向における位置を表す奥行情報を算出する奥行情報算出部を備え、
    前記参照候補範囲算出部は、前記第２の***画像における前記参照候補範囲の奥行方向の範囲を、前記第１の***画像における前記注目領域の奥行方向における位置を表す奥行情報に基づき特定する
    請求項１７又は１８に記載の医用画像生成装置。
  20. マンモグラフィー画像と当該マンモグラフィー画像における注目領域の情報とに基づき、シェーマ画像を生成する医用画像生成装置が実行する、医用画像生成処理をコンピュータに実行させる医用画像生成プログラムであって、
    医用画像生成処理は、
    前記マンモグラフィー画像及び前記注目領域の情報を取得し、
    取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の正面方向における範囲を表す正面情報を算出し、
    取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の奥行方向における位置を表す奥行情報を算出し、
    前記正面情報と前記奥行情報とを反映してシェーマ画像を生成し、
    前記シェーマ画像を表示装置に表示させ、
    前記シェーマ画像を生成する際には、前記シェーマ画像における前記正面情報を反映した識別部の態様を、前記奥行情報の内容に応じて異ならせたシェーマ画像を生成する
    医用画像生成プログラム。
  21. ＭＬＯ画像とＣＣ画像を含むマンモグラフィー画像と当該マンモグラフィー画像における注目領域の情報とに基づき、参照候補範囲を算出する医用画像生成処理をコンピュータに実行させる医用画像生成プログラムであって、
    医用画像生成処理は、
    前記マンモグラフィー画像及び前記注目領域の情報を取得し、
    取得された前記マンモグラフィー画像と前記注目領域の情報とに基づき、前記マンモグラフィー画像に含まれる***画像における前記注目領域について、前記注目領域の正面方向における範囲を表す正面情報を算出し、
    前記正面情報を反映して、前記ＭＬＯ画像又は前記ＣＣ画像のうち何れか一方の画像において指定された前記注目領域に基づき、他方の画像における参照候補範囲を算出し、
    前記マンモグラフィー画像と前記参照候補範囲を表示装置に表示させ、
    前記参照候補範囲を算出する際には、前記一方の画像に含まれる第１の***画像、及び前記他方の画像に含まれる第２の***画像に対応する仮想シェーマ画像を設定し、
    前記第１の***画像における前記注目領域の、前記第１の***画像の第１の***基底ライン方向の相対位置を、前記仮想シェーマ画像を介して前記第２の***画像上に相対的に投影した、前記第２の***画像の第２の***基底ライン方向の範囲を前記参照候補範囲とする
    医用画像生成プログラム。
JP2020053092A 2019-03-26 2020-03-24 医用画像生成装置及び医用画像生成プログラム Active JP7331749B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019058574 2019-03-26
JP2019058574 2019-03-26

Publications (3)

Publication Number Publication Date
JP2020163137A JP2020163137A (ja) 2020-10-08
JP2020163137A5 JP2020163137A5 (ja) 2022-11-30
JP7331749B2 true JP7331749B2 (ja) 2023-08-23

Family

ID=72714639

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020053092A Active JP7331749B2 (ja) 2019-03-26 2020-03-24 医用画像生成装置及び医用画像生成プログラム

Country Status (1)

Country Link
JP (1) JP7331749B2 (ja)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001346786A (ja) 2000-06-08 2001-12-18 Fuji Photo Film Co Ltd 異常陰影候補検出方法および再生方法並びに検出システム
JP2010172499A (ja) 2009-01-29 2010-08-12 Aloka Co Ltd 超音波診断装置
US20120014578A1 (en) 2010-07-19 2012-01-19 Qview Medical, Inc. Computer Aided Detection Of Abnormalities In Volumetric Breast Ultrasound Scans And User Interface
JP2015027450A (ja) 2013-07-03 2015-02-12 株式会社東芝 医用情報処理システム、医用情報処理プログラム及び超音波診断装置
JP2016195655A (ja) 2015-04-03 2016-11-24 コニカミノルタ株式会社 医用画像システム及びプログラム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001346786A (ja) 2000-06-08 2001-12-18 Fuji Photo Film Co Ltd 異常陰影候補検出方法および再生方法並びに検出システム
JP2010172499A (ja) 2009-01-29 2010-08-12 Aloka Co Ltd 超音波診断装置
US20120014578A1 (en) 2010-07-19 2012-01-19 Qview Medical, Inc. Computer Aided Detection Of Abnormalities In Volumetric Breast Ultrasound Scans And User Interface
JP2015027450A (ja) 2013-07-03 2015-02-12 株式会社東芝 医用情報処理システム、医用情報処理プログラム及び超音波診断装置
US20160110875A1 (en) 2013-07-03 2016-04-21 Kabushiki Kaisha Toshiba Medical information processing system, non-transitory computer readable storage medium, and ultrasound diagnosis apparatus
JP2016195655A (ja) 2015-04-03 2016-11-24 コニカミノルタ株式会社 医用画像システム及びプログラム

Also Published As

Publication number Publication date
JP2020163137A (ja) 2020-10-08

Similar Documents

Publication Publication Date Title
US9168007B2 (en) Computer-aided diagnostic apparatus
JP6559917B2 (ja) 超音波システム並びに***組織の撮像及び***超音波画像のアノテーション方法
JP7431729B2 (ja) 超音波胸部画像と他の撮像モダリティの胸部画像とを相関させる超音波システム及び方法
US9129362B2 (en) Semantic navigation and lesion mapping from digital breast tomosynthesis
JP5274834B2 (ja) ***超音波情報の処理及び表示
CN111374703B (zh) 用于医疗分级***的方法和***
CN112469340A (zh) 具有用于引导式肝成像的人工神经网络的超声***
US20060251301A1 (en) Method and apparatus for determining correlation between spatial coordinates in breast
US20120293511A1 (en) Method for displaying an area to be medically examined and/or treated
US9390546B2 (en) Methods and systems for removing occlusions in 3D ultrasound images
US20130257910A1 (en) Apparatus and method for lesion diagnosis
EP3796210A1 (en) Spatial distribution of pathological image patterns in 3d image data
US9504450B2 (en) Apparatus and method for combining three dimensional ultrasound images
JP2000126182A (ja) 腫瘍診断方法
KR20150027637A (ko) 의료영상들을 정합하는 방법 및 장치
US20160292852A1 (en) Method and apparatus for breast lesion diagnosis
Hu et al. Deep learning-based automatic endometrium segmentation and thickness measurement for 2D transvaginal ultrasound
JP7430249B2 (ja) 画像処理装置、画像表示システム、画像処理方法及びプログラム
EP3105741B1 (en) Systems for monitoring lesion size trends and methods of operation thereof
US11730384B2 (en) Fluid analysis apparatus, method for operating fluid analysis apparatus, and fluid analysis program
JP7331749B2 (ja) 医用画像生成装置及び医用画像生成プログラム
JP5533198B2 (ja) 医用画像表示装置及びプログラム
JP7500372B2 (ja) 画像観察装置及び画像観察プログラム
US20230253083A1 (en) Report creation support device
CN114391878A (zh) 一种超声成像设备

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20210917

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20211005

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220513

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221121

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230228

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230228

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230426

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230711

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230724

R150 Certificate of patent or registration of utility model

Ref document number: 7331749

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150