JP7453400B2 - 超音波システムおよび超音波システムの制御方法 - Google Patents

超音波システムおよび超音波システムの制御方法 Download PDF

Info

Publication number
JP7453400B2
JP7453400B2 JP2022551229A JP2022551229A JP7453400B2 JP 7453400 B2 JP7453400 B2 JP 7453400B2 JP 2022551229 A JP2022551229 A JP 2022551229A JP 2022551229 A JP2022551229 A JP 2022551229A JP 7453400 B2 JP7453400 B2 JP 7453400B2
Authority
JP
Japan
Prior art keywords
image
ultrasound
region
interest
volume rendering
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022551229A
Other languages
English (en)
Other versions
JPWO2022064981A1 (ja
Inventor
理子 越野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of JPWO2022064981A1 publication Critical patent/JPWO2022064981A1/ja
Application granted granted Critical
Publication of JP7453400B2 publication Critical patent/JP7453400B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/13—Tomography
    • A61B8/14—Echo-tomography
    • A61B8/145—Echo-tomography characterised by scanning multiple planes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/48—Diagnostic techniques
    • A61B8/483—Diagnostic techniques involving the acquisition of a 3D volume of data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0825—Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of the breast, e.g. mammography
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461—Displaying means of special interest
    • A61B8/465—Displaying means of special interest adapted to display user selection data, e.g. icons or menus
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461—Displaying means of special interest
    • A61B8/466—Displaying means of special interest adapted to display 3D data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/467—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means
    • A61B8/468—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means allowing annotation or message recording
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/467—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means
    • A61B8/469—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means for selection of a region of interest
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5207—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of raw data to produce diagnostic data, e.g. for generating an image
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A61B8/5223—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for extracting a diagnostic or physiological parameter from medical diagnostic data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/56—Details of data transmission or power supply
    • A61B8/565—Details of data transmission or power supply involving data transmission via a network

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Physics & Mathematics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Physiology (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Description

本発明は、被検体の***を検査するための超音波システムおよび超音波システムの制御方法に関する。
従来から、超音波診断装置を用いて被検体の***における病変部の検査が行われている。このような超音波診断装置を用いた検査の前に、予め、放射線診断装置を用いた検査が行われることが多く、医師等のユーザは、放射線診断装置により撮影された放射線画像と、超音波診断装置により撮影された超音波画像の双方を確認することにより、被検体の***における病変部の診断を行うことが多い。
そこで、ユーザが円滑に診断を行えるように、例えば特許文献１には、放射線画像における***の病変部の疑いがある関心領域を指定し、指定された関心領域に対応する部分が撮影された超音波画像を特定し、その超音波画像を表示する画像表示装置が開発されている。
特開２０１４－１４４８９号公報
ところで、被検体の***における病変部は、通常、３次元的な形状を有していることが多く、医師等のユーザは、精確な診断をするために、病変部の３次元的な形状を把握することが好ましい。特許文献１の技術では、ユーザは、互いに同一の病変部の疑いがある関心領域を含む放射線画像と超音波画像の双方を観察しながら被検体の***における関心領域の診断を行うことができるが、２次元的な画像である放射線画像と超音波画像を観察するだけでは、関心領域の３次元的な形状を詳細に把握することは困難な場合があった。
本発明は、このような従来の問題点を解決するためになされたものであり、関心領域に対する診断精度を向上させることができる超音波システムおよび超音波システムの制御方法を提供することを目的とする。
本発明に係る超音波システムは、超音波プローブと、被検体に対し超音波プローブを用いて超音波ビームの送受信を行うことにより、それぞれ被検体の***の関心領域が撮影された複数フレームの２次元超音波画像を生成する画像生成部と、複数フレームの２次元超音波画像に基づいて関心領域を含むボリュームレンダリング画像を生成するボリュームレンダリング画像生成部と、ボリュームレンダリング画像を、関心領域に関する参照情報に紐付ける参照情報紐付け部とを備えることを特徴とする。
参照情報紐付け部は、関心領域が撮像された放射線画像の識別情報を、参照情報としてボリュームレンダリング画像のタグに格納することができる。
この場合に、放射線画像は、関心領域を互いに異なる２方向から撮影した２つの放射線画像を含み、参照情報紐付け部は、２つの放射線画像のそれぞれの識別情報を、参照情報としてボリュームレンダリング画像のタグに格納することができる。
参照情報紐付け部は、関心領域が撮像された他の２次元超音波画像の識別情報を、参照情報としてボリュームレンダリング画像のタグに格納することもできる。
この場合に、他の２次元超音波画像は、関心領域に対して互いに直交する２つの断層面が撮像された２つの２次元超音波画像を含み、参照情報紐付け部は、２つの２次元超音波画像のそれぞれの識別情報を、参照情報としてボリュームレンダリング画像のタグに格納することができる。
超音波システムは、超音波診断装置と、超音波診断装置に接続されたサーバとを備えることができ、この場合に、超音波診断装置は、超音波プローブ、画像生成部、ボリュームレンダリング画像生成部および参照情報紐付け部と、参照情報に紐付けられたボリュームレンダリング画像をサーバに送信する通信部とを有することができる。
超音波システムは、さらに、サーバに接続されたビューワを備え、ビューワは、ユーザが入力操作を行う入力装置と関心領域が撮像された放射線画像または２次元超音波画像を表示するモニタとを有することができ、この場合に、モニタに表示された放射線画像または２次元超音波画像の関心領域がユーザにより入力装置を介して指定された場合に、関心領域を含むボリュームレンダリング画像がモニタに表示されることができる。
さらに、モニタに表示された放射線画像または２次元超音波画像の関心領域がユーザにより入力装置を介して指定された場合に、それぞれ関心領域が撮像された放射線画像と２次元超音波画像とボリュームレンダリング画像がモニタに表示されることができる。
ボリュームレンダリング画像生成部は、サーフェイスレンダリングを利用してボリュームレンダリング画像を生成することができる。
また、超音波システムは、ボリュームレンダリング画像を保存する画像メモリを備えることができる。
本発明に係る超音波システムの制御方法は、被検体に対し超音波プローブを用いて超音波ビームの送受信を行うことにより、それぞれ被検体の***の関心領域が撮影された複数フレームの２次元超音波画像を生成し、複数フレームの２次元超音波画像に基づいて関心領域を含むボリュームレンダリング画像を生成し、ボリュームレンダリング画像を、関心領域に関する参照情報に紐付けることを特徴とする。
本発明によれば、超音波システムが、超音波プローブと、被検体に対し超音波プローブを用いて超音波ビームの送受信を行うことにより、それぞれ被検体の***の関心領域が撮影された複数フレームの２次元超音波画像を生成する画像生成部と、複数フレームの２次元超音波画像に基づいて関心領域を含むボリュームレンダリング画像を生成するボリュームレンダリング画像生成部と、ボリュームレンダリング画像を、関心領域に関する参照情報に紐付ける参照情報紐付け部とを備えるため、関心領域に対する診断精度を向上させることができる。
本発明の実施の形態に係る超音波システムの構成を示すブロック図である。 本発明の実施の形態における送受信回路の構成を示すブロック図である。 本発明の実施の形態における超音波画像生成部の構成を示すブロック図である。 本発明の実施の形態において生成される２次元超音波画像の例の模式図である。 本発明の実施の形態において生成されるボリュームレンダリング画像の例の模式図である。 本発明の実施の形態におけるサーバの構成を示す図である。 本発明の実施の形態におけるビューワの構成を示す図である。 本発明の実施の形態に係る超音波システムの動作を示すフローチャートである。 本発明の実施の形態におけるビューワ側モニタに表示された２次元超音波画像とボリュームレンダリング画像の例の模式図である。 本発明の実施の形態におけるビューワ側モニタに表示された２次元超音波画像とボリュームレンダリング画像と放射線画像の例の模式図である。 本発明の実施の形態におけるビューワ側モニタに表示された放射線画像とボリュームレンダリング画像の例の模式図である。
以下、この発明の実施の形態を添付図面に基づいて説明する。
以下に記載する構成要件の説明は、本発明の代表的な実施態様に基づいてなされるが、本発明はそのような実施態様に限定されるものではない。
なお、本明細書において、「～」を用いて表される数値範囲は、「～」の前後に記載される数値を下限値および上限値として含む範囲を意味する。
本明細書において、「同一」、「同じ」は、技術分野で一般的に許容される誤差範囲を含むものとする。
実施の形態
図１に、本発明の実施の形態に係る超音波システム１の構成を示す。超音波システム１は、超音波診断装置２、サーバ３およびビューワ４を備えている。超音波診断装置２とサーバ３は、ネットワークＮＷを介して互いに接続されている。また、サーバ３とビューワ４は、ネットワークＮＷを介して互いに接続されている。
図１に示すように、超音波診断装置２は、超音波プローブ５と診断装置本体６を備えている。超音波プローブ５は、振動子アレイ１１を備えており、振動子アレイ１１に、送受信回路１２が接続されている。また、超音波プローブ５には、位置センサ１３が取り付けられている。
診断装置本体６は、超音波画像生成部２２を備え、超音波画像生成部２２に、超音波プローブ５の送受信回路１２が接続されている。また、超音波画像生成部２２に、表示制御部２３および本体側モニタ２４が順次接続されている。また、超音波画像生成部２２と超音波プローブ５の位置センサ１３に、メモリ２５が接続されている。また、診断装置本体６は、本体側通信部２１を備えており、本体側通信部２１は、ネットワークＮＷを経由してサーバ３に接続されている。また、本体側通信部２１にメモリ２５が接続されている。また、本体側通信部２１とメモリ２５に、ＶＲ（Volume Rendering：ボリュームレンダリング）画像生成部２６が接続されている。また、ＶＲ画像生成部２６に、表示制御部２３と参照情報紐付け部２７が接続されている。参照情報紐付け部２７に、本体側通信部２１とメモリ２５が接続されている。
また、送受信回路１２、位置センサ１３、本体側通信部２１、超音波画像生成部２２、表示制御部２３、メモリ２５、ＶＲ画像生成部２６および参照情報紐付け部２７に、本体制御部２９が接続されている。また、本体制御部２９に、入力装置３０が接続されている。
また、本体側通信部２１、超音波画像生成部２２、表示制御部２３、ＶＲ画像生成部２６、参照情報紐付け部２７および本体制御部２９により、本体側プロセッサ３１が構成されている。
図１に示す超音波プローブ５の振動子アレイ１１は、１次元または２次元に配列された複数の超音波振動子を有している。これらの超音波振動子は、それぞれ送受信回路１２から供給される駆動信号にしたがって超音波を送信すると共に、被検体からの超音波エコーを受信して、超音波エコーに基づく信号を出力する。各超音波振動子は、例えば、ＰＺＴ（Lead Zirconate Titanate：チタン酸ジルコン酸鉛）に代表される圧電セラミック、ＰＶＤＦ（Poly Vinylidene Di Fluoride：ポリフッ化ビニリデン）に代表される高分子圧電素子およびＰＭＮ－ＰＴ（Lead Magnesium Niobate-Lead Titanate：マグネシウムニオブ酸鉛－チタン酸鉛固溶体）に代表される圧電単結晶等からなる圧電体の両端に電極を形成することにより構成される。
送受信回路１２は、プローブ制御部１５による制御の下で、振動子アレイ１１から超音波を送信し且つ振動子アレイ１１により取得された受信信号に基づいて音線信号を生成する。送受信回路１２は、図２に示すように、振動子アレイ１１に接続されるパルサ１６と、振動子アレイ１１から順次直列に接続される増幅部１７、ＡＤ（Analog Digital）変換部１８、およびビームフォーマ１９を有している。
パルサ１６は、例えば、複数のパルス発生器を含んでおり、プローブ制御部１５からの制御信号に応じて選択された送信遅延パターンに基づいて、振動子アレイ１１の複数の超音波振動子から送信される超音波が超音波ビームを形成するようにそれぞれの駆動信号を、遅延量を調節して複数の超音波振動子に供給する。このように、振動子アレイ１１の超音波振動子の電極にパルス状または連続波状の電圧が印加されると、圧電体が伸縮し、それぞれの超音波振動子からパルス状または連続波状の超音波が発生して、それらの超音波の合成波から、超音波ビームが形成される。
送信された超音波ビームは、例えば、被検体の部位等の対象において反射され、超音波プローブ５の振動子アレイ１１に向かって伝搬する。このように振動子アレイ１１に向かって伝搬する超音波エコーは、振動子アレイ１１を構成するそれぞれの超音波振動子により受信される。この際に、振動子アレイ１１を構成するそれぞれの超音波振動子は、伝搬する超音波エコーを受信することにより伸縮して、電気信号である受信信号を発生させ、これらの受信信号を増幅部１７に出力する。
増幅部１７は、振動子アレイ１１を構成するそれぞれの超音波振動子から入力された受信信号を増幅し、増幅した受信信号をＡＤ変換部１８に送信する。ＡＤ変換部１８は、増幅部１７から送信された受信信号をデジタルの受信データに変換する。ビームフォーマ１９は、ＡＤ変換部１８から受け取った各受信データに対してそれぞれの遅延を与えて加算することにより、いわゆる受信フォーカス処理を行う。この受信フォーカス処理により、ＡＤ変換部１８で変換された各受信データが整相加算され且つ超音波エコーの焦点が絞り込まれた音線信号が取得される。
位置センサ１３は、超音波プローブ５に取り付けられ、超音波プローブ５の位置情報を検出する。位置センサ１３により検出された超音波プローブ５の位置情報は、メモリ２５に送信される。
また、位置センサ１３としては、例えば、磁気センサ、加速度センサ、ジャイロセンサ、光位置センサ、または、ＧＰＳ（Global Positioning System：全地球測位システム）センサ等を含むことができる。
診断装置本体６の本体側通信部２１は、電波の送信および受信を行うためのアンテナを含む回路、および、ＬＡＮ（Local Area Network：ローカルエリアネットワーク）接続を行うための回路等により構成されており、本体制御部２９の制御の下で、ネットワークＮＷを介してサーバ３およびビューワ４との通信を行う。本体側通信部２１は、放射線画像の識別情報等を、ネットワークＮＷを介してサーバ３から受信することができる。
超音波画像生成部２２は、図３に示すように、信号処理部３２、ＤＳＣ（Digital Scan Converter：デジタルスキャンコンバータ）３３および画像処理部３４が順次直列に接続された構成を有している。
信号処理部３２は、本体側通信部２１から受信した音線信号に対し、本体制御部２９により設定される音速値を用いて超音波の反射位置の深度に応じて距離による減衰の補正を施した後、包絡線検波処理を施すことにより、被検体内の組織に関する断層画像情報であるＢモード画像信号を生成する。
ＤＳＣ３３は、信号処理部３２で生成されたＢモード画像信号を通常のテレビジョン信号の走査方式に従う画像信号に変換（ラスター変換）する。
画像処理部３４は、ＤＳＣ３３から入力されるＢモード画像信号に階調処理等の各種の必要な画像処理を施した後、Ｂモード画像信号を表示制御部２３およびメモリ２５に送出する。以降は、画像処理部３４により画像処理が施されたＢモード画像信号を、２次元超音波画像と呼ぶ。
メモリ２５は、超音波画像生成部２２により生成された２次元超音波画像、位置センサ１３により取得された超音波プローブ５の位置情報、および、サーバ３から送信された放射線画像等の情報を保存するためのものである。また、メモリ２５には、本体制御部２９の制御の下で、２次元超音波画像がメモリ２５に保存される毎に、２次元超音波画像が撮影された際の超音波プローブ５の位置情報が、その２次元超音波画像に関連付けられて保存される。
また、メモリ２５に保存された２次元超音波画像および超音波プローブ５の位置情報は、本体制御部２９による制御の下で読み出され、ＶＲ画像生成部２６に送出される。
また、メモリ２５に保存された放射線画像等の情報は、本体制御部２９による制御の下で読み出され、参照情報紐付け部２７に送出される。
メモリ２５としては、例えば、フラッシュメモリ、ＨＤＤ（Hard Disc Drive：ハードディスクドライブ）、ＳＳＤ（Solid State Drive：ソリッドステートドライブ）、ＦＤ（Flexible Disc：フレキシブルディスク）、ＭＯディスク（Magneto-Optical disc：光磁気ディスク）、ＭＴ（Magnetic Tape：磁気テープ）、ＲＡＭ（Random Access Memory：ランダムアクセスメモリ）、ＣＤ（Compact Disc：コンパクトディスク）、ＤＶＤ（Digital Versatile Disc：デジタルバーサタイルディスク）、ＳＤカード（Secure Digital card：セキュアデジタルカード）、および、ＵＳＢメモリ（Universal Serial Bus memory：ユニバーサルシリアルバスメモリ）等の記録メディア等を用いることができる。
ＶＲ画像生成部２６は、メモリ２５に保存された複数フレームの２次元超音波画像のそれぞれに対して、画像解析を行うことにより、図４に示すように、関心領域Ａ１を自動的に抽出し、複数フレームの２次元超音波画像Ｕと位置センサ１３により検出された超音波プローブ５の位置情報に基づいて、関心領域Ａ１の３次元的な形状を表す、図５に示すようなボリュームレンダリング画像Ｘを生成する。
ここで、関心領域Ａ１は、被検体の病変部の疑いがある領域である。
ＶＲ画像生成部２６は、例えば、関心領域Ａ１の典型的なパターンデータをテンプレートとして予め記憶しておき、２次元超音波画像をサーチしながらパターンデータに対する類似度を算出し、類似度がしきい値以上かつ最大となった場所に関心領域Ａ１が存在するとみなすことができる。
なお、関心領域Ａ１を抽出する方法としては、単純なテンプレートマッチングを用いる方法の他に、例えば、Csurka et al.: Visual Categorization with Bags of Keypoints, Proc. of ECCV Workshop on Statistical Learning in Computer Vision, pp.59-74 （2004）に記載されている機械学習手法、あるいは、Krizhevsk et al.: ImageNet Classification with Deep Convolutional Neural Networks, Advances in Neural Information Processing Systems 25, pp.1106-1114 （2012）に記載されているディープラーニングを用いた一般画像認識手法等を用いることができる。
また、ＶＲ画像生成部２６は、例えば、複数フレームの２次元超音波画像Ｕに対して関心領域Ａ１の輪郭を抽出し、複数フレームの２次元超音波画像Ｕにおいて抽出された関心領域Ａ１の輪郭の情報と、それぞれの２次元超音波画像Ｕが撮影された際の超音波プローブ５の位置情報を用いて関心領域Ａ１の位置合わせを行い、いわゆるサーフェイスレンダリングの方法により、関心領域Ａ１のボリュームレンダリング画像Ｘを生成することができる。
なお、関心領域Ａ１のボリュームレンダリング画像Ｘの生成方法としては、サーフェイスレンダリングに限らず、例えば、複数フレームの２次元超音波画像Ｕにおける関心領域Ａ１の全体の情報を用いて、いわゆるボリュームレンダリングの方法を用いてもよい。
また、ＶＲ画像生成部２６は、例えば、サーフェイスレンダリング等の方法により、関心領域Ａ１の３次元モデルを構築し、その３次元モデルを本体側モニタ２４に表示させ、入力装置３０を介したユーザの入力操作により本体側モニタ２４において３次元モデルを回転、拡大および縮小させた状態で、３次元モデルに対していわゆるスクリーンショットを撮影することにより、ボリュームレンダリング画像Ｘを生成することができる。
参照情報紐付け部２７は、ＶＲ画像生成部２６により生成されたボリュームレンダリング画像Ｘを、関心領域Ａ１に関する参照情報に紐付ける。
関心領域Ａ１に関する参照情報とは、例えば、サーバ３からネットワークＮＷを経由して本体側通信部２１に送信された、関心領域Ａ１が撮影された放射線画像の識別情報、および、ＶＲ画像生成部２６によりボリュームレンダリング画像Ｘが生成される際に使用された複数フレームの２次元超音波画像Ｕのうちの代表的な２次元超音波画像Ｕの識別情報等を含む情報である。
ここで、例えば、ＶＲ画像生成部２６により、位置センサ１３により検出された超音波プローブ５の位置情報に基づいて、関心領域Ａ１の３次元形状の中心を通る断層を表す２次元超音波画像Ｕが選出され、その２次元超音波画像Ｕの識別情報が、ボリュームレンダリング画像Ｘが生成される際に使用された複数フレームの２次元超音波画像Ｕのうちの代表的な２次元超音波画像Ｕの識別情報として、参照情報紐付け部２７に送出されることができる。
また、参照情報紐付け部２７は、ボリュームレンダリング画像Ｘに対して、情報を格納するためのタグを生成し、放射線画像の識別情報および２次元超音波画像Ｕの識別情報を含む参照情報を、ボリュームレンダリング画像Ｘのタグに格納することにより、ボリュームレンダリング画像Ｘを参照情報に紐付けることができる。
ここで、ボリュームレンダリング画像Ｘのタグとして、例えば、いわゆるＤＩＣＯＭ（Digital Imaging and COmmunications in Medicine）を使用することができる。詳細には、ボリュームレンダリング画像ＸのＤＩＣＯＭタグ内に含める、放射線画像の識別情報および２次元超音波画像Ｕの識別情報を含む参照情報として、それらの画像のＳＯＰ Ｉｎｓｔａｎｃｅ ＵＩＤ（Service Objective Pair Instance Unique IDentifier：ＳＯＰインスタンスＵＩＤ）を使用することができる。また、上記の参照情報として、ＳＯＰ Ｉｎｓｔａｎｃｅ ＵＩＤに加えて、Ｓｔｕｄｙ Ｉｎｓｔａｎｃｅ ＵＩＤ（Study Instance Unique IDentifier：検査インスタンスＵＩＤ）、Ｓｅｒｉｅｓ Ｉｎｓｔａｎｃｅ ＵＩＤ（Series Instance Unique IDentifier：シリーズインスタンスＵＩＤ）を使用してもよい。
このようにして参照情報紐付け部２７により、参照情報に紐付けられたボリュームレンダリング画像Ｘは、本体側通信部２１からネットワークＮＷを経由してサーバ３に送信される。
本体制御部２９は、予め記録されたプログラム等にしたがって超音波プローブ５の各部および診断装置本体６の各部を制御する。
診断装置本体６の表示制御部２３は、本体制御部２９の制御の下、超音波画像生成部２２により生成された２次元超音波画像ＵおよびＶＲ画像生成部２６により生成されたボリュームレンダリング画像Ｘ等に対して所定の処理を施して、本体側モニタ２４に表示する。
本体側モニタ２４は、表示制御部２３による制御の下、種々の表示を行う。本体側モニタ２４は、例えば、ＬＣＤ（Liquid Crystal Display：液晶ディスプレイ）、および、有機ＥＬディスプレイ（Organic Electroluminescence Display）等のディスプレイ装置を含む。
診断装置本体６の入力装置３０は、ユーザが入力操作を行うためのものである。入力装置３０は、例えば、キーボード、マウス、トラックボール、タッチパッドおよびタッチパネル等のユーザが入力操作を行うための装置等により構成される。
なお、本体側通信部２１、超音波画像生成部２２、表示制御部２３、ＶＲ画像生成部２６、参照情報紐付け部２７および本体制御部２９を含む本体側プロセッサ３１は、ＣＰＵ（Central Processing Unit：中央処理装置）、および、ＣＰＵに各種の処理を行わせるための制御プログラムから構成されるが、ＦＰＧＡ（Field Programmable Gate Array：フィードプログラマブルゲートアレイ）、ＤＳＰ（Digital Signal Processor：デジタルシグナルプロセッサ）、ＡＳＩＣ（Application Specific Integrated Circuit：アプリケーションスペシフィックインテグレイテッドサーキット）、ＧＰＵ（Graphics Processing Unit：グラフィックスプロセッシングユニット）、および、その他のＩＣ（Integrated Circuit：集積回路）を用いて構成されてもよく、もしくはそれらを組み合わせて構成されてもよい。
また、本体側通信部２１、超音波画像生成部２２、表示制御部２３、ＶＲ画像生成部２６、参照情報紐付け部２７および本体制御部２９は、部分的にあるいは全体的に１つのＣＰＵ等に統合させて構成されることもできる。
図６に示すように、サーバ３は、サーバ側通信部４１を備えている。サーバ側通信部４１には、データベース管理部４２が接続されている。また、データベース管理部４２にメモリ４３が接続され、メモリ４３にサーバ側通信部４１が接続されている。また、サーバ側通信部４１、データベース管理部４２およびメモリ４３に、サーバ制御部４４が接続されている。
なお、サーバ側通信部４１、データベース管理部４２およびサーバ制御部４４により、図示しないサーバプロセッサが構成されている。
サーバ３は、例えば病院等に設置されており、診断装置本体６が配置されている場所に対する遠隔地に設置されている。サーバ３は、画像データを管理するものであり、例えば、医師等のユーザが被検体の関心領域Ａ１に対する診断を行う際に使用される。具体例としては、サーバ３は、いわゆるＰＡＣＳ（Picture Archiving and Communication System：医療用画像管理システム）に使用されることができる。
サーバ側通信部４１は、本体側通信部２１と同様に、電波の送信および受信を行うためのアンテナを含む回路、および、ＬＡＮ接続を行うための回路等により構成されており、サーバ制御部４４の下で、ビューワ４および診断装置本体６と、ネットワークＮＷを介した通信を行う。
データベース管理部４２は、ネットワークＮＷを介して診断装置本体６からサーバ側通信部４１に送信されたボリュームレンダリング画像Ｘのタグの情報に基づいて、そのボリュームレンダリング画像Ｘと、ボリュームレンダリング画像Ｘに紐付けられた２次元超音波画像Ｕおよび放射線画像等の画像データを、それぞれ相互に関連付ける。このようにして、データベース管理部４２は、ボリュームレンダリング画像Ｘに関連する情報をデータベース化し、データベース化された情報をメモリ４３に保存する。
メモリ４３は、データベース管理部４２によって相互関係がデータベース化されたボリュームレンダリング画像Ｘ、２次元超音波画像Ｕ、放射線画像およびその他の情報を保存するものである。メモリ４３に保存されている情報は、サーバ制御部４４による制御の下で、サーバ側通信部４１に送出され、ネットワークＮＷを経由してビューワ４および診断装置本体６に送信される。
メモリ４３としては、例えば、フラッシュメモリ、ＨＤＤ、ＳＳＤ、ＦＤ、ＭＯディスク、ＭＴ、ＲＡＭ、ＣＤ、ＤＶＤ、ＳＤカード、ＵＳＢメモリ等の記録メディア等を用いることができる。
サーバ制御部４４は、予め記録されたプログラム等にしたがってサーバ３の各部を制御する。
図７に示すように、ビューワ４は、ビューワ側通信部５１を備えており、ビューワ側通信部５１に、表示制御部５２およびビューワ側モニタ５３が順次接続されている。また、ビューワ側通信部５１と表示制御部５２に、ビューワ制御部５４が接続されている。また、ビューワ制御部５４に、入力装置５５が接続されている。
ビューワ４は、例えば病院等に設置され、診断装置本体６の設置場所に対して離れた場所に設置されている。ビューワ４は、例えば、パーソナルコンピュータ等により構成され、医師等のユーザがサーバ３に保存されているデータを閲覧する際に使用される。具体例としては、ビューワ４は、いわゆるＰＡＣＳに使用されることができる。
ビューワ側通信部５１は、本体側通信部２１およびサーバ側通信部４１と同様に、電波の送信および受信を行うためのアンテナを含む回路、および、ＬＡＮ接続を行うための回路等により構成されており、ビューワ制御部５４の下で、サーバ３とネットワークＮＷを介した通信を行う。
ビューワ４の表示制御部５２は、ビューワ制御部５４の制御の下で、サーバ３から受信した２次元超音波画像Ｕ、ボリュームレンダリング画像Ｘおよび放射線画像等に対して所定の処理を施してビューワ側モニタ５３に表示する。
ビューワ側モニタ５３は、表示制御部５２による制御の下で、種々の表示を行う。ビューワ側モニタ５３は、例えば、ＬＣＤおよび有機ＥＬディスプレイ等のディスプレイ装置を含む。
ビューワ４の入力装置５５は、ユーザが入力操作を行うためのものである。入力装置５５は、例えば、キーボード、マウス、トラックボール、タッチパッドおよびタッチパネル等により構成される。
以下では、図８に示すフローチャートを用いて本発明の実施の形態に係る超音波システム１の動作を説明する。この動作説明では、サーバ３のメモリ４３に、被検体の***において病変部の疑いがある関心領域を撮影した放射線画像が保存されており、その放射線画像に含まれる関心領域と同一の関心領域Ａ１を、例えば病院内において構築された超音波システム１を用いて検査する例を説明する。
まず、ステップＳ１において、本体制御部２９は、診断装置本体６の入力装置３０を介したユーザの入力操作等による、被検体に対する検査を開始する旨の指示を受け付ける。これにより、被検体に対する検査が開始される。この際に、本体制御部２９から、サーバ３のメモリ４３に保存されている放射線画像を診断装置本体６に送信する旨の指令が本体側通信部２１を介してサーバ３に送信され、サーバ３から診断装置本体６の本体側通信部２１に放射線画像が送信される。送信された放射線画像は、本体側通信部２１からメモリ２５に送出され、メモリ２５に保存される。
次に、ステップＳ２において、ユーザにより超音波プローブ５が被検体の体表に接触した状態で移動されながら、２次元超音波画像Ｕが撮影される。
この際に、送受信回路１２は、プローブ制御部１５の制御の下で、予め設定された音速値を用いて受信フォーカス処理を行って、音線信号を生成する。このようにして送受信回路１２により生成された音線信号は、診断装置本体６の本体側通信部２１に送信され、さらに、超音波画像生成部２２に送出される。超音波画像生成部２２は、本体側通信部２１から受信した音線信号を用いて図４に示すような２次元超音波画像Ｕを生成する。
続くステップＳ３において、超音波プローブ５に取り付けられた位置センサ１３により、ステップＳ２で２次元超音波画像Ｕが生成された際の超音波プローブ５の位置情報が取得される。
ステップＳ４において、本体制御部２９は、ステップＳ２で生成された２次元超音波画像ＵとステップＳ３で取得された超音波プローブ５の位置情報とを互いに関連付けて診断装置本体６のメモリ２５に保存する。
ステップＳ５において、２次元超音波画像Ｕの撮影が終了するか否かが判定される。例えば、診断装置本体６の入力装置３０を介したユーザの入力操作により、２次元超音波画像Ｕの撮影を終了する指示が入力された場合に、２次元超音波画像Ｕの撮影が終了すると判定され、２次元超音波画像Ｕの撮影を終了する指示が入力されない場合に、２次元超音波画像Ｕの撮影が続行されると判定される。
２次元超音波画像Ｕの撮影が続行されると判定されると、ステップＳ２に戻り、２次元超音波画像Ｕが新たに生成される。その後、ステップＳ３で超音波プローブ５の位置情報が取得され、ステップＳ４で２次元超音波画像Ｕと超音波プローブ５の位置情報がメモリ２５に保存され、ステップＳ５に進む。このようにして、２次元超音波画像Ｕの撮影が続行されると判定される限り、ステップＳ２～ステップＳ５の処理が繰り返される。
ステップＳ５において、２次元超音波画像Ｕの撮影が終了すると判定された場合には、ステップＳ６に進む。
ステップＳ６において、ＶＲ画像生成部２６は、ステップＳ２～ステップＳ５の繰り返しによりメモリ２５に保存された複数フレームの２次元超音波画像Ｕのそれぞれから、病変部の疑いがある関心領域Ａ１を自動的に抽出する。
次に、ステップＳ７において、ＶＲ画像生成部２６は、ステップＳ４で２次元超音波画像Ｕが生成される毎に２次元超音波画像Ｕに関連付けて保存された超音波プローブ５の位置情報を用いて、ステップＳ６で複数フレームの２次元超音波画像Ｕに対して抽出された関心領域Ａ１の位置合わせを行うことにより、図５に示すようなボリュームレンダリング画像Ｘを生成する。この際に、ＶＲ画像生成部２６は、例えば、複数フレームの２次元超音波画像Ｕにおける関心領域Ａ１の輪郭を抽出し、サーフェイスレンダリングの方法を用いることにより、ボリュームレンダリング画像Ｘを生成することができる。
このようにして、関心領域Ａ１のボリュームレンダリング画像Ｘが生成されるため、ユーザは、ボリュームレンダリング画像Ｘの形状を確認することにより、被検体の関心領域Ａ１の３次元的な形状を容易に把握することができる。
続くステップＳ８において、参照情報紐付け部２７は、ステップＳ７で生成されたボリュームレンダリング画像Ｘを、関心領域Ａ１に関する参照情報に紐付ける。この際に、参照情報紐付け部２７は、例えば、ボリュームレンダリング画像Ｘに対して、情報を格納するためのタグを生成し、ステップＳ７でボリュームレンダリング画像Ｘを生成する際に使用された複数フレームの２次元超音波画像Ｕのうち代表的な１フレームの２次元超音波画像Ｕの識別情報を、参照情報として、ボリュームレンダリング画像Ｘのタグに格納する。代表的な１フレームの２次元超音波画像Ｕは、例えば、ＶＲ画像生成部２６により選出され、参照情報紐付け部２７に送出される。
また、ＶＲ画像生成部２６は、ステップＳ１でメモリ２５に保存された放射線画像の識別情報を、参照情報として、ボリュームレンダリング画像Ｘのタグに格納する。
参照情報に紐付けられたボリュームレンダリング画像Ｘは、本体側通信部２１からネットワークＮＷを経由してサーバ３のサーバ側通信部４１へと送信される。
このように、ボリュームレンダリング画像Ｘは、サーバ３内で生成されず、診断装置本体６内で生成さるため、診断装置本体６内で生成された１枚のボリュームレンダリング画像Ｘをサーバ３に送信すればよく、例えば、サーバ３に複数フレームの２次元超音波画像Ｕを送信する必要が無い。そのため、例えばサーバ３に複数フレームの２次元超音波画像Ｕを送信した後でボリュームレンダリング画像Ｘが生成される場合と比較して、サーバ３がより迅速にボリュームレンダリング画像Ｘを取得することができ、ユーザは、サーバ３を用いてより円滑に被検体の関心領域Ａ１の診断を行うことが可能である。
また、サーバ３のメモリ４３に複数フレームの２次元超音波画像Ｕを保存する必要がなく、その代わりに、メモリ４３に１枚のボリュームレンダリング画像Ｘが保存されるため、サーバ３上に保存されるデータ量の増大を抑制することができる。
次に、ステップＳ９において、サーバ３のデータベース管理部４２は、ネットワークＮＷを経由してサーバ側通信部４１に送信されたボリュームレンダリング画像Ｘのタグに格納されている参照情報に基づいて、ボリュームレンダリング画像Ｘと、そのタグに紐付いた２次元超音波画像Ｕおよび放射線画像を相互に関連付けて、これらの画像データの間の関係をデータベース化する。このようにして相互関係がデータベース化された画像データは、サーバ３のメモリ４３に保存される。
続いて、ステップＳ１０において、例えば、ビューワ４の入力装置５５を介した医師等のユーザの入力操作により、サーバ３に保存されている２次元超音波画像Ｕを閲覧する旨の指令が入力されると、２次元超音波画像Ｕの送信を要求する旨の情報がビューワ４からサーバ３に送信され、ステップＳ９でサーバ３のメモリ４３に保存された２次元超音波画像Ｕがサーバ側通信部４１からビューワ４に送信され、ビューワ側通信部５１により受信された２次元超音波画像Ｕがビューワ側モニタ５３に表示される。
ビューワ側モニタ５３に表示される２次元超音波画像Ｕは、図４に示されるように、関心領域Ａ１を含んでいる。
続くステップＳ１１において、ビューワ制御部５４は、ビューワ側モニタ５３に表示された２次元超音波画像Ｕにおける関心領域Ａ１がユーザによって指定されたか否かを判定する。関心領域Ａ１がユーザによって指定されていないと判定された場合には、ステップＳ１１に戻る。一方、関心領域Ａ１がユーザによって指定されたと判定された場合には、ステップＳ１２に進む。
ステップＳ１２において、ビューワ側モニタ５３に表示されている２次元超音波画像Ｕに関連付けられたボリュームレンダリング画像Ｘが、図９に示すように、２次元超音波画像Ｕの近傍に表示される。
この際に、ビューワ側モニタ５３に表示されている２次元超音波画像Ｕに関連付けられたボリュームレンダリング画像Ｘを送信する旨の指令がビューワ制御部５４からビューワ側通信部５１を介してサーバ３に送信される。サーバ制御部４４は、ビューワ４から受信した指令に基づいて、ビューワ側モニタ５３に表示されている２次元超音波画像Ｕに紐付けられたボリュームレンダリング画像Ｘをメモリ４３から読み出して、サーバ側通信部４１からビューワ４に送信する。このボリュームレンダリング画像Ｘは、ビューワ側通信部５１に受信されて、表示制御部５２に送出され、ビューワ側モニタ５３に表示される。
これにより、ユーザは、２次元超音波画像Ｕ上の関心領域Ａ１が示す被検体の病変部の疑いがある箇所について３次元的な形状を容易に把握することができる。
このようにしてステップＳ１２が完了すると、図８のフローチャートにしたがう超音波システム１の動作が終了する。
以上のように、本発明の実施の形態に係る超音波システム１によれば、複数フレームの２次元超音波画像Ｕに基づいて関心領域Ａ１のボリュームレンダリング画像Ｘが生成されるため、ユーザに対して被検体における病変部の疑いがある関心領域Ａ１の３次元的な形状を容易に把握させ、関心領域Ａ１に対する診断精度を向上させることができる。
また、診断装置本体６内で生成されたボリュームレンダリング画像Ｘが関心領域Ａ１に関する参照情報に紐付けられ、参照情報に紐付けられたボリュームレンダリング画像Ｘがサーバ３に送信されて、サーバ３のメモリ４３に保存されるため、例えばサーバ３に複数フレームの２次元超音波画像Ｕが送信され、サーバ３内でボリュームレンダリング画像Ｘが生成される場合と比較して、サーバ３がより迅速にボリュームレンダリング画像Ｘを取得できるため、ユーザは、サーバ３を使用してより円滑に被検体の関心領域Ａ１の診断を行うことができる。
また、メモリ４３に複数フレームの２次元超音波画像Ｕを保存する必要が無く、その代わりに、メモリ４３に１枚のボリュームレンダリング画像Ｘが保存されるため、サーバ３上に保存されるデータ量の増大を抑制することができる。
なお、超音波システム１において、超音波画像生成部２２は、診断装置本体６に備えられているが、診断装置本体６に備えられる代わりに超音波プローブ５に備えられていてもよい。
また、超音波プローブ５と診断装置本体６が有線通信により互いに接続されることが説明されているが、超音波プローブ５と診断装置本体６は、無線通信により互いに接続されることもできる。
また、診断装置本体６は、１つのメモリ２５を備えているが、例えば、用途に応じて複数のメモリを備えることができる。
また、サーバ３も同様にして、１つのメモリ４３の代わりに複数のメモリを備えることができる。
また、サーバ３とビューワ４は、互いに独立して存在し、ネットワークＮＷを介して接続されることが説明されているが、一体的に構成されることもできる。
また、図８のフローチャートを用いた超音波システム１の動作説明では、超音波システム１が病院内において構築される例が説明されているが、超音波診断装置２、サーバ３およびビューワ４のいずれかが、他の病院等の離れた施設等に設置されていてもよい。
また、ステップＳ１において被検体に対する検査が開始された際に、サーバ３に保存された放射線画像が診断装置本体６に送信されることが説明されているが、図示しない放射線診断装置から診断装置本体６に放射線画像が送信され、この放射線画像がメモリ２５に保存されることもできる。
また、ステップＳ２において、ユーザにより、超音波プローブ５が被検体の体表上に接触した状態で移動されることが説明されているが、検査対象の関心領域Ａ１が十分に小さい場合には、超音波プローブ５の位置を固定したまま、いわゆる電子スキャン等により、関心領域Ａ１が写る複数フレームの２次元超音波画像Ｕを撮影することもできる。このように、超音波プローブ５の位置を固定したままの状態で被検体の検査が完了できる場合には、超音波プローブ５の位置情報を使用しなくてよいため、超音波プローブ５は、位置センサ１３を備えていなくてもよい。
また、ステップＳ２において２次元超音波画像Ｕが生成され、ステップＳ３において超音波プローブ５の位置情報が取得されているが、ステップＳ３の後にステップＳ２が行われることができ、ステップＳ２とステップＳ３が同時に行われることもできる。
また、ステップＳ６において、ＶＲ画像生成部２６が、複数フレームの２次元超音波画像Ｕのそれぞれに対して関心領域Ａ１を自動的に抽出することが説明されているが、関心領域Ａ１を指定する方法は、これに限定されない。例えば、関心領域Ａ１は、入力装置３０を介したユーザの入力操作に基づいて指定されることもできる。
また、ステップＳ６において、１つの超音波画像Ｕ内に複数の関心領域Ａ１が抽出される場合がある。この場合には、例えば、ステップＳ６において、複数フレームの２次元超音波画像Ｕのいずれかで複数の関心領域Ａ１が抽出されたことをトリガとして、複数の関心領域Ａ１を含む２次元超音波画像Ｕが本体側モニタ２４に表示され、診断装置本体６の入力装置３０を介してユーザにより、複数の関心領域Ａ１のうちの１つが選択される。さらに、ユーザに選択された関心領域Ａ１の情報が本体制御部２９を介してＶＲ画像生成部２６に送出され、ＶＲ画像生成部２６により、ユーザが選択した関心領域Ａ１と同一の関心領域Ａ１の抽出が、複数フレームの２次元超音波画像Ｕに対して行われる。
その後のステップＳ７において、ビューワ４側でユーザにより選択された関心領域Ａ１のボリュームレンダリング画像Ｘが生成され、ステップＳ８でそのボリュームレンダリング画像Ｘのタグに参照情報が格納される。この参照情報には、２次元超音波画像Ｕにおける、ユーザにより選択された関心領域Ａ１の座標の情報が含まれる。ユーザにより選択された関心領域Ａ１の座標の情報を含む参照情報とボリュームレンダリング画像Ｘとの関係は、ステップＳ９においてデータベース化され、サーバ３のメモリ４３に保存される。
この状態でステップＳ１０においてビューワ側モニタ５３に２次元超音波画像Ｕが表示され、ステップＳ１１において、ステップＳ６でユーザが選択した関心領域Ａ１と同一の関心領域Ａ１が選択されると、その座標の情報に紐付けられたボリュームレンダリング画像Ｘが２次元超音波画像Ｕに重畳してビューワ側モニタ５３に表示される。
また、被検体の***の放射線画像が撮影される場合には、通常、病変部の疑いがある関心領域Ａ２に対して、例えば、いわゆるＣＣ（Cranio Caudal：頭尾）方向とＭＬＯ（Medio Lateral Oblique：内外斜位）方向等の、互いに異なる２方向においてそれぞれ放射線画像の撮影が行われることが多い。この場合に、サーバ３のメモリ４３には、互いに異なる２方向から撮影された２つの放射線画像が保存される。さらに、診断装置本体６の参照情報紐付け部２７は、サーバ３のメモリ４３に保存された２つの放射線画像の識別情報を、参照情報として、ボリュームレンダリング画像Ｘのタグに格納することができる。
また、被検体の***の２次元超音波画像Ｕが撮影される場合には、通常、病変部の疑いがある関心領域Ａ１に対して互いに直交する２つの断層面が撮影され、これらの２つの２次元超音波画像Ｕが被検体の診断の際に参照されることが多い。そこで、例えば、ＶＲ画像生成部２６は、ステップＳ８において、診断装置本体６のメモリ２５に保存されている複数フレームの２次元超音波画像Ｕのうち、代表的な１フレームの２次元超音波画像Ｕを選出し、その２次元超音波画像Ｕが表す断層面に直交する断層面を表す２次元超音波画像Ｕを、複数フレームの２次元超音波画像Ｕと超音波プローブ５の位置情報に基づいて生成し、これらの２フレームの２次元超音波画像Ｕを参照情報紐付け部２７に送出することができる。
この場合に、参照情報紐付け部２７は、２つの異なる方向に沿った断層面を表す２フレームの２次元超音波画像Ｕの識別情報を、ボリュームレンダリング画像Ｘのタグに格納することができる。また、これらの２フレームの２次元超音波画像Ｕは、本体側通信部２１からネットワークＮＷを経由してサーバ３に送信され、データベース管理部４２によりボリュームレンダリング画像Ｘと相互に関連付けられた後で、サーバ３のメモリ４３に保存される。
また、ステップＳ１１で、ビューワ側モニタ５３に表示された２次元超音波画像Ｕ上の関心領域Ａ１がユーザにより指定されたと判定された場合に、ステップＳ１２において、図９に示すように、２次元超音波画像Ｕ上の関心領域Ａ１の近傍にボリュームレンダリング画像Ｘを表示させることが説明されているが、さらに、ボリュームレンダリング画像Ｘに紐付けられた他の情報をビューワ側モニタ５３に表示させることもできる。
例えば、図１０に示すように、ボリュームレンダリング画像Ｘに加えて、そのボリュームレンダリング画像Ｘに紐付けられた放射線画像Ｒがビューワ側モニタ５３に表示されることもできる。図１０に示す例では、放射線画像Ｒは、２次元超音波画像Ｕにおける関心領域Ａ１に対応する関心領域Ａ２を含んでいる。
また、例えば、ボリュームレンダリング画像Ｘに紐付けられた２次元超音波画像Ｕが撮影された際の超音波プローブ５の位置情報に基づいて、いわゆるシェーマＳと、シェーマＳ上に配置されたプローブマークＰがビューワ側モニタ５３に表示されてもよい。図１０の例では、被検体の***を模式的に表すシェーマＳが２次元超音波画像Ｕに重畳して表示されている。
また、図１１に示すように、２次元超音波画像Ｕの代わりに放射線画像Ｒをビューワ側モニタ５３に表示し、放射線画像Ｒにおける関心領域Ａ２が、ビューワ４の入力装置５５を介してユーザにより選択されたことをトリガとして、放射線画像Ｒに紐付けられたボリュームレンダリング画像Ｘを、放射線画像Ｒに重畳してビューワ側モニタ５３に表示することもできる。
この場合に、ビューワ４を操作するユーザは、放射線画像Ｒにおける関心領域Ａ２の３次元的な形状を容易に把握できるため、関心領域Ａ２に対する診断の精度を向上させることができる。
１ 超音波システム、２ 超音波診断装置、３ サーバ、４ ビューワ、５ 超音波プローブ、６ 診断装置本体、１１ 振動子アレイ、１２ 送受信回路、１３ 位置センサ、１６ パルサ、１７ 増幅部、１８ ＡＤ変換部、１９ ビームフォーマ、２１ 本体側通信部、２２ 超音波画像生成部、２３，５２ 表示制御部、２４ 本体側モニタ、２５，４３ メモリ、２６ ＶＲ画像生成部、２７ 参照情報紐付け部、２９ 本体制御部、３０，５５ 入力装置、３１ 本体側プロセッサ、３２ 信号処理部、３３ ＤＳＣ、３４ 画像処理部、４１ サーバ側通信部、４２ データベース管理部、４４ サーバ制御部、５２ ビューワ側通信部、５３ ビューワ側モニタ、５４ ビューワ制御部、Ａ１，Ａ２ 関心領域、ＮＷ ネットワーク、Ｐ プローブマーク、Ｒ 放射線画像、Ｓ シェーマ、Ｕ ２次元超音波画像、Ｘ ボリュームレンダリング画像。

Claims (13)

  1. 超音波プローブと、
    被検体に対し前記超音波プローブを用いて超音波ビームの送受信を行うことにより、それぞれ前記被検体の***の関心領域が撮影された複数フレームの２次元超音波画像を生成する画像生成部と、
    前記複数フレームの２次元超音波画像に基づいて前記関心領域を含むボリュームレンダリング画像を生成するボリュームレンダリング画像生成部と、
    前記関心領域が撮像された放射線画像の識別情報を前記関心領域に関する参照情報として前記ボリュームレンダリング画像のタグに格納する参照情報紐付け部と
    を備える超音波システム。
  2. 前記放射線画像は、前記関心領域を互いに異なる２方向から撮影した２つの放射線画像を含み、
    前記参照情報紐付け部は、前記２つの放射線画像のそれぞれの識別情報を、前記参照情報として前記ボリュームレンダリング画像のタグに格納する請求項１に記載の超音波システム。
  3. 超音波プローブと、
    被検体に対し前記超音波プローブを用いて超音波ビームの送受信を行うことにより、それぞれ前記被検体の***の関心領域が撮影された複数フレームの２次元超音波画像を生成する画像生成部と、
    前記複数フレームの２次元超音波画像に基づいて前記関心領域を含むボリュームレンダリング画像を生成するボリュームレンダリング画像生成部と、
    前記関心領域が撮像された他の２次元超音波画像の識別情報を前記関心領域に関する参照情報として前記ボリュームレンダリング画像のタグに格納する参照情報紐付け部と
    を備える超音波システム。
  4. 前記他の２次元超音波画像は、前記関心領域に対して互いに直交する２つの断層面が撮像された２つの２次元超音波画像を含み、
    前記参照情報紐付け部は、前記２つの２次元超音波画像のそれぞれの識別情報を、前記参照情報として前記ボリュームレンダリング画像のタグに格納する請求項３に記載の超音波システム。
  5. 超音波診断装置と、
    前記超音波診断装置に接続されたサーバと
    を備え、
    前記超音波診断装置は、前記超音波プローブ、前記画像生成部、前記ボリュームレンダリング画像生成部および前記参照情報紐付け部と、前記参照情報に紐付けられた前記ボリュームレンダリング画像を前記サーバに送信する通信部とを有する請求項１～４のいずれか一項に記載の超音波システム。
  6. 超音波診断装置と、
    前記超音波診断装置に接続されたサーバと
    を備え、
    前記超音波診断装置は、
    超音波プローブと、
    被検体に対し前記超音波プローブを用いて超音波ビームの送受信を行うことにより、それぞれ前記被検体の***の関心領域が撮影された複数フレームの２次元超音波画像を生成する画像生成部と、
    前記複数フレームの２次元超音波画像に基づいて前記関心領域を含むボリュームレンダリング画像を生成するボリュームレンダリング画像生成部と、
    前記ボリュームレンダリング画像を、前記関心領域に関する参照情報に紐付ける参照情報紐付け部と、
    前記参照情報に紐付けられた前記ボリュームレンダリング画像を前記サーバに送信する通信部と
    を有する超音波システム。
  7. 前記サーバに接続されたビューワを備え、
    前記ビューワは、
    ユーザが入力操作を行う入力装置と
    前記関心領域が撮像された放射線画像または前記２次元超音波画像を表示するモニタと
    を有し、
    前記モニタに表示された前記放射線画像または前記２次元超音波画像の前記関心領域が前記ユーザにより前記入力装置を介して指定された場合に、前記関心領域を含む前記ボリュームレンダリング画像が前記モニタに表示される請求項５または６に記載の超音波システム。
  8. 前記モニタに表示された前記放射線画像または前記２次元超音波画像の前記関心領域が前記ユーザにより前記入力装置を介して指定された場合に、それぞれ前記関心領域が撮像された前記放射線画像と前記２次元超音波画像と前記ボリュームレンダリング画像が前記モニタに表示される請求項７に記載の超音波システム。
  9. 前記ボリュームレンダリング画像生成部は、サーフェイスレンダリングを利用して前記ボリュームレンダリング画像を生成する請求項１～８のいずれか一項に記載の超音波システム。
  10. 前記ボリュームレンダリング画像を保存する画像メモリを備える請求項１～９のいずれか一項に記載の超音波システム。
  11. 被検体に対し超音波プローブを用いて超音波ビームの送受信を行うことにより、それぞれ前記被検体の***の関心領域が撮影された複数フレームの２次元超音波画像を生成し、
    前記複数フレームの２次元超音波画像に基づいて前記関心領域を含むボリュームレンダリング画像を生成し、
    前記関心領域が撮像された放射線画像の識別情報を前記関心領域に関する参照情報として前記ボリュームレンダリング画像のタグに格納する
    超音波システムの制御方法。
  12. 被検体に対し超音波プローブを用いて超音波ビームの送受信を行うことにより、それぞれ前記被検体の***の関心領域が撮影された複数フレームの２次元超音波画像を生成し、
    前記複数フレームの２次元超音波画像に基づいて前記関心領域を含むボリュームレンダリング画像を生成し、
    前記関心領域が撮像された他の２次元超音波画像の識別情報を前記関心領域に関する参照情報として前記ボリュームレンダリング画像のタグに格納する
    超音波システムの制御方法。
  13. 超音波診断装置と、前記超音波診断装置に接続されたサーバとを備える超音波システムの制御方法であって、
    前記超音波診断装置において、
    被検体に対し超音波プローブを用いて超音波ビームの送受信を行うことにより、それぞれ前記被検体の***の関心領域が撮影された複数フレームの２次元超音波画像を生成し、
    前記複数フレームの２次元超音波画像に基づいて前記関心領域を含むボリュームレンダリング画像を生成し、
    前記ボリュームレンダリング画像を、前記関心領域に関する参照情報に紐付け、
    前記参照情報に紐付けられた前記ボリュームレンダリング画像を前記サーバに送信する
    超音波システムの制御方法。
JP2022551229A 2020-09-24 2021-09-01 超音波システムおよび超音波システムの制御方法 Active JP7453400B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2020160122 2020-09-24
JP2020160122 2020-09-24
PCT/JP2021/032082 WO2022064981A1 (ja) 2020-09-24 2021-09-01 超音波システムおよび超音波システムの制御方法

Publications (2)

Publication Number Publication Date
JPWO2022064981A1 JPWO2022064981A1 (ja) 2022-03-31
JP7453400B2 true JP7453400B2 (ja) 2024-03-19

Family

ID=80846456

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022551229A Active JP7453400B2 (ja) 2020-09-24 2021-09-01 超音波システムおよび超音波システムの制御方法

Country Status (4)

Country Link
US (1) US20230200776A1 (ja)
EP (1) EP4218602A4 (ja)
JP (1) JP7453400B2 (ja)
WO (1) WO2022064981A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005245503A (ja) 2004-03-01 2005-09-15 Toshiba Corp 超音波診断装置、画像表示装置及び画像表示方法
JP2011092685A (ja) 2009-09-30 2011-05-12 Fujifilm Corp 診断支援システム、診断支援プログラムおよび診断支援方法
JP2014036885A (ja) 2013-10-24 2014-02-27 Canon Inc 画像診断装置、画像診断方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120256920A1 (en) * 2011-04-05 2012-10-11 Julian Marshall System and Method for Fusing Computer Assisted Detection in a Multi-Modality, Multi-Dimensional Breast Imaging Environment
WO2012161088A1 (ja) * 2011-05-26 2012-11-29 株式会社東芝 超音波診断装置
JP6081093B2 (ja) 2012-07-09 2017-02-15 東芝メディカルシステムズ株式会社 画像表示装置
JP6849462B2 (ja) * 2017-02-06 2021-03-24 キヤノンメディカルシステムズ株式会社 医用情報処理システム及び医用画像処理装置
JP7431729B2 (ja) * 2017-11-08 2024-02-15 コーニンクレッカ フィリップス エヌ ヴェ 超音波胸部画像と他の撮像モダリティの胸部画像とを相関させる超音波システム及び方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005245503A (ja) 2004-03-01 2005-09-15 Toshiba Corp 超音波診断装置、画像表示装置及び画像表示方法
JP2011092685A (ja) 2009-09-30 2011-05-12 Fujifilm Corp 診断支援システム、診断支援プログラムおよび診断支援方法
JP2014036885A (ja) 2013-10-24 2014-02-27 Canon Inc 画像診断装置、画像診断方法

Also Published As

Publication number Publication date
EP4218602A4 (en) 2024-03-20
EP4218602A1 (en) 2023-08-02
WO2022064981A1 (ja) 2022-03-31
JPWO2022064981A1 (ja) 2022-03-31
US20230200776A1 (en) 2023-06-29

Similar Documents

Publication Publication Date Title
JP7259052B2 (ja) 超音波診断装置および超音波診断装置の制御方法
US20210219960A1 (en) Ultrasound diagnostic apparatus and control method of ultrasound diagnostic apparatus
JPWO2018051578A1 (ja) 超音波診断装置及び超音波診断装置の制御方法
JP2023026610A (ja) 超音波診断装置および超音波診断装置の制御方法
US11116481B2 (en) Ultrasound diagnostic apparatus and control method of ultrasound diagnostic apparatus
JP7453400B2 (ja) 超音波システムおよび超音波システムの制御方法
JP7411109B2 (ja) 超音波診断装置および超音波診断装置の制御方法
US20230200783A1 (en) Ultrasound system and control method of ultrasound system
EP4218603A1 (en) Ultrasonic diagnostic device and method for controlling ultrasonic diagnostic device
JP7465988B2 (ja) 超音波システムおよび超音波システムの制御方法
JP7301231B2 (ja) 超音波診断装置、超音波診断装置の制御方法および超音波診断装置用プロセッサ
US20230404538A1 (en) Ultrasound diagnostic apparatus and control method of ultrasound diagnostic apparatus
US20230157670A1 (en) Ultrasound diagnostic apparatus and control method of ultrasound diagnostic apparatus
EP4309586A1 (en) Ultrasonic diagnostic device and method for controlling ultrasonic diagnostic device
US20230186468A1 (en) Ultrasound diagnostic apparatus and control method of ultrasound diagnostic apparatus
US20230414197A1 (en) Ultrasound diagnostic apparatus and control method of ultrasound diagnostic apparatus
US20230414203A1 (en) Image display apparatus and control method of image display apparatus
JP2023141907A (ja) 超音波診断システムおよび超音波診断システムの制御方法
JP2023175251A (ja) 超音波診断装置および超音波診断装置の制御方法
JP2024006678A (ja) 超音波診断装置および超音波診断装置の制御方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230313

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231205

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240125

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240220

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240307

R150 Certificate of patent or registration of utility model

Ref document number: 7453400

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150