JP6367261B2 - 知識ベース超音波画像強調 - Google Patents

知識ベース超音波画像強調 Download PDF

Info

Publication number
JP6367261B2
JP6367261B2 JP2016102512A JP2016102512A JP6367261B2 JP 6367261 B2 JP6367261 B2 JP 6367261B2 JP 2016102512 A JP2016102512 A JP 2016102512A JP 2016102512 A JP2016102512 A JP 2016102512A JP 6367261 B2 JP6367261 B2 JP 6367261B2
Authority
JP
Japan
Prior art keywords
ultrasound
data
image
artifact
processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016102512A
Other languages
English (en)
Other versions
JP2016221264A5 (ja
JP2016221264A (ja
Inventor
ラオ ビムバ
ラオ ビムバ
ハウル ヘレーネ
ハウル ヘレーネ
ジョルジェスク ボグダン
ジョルジェスク ボグダン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens Corp
Siemens Medical Solutions USA Inc
Original Assignee
Siemens Corp
Siemens Medical Solutions USA Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens Corp, Siemens Medical Solutions USA Inc filed Critical Siemens Corp
Publication of JP2016221264A publication Critical patent/JP2016221264A/ja
Publication of JP2016221264A5 publication Critical patent/JP2016221264A5/ja
Application granted granted Critical
Publication of JP6367261B2 publication Critical patent/JP6367261B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/80Geometric correction
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0891Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of blood vessels
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/13Tomography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5207Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of raw data to produce diagnostic data, e.g. for generating an image
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5269Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving detection or reduction of artifacts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/60Image enhancement or restoration using machine learning, e.g. neural networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/77Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
    • G06V10/774Generating sets of training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10132Ultrasound image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20004Adaptive image processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20004Adaptive image processing
    • G06T2207/20012Locally adaptive
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20076Probabilistic image processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20192Edge enhancement; Edge preservation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Surgery (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Pathology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Vascular Medicine (AREA)
  • Data Mining & Analysis (AREA)
  • Computing Systems (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Quality & Reliability (AREA)

Description

本実施形態は、医用診断超音波イメージングに関する。詳細には、超音波イメージングが画質強調される。
従来の画像強調アルゴリズムは、超音波画像を完成させる能力が制限されている。画像強調は、画像に表現された解剖学と病理学に関する予備的知識なしに行われる。低域フィルタなどの基本的な画像処理技術は、スペックルノイズを減少させるが、解剖学的構造をぼかす。
多くの場合、イメージングアーティファクトは、解剖学的構造又は組織と同じ又は類似の特性を有し、したがって、画像処理アルゴリズムにしたがって検出できずまた有効にセグメント化できない。画像処理は、アーティファクトを更に強調することがある。エッジ強調に使用される高域フィルタは、スペックルノイズを強調する。より複雑な技法は、勾配、分散、又は単純な振幅ベースの画像セグメント化などの標準画像分析に依存して画像の様々な部分を選択的に処理する。これらの技法は、より単純な画像を処理するが、アーティファクト(例えば、クラッタ、サイドローブ、格子ローブ又はリブシャドー)を有する画像又は類似の特性を有する他の解剖的組織は、複雑な技法が必要とされ対応できないことがある。例えば、勾配エッジ検出は、フィルタリング又は強調のために必要とされる解剖学的組織のエッジを見つけるが、アーティファクトをエッジとして処理し、強調すべきでない画像の部分を強調することがある。
前置きとして、後述する好ましい実施形態は、医用超音波診断法における画像強調のための方法、コンピュータ可読媒体、命令及びシステムを含む。解剖学的組織又はアーティファクトの知識ベース検出は、強調される位置を識別する(例えば、任意の他の方法で増強、抑制、又は処理される)。位置の知識ベース検出は、他の解剖学的組織又はアーティファクトの識別を回避することがある。画像強調は、識別された位置に適用され、他の位置には適用されない。
第1の態様で、医用超音波診断法における画像強調のための方法が提供される。超音波システムは、患者の組織の走査からの超音波画像データを取得する。超音波画像データは、組織の空間位置を表す。超音波システムのプロセッサは、機械学習クラシファイヤを超音波画像データに適用する。機械学習クラシファイヤは、超音波画像データにおける超音波システムのイメージングアーティファクトの位置を出力する。超音波画像データは、他の位置ではなくイメージングアーティファクトの位置で変更される。患者の組織の超音波画像は、変更された超音波画像データから表示される。
第2の態様では、持続性コンピュータ可読記憶媒体には、医用超音波診断において画像強調のプログラムプロセッサによって実行可能な命令を表すデータが記憶される。記憶媒体は、超音波スキャナから、患者を表す検出超音波データを受け取る命令と、検出超音波データによって表わされた位置を、知識ベースによって分類する命令と、検出した超音波データを位置の分類の関数として強調する命令であって、強調する命令が全ての位置の表現を維持しながら他の位置に対する位置の幾つかの超音波データの振幅を変化させる命令と、強調した超音波データからの画像を生成する命令とを含む。
第3の態様では、医用超音波診断法における画像強調のためのシステムが提供される。受信ビームフォーマは、患者の部位を表す超音波データを取得するように構成される。Bモード検出器、ドップラー推定器又はこれらの両方が、超音波データから検出されたデータを出力するように構成される。プロセッサは、検出データからの入力特徴を抽出し、検出データからのアーティファクトを知識ベースの関数として識別し、検出データをアーティファクトの関数として画像処理するように構成される。ディスプレイは、画像処理された検出データに基づいた部位の画像を表示するように構成される。
本発明の更なる態様及び利点は、好ましい実施形態と共に以下に述べる。本発明は、特許請求の範囲の記載によって規定され、この節はそのような特許請求の範囲の限定と解釈されるべきでない。
構成要素と図は、必ずしも一律の縮尺ではなく、むしろ本発明の原理を示すために強調されている。更に、図では、様々な図全体にわたって、類似の参照数字は対応する部分を指す。
医用超音波診断法における画像強調のための方法の一実施形態のフローチャートである。 格子ローブアーティファクトを含む心臓の例示的画像である。 画像処理による格子ローブを除去又は低減するために強調された図2の心臓の画像の例である。 血液との自然発生的コントラストを有する心臓の例示的な画像である。 血液との自然発生的コントラストを除去又は低減するために強調された図4の心臓の例示的画像である。 医用超音波診断法における画像強調のためのシステムの一実施形態のブロック図である。
超音波画像の知識ベース強調が提供される。知識ベース特徴検出技術は、超音波画像内の解剖学的構造物又はアーティファクトを、他の物体を検出することなく首尾よく検出することができる。そのような検出技術は、より洗練された画像処理又は強調アルゴリズムを改善し作成するために利用される。取得後画像強調は、知識ベース検出の適用による恩恵を受ける。既に取得された画像データは、特に検出された解剖学的組織又はアーティファクトに局所化された画像処理によって変更されることがある。
一実施形態では、強調イメージングのためにイメージングアーティファクトが識別される。知識は、知識データベースにおけるアーティファクトのエキスパートユーザ注釈として取得される。この知識は、アーティファクト検出及び最小化を大幅に改善する。格子ローブ、リブ反射からのサイドローブ、リブシャドー、他のシャドー又は自然発生的コントラストなどのアーティファクトを検出する知識ベース検出アルゴリズムを使用することによって、集中的な画像強調が提供される。知識ベースアルゴリズムの出力は、取得されたアーティファクトを除去する画像処理の改善に使用される。
図1は、医用超音波診断法における画像強調方法の一実施形態を示す。この実施形態は、知識ベース検出を使用する解剖学的組織又はアーティファクトの検出を対象とする。解剖学的組織又はアーティファクトの位置をより正確に識別するために、エキスパート注釈が付けられた例の集まりが使用される。既に取得されたデータからのイメージングは、識別した位置を他の位置と違うように処理することによって強調される。画像強調は、知識ベースと共に提供される検出によって改善される。
追加の動作、異なる動作、又は少ない数の動作が提供されてもよい。例えば、動作16及び18は提供されない。別の例として、超音波走査を活動化しかつ/又は構成するための動作が提供される。動作は、知識ベースの適用を対象とする。知識ベースを作成しそれから学習するための動作は、代替又は追加の実施形態で提供されてもよい。動作は、示された順序で行われてもよく別の順序で行なわれてもよい。
動作12で、超音波システムは、患者の組織の走査からの超音波データを取得する。超音波データは、患者を表現する。医用超音波診断システムは、トランスデューサに電気信号を印加し、トランスデューサは、患者の部位を走査するために電気エネルギーを音響エネルギーに変換する。エコーが、走査の受信動作のためにトランスデューサの素子によって受け取られ電気信号に変換される。任意の走査タイプ、走査形式又はイメージングモードが使用されうる。例えば、造影剤を追加した場合と、しない場合の高調波イメージングが使用される。別の例として、Bモード、カラーフローモード、スペクトルドップラーモード、Mモード又は他のイメージングモードが使用される。
解剖学的情報を表す超音波データが、患者から取得される。超音波データは、患者の点、線、部位又はボリュームを表現する。超音波周波数の波形が送信され、エコーが受信される。音響エコーは、電気信号に変換され、患者の部位内のサンプリング位置を表すようにビーム形成される。
ビーム形成されたデータは、フィルタリングされるか他の方法で処理されうる。一実施形態では、超音波データは、組織構造を表すBモードデータである。ビーム形成データが検出され、例えば、強度(例えば、Bモード又は後方散乱出力又は強度)が決定される。別の実施形態では、超音波データは、血管、流量又は組織運動と関連付けられた位置の流量データ又は運動データである。同一位置からの一連のエコー信号は、速度、分散及び/又はエネルギーを検出として推定するために使用されてもよい。送信波形の1つ以上の高調波のエコーが、処理されてもよい。検出された値は、フィルタリングされ及び/又は表示形式に走査変換されることがある。患者を表す超音波データは、空間及び/又は時間フィルタリング前の検出データ、走査変換前のフィルタデータ、表示マッピング前の走査変換データ、又はディスプレイに出力する前又は後の表示マップ画像データなどの検出後データである。
超音波イメージングシステムは、患者を表す検出された超音波データを提供するスキャナである。超音波システムは、検出器からの出力として、Bモードデータの受信など、検出された超音波データを受け取る。スキャナのプロセッサ又はスキャナの一部ではないリモートプロセッサが、知識ベース検出のための検出超音波データを受け取る。
動作14で、知識ベースを使用して、受け取った超音波データにおける位置を分類する。クラシファイヤは、データによって表わされた各位置に適用されるか、様々な位置を区別するために適用される。プロセッサは、超音波データによって表わされた様々な位置がクラスに属するかどうかを分類する。各位置を3つ以上のクラス(例えば、(1)背景、アーティファクト及び解剖学的組織、(2)液体、骨及び組織、又は(3)対象器官、他の器官及び非限定的な器官)のうちの1つの要素として分類するために、バイナリクラシファイヤ以外のクラシファイヤが使用されてもよい。様々な位置が、異なるクラスに属する。幾つかの位置が、同一クラスに属することがある。クラシファイヤは、特定の解剖学的組織の位置の検出や特定のアーティファクトの位置の検出など、クラスの要素がどの位置かを検出する。
プロセッサは、知識ベースで分類する。知識ベースは、グランドトゥルースのラベルが付けられた超音波データセットを含む。エキスパートは、超音波画像を、クラスとクラスを含む位置とを含むか含まないように注釈付けする。例えば、アーティファクトの位置を示すために、アーティファクトを有する数十、数百又は数千のBモード画像に注釈付けされる。アーティファクトのない別の組の画像が提供されてもよい。別の例として、画像のデータベースに1つ以上の解剖学的構造のラベルが付けられる。画像のデータベースは、画像を分析し、対応する構造、特徴及び/又はアーティファクトの注釈を画像に付けるエキスパートユーザによって作成される。
知識ベースで分類するため、1つ以上のデータベース画像が識別され使用されて、現在画像の構造が分類の一部として検出される。識別されたデータベース画像は、対象解剖学的構造の形状又は位置を決定するためにも使用される。
プロセッサは、動作12で受け取った超音波データと最も又は十分に類似した画像を知識ベースから見つけることによって、知識ベースを分類に使用する。相互相関、絶対差の最小和、他の相関関係、又は他の類似性の大きさが使用されてもよい。超音波データのカレントフレームからの位置を知識ベースの画像に関連付けるために、スケーリング及び/又は空間変換が適用されてもよい。得られた知識ベース画像は、解剖学的組織又はアーティファクトの位置を示すために注釈付けされる。それに応じて、超音波データのカレントフレームがラベル付けされる(即ち、対応する位置が、解剖学的組織又はアーティファクトと識別される)。他の知識ベース分類が使用されてもよい。
別の実施形態では、プロセッサは、機械学習クラシファイヤを適用することによって知識ベースを使用する。機械学習クラシファイヤは、注釈付けされた画像のデータベースから学習される。注釈付けされるかグランドトゥルースラベル付けされた画像が、トレーニングデータとして使用される。プロセッサは、知識ベースの画像から抽出されたグランドトゥルースと特徴に基づいて分類を学習する。1つ以上の様々な機械学習プロセスによって、クラシファイヤは、解剖学的組織及び/又はアーティファクトの位置を検出するようにトレーニングされる。
トレーニングと適用に任意の特徴が使用されてもよい。各位置の画像データから、ハールウェーブレット、操縦可能な特徴、方向特徴、機械学習特徴、及び/又はパターンマッチが抽出される。特徴が抽出された位置に基づいて、任意のサイズ及び/又は形状のカーネルが、集中されるか位置決めされる。特徴抽出は、位置ごとに行われる。
分類するために任意の機械学習アルゴリズム又はアプローチが使用されうる。例えば、サポートベクタマシン(例えば、2標準SVM)、線形回帰、ブースティングネットワーク、確率的ブースティングツリー、線形判別分析、関連ベクトタマシン、ニューラルネットワーク、ベイズネットワーク、これらの組み合わせ、又は他の現在既知若しくは今後開発される機械学習が提供される。バイナリ、階層、又は他の学習プロセスが使用されてもよい。スーパーバイズ又はセミスーパーバイズトレーニングが使用されてもよい。
機械学習は、マトリクス又は他の出力を提供する。マトリクスは、既知の結果を含むトレーニングデータのデータベースの分析から導出される。機械学習アルゴリズムは、結果に対する様々な入力の関係を決定する。学習は、入力特徴のサブセットだけを選択してもよく、全ての利用可能な入力特徴を使用してもよい。プログラマは、どの入力特徴を使用するか又はトレーニングの他のパフォーマンスを、左右するか制御することがある。例えば、プログラマは、利用可能な特徴を、所定のタイプの超音波イメージングで利用可能な情報に制限することがある。マトリクスは、入力特徴を結果と関連付け、分類するためのモデルを提供する。機械トレーニングは、結果と共に1つ以上の入力変数を使用する関係を提供して、手動で実行しにくい相互関係の検証又は作成を可能にする。
モデルは、超音波データによって表わされた位置がクラスのものかどうかの確率を表す。この確率は、メンバがそのクラス内にある可能性である。様々な可能な状態(例えば、2つの状態又は3つ以上の起こりうる状態)と関連付けられた一連の確率が出力される。あるいは、位置のクラスが、最も高い確率に基づいて割り当てられる。他の実施形態では、位置ごとのクラスが、確率情報なしで出力される。
クラシファイヤを適用するため、同一又は異なるプロセッサが、受け取った超音波データ又は超音波データから導出されたデータ(例えば、フィルタリング又はパラメータ化されたデータ)から、区別可能な入力特徴を抽出する。情報の入力特徴ベクトルは、クラシファイヤに入力される。入力特徴の値は、機械学習クラシファイヤに適用される。超音波システムのプロセッサ又は他のプロセッサは、受け取った超音波データにクラシファイヤを適用して、解剖学的組織及び/又はアーティファクトの位置を決定する。プロセッサは、超音波データによって表わされる複数の位置それぞれのクラスを出力するマトリクス又は他のクラシファイヤ構成を適用する。解剖学的構造の位置又はアーティファクトの位置が、機械学習クラシファイヤに組み込まれた知識ベースに基づいて出力される。
一実施形態では、アーティファクトが、検出される。任意のアーティファクトが検出されうる。アーティファクトは、超音波システム走査によって、例えば、トランスデューサ特性、走査形式、走査パラメータ又は画像処理などにより生じる。あるいは、アーティファクトは、解剖学的組織によって、収差や反射などにより生じる。アーティファクトは、疑似物体、シャドーイング又は他の情報として現れ、その位置における実際の解剖学的組織や検出されるべき解剖学的組織を表さない。
例えば、超音波データは、1つ以上の格子ローブを表す。クラシファイヤは、任意の格子ローブの位置を検出する。同じ用途(例えば、心臓イメージング)及び/又は構成(例えば、トランスデューサ、周波数、走査形式など)の格子ローブを含むか含まない画像の知識ベースを使用して、超音波データに格子ローブアーティファクトが検出される。図2は、心臓の例示的な画像を示す。格子ローブは、流体領域内の組織表現を生成する。26で表された領域は、格子ローブを示す。画像セグメント化アルゴリズムは、アーティファクトの代わりに、格子ローブを組織として識別することがある。誤りデータの変化を行う積極的強調手法を回避するために、クラシファイヤは、格子ローブによって生じた強度を有する位置を、他の物体として識別されるように検出する。
別の例として、超音波データは、血球の自然発生的コントラストの1つ以上の領域を表す。自然発生的コントラストは、心腔内の血液などの血液に対するBモード応答である。従来の超音波システムは、Bモードイメージングのための血液からの応答を検出しない。最新の超音波装置は、心腔内で循環する血液から信号をピックアップするのに十分な感度を有する。これは、高品質の超音波取得のことを述べているが、血液からの信号は、解剖学的組織をBモード画像で評価しようとしているユーザを混乱させることがある。血液からの信号のそのような自然発生的コントラスト特性は、組織からのものに十分に近く、その画像強調は、血液を組織と同じように処理することがある。図4は、心臓の例示的な四腔像を示す。自然発生的コントラストは、主に腔のうちの2つで生じる。28と示された領域は、自然発生的コントラストを示す。特に、左心室(上側腔)内の自然発生的コントラストがぼやけている。クラシファイヤは、自然発生的コントラストによって生じた強度を有する位置を検出する。検出は、全ての位置のもの(例えば、図4に示された両方の腔)か、全てより少ない位置のもの(例えば、左心室内の自然発生的コントラストのみ)である。
他の例では、超音波データは、シャドーイングを表す。稠密な組織又は骨の領域は、超音波走査をアレイの一部分又はアレイ全体から部分的に妨げ、シャドーイングを生成する。更に別の例では、骨が、超音波データの反射又は転送によりアーティファクトのようなローブを生成する(例えば、音響エネルギーのミラーとして働く)。クラシファイヤは、これらのアーティファクトの1つ以上を検出する。他のアーティファクトは、クラシファイヤによって検出されてもよい。
追加又は代替の実施形態では、1つ以上の解剖学的構造が、クラシファイヤによって検出される。クラシファイヤは、肝臓、心臓、弁、左心室又は他の解剖的組織の検出など、任意の解剖学的構造又は解剖学的組織の一部分を検出するようにトレーニングされる。複数の解剖学的構造が見つけ出されることがある。不特定の解剖学的組織又は異なる解剖学的組織に対して生じる特徴の集まり又は単一特徴が検出されることがある。
様々なアーティファクト及び/又は解剖学的組織のための様々なクラシファイヤがトレーニングされる。同一又は異なるクラシファイヤは、心臓を撮像するための格子ローブアーティファクトを検出するクラシファイヤや、肝臓を撮像するための格子ローブアーティファクトを検出するための異なるクラシファイヤなど、様々な撮像状況に関してトレーニングされてもよい。ひとつのトランスデューサ及び対応する周波数で使用するためのひとつのクラシファイヤと、それと異なるトランスデューサ及び対応する周波数で使用するための別のクラシファイヤなど、構成固有のクラシファイヤがトレーニングされてもよい。様々な物体を検出するために、アーティファクトを検出するひとつのクラシファイヤや、解剖学的組織を検出する別のクラシファイヤなど、同一又は異なるクラシファイヤがトレーニングされてもよい。
図1を再び参照すると、プロセッサは、動作16で位置の指示を出力する。画像は、超音波データから生成される。所定の解剖学的組織又はアーティファクトの検出位置は、色、線図、確率マップ、強度などによって、画像内に示されている。動作20の画像強調は、動作18で動作14の検出の精度のユーザ確認を受け取った後で行なわれる。超音波システムは、機械学習クラシファイヤの出力を明らかにした後で画像を処理する。知識ベース画像処理は、ユーザに透過的に行われる。ユーザには、プロセッサが画像の大部分を自動的に変更する前に、何が何故変更されるかが通知される。ユーザは、1つ以上の位置の分類の変更など、検出を編集してもよい。動作18でのユーザによる確認は、キーの押下げ又は他の応答型確認である。確認は、任意選択でよい。
動作20で、プロセッサ、フィルタ、超音波システム又はこれらの組み合わせが、検出された超音波データを位置の分類の特徴として強調する。セグメント化では、検出されたデータが除去されるか分離される。画像強調に関して、背景、他の組織、流体、他の物体、又は超音波データによる他の表現はそのままである。その代わりに、超音波データは、幾つかの位置を他の位置に対してよりよく見えるようにし、隙間を埋め、既に検出したデータを拡大し、削減し、分離し、及び/又は他の方法で画像処理するように変更される。幾つかの位置の画像処理は、他の位置の画像処理と異なる。強調は、全ての位置の表現を維持しながら、幾つかの位置の超音波データの振幅を他の位置に対してある程度変化させる。幾つかの位置は、変更によりゼロ又はバックグラウンド値によって表現されることがあるが、しかし表現された位置のままであってもよい。
統計ツールに依存する画像処理アルゴリズムを適用して解剖学的組織でありうる位置を見つけるのではなく、知識ベースを使用して位置を識別する。例えば、エッジに沿って異なるようにフィルタリングするために勾配をエッジの表現として見つけることは、特定の勾配がエッジであるという統計に依存する。アーティファクト又は他の解剖学的組織は、類似の勾配を有するので、誤って強調されることがある。知識ベース検出を使用することにより、様々な画像処理(例えば、エッジに沿った低域フィルタリングとエッジに垂直な高域フィルタリング)を適用する位置が識別される。アーティファクト又は他の解剖学的組織のエッジは、等しく強調されないか、同じように強調されないか、全く強調されない。そのような検出された位置は、より洗練され良好な画像強調のための画像処理で使用される。同様に、アーティファクトを低減又は除去する画像処理は、アーティファクトと類似の統計的特性を有する全ての位置ではなく、アーティファクト位置だけに適用される。
超音波データに任意の画像強調が適用されてもよい。例えば、空間適応フィルタリングが適用される。フィルタの1つ以上の特徴は、位置の分類に適合する。空間フィルタカーネル(例えば、サイズ及び/又は重み)又はフィルタリングタイプは、フィルタリング位置の分類によって異なる。解剖学的組織又は解剖学的組織の境界は、他の位置よりフィルタリングを多くするか少なくするために強調されることがある。エッジ検出、空間フィルタリング、時間フィルタリング、変換、又は他の画像プロセスは、クラシファイヤによって識別された解剖学的組織及び/又はアーティファクトの位置の関数として変化することがある。
一実施形態では、強調は、アーティファクトの除去又は減少によるものである。例えば、高域フィルタ又は振幅スケーリング(例えば、量又は%の減少)は、アーティファクトと関連付けられた位置に適用され、また超音波データによって表わされた他の位置に適用されないか異なるように適用される。
格子ローブの例では、格子ローブ情報が抑制される。図2は、左心室内で概略的に26で示された格子ローブを示す。格子ローブは、ユーザを混乱させることがある。高域フィルタリング及び/又は振幅スケーリングの後で、格子ローブによって生成された輝度は、図3に表されたように低下する。画像の美学及び/又は診断実用性が改善されることがある。格子ローブの特徴は、診断組織の残り部分の特徴と違いがなく、知識ベース検出を参照せずに超音波データの特性に基づく適応フィルタリングの一般適用が難しくなるか有効でなくなる。知識ベース検出を使用することにより、アーティファクトの位置だけが、アーティファクトを少なくするか見えなくするのに十分な量だけ抑制される。
別の実施形態では、振幅スケーリング(例えば、減少)又はより大きな一時的パーシステンスは、自然発生的コントラストとして分類された位置に適用される。他の位置には、異なるスケーリング(例えば、減少)、スケーリングなし、又は異なるパーシステンスが適用される。図4で分かるように、左心室内の自然発生的コントラストは、ユーザを混乱させることがある。振幅スケーリング又は一時的パーシステンスの後で、図5に示されたように、左心室の自然発生的コントラストが抑制される。他の心腔内の自然発生的コントラストは、抑制されるか、やはり抑制されない。知識ベース検出によって、同じアーティファクトに関する位置の区別が可能になる。図5の例では、抑制は、左心室内の自然発生的コントラストに関してのみであり、他の自然発生的コントラスト又は心臓壁組織に関するものではない。知識ベースの検出アーティファクトの抑制は、画像の美学的及び/又は診断実用性を改善する。あるいは、ユーザが望んだ場合は、自然発生的コントラストが強調され、抑制されないことがある。自然発生的コントラストは、自然発生的コントラストを解剖学的組織の残りの部分と区別するために、別個のカラーマップで提示されてもよい。
シャドーイングなどの他のアーティファクトは、画像強調のために異なるように処理されてもよい。例えば、シャドーイングは、シャドーイング内の輝度を高めることによってシャドーイングを減少させるために、他の位置のものより拡大縮小されるか持続される。
別の実施形態では、超音波データは、検出された解剖学的構造に基づいて位置によって異なるようにフィルタリングされる。知識ベースを使用する検出は、全体的又は総合的構造の規定及び連続性を提供する。画像処理アルゴリズムが、特に高度のノイズとクラッタを有する画像内で、2つの別個の画素が同じ解剖学的構造に属するかどうかを決定することは難しいことがある。画像強調が、可能な限りの画素又はボクセルを全体的設定によって積極的に接続する場合、解剖学的組織の一部ではない位置が含まれることがある。エキスパート作成データベースに基づく検出技法を使用することによって、どの画素を処理すべきかの信頼性が高まるので、画像処理アルゴリズムは、構造連続性の構築を積極的にすることができる。
任意の識別されたアーティファクト又は解剖学的組織は、任意の位置適応画像処理によって強調されることがある。位置分類は、画像強調を空間的に適応させるために使用される。特定の解剖学的組織、アーティファクト、及び/又は特徴は、超音波データによって表わされた他の組織、流体又は構造に対して、抑制されるか、強調されるか、変更されることがある。解剖学的組織又はアーティファクトの特定の強調の前又は後で、検出された解剖学的組織又はアーティファクトに固有でない更に他の画像処理が適用されてもよい。
動作22で、画像が生成される。プロセッサ又は超音波システムは、強調された超音波データから画像を生成する。強調が適用されて値(例えば、RGB値)を表示する場合、超音波データは、ディスプレイ上に提示される。強調が、検出後などのマッピング前に適用された場合、値を表示する走査変換及び/又はマッピングが提供される。次に、結果が、ディスプレイに出力される。
生成された画像は、Bモード、カラーフローモード、Mモード、パルス波ドップラー、造影剤、高調波、他の超音波画像、又はこれらの組み合わせである。画像は、所定の時間又はある期間の患者を表す。画像は、平面や体積領域などの患者内の1つ以上のサンプル位置を表すことがある。
画像は、セグメント化なしの患者を表す。情報を分離するのではなく、走査領域全体が画像で表わされる。1つ以上のアーティファクトが抑制されかつ/又は1つ以上の解剖学的位置が、強調によって画像内で強調される。図3と図5に示されたように、知識ベース強調のない超音波データで生成された画像より少ないアーティファクトが、ユーザに提示されることがある。アーティファクトの抑制と対象解剖学的組織の強調の両方が提供される場合、表示される超音波画像は、散乱の少ないアーティファクトと、対象解剖学的組織に高い焦点とを提供する。
図6は、医用超音波診断法における画像強調システムの一実施形態を示す。解剖学的組織及び/又はアーティファクトの知識ベース検出を使用して、取得された超音波データを選択的に強化する。システムによって行なわれた画像処理は、検出された解剖学的組織及び/又はアーティファクトに適合する。システムは、図1に関して前述した方法又は異なる方法を実行する。
超音波システムは、送信ビームフォーマ52、トランスデューサ54、受信ビームフォーマ56、画像プロセッサ58、ディスプレイ60、プロセッサ62及びメモリ64を含む。他のシステムが使用されてもよい。追加の構成要素、異なる構成要素、又は少ない数の構成要素が提供されてもよい。例えば、別個の検出器と走査変換器も提供される。別の例として、イメージング用途(例えば、心臓イメージング)、構成、及び/又は検出の確認のユーザ選択を受け入れるために、ユーザ入力装置(例えば、マウス及び/又はキーボード)が提供される。検出器は、超音波データではない他のソースからの1つ以上の入力特徴を使用してもよい。データの他のソースには、センサ、治療システム又は他の入力が挙げられる。そのような装置又は入力は、プロセッサ62又はメモリ64に提供されてもよい。一実施形態では、検出器によって使用される入力特徴は全て、超音波データから取得される。
システム10は、医用診断超音波イメージングシステムである。イメージングには、二次元、三次元、Bモード、ドップラー、カラーフロー、スペクトルドップラー、Mモード、歪み、弾性、高調波、コントラスト、又は他の現在既知又は今後開発される画像診断療法が挙げられる。超音波システム10は、フルサイズカートマウントシステム、小型携帯システム、ハンドヘルドシステム、又は他の現在既知又は今後開発される超音波イメージングシステムである。別の実施形態では、プロセッサ62とメモリ64は、別個のシステムの一部である。例えば、プロセッサ62とメモリ64は、超音波システムと無関係に動作するか超音波システムに接続されたワークステーション又はパーソナルコンピュータである。別の例では、プロセッサ62とメモリ64は、治療システムの一部である。
トランスデューサ54は、単一、一次元、多次元、又は他の現在既知の又は今後開発される超音波トランスジューサである。トランスデューサ54の各素子は、圧電、微小電気機械、容量性薄膜超音波トランスジューサ、又は他の現在既知又は今後開発される音響エネルギーと電気エネルギーの間で変換するための変換素子である。トランスデューサ素子はそれぞれ、送信ビームフォーマ52から電気エネルギーを受け取り、音響エコーに応じた電気エネルギーを受信ビームフォーマ56に提供するためのビームフォーマ52,56に接続する。
送信ビームフォーマ52は、1つ以上の波形発生器、増幅器、遅延機構、位相回転子、マルチプライヤ、加算器、アナログデジタル変換器、フィルタ、これらの組み合わせ、及び他の現在既知又は今後開発される送信ビームフォーマ構成要素である。送信ビームフォーマ52は、送信アパーチャの各素子の送信信号を生成するために複数のチャネルに構成される。各素子の送信信号は、1つ以上の走査線に沿って音響エネルギーを集束するために互いに対して遅延されアポダイゼイションされる。送信イベント中に1つ以上の素子のために、様々な振幅、周波数、帯域幅、遅延、スペクトルエネルギー分布又は他の特性の信号が生成される。
受信ビームフォーマ56は、患者の部位を表す超音波データを取得するように構成される。受信ビームフォーマ56は、トランスデューサ54の様々な素子から受け取った信号を別々に処理するための複数のチャネルを含む。各チャネルは、遅延機構、位相回転子、増幅器、フィルタ、マルチプライヤ、加算器、アナログデジタルコンバータ、制御プロセッサ、これらの組み合わせ、及び他の現在既知又は今後開発される受信ビームフォーマ構成要素を含むことができる。受信ビームフォーマ56は、また、様々なチャネルからの信号をビーム形成信号に結合するための1つ以上の加算器を含む。後のフィルタが提供されてもよい。他の現在既知又は今後開発される受信ビームフォーマが使用されてもよい。送信イベントからの音響エコーを表す電気信号は、受信ビームフォーマ56のチャネルに渡される。受信ビームフォーマ56は、同相及び直角位相、無線周波数、又は走査領域内の1つ以上の位置を表す他のデータを出力する。
次に、受信ビームフォーマ信号が、検出され、画像プロセッサ58によって超音波画像を生成するために使用される。画像プロセッサ58は、Bモード/Mモード検出器、ドップラー/フロー/組織運動推定器、調波検出器、造影剤検出器、スペクトルドップラー推定器、これらの組み合わせ、又は検出された超音波データを出力するための他の現在既知又は今後開発される装置である。検出は、ビーム形成されたデータから患者の音響応答の特徴を決定する。画像プロセッサ58は、走査変換器、ディスプレイマッピング用バッファ及び/又は画像強調用プロセッサ62を含んでもよい。検出又は推定された信号は、走査変換前又は後に、プロセッサ62によって使用されてもよい。
プロセッサ62は、制御プロセッサ、フィルタ、汎用プロセッサ、特定用途向け集積回路、フィールドプログラマブルゲートアレイ、デジタル構成要素、アナログ構成要素、ハードウェア回路、これらの組み合わせ、及び画像処理して画像を強調するための他の現在既知又は今後開発される装置である。プロセッサ62は、コンピュータコード、ファームウェア、及び/又はハードウェアによって、検出データに表わされた解剖学的組織又はアーティファクトを識別し、検出データを変更して解剖学的組織又はアーティファクトを強調又は抑制するように構成される。
プロセッサ62は、知識ベース解剖又はアーティファクト検出によって使用される入力特徴のための値を受け取り、要求し及び/又は計算する。一実施形態では、特徴及び対応する値の1つ以上は、超音波データから抽出される。プロセッサ62は、超音波データによって表わされた様々な位置それぞれのまわりの領域のデータ特徴の1つ以上の測定を実行する。例えば、ハールウェーブレット特徴は、超音波データによって表わされた各位置の1つ以上の異なる大きさを提供する。
プロセッサ62は、検出データからのアーティファクト及び/又は解剖学的組織を知識ベースの関数として識別するように構成される。一実施形態では、知識ベースは、機械学習クラシファイヤとして表わされる。機械学習クラシファイヤは、知識ベースから学習される。特徴値が抽出され、クラシファイヤに入力される。クラシファイヤは、各位置の関係(即ち、アーティファクト及び/又は解剖学的組織)を分類する特徴を関連付ける。様々なアーティファクト、解剖学的組織及び/又は用途(例えば、心臓又は放射線用途)のために様々なクラシファイヤが提供されてもよい。一実施形態では、クラシファイヤは、アーティファクトを血液の格子ローブ、シャドー又は自然発生的コントラストとして識別するようにトレーニングされたマトリクスである。代替実施形態では、現在の超音波データとデータベース内の多くの注釈付き画像のうちの1つとの照合などを使用する他の知識ベース識別が使用される。
プロセッサ62及び/又は画像プロセッサ58は、検出データをアーティファクト及び/又は解剖学的組織の関数として画像処理するように構成される。検出された物体と関連付けられた位置は、他の位置とは異なるように処理又は画像処理される。様々なフィルタリング、エッジ強調又は他の画像処理が、他の位置ではない検出クラスの位置に適用される。設定の違い(即ち、フィルタリングを適用するが異なる特徴を有する)、処理するかどうかの違い(即ち、幾つかの位置を強調して他の位置を強調しない)、又は処理タイプの違い(即ち、検出された解剖学的組織又はアーティファクトにはひとつのタイプと、他の位置には他のタイプ)があることがある。例えば、検出されたアーティファクトの位置は、アーティファクトを抑制するために他の位置と異なるようにフィルタリングされるか拡大縮小される。
ディスプレイ60は、モニタ、LCD、LED、プラズマ、プロジェクタ、プリンタ、又は他の現在既知若しくは今後開発される表示装置である。プロセッサ62及び/又は画像プロセッサ58は、ディスプレイ60のための表示信号を生成する。RGB値などの表示信号が、プロセッサ62によって使用されてもよい。
ディスプレイ60は、Bモード画像などの患者の走査部位を表す画像を表示するように構成される。画像は、画像処理された検出データから生成される。適応画像処理が適用された後で、画像が生成され、ディスプレイ60に表示される。画像は、走査部位を表すが、検出位置に基づいて強調又は抑制するように変更された輝度又は推定値を有する。画像は、画像強調が知識ベース検出によって導かれた後でデータから生成される。例えば、検出アーティファクトが低減されたBモード画像が表示される。低減は、部分的又は完全に除去される。
メモリ64は、医用超音波診断における画像強調のプログラムされたプロセッサによって実行可能な命令を表すデータが記憶されたコンピュータ可読記憶媒体である。本明細書で述べたプロセス、方法及び/又は技法を実施するための命令は、キャッシュ、バッファ、RAM、リムーバブル記憶媒体、ハードディスク又は他のコンピュータ可読記憶媒体などのコンピュータ可読記憶媒体又はメモリ上に提供される。コンピュータ可読記憶媒体は、様々なタイプの一時的及び持久記憶媒体を含む。図に示され本明細書に記載された機能、動作又はタスクは、コンピュータ可読記憶媒体に記憶された1組以上の命令に応じて実行される。機能、動作又はタスクは、特定タイプの命令セット、記憶媒体、プロセッサ又は処理方式に依存せず、単独又は組み合わせで動作するソフトウェア、ハードウェア、集積回路、ファームウェア、マイクロコードなどによって実行されてもよい。同様に、処理方式は、多重処理、マルチタスキング、並列処理などを含むことがある。一実施形態では、命令は、ローカル又はリモートシステムによって読み取るためのリムーバブル記憶媒体装置に記憶される。他の実施形態では、命令は、コンピュータネットワーク又は電話線を介して伝送するために遠隔地に記憶される。更に他の実施形態では、命令は、所定のコンピュータ、CPU、GPU又はシステム内に記憶される。
以上、本発明を様々な実施形態を参照して説明してきたが、本発明の範囲から逸脱することなく多くの変更及び修正を行なうことができることを理解されたい。したがって、以上の詳細な説明が、限定ではなく実例と見なされるべきであり、また以下の請求項が、本発明の趣旨と範囲を規定するように意図された全ての等価物を含むことを理解されたい。
52 送信ビームフォーマ
54 トランスデューサ
56 受信ビームフォーマ
58 画像プロセッサ
60 ディスプレイ
62 プロセッサ
64 メモリ

Claims (15)

  1. 医用超音波診断における画像強調方法であって、
    超音波システムによって、患者の組織の走査から、前記組織の空間位置を表す超音波画像データを取得するステップ(12)と、
    前記超音波システムのプロセッサ(62)によって、前記超音波画像データに、前記超音波画像データにおける前記超音波システムのイメージングアーティファクトの位置を出力する機械学習クラシファイヤを適用するステップ(14)と、
    前記イメージングアーティファクトの前記位置の前記超音波画像データを他の位置と異なるように変更するステップ(20)と、
    前記変更された超音波画像データから前記患者の前記組織の超音波画像を表示するステップ(22)とを含む方法。
  2. 前記取得するステップ(12)が、Bモード検出後にBモード画像データを取得するステップ(12)を含む、請求項1に記載の方法。
  3. 適用するステップ(14)が、
    前記超音波画像データから特徴値を抽出するステップと、
    前記位置を、前記特徴値の前記機械学習クラシファイヤへの入力に応じて出力するステップとを含む、請求項1に記載の方法。
  4. 適用するステップ(14)が、前記位置を格子ローブの位置として検出するステップを含み、
    変更するステップ(20)が、フィルタ又は振幅スケーリングを前記イメージングアーティファクトの位置に適用し他の位置には適用しないステップ(14)を含む、請求項1に記載の方法。
  5. 適用するステップ(14)が、前記イメージングアーティファクトの位置を、血球の自然発生的コントラストの位置として検出するステップを含み、
    変更するステップ(20)が、前記イメージングアーティファクトの位置に他の位置よりも強く振幅スケーリングするか大きな一時的パーシステンスを適用するステップ(14)を含む、請求項1に記載の方法。
  6. 適用するステップ(14)が、シャドーイングを検出するステップを含み、
    変更するステップ(20)が、前記シャドーイングを低減するステップを含む、請求項1に記載の方法。
  7. 変更するステップ(20)が、空間適応フィルタリングを含み、
    前記空間適応フィルタリングが、前記イメージングアーティファクトの前記位置の関数として適応する、請求項1に記載の方法。
  8. 医用超音波診断法における画像強調のためのプログラムプロセッサ(62)によって実行可能な命令を表すデータが記憶された持続性コンピュータ可読記憶媒体において、
    超音波スキャナから、患者を表す検出超音波データを受け取るステップ(12)と、
    前記検出超音波データによって表わされた位置を、知識ベースによって分類するステップ(14)と、
    前記検出された超音波データを、前記位置の分類の関数として強調するステップ(20)であって、前記位置の全ての表現を維持しながら前記位置の幾つかの前記超音波データの振幅を他の位置に対して変化させる、強調するステップ(20)と、
    前記強調された超音波データから画像を生成するステップ(22)のための命令を含む
    記憶媒体。
  9. 分類するステップ(14)が、超音波データのグランドトゥルースラベル付きデータベースを含む知識ベースによって分類するステップ(14)を含む、請求項8に記載の持続性コンピュータ可読記憶媒体。
  10. 分類するステップ(14)が、機械学習クラシファイヤによって分類するステップ(14)を含み、前記機械学習クラシファイヤが、前記データベースから学習する、請求項8に記載の持続性コンピュータ可読記憶媒体。
  11. 分類するステップ(14)が、解剖学的構造を検出するステップを含み、
    強調するステップ(20)が、前記解剖学的構造の前記位置の関数としてフィルタリングするステップを含む、請求項8に記載の持続性コンピュータ可読記憶媒体。
  12. 医用超音波診断における画像強調のためのシステムであって、
    患者の部位を表す超音波データを取得するように構成された受信ビームフォーマ(56)と、
    前記超音波データから検出データを出力するように構成されたBモード検出器(58)、ドップラー推定器(58)又はこれらの両方と、
    前記検出データから特徴を抽出し、前記検出データからのアーティファクトを知識ベースの関数として識別し、前記検出データを前記アーティファクトの関数として画像処理するように構成されたプロセッサ(62)と、
    前記画像処理された検出データに基づいて前記部位の画像を表示するように構成されたディスプレイ(60)とを含むシステム。
  13. 前記Bモード検出器(58)が、前記検出データとしてBモードデータを出力し、
    前記プロセッサ(62)が、前記アーティファクトを、格子ローブ、シャドー、又は血液として識別するように構成され、前記アーティファクトの位置を他の位置とは異なるようにフィルタリングするように構成され、
    前記ディスプレイ(60)は、前記画像を、前記アーティファクトが低減されたBモード画像として表示するように構成された、請求項12に記載のシステム。
  14. 前記プロセッサ(62)は、前記知識ベースから得られた機械学習クラシファイヤによって識別するように構成された、請求項12に記載のシステム。
  15. 前記プロセッサ(62)が、前記アーティファクトの位置を前記アーティファクトのない位置と異なるように画像処理するように構成された、請求項12に記載のシステム。
JP2016102512A 2015-05-27 2016-05-23 知識ベース超音波画像強調 Active JP6367261B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/723,081 2015-05-27
US14/723,081 US10430688B2 (en) 2015-05-27 2015-05-27 Knowledge-based ultrasound image enhancement

Publications (3)

Publication Number Publication Date
JP2016221264A JP2016221264A (ja) 2016-12-28
JP2016221264A5 JP2016221264A5 (ja) 2018-01-18
JP6367261B2 true JP6367261B2 (ja) 2018-08-01

Family

ID=57281496

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016102512A Active JP6367261B2 (ja) 2015-05-27 2016-05-23 知識ベース超音波画像強調

Country Status (5)

Country Link
US (2) US10430688B2 (ja)
JP (1) JP6367261B2 (ja)
KR (1) KR101906916B1 (ja)
CN (1) CN106204465B (ja)
DE (1) DE102016108737B4 (ja)

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10716536B2 (en) 2013-07-17 2020-07-21 Tissue Differentiation Intelligence, Llc Identifying anatomical structures
US10154826B2 (en) 2013-07-17 2018-12-18 Tissue Differentiation Intelligence, Llc Device and method for identifying anatomical structures
US11986341B1 (en) 2016-05-26 2024-05-21 Tissue Differentiation Intelligence, Llc Methods for accessing spinal column using B-mode imaging to determine a trajectory without penetrating the the patient's anatomy
US9836664B1 (en) * 2016-05-27 2017-12-05 Intuit Inc. Method and system for identifying and addressing imaging artifacts to enable a software system to provide financial services based on an image of a financial document
US11701086B1 (en) 2016-06-21 2023-07-18 Tissue Differentiation Intelligence, Llc Methods and systems for improved nerve detection
US10043088B2 (en) * 2016-06-23 2018-08-07 Siemens Healthcare Gmbh Image quality score using a deep generative machine-learning model
US11832969B2 (en) 2016-12-22 2023-12-05 The Johns Hopkins University Machine learning approach to beamforming
WO2018127498A1 (en) * 2017-01-05 2018-07-12 Koninklijke Philips N.V. Ultrasound imaging system with a neural network for image formation and tissue characterization
EP3565479A1 (en) 2017-01-05 2019-11-13 Koninklijke Philips N.V. Ultrasound imaging system with a neural network for deriving imaging data and tissue information
EP3602568A1 (en) 2017-03-28 2020-02-05 Koninklijke Philips N.V. Ultrasound clinical feature detection and associated devices, systems, and methods
CA3062330A1 (en) * 2017-05-11 2018-11-15 Verathon Inc. Probability map-based ultrasound scanning
CN111226259B (zh) 2017-08-16 2024-03-12 皇家飞利浦有限公司 用于图像伪影消除的***、方法和装置
EP3669371A1 (en) * 2017-08-17 2020-06-24 Koninklijke Philips N.V. Ultrasound system with deep learning network for image artifact identification and removal
EP3456267A1 (en) * 2017-09-14 2019-03-20 Koninklijke Philips N.V. Ultrasound image processing
EP3456266A1 (en) * 2017-09-14 2019-03-20 Koninklijke Philips N.V. Ultrasound image processing
US11408987B2 (en) * 2017-09-25 2022-08-09 Philips Image Guided Therapy Corporation Ultrasonic imaging with multi-scale processing for grating lobe suppression
JP6943138B2 (ja) * 2017-10-26 2021-09-29 コニカミノルタ株式会社 医用画像処理装置
CN111432731A (zh) * 2017-11-02 2020-07-17 皇家飞利浦有限公司 用于检测图像伪影的智能超声***
DE102017126158A1 (de) * 2017-11-08 2019-05-09 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Ultraschall-Bilderzeugungssystem
US11264135B2 (en) 2017-11-10 2022-03-01 Siemens Medical Solutions Usa, Inc. Machine-aided workflow in ultrasound imaging
US10489907B2 (en) * 2017-11-13 2019-11-26 Siemens Healthcare Gmbh Artifact identification and/or correction for medical imaging
US10935651B2 (en) 2017-12-15 2021-03-02 Google Llc Radar angular ambiguity resolution
CN111629670B (zh) * 2017-12-20 2024-04-05 韦拉索恩股份有限公司 用于超声***的回波窗口伪影分类和视觉指示符
US11382601B2 (en) * 2018-03-01 2022-07-12 Fujifilm Sonosite, Inc. Method and apparatus for annotating ultrasound examinations
US11030780B2 (en) 2018-03-26 2021-06-08 The Board Of Trustees Of The Leland Stanford Junior University Ultrasound speckle reduction and image reconstruction using deep learning techniques
US11573311B2 (en) * 2018-04-05 2023-02-07 Google Llc Smart-device-based radar system performing angular estimation using machine learning
US11435460B2 (en) 2018-05-07 2022-09-06 Fujifilm Sonosite, Inc. Ultrasound imaging system with style transfer image enhancement
CN108804547A (zh) * 2018-05-18 2018-11-13 深圳华声医疗技术股份有限公司 超声图像教学方法、装置及计算机可读存储介质
US11497478B2 (en) * 2018-05-21 2022-11-15 Siemens Medical Solutions Usa, Inc. Tuned medical ultrasound imaging
JP7358457B2 (ja) * 2018-09-05 2023-10-10 コーニンクレッカ フィリップス エヌ ヴェ 超音波画像による脂肪層の識別
US11372093B2 (en) 2018-09-14 2022-06-28 Fujifilm Sonosite, Inc. Automated fault detection and correction in an ultrasound imaging system
US11207055B2 (en) * 2018-10-08 2021-12-28 General Electric Company Ultrasound Cardiac Doppler study automation
US11457871B2 (en) * 2018-11-21 2022-10-04 Enlitic, Inc. Medical scan artifact detection system and methods for use therewith
US10943681B2 (en) * 2018-11-21 2021-03-09 Enlitic, Inc. Global multi-label generating system
WO2020121014A1 (en) * 2018-12-11 2020-06-18 Eko.Ai Pte. Ltd. Automatic clinical workflow that recognizes and analyzes 2d and doppler modality echocardiogram images for automatic cardiac measurements and the diagnosis, prediction and prognosis of heart disease
JP7460633B2 (ja) 2018-12-19 2024-04-02 パックサイズ リミティド ライアビリティ カンパニー コンピュータビジョンを使用する複合視覚検査タスクの連携学習のためのシステムと方法
JP7180393B2 (ja) * 2019-01-11 2022-11-30 富士通株式会社 学習プログラム、学習装置及び学習方法
JP7192512B2 (ja) 2019-01-11 2022-12-20 富士通株式会社 学習プログラム、学習装置及び学習方法
US11903768B2 (en) * 2019-11-04 2024-02-20 GE Precision Healthcare LLC Method and system for providing ultrasound image enhancement by automatically adjusting beamformer parameters based on ultrasound image analysis
CN111028173B (zh) * 2019-12-10 2023-11-17 北京百度网讯科技有限公司 图像增强方法、装置、电子设备及可读存储介质
WO2021193026A1 (ja) * 2020-03-27 2021-09-30 テルモ株式会社 プログラム、情報処理方法、情報処理装置及びモデル生成方法
WO2021193008A1 (ja) * 2020-03-27 2021-09-30 テルモ株式会社 プログラム、情報処理方法、情報処理装置及びモデル生成方法
EP3889881B1 (en) * 2020-03-30 2024-05-08 Siemens Healthineers AG Method, device and system for generating a denoised medical image
JP7502899B2 (ja) * 2020-05-28 2024-06-19 富士フイルムヘルスケア株式会社 超音波撮像装置、及び、それを用いた手術支援システム
US11657504B1 (en) 2022-06-28 2023-05-23 King Abdulaziz University System and method for computationally efficient artificial intelligence based point-of-care ultrasound imaging healthcare support
US20240023937A1 (en) * 2022-07-19 2024-01-25 EchoNous, Inc. Automation-assisted venous congestion assessment in point of care ultrasound
CN117455779B (zh) * 2023-12-22 2024-03-26 天津市胸科医院 一种医疗超声影像仪辅助增强***

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5040225A (en) 1987-12-07 1991-08-13 Gdp, Inc. Image analysis method
US5273040A (en) 1991-11-14 1993-12-28 Picker International, Inc. Measurement of vetricle volumes with cardiac MRI
US5479926A (en) 1995-03-10 1996-01-02 Acuson Corporation Imaging system display processor
US5524623A (en) * 1995-06-30 1996-06-11 Siemens Medical Systems, Inc. Adaptive artifact suppression for ultrasound imaging
US6501849B1 (en) * 1997-09-02 2002-12-31 General Electric Company System and method for performing image-based diagnosis over a network
US6398733B1 (en) 2000-04-24 2002-06-04 Acuson Corporation Medical ultrasonic imaging system with adaptive multi-dimensional back-end mapping
US7295706B2 (en) 2002-07-12 2007-11-13 Chroma Group, Inc. Pattern recognition applied to graphic imaging
JP2007524461A (ja) 2003-06-25 2007-08-30 シーメンス メディカル ソリューションズ ユーエスエー インコーポレイテッド ***撮像の自動診断及び決定支援システム及び方法
US7536044B2 (en) * 2003-11-19 2009-05-19 Siemens Medical Solutions Usa, Inc. System and method for detecting and matching anatomical structures using appearance and shape
US8469887B2 (en) * 2003-12-19 2013-06-25 General Electric Company Method and apparatus for flow parameter imaging
US7672491B2 (en) 2004-03-23 2010-03-02 Siemens Medical Solutions Usa, Inc. Systems and methods providing automated decision support and medical imaging
US7664326B2 (en) 2004-07-09 2010-02-16 Aloka Co., Ltd Method and apparatus of image processing to detect and enhance edges
KR100646715B1 (ko) 2004-10-18 2006-11-23 한국과학기술원 후처리를 통한 2차원 초음파 영상의 화질 개선 방법
US7876934B2 (en) 2004-11-08 2011-01-25 Siemens Medical Solutions Usa, Inc. Method of database-guided segmentation of anatomical structures having complex appearances
US7680312B2 (en) 2005-07-13 2010-03-16 Siemens Medical Solutions Usa, Inc. Method for knowledge based image segmentation using shape models
US20070083114A1 (en) 2005-08-26 2007-04-12 The University Of Connecticut Systems and methods for image resolution enhancement
US7648460B2 (en) 2005-08-31 2010-01-19 Siemens Medical Solutions Usa, Inc. Medical diagnostic imaging optimization based on anatomy recognition
US8041145B2 (en) * 2006-11-17 2011-10-18 The Invention Science Fund I, Llc Distortion compensated imaging
US8090168B2 (en) * 2007-10-15 2012-01-03 General Electric Company Method and system for visualizing registered images
JP5063515B2 (ja) 2008-07-25 2012-10-31 日立アロカメディカル株式会社 超音波診断装置
US8885926B2 (en) 2009-04-15 2014-11-11 Massachusetts Institute Of Technology Image and data segmentation
US8170318B2 (en) 2009-06-05 2012-05-01 Siemens Medical Solutions Usa, Inc. Filter bank for ultrasound image enhancement
WO2011057252A1 (en) * 2009-11-09 2011-05-12 Sonosite, Inc. Systems and methods for beam enhancement
US8532360B2 (en) * 2010-04-20 2013-09-10 Atheropoint Llc Imaging based symptomatic classification using a combination of trace transform, fuzzy technique and multitude of features
US8582848B2 (en) * 2010-07-30 2013-11-12 Siemens Medical Solutions Usa, Inc. System and method for detection of acoustic shadows and automatic assessment of image usability in 3D ultrasound images
WO2012051216A1 (en) * 2010-10-11 2012-04-19 The Regents Of The University Of Colorado, A Body Corporate Direct echo particle image velocimetry flow vector mapping on ultrasound dicom images
US9398898B2 (en) * 2011-02-23 2016-07-26 Siemens Medical Solutions Usa, Inc. Multiple beam spectral doppler in medical diagnostic ultrasound imaging
EP2701607B1 (en) * 2011-04-26 2020-09-16 University Of Virginia Patent Foundation Bone surface image reconstruction using ultrasound
CN102855483B (zh) 2011-06-30 2017-09-12 北京三星通信技术研究有限公司 处理超声图像的方法和装置以及乳腺癌诊断设备
CN102551804B (zh) 2011-12-31 2013-12-04 重庆海扶医疗科技股份有限公司 减少图像伪影的超声治疗仪监控***及其图像获取方法
EP2830502B1 (en) 2012-04-23 2016-07-13 Koninklijke Philips N.V. Artifact removal using shape sensing
US9326689B2 (en) * 2012-05-08 2016-05-03 Siemens Medical Solutions Usa, Inc. Thermally tagged motion tracking for medical treatment
WO2013170053A1 (en) * 2012-05-09 2013-11-14 The Regents Of The University Of Michigan Linear magnetic drive transducer for ultrasound imaging
US20140194740A1 (en) * 2013-01-07 2014-07-10 Cerebrosonics, Llc Emboli detection in the brain using a transcranial doppler photoacoustic device capable of vasculature and perfusion measurement
JP6033701B2 (ja) * 2013-02-13 2016-11-30 ジーイー・メディカル・システムズ・グローバル・テクノロジー・カンパニー・エルエルシー 超音波診断装置及びその制御プログラム
CA2902550A1 (en) * 2013-02-26 2014-09-04 Butterfly Network, Inc. Transmissive imaging and related apparatus and methods
US9237257B1 (en) * 2013-06-14 2016-01-12 Xilinx, Inc. Circuits for and methods of generating a digital image
US9629615B1 (en) * 2013-09-06 2017-04-25 University Of Louisville Research Foundation, Inc. Combined B-mode / tissue doppler approach for improved cardiac motion estimation in echocardiographic images
CN105705098A (zh) 2013-09-20 2016-06-22 透壁生物技术公司 用于诊断疾病的图像分析技术
KR20160067881A (ko) * 2013-10-11 2016-06-14 세노 메디컬 인스투르먼츠 인코포레이티드 의료 이미징 내 컴포넌트 분리를 위한 시스템 및 방법

Also Published As

Publication number Publication date
KR101906916B1 (ko) 2018-10-11
CN106204465A (zh) 2016-12-07
US20190377978A1 (en) 2019-12-12
DE102016108737B4 (de) 2022-03-03
CN106204465B (zh) 2019-07-12
DE102016108737A1 (de) 2016-12-01
US10430688B2 (en) 2019-10-01
KR20160140465A (ko) 2016-12-07
JP2016221264A (ja) 2016-12-28
US10943147B2 (en) 2021-03-09
US20160350620A1 (en) 2016-12-01

Similar Documents

Publication Publication Date Title
JP6367261B2 (ja) 知識ベース超音波画像強調
Nair et al. Deep learning to obtain simultaneous image and segmentation outputs from a single input of raw ultrasound channel data
US11238562B2 (en) Ultrasound system with deep learning network for image artifact identification and removal
US7983456B2 (en) Speckle adaptive medical image processing
JP2016221264A5 (ja)
US9585636B2 (en) Ultrasonic diagnostic apparatus, medical image processing apparatus, and medical image processing method
JP6385992B2 (ja) 超音波カラーフローにおけるスパークルアーチファクトの検出
CN106600550B (zh) 超声图像处理方法及***
US10945701B2 (en) Segment-based flash suppression in ultrasound color flow
JP7464593B2 (ja) 医用画像内でのインターベンションデバイスの識別
CN111345847B (zh) 基于组织密度管理波束成形参数的方法和***
US20240050062A1 (en) Analyzing apparatus and analyzing method
JP2019076541A (ja) 医用画像処理装置
CN113034375A (zh) 用于提供模糊滤波以强调超声图像数据中的聚焦区域或深度的方法和***
EP4059442B1 (en) Image processing method and apparatus based on ultrasound contrast image
CN116831626A (zh) 超声波束合成方法及设备
JP2023552330A (ja) 個人が1つ又は複数の病害を有する可能性を予測すること
Govinahallisathyanarayana et al. Closed-loop low-rank echocardiographic artifact removal
CN112545550A (zh) 用于运动校正的宽带脉冲反演超声成像的方法和***
Alessandrini Statistical methods for analysis and processing of medical ultrasound: applications to segmentation and restoration
Kostoglou et al. Volatility Clustering in Medical Ultrasound Imaging and System Identification Based Deconvolution
CN116831625A (zh) 超声成像方法及设备
CN113796894A (zh) 用于在b模式超声图像中描绘的血管中提供杂波抑制的方法和***
Zhang et al. Color flow image segmentation

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170428

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170606

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20170905

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20171106

A524 Written submission of copy of amendment under article 19 pct

Free format text: JAPANESE INTERMEDIATE CODE: A524

Effective date: 20171130

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171205

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180605

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180704

R150 Certificate of patent or registration of utility model

Ref document number: 6367261

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250