JP6434006B2 - ハイライトシステム及び判定方法 - Google Patents

ハイライトシステム及び判定方法 Download PDF

Info

Publication number
JP6434006B2
JP6434006B2 JP2016522935A JP2016522935A JP6434006B2 JP 6434006 B2 JP6434006 B2 JP 6434006B2 JP 2016522935 A JP2016522935 A JP 2016522935A JP 2016522935 A JP2016522935 A JP 2016522935A JP 6434006 B2 JP6434006 B2 JP 6434006B2
Authority
JP
Japan
Prior art keywords
signal
marker device
image
probe
instrument
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016522935A
Other languages
English (en)
Other versions
JP2016523168A (ja
Inventor
ギィ ジェラール マリー ヴィニョン,フランソワ
ギィ ジェラール マリー ヴィニョン,フランソワ
クマール ジャイン,アメート
クマール ジャイン,アメート
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2016523168A publication Critical patent/JP2016523168A/ja
Application granted granted Critical
Publication of JP6434006B2 publication Critical patent/JP6434006B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0833Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures
    • A61B8/0841Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures for locating instruments
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5207Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of raw data to produce diagnostic data, e.g. for generating an image
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/74Systems using reradiation of acoustic waves, e.g. IFF, i.e. identification of friend or foe
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/88Sonar systems specially adapted for specific applications
    • G01S15/89Sonar systems specially adapted for specific applications for mapping or imaging
    • G01S15/8906Short-range imaging systems; Acoustic microscope systems using pulse-echo techniques
    • G01S15/899Combination of imaging systems with ancillary equipment
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/52Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
    • G01S7/52017Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00 particularly adapted to short-range imaging
    • G01S7/52053Display arrangements
    • G01S7/52057Cathode ray tube displays
    • G01S7/52073Production of cursor lines, markers or indicia by electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2063Acoustic tracking systems, e.g. using ultrasound
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/378Surgical systems with images on a monitor during operation using ultrasound
    • A61B2090/3782Surgical systems with images on a monitor during operation using ultrasound transmitter or receiver in catheter or minimal invasive instrument
    • A61B2090/3784Surgical systems with images on a monitor during operation using ultrasound transmitter or receiver in catheter or minimal invasive instrument both receiver and transmitter being in the instrument or receiver being also transmitter
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39Markers, e.g. radio-opaque or breast lesions markers
    • A61B2090/3925Markers, e.g. radio-opaque or breast lesions markers ultrasonic
    • A61B2090/3929Active markers
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/58Testing, adjusting or calibrating the diagnostic device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10132Ultrasound image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30204Marker

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Radiology & Medical Imaging (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Medical Informatics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Biomedical Technology (AREA)
  • Pathology (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Description

本開示は医療器具に関連し、特に、音響を利用して器具をハイライトするシステム及び方法に関連する。
ニードル、カテーテル及びその他の介入ツールは、反射特性及び好ましくない入射角に起因して、超音波の下ではしばしば見えづらい。超音波ガイダンスの下でニードル先端をマーキングするソリューションの1つは、ニードルの先端に小さな超音波センサを組み込むことである。そのようなセンサは、超音波イメージングプローブからのイメージングビームが視野の範囲を掃引する場合に、そこに採用する直接の超音波信号を受信する。超音波画像の中でトランスデューサの位置をハイライトするためにこれらの信号を利用する様々な方法が提案されている。これらの方法は、センサの座標範囲を推定するためのイメージングプローブからセンサまでの超音波の飛行時間(time-of-flight)と、横座標(lateral coordinate)を復元するためにイメージングビームが視野を掃引する場合の受信信号の強度とを当てにする。飛行時間を推定するには、スキャナのライントリガイベント(line trigger event)にアクセスする必要があり、横座標を推定するには、イメージングビームのステアリング角及び座標並びにトリガイベントにアクセする必要がある。
本原理によれば、画像の中で器具をハイライトするためのシステムは、超音波信号を送信及び受信するプローブと、受信される超音波信号に応答し、ある遅延の後に超音波信号を放出するように構成されるマーカーデバイスとを含む。医療器具はマーカーデバイスを含む。制御モジュールは、メモリに保存され、プローブから及びプローブにおいてマーカーデバイスから受信される超音波エネルギを解釈し、画像の中でマーカーデバイスの位置をハイライトするために、医療器具の3次元位置を判定するように構成される。
器具の位置を判定するための方法は:イメージングプローブのフレームレートを推定するステップ;検出ウィンドウ内のトレースを分析し、器具に搭載されるマーカーデバイスの位置に最も合致する時間的最大値を発見し、到来時間を判定するステップ;前記器具に搭載される前記マーカーデバイスから返ってくるエコーをシミュレーションするために、前記マーカーデバイスから前記イメージングプローブへ遅延した信号を放出することにより、音響フィードバック信号を前記イメージングプローブへ投入するステップ;及び前記器具の位置を識別するために、画像の中で前記エコーを表示するステップ;を有する。
器具の位置を判定するための方法は:超音波の視野の中で器具を挿入するステップ;使用されるイメージングモードのフレームレート(T)を推定するステップ;原点(o)に関し、前記器具に搭載されるセンサにより受信される信号の時間的最大値(t0)を判定するステップ;前記センサを送信モードに切り替えるステップ;インパルスがイメージングプローブの方に伝搬し、以後の信号がスキャナマシンによりビームフォーミングされるように、t1=t0+nTの時間において(nは整数)、前記センサからインパルスを放出するステップ;及び前記センサの位置から到来するエコーを画像の中で表示するステップ;を有する。
本開示についてのこれら及びその他の目的、特徴及び利点は、添付図面を参照しながら理解されるべき例示的な実施形態についての以下の詳細な説明から明らかになるであろう。
本開示は以下の図面に関連する好ましい実施形態についての詳細な説明を以下に提示する。
図1は超音波画像の中で器具をハイライトする一実施形態によるシステムを示すブロック/フロー図である。 図2は超音波とともに器具をハイライトする一実施形態によるシステムを示す概念図である。 図3はフレームレートを推定するための超音波パルスを示す振幅対時間のプロットである。 図4は検出時間を決定するための超音波パルスを示す振幅対時間のプロットである。 図5は一実施形態による器具又はツールのマーカーデバイスとプローブとの間で生じるイベントを示すイベントタイムラインである。 図6は例示的な一実施形態により超音波とともに器具を追跡する方法を示すフローチャートである。 図7は例示的な一実施形態により超音波とともに器具を追跡する別の方法を示すフローチャートである。
本願の原理によれば、システム及び方法はセンサの位置をハイライト(又は強調)することを許容する。超音波(ultrasound:US)画像の範囲内で適切な時間に音響信号を「投入(inject)」するために医療デバイス(例えば、介入デバイス)において1つ以上のセンサが使用される。投入された音響信号は、スキャナにより、自身の音響場(acoustic field)に対する応答として認識される。信号は、スキャナのビームフォーミングパイプラインにより処理され、最終的にはUS画像上で可視化される。たとえ音響波がセンサから送信された時間を我々が知らなかったとしても、センサは、センサをハイライトするために活用されるセンサに関する信号を生成することに、留意を要する。デバイスがUS領域の中に挿入されると、使用されるイメージングモード(又は画像処理モード)のフレームレート(T)を推定するために、1回限りのキャリブレーションステップが実行される。第2に、任意の原点に関し、センサにより受信される最大信号の時間(t0)が見出される。第3に、センサは送信モードに切り替えられ、t1=t0+nTの時間にインパルスがそこから放出され、ここでnは整数である。そのインパルスは投入プローブの方に進行し、以後の信号はスキャナマシンによりビームフォーミングされる。最終的な視覚的ディスプレイは、センサの位置から到来するエコーを示す。
本原理は、器具の位置を正確に(ピンポイントに)示すための特定のスキャナデータの利用可能性に関し、低い信頼度を許容する。例えば、フレーム、ライントリガ及びビームフォーミングパラメータは、もはやスキャナによって必要とされない。このことは、超音波対応ツールが自己充足型(self-contained)(スキャナとの低レベルインタフェースを要しない)であることを許容し、従って、任意のベンダによる超音波装置に基づく幅広い導入とともに、それらが使用可能になることを許容する。一実施形態において、システムは、フレームレート及びライントリガ位置などのようなイメージングスキャナからの重要なパラメータのオンザフライリバースエンジニアリング、及び、スキャナの受信信号経路へのアナログ音響信号の投入などを行うことがかのである。
本発明はニードルの観点から説明されるが;本発明の教示はかなり広範囲に及び、音響エネルギにより追跡される任意の医療器具その他の器具に適用可能であることが、理解されるべきである。一実施形態において、本原理は、複雑な生物学的又は機械的な系(システム)を追跡又は分析する際に使用される。特に、本原理は、生態系の内的な追跡プロシジャ、(例えば、肺、胃腸管(消化管)、排出器官、血管などのような)体の全ての領域におけるプロシジャ(処置、治療、手術)に適用可能である。図面に示される要素は、ハードウェア及びソフトウェアの様々な組み合わせで実現されてもよく、単独の要素又は複数の要素で組み合わせられてよい機能を提供してよい。本願の実施形態は、超音波ガイダンスの下で器具が体に挿入される任意の時点で使用されてよく、これは、ニードルプロシジャ(生体検査、アブレーション、全身麻酔(anesthesia)、疼痛処理(pain management)、膿瘍排出(abscess drainage))、カテーテルプロシジャ(心臓修復、電気生理学など)、又は、その他の任意のプロシジャを含む。
図面に示される様々な要素の機能は、専用のハードウェアだけでなく、適切なソフトウェアに関連してソフトウェアを実行することが可能なハードウェアを利用して、提供されることが可能である。プロセッサにより提供される場合、機能は、単独の専用プロセッサにより、単独の共有プロセッサにより、又は、いくつかは共有されてもよい複数の個々のプロセッサにより提供されることが可能である。更に、「プロセッサ」又は「コントローラ」という用語の明示的な使用は、ソフトウェアを実行することが可能なハードウェアを排他的に言及しているかのように解釈されるべきではなく、例えば、ディジタル信号プロセッサ(DSP)ハードウェア、ソフトウェアを保存するリードオンリメモリ(ROM)、ランダムアクセスメモリ(RAM)、不揮発性ストレージ等を黙示的に含むことが可能であるが、これらに限定されない。
更に、本発明の原理、側面及び実施形態だけでなくそれらの具体例に言及している本願における全ての記述は、それらの構造的及び機能的な双方の均等物を包含するように意図される。更に、そのような均等物は、現在知られている均等物だけでなく将来明らかになる均等物(すなわち、構造によらず、同じ機能を実行するように開発される任意の要素)の双方を包含することが、意図される。従って、例えば、本願に示されるブロック図は、本発明の原理を組み込む例示的なシステムコンポーネント及び/又は回路の概念図を表現していることが、当業者により認められるであろう。同様に、任意のフローチャート及びフロー図等は様々なプロセスを表現し、様々なプロセスは、コンピュータ読み取り可能な記憶媒体において実質的に表現されてもよく、コンピュータやプロセッサが明示的に示されているか否かによらず、そのようなコンピュータ又はプロセッサにより実行されることが、認められるであろう。
更に、本発明の実施形態は、コンピュータ又は任意の命令実行システムにより又はそれらに関連して使用されるプログラムコードを提供するコンピュータ利用可能な又はコンピュータ読み取り可能な記憶媒体においてアクセス可能なコンピュータプログラムプロダクトの形態をとることが可能である。本説明の目的に関し、コンピュータ利用可能又はコンピュータ読み取り可能な記憶媒体は、命令実行システム、装置又はデバイスにより又はそれらに関連して使用するプログラムを、保存、通信、伝搬又は転送すること等を行う任意の装置とすることが可能である。媒体は、電子的、磁気的、光学的、電磁的、赤外線的若しくは半導体的なシステム(又は装置又はデバイス)又は伝送媒体とすることが可能である。コンピュータ読み取り可能な媒体の具体例は、半導体又はソリッドステートメモリ、磁気テープ、取り外し可能なディスケット、ランダムアクセスメモリ(RAM)、リードオンリメモリ(ROM)、リジッド磁気ディスク及び光ディスクを含んでもよい。光ディスクについての現在の具体例は、コンパクトディスク-リードオンリメモリ(CD-ROM)、コンパクトディスク-リード/ライト(CD-R/W)、ブルーレイ(登録商標)及びDVDを含む。
以下に参照する図面において同様な数字は同一又は類似する要素を示しており、先ず図1を参照すると、一実施形態によるシステム100が例示的に示されている。システム100はワークステーション又はコンソール112を含み、これによりプロシジャは監督及び/又は管理される。ワークステーション112は、1つ以上のプロセッサ114と、プログラム及びアプリケーションを保存するメモリ116とを含む。メモリ116は、超音波スキャナ125からの信号を処理するように構成される画像処理モジュール115を保存してもよい。モジュール115は、医療デバイス、器具又はツール120及び/又はその周辺領域に関連する、構造的な変形、変位及びその他の変化を再構築するためにUS信号を利用するように構成される。医療器具102は、ニードル(針)、カテーテル、ガイドワイヤ、プローブ、内視鏡、ロボット、電極、フィルタデバイス、バルーンデバイス又はその他の医療コンポーネント等を含んでもよい。
(送信部又はトランスポンダを含む)アコースティックセンサ120は、ハイライトされるように、医療器具102上に搭載される。USプローブ122のようなプローブ122は、患者又は対象160をスキャニングするために設けられる。プローブ122は、(プローブ122による信号放出を検出するための)受信を行うことが可能である。プローブ122における受信信号は簡易データ分析及び制御モジュール124に与えられ、このモジュールは、メモリ116に保存され、アルゴリズム/プログラム123(例えば、高速フーリエ変換(FFT)、最大値同定、選択的カーブフィッティング(曲線適合化)等)におけるある程度の信号処理を行うことが可能である。
特に有利な実施形態では、(例えば)超音波センサ120はニードルの先端に配置される。そのセンサ120は、イメージングプローブが視野の中で掃引する場合にイメージングプローブ122からのビームとして、超音波信号を検出する。US信号は、ワークステーション112により及び/又は制御モジュール124において分析され、センサ120における最大信号の到来時間t0及びフレーム反復周期Tを抽出する。1つ以上のフレームの後に、センサ120は送信モードに切り替わり、(例えば、t0+T又はt0+nTの時点で)パルスを放出する(nは整数である)。スキャナ125は、パルスを、センサ120の位置から到来する高いエコーであるとして解釈し、たとえ僅かな画像不整合があったとしても、センサ120及び器具120を画像150の上で強調する。
特に有利な実施形態において、超音波センサ又はマーカーデバイス120は、受信機能130及び送信機能132を有する。超音波センサ120は、強調されるために、介入ツール又は器具102における送信/受信(T/R)スイッチを有するトランスデューサ、トランスポンダ又は受信部/送信部のペアを含んでもよい。トランスポンダは、インテロゲーティング受信信号に応答して、識別信号を送信するデバイスである。イメージングプローブ122が媒体の中に超音波を放出する場合に、センサ120の受信機能部130で受信される信号は、信号処理(FFT、最大値同定、選択的カーブフィッティング等)を行うことが可能なデータ分析モジュール124及びスロースイッチ(slow switch)につなげられる。送信機能部132は、媒体の中に音響信号を投入し直すように設けられる(制御モジュール124で処理されるようにプローブ122の方に再投入するように設けられる)。一例において、ツール120に乗るセンサ120はトランスポンダを含む(トランスポンダは送信モードで使用される)。これは、(例えば、10ボルトのような)高電圧回路を必要とし、イメージングプローブ122の周波数とトランスポンダの周波数とを適切に合致させる必要があるかもしれない(トランスポンダからの信号は、スキャナの受信信号経路においてフィルタリングされることを要しない)。トランスポンダは、受信モード及び送信モードの間で切り替えを行うための(スロー)T/Rスイッチを含んでもよい。別の例において、送信機能部132のために追加的な超音波放出部が、受信機能部130の近くでデバイスに配置されてもよい(或いは、受信及び送信される信号が同じ場所にあるようにトランシーバとして共存させてもよい)。これは、T/Rスイッチの必要性を排除し、検出/投入ソフトウェアを簡略化する。
ディスプレイ118はセンサの場所を示す。ディスプレイ118は、ワークステーション112及びそのコンポーネント及び機能或いはシステム100内の他の任意の要素とともにユーザが相互作用することを許容する。これは、インタフェース140により更に促され、インタフェース140は、キーボード、マウス、ジョイスティック、触覚デバイス、又は、その他の任意のペリフェラル又はコントロール部を含み、ワークステーション112からのユーザフィードバック及びワークステーションとの相互作用を許容する。
別の実施形態では、センサ120を有する器具102及びスキャナ125から出力されるビデオ信号が、所与の任意の時間における器具102の3D位置を算出するように使用される。ビデオ出力信号は、市販のスキャナで容易に利用可能であり、演算ワークステーション112内に送り込まれる。
図2に関する概念図は、一実施形態によるコンポーネント間の相互作用を示す。時間に合わせて又はUS放出に応答してセンサ120により、信号の投入が実行される。センサ120は、強調されるようにデバイス102の先端に配置される。プローブ122からの1画像フレームの間にセンサ/トランスポンダ120により受信される信号例136が示されている。センサ120は、イメージングプローブ122からのビームが掃引する場合に、超音波信号136を検出する。この信号136は、フレーム反復期間(周期)T、及び、センサ120における最大信号の到着時間t0を抽出するために分析される。1つ又は2つ(或いはそれ以上)のフレームの後(138)、センサ120は、送信モードに切り替えられ、(例えば、t0+T又はT0+2Tにおいて)パルスを放出する。スキャナ125は、そのパルスを、センサ120の場所から到来する高いエコーであるとして解釈し、画像150の上でそれをハイライトする。
システム100は、プロット144及び146におけるライントリガ情報に関し、最大値の位置及びそのタイミングを識別する。1つ(又はそれ以上)のフレーム期間138の後、明るいマーカー142を生成するために、信号141が、センサ/トランスポンダ120によりプローブ122の方へ適切なタイミングで投入され、明るいマーカー142は、センサ120が配置されかつディスプレイ118上で見える場所を示す。
図3に関し、イメージングプローブのフレームレートTが評価されることを要する。これは、(例えば、1秒の4分の1、記録に関し、例えば、40Hzで10フレームのような)比較的長い時間Testにわたって受信信号を監視し(聴き取り)、例えばフーリエ分析により支配的な周期に関して信号を分析することによりなされる。図3には、受信されたトレース202が示されている。トレース202において、個々のインパルス204は、(デバイス102における120である)センサにヒットする異なるビームに対応する(ビームがセンサに接近してそこから遠ざかる場合に、振幅が変化する)。そのパターンは、複数の同様なフレームが連続的なシーケンスで取得されるように、何度か反復される。時間Testの間にセンサ(120)により受信されるトレース202は、システムのフレームレートTを推定するために使用されることが可能である。これがなされると、受信システムは、トレース長さTdetectを分析する(理想的には、T<Tdetect<2T である)。
図4に関し、これらのトレース長さTdetectの1つが示されている。これらのトレース204の取得は、フレームに同期していないことに留意を要する。システムは、このトレースの最大値の時間t0を探す。この最大値は、センサ120に最も整合した送信イベントからのパルスがセンサ120に到達した瞬間に対応する。時間Tdetect(例えば、ここでは、Tdetect=1.2T)の間にセンサ120により受信されたトレースは、最も軸上の(on-axis)送信がセンサ120に到達する時間t0を発見するために使用される。t0は単にトレース204の最大値の時間であってもよい。
センサ120に最も接近するビーム及び到来時間を識別するための簡易なピーク検出の代わりに、カーブ又はトレース204(例えば、Testの間にセンサ120により受信された信号)を適合させ、個々のパルスの局所的な最大値に対するカーブ204を、簡易な信号モデル(例えば、ガウシアンモデル)に適合させることが有用であるかもしれない。
次に、センサの位置から到来するエコーを生成するために、アコースティック信号(音響信号)がイメージングプローブ122に向けて投入される。投入されるアコースティック信号に関し、点滅すること(「投入オン(on)」の短い期間と「投入オフ(off)」の期間とが交互に生じること)が望ましいかもしれない。人間の眼は点滅信号よりも敏感である。別の実施形態では、サイズを変えること、形状を変えること、或いは、視覚的な属性を変えること等による視覚的効果が、音響エコーに付与されてもよい。これらの視覚的効果は、センサ120により生成される又はセンサ120から返送される信号により導入されてもよい。ビデオストリームが取得され、信号の取得及び投入の設定に同期させられる場合、投入される信号を強調するために、差分画像が生成されること(「点滅オフ」画像が「点滅オン」画像から減算されること)が可能である。差分画像は、スキャナ125からのビデオデータにアクセスするためにのみ必要な画像処理チェーン全体においてオリジナル画像に関して強調され重ね合わせられることが可能である。
図5に関し、2つの形態が例示的に示され:センサ120は(スローT/Rスイッチにより送信モードに切り替えられることが可能である)トランスポンダであり、或いは、2つのトランスポンダが近接して使用され、一方は信号検出用の受信部であり、他方は信号投入用の送信部である。何れにせよ、図5に示されるようなイベントシーケンスが適用される。
図5に関し、トランスポンダの実施形態における、フレームレートの推定、ピークパルス検出、及び、パルス投入のためのイベントのシーケンスが、例示的に示される。外的なシステムのクロックは、USスキャナのクロックから完全に独立していてよいことに留意を要する。イメージングシステムのフレームレートを評価するために、(10フレームにわたって伸びる程度に十分に長い)比較的長い期間225(Test)が使用される。次に、ピーク検出期間221(受信モード;暗い影の部分)と信号投入期間223(送信モード;明るい影の部分)とが交互に入れ替わる(交番する)。信号ピークが時間t0で検出される場合、信号はt0+2Tで投入される;これは、その検出後に、トランスポンダの2フレーム目の時点で人為的なエコーを形成する。検出イベント224は丸い端部として示され、投入イベント226は矢印で示されている。
検出の後、時間t0+nTにおいてトランスポンダ又は送信機からインパルスが送信され、nは整数であり、好ましくはn=1(送信機の実施形態の場合)又は2(トランスポンダの実施形態の場合)である。これは、検出フレームの後のnフレームにおいて、センサの位置から到来するように見える人為的なエコーを形成する効果をもたらす。トレース分析及びフィードバック信号の投入は、センサ120の位置を顕在化させるために反復されてもよい。フレームレートの評価は、ユーザがイメージング設定を変更する場合に、可能性のあるパラメータ変化を考慮するために周期的に反復されてもよい(イメージングモード、設定及び深度の全てがフレームレートに影響し得る)。
図6に関し、一実施形態に従って器具の位置をハイライトする方法が示される。ブロック402において、イメージングプローブのフレームレートが推定される。ブロック404において、フレームレートを推定することは、ある時間期間の間に受信信号を監視し、その支配的な期間を判定するために受信信号を分析することを含む。
ブロック406において、トレースが検出ウィンドウの中にあるか否かを判定し、器具に搭載されるセンサ又はマーカーデバイスの位置に最も合致する時間的最大値を発見し、到来時間を判定するために、トレースが分析される。検出ウィンドウは、T及び2Tの間にある検出時間Tdetectを含み、ここでTはフレームレートである。
ブロック408において、イメージングプローブのトランスポンダ又はトランシーバ(送信部)を用いてエコー信号をシミュレートするために、器具に搭載されるセンサから、アコースティックフィードバック信号がイメージングプローブへ投入される。ブロック410において、プローブから初期パルスを受信した後の1つ又は2つのフレームにおいて、アコースティックフィードバック信号が投入される。フレーム数nは1又は2より大きくてもよい。一形態では、センサが送信部を含む場合にはn=1であり、センサがトランスポンダを含む場合にはn=2である。
ブロック412において、器具の位置を識別するために、画像の中でマーカーが表示される。ブロック414において、画像の中でマーカーを表示することは、画像の中でマーカーを点滅させることを含んでもよい。他の画像効果が使用されてもよい。一実施形態では、マーカーのサイズを変更すること、その形状を変更すること、又は、その視覚的属性を変更すること等のために、視覚的効果が(シミュレーションされているエコーである)アコースティックエコーに付与されてもよい。例えば、三角形、円形、楕円形、直線などのような形状が、画像の中で表示されてもよい。これらの視覚的効果は、(例えば、トランスポンダのアプリケーションの場合)スキャナにより生成される信号により導入されてもよいし、或いは、センサ(120)により返送又は生成されてもよい。
図7に関し、一実施形態により器具の位置をハイライトする別の方法が示されている。ブロック502において、超音波の視野の中に器具が挿入される。ブロック504において、使用される画像処理モードのフレームレート(T)が評価される。ブロック506において、ある原点に関し、器具に搭載されるセンサ又はマーカーデバイスにより、受信信号の時間的最大値(t0)が判定される。ブロック508において、センサが送信モードに切り替えられる。ブロック510において、インパルスがイメージングプローブの方に向かって伝搬しかつ以後の信号がスキャナマシンによりビームフォーミングされるように、t1=t0+nTの時点でセンサからインパルスが放出される(nは整数)。フレーム数nは1や2より大きくてもよい。一形態において、センサが送信部を含む場合にはn=1であり、センサがトランスポンダを含む場合にはn=2である。ブロック512において、センサの位置から到来するエコーが画像の中で表示される。ブロック504において、エコーが画像の中で表示され、画像の中で点滅させられる。上述したように、他の画像効果が使用されてもよい。
添付の特許請求の範囲を解釈する際に、以下の事項が理解されるべきである:
a)「有する(comprising)」という言葉は、所与の請求項に列挙されるもの以外の他の要素や動作の存在を排除していない;
b)要素に先行する「ある」又は「或る」という言葉は、そのような要素が複数個存在することを排除していない;
c)請求項における任意の参照符号(存在する場合)は、それらの範囲を限定しない;
d)複数の「手段」が、同じアイテム若しくはハードウェア又はソフトウェアで実現される構造若しくは機能により表現されもよい;
e) 処理の特定の順序は、明示的に示されていない限り、必要とされるようには意図されていない。
以上、介入器具のアコースティックハイライトに関する好ましい実施形態が説明されてきたが(それらは例示的であって限定的であるようには意図されていない)、上記の教示の観点から、当業者により、修正及び変形が可能であることに留意を要する。すなわち、添付の特許請求の範囲により規定されるような本願に開示される実施形態の範囲内に属する開示される特定の実施形態において変形がなされてもよいことが、理解されるべきである。本明細書は特許法により具体的に要求されるように詳細に説明されており、特許法により保護されるように求められる事項は、添付の特許請求の範囲に記載される。

Claims (13)

  1. 画像の中で器具をハイライトするためのシステムであって:
    受信モードにおいてプローブから送信された超音波信号を受信し該超音波信号に応答し、送信モードにおいて前記プローブ別の超音波信号を放出するように構成されるマーカーデバイスであって、前記プローブは或る空間に対して及び或る空間から超音波信号を送信及び受信するように構成され、前記マーカーデバイスは前記空間の中に配置される医療器具に含まれ、前記送信モードにおいて前記プローブが前記マーカーデバイスから受信する前記別の超音波信号はt+nTにおいてフレームに投入され、tは前記マーカーデバイスにより受信される超音波信号最大値を示すタイミングであり、Tはフレームレートであり、nは整数である、マーカーデバイス;及び
    画像の中で前記マーカーデバイスの位置をハイライトするように、前記プローブにより受信される超音波信号を解釈するように構成される制御モジュール;
    を有するシステム。
  2. 前記マーカーデバイスはトランスポンダを含み、前記トランスポンダは受信モードから送信モードに変更するためのスイッチを含む、請求項1に記載のシステム。
  3. 前記マーカーデバイスは、受信部及び送信部を有するトランシーバを含む、請求項1に記載のシステム。
  4. 前記マーカーデバイスが送信部を有する場合において、n=1である、請求項1に記載のシステム。
  5. 前記マーカーデバイスがトランスポンダを有する場合において、n=2である、請求項1に記載のシステム。
  6. 前記制御モジュールは、前記プローブを用いて収集される画像を表示するように構成されるディスプレイが、前記マーカーデバイスから前記プローブが受信した信号に基づいて、明るい領域を前記画像の中に含めることを行わせるように構成される、請求項1に記載のシステム。
  7. 器具の位置を判定するためにシステムが実行する方法であって:
    制御モジュールが、イメージングプローブのフレームレートを推定するステップ;
    前記制御モジュールが、前記器具に搭載されるマーカーデバイスから検出ウィンドウ内で受信されるインパルスを含むトレースを分析し、到来時間を判定するために前記マーカーデバイスの位置に最も合致する振幅が最大値を示すタイミングを見するステップであって、前記検出ウィンドウはT及び2Tの間にある検出期間detectを含み、Tはフレームレートである、ステップ;
    記マーカーデバイスから返ってくるエコーをシミュレーションするために、前記マーカーデバイスから前記イメージングプローブへ、前記到来時間より遅延したタイミングで音響フィードバック信号を放出するステップ;及び
    ディスプレイが、画像の中で前記器具の位置を識別するための信号を表示するステップ;
    を有する方法。
  8. 前記フレームレートを推定することが、ある時間期間にわたって受信信号を監視し、前記インパルスの支配的な周期を判定するように前記受信信号を分析することを含む、請求項7に記載の方法。
  9. 前記音響フィードバック信号を放出することが、前記到来時間より遅延したタイミングである+nTにおいてフレームに前記音響フィードバック信号を放出することを含み、tはセンサにより受信される信号の振幅が最大値を示すタイミングを示し、Tはフレームレートであり、nは整数である、請求項7に記載の方法。
  10. 前記マーカーデバイスが送信部を有する場合において、n=1である、請求項9に記載の方法。
  11. 前記マーカーデバイスがトランスポンダを有する場合において、n=2である、請求項9に記載の方法。
  12. 前記画像の中で信号を表示することが、前記画像の中で前記器具の位置を識別するための信号を点滅させることを含む、請求項7に記載の方法。
  13. 画像の中で前記器具の位置を識別するための信号を表示することが、前記画像の中で表示される前記器具の位置を識別するための信号の視覚的属性を変更することを含む、請求項7に記載の方法。
JP2016522935A 2013-06-28 2014-06-27 ハイライトシステム及び判定方法 Active JP6434006B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361840506P 2013-06-28 2013-06-28
US61/840,506 2013-06-28
PCT/IB2014/062646 WO2014207706A1 (en) 2013-06-28 2014-06-27 Acoustic highlighting of interventional instruments

Publications (2)

Publication Number Publication Date
JP2016523168A JP2016523168A (ja) 2016-08-08
JP6434006B2 true JP6434006B2 (ja) 2018-12-05

Family

ID=51357966

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016522935A Active JP6434006B2 (ja) 2013-06-28 2014-06-27 ハイライトシステム及び判定方法

Country Status (5)

Country Link
US (1) US10548563B2 (ja)
EP (1) EP3013246B1 (ja)
JP (1) JP6434006B2 (ja)
CN (1) CN105431092B (ja)
WO (1) WO2014207706A1 (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106236140B (zh) * 2016-08-25 2019-11-08 成都优途科技有限公司 一种超声成像方法、装置及***
WO2018108638A1 (en) * 2016-12-12 2018-06-21 Koninklijke Philips N.V. Smart tracked interventional tools including wireless transceiver
WO2018134138A1 (en) * 2017-01-19 2018-07-26 Koninklijke Philips N.V. System and method for imaging and tracking interventional devices
JP7360946B2 (ja) * 2017-02-14 2023-10-13 コーニンクレッカ フィリップス エヌ ヴェ 装置追跡に対する超音波システムにおける焦点追跡
WO2019075544A1 (en) * 2017-10-19 2019-04-25 Ventripoint Diagnostics Ltd POSITIONING DEVICE AND METHOD
EP3632331A1 (en) * 2018-10-05 2020-04-08 Koninklijke Philips N.V. Interventional device positioning using ultrasound signals
US20210251602A1 (en) * 2018-08-22 2021-08-19 Koninklijke Philips N.V. System, device and method for constraining sensor tracking estimates in interventional acoustic imaging
WO2020099281A1 (en) * 2018-11-15 2020-05-22 Koninklijke Philips N.V. Simultaneous sensor tracking in medical interventions

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4249539A (en) 1979-02-09 1981-02-10 Technicare Corporation Ultrasound needle tip localization system
JP2739236B2 (ja) * 1989-06-09 1998-04-15 株式会社日立メディコ 超音波トランスポンダー及び超音波診断装置
US5158088A (en) 1990-11-14 1992-10-27 Advanced Technology Laboratories, Inc. Ultrasonic diagnostic systems for imaging medical instruments within the body
US5161536A (en) * 1991-03-22 1992-11-10 Catheter Technology Ultrasonic position indicating apparatus and methods
JPH057589A (ja) 1991-07-05 1993-01-19 Toshiba Corp 超音波治療装置および超音波トランスポンダ
JP3300419B2 (ja) * 1991-08-21 2002-07-08 株式会社東芝 血栓溶解治療装置
US5779638A (en) 1995-03-28 1998-07-14 Sonometrics Corporation Ultrasound-based 3-D tracking system using a digital signal processor
DE19548000C1 (de) * 1995-12-21 1997-07-10 Dornier Medizintechnik Vorrichtung zur Ortung von Konkrementen im Körper eines Patienten
US6869431B2 (en) * 1997-07-08 2005-03-22 Atrionix, Inc. Medical device with sensor cooperating with expandable member
JP4095729B2 (ja) * 1998-10-26 2008-06-04 株式会社日立製作所 治療用超音波装置
WO2004105583A2 (en) * 2003-05-23 2004-12-09 Arizona Board Of Regents Piezo micro-markers for ultrasound medical diagnostics
HRP20030990A2 (en) * 2003-11-27 2006-02-28 Branko Breyer Ivo Čikeš System for guidance and control of minimum invasive delivery of therapy with medical agents
DE602004024580D1 (de) 2003-12-22 2010-01-21 Koninkl Philips Electronics Nv System zum führen eines medizinischen instruments im körper eines patienten
CN100473355C (zh) * 2003-12-22 2009-04-01 皇家飞利浦电子股份有限公司 用于把医疗仪器导入到病人体内的***
WO2005070299A1 (en) * 2004-01-16 2005-08-04 The University Of Houston System Methods and apparatus for medical imaging
WO2009063360A1 (en) 2007-11-14 2009-05-22 Koninklijke Philips Electronics, N.V. System and method for automatic calibration of tracked ultrasound
IT1392888B1 (it) * 2008-07-24 2012-04-02 Esaote Spa Dispositivo e metodo di guida di utensili chirurgici mediante imaging ecografico.
CN102869308B (zh) * 2010-05-03 2015-04-29 皇家飞利浦电子股份有限公司 用于对介入工具上的(一个或多个)超声换能器进行超声跟踪的设备和方法
EP2723241B1 (en) 2011-06-27 2014-11-19 Koninklijke Philips N.V. Ultrasound-image-guide system and volume-motion-base calibration method

Also Published As

Publication number Publication date
US10548563B2 (en) 2020-02-04
JP2016523168A (ja) 2016-08-08
CN105431092B (zh) 2018-11-06
CN105431092A (zh) 2016-03-23
EP3013246B1 (en) 2021-08-11
US20160135780A1 (en) 2016-05-19
WO2014207706A1 (en) 2014-12-31
EP3013246A1 (en) 2016-05-04

Similar Documents

Publication Publication Date Title
US20230093745A1 (en) Scanner independent tracking of interventional instruments
JP6434006B2 (ja) ハイライトシステム及び判定方法
US10610196B2 (en) Shape injection into ultrasound image to calibrate beam patterns in real-time
US11116582B2 (en) Apparatus for determining a motion relation
JP2018515251A (ja) 画像誘導式生検のための処置中の精度フィードバック
US20150173723A1 (en) Method and system for automatic needle recalibration detection
US20140276003A1 (en) Systems and Methods to Detect and Present Interventional Devices via Ultrasound Imaging
JP2013540261A (ja) Rfidタグによる位置決定
JP2020506005A (ja) 装置追跡に対する超音波システムにおける経路追跡
JP2019533536A (ja) 追跡信頼性に関するフィードバックを用いて介入器具を追跡するシステム及び方法
US20220168050A1 (en) Ultrasound Probe with Target Tracking Capability
CN116058873A (zh) 通过基于多普勒和图像的脉管区分的互操作优化功能
US11324479B2 (en) Shape injection into ultrasound image to calibrate beam patterns in real-time
EP4003181A1 (en) Ultrasound object point tracking
CN116782831A (zh) 用于确定位置信息的***和方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170623

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180223

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180320

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180618

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181009

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181107

R150 Certificate of patent or registration of utility model

Ref document number: 6434006

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250