JP2021521949A - インターベンショナルx線画像及びディープラーニングを用いたインタラクティブ冠動脈ラベル付け - Google Patents
インターベンショナルx線画像及びディープラーニングを用いたインタラクティブ冠動脈ラベル付け Download PDFInfo
- Publication number
- JP2021521949A JP2021521949A JP2020558573A JP2020558573A JP2021521949A JP 2021521949 A JP2021521949 A JP 2021521949A JP 2020558573 A JP2020558573 A JP 2020558573A JP 2020558573 A JP2020558573 A JP 2020558573A JP 2021521949 A JP2021521949 A JP 2021521949A
- Authority
- JP
- Japan
- Prior art keywords
- vascular
- diagnostic image
- label
- tree
- deviation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000002372 labelling Methods 0.000 title description 16
- 238000013135 deep learning Methods 0.000 title description 4
- 230000002452 interceptive effect Effects 0.000 title description 3
- 230000002792 vascular Effects 0.000 claims abstract description 171
- 238000012549 training Methods 0.000 claims abstract description 104
- 238000000034 method Methods 0.000 claims abstract description 39
- 210000004204 blood vessel Anatomy 0.000 claims description 57
- 238000004590 computer program Methods 0.000 claims description 8
- 238000012545 processing Methods 0.000 claims description 7
- 230000004044 response Effects 0.000 claims description 5
- 230000011218 segmentation Effects 0.000 claims description 5
- 210000005166 vasculature Anatomy 0.000 abstract description 37
- 238000002059 diagnostic imaging Methods 0.000 abstract description 7
- 230000008569 process Effects 0.000 abstract description 6
- 238000013459 approach Methods 0.000 description 19
- 238000003384 imaging method Methods 0.000 description 15
- 238000000605 extraction Methods 0.000 description 8
- 238000011282 treatment Methods 0.000 description 8
- 238000004458 analytical method Methods 0.000 description 6
- 238000013146 percutaneous coronary intervention Methods 0.000 description 5
- 230000000007 visual effect Effects 0.000 description 5
- 230000003993 interaction Effects 0.000 description 4
- 210000004351 coronary vessel Anatomy 0.000 description 3
- 230000001419 dependent effect Effects 0.000 description 3
- 208000031481 Pathologic Constriction Diseases 0.000 description 2
- 230000002411 adverse Effects 0.000 description 2
- 210000003484 anatomy Anatomy 0.000 description 2
- 210000001367 artery Anatomy 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 230000002950 deficient Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 201000010099 disease Diseases 0.000 description 2
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 2
- 238000002595 magnetic resonance imaging Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000000877 morphologic effect Effects 0.000 description 2
- 230000003252 repetitive effect Effects 0.000 description 2
- 230000005477 standard model Effects 0.000 description 2
- 238000012285 ultrasound imaging Methods 0.000 description 2
- 238000012800 visualization Methods 0.000 description 2
- 201000000057 Coronary Stenosis Diseases 0.000 description 1
- 206010011089 Coronary artery stenosis Diseases 0.000 description 1
- 238000002591 computed tomography Methods 0.000 description 1
- 208000029078 coronary artery disease Diseases 0.000 description 1
- 238000013434 data augmentation Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 238000002324 minimally invasive surgery Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000002600 positron emission tomography Methods 0.000 description 1
- 238000002601 radiography Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000007670 refining Methods 0.000 description 1
- 208000037804 stenosis Diseases 0.000 description 1
- 230000036262 stenosis Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000002560 therapeutic procedure Methods 0.000 description 1
- 238000004804 winding Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H10/00—ICT specially adapted for the handling or processing of patient-related medical or healthcare data
- G16H10/60—ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/50—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30101—Blood vessel; Artery; Vein; Vascular
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- General Health & Medical Sciences (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Analysis (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Abstract
Description
Claims (15)
- 血管系を分類する方法において、
a)第1の血管樹を表す診断画像データを使用して、前記血管系の初期モデルを用いてトレーニング装置をトレーニングするステップであって、前記診断画像データが、前記第1の血管樹の少なくとも1つの血管に対する対応する血管ラベルを有する、ステップと、
b)第2の血管樹を表す少なくとも1つの診断画像を入力するステップと、
c)前記第1の血管樹と前記第2の血管樹との間の少なくとも1つの偏差を識別するステップと、
d)前記識別に応答して、前記少なくとも1つの偏差の標示をユーザに対して出力し、前記少なくとも1つの偏差に対する少なくとも1つのラベルを提供するステップと、
e)前記少なくとも1つの偏差及び前記少なくとも1つのラベルに基づいて、前記血管系を分類するために前記初期モデルを調整するステップと、
を有する方法。 - 前記少なくとも1つのラベルを提供するステップは、前記少なくとも1つのラベルを示す第1のユーザ入力を前記ユーザから受信するステップを含む、請求項1に記載の方法。
- 前記血管系を分類するために前記初期モデルを調整するステップは、複数の診断画像に対してステップb)乃至e)を反復的に繰り返すステップを含む、請求項1に記載の方法。
- 前記初期モデルを調整するステップは、前記第2の血管樹を表す前記少なくとも1つの診断画像及び前記対応する少なくとも1つのラベルと共に、前記第1の血管樹を表す前記診断画像データを使用して、前記トレーニング装置を再トレーニングするステップを含む、請求項1に記載の方法。
- 前記少なくとも1つの診断画像をセグメント化することによって、前記少なくとも1つの診断画像における前記第2の血管樹の幾何学的形状を識別するステップと、
前記セグメント化に基づいて、前記第2の血管樹の複数の血管のそれぞれの中心線情報を識別し、前記中心線情報を抽出するステップと、
を有する、請求項1に記載の方法。 - 前記中心線情報は、前記少なくとも1つの診断画像と共に入力される、請求項5に記載の方法。
- 前記偏差は、前記第1の血管樹の幾何学的形状と前記第2の血管樹の幾何学的形状との間のばらつきを有する、請求項1に記載の方法。
- 前記診断画像データは、複数の画像、特に10000乃至100の画像、更に具体的には1000乃至100の画像を有する、請求項1に記載の方法。
- 前記トレーニング装置は、外部から引き起こされたばらつきを前記初期モデルに含めるように更にトレーニングされる、請求項1に記載の方法。
- 血管系を分類するための分類システムにおいて、前記分類システムが、
第1の血管樹を表す診断画像データを使用して前記血管系の初期モデルでトレーニングされるように構成されたトレーニング装置であって、前記診断画像データが、前記第1の血管樹の少なくとも1つの血管に対する対応する血管ラベルを有する、前記トレーニング装置と、
推論ユニットであって、
第2の血管樹を表す少なくとも1つの診断画像を受信するように構成された入力ユニットと、前記第1の血管樹と前記第2の血管樹との間の少なくとも1つの偏差を識別し、
前記識別に応答して、前記少なくとも1つの偏差の標示をユーザに対して出力し、前記少なくとも1つの偏差に対して少なくとも1つのラベルを提供する、
ように構成された前記推論ユニットと、
を有し、
前記トレーニング装置は、前記少なくとも1つの偏差及び前記少なくとも1つのラベルに基づいて、前記血管系を分類するために前記初期モデルを調整するように構成される、
分類システム。 - 前記少なくとも1つの偏差の前記標示をユーザに対して表示するように構成された表示ユニットと、前記少なくとも1つのラベルを示す第1のユーザ入力を前記ユーザから受信するように構成されたユーザインタフェースとを更に有する、請求項10に記載の分類システム。
- 前記推論ユニットは、少なくとも前記血管系、前記血管ラベル、及び前記少なくとも1つのラベルを有する医療表現を生成し、前記表現をデータベースに送信するように更に構成される、請求項10に記載の分類システム。
- 前記データベースは、電子医療記録(EMR)を有し、前記医療表現は、前記電子医療記録の所定のフォーマットに従って生成される、請求項12に記載の分類システム。
- 処理ユニットによって実行される場合に、請求項10乃至13のいずれか一項に記載の分類システムを制御するために請求項1乃至9のいずれか1項に記載の方法を実行するように構成されたコンピュータプログラム。
- 請求項14に記載のコンピュータプログラムを記憶したコンピュータ可読媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP18170529.4 | 2018-05-03 | ||
EP18170529.4A EP3564961A1 (en) | 2018-05-03 | 2018-05-03 | Interactive coronary labeling using interventional x-ray images and deep learning |
PCT/EP2019/060430 WO2019211131A1 (en) | 2018-05-03 | 2019-04-24 | Interactive coronary labeling using interventional x-ray images and deep learning |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021521949A true JP2021521949A (ja) | 2021-08-30 |
JPWO2019211131A5 JPWO2019211131A5 (ja) | 2022-04-18 |
Family
ID=62110972
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020558573A Pending JP2021521949A (ja) | 2018-05-03 | 2019-04-24 | インターベンショナルx線画像及びディープラーニングを用いたインタラクティブ冠動脈ラベル付け |
Country Status (5)
Country | Link |
---|---|
US (2) | US11861825B2 (ja) |
EP (2) | EP3564961A1 (ja) |
JP (1) | JP2021521949A (ja) |
CN (1) | CN112074912A (ja) |
WO (1) | WO2019211131A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022018415A (ja) * | 2020-07-15 | 2022-01-27 | キヤノンメディカルシステムズ株式会社 | 医用データ処理装置及び方法 |
CN113487628B (zh) * | 2021-07-07 | 2024-02-23 | 广州市大道医疗科技有限公司 | 模型训练的方法及冠状血管识别方法、装置、设备和介质 |
WO2023079657A1 (ja) * | 2021-11-04 | 2023-05-11 | 国立大学法人東北大学 | 情報処理装置、木構造を示す器官の構造の対応付け方法、及び、木構造を示す器官の構造の対応付けプログラム |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008520324A (ja) * | 2004-11-19 | 2008-06-19 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | コンピュータ支援による肺結節誤検出低減における不均衡なケース数を克服するための層化方法 |
JP2013192624A (ja) * | 2012-03-16 | 2013-09-30 | Hitachi Ltd | 医用画像診断支援装置、医用画像診断支援方法ならびにコンピュータプログラム |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03102477U (ja) | 1990-02-05 | 1991-10-24 | ||
JP3231810B2 (ja) | 1990-08-28 | 2001-11-26 | アーチ・デベロップメント・コーポレーション | ニューラル・ネットワークを用いた鑑別診断支援方法 |
JPH04125779U (ja) | 1991-05-02 | 1992-11-17 | 忠 臣 黄 | アコ−デイオンカ−テンブレ−ドの成型装置 |
US7912528B2 (en) * | 2003-06-25 | 2011-03-22 | Siemens Medical Solutions Usa, Inc. | Systems and methods for automated diagnosis and decision support for heart related diseases and conditions |
US7519207B2 (en) | 2004-11-19 | 2009-04-14 | Carestream Health, Inc. | Detection and correction method for radiograph orientation |
US9129417B2 (en) | 2012-02-21 | 2015-09-08 | Siemens Aktiengesellschaft | Method and system for coronary artery centerline extraction |
EP3723041A1 (en) * | 2012-10-24 | 2020-10-14 | CathWorks Ltd. | Automated measurement system and method for coronary artery disease scoring |
WO2015059706A2 (en) * | 2013-10-24 | 2015-04-30 | Cathworks Ltd. | Vascular characteristic determination with correspondence modeling of a vascular tree |
WO2015134665A1 (en) | 2014-03-04 | 2015-09-11 | SignalSense, Inc. | Classifying data with deep learning neural records incrementally refined through expert input |
US9785746B2 (en) * | 2014-03-31 | 2017-10-10 | Heartflow, Inc. | Systems and methods for determining blood flow characteristics using flow ratio |
US9595089B2 (en) * | 2014-05-09 | 2017-03-14 | Siemens Healthcare Gmbh | Method and system for non-invasive computation of hemodynamic indices for coronary artery stenosis |
US10595790B2 (en) * | 2014-12-16 | 2020-03-24 | Siemens Healthcare Gmbh | Method and system for personalized non-invasive hemodynamic assessment of renal artery stenosis from medical images |
US10311566B2 (en) | 2015-06-12 | 2019-06-04 | International Business Machines Corporation | Methods and systems for automatically determining image characteristics serving as a basis for a diagnosis associated with an image study type |
WO2017114700A1 (en) * | 2015-12-30 | 2017-07-06 | Koninklijke Philips N.V. | Three dimensional model of a body part |
EP3246873B1 (en) * | 2016-07-15 | 2018-07-11 | Siemens Healthcare GmbH | Method and data processing unit for segmenting an object in a medical image |
JP2018061771A (ja) | 2016-10-14 | 2018-04-19 | 株式会社日立製作所 | 画像処理装置、及び画像処理方法 |
CN107977668A (zh) * | 2017-07-28 | 2018-05-01 | 北京物灵智能科技有限公司 | 一种机器人图像识别方法及*** |
CN107563123A (zh) * | 2017-09-27 | 2018-01-09 | 百度在线网络技术(北京)有限公司 | 用于标注医学图像的方法和装置 |
-
2018
- 2018-05-03 EP EP18170529.4A patent/EP3564961A1/en not_active Withdrawn
-
2019
- 2019-04-24 WO PCT/EP2019/060430 patent/WO2019211131A1/en active Application Filing
- 2019-04-24 JP JP2020558573A patent/JP2021521949A/ja active Pending
- 2019-04-24 EP EP19718718.0A patent/EP3788631A1/en active Pending
- 2019-04-24 CN CN201980029300.3A patent/CN112074912A/zh active Pending
- 2019-04-24 US US17/052,379 patent/US11861825B2/en active Active
-
2023
- 2023-11-14 US US18/508,319 patent/US20240078676A1/en active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008520324A (ja) * | 2004-11-19 | 2008-06-19 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | コンピュータ支援による肺結節誤検出低減における不均衡なケース数を克服するための層化方法 |
JP2013192624A (ja) * | 2012-03-16 | 2013-09-30 | Hitachi Ltd | 医用画像診断支援装置、医用画像診断支援方法ならびにコンピュータプログラム |
Also Published As
Publication number | Publication date |
---|---|
US20210174500A1 (en) | 2021-06-10 |
EP3788631A1 (en) | 2021-03-10 |
CN112074912A (zh) | 2020-12-11 |
US20240078676A1 (en) | 2024-03-07 |
EP3564961A1 (en) | 2019-11-06 |
US11861825B2 (en) | 2024-01-02 |
WO2019211131A1 (en) | 2019-11-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10460838B2 (en) | Automated anatomically-based reporting of medical images via image annotation | |
US20180060535A1 (en) | Updating probabilities of conditions based on annotations on medical images | |
US10729396B2 (en) | Tracking anatomical findings within medical images | |
US11443201B2 (en) | Artificial intelligence-based self-learning in medical imaging | |
US20240078676A1 (en) | Interactive coronary labeling using interventional x-ray images and deep learning | |
US11610667B2 (en) | System and method for automated annotation of radiology findings | |
JP6930411B2 (ja) | 情報処理装置及び情報処理方法 | |
EP3432215A1 (en) | Automated measurement based on deep learning | |
CN107106104B (zh) | 用于骨科分析和治疗设计的***和方法 | |
US20210059758A1 (en) | System and Method for Identification, Labeling, and Tracking of a Medical Instrument | |
US20180060534A1 (en) | Verifying annotations on medical images using stored rules | |
US20180060488A1 (en) | Customizing annotations on medical images | |
EP3989828B1 (en) | Automated coronary angiography analysis | |
EP4002275A1 (en) | System and method for visualizing placement of a medical tube or line | |
US20220399107A1 (en) | Automated protocoling in medical imaging systems | |
US20220331556A1 (en) | System and method for visualizing placement of a medical tube or line | |
JP2017204041A (ja) | 所見情報作成装置及びシステム | |
US20170322684A1 (en) | Automation Of Clinical Scoring For Decision Support | |
US11657519B2 (en) | Method for deformation correction | |
US20210383539A1 (en) | Orientation detection for 2d vessel segmentation for angio-ffr | |
US20240164845A1 (en) | Artificial Intelligence System and Method for Defining and Visualizing Placement of a Catheter in a Patient Coordinate System Together with an Assessment of Typical Complications | |
CN118072065A (zh) | 用于利用患者坐标系来限定和可视化导管的放置的人工智能***和方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220408 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220408 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230125 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230207 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20230424 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230731 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231017 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20240116 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240402 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240613 |