JP7437294B2 - 光干渉断層撮影画像等の1つ以上の画像における管腔、ステント及び/又はアーチファクトの検出 - Google Patents
光干渉断層撮影画像等の1つ以上の画像における管腔、ステント及び/又はアーチファクトの検出 Download PDFInfo
- Publication number
- JP7437294B2 JP7437294B2 JP2020201493A JP2020201493A JP7437294B2 JP 7437294 B2 JP7437294 B2 JP 7437294B2 JP 2020201493 A JP2020201493 A JP 2020201493A JP 2020201493 A JP2020201493 A JP 2020201493A JP 7437294 B2 JP7437294 B2 JP 7437294B2
- Authority
- JP
- Japan
- Prior art keywords
- stent
- lumen
- edge
- processors
- peak
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012014 optical coherence tomography Methods 0.000 title claims description 107
- 238000001514 detection method Methods 0.000 title claims description 80
- 238000000034 method Methods 0.000 claims description 128
- 238000003384 imaging method Methods 0.000 claims description 36
- 238000012545 processing Methods 0.000 claims description 36
- 238000003860 storage Methods 0.000 claims description 36
- 210000004204 blood vessel Anatomy 0.000 claims description 29
- 230000003287 optical effect Effects 0.000 claims description 29
- 210000004872 soft tissue Anatomy 0.000 claims description 28
- 230000008569 process Effects 0.000 claims description 27
- 210000001519 tissue Anatomy 0.000 claims description 11
- 238000004364 calculation method Methods 0.000 claims description 10
- 238000009825 accumulation Methods 0.000 claims description 8
- 238000000605 extraction Methods 0.000 claims description 6
- 210000000056 organ Anatomy 0.000 claims description 3
- 239000000284 extract Substances 0.000 claims description 2
- 230000002452 interceptive effect Effects 0.000 claims description 2
- 210000001367 artery Anatomy 0.000 claims 1
- 230000007717 exclusion Effects 0.000 claims 1
- 210000000936 intestine Anatomy 0.000 claims 1
- 210000003462 vein Anatomy 0.000 claims 1
- 239000000523 sample Substances 0.000 description 75
- 230000000875 corresponding effect Effects 0.000 description 34
- 238000003708 edge detection Methods 0.000 description 30
- 238000001914 filtration Methods 0.000 description 30
- 238000013459 approach Methods 0.000 description 18
- 230000000630 rising effect Effects 0.000 description 16
- 238000010586 diagram Methods 0.000 description 11
- 238000004422 calculation algorithm Methods 0.000 description 9
- 239000000835 fiber Substances 0.000 description 9
- 238000009499 grossing Methods 0.000 description 9
- 238000004519 manufacturing process Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 244000208734 Pisonia aculeata Species 0.000 description 7
- 238000004891 communication Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 7
- 230000008901 benefit Effects 0.000 description 6
- 230000000694 effects Effects 0.000 description 6
- 239000002184 metal Substances 0.000 description 6
- 229910052751 metal Inorganic materials 0.000 description 6
- 238000007781 pre-processing Methods 0.000 description 6
- 238000005286 illumination Methods 0.000 description 5
- 230000001276 controlling effect Effects 0.000 description 4
- 230000033001 locomotion Effects 0.000 description 4
- 238000005259 measurement Methods 0.000 description 4
- 230000005855 radiation Effects 0.000 description 4
- 230000007704 transition Effects 0.000 description 4
- 230000003044 adaptive effect Effects 0.000 description 3
- 210000004369 blood Anatomy 0.000 description 3
- 239000008280 blood Substances 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000009826 distribution Methods 0.000 description 3
- 238000003709 image segmentation Methods 0.000 description 3
- 238000011160 research Methods 0.000 description 3
- 230000011218 segmentation Effects 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 238000001228 spectrum Methods 0.000 description 3
- 238000013519 translation Methods 0.000 description 3
- 230000000747 cardiac effect Effects 0.000 description 2
- 230000002596 correlated effect Effects 0.000 description 2
- 238000005520 cutting process Methods 0.000 description 2
- 230000001934 delay Effects 0.000 description 2
- 238000003745 diagnosis Methods 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 238000002608 intravascular ultrasound Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000000717 retained effect Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 210000001835 viscera Anatomy 0.000 description 2
- 208000037260 Atherosclerotic Plaque Diseases 0.000 description 1
- 238000005033 Fourier transform infrared spectroscopy Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000002146 bilateral effect Effects 0.000 description 1
- 239000002775 capsule Substances 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 210000004351 coronary vessel Anatomy 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000002059 diagnostic imaging Methods 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 210000001035 gastrointestinal tract Anatomy 0.000 description 1
- 229910052736 halogen Inorganic materials 0.000 description 1
- 150000002367 halogens Chemical class 0.000 description 1
- 238000003706 image smoothing Methods 0.000 description 1
- 238000003711 image thresholding Methods 0.000 description 1
- 230000036039 immunity Effects 0.000 description 1
- 238000005305 interferometry Methods 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 150000002739 metals Chemical class 0.000 description 1
- HJCCZIABCSDUPE-UHFFFAOYSA-N methyl 2-[4-[[4-methyl-6-(1-methylbenzimidazol-2-yl)-2-propylbenzimidazol-1-yl]methyl]phenyl]benzoate Chemical compound CCCC1=NC2=C(C)C=C(C=3N(C4=CC=CC=C4N=3)C)C=C2N1CC(C=C1)=CC=C1C1=CC=CC=C1C(=O)OC HJCCZIABCSDUPE-UHFFFAOYSA-N 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 210000003097 mucus Anatomy 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 229920001451 polypropylene glycol Polymers 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 238000000513 principal component analysis Methods 0.000 description 1
- 230000001012 protector Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 238000004611 spectroscopical analysis Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0062—Arrangements for scanning
- A61B5/0066—Optical coherence imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0071—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by measuring fluorescence emission
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0082—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
- A61B5/0084—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6846—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be brought in contact with an internal body part, i.e. invasive
- A61B5/6847—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be brought in contact with an internal body part, i.e. invasive mounted on an invasive device
- A61B5/6852—Catheters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7271—Specific aspects of physiological measurement analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/243—Classification techniques relating to the number of classes
- G06F18/2431—Multiple classes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/77—Retouching; Inpainting; Scratch removal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/12—Edge-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/13—Edge detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
- A61B2562/02—Details of sensors specially adapted for in-vivo measurements
- A61B2562/0233—Special features of optical sensors or probes classified in A61B5/00
- A61B2562/0242—Special features of optical sensors or probes classified in A61B5/00 for varying or adjusting the optical path length in the tissue
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10101—Optical tomography; Optical coherence tomography [OCT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30021—Catheter; Guide wire
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30028—Colon; Small intestine
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30052—Implant; Prosthesis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30101—Blood vessel; Artery; Vein; Vascular
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/03—Recognition of patterns in medical or anatomical images
- G06V2201/031—Recognition of patterns in medical or anatomical images of internal organs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/03—Recognition of patterns in medical or anatomical images
- G06V2201/034—Recognition of patterns in medical or anatomical images of medical instruments
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Public Health (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Veterinary Medicine (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Pathology (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Biophysics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Artificial Intelligence (AREA)
- Data Mining & Analysis (AREA)
- Signal Processing (AREA)
- Psychiatry (AREA)
- Physiology (AREA)
- General Engineering & Computer Science (AREA)
- Evolutionary Computation (AREA)
- Evolutionary Biology (AREA)
- Bioinformatics & Computational Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Endoscopes (AREA)
Description
本願は、2019年12月5日に提出された米国特許出願第62/944,064号に関連し、それに対する優先権を主張し、その開示全体は、参照により全体として本明細書に組み込まれる。
閾値=(平均+ピーク)/2
式中、「平均」は平滑化されたAラインの平均であり、「ピーク」は平滑化されたAラインの最大値である。この閾値を用いて、特定のAラインにおける管腔エッジに対応する最も有意なパルスを検出することができる。1つ以上の実施形態では、閾値を超えるパルスは、エッジパルス候補であり得る。パルス下の面積に関して全ての候補の中で最大であるパルスを、最大ピークであるとみなすことができる。最高ピークの2つ目の幅は、最大ピーク付近のAラインに沿った1次元勾配信号として定義することができ、平滑化されたAラインの管腔エッジ点の正確な位置を特定するために用いることができる。同ピークの3つ目の幅は、2つ目の幅と同様にAラインに沿って定義することができる。ただし、3つ目の幅では、勾配値はピーク値からゼロに低下し、これは、値の変化が停止し方向が反転し始めるポイントを示す。1つ以上の実施形態では、全てのAラインからこのように検出された全ての管腔エッジ点を一緒に配置することにより、血管の管腔エッジは、最大ピーク位置対Aラインインデックスの関数として形成される。
閾値=(平均+ピーク)/2,
式中、「平均」は平滑化されたAラインの平均であり、「ピーク」は平滑化されたAラインの最大値である。
閾値=(最小+ピーク)/2。
閾値=(ピーク)×2/3。
パルスサイズ閾値=平均-シグマ*k1
又は
FRGR閾値=平均+シグマ*k2。
式中、「平均」と「シグマ」は、対応する信号の平均と標準偏差であり、k1,k2は、好ましくは1から2の間で選択されるがこれに限定されない経験的パラメータである。
パルスサイズ閾値=平均+(ピーク-平均)/3
又は
FRGR閾値=平均+(ピーク-平均)/3。
パルスサイズ閾値=ピーク-(ピーク-平均)/2
又は
FRGR閾値=ピーク-(ピーク-平均)/2。
好ましくは、1つ以上の実施形態では、これらの識別されたエッジ点は管腔エッジとはみなされず、管腔パラメータの計算には用いられない。
Claims (23)
- 1つ以上の画像における1つ以上の管腔エッジ、1つ以上のステント若しくはステントストラット、及び/又は1つ以上のアーチファクトを検出するための光干渉断層撮影(「OCT」)システムであって、1つ以上のプロセッサを備え、
前記1つ以上のプロセッサは、
フィルタリングされたOCT極座標画像データを用いて、前記1つ以上の画像における前記管腔エッジ、1つ以上のステント若しくはステントストラット、及び/又は1つ以上のアーチファクトのうち1つ以上を検出し、
前記OCT極座標画像データからシースを検出し、除外又は除去し、
前記OCT極座標画像データの各1次元(1D)データ又はAラインにおいて最大ピーク又は最大パルスである主要ピーク及びエッジを発見し、前記主要ピーク及びエッジを用いて、前記主要ピーク及びエッジが有効な管腔エッジに対応するかどうかを少なくとも決定し、
ガイドワイヤを検出及び除去し、
前記主要ピークに基づいて、1つ以上のステント候補を検出及び処理し、
ステント領域をマージ及び拡張し、
陰影プロファイルを計算し、前記ステント若しくはステントストラット、及び/又は前記ステント若しくはステントストラットの中心を発見又は確認し、
管腔と前記1つ以上のステント若しくはステントストラットとの境界の近くの管腔エッジを抽出し、
欠測データ、又は、抽出された前記管腔エッジの1つ以上の部分を補間し、
1つ以上の埋没ステント又はステントストラットを見つけ、
前記管腔エッジを出力又は保存し、ステントストラットの情報、及び/又は、前記ステント若しくはステントストラットの前記中心の位置を出力又は保存する
ように動作する、システム。 - 前記1つ以上のプロセッサは、
前記1Dデータ又は前記Aラインのデータから、1つ以上のピーク及び関連エッジを検出すること、
前記1Dデータ又は前記Aラインのデータ上の1つ以上のピーク幅と、前記1Dデータ又は前記Aラインのデータの勾配とを計算すること、
同じAライン上の1つ以上のオブジェクトを受け付けること、
近傍のAライン間の接続性に基づいて、前記1つ以上のオブジェクトを一緒にグループ化すること、及び、
ピーク値、ピークとエッジの位置、及び異なる幅値に基づいて、異なるオブジェクトを区別すること、
のうち1つ以上を実行するように更に動作する、請求項1に記載のシステム。 - 前記1つ以上のプロセッサは、前記管腔エッジ及び前記1つ以上のステント若しくはステントストラットの検出の成功率を向上させるために、前記シース及び/又はガイドワイヤの1つ以上の特性を用いて、前記シースを除外又は除去し、前記ガイドワイヤを除去するように更に動作する、
請求項1に記載のシステム。 - 前記1つ以上のプロセッサは、エッジ位置ジャンプ及び狭いピーク幅パターンを用いて、前記ステント候補を検出するように更に動作する、
請求項1に記載のシステム。 - 前記1つ以上のプロセッサは、局所領域で前記1つ以上のステント候補の各々を処理し、前記ガイドワイヤ及び/又は前記1つ以上のステントストラットの両側の近傍の管腔エッジを検索するように更に動作する、
請求項1に記載のシステム。 - 前記1つ以上のプロセッサは、前記管腔エッジの前記補間を用いて、前記陰影プロファイルを計算し、前記1つ以上のステント若しくはステントストラットの陰影を確認又は発見し、かつ/又は、前記1つ以上のステント若しくはステントストラットの前記中心の位置を確認又は発見するように更に動作する、
請求項1に記載のシステム。 - 前記1つ以上のプロセッサは、
前記管腔と前記1つ以上のステント若しくはステントストラットとの前記境界の近くの2次ピークから、前記管腔エッジ又は前記管腔エッジの部分を抽出すること、
1つ以上の有効な管腔エッジ、又は前記境界の領域の近くの前記ステントのピークの後ろに2次ピークとして存在する前記管腔エッジの部分を識別すること、及び/又は
管腔エッジ結果の質を向上させるために、抽出された前記1つ以上の有効な管腔エッジを前記管腔エッジ結果に含めること、
のうち1つ以上を実行するように更に動作する、請求項1に記載のシステム。 - 前記管腔エッジ又は前記管腔エッジの前記部分の抽出は、前記2次ピークのうち、非管腔ピークとして識別済みであるか又は識別される前記Aライン上の前記主要ピークの外側の2次ピークを検索することにより、現在の前記管腔エッジの接続性に基づき、かつ/又は、
前記抽出プロセスは、更なるピークが見つからなくなるまで、前記1つ以上のステント若しくはステントストラットの両側を検索する、
請求項7に記載のシステム。 - 前記1つ以上のプロセッサは、
前記管腔エッジの欠落部分又は前記欠落している管腔エッジと前記管腔のピークの両方を補間して、前記管腔エッジの完全な閉曲線を形成すること、及び/又は、
補間された前記ピークのプロファイルに基づいて、前記陰影プロファイルを計算して、埋没した前記ステント領域を識別し、ピーク幅パターンを用いて前記ステント若しくはステントストラットを検索すること、
のうち1つ以上を実行するように更に動作する、請求項1に記載のシステム。 - 前記1つ以上のプロセッサは、
各Aライン上の前記情報に基づいて、極座標画像又は前記極座標画像データにおける前記管腔エッジ、前記ガイドワイヤ、前記1つ以上のステント若しくはステントストラット、及び/又は1つ以上の他のアーチファクトを検出し、次に、近傍Aライン情報を用いて、検出された前記管腔エッジ、ガイドワイヤ、1つ以上のステント若しくはステントストラット、及び/又は1つ以上の他のアーチファクトを、オブジェクト又はオブジェクトタイプにグループ化又は分類すること、
層のレベルが識別され、次のレベルの結果では、処理する関心領域が少ないか又は小さく、グループ化又は分類されたオブジェクト又はオブジェクトタイプの信用又は追加の信用があるような方式で、前記極座標画像から前記オブジェクトを抽出すること、及び/又は、
反復的な方法で処理を実行するか、又は反復的な方法を採用して、抽出されたオブジェクトに関する情報を各Aラインに追加し、前記極座標画像において検出することのできる全てのAライン及びオブジェクトを完全にカバーすること、
のうち1つ以上を実行するように更に動作する、請求項1に記載のシステム。 - 光を発するように動作する光源、
干渉光学系であって、(i)前記光源からの前記光を受け取り、オブジェクト又はサンプルを照射する第1の光と第2の参照光とに分割し、(ii)前記干渉光学系の参照ミラーで反射するように前記第2の参照光を送り、(iii)前記オブジェクト又はサンプルを照射した前記第1の光の反射光又は散乱光と、反射された前記第2の参照光とを互いに結合又は再結合させ、かつ干渉させることにより、1つ以上の干渉縞を生じる干渉光を生成するように動作する干渉光学系、及び/又は、
前記画像における前記1つ以上の管腔エッジ、前記1つ以上のステント及び/又は前記1つ以上のアーチファクトが検出され、前記1つ以上の画像から前記1つ以上のステント及び/又は前記1つ以上のアーチファクトが除去されるように、前記干渉光及び/又は前記1つ以上の干渉縞を連続して取得するように動作する1つ以上の検出器、
のうち1つ以上を更に備える、請求項1に記載のシステム。 - 少なくとも1つの画像における1つ以上の管腔エッジ、1つ以上のステント若しくはステントストラット、及び/又は1つ以上のアーチファクトを検出する方法であって、前記方法は、1つ以上のプロセッサを有する画像処理装置によって実行され、
前記1つ以上のプロセッサが、フィルタリングされた光干渉断層撮影(「OCT」)極座標画像データを用いて、前記1つ以上の画像における前記管腔エッジ、1つ以上のステント若しくはステントストラット、及び/又は1つ以上のアーチファクトのうち1つ以上を検出するステップと、
前記1つ以上のプロセッサが、前記OCT極座標画像データからシースを検出し、除外又は除去するステップと、
前記1つ以上のプロセッサが、前記OCT極座標画像データの各1次元(1D)データ又はAラインにおいて最大ピーク又は最大パルスである主要ピーク及びエッジを発見し、前記主要ピーク及びエッジを用いて、前記主要ピーク及びエッジが有効な管腔エッジに対応するかどうかを少なくとも決定するステップと、
前記1つ以上のプロセッサが、ガイドワイヤを検出及び除去するステップと、
前記1つ以上のプロセッサが、前記主要ピークに基づいて、1つ以上のステント候補を検出及び処理するステップと、
前記1つ以上のプロセッサが、ステント領域をマージ及び拡張するステップと、
前記1つ以上のプロセッサが、陰影プロファイルを計算し、前記ステント若しくはステントストラット、及び/又は前記ステント若しくはステントストラットの中心を発見又は確認するステップと、
前記1つ以上のプロセッサが、前記管腔と前記1つ以上のステント若しくはステントストラットとの境界の近くの管腔エッジを抽出するステップと、
前記1つ以上のプロセッサが、欠測データ、又は、抽出された前記管腔エッジの1つ以上の部分を補間するステップと、
前記1つ以上のプロセッサが、1つ以上の埋没ステント又はステントストラットを発見するステップと、
前記1つ以上のプロセッサが、前記管腔エッジを出力又は保存し、ステントストラットの情報、及び/又は、前記ステント若しくはステントストラットの前記中心の位置を出力又は保存するステップと、
を含む方法。 - 前記1つ以上のプロセッサが、前記1Dデータ又は前記Aラインのデータから、1つ以上のピーク及び関連エッジを検出するステップと、
前記1つ以上のプロセッサが、前記1Dデータ又は前記Aラインのデータ上の1つ以上のピーク幅と、前記1Dデータ又は前記Aラインのデータの勾配とを計算するステップと、
前記1つ以上のプロセッサが、同じAライン上の1つ以上のオブジェクトを受け入れるステップと、
前記1つ以上のプロセッサが、近傍のAライン間の接続性に基づいて、前記1つ以上のオブジェクトを一緒にグループ化するステップと、
前記1つ以上のプロセッサが、ピーク値、ピーク位置とエッジの位置、及び異なる幅値に基づいて、異なるオブジェクトを区別するステップと、
のうち1つ以上を更に含む、請求項12に記載の方法。 - 前記シースの前記除外又は除去と、前記ガイドワイヤの前記除去は、前記管腔エッジ及び前記1つ以上のステント若しくはステントストラットの検出の成功率を向上させるために、前記シース及び/又はガイドワイヤの1つ以上の特性を用いるステップを含む、
請求項12に記載の方法。 - 前記ステント候補の検出は、エッジ位置ジャンプ及び狭いピーク幅パターンを用いることを含む、
請求項12に記載の方法。 - 前記1つ以上のプロセッサによる前記1つ以上のステント候補の前記処理は、前記1つ以上のプロセッサが、局所領域で前記1つ以上のステント候補の各々を処理するステップと、前記1つ以上のプロセッサが、前記ガイドワイヤ及び/又は前記1つ以上のステントストラットの両側の近傍の管腔エッジを検索するステップとを含む、
請求項12に記載の方法。 - 前記1つ以上のプロセッサによる前記管腔エッジの前記補間は、前記1つ以上のプロセッサが前記陰影プロファイルを計算し、前記1つ以上のステント若しくはステントストラットの陰影を確認又は発見し、かつ/又は、前記1つ以上のステント若しくはステントストラットの前記中心の位置を確認又は発見するために用いられる、
請求項12に記載の方法。 - 前記1つ以上のプロセッサが、前記管腔と前記1つ以上のステント若しくはステントストラットとの前記境界の近くの2次ピークから、前記管腔エッジ又は前記管腔エッジの部分を抽出するステップ、
前記1つ以上のプロセッサが、1つ以上の有効な管腔エッジ、又は前記境界の領域の近くの前記ステントのピークの後ろに前記2次ピークとして存在する前記管腔エッジの部分を識別するステップ、及び/又は、
前記1つ以上のプロセッサが、管腔エッジ結果の質を向上させるために、抽出された前記1つ以上の有効な管腔エッジを前記管腔エッジ結果に含めるステップ、
のうち1つ以上を更に含む、請求項12に記載の方法。 - 前記1つ以上のプロセッサによる前記管腔エッジ又は前記管腔エッジの前記部分の抽出は、前記1つ以上のプロセッサが、前記2次ピークのうち、非管腔ピークとして識別済みであるか又は識別される前記Aライン上の前記主要ピークの外側の2次ピークを検索することにより、現在の管腔のエッジの接続性に基づき、かつ/又は、
前記抽出プロセスでは、前記1つ以上のプロセッサが、更なるピークが見つからなくなるまで、前記1つ以上のステント若しくはステントストラットの両側を検索する、
請求項18に記載の方法。 - 前記1つ以上のプロセッサによる前記欠測データ、又は、抽出された前記管腔エッジの前記1つ以上の部分の前記補間は、抽出された前記管腔エッジの欠落部分又は前記欠落している管腔エッジと前記管腔のピークの両方を補間して、前記管腔エッジの完全な閉曲線を形成するステップを含む、及び/又は、
前記1つ以上のプロセッサによる前記陰影プロファイル又は陰影蓄積プロファイルの前記計算は、補間された前記ピークのプロファイルに基づいて、前記陰影プロファイルを計算して、埋没した前記ステント領域を識別し、ピーク幅パターンを用いて前記ステント若しくはステントストラットを検索するステップを含む、
のうち1つ以上である、請求項12に記載の方法。 - 前記1つ以上のプロセッサが、各Aライン上の前記情報に基づいて、極座標画像又は前記極座標画像データにおける前記管腔エッジ、前記ガイドワイヤ、前記1つ以上のステント若しくはステントストラット、及び/又は1つ以上の他のアーチファクトを検出し、次に、近傍Aライン情報を用いて、検出された前記管腔エッジ、ガイドワイヤ、1つ以上のステント若しくはステントストラット、及び/又は1つ以上の他のアーチファクトを、オブジェクト又はオブジェクトタイプにグループ化又は分類するステップ、
層のレベルが識別され、次のレベルの結果では、処理する関心領域が少ないか又は小さく、グループ化又は分類されたオブジェクト又はオブジェクトタイプの信用又は追加の信用があるような方式で、前記1つ以上のプロセッサが、前記極座標画像から前記オブジェクトを抽出するステップ、及び/又は、
前記1つ以上のプロセッサが、反復的な方法で処理を実行するか、又は反復的な方法を採用して、抽出されたオブジェクトに関する情報を各Aラインに追加し、前記極座標画像において検出することのできる全てのAライン及びオブジェクトを完全にカバーするステップ、
のうち1つ以上を更に含む、請求項12に記載の方法。 - 前記少なくとも1つの画像内の撮像されている標的又はオブジェクトは、組織、軟部組織、血管、生物学的管状構造、動脈、腸、静脈、器官、及び/又は、撮像されている患者の生物学的構造のうちの1つ以上である、及び、
前記1つ以上のアーチファクトは、1つ又は複数のステント、1つ又は複数のステントストラット、1つ又は複数のガイドワイヤ、及び/又は、前記少なくとも1つの画像のイメージング手順に用いられる任意のツール若しくはコンポーネント、のうち1つ以上を含む、
のうち1つ以上である、請求項12に記載の方法。 - 少なくとも1つのプログラムを格納するコンピュータ可読記憶媒体であって、前記少なくとも1つのプログラムは、1つ以上のプロセッサに、少なくとも1つの画像における1つ以上の管腔エッジ、1つ以上のステント若しくはステントストラット及び/又は1つ以上のアーチファクトを検出する方法を実行させるように動作し、前記方法は、
フィルタリングされた光干渉断層撮影(「OCT」)極座標画像データを用いて、前記1つ以上の画像内の前記管腔エッジ、1つ以上のステント若しくはステントストラット、及び/又は1つ以上のアーチファクトのうち1つ以上を検出するステップと、
前記OCT極座標画像データからシースを検出し、除外又は除去するステップと、
前記OCT極座標画像データの各1次元(1D)データ又はAラインにおいて最大ピーク又は最大パルスである主要ピーク及びエッジを発見し、前記主要ピーク及びエッジを用いて、前記主要ピーク及びエッジが有効な管腔エッジに対応するかどうかを少なくとも決定するステップと、
ガイドワイヤを検出及び除去するステップと、
前記主要ピークに基づいて、1つ以上のステント候補を検出及び処理するステップと、
ステント領域をマージ及び拡張するステップと、
陰影プロファイルを計算し、前記ステント若しくはステントストラット、及び/又は前記ステント若しくはステントストラットの中心を発見又は確認するステップと、
前記管腔と前記1つ以上のステント若しくはステントストラットとの境界の近くの管腔エッジを抽出するステップと、
欠測データ、又は、抽出された前記管腔エッジの1つ以上の部分を補間するステップと、
1つ以上の埋没ステント又はステントストラットを発見するステップと、
前記管腔エッジを出力又は保存し、ステントストラットの情報、及び/又は、前記ステント若しくはステントストラットの前記中心の位置を出力又は保存するステップと、
を含む、コンピュータ可読記憶媒体。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201962944064P | 2019-12-05 | 2019-12-05 | |
US62/944,064 | 2019-12-05 | ||
US17/098,042 US11963740B2 (en) | 2019-12-05 | 2020-11-13 | Lumen, stent, and/or artifact detection in one or more images, such as in optical coherence tomography images |
US17/098,042 | 2020-11-13 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021102049A JP2021102049A (ja) | 2021-07-15 |
JP7437294B2 true JP7437294B2 (ja) | 2024-02-22 |
Family
ID=73694788
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020201493A Active JP7437294B2 (ja) | 2019-12-05 | 2020-12-04 | 光干渉断層撮影画像等の1つ以上の画像における管腔、ステント及び/又はアーチファクトの検出 |
Country Status (3)
Country | Link |
---|---|
US (1) | US11963740B2 (ja) |
EP (1) | EP3831279A1 (ja) |
JP (1) | JP7437294B2 (ja) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11382516B2 (en) * | 2018-06-08 | 2022-07-12 | Canon U.S.A., Inc. | Apparatuses, methods, and storage mediums for lumen and artifacts detection in one or more images, such as in optical coherence tomography images |
US11922633B2 (en) | 2020-06-30 | 2024-03-05 | Canon U.S.A., Inc. | Real-time lumen distance calculation based on three-dimensional (3D) A-line signal data |
US11972561B2 (en) | 2020-08-06 | 2024-04-30 | Canon U.S.A., Inc. | Auto-pullback triggering method for intracoronary imaging apparatuses or systems using blood clearing |
US11920929B2 (en) | 2020-08-06 | 2024-03-05 | Canon U.S.A., Inc. | Detecting and guiding optical connection(s) for one or more imaging modalities, such as in optical coherence tomography |
US11944778B2 (en) | 2020-08-06 | 2024-04-02 | Canon U.S.A., Inc. | Methods and systems for automatic pullback trigger |
CN113436099B (zh) * | 2021-06-25 | 2022-03-22 | 天津大学 | 血管内光学相干层析成像两级导管伪影去除方法 |
US11980443B2 (en) | 2021-07-16 | 2024-05-14 | Canon U.S.A., Inc. | Devices, systems, and methods for image synchronization in intracoronary imaging |
CN114862850B (zh) * | 2022-07-06 | 2022-09-20 | 深圳科亚医疗科技有限公司 | 一种血管医学图像的目标检测方法、装置及介质 |
CN116687576B (zh) * | 2023-07-28 | 2024-01-16 | 北京万思医疗器械有限公司 | 用于血管介入手术机器人的介入耗材控制方法 |
CN117291920B (zh) * | 2023-11-27 | 2024-03-12 | 天津恒宇医疗科技有限公司 | 基于oct成像的脂质斑块检测分析方法及*** |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110071404A1 (en) | 2009-09-23 | 2011-03-24 | Lightlab Imaging, Inc. | Lumen Morphology and Vascular Resistance Measurements Data Collection Systems, Apparatus and Methods |
JP2012505669A (ja) | 2008-10-14 | 2012-03-08 | ライトラブ イメージング, インコーポレイテッド | 光コヒーレンス断層撮影法を使用するステントストラット検出ならびに関連する測定および表示のための方法 |
JP2014158619A (ja) | 2013-02-20 | 2014-09-04 | Yd:Kk | 検出データ処理装置および画像表示装置。 |
JP2015535723A (ja) | 2012-10-05 | 2015-12-17 | ナサニエル ジェイ. ケンプ, | パラメータ確立、再生、およびアーチファクト除去3次元撮像のための方法およびシステム |
WO2016047713A1 (ja) | 2014-09-22 | 2016-03-31 | ホヤ レンズ タイランド リミテッド | 累進屈折力レンズ群 |
Family Cites Families (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6592549B2 (en) | 2001-03-14 | 2003-07-15 | Scimed Life Systems, Inc. | Rapid exchange stent delivery system and associated components |
US7065237B2 (en) * | 2001-12-10 | 2006-06-20 | Canon Kabushiki Kaisha | Image processing apparatus and method |
US7359554B2 (en) | 2002-08-26 | 2008-04-15 | Cleveland Clinic Foundation | System and method for identifying a vascular border |
WO2007041382A1 (en) | 2005-09-29 | 2007-04-12 | General Hospital Corporation | Arrangements and methods for providing multimodality microscopic imaging of one or more biological structures |
US7889348B2 (en) | 2005-10-14 | 2011-02-15 | The General Hospital Corporation | Arrangements and methods for facilitating photoluminescence imaging |
US11123047B2 (en) | 2008-01-28 | 2021-09-21 | The General Hospital Corporation | Hybrid systems and methods for multi-modal acquisition of intravascular imaging data and counteracting the effects of signal absorption in blood |
US9332942B2 (en) | 2008-01-28 | 2016-05-10 | The General Hospital Corporation | Systems, processes and computer-accessible medium for providing hybrid flourescence and optical coherence tomography imaging |
US20100092389A1 (en) | 2008-10-10 | 2010-04-15 | The General Hospital Corporation | Detection of atherosclerosis using indocyanine green |
WO2011149972A2 (en) | 2010-05-25 | 2011-12-01 | The General Hospital Corporation | Systems, devices, methods, apparatus and computer-accessible media for providing optical imaging of structures and compositions |
CA2837577C (en) | 2011-05-27 | 2018-05-29 | Lightlab Imaging, Inc. | Optical coherence tomography and pressure based systems and methods |
US9286673B2 (en) | 2012-10-05 | 2016-03-15 | Volcano Corporation | Systems for correcting distortions in a medical image and methods of use thereof |
US9307926B2 (en) | 2012-10-05 | 2016-04-12 | Volcano Corporation | Automatic stent detection |
US11272845B2 (en) | 2012-10-05 | 2022-03-15 | Philips Image Guided Therapy Corporation | System and method for instant and automatic border detection |
US9292918B2 (en) | 2012-10-05 | 2016-03-22 | Volcano Corporation | Methods and systems for transforming luminal images |
US8913084B2 (en) | 2012-12-21 | 2014-12-16 | Volcano Corporation | Method and apparatus for performing virtual pullback of an intravascular imaging device |
US9173591B2 (en) | 2013-03-08 | 2015-11-03 | Lightlab Imaging, Inc. | Stent visualization and malapposition detection systems, devices, and methods |
US9702762B2 (en) * | 2013-03-15 | 2017-07-11 | Lightlab Imaging, Inc. | Calibration and image processing devices, methods, and systems |
CN105636503B (zh) | 2013-09-30 | 2019-05-21 | 皇家飞利浦有限公司 | 用于光学形状感测的多用途内腔设计 |
US9058692B1 (en) | 2014-04-16 | 2015-06-16 | Heartflow, Inc. | Systems and methods for image-based object modeling using multiple image acquisitions or reconstructions |
US10213110B2 (en) * | 2015-01-27 | 2019-02-26 | Case Western Reserve University | Analysis of optical tomography (OCT) images |
US10140712B2 (en) * | 2015-05-17 | 2018-11-27 | Lightlab Imaging, Inc. | Detection of stent struts relative to side branches |
WO2017019634A1 (en) | 2015-07-25 | 2017-02-02 | Lightlab Imaging, Inc. | Intravascular data visualization method |
US10578422B2 (en) | 2016-06-08 | 2020-03-03 | Canon U.S.A., Inc. | Devices, systems, methods and storage mediums using full range optical coherence tomography |
WO2018031462A1 (en) | 2016-08-12 | 2018-02-15 | Canon U.S.A. Inc. | Coherence range imaging using common path interference |
US10952616B2 (en) | 2018-03-30 | 2021-03-23 | Canon U.S.A., Inc. | Fluorescence imaging apparatus |
US11382516B2 (en) | 2018-06-08 | 2022-07-12 | Canon U.S.A., Inc. | Apparatuses, methods, and storage mediums for lumen and artifacts detection in one or more images, such as in optical coherence tomography images |
US10743749B2 (en) | 2018-09-14 | 2020-08-18 | Canon U.S.A., Inc. | System and method for detecting optical probe connection |
US20210121132A1 (en) | 2019-10-24 | 2021-04-29 | Canon U.S.A., Inc. | Apparatus, methods and systems for fluorescence imaging |
-
2020
- 2020-11-13 US US17/098,042 patent/US11963740B2/en active Active
- 2020-12-02 EP EP20211147.2A patent/EP3831279A1/en active Pending
- 2020-12-04 JP JP2020201493A patent/JP7437294B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012505669A (ja) | 2008-10-14 | 2012-03-08 | ライトラブ イメージング, インコーポレイテッド | 光コヒーレンス断層撮影法を使用するステントストラット検出ならびに関連する測定および表示のための方法 |
US20110071404A1 (en) | 2009-09-23 | 2011-03-24 | Lightlab Imaging, Inc. | Lumen Morphology and Vascular Resistance Measurements Data Collection Systems, Apparatus and Methods |
JP2015535723A (ja) | 2012-10-05 | 2015-12-17 | ナサニエル ジェイ. ケンプ, | パラメータ確立、再生、およびアーチファクト除去3次元撮像のための方法およびシステム |
JP2014158619A (ja) | 2013-02-20 | 2014-09-04 | Yd:Kk | 検出データ処理装置および画像表示装置。 |
WO2016047713A1 (ja) | 2014-09-22 | 2016-03-31 | ホヤ レンズ タイランド リミテッド | 累進屈折力レンズ群 |
Non-Patent Citations (1)
Title |
---|
Hyeong Soo Nam, et al.,Automated detection of vessel lumen and stent struts in intravascular optical coherence tomography to evaluate stent apposition and neointimal coverage,Medical Physics,2016年03月14日,Vol. 43, No. 4,pp. 1662-1675 |
Also Published As
Publication number | Publication date |
---|---|
US11963740B2 (en) | 2024-04-23 |
US20210174125A1 (en) | 2021-06-10 |
EP3831279A1 (en) | 2021-06-09 |
JP2021102049A (ja) | 2021-07-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7437294B2 (ja) | 光干渉断層撮影画像等の1つ以上の画像における管腔、ステント及び/又はアーチファクトの検出 | |
JP6874055B2 (ja) | 光干渉断層撮影画像などの1つまたは複数の画像内の内腔およびアーチファクトの検出のための装置、方法および記憶媒体 | |
US9301687B2 (en) | System and method for OCT depth calibration | |
US11475560B2 (en) | Method, apparatus, and system to identify branches of a blood vessel | |
US9858668B2 (en) | Guidewire artifact removal in images | |
US20220104786A1 (en) | Apparatuses, systems, methods and storage mediums for performance of co-registration | |
EP2293714A1 (en) | Quantitative methods for obtaining tissue characteristics from optical coherence tomography images | |
US20220044428A1 (en) | Methods and systems for image synchronization | |
JP7135050B2 (ja) | 血管内画像処理のための血管内画像処理装置、方法及び非一時的記憶媒体 | |
US11922633B2 (en) | Real-time lumen distance calculation based on three-dimensional (3D) A-line signal data | |
US11920929B2 (en) | Detecting and guiding optical connection(s) for one or more imaging modalities, such as in optical coherence tomography | |
JP7426355B2 (ja) | 血液クリアリングを用いる冠動脈内イメージングの装置又はシステムのための自動プルバックトリガ方法 | |
US20230115191A1 (en) | Artifact removal from multimodality oct images | |
JP7497390B2 (ja) | 血管内機器の検出及び圧着測定のためのシステム及び方法 | |
US20240029305A1 (en) | Methods and systems for system self-diagnosis | |
JP7470761B2 (ja) | 手動管腔検出に基づく蛍光較正 | |
US20230108133A1 (en) | Devices, systems, and methods for detecting external elastic lamina (eel) from intravascular oct images | |
JP7514300B2 (ja) | 機械学習及びその結果の使用を含む人工知能コレジストレーション並びにマーカ検出 | |
US20230289956A1 (en) | System and Method for identifying potential false positive and blind spot locations in catheter-based multimodal images | |
JP2023054764A5 (ja) |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210405 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210405 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220216 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220308 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20220519 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220801 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221115 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20230127 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20230711 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231101 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20231110 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240116 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240209 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7437294 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |