JP6727140B2 - 異なる撮像モダリティのレジストレーションのための撮像機器 - Google Patents
異なる撮像モダリティのレジストレーションのための撮像機器 Download PDFInfo
- Publication number
- JP6727140B2 JP6727140B2 JP2016574243A JP2016574243A JP6727140B2 JP 6727140 B2 JP6727140 B2 JP 6727140B2 JP 2016574243 A JP2016574243 A JP 2016574243A JP 2016574243 A JP2016574243 A JP 2016574243A JP 6727140 B2 JP6727140 B2 JP 6727140B2
- Authority
- JP
- Japan
- Prior art keywords
- image data
- imaging
- cavity
- model
- abdominal cavity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 title claims description 100
- 210000000988 bone and bone Anatomy 0.000 claims description 33
- 210000000683 abdominal cavity Anatomy 0.000 claims description 29
- 238000000034 method Methods 0.000 claims description 26
- 238000004590 computer program Methods 0.000 claims description 22
- 238000012800 visualization Methods 0.000 claims description 21
- 210000005166 vasculature Anatomy 0.000 claims description 9
- 230000000873 masking effect Effects 0.000 claims description 8
- 230000001419 dependent effect Effects 0.000 claims description 7
- 210000000056 organ Anatomy 0.000 claims description 7
- 210000001015 abdomen Anatomy 0.000 claims description 3
- 239000003623 enhancer Substances 0.000 claims description 3
- 210000000038 chest Anatomy 0.000 description 15
- 230000011218 segmentation Effects 0.000 description 13
- 238000009877 rendering Methods 0.000 description 5
- 210000001519 tissue Anatomy 0.000 description 5
- 210000004197 pelvis Anatomy 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 210000004072 lung Anatomy 0.000 description 3
- 210000003049 pelvic bone Anatomy 0.000 description 3
- 210000000614 rib Anatomy 0.000 description 3
- 210000000115 thoracic cavity Anatomy 0.000 description 3
- 230000003187 abdominal effect Effects 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 210000003734 kidney Anatomy 0.000 description 2
- 210000004888 thoracic abdominal cavity Anatomy 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 230000003936 working memory Effects 0.000 description 2
- 239000002872 contrast media Substances 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000002195 synergetic effect Effects 0.000 description 1
- 230000002792 vascular Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/38—Registration of image sequences
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
- A61B6/032—Transmission computed tomography [CT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/149—Segmentation; Edge detection involving deformable models, e.g. active contour models
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10081—Computed x-ray tomography [CT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10088—Magnetic resonance imaging [MRI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10116—X-ray image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30008—Bone
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- General Health & Medical Sciences (AREA)
- Radiology & Medical Imaging (AREA)
- Pathology (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Biophysics (AREA)
- Public Health (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- High Energy & Nuclear Physics (AREA)
- Software Systems (AREA)
- Pulmonology (AREA)
- Optics & Photonics (AREA)
- Quality & Reliability (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
Description
腹腔の空胴モデルを提供するステップと、
第1の画像データを提供するステップと、
第1の画像データに基づいて、空胴モデルを適合させるステップと、
適合された空胴モデルに基づいて、第1の画像データにおける骨以外の構造をマスクがけするステップと、
マスクされた第1の画像データと第2の画像データとをレジストレーションするステップと、を含む。
−第1のステップS1において、腹腔の空胴モデルを提供することと、
−第2のステップS2において、第1の画像データを提供することと、
−第3のステップS3において、第1の画像データに基づいて、空胴モデルを適合させることと、
−第4のステップS4において、適合された空胴モデルに基づいて、第1の画像データにおける骨以外の構造をマスクすることと、
−第5のステップS5において、マスクされた第1の画像データと第2の画像データとをレジストレーションすることと、を含む。
Claims (14)
- 異なる撮像モダリティをレジストレーションするための撮像機器であって、
モデル提供部と、
第1の画像データ提供部と、
処理部と、
第2の画像データ提供部と、
レジストレーション部と、を備え、
前記モデル提供部は、腹腔の空胴モデルを提供し、
前記第1の画像データ提供部は、第1のモダリティによって患者の関心領域を示している第1の画像データを提供し、前記関心領域は前記腹腔を含み、
前記処理部は、(i)前記空胴モデルを前記第1の画像データに対してレジストレーションし、(ii)前記第1の画像データに基づいて前記空胴モデルを適合させ、(iii)適合された前記空胴モデルに基づいて前記第1の画像データにおける前記腹腔の少なくとも一部をマスクし、
前記第2の画像データ提供部は、第2のモダリティによって患者の前記関心領域の少なくとも一部を示している第2の画像データを提供し、
前記レジストレーション部は、マスクされた前記第1の画像データと、前記第2の画像データとをレジストレーションする、撮像機器。 - 前記第1の画像データにおける前記腹腔が、前記適合された空胴モデルに基づいてセグメント化される、請求項1に記載の撮像機器。
- 前記腹腔の空胴モデルが、胸部及び/又は腹部の少なくとも1つの臓器を含む、請求項1又は2に記載の撮像機器。
- 前記第1のモダリティの前記第1の画像データがCT又はMR画像データであり、前記第2のモダリティの前記第2の画像データがライブX線画像データである、請求項1乃至3の何れか一項に記載の撮像機器。
- 前記第1の画像データにおいてマスクされた前記腹腔の前記少なくとも一部が、造影された脈管構造を含む、請求項1乃至4の何れか一項に記載の撮像機器。
- 前記処理部が、前記適合された空胴モデルの少なくとも1つのパラメータに基づいて、前記第1の画像データにおける少なくとも1つの骨ランドマークのサブボリュームを推定する、請求項1乃至5の何れか一項に記載の撮像機器。
- 前記処理部が、前記第1の画像データにおけるサブボリュームを選択的にレンダリングする、請求項1乃至6の何れか一項に記載の撮像機器。
- 異なる撮像モダリティをレジストレーションするための撮像システムであって、
第1の撮像モダリティと、
第2の撮像モダリティと、
請求項1乃至7の何れか一項に記載の撮像機器と、を含み、
前記第1及び前記第2の撮像モダリティが、前記第1及び前記第2の画像データ提供部によって提供されることになる前記第1及び前記第2の画像データを取得する、撮像システム。 - レジストレーションされた画像データと、前記レジストレーションされた画像データの内部の骨ランドマークとを可視化する表示部を更に含む、請求項8に記載の撮像システム。
- 前記サブボリュームの可視化を選択的に有効又は無効にするセレクタを更に含む、請求項7に従属する請求項8又は9に記載の撮像システム。
- 前記第2の画像データにおける前記骨ランドマークの可視化を高める骨強調器を更に含む、請求項9又は請求項9に従属する請求項10に記載の撮像システム。
- 異なる撮像モダリティをレジストレーションするための方法であって、
腹腔の空胴モデルを提供するステップと、
前記腹腔を含む関心領域の第1の画像データを提供するステップと、
前記空胴モデルを前記第1の画像データに対してレジストレーションした後に前記第1の画像データに基づいて前記空胴モデルを適合させるステップと、
適合された前記空胴モデルに基づいて、前記第1の画像データにおける前記腹腔をマスクするステップと、
第2のモダリティによって患者の前記関心領域の少なくとも一部を示している第2の画像データを提供するステップと、
マスクされた前記第1の画像データと、前記第2の画像データとをレジストレーションするステップと、を含む、方法。 - 処理部によって実行される際に、請求項12に記載の方法のステップを実施する、請求項1乃至7の何れか一項に記載の機器又は請求項8乃至11の何れか一項に記載のシステムを制御するための、コンピュータプログラム。
- 請求項13に記載のコンピュータプログラムを格納した、コンピュータ可読媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP14173817 | 2014-06-25 | ||
EP14173817.9 | 2014-06-25 | ||
PCT/EP2015/064401 WO2015197770A1 (en) | 2014-06-25 | 2015-06-25 | Imaging device for registration of different imaging modalities |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017518826A JP2017518826A (ja) | 2017-07-13 |
JP6727140B2 true JP6727140B2 (ja) | 2020-07-22 |
Family
ID=51059289
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016574243A Active JP6727140B2 (ja) | 2014-06-25 | 2015-06-25 | 異なる撮像モダリティのレジストレーションのための撮像機器 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10535149B2 (ja) |
EP (1) | EP3161786B1 (ja) |
JP (1) | JP6727140B2 (ja) |
CN (1) | CN106462971B (ja) |
WO (1) | WO2015197770A1 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10092361B2 (en) | 2015-09-11 | 2018-10-09 | AOD Holdings, LLC | Intraoperative systems and methods for determining and providing for display a virtual image overlaid onto a visual image of a bone |
EP3503026A1 (en) * | 2017-12-20 | 2019-06-26 | Koninklijke Philips N.V. | Device, system and method for interacting with vessel images |
CN111386555B (zh) * | 2018-10-30 | 2024-03-29 | 西安大医集团股份有限公司 | 图像引导方法及装置、医疗设备、计算机可读存储介质 |
KR102513565B1 (ko) * | 2021-10-08 | 2023-03-24 | 주식회사 피맥스 | 폐 영역 자동 정합 방법 및 이를 위한 장치 |
Family Cites Families (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS62186381A (ja) * | 1986-02-12 | 1987-08-14 | Hitachi Ltd | 画像位置合わせ方式 |
US6950689B1 (en) * | 1998-08-03 | 2005-09-27 | Boston Scientific Scimed, Inc. | Dynamically alterable three-dimensional graphical model of a body region |
DE19843408C2 (de) * | 1998-09-22 | 2000-10-26 | Siemens Ag | Verfahren zur Wiedergabe von Röntgenbildern beim Positionieren eines in ein Gefäß eingeführten Katheters und Vorrichtung zur Durchführung des Verfahrens |
US8244007B2 (en) | 2004-11-10 | 2012-08-14 | Koninklijke Philips Electronics N.V. | System and method for registration of medical images based on insufficiently similar image areas |
WO2006063141A2 (en) | 2004-12-07 | 2006-06-15 | Medical Metrx Solutions, Inc. | Intraoperative c-arm fluoroscope datafusion system |
JP2009515635A (ja) * | 2005-11-18 | 2009-04-16 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 三次元画像における所定の構造の描画方法 |
JP2011510415A (ja) * | 2008-01-24 | 2011-03-31 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | インタラクティブ画像セグメンテーション |
US9280837B2 (en) | 2008-10-10 | 2016-03-08 | Koninklijke Philips N.V. | Angiographic image acquisition system and method with automatic shutter adaptation for yielding a reduced field of view covering a segmented target structure or lesion for decreasing X-radiation dose in minimally invasive X-ray-guided interventions |
JP2010246883A (ja) * | 2009-03-27 | 2010-11-04 | Mitsubishi Electric Corp | 患者位置決めシステム |
JP5404277B2 (ja) * | 2009-09-24 | 2014-01-29 | 株式会社Aze | 医用画像データ位置合せ装置、方法およびプログラム |
US8315812B2 (en) * | 2010-08-12 | 2012-11-20 | Heartflow, Inc. | Method and system for patient-specific modeling of blood flow |
RU2595766C2 (ru) * | 2010-10-27 | 2016-08-27 | Конинклейке Филипс Электроникс Н.В. | Идентификация и уменьшение искажения изображения |
US8644575B2 (en) * | 2011-02-28 | 2014-02-04 | Kabushiki Kaisha Toshiba | Processing of abdominal images |
WO2012169344A1 (ja) * | 2011-06-10 | 2012-12-13 | 株式会社日立メディコ | 画像診断支援装置、及び方法 |
US8963919B2 (en) * | 2011-06-15 | 2015-02-24 | Mistretta Medical, Llc | System and method for four dimensional angiography and fluoroscopy |
JP2013017781A (ja) * | 2011-07-14 | 2013-01-31 | Aze Ltd | 医用画像抽出装置および医用画像抽出プログラム |
US9058664B2 (en) * | 2011-09-07 | 2015-06-16 | Siemens Aktiengesellschaft | 2D-2D fusion for interventional guidance in trans-catheter aortic valve implantation |
US8675944B2 (en) | 2012-01-12 | 2014-03-18 | Kabushiki Kaisha Toshiba | Method of registering image data |
US9336592B2 (en) * | 2012-02-03 | 2016-05-10 | The Trustees Of Dartmouth College | Method and apparatus for determining tumor shift during surgery using a stereo-optical three-dimensional surface-mapping system |
CN104160424B (zh) | 2012-03-08 | 2017-09-19 | 皇家飞利浦有限公司 | 用于改进多模态图像融合中的配准准确度的智能标志选择 |
EP2667352B1 (en) * | 2012-05-23 | 2020-01-01 | Stryker European Holdings I, LLC | Virtual 3D overlay as reduction aid for complex fractures |
WO2014031531A1 (en) | 2012-08-21 | 2014-02-27 | Convergent Life Sciences, Inc. | System and method for image guided medical procedures |
BR112015004061B1 (pt) | 2012-08-30 | 2021-12-14 | Koninklijke Philips N.V. | Sistema de geração de imagens por ultrassom para a inspeção de um objeto em um volume, e método para a provisão de uma imagem por ultrassom tridimensional de um objeto em um volume. |
US9761014B2 (en) * | 2012-11-15 | 2017-09-12 | Siemens Healthcare Gmbh | System and method for registering pre-operative and intra-operative images using biomechanical model simulations |
DE102012111385B4 (de) * | 2012-11-23 | 2018-05-03 | Diers Engineering Gmbh | Bestimmen der räumlichen Lage und Orientierung der Wirbelkörper der Wirbelsäule |
JP5974238B2 (ja) | 2012-12-25 | 2016-08-23 | 東芝メディカルシステムズ株式会社 | 画像処理システム、装置、方法及び医用画像診断装置 |
EP2967349B1 (en) * | 2013-03-15 | 2021-09-22 | Synaptive Medical Inc. | Apparatus and method for surgical hyperspectral imaging |
CN103345741B (zh) * | 2013-06-13 | 2016-07-06 | 华中科技大学 | 一种非刚性多模医学图像精确配准方法 |
-
2015
- 2015-06-25 EP EP15731586.2A patent/EP3161786B1/en active Active
- 2015-06-25 US US15/319,207 patent/US10535149B2/en active Active
- 2015-06-25 WO PCT/EP2015/064401 patent/WO2015197770A1/en active Application Filing
- 2015-06-25 CN CN201580033981.2A patent/CN106462971B/zh active Active
- 2015-06-25 JP JP2016574243A patent/JP6727140B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
US10535149B2 (en) | 2020-01-14 |
CN106462971A (zh) | 2017-02-22 |
EP3161786A1 (en) | 2017-05-03 |
WO2015197770A1 (en) | 2015-12-30 |
JP2017518826A (ja) | 2017-07-13 |
CN106462971B (zh) | 2021-01-26 |
EP3161786B1 (en) | 2019-10-30 |
US20170148180A1 (en) | 2017-05-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107106043B (zh) | 椎体特征识别 | |
US9990744B2 (en) | Image registration device, image registration method, and image registration program | |
US20130038629A1 (en) | Method and device for visualizing the registration quality of medical image datasets | |
US10055838B2 (en) | Registration of medical images | |
US9968319B2 (en) | Generating an at least three-dimensional display data set | |
JP6727140B2 (ja) | 異なる撮像モダリティのレジストレーションのための撮像機器 | |
JP2007516744A (ja) | 弾力的な画像位置合わせ | |
JP7337556B2 (ja) | 医用画像処理装置、x線診断装置及び医用画像処理方法 | |
EP3714792A1 (en) | Positioning of an x-ray imaging system | |
EP2903528B1 (en) | Bone suppression in x-ray imaging | |
JP2007275318A (ja) | 画像表示装置、画像表示方法およびそのプログラム | |
Fang et al. | 3D shape reconstruction of lumbar vertebra from two X-ray images and a CT model | |
JP2007105352A (ja) | 差分画像表示装置、差分画像表示方法およびそのプログラム | |
JP2003263498A (ja) | 検査されるべき対象の様々な画像を形成する方法 | |
KR102271614B1 (ko) | 3차원 해부학적 기준점 검출 방법 및 장치 | |
US11291424B2 (en) | Device and a corresponding method for providing spatial information of an interventional device in a live 2D X-ray image | |
EP3326536B1 (en) | Improved visualization of anatomical cavities | |
JP6472112B2 (ja) | 投影x線画像の改善された視覚化 | |
EP3889896A1 (en) | Model-based virtual cleansing for spectral virtual colonoscopy | |
EP3326537B1 (en) | Visualization of distances to walls of anatomical cavities | |
KR101513229B1 (ko) | 수술전 호흡 레벨과 수술장 호흡 레벨을 비교하는 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180620 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181119 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20181114 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20190218 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190510 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190924 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20191219 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200601 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200630 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6727140 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |