JP6071331B2 - 画像処理装置及び画像処理方法 - Google Patents
画像処理装置及び画像処理方法 Download PDFInfo
- Publication number
- JP6071331B2 JP6071331B2 JP2012186590A JP2012186590A JP6071331B2 JP 6071331 B2 JP6071331 B2 JP 6071331B2 JP 2012186590 A JP2012186590 A JP 2012186590A JP 2012186590 A JP2012186590 A JP 2012186590A JP 6071331 B2 JP6071331 B2 JP 6071331B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- light
- subject
- displayed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/102—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for optical coherence tomography [OCT]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0016—Operational features thereof
- A61B3/0025—Operational features thereof characterised by electronic signal processing, e.g. eye models
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0016—Operational features thereof
- A61B3/0041—Operational features thereof characterised by display arrangements
- A61B3/0058—Operational features thereof characterised by display arrangements for multiple images
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/12—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/14—Arrangements specially adapted for eye photography
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/14—Arrangements specially adapted for eye photography
- A61B3/15—Arrangements specially adapted for eye photography with means for aligning, spacing or blocking spurious reflection ; with means for relaxing
- A61B3/152—Arrangements specially adapted for eye photography with means for aligning, spacing or blocking spurious reflection ; with means for relaxing for aligning
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- Biophysics (AREA)
- Ophthalmology & Optometry (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Veterinary Medicine (AREA)
- Surgery (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Signal Processing (AREA)
- Eye Examination Apparatus (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
Description
本発明の目的は、ユーザが偏光状態を示す画像を効果的に確認できるように、該画像を表示部に表示させることである。
被検体の複数の2次元断層画像から成る3次元断層画像において表示手段に表示させる2次元断層画像の位置を示す直線状の指標を、前記被検体の偏光平面画像に重ねて該表示手段に表示させる表示制御手段と、
操作者の操作に応じて、前記偏光平面画像上で前記直線状の指標を移動する指示を行う指示手段と、を有し、
前記表示制御手段が、前記直線状の指標の位置に対応する前記被検体のリターデーション画像とDOPU画像と断層輝度画像とを含む異なる種類の複数の2次元断層画像のいずれかを選択するための表示形態を前記表示手段に表示させ、前記選択された2次元断層画像を前記表示手段に表示させる。
図1は、本実施形態における撮影装置の一例である「眼科装置」の全体構成の概略図である。なお、後述する信号処理部190の少なくとも一部を「画像処理装置」とみなすことができ、また、この場合、「眼科装置」全体を「眼科システム」、あるいは「撮影装置」全体を「撮影システム」とみなすこともできる。
PS−OCT100の構成について説明する。
PS−SLO140の構成について説明する。
前眼部撮像部160について説明する。
内部固視灯170について説明する。
内 部固視灯170は、内部固視灯用表示部171、レンズ172で構成される。内部固視灯用表示部171として複数の発光ダイオード(LD)がマトリックス状に配置されたものを用いる。発光ダイオードの点灯位置は、駆動制御部180の制御により撮像したい部位に合わせて変更される。内部固視灯用表示部171からの光は、レンズ172を介し、被検眼に導かれる。内部固視灯用表示部171から出射される光は520nmで、制御部180により所望のパターンが表示される。
本装置全体を制御するための制御部200について説明する。
次に、信号処理部190における画像生成、画像解析について説明する。 信号処理部190は、ラインカメラ129、133から出力されたそれぞれの干渉信号に対して、一般的なSD−OCT(Spectral Domain OCT)に用いられる再構成処理を行うことで、各偏光成分に基づいた2つの断層画像である第一の偏光に対応する断層画像と、第二の偏光に対応する断層画像とを生成する。
信号処理部190は、前述した2つの断層信号から断層輝度画像を生成する。
信号処理部190は、互いに直行する偏光成分の断層画像からリターデーション画像を生成する。
信号処理部190は、複数のBスキャン像に対して得たリターデーション(Retardation)画像からリターデーションマップを生成する。
信号処理部190は、先に生成されたリターデーション画像の各Aスキャン画像において、ILMからRNFLの範囲でリターデーションδの値を線形近似し、その傾きを当該Aスキャン画像の網膜上の位置における複屈折として決定する。すなわち、リターデーションはRNFLにおける距離と複屈折と積であるため、各Aスキャン画像において深さとリターデーションの値をプロットすると線形の関係が得られる。したがって、このプロットに対して最小二乗法等により線形近似を行い、その傾きを求めればそれが当該Aスキャン画像におけるRNFLの複屈折の値となる。この処理を取得した全てのリターデーション画像に対して行うことで、複屈折を表すマップを生成する。
信号処理部190は、取得した断層信号AH、AVとそれらの間の位相差ΔΦから、各画素毎にストークスベクトルSを式3により計算する。
信号処理部190は、前述した輝度画像を用いて断層画像のセグメンテーションを行う。
次に本画像処理装置による処理動作について説明する。
まず、ステップS101において、被検眼を本装置に配置した状態で、本装置と被検眼のアライメントを行う。アライメントの説明に関して、本実施形態に特有な処理について説明し、ワーキングディスタンス等のXYZ方向のアライメント、フォーカス、コヒーレンスゲートの調整等は一般的であるのでその説明は省略する。
図4は、調整時に表示部192に表示されるウィンドウ400を示している。第一の表示領域の一例である表示領域410には、PS−SLO140で撮像され、信号処理部190で生成された眼底画像411が表示され、眼底画像411上に、PS−OCT100の撮像範囲を示す枠412が重畳表示されている。
λ/4偏光板113の調整について説明する。
ステップS102〜S104において、光源101、光源141からそれぞれ測定光を出射して、網膜Erからの戻り光を、ラインカメラ129、133、APD152、153で受光して、信号処理部190で、前述の通り各画像を生成・解析する。
次に、生成した各画像及び解析した結果の出力処理ステップS105について説明する。
さらに、表示領域510に表示される眼底画像に対して表示領域520に表示される断層画像の位置を示す指標として、直線状のカーソルを重畳表示することによって、より効果的な画像の表示を行うことができる。図11は、本実施形態における表示部192における表示例であり、表示部193に表示されるウィンドウの種類は上述した例と同様である。表示領域1110には、リターデーションマップ1111が表示され、断層画像の位置を示す矩形の枠1112が重畳されている。
更に、前述した断層位置指定カーソルを複数表示するようにしてもよい。図12はその一例を図示したものであり、第1の指標の一例である第1の断層位置指定カーソル1113、および第2の指標の一例である第2の断層位置指定カーソル1114が表示される。このとき、各カーソルを操作者がマウス等の指示装置によって動かすことができる。これにより、各々の位置の断層画像を表示領域520に表示することができるため、例えば、ユーザは診断に有効な複数の位置の断層画像を比較することができるため、診断に効果的である。
また、前述した図11の例では、断層位置指定カーソル1113を操作者が直接移動させていたが、これを自動的に行うようにしてもよい。すなわち、制御部191はステップS103において生成された各種の画像から病変に対応する部分を抽出し、その位置に断層位置指定カーソル1113を移動する。病変の抽出としては、例えばDOPU画像を用いることができる。図13において、1326はDOPU画像によって描出された、RPEの構造が変化している領域を表している。制御部191は、この変化部分1326が存在するBスキャン画像を、例えばRPEの形状が急峻に変化する部分の辺縁を抽出し、当該位置に位置指定カーソル1113を移動する。
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。
Claims (17)
- 被検体の複数の2次元断層画像から成る3次元断層画像において表示手段に表示させる2次元断層画像の位置を示す直線状の指標を、前記被検体の偏光平面画像に重ねて該表示手段に表示させる表示制御手段と、
操作者の操作に応じて、前記偏光平面画像上で前記直線状の指標を移動する指示を行う指示手段と、を有し、
前記表示制御手段が、前記直線状の指標の位置に対応する前記被検体のリターデーション画像とDOPU画像と断層輝度画像とを含む異なる種類の複数の2次元断層画像のいずれかを選択するための表示形態を前記表示手段に表示させ、前記選択された2次元断層画像を前記表示手段に表示させることを特徴とする画像処理装置。 - 前記表示制御手段が、第1の指標と第2の指標とを前記直線状の指標として前記偏光平面画像に重ねて前記表示手段に表示させ、
前記指示手段が、操作者の操作に応じて、前記第1及び第2の指標のうち一方の位置に対して他方の位置を変更する指示を行うことを特徴とする請求項1に記載の画像処理装置。 - 前記指示手段が、操作者の操作に応じて、前記第1の指標が固定された状態で前記第2の指標を移動する指示を行うことを特徴とする請求項2に記載の画像処理装置。
- 前記第1及び第2の指標の距離を計測する手段を更に有し、
前記表示制御手段が、前記距離を示す表示形態を前記表示手段に表示させることを特徴とする請求項2または3に記載の画像処理装置。 - 前記被検体は、被検眼の眼底であり、
前記偏光平面画像は、リターデーションマップであり、
前記表示制御手段が、前記直線状の指標の位置に対応するリターデーションの値及び前記眼底におけるRNFLの厚さを前記表示手段に表示させることを特徴とする請求項1乃至4のいずれか1項に記載の画像処理装置。 - 前記被検体は、被検眼の眼底であり、
前記偏光平面画像は、リターデーションマップであり、
前記表示制御手段が、前記リターデーションマップにおけるリターデーションの値が閾値より小さい位置に、前記直線状の指標を自動的に移動することを特徴とする請求項1乃至4のいずれか1項に記載の画像処理装置。 - 光を照射した前記被検体からの戻り光を分割して得た互いに異なる偏光の光に基づいて、前記偏光平面画像を生成する生成手段を更に有することを特徴とする請求項1乃至6のいずれか1項に記載の画像処理装置。
- 測定光を照射した前記被検体からの戻り光と前記測定光に対応する参照光とを合波した光を分割して得た互いに異なる偏光の光に基づいて、前記被検体の3次元の断層輝度画像を前記3次元断層画像として生成する生成手段を更に有することを特徴とする請求項1乃至6のいずれか1項に記載の画像処理装置。
- 測定光を照射した前記被検体からの戻り光と前記測定光に対応する参照光とを合波した光を分割して得た互いに異なる偏光の光に基づいて、前記被検体の複数の2次元の偏光断層画像から成る3次元の偏光断層画像を前記3次元断層画像として生成し、前記3次元の偏光断層画像に基づいて、前記偏光平面画像を生成する生成手段を更に有することを特徴とする請求項1乃至6のいずれか1項に記載の画像処理装置。
- 前記互いに異なる偏光の光を検出する検出手段を有し、前記検出された光に互いに異なる偏光の光に基づいて前記被検体の3次元断層画像を撮る撮影装置に通信可能に接続されることを特徴とする請求項8または9に記載の画像処理装置。
- 前記被検体は、被検眼であることを特徴とする請求項1乃至10のいずれか1項に記載の画像処理装置。
- 被検体の複数の2次元断層画像から成る3次元断層画像において表示手段に表示させる2次元断層画像の位置を示す直線状の指標を、前記被検体の偏光平面画像に重ねて該表示手段に表示させる工程と、
操作者の操作に応じて、前記偏光平面画像上で前記直線状の指標を移動する指示を受ける工程と、
前記直線状の指標の位置に対応する前記被検体のリターデーション画像とDOPU画像と断層輝度画像とを含む異なる種類の複数の2次元断層画像のいずれかを選択するための表示形態を前記表示手段に表示させ、前記選択された2次元断層画像を前記表示手段に表示させる工程と、
を有することを特徴とする画像処理方法。 - 前記表示させる工程において、第1の指標と第2の指標とを前記直線状の指標として前記偏光平面画像に重ねて前記表示手段に表示させ、
前記指示を受ける工程において、操作者の操作に応じて、前記第1及び第2の指標のうち一方の位置に対して他方の位置を変更する指示を受けることを特徴とする請求項12に記載の画像処理方法。 - 前記指示を受ける工程において、操作者の操作に応じて、操作者の操作に応じて、前記第1の指標が固定された状態で前記第2の指標を移動する指示を受けることを特徴とする請求項13に記載の画像処理方法。
- 前記第1及び第2の指標の距離を計測する工程を更に有し、
前記表示させる工程において、前記距離を示す表示形態を前記表示手段に表示させることを特徴とする請求項13または14に記載の画像処理方法。 - 前記被検体は、被検眼の眼底であり、
前記偏光平面画像は、リターデーションマップであり、
前記表示させる工程において、前記リターデーションマップにおけるリターデーションの値が閾値より小さい位置に、前記直線状の指標を自動的に移動することを特徴とする請求項12乃至15のいずれか1項に記載の画像処理方法。 - 請求項12乃至16のいずれか1項に記載の画像処理方法の各工程をコンピュータに実行させることを特徴とするプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012186590A JP6071331B2 (ja) | 2012-08-27 | 2012-08-27 | 画像処理装置及び画像処理方法 |
US13/972,159 US9039178B2 (en) | 2012-08-27 | 2013-08-21 | Image processing apparatus and image processing method |
US14/698,611 US9289118B2 (en) | 2012-08-27 | 2015-04-28 | Image processing apparatus and image processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012186590A JP6071331B2 (ja) | 2012-08-27 | 2012-08-27 | 画像処理装置及び画像処理方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016254378A Division JP6381622B2 (ja) | 2016-12-27 | 2016-12-27 | 画像処理装置及び画像処理方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2014042649A JP2014042649A (ja) | 2014-03-13 |
JP2014042649A5 JP2014042649A5 (ja) | 2015-07-30 |
JP6071331B2 true JP6071331B2 (ja) | 2017-02-01 |
Family
ID=50147723
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012186590A Expired - Fee Related JP6071331B2 (ja) | 2012-08-27 | 2012-08-27 | 画像処理装置及び画像処理方法 |
Country Status (2)
Country | Link |
---|---|
US (2) | US9039178B2 (ja) |
JP (1) | JP6071331B2 (ja) |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5629023B2 (ja) * | 2012-05-30 | 2014-11-19 | オリンパスメディカルシステムズ株式会社 | 医療用3次元観察装置 |
JP2014079494A (ja) * | 2012-10-18 | 2014-05-08 | Canon Inc | 眼科装置および眼科制御方法並びにプログラム |
US9677869B2 (en) | 2012-12-05 | 2017-06-13 | Perimeter Medical Imaging, Inc. | System and method for generating a wide-field OCT image of a portion of a sample |
US9237847B2 (en) * | 2014-02-11 | 2016-01-19 | Welch Allyn, Inc. | Ophthalmoscope device |
JP6598466B2 (ja) * | 2015-01-30 | 2019-10-30 | キヤノン株式会社 | 断層撮像装置、断層撮像方法、およびプログラム |
US10799115B2 (en) | 2015-02-27 | 2020-10-13 | Welch Allyn, Inc. | Through focus retinal image capturing |
US11045088B2 (en) | 2015-02-27 | 2021-06-29 | Welch Allyn, Inc. | Through focus retinal image capturing |
US10136804B2 (en) | 2015-07-24 | 2018-11-27 | Welch Allyn, Inc. | Automatic fundus image capture system |
US10849498B2 (en) | 2015-08-12 | 2020-12-01 | Carl Zeiss Meditec, Inc. | Alignment improvements for ophthalmic diagnostic systems |
JP6632267B2 (ja) * | 2015-09-04 | 2020-01-22 | キヤノン株式会社 | 眼科装置、表示制御方法およびプログラム |
US10772495B2 (en) | 2015-11-02 | 2020-09-15 | Welch Allyn, Inc. | Retinal image capturing |
JP6598713B2 (ja) * | 2016-03-11 | 2019-10-30 | キヤノン株式会社 | 情報処理装置 |
JP6779690B2 (ja) * | 2016-07-27 | 2020-11-04 | 株式会社トプコン | 眼科画像処理装置及び眼科撮影装置 |
JP7050787B2 (ja) * | 2017-01-30 | 2022-04-08 | アルコン インコーポレイティド | 偏光感受型光干渉断層計を用いてフラップを作成するためのシステムと方法 |
EP3655748B1 (en) | 2017-07-18 | 2023-08-09 | Perimeter Medical Imaging, Inc. | Sample container for stabilizing and aligning excised biological tissue samples for ex vivo analysis |
US11132797B2 (en) * | 2017-12-28 | 2021-09-28 | Topcon Corporation | Automatically identifying regions of interest of an object from horizontal images using a machine learning guided imaging system |
US11096574B2 (en) | 2018-05-24 | 2021-08-24 | Welch Allyn, Inc. | Retinal image capturing |
US11283975B2 (en) * | 2018-12-21 | 2022-03-22 | Welch Allyn, Inc. | Eye image capturing |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4916779B2 (ja) | 2005-09-29 | 2012-04-18 | 株式会社トプコン | 眼底観察装置 |
JP4819478B2 (ja) | 2005-10-31 | 2011-11-24 | 株式会社ニデック | 眼科撮影装置 |
JP5007114B2 (ja) * | 2006-12-22 | 2012-08-22 | 株式会社トプコン | 眼底観察装置、眼底画像表示装置及びプログラム |
JP2010125291A (ja) * | 2008-12-01 | 2010-06-10 | Nidek Co Ltd | 眼科撮影装置 |
EP2243420A1 (en) | 2009-04-24 | 2010-10-27 | Schmidt-Erfurth, Ursula | Method for determining exudates in the retina |
JP5474435B2 (ja) * | 2009-07-30 | 2014-04-16 | 株式会社トプコン | 眼底解析装置及び眼底解析プログラム |
WO2011016437A1 (ja) * | 2009-08-04 | 2011-02-10 | 国立大学法人宇都宮大学 | 網膜用3次元画像生成装置 |
JP5988772B2 (ja) * | 2012-01-20 | 2016-09-07 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
-
2012
- 2012-08-27 JP JP2012186590A patent/JP6071331B2/ja not_active Expired - Fee Related
-
2013
- 2013-08-21 US US13/972,159 patent/US9039178B2/en not_active Expired - Fee Related
-
2015
- 2015-04-28 US US14/698,611 patent/US9289118B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US20140055745A1 (en) | 2014-02-27 |
JP2014042649A (ja) | 2014-03-13 |
US9289118B2 (en) | 2016-03-22 |
US9039178B2 (en) | 2015-05-26 |
US20150230701A1 (en) | 2015-08-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6071331B2 (ja) | 画像処理装置及び画像処理方法 | |
JP5988772B2 (ja) | 画像処理装置及び画像処理方法 | |
JP6061554B2 (ja) | 画像処理装置及び画像処理方法 | |
JP6184232B2 (ja) | 画像処理装置及び画像処理方法 | |
JP6061555B2 (ja) | 画像処理装置及び画像処理方法 | |
JP6202924B2 (ja) | 撮影装置及び撮影方法 | |
JP6184231B2 (ja) | 画像処理装置および画像処理方法 | |
JP2014110883A (ja) | 画像処理装置及び画像処理方法 | |
JP2014110884A (ja) | 画像処理装置及び画像処理方法 | |
US9068812B2 (en) | Imaging apparatus, imaging method, and storage medium | |
JP6146951B2 (ja) | 画像処理装置、画像処理方法、撮影装置及び撮影方法 | |
JP2014083285A (ja) | 画像処理装置及び画像処理方法 | |
JP6381622B2 (ja) | 画像処理装置及び画像処理方法 | |
JP5988883B2 (ja) | 画像処理装置及び画像処理方法 | |
JP6505072B2 (ja) | 画像処理装置及び画像処理方法 | |
US9192293B2 (en) | Image processing apparatus and image processing method | |
JP6437055B2 (ja) | 画像処理装置及び画像処理方法 | |
JP5936368B2 (ja) | 光干渉断層撮影装置及びその作動方法 | |
JP6039185B2 (ja) | 撮影装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150611 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150611 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160428 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160510 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160708 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20161206 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161227 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6071331 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |