JP4748059B2 - 医用画像処理システム - Google Patents
医用画像処理システム Download PDFInfo
- Publication number
- JP4748059B2 JP4748059B2 JP2006514587A JP2006514587A JP4748059B2 JP 4748059 B2 JP4748059 B2 JP 4748059B2 JP 2006514587 A JP2006514587 A JP 2006514587A JP 2006514587 A JP2006514587 A JP 2006514587A JP 4748059 B2 JP4748059 B2 JP 4748059B2
- Authority
- JP
- Japan
- Prior art keywords
- image data
- chromatin
- image processing
- predetermined
- pattern
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/69—Microscopic objects, e.g. biological cells or cellular parts
- G06V20/695—Preprocessing, e.g. image segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/40—Analysis of texture
- G06T7/41—Analysis of texture based on statistical description of texture
- G06T7/48—Analysis of texture based on statistical description of texture using fractals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10056—Microscopic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30024—Cell structures in vitro; Tissue sections in vitro
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Probability & Statistics with Applications (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Quality & Reliability (AREA)
- Life Sciences & Earth Sciences (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Multimedia (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
- Investigating Or Analysing Biological Materials (AREA)
Description
生体の画像データに対して所定の画像解析処理を実行することにより、上記生体の輪郭を抽出してなる形状画像データと、上記生体の輪郭内のパターンを抽出してなるパターン画像データとを得る画像解析手段と、
上記得られた形状画像データ及びパターン画像データに基づいて、上記形状画像データのフラクタル次元DAを計算し、上記パターン画像データのフラクタル次元DBを計算した後、上記形状画像データのフラクタル次元DA及び上記パターン画像データのフラクタル次元DBに基づいて、上記形状画像データの情報を実質的に除去しかつ上記パターン画像データのパターンの情報を実質的に含む指標値CIを計算する計算手段と、
上記計算された指標値に基づいて、上記生体の特性を判断する判断手段とを備えたことを特徴とする。
生体の画像データに対して所定の画像解析処理を実行することにより、上記生体の輪郭を抽出してなる形状画像データと、上記生体の輪郭内のパターンを抽出してなるパターン画像データとを得る画像解析ステップと、
上記得られた形状画像データ及びパターン画像データに基づいて、上記形状画像データのフラクタル次元DAを計算し、上記パターン画像データのフラクタル次元DBを計算した後、上記形状画像データのフラクタル次元DA及び上記パターン画像データのフラクタル次元DBに基づいて、上記形状画像データの情報を実質的に除去しかつ上記パターン画像データのパターンの情報を実質的に含む指標値CIを計算する計算ステップと、
上記計算された指標値に基づいて、上記生体の特性を判断する判断ステップとを含むことを特徴とする。
2…CCDディジタルカメラ、
2a…通信インターフェース、
10…医用画像処理装置、
20…CPU、
21…ROM、
22…RAM、
23…画像メモリ、
24…プログラムメモリ、
30…バス、
31…キーボードインターフェース、
32…マウスインターフェース、
33…ディスプレイインターフェース、
34…プリンタインターフェース、
35…ドライブ装置インターフェース、
41…キーボード、
42…マウス、
43…CRTディスプレイ、
44…プリンタ、
45…CD−ROMドライブ装置、
45a…CD−ROM、
50…通信ケーブル、
51…通信インターフェース、
60…撮像装置。
(a)顕微鏡1の可視部にCCDディジタルカメラ2の受光レンズを取り付けてなる撮像装置60と、
(b)ディジタル計算機で構成され、例えば乳癌の細胞核などの生体の画像を含む画像データに基づいて、図2に示すように、生物細胞核クロマチンパターン画像データの解析及び評価処理を実行することにより、生物細胞核の悪性度などの特性を判断してその判断結果を表示して出力する医用画像処理装置10とを備えたことを特徴としている。
(a)当該医用画像処理装置10の動作及び処理を演算及び制御するコンピュータのCPU(中央演算処理装置)20と、
(b)オペレーションプログラムなどの基本プログラム及びそれを実行するために必要なデータを格納するROM(読み出し専用メモリ)21と、
(c)CPU20のワーキングメモリとして動作し、画像処理で必要なパラメータやデータを一時的に格納するRAM(ランダムアクセスメモリ)22と、
(d)例えばハードディスクメモリで構成され、CCDディジタルカメラ2から受信した画像データ、画像処理中の画像データ、及び画像処理後の画像データを格納する画像メモリ23と、
(e)例えばハードディスクメモリで構成され、CD−ROMドライブ装置45を用いて読みこんだ図2の画像処理プログラムを格納するプログラムメモリ24と、
(f)撮像装置60のCCDディジタルカメラ2内の通信インターフェース2aと接続され、通信インターフェース2aとデータを送受信する通信インターフェース51と、
(g)所定のデータや指示コマンドを入力するためのキーボード41に接続され、キーボード41から入力されたデータや指示コマンドを受信して所定の信号変換などのインターフェース処理を行ってCPU20に伝送するキーボードインターフェース31と、
(h)CRTディスプレイ43上で指示コマンドを入力するためのマウス42に接続され、マウス42から入力されたデータや指示コマンドを受信して所定の信号変換などのインターフェース処理を行ってCPU20に伝送するマウスインターフェース32と、
(i)CPU20によって処理された画像データや設定指示画面などを表示するCRTディスプレイ43に接続され、表示すべき画像データをCRTディスプレイ43用の画像信号に変換してCRTディスプレイ43に出力して表示するディスプレイインターフェース33と、
(j)CPU20によって処理された画像データ及び所定の解析結果などを印字するプリンタ44に接続され、印字すべき印字データの所定の信号変換などを行ってプリンタ44に出力して印字するプリンタインターフェース34と、
(k)画像処理プログラムが記憶されたCD−ROM45aから画像処理プログラムのプログラムデータを読み出すCD−ROMドライブ装置45に接続され、読み出された画像処理プログラムのプログラムデータを所定の信号変換などを行ってプログラムメモリ24に転送するドライブ装置インターフェース35とを備え、
これらの回路20−24、31−34及び51はバス30を介して接続される。
CI=bDB−aDA (1)
CI=(bDB−aDA)/cDA (2)
CI=dDB/DA (3)
CI=eDA/DB (4)
以上説明したように、本発明の実施形態に係る医用画像処理装置及び方法によれば、生体が有する形状に係る画像データの情報を実質的に除去しかつパターン画像データのパターンの情報を実質的に含む指標値CIを計算し、上記計算された指標値に基づいて、上記生体の特性又はその度合いを判断するので、きわめて簡単な処理方法で、従来技術に比較して高い精度で定量的に生体の特性又はその度合いを判断することができる。例えば、予め再発症例及び腫瘍径が異なる複数のフラクタル次元を計算して解析することにより定量的に、癌再発予後、癌転移及び癌悪性度を推定できる指標を得ることができる。また、ある生体のクロマチン指標CIを、予め決められた癌の悪性度のしきい値と比較することにより、癌の悪性度が高いか低いかを客観的にかつ定量的に判断できる。
本実施形態においては、図2の画像処理プログラムデータをCD−ROM45aに格納して実行するときにプログラムメモリ24にロードして実行しているが、本発明はこれに限らず、CD−R、CD−RW、DVD、MOなどの光ディスク又は光磁気ディスクの記録媒体、もしくは、フロッピー(登録商標)ディスクなどの磁気ディスクの記録媒体など種々の記録媒体に格納してもよい。これらの記録媒体は,コンピュータで読み取り可能な記録媒体である。また、図2の画像処理プログラムのデータを予めプログラムメモリ24に格納して当該画像処理を実行してもよい。
乳腺穿刺吸引材料の癌細胞の核クロマチンパターンが再発予後因子となり得るか否か明らかにすることを目的にフラクタル解析及び形態学的検討を行った。
浸潤性乳管癌69例(再発例14例、非再発例(n1.24例、n0.31例)を対象とした。その詳細は図8の通りである。ここに、非再発例n1はリンパ節転移例であり、非再発例n0はリンパ節非転移例である。当該検討において、クロマチン分布の複雑性を表すクロマチン指標CIを用いて上述のフラクタル次元解析を行った。クロマチンパターンはCCDディジタルカメラ2で撮影することにより核クロマチンパターン画像データを得て、それに対してフラクタル次元解析を行い、核形不整を考慮したクロマチン指標CIを算出し、クロマチンパターンの複雑性について検討した。対象標本はすべて再発前の原発巣標本を用いた。
以上の実施例1の結果から明らかなように、クロマチン指標CIは再発乳癌の85%(12/14例)が高値を示し、再発乳癌例と非乳癌例群間の有意差を認められ(P<0.001)、クロマチン分布の不規則性が示唆された。腫瘍径2.5cm未満の非再発例(n0)の84%(21/25例)が比較的低いクロマチン指標CI値を呈した。非再発例(n1)の腫瘍径2.5cm以上の症例において比較的高いクロマチン指標CI値が多くみられ、腫瘍径との相関が認められた(P<0.001)。これらの結果から有病正診率(感度)、無病正診率(特異性)及び正診率を算定し、その結果を図10及び図11に示す。図10から明らかなように、きわめて高い有病正診率や正診率を得ることができることがわかる。また、図11から明らかなように、リンパ節転移の推定及び再発の推定において、しきい値CItht,CIthrを変化させた場合、きわめて高い有病正診率、無病正診率や正診率を得ることができることがわかる。
実施例1の結果より、再発乳癌例の核クロマチンにはある一定の形態学的特徴を有していることが推測された。再発乳癌例におけるクロマチンは、核小体の周囲に複数の粗凝集状クロマチンを認め、分布は不規則であった。核内が明るく細凝集状クロマチンを示す細胞の核膜近傍に凝集クロマチンを認めた。そして、それら核クロマチンパターンについてフラクタル次元解析を行い、クロマチン指標CIを計算ことにより、核クロマチンパターンの不規則性を定量的に数値化することができた。これらのパターンの定量化(数値化)は再発予測や悪性度の定量的な評価が可能となり、初期治療に有用な臨床情報を提供ができる。
Claims (9)
- 人体の乳がんの細胞核のクロマチン画像データに基づいて上記細胞核のがんの悪性度を評価するための医用画像処理装置であって、
上記乳がんの細胞核のクロマチン画像データに対して所定の画像解析処理を実行することにより、上記細胞核の輪郭を抽出してなる形状画像データと、上記細胞核の輪郭内のパターンを抽出してなるパターン画像データとを得る画像解析手段と、
上記得られた形状画像データ及びパターン画像データに基づいて、上記形状画像データのフラクタル次元DAを計算し、上記パターン画像データのフラクタル次元DBを計算した後、上記形状画像データのフラクタル次元DA及び上記パターン画像データのフラクタル次元DBに基づいて、上記形状画像データの情報を実質的に除去しかつ上記パターン画像データのパターンの情報を実質的に含むクロマチン指標値CIを計算する計算手段と、
上記計算されたクロマチン指標値CIに基づいて、上記細胞核のがんの悪性度を評価する評価手段とを備えたことを特徴とする医用画像処理装置。 - 上記計算手段は、CI=bDB−aDAの式(ここで、aは所定の第1の定数であり、bは所定の第2の定数である。)を用いてクロマチン指標値CIを計算することを特徴とする請求項1記載の医用画像処理装置。
- 上記計算手段は、CI=(bDB−aDA)/cDAの式(ここで、aは所定の第1の定数であり、bは所定の第2の定数であり、cは所定の第3の定数である。)を用いてクロマチン指標値CIを計算することを特徴とする請求項1記載の医用画像処理装置。
- 上記計算手段は、CI=dDB/DAの式(ここで、dは所定の第4の定数である。)を用いてクロマチン指標値CIを計算することを特徴とする請求項1記載の医用画像処理装置。
- 上記計算手段は、CI=eDA/DBの式(ここで、eは所定の第5の定数である。)を用いてクロマチン指標値CIを計算することを特徴とする請求項1記載の医用画像処理装置。
- 上記評価手段は、上記計算されたクロマチン指標値CIを所定のしきい値と比較することにより、上記細胞核のがんの悪性度を評価することを特徴とする請求項1乃至5のうちのいずれか1つに記載の医用画像処理装置。
- 上記しきい値は、上記細胞核のがんの悪性度が既知である複数の細胞核のがんのクロマチン画像データに基づいて、上記細胞核のがんの悪性度を区別可能な予め決められた値であることを特徴とする請求項6記載の医用画像処理方法。
- 上記画像解析処理は、エッジ処理と、2値化処理との少なくとも1つの処理を含むことを特徴とする請求項1乃至7のうちのいずれか1つに記載の医用画像処理装置。
- 上記画像解析処理は、カラー画像データからグレースケール画像データへの変換処理をさらに含むことを特徴とする請求項8記載の医用画像処理装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006514587A JP4748059B2 (ja) | 2004-06-10 | 2005-06-10 | 医用画像処理システム |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004172669 | 2004-06-10 | ||
JP2004172669 | 2004-06-10 | ||
PCT/JP2005/010693 WO2005121784A1 (ja) | 2004-06-10 | 2005-06-10 | 医用画像処理システム |
JP2006514587A JP4748059B2 (ja) | 2004-06-10 | 2005-06-10 | 医用画像処理システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2005121784A1 JPWO2005121784A1 (ja) | 2008-04-10 |
JP4748059B2 true JP4748059B2 (ja) | 2011-08-17 |
Family
ID=35503201
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006514587A Expired - Fee Related JP4748059B2 (ja) | 2004-06-10 | 2005-06-10 | 医用画像処理システム |
Country Status (4)
Country | Link |
---|---|
US (1) | US7865000B2 (ja) |
EP (1) | EP1775585A4 (ja) |
JP (1) | JP4748059B2 (ja) |
WO (1) | WO2005121784A1 (ja) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009213555A (ja) * | 2008-03-07 | 2009-09-24 | Okayama Saiseikai General Hospital | 超音波エコー画像処理装置及び方法 |
CN101859383B (zh) * | 2010-06-08 | 2012-07-18 | 河海大学 | 基于时间序列重要点分析的高光谱遥感图像波段选择方法 |
MX2013014196A (es) * | 2011-06-06 | 2014-03-21 | Koninkl Philips Nv | Aplicación modal cruzada de firmas en combinacion indicadoras de un fenotipo. |
US9290010B2 (en) * | 2011-10-06 | 2016-03-22 | AI Cure Technologies, Inc. | Method and apparatus for fractal identification |
US20130215146A1 (en) * | 2012-02-17 | 2013-08-22 | Canon Kabushiki Kaisha | Image-drawing-data generation apparatus, method for generating image drawing data, and program |
US8942444B2 (en) * | 2012-08-17 | 2015-01-27 | General Electric Company | System and method for image compression in X-ray imaging systems |
JP6076702B2 (ja) * | 2012-11-08 | 2017-02-08 | 富士フイルムRiファーマ株式会社 | X線画像診断支援のためのコンピュータプログラム、装置及び方法 |
CN103488997B (zh) * | 2013-09-09 | 2018-03-30 | 南京小网科技有限责任公司 | 基于各类重要波段提取的高光谱图像波段选择方法 |
JP6371521B2 (ja) * | 2013-12-26 | 2018-08-08 | 株式会社ケンシュー | 画像処理方法、画像処理プログラム、画像処理装置及び工業製品 |
JP6326264B2 (ja) * | 2014-03-31 | 2018-05-16 | 富士フイルムRiファーマ株式会社 | 肺疾患判別プログラム、記録媒体及び肺疾患判別方法 |
JP6566395B2 (ja) * | 2015-08-04 | 2019-08-28 | 国立大学法人佐賀大学 | 内視鏡画像処理装置、内視鏡画像処理方法及び内視鏡画像処理プログラム |
JP7450942B2 (ja) | 2019-03-26 | 2024-03-18 | 国立大学法人大阪大学 | 画像解析方法、画像解析プログラム、記録媒体、画像解析装置、画像解析システム |
CN111667467B (zh) * | 2020-05-28 | 2021-01-26 | 江苏大学附属医院 | 基于聚类算法的下肢血管钙化指数多参数累积计算方法 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005518049A (ja) * | 2002-02-22 | 2005-06-16 | イスティテュート・クリニコ・ヒューマニタス | 生物学的組織試料を解析する方法および装置 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6026174A (en) | 1992-10-14 | 2000-02-15 | Accumed International, Inc. | System and method for automatically detecting malignant cells and cells having malignancy-associated changes |
US5719784A (en) * | 1992-12-14 | 1998-02-17 | University Of Washington At Seattle | Order-based analyses of cell and tissue structure |
US5787201A (en) * | 1996-04-09 | 1998-07-28 | The United States Of America As Represented By The Secretary Of The Navy | High order fractal feature extraction for classification of objects in images |
JPH11120350A (ja) | 1997-10-14 | 1999-04-30 | Sony Corp | 不定形の識別方法及び不定形の識別装置 |
JP2002140692A (ja) | 2000-10-30 | 2002-05-17 | Sysmex Corp | 画像解析装置 |
AUPR647801A0 (en) * | 2001-07-19 | 2001-08-09 | Cea Technologies Inc. | Chromatin segmentation |
US6993187B2 (en) * | 2003-02-14 | 2006-01-31 | Ikonisys, Inc. | Method and system for object recognition using fractal maps |
US7062079B2 (en) * | 2003-02-14 | 2006-06-13 | Ikonisys, Inc. | Method and system for image segmentation |
WO2005006255A1 (en) * | 2003-07-09 | 2005-01-20 | Humanitas Mirasole S.P.A. | Method and apparatus for analyzing biological tissues |
-
2005
- 2005-06-10 EP EP05750443A patent/EP1775585A4/en not_active Withdrawn
- 2005-06-10 WO PCT/JP2005/010693 patent/WO2005121784A1/ja active Application Filing
- 2005-06-10 JP JP2006514587A patent/JP4748059B2/ja not_active Expired - Fee Related
- 2005-06-10 US US11/628,955 patent/US7865000B2/en not_active Expired - Fee Related
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005518049A (ja) * | 2002-02-22 | 2005-06-16 | イスティテュート・クリニコ・ヒューマニタス | 生物学的組織試料を解析する方法および装置 |
Also Published As
Publication number | Publication date |
---|---|
EP1775585A1 (en) | 2007-04-18 |
JPWO2005121784A1 (ja) | 2008-04-10 |
US20080267485A1 (en) | 2008-10-30 |
WO2005121784A1 (ja) | 2005-12-22 |
US7865000B2 (en) | 2011-01-04 |
EP1775585A4 (en) | 2010-08-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4748059B2 (ja) | 医用画像処理システム | |
EP2745111B1 (en) | System and method for the detection of precancer or cancer cells in a biological sample | |
Evans et al. | Differentiating benign from malignant solid breast masses: value of shear wave elastography according to lesion stiffness combined with greyscale ultrasound according to BI-RADS classification | |
JP6506700B2 (ja) | 細胞レベルfishドットカウントのための方法及びシステム | |
CN108027364B (zh) | 用于确定细胞学分析***中的细胞充分性的***及方法 | |
RU2690224C2 (ru) | Обследующее устройство для обработки и анализа изображения | |
US7274809B2 (en) | Computerized methods and systems related to the detection of malignancy-associated changes (MAC) to detect cancer | |
CN107567631B (zh) | 组织样品分析技术 | |
Sahni et al. | Breast cancer detection using image processing techniques | |
Jondet et al. | Automatic measurement of epithelium differentiation and classification of cervical intraneoplasia by computerized image analysis | |
JP7450942B2 (ja) | 画像解析方法、画像解析プログラム、記録媒体、画像解析装置、画像解析システム | |
Wang et al. | Application of digital mammography-based radiomics in the differentiation of benign and malignant round-like breast tumors and the prediction of molecular subtypes | |
Klock et al. | Anatomy‐correlated breast imaging and visual grading analysis using quantitative transmission ultrasound™ | |
JPH09251535A (ja) | 2次元多階調画像におけるパタン検出方法及び装置 | |
Reljin et al. | Multifractal-based nuclei segmentation in fish images | |
US12014492B2 (en) | Characterizing lesions in radiology images | |
Hiary et al. | Automated segmentation of stromal tissue in histology images using a voting Bayesian model | |
Alomari et al. | Iterative randomized irregular circular algorithm for proliferation rate estimation in brain tumor Ki-67 histology images | |
JP2005065856A (ja) | 異常陰影検出方法および装置並びにプログラム | |
Bottema et al. | Detection and classification of lobular and DCIS (small cell) microcalcifications in digital mammograms | |
Xu et al. | A nonlinear approach to identify pathological change of thyroid nodules based on statistical analysis of ultrasound RF signals | |
Roshan et al. | Accuracy of digital image analysis (DIA) of borderline human epidermal growth factor receptor (HER2) immunohistochemistry in invasive ductal carcinoma | |
Jian et al. | Signs analysis and clinical assessment: Phase-contrast computed tomography of human breast tumours | |
US11263781B2 (en) | Process for determining the infiltration of biological cells in a biological object of interest | |
Dzulkifli et al. | A Computer-Aided Diagnosis (CAD) System for Automatic Counting of Ki67 Cells in Meningioma |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080530 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110215 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110303 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110405 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110502 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140527 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140527 Year of fee payment: 3 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140527 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |