JP4896470B2 - 画像処理装置、医用画像診断装置及び画像処理方法 - Google Patents
画像処理装置、医用画像診断装置及び画像処理方法 Download PDFInfo
- Publication number
- JP4896470B2 JP4896470B2 JP2005261020A JP2005261020A JP4896470B2 JP 4896470 B2 JP4896470 B2 JP 4896470B2 JP 2005261020 A JP2005261020 A JP 2005261020A JP 2005261020 A JP2005261020 A JP 2005261020A JP 4896470 B2 JP4896470 B2 JP 4896470B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- data
- line
- curved section
- curved
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 68
- 238000003672 processing method Methods 0.000 title claims description 7
- 239000008280 blood Substances 0.000 claims description 53
- 210000004369 blood Anatomy 0.000 claims description 53
- 238000000034 method Methods 0.000 claims description 51
- 230000008569 process Effects 0.000 claims description 31
- 238000004364 calculation method Methods 0.000 claims description 30
- 230000008859 change Effects 0.000 claims description 14
- 238000009877 rendering Methods 0.000 claims description 8
- 238000003745 diagnosis Methods 0.000 claims description 3
- 238000002059 diagnostic imaging Methods 0.000 claims description 3
- 230000001131 transforming effect Effects 0.000 claims 2
- 210000004204 blood vessel Anatomy 0.000 description 36
- 238000010586 diagram Methods 0.000 description 16
- 238000013500 data storage Methods 0.000 description 14
- 238000012800 visualization Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 230000004048 modification Effects 0.000 description 9
- 238000012986 modification Methods 0.000 description 9
- 210000000709 aorta Anatomy 0.000 description 7
- 239000011159 matrix material Substances 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 4
- 238000004804 winding Methods 0.000 description 4
- 238000002591 computed tomography Methods 0.000 description 3
- 238000002595 magnetic resonance imaging Methods 0.000 description 3
- 230000015654 memory Effects 0.000 description 3
- 238000005452 bending Methods 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 208000002699 Digestive System Neoplasms Diseases 0.000 description 1
- 208000031481 Pathologic Constriction Diseases 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 210000001035 gastrointestinal tract Anatomy 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 208000037804 stenosis Diseases 0.000 description 1
- 230000036262 stenosis Effects 0.000 description 1
- 238000001356 surgical procedure Methods 0.000 description 1
- 210000001519 tissue Anatomy 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 230000002792 vascular Effects 0.000 description 1
- 230000003936 working memory Effects 0.000 description 1
Images
Landscapes
- Image Processing (AREA)
- Image Generation (AREA)
- Image Analysis (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
Description
請求項11に記載の発明は、観察対象の三次元画像データを取得する取得部と、前記三次元画像データ上において、当該観察対象物の位置を示す複数個の位置データを特定する位置データ特定部と、前記各位置データのスクリーン座標系における深さに関する情報を用いて前記スクリーン座標系における中間曲断面を算出し、前記中間局断面を用いて前記視線方向における第1の曲断面を算出する曲断面算出部と、前記第1の曲断面上の前記三次元画像データ又は前記第1の曲断面を基準とした領域に関する三次元画像データを、前記視線方向に沿って投影面に投影することで投影画像を生成する投影画像生成部と、前記投影画像を表示する表示部と、を具備することを特徴とする医用画像診断装置である。
請求項21に記載の発明は、入力される観察対象物の三次元画像データ上において、当該観察対象物の位置を示す複数個の位置データを特定し、前記複数個の位置データと所望する視線方向のデータに基づいて、前記各位置データのスクリーン座標系に対応する深さに関する情報を求め、この深さに関する情報を用いて三次元空間での前記視線方向における第1の曲断面を算出し、前記第1の曲断面上の前記三次元画像データ又は前記第1の曲断面を基準とした領域に関する三次元画像データを、前記視線方向に沿って投影面に投影することで投影画像を生成し、前記投影画像を表示すること、を特徴とする具備する画像処理方法である。
図2は、画像処理部15の構成を示したブロック図である。同図に示すように、
本画像処理部15は、三次元画像記憶部151、位置データ記憶部152、曲断面データ演算部153、曲断面データ記憶部154、視線データ変更部155、視線データ記憶部156、三次元画像投影部157を具備している。
図3は、本画像処理装置10によって実行される曲断面画像生成処理の手順を示したフローチャートである。同図に示すように、本曲断面画像生成処理は、大きく次の3つのステップから構成されている。
本ステップでは、三次元画像内の観察対象物の位置を示す複数個の位置データを入力する。入力される位置データがn個(nは2以上の自然数)あるとし、位置データ全体をWKと表すことにすると、i番目の位置データwKiは次の式(1)ようなデータである。
ここで、wxi, wyi, wziは、それぞれ実空間のx座標、y座標およびz座標である。
ステップS2では、ステップS1において入力されたn個の位置データと、視線データとから、曲断面を算出する。本ステップにおいて実行される処理は、図3のステップS21〜S23に示すように、次の三つの小ステップから構成されている。
本ステップS2−1では、以下の式(2)に従う行列計算を行って、スクリーン座標系における位置データsKiの座標、すなわち( sxi, syi, szi )を求める。
ここで、t[]は、転置行列を意味する。転置行列内の要素である1は、STWが2つの座標系の間のずれ量(平行移動量)を加味したものとなっているために存在する。
本ステップS2−2では、ステップS2−2で得られたスクリーン座標系の位置データから、スクリーン上の各点(ピクセル)SPのスクリーン座標系における深さ方向のデータを求める。スクリーン上の座標 (Sx, Sy) の点を、 SPx,y と記述すれば、深さ方向(視線方向)のデータはスクリーン座標系におけるz座標の値 Sz (深さ方向に関する情報)を求めることであり、(Sx, Sy , Sz)の集合が、求めている曲断面を表すデータとなる。
なお、図4に、スクリーン上の点SPx,yと(Sxi , Syi )との間の距離Diの一例を示した概念図を示した。
δi = 1 / Di m (5)
ここで、δiは重みであり、Di が小さいほど、つまりSKiが点(Sxi , Syi )に近いほど大きな重みとなるように考慮されている。
本ステップS2−3では、ステップS2−2で求めた曲断面(中間曲断面)上の点の座標(Sx, Sy , Sz)を、次の式(6)により、実空間座標に変換する。
これによって得られる(Wx, Wy , Wz)の集合が、曲断面の実空間におけるデータである。
ステップS3では、ステップS2において実空間に置ける曲断面データを用いて三次元画像を投影する投影処理を実行する。すなわち、本ステップS3においては、スクリーンの各点(Sx, Sy)について、ステップS2−2で求めた座標(Sx, Sy , Sz)に対応する実空間上の座標(Wx, Wy , Wz)にある三次元画像の画素値(ボクセル)V(Wx, Wy , Wz)を得て、それを(Sx, Sy)におけるピクセル値とする投影処理を行う。
次に、本実施形態の変形例について説明する。本変形例では、ステップS3において、ステップS2で得られた曲断面に対し厚みをつけて投影する投影方法を採用するものである。
次に、本実施形態の他の変形例について説明する。本変形例は、視線方向を任意に変更可能なものである。
次に、本発明の第2の実施形態について説明する。本実施形態に係る画像処理装置は、第1の実施形態で得られた曲断面を用いて、さらに血管内壁を映像化する機能(血管内壁可視化機能)を有するものである。以下、当該機能の内容およびこれに従う処理について、実施例に従って説明する。なお、以下説明の便宜上、図3のステップS2において取得される曲断面を、「第1種曲断面」と呼ぶこととする。また、第1種曲断面を利用して、血管内壁可視化機能に従う処理(血管内壁可視化処理)により生成される曲断面を、「第2種曲断面」と呼ぶことにする。
実施例1は、第1種曲断面上に存在する血液領域を、当該血液領域から視線奥行き方向に向かって最初に出現する非血液領域と置き換えることで、第2種曲断面を生成するものである。
実施例2は、第1種曲断面より手前に存在するデータを取り除くクリッピング処理と共に、所定の範囲内の値(血液と考えられる値)を持つボクセルに0又は(組織に対して相対的に)低い透明度を割り当てたボリュームレンダリング処理を行うことで、血管内壁を積極的に映像化するものである。
実施例3は、第1の実施形態において取得した血管中心線を利用して血管内壁を特定し、これと第1種曲断面上の血液領域とを置き換えることで、第2種曲断面を生成するものである。
Claims (21)
- 入力される観察対象物の三次元画像データ上において、当該観察対象物の位置を示す複数個の位置データを特定する位置データ特定部と、
前記複数個の位置データと所望する視線方向のデータに基づいて、前記各位置データのスクリーン座標系に対応する深さに関する情報を求め、この深さに関する情報を用いて三次元空間での前記視線方向における第1の曲断面を算出する曲断面算出部と、
前記第1の曲断面上の前記三次元画像データ又は前記第1の曲断面を基準とした領域に関する三次元画像データを、前記視線方向に沿って投影面に投影することで投影画像を生成する投影画像生成部と、
前記投影画像を表示する表示部と、
を具備することを特徴とする画像処理装置。 - 前記曲断面算出部は、前記複数個の位置データとの距離に従って係数が変化する重み付けを用いて、前記第1の曲断面を算出することを特徴とする請求項1記載の画像処理装置。
- 前記曲断面算出部は、前記中間曲断面を三次元空間に逆変換することにより、前記視線方向における前記第1の曲断面を算出することを特徴とする請求項1又は2記載の画像処理装置。
- 前記視線データを変更する視線変更部をさらに具備し、
前記曲断面算出部は、前記視線変更部により前記視線データが変更された場合には、変更後の前記視線方向のデータを用いて、前記第1の曲断面を算出すること、
を特徴とする請求項1乃至3のうちいずれか一項記載の画像処理装置。 - 前記曲断面算出部は、
前記三次元画像データを構成する各ボクセルの値に基づいて、前記第1の曲断面上に存在する血液領域と、当該血液領域から前記視線方向に沿って最初に出現する非血液領域とを特定し、
前記第1の曲断面上に存在する前記血液領域と前記非血液領域とを置き換えることで、第2の曲断面を生成し、
前記投影画像生成部は、前記第2の曲断面上の前記三次元画像データ又は前記第2の曲断面を基準とした領域に関する三次元画像データを、前記視線方向に沿って投影面に投影することで前記投影画像を生成すること、
を特徴とする請求項1乃至3のうちいずれか一項記載の画像処理装置。 - 前記投影画像生成部は、
前記観察対象物の三次元画像データから、前記第1の曲断面より手前に存在するデータを取り除くクリッピング処理を実行することで、クリッピングデータを生成し、
前記クリッピングデータを用いて、血液に対応する値を有するボクセルについて、組織に対し相対的に低い不透明度を割り当てたボリュームレンダリングを実行することで、前記投影画像を生成すること、
を特徴とする請求項1乃至3のうちいずれか一項記載の画像処理装置。 - 前記曲断面算出部は、
前記複数個の位置データと前記三次元画像データを構成する各ボクセルの値の変化率とに基づいて、前記第1の曲断面上に存在する血液領域と、当該血液領域から前記視線方向に沿って最初に出現する非血液領域とを特定し、
前記第1の曲断面上に存在する前記血液領域と前記非血液領域とを置き換えることで、第2の曲断面を生成し、
前記投影画像生成部は、前記第2の曲断面上の前記三次元画像又は前記第2の曲断面を基準とした領域に関する三次元画像を、前記視線方向に沿って投影面に投影することで前記投影画像を生成すること、
を特徴とする請求項1乃至3のうちいずれか一項記載の画像処理装置。 - 前記表示部は、前記投影画像を、前記観察対象物を前記視線方向から映像化した参照画像と対応付けて同時に表示することを特徴とする請求項1乃至7のうちいずれか一項記載の画像処理装置。
- 前記位置データは、血管中心線に関するデータであることを特徴とする請求項1乃至8のうちいずれか一項記載の画像処理装置。
- 観察対象の三次元画像データを取得する取得部と、
前記三次元画像データ上において、当該観察対象物の位置を示す複数個の位置データを特定する位置データ特定部と、
前記各位置データのスクリーン座標系における深さに関する情報を用いて前記スクリーン座標系における中間曲断面を算出し、前記中間局断面を用いて前記視線方向における第1の曲断面を算出する曲断面算出部と、
前記第1の曲断面上の前記三次元画像データ又は前記第1の曲断面を基準とした領域に関する三次元画像データを、前記視線方向に沿って投影面に投影することで投影画像を生成する投影画像生成部と、
前記投影画像を表示する表示部と、
を具備することを特徴とする医用画像診断装置。 - 前記曲断面算出部は、前記各位置データの前記視線方向に関する深さ情報を用いて、前記第1の曲断面を算出することを特徴とする請求項10記載の医用画像診断装置。
- 前記曲断面算出部は、前記複数個の位置データとの距離に従って係数が変化する重み付けを用いて、前記第1の曲断面を算出することを特徴とする請求項10又は11記載の医用画像診断装置。
- 前記曲断面算出部は、前記中間曲断面を三次元空間に逆変換することにより、前記視線方向における前記第1の曲断面を算出することを特徴とする請求項10乃至12のうちいずれか一項記載の医用画像診断装置。
- 前記視線データを変更する視線変更部をさらに具備し、
前記曲断面算出部は、前記視線変更部により前記視線方向のデータが変更された場合には、変更後の前記視線データを用いて、前記第1の曲断面を算出すること、
を特徴とする請求項10乃至13のうちいずれか一項記載の医用画像診断装置。 - 前記曲断面算出部は、
前記三次元画像データを構成する各ボクセルの値に基づいて、前記第1の曲断面上に存在する血液領域と、当該血液領域から前記視線方向に沿って最初に出現する非血液領域とを特定し、
前記第1の曲断面上に存在する前記血液領域と前記非血液領域とを置き換えることで、第2の曲断面を生成し、
前記投影画像生成部は、前記第2の曲断面上の前記三次元画像データ又は前記第2の曲断面を基準とした領域に関する三次元画像データを、前記視線方向に沿って投影面に投影することで前記投影画像を生成すること、
を特徴とする請求項10乃至13のうちいずれか一項記載の医用画像診断装置。 - 前記投影画像生成部は、
前記観察対象物の三次元画像データから、前記第1の曲断面より手前に存在するデータを取り除くクリッピング処理を実行することで、クリッピングデータを生成し、
前記クリッピングデータを用いて、血液に対応する値を有するボクセルについて、組織に対し相対的に低い不透明度を割り当てたボリュームレンダリングを実行することで、前記投影画像を生成すること、
を特徴とする請求項10乃至13のうちいずれか一項記載の医用画像診断装置。 - 前記曲断面算出部は、
前記複数個の位置データと前記三次元画像データを構成する各ボクセルの値の変化率とに基づいて、前記第1の曲断面上に存在する血液領域と、当該血液領域から前記視線方向に沿って最初に出現する非血液領域とを特定し、
前記第1の曲断面上に存在する前記血液領域と前記非血液領域とを置き換えることで、第2の曲断面を生成し、
前記投影画像生成部は、前記第2の曲断面上の前記三次元画像又は前記第2の曲断面を基準とした領域に関する三次元画像を、前記視線方向に沿って投影面に投影することで前記投影画像を生成すること、
を特徴とする請求項10乃至13のうちいずれか一項記載の医用画像診断装置。 - 前記表示部は、前記投影画像を、前記観察対象物を前記視線方向から映像化した参照画像と対応付けて同時に表示することを特徴とする請求項10乃至17のうちいずれか一項記載の医用画像診断装置。
- 前記位置データは、血管中心線に関するデータであることを特徴とする請求項10乃至18のうちいずれか一項記載の医用画像診断装置。
- 入力される観察対象物の三次元画像データ上において、当該観察対象物の位置を示す複数個の位置データを特定し、
前記複数個の位置データと所望する視線方向のデータに基づいて、前記各位置データのスクリーン座標系に対応する深さに関する情報を求め、この深さに関する情報を用いて三次元空間での前記視線方向における第1の曲断面を算出し、
前記第1の曲断面上の前記三次元画像データ又は前記第1の曲断面を基準とした領域に関する三次元画像データを、前記視線方向に沿って投影面に投影することで投影画像を生成し、
前記投影画像を表示すること、
を特徴とする具備する画像処理方法。 - 前記三次元画像データを構成する各ボクセルの値に基づいて、前記第1の曲断面上に存在する血液領域と、当該血液領域から前記視線方向に沿って最初に出現する非血液領域とを特定し、
前記第1の曲断面上に存在する前記血液領域と前記非血液領域とを置き換えることで、第2の曲断面を生成し、
前記第2の曲断面上の前記三次元画像データ又は前記第2の曲断面を基準とした領域に関する三次元画像データを、前記視線方向に沿って投影面に投影することで投影画像を生成すること、
をさらに具備することを特徴とする請求項20記載の画像処理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005261020A JP4896470B2 (ja) | 2004-09-30 | 2005-09-08 | 画像処理装置、医用画像診断装置及び画像処理方法 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004287280 | 2004-09-30 | ||
JP2004287280 | 2004-09-30 | ||
JP2005261020A JP4896470B2 (ja) | 2004-09-30 | 2005-09-08 | 画像処理装置、医用画像診断装置及び画像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006122663A JP2006122663A (ja) | 2006-05-18 |
JP4896470B2 true JP4896470B2 (ja) | 2012-03-14 |
Family
ID=36717925
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005261020A Active JP4896470B2 (ja) | 2004-09-30 | 2005-09-08 | 画像処理装置、医用画像診断装置及び画像処理方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4896470B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11402198B2 (en) | 2019-06-19 | 2022-08-02 | Ricoh Company, Ltd. | Information processing device, biological information measurement device, and computer-readable medium |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008000261A (ja) * | 2006-06-21 | 2008-01-10 | Aze Ltd | 管腔状組織の観察用画像作成方法、装置およびプログラム |
US8320711B2 (en) * | 2007-12-05 | 2012-11-27 | Biosense Webster, Inc. | Anatomical modeling from a 3-D image and a surface mapping |
JP5652994B2 (ja) * | 2008-09-26 | 2015-01-14 | 株式会社東芝 | X線診断装置 |
JP6815761B2 (ja) * | 2016-06-17 | 2021-01-20 | 株式会社東芝 | 3次元表示装置、該3次元表示装置に適用される3次元表示方法およびプログラム |
BR112019005855A2 (pt) * | 2016-09-29 | 2019-06-11 | Koninklijke Philips Nv | aparelho de processamento de imagens, sistema de processamento de imagens, e método para fornecer uma imagem |
JP7155231B2 (ja) * | 2020-12-21 | 2022-10-18 | 株式会社東芝 | 表示装置、該表示装置に適用される表示方法およびプログラム |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05266214A (ja) * | 1992-03-17 | 1993-10-15 | Hitachi Ltd | 画像表示方法 |
JP4318799B2 (ja) * | 1999-06-29 | 2009-08-26 | 株式会社日立メディコ | 画像表示装置 |
JP2003260052A (ja) * | 2002-03-08 | 2003-09-16 | Hitachi Medical Corp | 画像診断支援装置 |
DE10254908B4 (de) * | 2002-11-25 | 2006-11-30 | Siemens Ag | Verfahren zum Herstellen eines Bildes |
-
2005
- 2005-09-08 JP JP2005261020A patent/JP4896470B2/ja active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11402198B2 (en) | 2019-06-19 | 2022-08-02 | Ricoh Company, Ltd. | Information processing device, biological information measurement device, and computer-readable medium |
Also Published As
Publication number | Publication date |
---|---|
JP2006122663A (ja) | 2006-05-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7463262B2 (en) | Image processing apparatus and method | |
JP4267598B2 (ja) | 画像融合処理方法、画像融合処理プログラム、画像融合処理装置 | |
JP4335817B2 (ja) | 関心領域指定方法、関心領域指定プログラム、関心領域指定装置 | |
JP5318877B2 (ja) | データセットのボリュームレンダリングのための方法及び装置 | |
JP4891541B2 (ja) | 血管狭窄率解析システム | |
JP4709177B2 (ja) | 三次元画像処理装置および方法並びにプログラム | |
JP4896470B2 (ja) | 画像処理装置、医用画像診断装置及び画像処理方法 | |
JP5566370B2 (ja) | 医用画像処理装置及び方法 | |
JP2009034521A (ja) | 医学的な画像診断におけるデータを体積レンダリングするシステムと方法ならびにコンピュータ読み出し可能記憶媒体 | |
JP2006055213A (ja) | 画像処理装置、及びプログラム | |
JP5815513B2 (ja) | 画像処理装置及び画像処理方法 | |
JP6445784B2 (ja) | 画像診断支援装置、その処理方法及びプログラム | |
JP4885042B2 (ja) | 画像処理方法および装置ならびにプログラム | |
JP6201255B2 (ja) | 医用画像処理システムおよび医用画像処理プログラム | |
JP4018679B2 (ja) | レンダリング処理方法、レンダリング処理プログラム、レンダリング処理装置 | |
Bornik et al. | Computer-aided liver surgery planning: an augmented reality approach | |
JP4122314B2 (ja) | 投影画像処理方法、投影画像処理プログラム、投影画像処理装置 | |
JP2006000127A (ja) | 画像処理方法および装置並びにプログラム | |
JP2006075216A (ja) | 医用画像処理システム、医用画像処理プログラムおよび医用画像処理方法 | |
JP2010131315A (ja) | 医用画像処理装置及び医用画像処理プログラム | |
US20060103678A1 (en) | Method and system for interactive visualization of locally oriented structures | |
JP5065740B2 (ja) | 画像処理方法および装置並びにプログラム | |
JP5305635B2 (ja) | 医用画像表示装置 | |
JP2008067915A (ja) | 医用画像表示装置 | |
JP2006178772A (ja) | 画像処理方法および装置並びにプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080905 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110331 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110426 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110627 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110802 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20111003 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20111129 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20111221 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4896470 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150106 Year of fee payment: 3 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313115 Free format text: JAPANESE INTERMEDIATE CODE: R313117 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |