JP5783627B2 - 人体模型作成システム - Google Patents
人体模型作成システム Download PDFInfo
- Publication number
- JP5783627B2 JP5783627B2 JP2011098008A JP2011098008A JP5783627B2 JP 5783627 B2 JP5783627 B2 JP 5783627B2 JP 2011098008 A JP2011098008 A JP 2011098008A JP 2011098008 A JP2011098008 A JP 2011098008A JP 5783627 B2 JP5783627 B2 JP 5783627B2
- Authority
- JP
- Japan
- Prior art keywords
- tissue
- human body
- signal
- image
- created
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000605 extraction Methods 0.000 claims description 40
- 239000000463 material Substances 0.000 claims description 25
- 238000003384 imaging method Methods 0.000 claims description 23
- 238000006243 chemical reaction Methods 0.000 claims description 18
- 239000012780 transparent material Substances 0.000 claims description 9
- 230000001575 pathological effect Effects 0.000 claims description 7
- 230000002159 abnormal effect Effects 0.000 claims description 6
- 238000002372 labelling Methods 0.000 claims description 5
- 230000005540 biological transmission Effects 0.000 claims description 4
- 210000001519 tissue Anatomy 0.000 description 124
- 238000000034 method Methods 0.000 description 55
- 238000009826 distribution Methods 0.000 description 38
- 238000002591 computed tomography Methods 0.000 description 32
- 210000000988 bone and bone Anatomy 0.000 description 29
- 238000012545 processing Methods 0.000 description 29
- 230000006870 function Effects 0.000 description 16
- 238000002604 ultrasonography Methods 0.000 description 14
- 238000007689 inspection Methods 0.000 description 12
- 210000004872 soft tissue Anatomy 0.000 description 12
- 210000003205 muscle Anatomy 0.000 description 10
- 210000004027 cell Anatomy 0.000 description 9
- 238000003745 diagnosis Methods 0.000 description 9
- 230000008520 organization Effects 0.000 description 9
- 239000003925 fat Substances 0.000 description 8
- 238000011282 treatment Methods 0.000 description 8
- 210000004204 blood vessel Anatomy 0.000 description 6
- 239000000284 extract Substances 0.000 description 6
- 206010028980 Neoplasm Diseases 0.000 description 5
- 238000012937 correction Methods 0.000 description 5
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 239000000499 gel Substances 0.000 description 4
- 210000003127 knee Anatomy 0.000 description 4
- 230000005855 radiation Effects 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 239000003086 colorant Substances 0.000 description 3
- 210000000629 knee joint Anatomy 0.000 description 3
- 238000007639 printing Methods 0.000 description 3
- 230000009466 transformation Effects 0.000 description 3
- 206010002091 Anaesthesia Diseases 0.000 description 2
- UFHFLCQGNIYNRP-UHFFFAOYSA-N Hydrogen Chemical compound [H][H] UFHFLCQGNIYNRP-UHFFFAOYSA-N 0.000 description 2
- 239000000654 additive Substances 0.000 description 2
- 230000037005 anaesthesia Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 210000001185 bone marrow Anatomy 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 239000002872 contrast media Substances 0.000 description 2
- 201000010099 disease Diseases 0.000 description 2
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 2
- 229940079593 drug Drugs 0.000 description 2
- 239000003814 drug Substances 0.000 description 2
- 229910052739 hydrogen Inorganic materials 0.000 description 2
- 239000001257 hydrogen Substances 0.000 description 2
- 235000015110 jellies Nutrition 0.000 description 2
- 239000008274 jelly Substances 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 239000003550 marker Substances 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 210000005036 nerve Anatomy 0.000 description 2
- 238000002360 preparation method Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 210000002763 pyramidal cell Anatomy 0.000 description 2
- 238000011002 quantification Methods 0.000 description 2
- 239000000523 sample Substances 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 230000001629 suppression Effects 0.000 description 2
- 238000001356 surgical procedure Methods 0.000 description 2
- 206010028289 Muscle atrophy Diseases 0.000 description 1
- 208000027418 Wounds and injury Diseases 0.000 description 1
- 210000001015 abdomen Anatomy 0.000 description 1
- 230000000996 additive effect Effects 0.000 description 1
- 210000003484 anatomy Anatomy 0.000 description 1
- 238000005452 bending Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- -1 bone marrow Substances 0.000 description 1
- 210000000845 cartilage Anatomy 0.000 description 1
- 210000000038 chest Anatomy 0.000 description 1
- 230000004456 color vision Effects 0.000 description 1
- 238000013170 computed tomography imaging Methods 0.000 description 1
- 230000006378 damage Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000002224 dissection Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 238000002592 echocardiography Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000011049 filling Methods 0.000 description 1
- 230000002068 genetic effect Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 238000007373 indentation Methods 0.000 description 1
- 208000014674 injury Diseases 0.000 description 1
- 210000003041 ligament Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 238000001000 micrograph Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000000491 multivariate analysis Methods 0.000 description 1
- NJPPVKZQTLUDBO-UHFFFAOYSA-N novaluron Chemical compound C1=C(Cl)C(OC(F)(F)C(OC(F)(F)F)F)=CC=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F NJPPVKZQTLUDBO-UHFFFAOYSA-N 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 210000004197 pelvis Anatomy 0.000 description 1
- 230000000149 penetrating effect Effects 0.000 description 1
- 230000035515 penetration Effects 0.000 description 1
- 230000035699 permeability Effects 0.000 description 1
- 239000011347 resin Substances 0.000 description 1
- 229920005989 resin Polymers 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 206010039073 rheumatoid arthritis Diseases 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 239000007779 soft material Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 210000001258 synovial membrane Anatomy 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 210000001835 viscera Anatomy 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Landscapes
- Instructional Devices (AREA)
Description
医療現場ではMRIやCTなどの三次元データを取得する検査装置が利用されている。CTは放射線を利用しているため、骨などの固い組織の検出に有用であるが、軟部組織の検出は苦手である。MRIは水素と磁場の反応を利用しているため、筋肉や脂肪などの軟部組織の検出に優れているが、水素を持たない骨などの組織の検出は苦手である。三次元超音波は視野は狭いが三次元高周波超音波プローブを用いることで高い精度で軟部情報を得ることができる。このように装置ごとに異なる組織特異性をもった三次元データを得ることができる。
上記方法によって組織ごとの位置情報のセットを得ることが可能である。これらの情報をCADシステムに入力して組織ごとにRPシステムで素材を変えることで模型を作成することが可能である。もちろん、人体の三次元データを作成する方法は特に限定されるものではなく様々な方法を採用することができる。三次元データに基づいて模型を作成する方法もRPシステムを用いる方法に限定されるものではない。以下に代表的な2つの作成法を説明する。
超音波透過性を持たないが半透明で中を透視することが可能な教材の作成法Aを示す。人体と同一の形状で半透明であり、中の組織を透視することが可能な教材で、特定の断面で分離してその断面を観察することが可能である。
超音波透過性をもち半透明で中を透視することが可能な教材の作成法Bを示す。超音波検査練習用の教材に必要な特性は、(1)血管・筋肉・骨などの重要組織が透けて見えること、(2)超音波を当てた時に人体と同じような超音波画像が描出されること、である。超音波画像では、水などの無信号組織、筋肉などの中間的な信号の組織、骨などの高信号で超音波を通さない組織がある。そこで、(1)無信号組織を超音波で信号をもたずに透明な素材、(2)中間的な信号の組織を半透明で超音波で中間的な信号となる素材、(3)骨などの高信号組織を硬くて信号を通さない素材の三色刷りで作成すればよい。現時点では超音波で信号をもたずに透明なRP素材は存在しないため、以下の手法を採用している。
(1)使い方A
作成法Aにより作成された人体模型の使い方を説明する。すなわち、超音波透過性を持たないが半透明で中を透視することが可能な教材は、CTやMRI、超音波検査における三次元的な構造把握に有用である。健康な人のデータと疾患データから作成することで三次元的に違いを理解することも可能である。また診断で重要な断面が見えるようにCADで断面を設定することで、特定の疾患検出に役立つ教材を作成することが可能である。
作成法Bにより作成された人体模型の使い方を説明する。すなわち、超音波透過性をもち半透明で中を透視することが可能な教材は、超音波検査の練習に有用である。特に超音波ガイド下における腫瘍穿刺や麻酔のための神経穿刺は患者ごとの違いが大きいため個別の対応が必要である。施術前に患者模型を作成することで術式のシュミレーションを行うことが可能である。
本発明者は、画像を用いて組織を効率よく抽出することができる組織抽出システムを提案している。以下、この組織抽出システムを図面に従って詳細に説明する。
図17は、本発明の実施形態における組織抽出システム10の構成図である。この組織抽出システム10は、MRI画像を用いて被検体の組織を抽出するシステムであって、機能的には、撮像部11と、変換部12と、抽出部13と、加工部14と、メモリ15と、表示部16とを備えている。もちろん、情報を入力するための入力部や他のシステムと通信するための通信部などその他の処理部も備えているが、ここでは図示していない。
組織抽出システム10の構成を詳しく説明する前に、CT(Computed Tomography)の機能を概観して画像処理が重要となってきた経緯について説明する。レントゲン写真は、被検体に放射線を照射し、被検体の後ろ側に放射線を感知するフィルムをおいて撮影するという二次元のシステムである。CTは、放射線源と受信機を回転させながら撮影してデータを計算することで断面像を作成するシステムである。1990年代まではスライス厚が3−5mm厚のデータであったため、一度の検査で画像枚数が100枚を超えることは少なく、画像をフィルムに焼いて診断していた。
次に、臨床画像市場の歴史を概観して現状を把握する。従来、医療画像メーカーは独自規格の機器ばかり製造し、各社が囲い込みを行った結果、個々の医療機関では同じメーカーの機器しか使用できずコストも高くついた。そこで、アメリカの放射線専門医会と北米電子機器工業会が協議してDICOM(Digital Imaging and Communications in Medicine)規格を定めた。その結果、違うメーカー同士でも画像のやり取りを行うことができるようになった。
ヒストグラム空間を用いたMRI画像信号の標準化について説明する。MRI画像の問題点は信号が検査ごとに変化する相対値であることである。すなわち、CT画像の信号値は水を0、空気を−1000として標準化されているため、特定の組織を信号値だけを頼りに抽出することができる。一方、MRIでは、信号値だけから特定の組織を自動抽出することは困難であり、自動抽出をするには組織ごとの信号分布を知る必要がある。
図18は、本発明の実施形態におけるヒストグラム空間の処理を示すフローチャートである。本質的には座標に対して組織マスクラベルすることが重要である。以下、それぞれの処理を詳細に説明する。
各シークエンスの信号値を(x,y,z)=Snとする。Snの最小値・最大値はシークエンス、MRIの機種、設定で変化するため、最終的にはSnを標準化したrSnに変換すること(下記5−2の段階)を考える。
ヒストグラム空間は隙間の多い分布となるため、単一のシークエンスよりも分離が容易となる。人によって筋肉が多い、骨が多いなどの違いはあるが、ヒストグラム空間での信号分布・島の分布は変わらない。しかし、この段階では信号値が標準化されていないので、まずは島の分布状況から島の組織名を同定する。関節を例に挙げると、シークエンスがT1強調画像、T2強調画像、T2*強調脂肪抑制画像である場合は、図20に示すように、(A)水分、(B)脂肪、(C)骨髄、(D)筋肉・軟骨、(E)空気・骨・靱帯がそれぞれ別の島に分離される。このヒストグラムを三次元で表すと図21のようになる。
次に、抽出部13は、ヒストグラム空間座標と組織とを対応付けるためのラベリングを行う(図18、ステップ5)。ある空間に筋肉があるか骨があるかなどを排他的に指定することは困難である。どのように画像検査の精度が向上しても、ボクセル(volume pixel)のサイズは細胞レベルまで小さくならないので、あるボクセルにいろいろな組織が入ってしまうことになる。そこで、組織ごとの存在確率をボクセルごとに指定する方法を考える。
座標情報のリストを用いて各シークエンスで共通な特定組織のマスクを得ることができる。この組織マスクを用いて行うことができる臨床上重要な応用法は以下の項目である。
腫瘍組織などは通常の信号パターンを示さないため、ヒストグラム空間内で通常認めない島として出現する。そこで、加工部14は、抽出部13により抽出された組織のうち異常信号パターンを示す病的組織をハイライト化する機能を備えている。具体的な方法としては、ヒストグラム空間の島パターンから信号を標準化したのち、異常信号パターンの島(通常認めない島)にあたる信号を赤などで表示する。このようにすると、通常の白黒画像に赤いマスク領域として病的組織がハイライトされる。ソフト上でハイライトのオン・オフ機能をつけておくと理解しやすい。
関節リウマチの滑膜の体積変化や腫瘍の体積変化は薬の効果判定などで利用されている。通常は、最も大きく見える断面図で縦横を測定して疑似的に体積を計算する。特定の組織を抽出するのに人間の眼を用いるため、このような測定方法がとられていた。近年、画像検査の量が膨大になってきたため、このような測定の仕事が増大し、読影する医師の負担が増加している状態である。
CT、MRIの三次元データから実寸大の模型を作成して骨モデルを作成し、その骨モデルに対してプレートの術前ベンディングを行っている。また、骨の三次元形状が分かればナビゲーション手術用のデータに利用することもできる。MRIの三次元データはCTの三次元データに劣るとされていたが、マルチシークエンスで抽出すれば組織コントラストが上昇するため抽出精度が上昇する。そこで、加工部14は、抽出部13により抽出された組織の座標情報を抽出することで組織の三次元データを作成する機能を備えている。この場合、組織の存在を「あり=1」「なし=0」としたマスクデータが必要であるが、本発明によれば、ヒストグラム空間から領域選択して座標情報を抽出するだけで実現することができる。
複数のシークエンスそれぞれをRGBに変換して表示部16に表示すれば、複数のシークエンスを同時に診断することができる。そこで、加工部14は、各錐体細胞と各MRIシークエンスとを対応付け、その対応関係に基づいて複数のMRIシークエンスそれぞれをRGBに変換することでカラーマップを作成する機能を備えている。
F(S1,S2)=aS1+bS2 (式2)
F(S1,S2,S3,・・・Sn)=(R,G,B) (式3)
以上のように、本発明の実施形態における組織抽出システム10によれば、複数のMRIシークエンスがヒストグラム空間に変換されて組織分離効率が高まるため、組織を効率よく抽出することができる。しかも、病的組織のハイライト化や自動診断、注目組織の体積測定による定量化、実体模型作製やナビゲーション、マルチシークエンスカラーマップといった臨床上重要な様々な分野に応用することができ、実用的価値が極めて高い発明と言える。MRIはいろいろなシークエンスで撮影することができるので、組織コントラストが違う検査をたくさん行うことができるという利点もある。
11 撮像部
12 変換部
13 抽出部
31 無信号組織
32 中間信号組織
33 高信号組織
Claims (4)
- 組織抽出システムにより作成された人体の三次元データに基づいて透明な素材で人体の模型を作成する人体模型作成システムであって、
前記組織抽出システムは、
座標軸をそろえて複数のシークエンスを撮像する撮像部と、
前記撮像部により撮像された複数のシークエンスを、そのシークエンスを座標軸にとったヒストグラム空間に変換する変換部と、
前記変換部により変換されたヒストグラム空間上の島の中心位置を計算し、その中心位置をもとに標準化を行い、前記ヒストグラム空間座標と組織とを対応付けるためのラベリングを行い、被検体の組織を抽出する抽出部と、
前記抽出部により抽出された組織のうち異常信号パターンを示す病的組織をハイライト化するハイライト化部と、
前記抽出部により抽出された組織の座標情報を抽出することで三次元データを作成する三次元データ作成部とを備え、
前記ヒストグラム空間上の島情報を用いて各シークエンスを標準化する場合は自由曲線を用いた領域選択を行うことで標準化係数を各シークエンスごとに指定し、事前に作成しておいたライブラリを用いて前記ヒストグラム空間内の各点において透明度と色を設定する
ことを特徴とする人体模型作成システム。 - 前記透明な素材は超音波透過性に優れた素材であることを特徴とする請求項1記載の人体模型作成システム。
- 超音波画像における無信号組織を超音波で信号をもたずに透明な素材、中間信号組織を半透明で超音波で中間的な信号となる素材、高信号組織を硬くて信号を通さない素材で作成することを特徴とする請求項2記載の人体模型作成システム。
- 前記中間信号組織と前記高信号組織をRPシステムで作成して外側を覆う模型に設置した状態でゲルで満たしたことを特徴とする請求項3記載の人体模型作成システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011098008A JP5783627B2 (ja) | 2011-04-26 | 2011-04-26 | 人体模型作成システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011098008A JP5783627B2 (ja) | 2011-04-26 | 2011-04-26 | 人体模型作成システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012230226A JP2012230226A (ja) | 2012-11-22 |
JP5783627B2 true JP5783627B2 (ja) | 2015-09-24 |
Family
ID=47431827
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011098008A Active JP5783627B2 (ja) | 2011-04-26 | 2011-04-26 | 人体模型作成システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5783627B2 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2989986B1 (en) * | 2014-09-01 | 2019-12-18 | Samsung Medison Co., Ltd. | Ultrasound diagnosis apparatus and method of operating the same |
JP2017096997A (ja) * | 2015-11-18 | 2017-06-01 | 石川可鍛製鉄株式会社 | 人体模型(シミュレーター)の製造方法、人体模型 |
CN106937875B (zh) * | 2017-04-20 | 2020-07-31 | 北京华科创智健康科技股份有限公司 | 一种仿人体胃器官体模 |
JP7092841B2 (ja) * | 2020-10-13 | 2022-06-28 | 昌平 岩部 | 小児骨格模型 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0728978A (ja) * | 1993-07-08 | 1995-01-31 | Toshiba Corp | 画像表示装置 |
JP2905471B1 (ja) * | 1998-02-26 | 1999-06-14 | 正二 義本 | 超音波医学実習用人体モデル |
JP2003241647A (ja) * | 2002-02-15 | 2003-08-29 | Japan Science & Technology Corp | 個別対応型医用3次元模型とその作製方法、及びその作製装置 |
US20080243284A1 (en) * | 2007-03-28 | 2008-10-02 | Randy-David Burce Grishaber | Anatomically compliant aaa model and the method of manufacture for in vitro simulated device testing |
KR101458729B1 (ko) * | 2011-03-31 | 2014-11-05 | 고쿠리츠다이가쿠호진 고베다이가쿠 | 3 차원 조형 모델 제작 방법 및 의료·의학·연구·교육용 지원툴 |
-
2011
- 2011-04-26 JP JP2011098008A patent/JP5783627B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2012230226A (ja) | 2012-11-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6768811B2 (en) | System and method for analysis of imagery data | |
CN102525534B (zh) | 医用图像处理装置、医用图像处理方法 | |
US20160148375A1 (en) | Method and Apparatus for Processing Medical Image | |
US20070237372A1 (en) | Cross-time and cross-modality inspection for medical image diagnosis | |
US11373301B2 (en) | Image diagnostic device, image processing method, and program for obtaining diagnostic prediction models using deep learning | |
JP3254451B2 (ja) | 多チャンネルmri画像処理によるカラー化方法及び装置 | |
JP2005169120A (ja) | 検査対象の結果画像の作成方法および画像処理システム | |
RU2419882C2 (ru) | Способ визуализации секущих плоскостей для изогнутых продолговатых структур | |
EP1966762A2 (en) | Cross-time and cross-modality medical diagnosis | |
EP3220826B1 (en) | Method and apparatus for processing medical image | |
US20120237102A1 (en) | System and Method for Improving Acquired Ultrasound-Image Review | |
Duran et al. | The additional diagnostic value of the three-dimensional volume rendering imaging in routine radiology practice | |
JP5783627B2 (ja) | 人体模型作成システム | |
CN101542526B (zh) | 融合的灌注和功能性3d旋转血管造影绘制 | |
US20080112602A1 (en) | Medical image generating method | |
JP4691732B1 (ja) | 組織抽出システム | |
CN116631252A (zh) | 一种基于混合现实技术的体格检查模拟***及方法 | |
US20110242096A1 (en) | Anatomy diagram generation method and apparatus, and medium storing program | |
RU2736800C1 (ru) | Способ подготовки и выполнения хирургической операции на органах малого таза | |
Peng et al. | Clinical significance of creative 3D-image fusion across [CT+ MR] modalities based on approach of characteristic co-registration | |
CN111462314A (zh) | 器官三维图像重建方法、手术导航方法及手术辅助*** | |
CN111292248A (zh) | 超声融合成像方法及超声融合导航*** | |
Mohamed et al. | Quaternion based freehand 3D baby phantom reconstruction using 2D ultrasound probe and game controller motion and positioning sensors | |
JP3558596B2 (ja) | 人体数値管理システム及び人体モデリングシステム | |
US10783699B2 (en) | Sub-voxel refinement of anatomical models |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140326 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140402 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150326 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150331 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150601 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150623 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150717 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5783627 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313117 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |