JPH09206278A - 眼科画像処理装置 - Google Patents

眼科画像処理装置

Info

Publication number
JPH09206278A
JPH09206278A JP8042140A JP4214096A JPH09206278A JP H09206278 A JPH09206278 A JP H09206278A JP 8042140 A JP8042140 A JP 8042140A JP 4214096 A JP4214096 A JP 4214096A JP H09206278 A JPH09206278 A JP H09206278A
Authority
JP
Japan
Prior art keywords
image
fundus
photographing
mask
lens
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP8042140A
Other languages
English (en)
Other versions
JP3618877B2 (ja
Inventor
Kazuhiro Matsumoto
和浩 松本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP04214096A priority Critical patent/JP3618877B2/ja
Publication of JPH09206278A publication Critical patent/JPH09206278A/ja
Application granted granted Critical
Publication of JP3618877B2 publication Critical patent/JP3618877B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Eye Examination Apparatus (AREA)

Abstract

(57)【要約】 【目的】 眼底像の有効部分を明瞭に表示できる。 【構成】 照明光による眼底Erからの反射光は、対物レ
ンズ2、フォーカスレンズ11、撮影レンズ12、切換
えミラー13を介して動画観察用カメラ15の撮影像面
に結像し、動画観察用モニタ17に眼底像Er' とキャラ
クタ発生手段16からのマスク像Mとが映出され、眼底
像Er' の周りにあるフレア部分がマスクされて、眼底Er
の静止画撮影の撮像範囲と一致する有効部が表示され
る。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、眼科医院において
眼科検査に使用される眼科画像処理装置に関するもので
ある。
【0002】
【従来の技術】従来から眼底カメラにおいては、眼底像
周辺に発生するフレアを取り除いて有効撮影範囲を明確
にするために、周辺領域へ向かう光を遮光する遮光部材
としてマスクをフィルム等の記録手段の直前に配置する
か、又は結像面にマスクを配置し、更にその背後にマス
クと眼底像を再結像する光学系を配置して撮影を行って
いる。
【0003】
【発明が解決しようとする課題】しかしながら上述の従
来例においては、CCDカメラ等の電子撮像素子が用い
られており、撮像面の直前に各種のフィルタやカバーガ
ラス等が配置されているためにマスクを配置することは
難しく、特に3Pプリズムのような色分割プリズムの背
後に3個の撮像素子を有する3板式カメラを用いる場合
には、マスクを写し込むためにマスクと眼底像を光学的
に再結像しなければならず、このために光路長が長くな
り光学系が複雑化するという問題がある。
【0004】また、拡大撮影をする場合には、マスクに
よってフレアのない部分まで遮断してしまうために観察
範囲が狭くなるという欠点があり、この欠点を補うため
にマスクの大きさを結像倍率に応じて変化させようとす
ると、装置の構造や制御が複雑化するという問題があ
る。
【0005】更に、眼底カメラの場合には、被検眼の視
度に応じたピント合わせをするための光学系を使用して
いるので、ピント合わせの際に被検眼の視度により眼底
の結像倍率が変化してしまい、一定の大きさのマスクで
は良好に撮影できた部分まで隠してしまったり、周辺に
フレアが混入する等の問題が発生する。
【0006】本発明の第1の目的は、上述の問題点を解
消し、眼底像の有効部分を明瞭に表示できる眼科画像処
理装置を提供することである。
【0007】本発明の第2の目的は、短い光路長の簡素
な構造の眼科画像処理装置を提供することである。
【0008】本発明の第3の目的は、拡大撮影時でも広
い範囲を観察できる眼科画像処理装置を提供することで
ある。
【0009】
【課題を解決するための手段】上記目的を達成するため
の第1発明に係る眼科画像処理装置は、得られた眼科画
像中の不要領域に電気的マスキングを施すことを特徴と
する。
【0010】第2発明に係る眼科画像処理装置は、撮像
した画像を電気信号に変換する撮像手段と、該撮像手段
が撮像した眼底画像領域外を含む周囲領域をパターン画
像に変換する変換手段とを有することを特徴とする。
【0011】第3発明に係る眼科画像処理装置は、眼底
像を撮影する撮影光学系と、該撮影光学系を介して撮像
した画像を電気信号に変換する撮像手段と、該撮像手段
が撮像した画像の前記撮影光学系の撮影倍率又は合焦状
態に対応した領域をパターン画像に変換する変換手段と
を有することを特徴とする。
【0012】
【発明の実施の形態】本発明を図示の実施例に基づいて
詳細に説明する。図1は眼底カメラの構成図を示し、ラ
ンプ等の観察アライメント用光源1から対物レンズ2に
至る光路上には、コンデンサレンズ3、ストロボ等の静
止画撮影用光源4、コンデンサレンズ5、ミラー6、レ
ンズ7、リング状開口を有する絞り8、リレーレンズ
9、中央部に開口を有する孔あきミラー10が順次に配
列されている。孔あきミラー10の背後の光路上には、
フォーカスレンズ11、変倍機能を有する撮影レンズ1
2、切換えミラー13、デジタルカメラのような静止画
撮影用の高精細カメラ14が順次に配列され、切換えミ
ラー13の反射方向には動画観察用の高感度カメラ15
が配置されている。
【0013】動画観察用カメラ15の出力はキャラクタ
発生手段16を介して動画観察用モニタ17に接続さ
れ、キャラクタ発生手段16の出力は、フォーカスレン
ズ11、撮影レンズ12にそれぞれ接続され、フォーカ
スレンズ11にはフォーカスノブ18の出力も接続され
ている。また、静止画撮影用カメラ14の出力は画像メ
モリを有する制御手段19に接続され、制御手段19の
出力はコンピュータディスプレイのような静止画像再生
用モニタ20、光ディスクや磁気ディスク等の外部記憶
手段21にそれぞれ接続されている。また、静止画撮影
用光源4には撮影スイッチ22の出力が接続され、更に
撮影スイッチ22の出力は制御手段19に接続されてい
る。また、撮影倍率を変更するズームスイッチ23の出
力が、キャラクタ発生手段16、制御手段19にそれぞ
れ接続されている。
【0014】このような構成において、観察アライメン
ト用光源1を発した光束は、コンデンサレンズ3、静止
画撮影用光源4、コンデンサレンズ5を通り、ミラー6
により上方に反射され、レンズ7、絞り8のリング状開
口部、リレーレンズ9を通って、孔あきミラー10によ
り左方へ反射され、対物レンズ2を通り、被検眼Eの瞳
孔Epを介して眼底Erを照明する。このように照明された
眼底像Er' は、被検眼Eの瞳孔Ep、対物レンズ2、フォ
ーカスレンズ11、撮影レンズ12を通り、切換えミラ
ー13により下方に反射され、動画観察用カメラ15の
撮影像面に結像する。そして、この眼底像Er' は電気信
号に変換され、キャラクタ発生手段16を通って動画観
察用モニタ17に至り、動画観察用モニタ17には眼底
像Er' とキャラクタ発生手段16から発生されたマスク
像Mとが映出され、眼底像Er' の周りにあるフレア部分
がマスクされて、眼底Erの静止画撮影の撮像範囲と一致
する有効部だけが表示される。
【0015】撮影者はこの眼底像Er' を見ながら、撮影
部位、アライメント、ピントの状態を確認し、ピントが
ずれている場合には、フォーカスノブ18を操作するこ
とにより、フォーカスノブ18の動きに連動しているフ
ォーカスレンズ11を光軸方向に移動してピント合わせ
を行う。これによって、眼底Erと撮像素子との結像倍率
が変化するので、キャラクタ発生手段16はこのフォー
カシング情報を検知して最適な有効範囲を決定し、動画
観察用モニタ17上にその範囲に対応したマスク画像を
発生させる。また、フォーカシング動作と共に動画観察
用モニタ17の有効画像の範囲が変化するので、制御手
段16は伝えられたこのフォーカシング情報により、こ
の有効画像範囲と同様な範囲を遮蔽するように準備をす
る。
【0016】この準備が終了した後に検者が撮影スイッ
チ22を操作すると、切換えミラー13が光路外に退避
すると共に静止画撮影用光源4が発光する。静止画撮影
用光源4を発した光束はレンズ5に至り、その後は観察
アライメント用光源1を発した光束と同様の光路を通っ
て眼底Erを照明する。このように照明された眼底像Er'
は、瞳孔Epから対物レンズ2、孔あきミラー10の孔
部、フォーカスレンズ11、撮影レンズ12を通り、静
止画撮影用カメラ14の撮影像面に結像する。このよう
に撮像された画像は、静止画撮影用カメラ14において
電気信号に変換された後に、デジタル信号に変換されて
制御手段19中のメモリに転送される。
【0017】図2は静止画撮影用カメラ14に撮像され
た画像を示し、この眼底像Er' はフレアFに囲まれてお
り、診断に有効な眼底像Er' の境界領域が明瞭でない。
従って、この画像に所定のマスク画像を重ね合わせる
か、又は所定領域のデータを黒レベル表示のデータに書
き換えて静止画用モニタ20に映出する。このようにし
て、眼底像Er' は図3に示すようにマスク画像Mに囲ま
れ、診断に有効な領域が明瞭に表示される。
【0018】なお、プリントアウトしたときに有効な上
下方向を示す目印Sや、被検者又は撮影状態を示すデー
タDをマスク画像Mと共に表示してもよい。また、デー
タDの中のカメラナンバは撮影に用いた眼底カメラ又は
撮像素子を識別するものであり、記録した画像を他の画
像と比較する際又は画像処理等により画像を補正する際
に有効となる。そして、この画像は外部記憶手段21に
保存され、切換えミラー13が光路内に復帰して一連の
撮影が終了する。なお、このときの被検者又は撮影状態
を示すデータDは、マスク画像Mや眼底画像Er' とは別
に保存してもよい。
【0019】このように、眼底像Er' を光学的なマスク
を介することなく撮影できるので光路を短くすることが
でき構成が容易になり、特に3Pプリズムを有する3板
方式のテレビカメラのように、撮像素子の直前にマスク
を配置することが困難な場合に有効である。
【0020】また、眼底画像Er' と被検者又は撮影状態
を示すデータを同じ画面に表示する場合に、眼底像Er'
以外の背景像を暗くしてデータを観察し易くすることが
でき、更に有効画像部位以外のデータを確実に一定の値
にすることができるので、ノイズデータを除去して画像
としての情報量を減らすことができ、有効部の画質をよ
り良好に保ったまま画像圧縮をすることが可能となる。
これにより、メモリを効率良く使用することができる。
【0021】拡大撮影をする場合には、撮影者がズーム
スイッチ23を操作すると撮影レンズ12が移動し、そ
の結像倍率に関する情報がキャラクタ発生手段16、制
御手段19に伝えられ、制御手段19は観察アライメン
ト用光源1と静止画撮影用光源4の光量をその倍率に応
じて制御する。眼底Erは観察アライメント用光源1を発
した光束により照明され、眼底像Er' は上述と同様の経
路を通り、静止画観察用カメラ14の撮像面に拡大され
て結像する。この画像はビデオ信号に変換されてキャラ
クタ発生手段15に入力され、撮影倍率に対応した大き
さのマスク画像と合成されて動画観察用モニタ17に表
示される。図4は動画観察用モニタ17に写る画像を示
し、拡大された眼底像Er' とこれに対応したマスク画像
Mとが映出されている。
【0022】撮影者はこの眼底像Er' を見ながら、撮影
部位、アライメント、ピントの状態を確認し、ピントが
合っていない場合には、上述と同様な方法によりピント
合わせを行う。これらの準備が完了した後に、撮影者が
撮影スイッチ22を操作すると、切換えミラー13が光
路外に退避すると共に、静止画撮影用光源4が発光す
る。静止画撮影用光源4を発した光束はレンズ5に至
り、その後は観察アライメント用光源1を発した光束と
同様の光路を通って眼底Erを照明する。このように照明
された眼底像Er' は瞳孔Epから、対物レンズ2、孔あき
ミラー10の孔部、フォーカスレンズ11、拡大撮影を
するように配置された撮影レンズ12を通って、静止画
撮影用カメラ14の撮像面に結像する。
【0023】以上のようにして撮像された画像は、静止
画撮影用カメラ14において電気信号に変換された後
に、デジタル信号に変換されて制御手段19中のメモリ
に転送される。図5は静止画撮影用カメラ14から出力
された直後の画像を示し、拡大された眼底像Er' はフレ
アFによって囲まれており、診断に有効な眼底像Er' の
領域は明瞭でないので、この画像に所定のマスク画像M
を重ね合わせるか、又は所定の領域のデータを黒レベル
を表すデータに書き換えて、静止画像再生用モニタ20
に表示する。
【0024】図6はマスク合成後の画像を示し、眼底像
Er' はマスク画像Mに囲まれて診断に有効な領域が明瞭
に表示されている。更に、プリントアウトしたときに有
効な上下方向を示す目印Sと、被検者や撮影状態を示す
データDをマスク画像Mと共に表示してもよく、これら
のデータが眼底像Er' と重なる場合には任意に消去した
りできるようにしておくとよい。そして、この画像は外
部記憶手段21に記憶され、切換えミラー13が光路内
に復帰して一連の撮影が終了する。なお、被検者や撮影
状態を示すデータDは、マスク画像Mや眼底像Er' とは
別に保存してもよい。
【0025】このように、撮影倍率に応じてマスクの大
きさが変更できるので、拡大して観察や撮影する場合で
も広い範囲を観察記録することができ、更に視度の異な
る被検眼Eに対してフォーカシングを行う際に結像倍率
が変化するような場合にも、常に有効な範囲を無駄なく
観察記録することができる。
【0026】また、本実施例では静止画撮影時に一旦メ
モリに取り込んだ後にマスク画像Mを作成しているが、
電気信号をデジタルデータにA/D変換する際に、予め
決められたマスク領域のみを黒レベルに変換するように
構成してもよく、更にこれらの機能を1台の眼底カメラ
の中に組み込めば、より使い勝手が良い装置となる。
【0027】
【発明の効果】以上説明したように第1発明に係る眼科
画像処理装置は、眼科画像の不要領域に電気的マスキン
グを行うことにより、ノイズデータを除去して有効部の
画質を良好に保持することができる。
【0028】第2発明に係る眼科画像処理装置は、眼底
画像以外の周囲の領域をパターン画像に変換することに
より、眼底像をマスクを介せずに撮影することができ光
路長を短縮し装置の構成を単純化することができ、3板
式テレビカメラにも適用でき、メモリを有効利用するこ
とが可能となる。
【0029】第3発明に係る眼科画像処理装置は、撮影
倍率又は合焦状態に対応する領域をパターン画像に変換
することにより、撮影時の倍率や被検者の視度に応じて
マスクの大きさを変更することができ、拡大して観察や
撮影する場合にも広範囲を観察記録することができる。
【図面の簡単な説明】
【図1】実施例の構成図である。
【図2】マスク画像合成前の眼底像の説明図である。
【図3】マスク画像合成後の眼底像の説明図である。
【図4】拡大動画観察像の説明図である。
【図5】マスク画像合成前の拡大眼底像の説明図であ
る。
【図6】マスク画像合成後の拡大眼底像の説明図であ
る。
【符号の説明】
1 観察アライメント用光源 4 静止画撮影用光源 10 孔あきミラー 11 フォーカスレンズ 12 撮影レンズ 14 静止画撮影用カメラ 15 動画観察用カメラ 16 キャラクタ発生手段 17 動画観察用モニタ 19 制御手段 20 静止画像再生用モニタ 21 外部記憶手段

Claims (3)

    【特許請求の範囲】
  1. 【請求項1】 得られた眼科画像中の不要領域に電気的
    マスキングを施すことを特徴とする眼科画像処理装置。
  2. 【請求項2】 撮像した画像を電気信号に変換する撮像
    手段と、該撮像手段が撮像した眼底画像領域外を含む周
    囲領域をパターン画像に変換する変換手段とを有するこ
    とを特徴とする眼科画像処理装置。
  3. 【請求項3】 眼底像を撮影する撮影光学系と、該撮影
    光学系を介して撮像した画像を電気信号に変換する撮像
    手段と、該撮像手段が撮像した画像の前記撮影光学系の
    撮影倍率又は合焦状態に対応した領域をパターン画像に
    変換する変換手段とを有することを特徴とする眼科画像
    処理装置。
JP04214096A 1996-02-05 1996-02-05 眼科画像処理装置 Expired - Fee Related JP3618877B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP04214096A JP3618877B2 (ja) 1996-02-05 1996-02-05 眼科画像処理装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP04214096A JP3618877B2 (ja) 1996-02-05 1996-02-05 眼科画像処理装置

Publications (2)

Publication Number Publication Date
JPH09206278A true JPH09206278A (ja) 1997-08-12
JP3618877B2 JP3618877B2 (ja) 2005-02-09

Family

ID=12627645

Family Applications (1)

Application Number Title Priority Date Filing Date
JP04214096A Expired - Fee Related JP3618877B2 (ja) 1996-02-05 1996-02-05 眼科画像処理装置

Country Status (1)

Country Link
JP (1) JP3618877B2 (ja)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001258848A (ja) * 2000-03-22 2001-09-25 Nidek Co Ltd 眼底カメラ
JP2003079580A (ja) * 2001-09-17 2003-03-18 Canon Inc 眼科撮影装置
EP1481632A1 (en) 2003-05-30 2004-12-01 Canon Kabushiki Kaisha Ophtalmologic image processing apparatus
EP1525841A1 (en) * 2003-10-24 2005-04-27 Canon Kabushiki Kaisha Funduscopic image processing unit and method
JP2006095009A (ja) * 2004-09-29 2006-04-13 Canon Inc 眼科画像撮影装置
WO2007004383A1 (ja) * 2005-07-01 2007-01-11 Kowa Kabushiki Kaisha 眼科撮影装置
JP2008043570A (ja) * 2006-08-18 2008-02-28 Kowa Co 眼底撮像装置
US7472994B2 (en) 2003-04-25 2009-01-06 Canon Kabushiki Kaisha Ophthalmologic image pickup system
JP2011045553A (ja) * 2009-08-27 2011-03-10 Canon Inc 眼底撮像装置
JP2012176281A (ja) * 2012-05-25 2012-09-13 Canon Inc 画像記録装置
JP2014217470A (ja) * 2013-05-02 2014-11-20 キヤノン株式会社 制御装置、制御方法及びプログラム
JP2022145411A (ja) * 2021-03-19 2022-10-04 宏碁智醫股▲ふん▼有限公司 眼底検査画像用の画像前処理方法及び画像処理装置

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001258848A (ja) * 2000-03-22 2001-09-25 Nidek Co Ltd 眼底カメラ
JP2003079580A (ja) * 2001-09-17 2003-03-18 Canon Inc 眼科撮影装置
US7472994B2 (en) 2003-04-25 2009-01-06 Canon Kabushiki Kaisha Ophthalmologic image pickup system
EP1481632A1 (en) 2003-05-30 2004-12-01 Canon Kabushiki Kaisha Ophtalmologic image processing apparatus
CN100334999C (zh) * 2003-05-30 2007-09-05 佳能株式会社 眼科图像处理装置
US7387386B2 (en) 2003-05-30 2008-06-17 Canon Kabushiki Kaisha Ophthalmologic image processing apparatus
EP1525841A1 (en) * 2003-10-24 2005-04-27 Canon Kabushiki Kaisha Funduscopic image processing unit and method
KR100684300B1 (ko) * 2003-10-24 2007-02-16 캐논 가부시끼가이샤 안저화상 처리장치 및 방법
US7333636B2 (en) 2003-10-24 2008-02-19 Canon Kabushiki Kaisha Funduscopic image processing unit and method
CN100379381C (zh) * 2003-10-24 2008-04-09 佳能株式会社 眼底图像处理装置以及眼底图像处理方法
JP2006095009A (ja) * 2004-09-29 2006-04-13 Canon Inc 眼科画像撮影装置
JP4636841B2 (ja) * 2004-09-29 2011-02-23 キヤノン株式会社 眼科画像撮影装置及び撮影方法
WO2007004383A1 (ja) * 2005-07-01 2007-01-11 Kowa Kabushiki Kaisha 眼科撮影装置
JP4852543B2 (ja) * 2005-07-01 2012-01-11 興和株式会社 眼科撮影装置
JP2008043570A (ja) * 2006-08-18 2008-02-28 Kowa Co 眼底撮像装置
JP2011045553A (ja) * 2009-08-27 2011-03-10 Canon Inc 眼底撮像装置
US9084567B2 (en) 2009-08-27 2015-07-21 Canon Kabushiki Kaisha Fundus imaging apparatus and method therefor
JP2012176281A (ja) * 2012-05-25 2012-09-13 Canon Inc 画像記録装置
JP2014217470A (ja) * 2013-05-02 2014-11-20 キヤノン株式会社 制御装置、制御方法及びプログラム
JP2022145411A (ja) * 2021-03-19 2022-10-04 宏碁智醫股▲ふん▼有限公司 眼底検査画像用の画像前処理方法及び画像処理装置
US11954824B2 (en) 2021-03-19 2024-04-09 Acer Medical Inc. Image pre-processing method and image processing apparatus for fundoscopic image

Also Published As

Publication number Publication date
JP3618877B2 (ja) 2005-02-09

Similar Documents

Publication Publication Date Title
JP3408308B2 (ja) 眼底カメラ
US6327375B1 (en) Ophthalmologic phototaking apparatus
JP3618877B2 (ja) 眼科画像処理装置
JPH04170933A (ja) 眼底カメラ
JP2005342283A (ja) 眼科撮影装置
KR100684299B1 (ko) 안과용 촬영장치
JP3897643B2 (ja) 眼科撮影装置
JPH09173298A (ja) 眼科撮影装置
JPH0360261B2 (ja)
JPH105179A (ja) 眼科撮影装置
JP4336561B2 (ja) 眼底画像処理装置
JP3591947B2 (ja) 眼底検査装置
JP3624181B2 (ja) 眼底撮影装置
JPH09238906A (ja) 眼科撮影装置
JPH06142050A (ja) 眼科撮影装置
JPH08206081A (ja) 撮影装置
JP3372580B2 (ja) 眼科装置
JP3073510B2 (ja) 眼科撮影装置
JPH09103409A (ja) 眼底撮影装置
JP2003204939A (ja) 眼科撮影装置
JPH1128189A (ja) 眼科装置
JP2005118465A (ja) 眼科撮影装置及び撮影方法
JP2004141563A (ja) 眼科撮影装置
JP4208636B2 (ja) 眼科撮影装置
JPH09192102A (ja) 眼底撮像装置

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20040422

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040427

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040625

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20041109

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20041111

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20071119

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081119

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081119

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091119

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101119

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101119

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111119

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121119

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131119

Year of fee payment: 9

LAPS Cancellation because of no payment of annual fees