JPH1070642A - 画像伝送システム、画像送信装置及び画像受信装置 - Google Patents

画像伝送システム、画像送信装置及び画像受信装置

Info

Publication number
JPH1070642A
JPH1070642A JP22491696A JP22491696A JPH1070642A JP H1070642 A JPH1070642 A JP H1070642A JP 22491696 A JP22491696 A JP 22491696A JP 22491696 A JP22491696 A JP 22491696A JP H1070642 A JPH1070642 A JP H1070642A
Authority
JP
Japan
Prior art keywords
image
display capability
information
thinning
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP22491696A
Other languages
English (en)
Other versions
JP3618920B2 (ja
Inventor
Masamine Maeda
昌峰 前田
Hideyuki Arai
秀雪 新井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP22491696A priority Critical patent/JP3618920B2/ja
Priority to US08/911,749 priority patent/US6408095B1/en
Priority to MYPI97003914A priority patent/MY121672A/en
Priority to CNB971176736A priority patent/CN1143549C/zh
Publication of JPH1070642A publication Critical patent/JPH1070642A/ja
Application granted granted Critical
Publication of JP3618920B2 publication Critical patent/JP3618920B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Communication Control (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Facsimile Transmission Control (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Details Of Television Systems (AREA)

Abstract

(57)【要約】 【課題】 画像受信側の表示能力に合わせた画素数及び
伝送速度で画像を伝送する。 【解決手段】 スペクトラム拡散受信回路26は、画像
受信側から画像受信側でのモニタ表示能力の情報を受信
する。コマンド復調回路28は回路26の出力に従う制
御コマンドを画素数/伝送速度制御回路30に印加す
る。回路30は、その制御コマンドに従い、画素数制御
回路18における間引き画素数と、スペクトラム拡散送
信回路22における伝送速度(並列数)を制御する。撮
像素子12による撮影画像は、画素数制御回路18によ
り間引かれ、スペクトラム拡散送信回路22により指定
の並列数でスペクトラム拡散され、アンテナ24から送
信される。画像受信側には、画像受信側のモニタの表示
能力を記憶するメモリと、その表示能力の情報を画像送
信側にスペクトラム拡散方式で送信する送信手段を設け
る。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、スペクトラム拡散
伝送方式により画像情報を伝送する画像伝送システム並
びに当該画像伝送システムに用いる画像送信装置及び画
像受信装置に関する。
【0002】
【従来の技術】スペクトラム拡散方式で画像情報を伝送
する場合、従来は、一定の画質及び一定の伝送速度で行
なわれていた。また、画像データの伝送では特に、画質
を優先して、スペクトラム拡散の伝送速度を高く設定す
るのが普通であった。
【0003】
【発明が解決しようとする課趣】しかし、受信側の画像
表示手段が、例えば小型の液晶表示パネルのように低解
像度である場合、その解像度に合致する程度の画質で画
像データを伝送すればよく、一概に伝送速度を高く設定
しておく必要は無い。また、スペクトラム拡散通信で
は、伝送速度が高いと伝送距離が短くなってしまう。従
って、従来例では、画像受信側で必要とする以上の画質
で画像を伝送し、そのために伝送距離を無駄に短くして
いるところがある。
【0004】本発明は、画像受信側で要求する画質で画
像情報を伝送するようにして、画質と伝送距離の両方に
対する要求を適切に満たし得るようにした画像伝送シス
テムを提示することを目的とする。
【0005】本発明はまた、画像受信側により指定され
る画質で画像情報を伝送する画像伝送システムを提示す
ることを目的とする。
【0006】本発明は更に、そのような画像伝送システ
ムに適用可能な画像送信装置及び画像受信装置を提示す
ることを目的とする。
【0007】
【課題を解決するための手段】本発明では、画像送信装
置において、入力された表示能力情報に従い、送信すべ
き画像の画素数(又は間引き数)及び伝送速度の少なく
とも一方を制御するようにした。
【0008】表示能力情報は、例えば、画像受信側の表
示能力であり、画像受信側から送信される。これによ
り、画像受信側で必要とされる表示能力に応じた画素数
及び/又は伝送速度で画像情報を伝送できるようにな
る。画素数及び/又は伝送速度の選択が自動化されるこ
とで、取り扱いが容易になる。
【0009】
【発明の実施の形態】以下、図面を参照して、本発明の
実施の形態を詳細に説明する。
【0010】図1は、本実施例の画像送信側の概略構成
ブロック図を示す。10は被写体の光学像を撮像素子1
2の光電変換面に結像するレンズ、14は、撮像素子1
2から出力されるアナログ画像信号をサンプルホールド
し、適正な信号レベルにするCDS/AGC回路、16
は、CDS/AGC回路14のアナログ出力をA/D変
換し、ガンマ補正及び色バランス調整などの撮像信号処
理をディジタル的に実行するディジタル信号処理回路、
18は、メモリ19を作業領域として、ディジタル信号
処理回路16から出力されるディジタル画像データを、
外部から制御される画素数に間引く画素数制御回路、2
0は、画像受信側との通信プロトコルを制御し、画素数
制御回路18により画素数を調節されたディジタル画像
データをスペクトラム拡散送信に適したデータ形式に変
換する通信プロトコル制御回路、22は通信プロトコル
制御回路20からのデータをスペクトラム拡散変調し、
アンテナ24に供給するスペクトラム拡散送信回路であ
る。
【0011】26は画像送信側からのスペクトラム拡散
変調された制御コマンドなどを受信し、復調するスペク
トラム拡散受信回路、28は、スペクトラム拡散受信回
路26により復調されたデータから制御コマンド(本実
施例では、画像受信側が要求する画質に関する情報)を
復調するコマンド復調回路、30は、コマンド復調回路
28から出力される制御コマンドに従い、画素数制御回
路18及び通信プロトコル制御回路20を制御すると共
に、スペクトラム拡散送信回路22のデータ送信速度を
制御する画素数/伝送速度制御回路(マイクロコンピュ
ータ)である。
【0012】図2は、スペクトラム拡散送信回路22の
概略構成ブロック図を示す。60は通信プロトコル/圧
縮制御回路20からの送信すべき直列データをn個の並
列データに変換する直並列変換器、62は、画素数/伝
送速度制御回路30からの伝送速度データに従い直並列
変換器60の並列数を制御する並列数制御回路、64は
直並列変換器60から出力される各並列データに対して
それぞれ異なる拡散符号を発生する拡散符号発生器、6
6−1〜66−nは、直並列変換器60から出力される
各並列データに、拡散符号化発生器64が発生する各拡
散符号PN1〜PNnを乗算する乗算器、68は、伝送
速度データに従い乗算器66−2〜66−nの各出力を
オン/オフするスイッチ、70はスイッチ68を制御す
る選択信号を生成する選択信号生成回路、72は拡散符
号発生器64からの1つの拡散符号PN0、乗算器66
−1の出力、及びスイッチ68により選択される乗算器
66−2〜66−nの出力を加算する加算器、74は加
算器72の出力を送信周波数信号に変換するRF回路、
76は伝送速度データ(具体的には、並列数)に応じて
RF回路74の利得を制御する利得制御回路である。
【0013】このような構成により、並列数制御回路6
2及び選択信号生成回路70が、伝送速度データに従い
並列数を変更する。この結果、送信すべきデータのデー
タ伝送速度が変更される。
【0014】図3は、本実施例における受信側装置の概
略構成ブロック図を示す。図3において、110は送受
信アンテナ、112は、送受信アンテナ110で受信さ
れたスペクトラム拡散符号を復調し、画像データと伝送
速度データを出力するスペクトラム拡散受信回路、11
4は、画像送信側との通信プロトコルを制御し、スペク
トル拡散受信回路112からの画像データを所定形式で
出力する通信プロトコル制御回路、116はスペクトラ
ム拡散受信回路112からの伝送速度データに従い通信
プロトコル制御回路114を制御する伝送速度制御回路
(マイクロコンピュータ)である。
【0015】118は通信プロトコル制御回路114か
らの画像データをアナログ信号に変換するディジタル信
号処理回路、120はディジタル信号処理回路118の
出力信号をNTSC映像信号に変換するNTSCエンコ
ーダ、122はNTSCエンコーダ120の出力信号を
映像表示するモニタである。
【0016】124はモニタ122の種類、大きさ及び
解像度等のモニタ122に関する情報が格納されている
モニタ情報ROM、126はモニタ情報ROM124か
ら記憶情報を読み出して、所定形式のコマンド・データ
に変換するコマンド生成/変調回路、128はコマンド
生成/変調回路126により生成されたコマンド・デー
タをスペクトラム拡散変調し、アンテナ110を介して
画像送信側に送信するスペクトラム拡散送信回路であ
る。
【0017】図4は、スペクトラム拡散受信回路112
の概略構成ブロック図を示す。140は送受信アンテナ
110で受信された信号を所定の内部周波数に変換する
RF回路、142は、受信した拡散符号に対する同期を
補足し、維持する同期回路、144は、同期回路142
から出力される符号同期信号及びクロック信号に従い、
受信した拡散符号と同一の拡散符号を発生する拡散符号
発生器、146は、拡散符号発生器1443から出力さ
れるキャリア再生用拡散符号PN0及びRF回路140
の出力信号から搬送波信号を再生するキャリア再生回
路、148は、キャリア再生回路146からの搬送波信
号及び拡散符号発生回路144からのn個の拡散符号を
使って、RF回路140の出力をベースバンド復調する
ベースバンド復調回路、150はベースバンド復調回路
148から出力される複数の復調データを直列化する並
直列変換器、152はベースバンド復調回路148にお
ける内部信号からスペクトラム拡散送信回路22におけ
る並列数を検出する並列数検出回路、154は並列数検
出回路152により検出された並列数に従い並直列変換
回路150で直列化する並列数を制御すると共に、伝送
速度データを出力する並列数制御回路である。
【0018】図4に示す構成により、スペクトラム拡散
変調された信号が、復調される。このような構成及び動
作自体は、周知である。
【0019】図5は、画像受信側のモニタ情報に応じた
画像送信側の動作フローチャートを示す。モニタ情報R
OM124に記憶されるモニタ122に関する情報は、
例えば、画面サイズ、表示素子のタイプ(CRT又は液
晶表示パネルなど)、水平解像度、垂直解像度、及び画
素数などの情報からなる。
【0020】画像送信側は、画像受信側からのモニタ情
報を取得し(S1)、その内容に応じて、高画質伝送す
べきか否かを判定する(S2)。例えば、画像受信側の
モニタ122が29インチのブラウン管モニタで、水平
解像度700本である場合などには、高画質伝送が選択
される(S2)。画素数/伝送速度制御回路30は、画
素数制御回路18に対し画素数の間引きを少なくするよ
うに指示し(S3)、スペクトラム拡散送信回路22に
対し、伝送データの並列数を多くして伝送速度を高速に
するように指示する(S4)。このようにして間引かさ
れた画像データが、選択された伝送速度(並列数)で画
像受信側に送信される(S7)。
【0021】また、画像受信側のモニタ122が、4イ
ンチの液晶モニタで、画素数が約7万である場合、画素
数/伝送速度制御回路30は、低画質の画像伝送を選択
する(S2)。画素数/伝送速度制御回路30は、画素
数制御回路18に対し画素数の間引きを多くするように
指示し(S5)、スペクトラム拡散送信回路22に対
し、伝送データの並列数を少なくして伝送速度を低速に
するように指示する(S6)。
【0022】このようにして、画像受信側のモニタの表
示能力に応じた画素数及び伝送速度で画像情報が伝送さ
れ、使用者は、受信側の表示能力を気にしなくても、最
適なスペクトラム拡散画像送信を行なえる。
【0023】
【発明の効果】以上の説明から容易に理解できるよう
に、本発明によれば、受信側の画像表示能力に応じた適
切な画素数及び/又は伝送速度で画像情報を伝送でき
る。
【0024】原画像のデータ量の削減を画素の間引きに
より行なうので、高価な画像圧縮装置を使用せずに済
み、安価な画像伝送システムを提供できる。
【図面の簡単な説明】
【図1】 本発明の一実施例の送信側の概略構成ブロッ
ク図である。
【図2】 スペクトラム拡散送信回路22の概略構成ブ
ロック図である。
【図3】 本実施例の受信側の概略構成ブロック図であ
る。
【図4】 スペクトラム拡散受信回路112の概略構成
ブロック図である。
【図5】 本実施例のフローチャートである。
【符号の説明】
10:レンズ 12:撮像素子 14:CDS/AGC回路 16:ディジタル信号処理回路 18:画素数制御回路 19:メモリ 20:通信プロトコル/圧縮制御回路 22:スペクトラム拡散送信回路 24:アンテナ 26:スペクトラム拡散受信回路 28:コマンド復調回路 30:画素数/伝送速度制御回路 60:直並列変換器 62:並列数制御回路 64:拡散符号発生器 66−1〜66−n:乗算器 68:スイッチ 70:選択信号生成回路 72:加算器 74:RF回路 76:利得制御回路 110:送受信アンテナ 112:スペクトラム拡散受信回路 114:通信プロトコル制御回路 116:伝送速度制御回路 118:ディジタル信号処理回路 120:NTSCエンコーダ 122:モニタ 124:モニタ情報ROM 126:コマンド生成/変調回路 128:スペクトラム拡散送信回路 140:RF回路 142:同期回路 144:拡散符号発生器 146:キャリア再生回路 148:ベースバンド復調回路 150:並直列変換器 152:並列数検出回路 154:並列数制御回路
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.6 識別記号 庁内整理番号 FI 技術表示箇所 H04N 1/41 H04J 13/00 Z 5/00 H04L 13/00 307C 7/24 H04N 7/13 Z

Claims (14)

    【特許請求の範囲】
  1. 【請求項1】 外部制御信号に従い画像情報を間引いて
    画素数を削減する間引き手段、及び、当該間引き手段か
    ら出力される画像情報を変調し、送信する変調手段を具
    備する画像送信装置と、当該画像送信手段から送信され
    た画像情報を復調する復調手段、及び当該復調手段によ
    り復調された画像情報を出力する画像出力手段を具備す
    る画像受信装置とからなる画像伝送システムであって、
    当該画像受信装置に、受信画像の表示能力を示す表示能
    力情報を画像送信側に送信する表示能力送信手段を設
    け、当該画像送信装置には、当該表示能力送信手段から
    の表示能力情報に従い、当該間引き手段における間引き
    及び当該変調手段における伝送速度の少なくとも一方を
    制御する制御手段を設け、画像受信側での表示能力に応
    じた画素数及び/又は伝送速度で画像情報を伝送するよ
    うにしたことを特徴とする画像伝送システム。
  2. 【請求項2】 上記変調手段が、スペクトラム拡散変調
    方式による変調手段である請求項1に記載の画像伝送シ
    ステム。
  3. 【請求項3】 上記制御手段が、上記表示能力送信手段
    からの表示能力情報に従い、上記間引き手段における間
    引き及び上記変調手段における伝送速度の両方を制御す
    る請求項1又は2に記載の画像伝送システム。
  4. 【請求項4】 上記表示能力情報が、画面サイズ、解像
    度、画素数、及び、表示デバイスのタイプのうちの1以
    上の情報からなる請求項1乃至3の何れか1項に記載の
    画像伝送システム。
  5. 【請求項5】 上記変調手段は、上記間引き手段から出
    力される画像情報を並列化する並列化手段と、並列化さ
    れた情報の夫々に拡散符号を乗算する乗算手段と、当該
    乗算手段による拡散符号乗算後の情報を多重する多重手
    段とを具備し、上記制御手段は、当該並列化手段により
    並列化された情報の並列数を制御することにより上記伝
    送速度を制御する請求項1乃至4の何れか1項に記載の
    画像伝送システム。
  6. 【請求項6】 外部制御信号に従い画像情報を間引いて
    画素数を削減する間引き手段と、当該間引き手段から出
    力される画像情報を変調し、送信する変調手段と、表示
    能力情報の入力手段と、当該入力手段により入力された
    表示能力情報に従い、当該間引き手段における間引き及
    び当該変調手段における伝送速度の少なくとも一方を制
    御する制御手段とからなることを特徴とする画像送信装
    置。
  7. 【請求項7】 上記表示能力情報の入力手段が、当該画
    像受信側からその表示能力情報を受信する表示能力情報
    受信手段である請求項6に記載の画像送信装置。
  8. 【請求項8】 上記変調手段が、スペクトラム拡散変調
    方式による変調手段である請求項6又は7に記載の画像
    送信装置。
  9. 【請求項9】 上記制御手段が、上記表示能力情報に従
    い、上記間引き手段における間引き及び上記変調手段に
    おける伝送速度の両方を制御する請求項6乃至8の何れ
    か1項に記載の画像送信装置。
  10. 【請求項10】 上記表示能力が、画面サイズ、解像
    度、画素数、及び、表示デバイスのタイプのうちの1以
    上の情報からなる請求項6乃至9の何れか1項に記載の
    画像送信装置。
  11. 【請求項11】 上記変調手段は、上記間引き手段から
    出力される画像情報を並列化する並列化手段と、並列化
    された情報の夫々に拡散符号を乗算する乗算手段と、当
    該乗算手段による拡散符号乗算後の情報を多重する多重
    手段とを具備し、上記制御手段は、当該並列化手段によ
    り並列化された情報の並列数を制御することにより上記
    伝送速度を制御する請求項6乃至9の何れか1項に記載
    の画像送信装置。
  12. 【請求項12】 必要な表示能力に関する表示能力情報
    を画像送信側に送信する表示能力送信手段を具備するこ
    とを特徴とする画像受信装置。
  13. 【請求項13】 更に、上記表示能力情報を記憶する表
    示能力情報記憶手段を具備する請求項12に記載の画像
    受信装置。
  14. 【請求項14】 上記表示能力情報が、画面サイズ、解
    像度、画素数、及び、表示デバイスのタイプのうちの1
    以上の情報からなる請求項12又は13に記載の画像受
    信装置。
JP22491696A 1996-08-27 1996-08-27 画像送信装置及び画像送信方法 Expired - Fee Related JP3618920B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP22491696A JP3618920B2 (ja) 1996-08-27 1996-08-27 画像送信装置及び画像送信方法
US08/911,749 US6408095B1 (en) 1996-08-27 1997-08-15 System, apparatus and method for communication, display and output of images
MYPI97003914A MY121672A (en) 1996-08-27 1997-08-26 Image communication apparatus and image communication method
CNB971176736A CN1143549C (zh) 1996-08-27 1997-08-26 用于图象传输的设备和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP22491696A JP3618920B2 (ja) 1996-08-27 1996-08-27 画像送信装置及び画像送信方法

Publications (2)

Publication Number Publication Date
JPH1070642A true JPH1070642A (ja) 1998-03-10
JP3618920B2 JP3618920B2 (ja) 2005-02-09

Family

ID=16821180

Family Applications (1)

Application Number Title Priority Date Filing Date
JP22491696A Expired - Fee Related JP3618920B2 (ja) 1996-08-27 1996-08-27 画像送信装置及び画像送信方法

Country Status (1)

Country Link
JP (1) JP3618920B2 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002132999A (ja) * 2000-10-24 2002-05-10 Seiko Epson Corp コンテンツ配信のためのシステム及び方法
JP2002325239A (ja) * 2001-04-25 2002-11-08 Ricoh Co Ltd データ会議システム及びデータ会議端末並びにデータ会議プログラムを記録した記録媒体
US7373391B2 (en) 2000-10-24 2008-05-13 Seiko Epson Corporation System and method for digital content distribution
JP2010239389A (ja) * 2009-03-31 2010-10-21 Kddi R & D Laboratories Inc 映像伝送システム
JP2011188526A (ja) * 2000-07-21 2011-09-22 Panasonic Corp 送信装置

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011188526A (ja) * 2000-07-21 2011-09-22 Panasonic Corp 送信装置
JP2011188527A (ja) * 2000-07-21 2011-09-22 Panasonic Corp 送信装置
JP2012142977A (ja) * 2000-07-21 2012-07-26 Panasonic Corp 受信装置
JP2002132999A (ja) * 2000-10-24 2002-05-10 Seiko Epson Corp コンテンツ配信のためのシステム及び方法
US7373391B2 (en) 2000-10-24 2008-05-13 Seiko Epson Corporation System and method for digital content distribution
JP2002325239A (ja) * 2001-04-25 2002-11-08 Ricoh Co Ltd データ会議システム及びデータ会議端末並びにデータ会議プログラムを記録した記録媒体
JP4738628B2 (ja) * 2001-04-25 2011-08-03 株式会社リコー データ会議システム及びデータ会議端末並びにデータ会議プログラムを記録した記録媒体
JP2010239389A (ja) * 2009-03-31 2010-10-21 Kddi R & D Laboratories Inc 映像伝送システム

Also Published As

Publication number Publication date
JP3618920B2 (ja) 2005-02-09

Similar Documents

Publication Publication Date Title
US10455190B2 (en) Camera system, video processing apparatus, and camera apparatus
US4979028A (en) Video telephone
EP0719036B1 (en) Electronic still picture camera
US20050264650A1 (en) Apparatus and method for synthesizing captured images in a mobile terminal with a camera
US20020102938A1 (en) Portable device, mobile phone, image transmission system, and method of transmitting image
US20010040913A1 (en) Information signal communication apparatus, method and system
JPH1070642A (ja) 画像伝送システム、画像送信装置及び画像受信装置
JPH1066074A (ja) 画像送信装置
US6408095B1 (en) System, apparatus and method for communication, display and output of images
JP3595633B2 (ja) 画像送信装置及び画像送信方法
JPH08223570A (ja) 画像伝送装置
EP0369724A2 (en) Digital video signal processing apparatus
JP2612574B2 (ja) 静止画の伝送装置
JP4548200B2 (ja) 画像伝送装置
JPS6318381B2 (ja)
JP2662465B2 (ja) 静止画像伝送システム
JPH1070673A (ja) 画像送信装置
JPS6049340A (ja) 網点写真システム
JP3356686B2 (ja) ファクシミリ装置
JP2903887B2 (ja) 天気図との重ね合せ表示機能を有する気象衛星受信装置
KR100631732B1 (ko) 무선카메라의 외부동기신호 송수신장치
JPH10136400A (ja) カラー撮像装置及びカラー撮像方法
JPS63151283A (ja) トランシ−バ
JPH066795A (ja) 撮像監視装置
IL105386A (en) Video image transfer through existing lines

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20041028

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20041102

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20041111

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20071119

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081119

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081119

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091119

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101119

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101119

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111119

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121119

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131119

Year of fee payment: 9

LAPS Cancellation because of no payment of annual fees