JPH0983874A - 撮像装置 - Google Patents

撮像装置

Info

Publication number
JPH0983874A
JPH0983874A JP7231134A JP23113495A JPH0983874A JP H0983874 A JPH0983874 A JP H0983874A JP 7231134 A JP7231134 A JP 7231134A JP 23113495 A JP23113495 A JP 23113495A JP H0983874 A JPH0983874 A JP H0983874A
Authority
JP
Japan
Prior art keywords
image
data
video signal
signal
signal processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP7231134A
Other languages
English (en)
Other versions
JP3809205B2 (ja
Inventor
Izumi Matsui
泉 松井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP23113495A priority Critical patent/JP3809205B2/ja
Priority to DE69634463T priority patent/DE69634463T2/de
Priority to EP96114332A priority patent/EP0762747B1/en
Priority to US08/709,381 priority patent/US6011583A/en
Publication of JPH0983874A publication Critical patent/JPH0983874A/ja
Priority to US09/449,429 priority patent/US6538696B2/en
Application granted granted Critical
Publication of JP3809205B2 publication Critical patent/JP3809205B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

(57)【要約】 【課題】 全画素読み出し方式のCCDを用いて動画を
撮像する場合の無駄な信号処理をなくす。 【解決手段】 モード選択スイッチ11が動画モードを
指示すると、1フィールド期間に1フレーム画像を撮像
するCCD2からの映像信号はカメラ信号処理回路4で
処理された後、ビデオ信号処理回路5で処理される。そ
の際、画像メモリ8、メモリアドレス制御回路9、メモ
リ入力バッファ制御回路10により、連続する異るフレ
ーム画像から順次1ラインづつ用いて動画を生成する。
静止画モードでは、同一フレーム画像を用いて高画質静
止画像を得るような信号処理が行われる。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は撮像素子を用いて撮
像されたビデオ信号を記録するビデオカメラ等の撮像装
置に関する。
【0002】
【従来の技術】従来の撮像装置においては、カメラ信号
処理回路の出力するビデオデータは、インタレースされ
たフィールド単位データである。図6に従来の撮像装置
のブロック図を示す。図6において、1はレンズ、2は
被写体像を光電変換する撮像素子としてのCCD、3は
アナログ信号をディジタル信号に変換するA/Dコンバ
ータ、4はディジタル化されたCCD2の出力をフィー
ルド単位のビデオ信号に変換するカメラ信号処理回路、
5はビデオ信号をデータ圧縮すると共に磁気記録に適す
る記録データに変換するビデオ信号処理回路、6は記録
データを磁気テープ等に磁気記録する記録装置、7はC
CD2の撮像タイミングを制御するCCD駆動ドライ
バ、8は画像データを蓄積する画像メモリ、9は画像メ
モリ8の書き込みアドレス/読み出しアドレスを制御す
るメモリアドレス制御回路である。
【0003】次に動作について説明する。レンズ1を通
過した被写体像は、撮像素子であるCCD2によって光
電変換され、偶数ラインもしくは奇数ライン情報である
フィールド単位の電気信号となる。CCD2の出力はA
/Dコンバータ3によりディジタル信号に変換され、カ
メラ信号処理回路4に入力される。カメラ信号処理回路
4では、アパーチャ処理、高輝度色抑圧処理、ホワイト
バランス処理、ガンマ処理、マトリクス演算処理、同期
信号付加処理、AF検波、AE検波等の処理が行われ、
インターレースされたフィールド単位の輝度信号と2種
の色差信号を時分割多重した色差時分割多重信号とが出
力される。これらの輝度信号、色差時分割多重信号はビ
デオ信号処理回路5に入力される。
【0004】ビデオ信号処理回路5においては、メモリ
アドレス制御回路9により制御される画像メモリ8を用
いて、連続する2枚のフィールド単位の画像データによ
りフレーム単位の画像データを作成し、これをブロック
化する。そしてブロック単位の画像データの読み出し順
を1フレーム領域から均等に読み出す順序とするシャフ
リング処理、ブロック単位の画像データをDCT変換等
の直交変換により直交変換係数に変換する直交変換処
理、ブロック内のDCT係数等の直交変換係数の低域も
しくは高域への偏り具合に応じてブロック単位の直交変
換係数を量子化し、データ量を削減する量子化処理、ハ
フマン符号等によりデータ量を削減する符号化処理が行
われる。
【0005】また、メモリアドレス制御回路9に制御さ
れる画像メモリ8を用い、シャフリングされているブロ
ック単位量子化データをデシャッフルするデシャフリン
グ処理が行われる。こうして輝度信号、色差信号は、デ
ータ量をデータ圧縮された符号化データに変換される。
【0006】さらにビデオ信号処理回路5は作成した符
号化データを磁気記録に適した記録データに変調し、こ
の記録データは、記録回路6に入力されて磁気メディア
に記録される。
【0007】
【発明が解決しようとする課題】上述した従来の撮像装
置を用いて、静止画を記録する方法として、異るタイミ
ングで撮像された2枚のフィールドデータを用いてフレ
ームデータを作成する方法や、1フィールドデータから
両フィールドデータを作成しフレームデータとする方法
等があるが、データの時間差のためにエッジの乱れや垂
直解像度が低下する問題があった。この問題を解決する
ために、フィールド単位期間にフレーム画像を撮像可能
な撮像素子(全画素読み出し方式撮像素子)を用いる
と、カメラ信号処理回路4から2系統のフィールドデー
タを出力することが可能となる。つまり、あるフィール
ド単位期間では、奇数ライン情報であるODDフィール
ドデータを出力し、次のフィールド単位時間では、偶数
ライン情報であるEVENフィールドデータを出力する
系と、反対のフィールドデータ(上記ODDフィールド
データが出力されている期間のEVENフィールドデー
タ、上記EVENフィールドデータが出力されている期
間のODDフィールドデータ)を出力する系とを存在さ
せることが可能となる。
【0008】このように全画素読み出し方式の撮像素子
を使用した場合は、カメラ信号処理回路4より撮像タイ
ミングの等しい2フィールドデータを出力させることが
可能となり、静止画記録に用いることができる。しかし
動画記録時には、スムースな動画を表示あるいは記録す
るために、撮像タイミングの異る2フィールドデータに
より1フレームデータを作成する信号出力が必要とな
り、従って1系統のフィールドデータのみで充分であ
る。このため、カメラ信号処理回路4から出力されるビ
デオ信号2系統の内1系統を用いて、映像処理を行う場
合は、他の1系統のビデオ信号は破棄することになる。
従って、ビデオ信号処理回路5で信号処理する必要はな
くなり、さらに破棄される信号に対して信号処理を行う
ことは電力消費量を増大させ、バッテリ駆動方式を用い
ている装置においては、駆動時間の低減の原因となる。
【0009】本発明は、全画素読み出し方式の撮像素子
を用いて動画を得る場合に、無駄な信号処理を行わない
ようにする撮像装置を得ることを目的とする。
【0010】
【課題を解決するための手段】本発明においては、第1
のラインの映像信号と第2のラインの映像信号とを交互
に出力するように成され、1フィールド期間に1フレー
ム画像を撮像するように成された全画素読み出し方式に
よる撮像素子と、上記撮像素子から出力される映像信号
を処理する映像処理手段と、動画モード時に上記映像処
理手段が、連続する異るフレーム画像から第1のライン
の映像信号と第2のラインの映像信号とを交互に選択し
て動画を生成する処理を行うように上記映像処理手段を
制御する制御手段とを設けている。
【0011】
【作用】本発明によれば、動画モード時に上記映像処理
手段が上記制御手段で制御されることによって、連続す
る異るフレーム画像から奇数ラインの映像信号と偶数ラ
インの映像信号とを交互に選択して動画を生成する処理
を行うので、撮像素子から出力される1系統の映像信号
が無駄に処理されることがなくなり、電力消費を抑える
ことができる。
【0012】
【発明の実施の形態】図1は本発明の実施の形態を示す
ブロック図である。図1において1〜9は図7の同一符
号部分と実質的に対応しているので説明を省略する。
【0013】図1において、10はモード選択スイッチ
11が指示するモードに応じてビデオ信号処理回路4を
制御するメモリ入力バッファ制御回路、11は動画記録
モード又は静止画記録モードを選択するモード選択スイ
ッチである。
【0014】また、CCD2としては、CCD駆動ドラ
イバ7により駆動される1フィールド期間に1フレーム
画像を撮像可能なプログレッシブスキャンあるいは全画
素読み出しと呼ばれる方式の撮像素子を用いている。
【0015】次に動作について説明する。レンズ1を通
過した被写体像は、CCD2によって光電変換され1フ
レーム単位の画像情報を持つ電気信号となる。
【0016】全画素読み出し方式CCD2は、偶数ライ
ン出力と奇数ライン出力との2系統の出力を持つ。CC
D2の出力はA/Dコンバータ3によりディジタル信号
に変換された後、カメラ信号処理回路4に入力される。
カメラ信号処理回路4においては、前述した各種処理が
行われると共に、さらに1フレーム単位の画像信号から
2種のフィールド単位のビデオ信号への分離が行われ、
それぞれインターレースされたフィールド単位の輝度信
号および色差時分割多重信号が2系統出力される。この
2系統のビデオ信号はビデオ信号処理回路4に入力され
る。ビデオ信号処理回路4はモード選択スイッチ11の
指示する記録モードに応じて後述するバッファメモリへ
書き込むデータを制御するメモリ入力バッファ制御回路
10により制御されている。
【0017】ビデオ信号処理回路5においては、モード
選択スイッチ11の指示する記録モードに応じて、シャ
フリング処理、直交変換処理、量子化処理、符号化処理
及び変調処理等が行われる。変調された記録データは、
記録回路6に入力され、磁気メディアに記録される。
【0018】図2はカメラ信号処理回路4の構成例を示
すブロック図である。図2において、401、402は
1Hディレイライン、403はCCD出力を輝度信号と
RGB信号とに分離し、2系統のデータを時分割多重を
行う色分離・時分割多重回路、404はアパーチャ補正
回路、405はガンマ補正回路、406は同期付加回
路、407はホワイトバランス回路、408はガンマ補
正回路、409はマトリクス回路、410は高輝度色抑
圧回路、411は時分割多重回路、412、413はセ
レクタである。
【0019】次に動作について説明する。A/Dコンバ
ータ3出力は、2ラインデータを同時に出力する2系列
の出力端子を持つ。1Hディレイライン401、40
2、色分離・時分割多重回路403により輝度信号Yと
RGB信号とに分離され、2系列のデータ(2ラインデ
ータ)は時分割多重処理が施される。輝度信号Yはアパ
ーチャ補正回路404により高域を補正され、ガンマ補
正回路408によりガンマ補正され、同期付加回路40
6により同期信号が付加されてセレクタ412に入力さ
れる。
【0020】一方、RGB信号は、ホワイトバランス回
路407によりホワイトバランス調整され、ガンマ補正
回路408によりガンマ補正された後、マトリクス回路
409により色差信号(R−Y,B−Y)となる。この
色差信号はホワイトバランス回路407に入力されてホ
ワイトバランスの調整に用いられる。また、上記色差信
号は上記輝度信号Yに応じて高輝度色抑圧回路410に
より高輝度時には色信号抑圧が行われた後、色差信号時
分割多重回路411により時分割多重されてセレクタ4
13に入力される。
【0021】輝度信号Y及び色差時分割多重信号は、セ
レクタ412、413により時分割され、また、各出力
はフィールドデータ出力単位で偶数/奇数ラインが交互
になるように選択される。従って、2系統の出力(Y
1,C1)、(Y2,C2)としては、共に撮像タイミ
ングの異なるフィールドデータを連続して出力されるこ
とになる。
【0022】図3はカメラ信号処理回路4の出力信号の
タイミングを示す図である。図3においては連続した撮
像タイミングで撮像されたフレーム画像F1、F2、F
3が示されている。このフレーム撮像タイミングは、従
来からのフィールド撮像タイミング(NTSC:約60
Hz)である。このとき、カメラ信号処理回路4の出力
(Y1,C1)には、フレーム画像F1の奇数ラインデ
ータo1(輝度信号Y,色差時分割多重信号)、フレー
ム画像F2の偶数ラインデータe2(輝度信号Y,色差
時分割多重信号)、フレーム画像F3の奇数ラインデー
タo3(輝度信号Y,色差時分割多重信号)、が出力さ
れる。また、出力(Y2,C2)には、フレーム画像F
1の偶数ラインデータe1(輝度信号Y,色差時分割多
重信号)、フレーム画像F2の奇数ラインデータo2
(輝度信号Y,色差時分割多重信号)、フレーム画像F
3の偶数ラインデータe3(輝度信号Y,色差時分割多
重信号)が出力される。
【0023】図5はビデオ信号処理回路の構成例を示す
ブロック図である。図5において5、8、9、10、1
1は図1と同じブロックである。501、502、50
3、504、509は画像メモリ8にデータを書き込む
ための入力バッファ、505、510は画像メモリ8か
らデータを読み出すための出力バッファ、506はDC
T変換等を行う直交変換回路、507は量子化回路、5
08は符号化回路、511は変調回路である。
【0024】次に動作について説明する。モード選択ス
イッチ11によって静止画記録モードが選択されている
とき、カメラ信号処理回路4の出力するフィールド単位
の2系統のビデオ信号(輝度信号Y,色差時分割多重信
号)はビデオ信号処理回路5に入力される。モード選択
スイッチ11の出力する静止画記録モード信号はメモリ
入力バッファ制御回路10に入力される。メモリ入力バ
ッファ制御回路10は、同じ撮像タイミングデータ、つ
まり同じタイミングでY1、C1、Y2、C2として入
力される2フィールドデータを画像メモリ8に書き込む
ように、入力バッファ501〜504を制御する。
【0025】また、上記静止画記録モード信号はメモリ
アドレス制御回路9にも入力され、同じタイミングでY
1、C1、Y2、C2として入力される2フィールドデ
ータから1枚のフレームデータが合成されるように書き
込みアドレスを制御する。読み出しアドレスは、フレー
ムデータ内の上記信号Y、色差信号をブロック化し、1
フレーム内から均等に読み出すように定められた順序で
ブロックデータを読み出す(シャフリングする)ように
与えられる。
【0026】画像メモリ8から読み出されたブロックデ
ータは、直交変換回路506においてブロック単位でD
CT変換等の直交変換が行われ、直交変換係数データが
出力される。この直交変換係数データは、量子化回路5
07において直交変換係数データの偏りに応じて、逆変
換時に復号データに視覚上大きな変化がないように定め
られた量子化係数によって量子化される。この量子化デ
ータは符号化回路508に入力され、ブロック内でジグ
ザクスキャン、ハフマン符号化のデータ量を削減するた
めの符号化が行われる。
【0027】符号化されたデータは、再び画像メモリ8
に書き込まれ、シャフリングされたデータを従来のフレ
ームデータの配置に戻すデシャフリングが行われるよう
に画像メモリ8から読み出される。デシャフリングされ
た符号化データは、記録回路6による記録特性が高めら
れ、精度の高い記録・再生等化が行えるように変調され
る。
【0028】次に、モード選択スイッチ11によって動
画記録モードが選択されているときにも、カメラ信号処
理回路4の出力するフィールド単位の2系統のビデオ信
号(上記信号Y,色差時分割多重信号)はビデオ信号処
理回路5に入力される。モード選択スイッチ11の出力
する動画記録モード信号はメモリ入力バッファ制御回路
10に入力される。メモリ入力バッファ制御回路10
は、撮像タイミングの異なる2枚のフィールドデータ、
つまり(Y1,C1)又は(Y2,C2)の何れかの連
続する2フィールドデータを画像メモリ8に書き込むよ
うに、入力バッファ501〜504を制御する。
【0029】(Y1,C1)側のフィールドデータが用
いられる場合は、入力バッファ503、504は、入
力バッファの電源をオフにするための信号をメモリ入力
バッファ制御回路10から受け取る。入力バッファに
入力されるクロック信号がメモリ入力バッファ制御回路
10の出力信号とのゲート出力となっており、メモリ入
力バッファ制御回路10により入力バッファに入力され
るクロックはオフになる。以上のような方法、の少
なくとも1つの方法により、入力バッファ501〜50
4の駆動は、メモリ入力バッファ制御回路10により制
御されている。
【0030】さらに、上記動画記録モード信号はメモリ
アドレス制御回路9に入力され、1系統のビデオ信号
(上記の例においてはY1、C1)から入力される連続
した2フィールドデータから1枚のフレームデータが合
成されるように書き込みアドレスを制御する。また、読
み出しアドレスは、フレームデータ内の信号Y、色差信
号をブロック化し、1フレーム内から均等に読み出すよ
うに定められた順序(シャフリング)でブロックデータ
を読み出すように与えられる。シャフリング処理以降の
直交変換処理、量子化処理、符号化処理、変調処理は動
画記録モードにおいても静止画記録モードと同様であ
る。
【0031】図5に入力バッファ501〜504を制御
する制御回路のブロック図を記す。図5(A)は上記
の方法を実行するためのブロック図であり、図5(B)
は上記の方法を実行するためのブロック図である。図
5(A)の512、513は電源制御回路、図5(B)
の514、515はクロックゲートである。上述のよう
に、(Y1,C1)側のフィールドデータが使用される
ときは、入力バッファ501、502が電源又はゲート
通過クロックが供給される。このとき、入力バッファ5
03、504は電源もしくはゲート通過クロックが供給
されないように、電源供給回路601、602又はクロ
ックゲート603、604が作動する。
【0032】
【発明の効果】以上説明したように本発明によれば、静
止画撮像時にエッジの乱れや垂直解像度の低下等をなく
すことのできる全画素読み出し方式による撮像素子を用
いて動画を撮像記録する場合に、映像信号を無駄に処理
することをなくすことができ、これにより、電力消費量
を減少させることができるためバッテリ駆動方式を用い
ている装置においては駆動時間を延長することができ
る。
【図面の簡単な説明】
【図1】本発明の実施の形態を示すブロック図である。
【図2】カメラ信号処理回路の構成例を示すブロック図
である。
【図3】カメラ信号処理回路の出力を示すタイミングチ
ャートである。
【図4】ビデオ信号処理回路の構成例を示すブロック図
である。
【図5】入力バッファを制御する制御回路の構成例を示
すブロック図である。
【図6】従来の撮像装置を示すブロック図である。
【符号の説明】
2 CCD 4 カメラ信号処理回路 5 ビデオ信号処理回路 7 メモリアドレス制御回路 8 画像メモリ 9 メモリアドレス制御回路 10 メモリ入力バッファ制御回路 11 モード選択スイッチ

Claims (2)

    【特許請求の範囲】
  1. 【請求項1】 第1のラインの映像信号と第2のライン
    の映像信号とを交互に出力するように成され、1フィー
    ルド期間に1フレーム画像を撮像するように成された全
    画素読み出し方式による撮像素子と、 上記撮像素子から出力される映像信号を処理する映像処
    理手段と、 動画モード時に上記映像処理手段が、連続する異るフレ
    ーム画像から第1のラインの映像信号と第2のラインの
    映像信号とを交互に選択して動画を生成する処理を行う
    ように上記映像処理手段を制御する制御手段とを備えた
    撮像装置。
  2. 【請求項2】 上記制御手段は、静止画モード時に上記
    映像処理手段が、同一フレーム画像における第1のライ
    ンの映像信号と第2のラインの映像信号とを用いて静止
    画を生成する処理を行うように上記映像処理手段を制御
    するようにした請求項1記載の撮像装置。
JP23113495A 1995-09-08 1995-09-08 撮像装置 Expired - Fee Related JP3809205B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP23113495A JP3809205B2 (ja) 1995-09-08 1995-09-08 撮像装置
DE69634463T DE69634463T2 (de) 1995-09-08 1996-09-06 Bildaufnahmegerät mit progressiver oder zeilensprungfreier Abtastungsbildaufnahmevorrichtung
EP96114332A EP0762747B1 (en) 1995-09-08 1996-09-06 Image sensing apparatus using a non-interlace or progressive scanning type image sensing device
US08/709,381 US6011583A (en) 1995-09-08 1996-09-06 Image sensing apparatus using a non-interlace or progressive scanning type sensing device
US09/449,429 US6538696B2 (en) 1995-09-08 1999-11-24 Image sensing apparatus using a non-interlace or progressive scanning type image sensing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP23113495A JP3809205B2 (ja) 1995-09-08 1995-09-08 撮像装置

Publications (2)

Publication Number Publication Date
JPH0983874A true JPH0983874A (ja) 1997-03-28
JP3809205B2 JP3809205B2 (ja) 2006-08-16

Family

ID=16918820

Family Applications (1)

Application Number Title Priority Date Filing Date
JP23113495A Expired - Fee Related JP3809205B2 (ja) 1995-09-08 1995-09-08 撮像装置

Country Status (1)

Country Link
JP (1) JP3809205B2 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008278379A (ja) * 2007-05-02 2008-11-13 Canon Inc 固体撮像装置および撮像システム
JP2008278461A (ja) * 2008-02-07 2008-11-13 Canon Inc 固体撮像装置および撮像システム
JP2008278460A (ja) * 2008-02-07 2008-11-13 Canon Inc 固体撮像装置および撮像システム

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008278379A (ja) * 2007-05-02 2008-11-13 Canon Inc 固体撮像装置および撮像システム
US8553101B2 (en) 2007-05-02 2013-10-08 Canon Kabushiki Kaisha Solid-state image sensing device and image sensing system
JP2008278461A (ja) * 2008-02-07 2008-11-13 Canon Inc 固体撮像装置および撮像システム
JP2008278460A (ja) * 2008-02-07 2008-11-13 Canon Inc 固体撮像装置および撮像システム
JP4551935B2 (ja) * 2008-02-07 2010-09-29 キヤノン株式会社 固体撮像装置および撮像システム

Also Published As

Publication number Publication date
JP3809205B2 (ja) 2006-08-16

Similar Documents

Publication Publication Date Title
US6538696B2 (en) Image sensing apparatus using a non-interlace or progressive scanning type image sensing device
US8102436B2 (en) Image-capturing apparatus and method, recording apparatus and method, and reproducing apparatus and method
US5444483A (en) Digital electronic camera apparatus for recording still video images and motion video images
US20020057349A1 (en) Image pickup apparatus and solid state image pickup device
US20050012826A1 (en) Image input apparatus
JPH06350951A (ja) 画像信号処理装置
KR100377697B1 (ko) 영상 신호의 기록 재생 장치
JP3809205B2 (ja) 撮像装置
JP3932006B2 (ja) 撮像装置
JP3581457B2 (ja) 撮像装置
JP2000023007A (ja) 画像入力装置及び画像入力方法並びにメモリ媒体
JP3407943B2 (ja) 映像信号記録装置
JP3445869B2 (ja) ディジタル・ビデオ・テープ・レコーダおよびディジタル画像データの記録方法
JPH10145650A (ja) 撮像装置
JP4072222B2 (ja) 記録再生装置
JPH09130728A (ja) 撮像装置
JPH1066095A (ja) ノンインターレース/インターレース変換方法および画像入力装置
JPH10276452A (ja) 映像信号の記録再生装置
JPH04345292A (ja) ディジタルスチルビデオカメラ
JPH10191252A (ja) 画像再生装置及び画像再生方法
JPH10276451A (ja) 映像信号の記録再生装置
JP2001112012A (ja) 撮像信号処理装置、撮像信号処理方法、データ復号装置、及び撮像装置
JPH09191427A (ja) 撮像記録再生装置
JP2004242357A (ja) 撮像装置
JPH09130668A (ja) 映像信号処理装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050210

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20050901

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050906

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20051104

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060509

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060522

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100526

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100526

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110526

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120526

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120526

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130526

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140526

Year of fee payment: 8

LAPS Cancellation because of no payment of annual fees