JP4030716B2 - Tablet appearance inspection device and PTP packaging machine - Google Patents

Tablet appearance inspection device and PTP packaging machine Download PDF

Info

Publication number
JP4030716B2
JP4030716B2 JP2000334444A JP2000334444A JP4030716B2 JP 4030716 B2 JP4030716 B2 JP 4030716B2 JP 2000334444 A JP2000334444 A JP 2000334444A JP 2000334444 A JP2000334444 A JP 2000334444A JP 4030716 B2 JP4030716 B2 JP 4030716B2
Authority
JP
Japan
Prior art keywords
tablet
light
imaging
imaging range
appearance inspection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2000334444A
Other languages
Japanese (ja)
Other versions
JP2002139444A (en
Inventor
幸弘 田口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
CKD Corp
Original Assignee
CKD Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CKD Corp filed Critical CKD Corp
Priority to JP2000334444A priority Critical patent/JP4030716B2/en
Publication of JP2002139444A publication Critical patent/JP2002139444A/en
Application granted granted Critical
Publication of JP4030716B2 publication Critical patent/JP4030716B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G01N21/9508Capsules; Tablets

Landscapes

  • Basic Packing Technique (AREA)
  • Image Input (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、錠剤を製造する工程あるいはその後の工程において錠剤の外観を検査する検査装置、またはPTPシートに錠剤を包装する工程あるいはその後の工程において錠剤の外観を検査する検査装置、および該検査装置を備えたPTP包装機を含む技術分野に属するものである。
【0002】
【従来の技術】
一般に、PTPシートは、錠剤の投入されるポケット部が形成されてなる容器フィルムと、その容器フィルムにポケット部の開口側を密封するように前記容器フィルムに取着される密封用フィルムとによって構成されている。前記容器フィルムに対し密封用フィルムを取着(熱圧着)する前段階において、ポケット部に固形製剤やカプセル等の錠剤が投入される。容器フィルムは、通常透明性を有しており、その素材として、ポリ塩化ビニル(以下「PVC」という。)、ポリプロピレン(以下「PP」という。)等の熱可塑性樹脂材料が使用される。
【0003】
上記PTPシートの製造に際しては、錠剤の割れや欠け、あるいは表面に汚れや異物が付着した不良品の有無を検査するといった外観検査を行う必要があり、かかる検査に際しては外観検査装置が用いられる。即ち、この種の外観検査装置では、照明装置によって錠剤に光を照射し、その反射光を撮像手段により撮像する。この撮像装置から出力される映像信号は、画像処理手段によって、所定の閾値をもって二値化される。ここで、例えば白い錠剤を撮像した場合について説明すると、錠剤表面は明るく映り、背景の密封用フィルムおよび異物が存在する部分は暗く写る。そして、これらの明度の相違を考慮して前記閾値を設定することで、背景物と、錠剤とを区別して認識すると共に、暗い部分である割れや欠けの有無あるいは異物の存在を前記画像処理手段によって判断することができる。
【0004】
【発明が解決しようとする課題】
ところが、密封用フィルムとして、アルミ箔などの反射しやすい素材が一般的に使用されることから、背景物たる密封用フィルムからの反射光が強くなってしまうことがある。この場合、背景物と錠剤との明度の差が小さくなってしまい、錠剤の輪郭が不明瞭になったり、錠剤の映像を特定することができなかったりするおそれがあった。
【0005】
本発明は、上記事情に鑑みてなされたものであり、密封用フィルム等の背景の影響を受ける事無く、錠剤の輪郭を明確に捉えることができ、検査精度の向上を図ることのできる錠剤の外観検査装置及び外観検査装置を備えたPTP包装機を提供することを主たる目的としている。
【0006】
【問題を解決するための手段及び発明の効果】
上記目的を達成し得る特徴的手段について以下に説明する。また、各手段につき、特徴的な作用及び効果を必要に応じて記載する。
【0007】
手段1.錠剤の被検査部に光を照射して照明する照明手段と、所定の撮像範囲を有し、前記照明手段により照明された撮像範囲内の錠剤表面を撮像し映像信号を出力する撮像手段と、前記映像信号を処理する画像処理装置とを有する錠剤の外観検査装置において、前記照明手段は、前記撮像範囲内にある錠剤の周囲の背景物を照明すること無く撮像範囲内の錠剤を照明可能となっていることを特徴とする錠剤の外観検査装置。
【0008】
上記手段1によれば、照明手段は、撮像範囲内にある錠剤の周囲の背景物を照明すること無く撮像範囲内の錠剤を照明するので、照明される錠剤の被検査面からは十分な反射光が撮像手段に到達するが、照明されない背景からの反射はなく錠剤と背景の輝度の差が明確になる。従って、錠剤の輪郭を精度良く確実に判別することができ、割れ、欠けの有無を精度良く検査することができる。また、錠剤の領域が明確になることにより、ひいては錠剤上の異物の有無に関する検査についても精度が向上する。
【0009】
手段2.前記照明手段は、撮像範囲内にある錠剤の周囲の背景物を照明する光を遮光する遮光手段を有することを特徴とする手段1に記載の錠剤の外観検査装置。
【0010】
上記手段2によれば、照明手段の遮光手段により、撮像範囲内にある錠剤の周囲の背景物を照明する光が遮光される。このため、手段1に記載の作用効果が確実に奏される。また、遮光手段の位置を適宜調整することにより、そのときどきの錠剤に応じた照明状態の設定が容易になる。
【0011】
手段3.密封用フィルムに載置された錠剤と、前記錠剤の被検査部に光を照射して照明する照明手段と、所定の撮像範囲を有し、前記照明手段により照明された撮像範囲内の錠剤表面を撮像し映像信号を出力する撮像手段と、前記映像信号を処理する画像処理装置とを有する錠剤の外観検査装置において、前記照明手段は、撮像範囲内の密封用フィルムを照明すること無く撮像範囲内の錠剤を照明可能となっていることを特徴とする錠剤の外観検査装置。
【0012】
上記手段3によれば、照明手段は撮像範囲内の密封用フィルムを照明すること無く、撮像範囲内の錠剤を照明するので、照明される錠剤の被検査面からは十分な反射光が撮像手段に到達するが、照明されない密封用フィルムからの反射はなく、錠剤と密封用フィルムの輝度の差が明確になる。従って、錠剤の輪郭を精度良く確実に判別することができ、割れ、欠けの有無を精度良く検査することができる。また、錠剤の領域が明確になることにより、ひいては錠剤上の異物に関する検査についても精度が向上する。
【0013】
手段4.容器フィルムと密封用フィルムとからなる包材に収められた錠剤の外観を検査する錠剤の外観検査装置において、錠剤の被検査部に光を容器フィルム越しに照射して照明する照明手段と、所定の撮像範囲を有し、前記照明手段により照明された撮像範囲内の錠剤表面を撮像し映像信号を出力する撮像手段と、前記映像信号を処理する画像処理装置とを有し、前記照明手段は、撮像範囲内の密封用フィルムを照明すること無く撮像範囲内の錠剤を照明可能となっていることを特徴とする錠剤の観検査装置。
【0014】
上記手段4によれば、照明手段は撮像範囲内の密封用フィルムを照明すること無く、撮像範囲内の錠剤を照明するので、照明される錠剤の被検査面からは十分な反射光が撮像手段に到達するが、照明されない密封用フィルムからの反射はなく錠剤と密封用フィルムの輝度の差が明確になる。従って、錠剤の輪郭を精度良く確実に判別することができ、割れ、欠けの有無を精度良く検査することができる。また、錠剤の領域が明確になることにより、ひいては錠剤上の異物に関する検査についても精度が向上する。
【0015】
手段5.前記照明手段は、撮像範囲内にある密封用フィルムを照明する光を遮光する遮光手段を有することを特徴とする手段3又は4に記載の錠剤の外観検査装置。
【0016】
上記手段5によれば、照明手段の遮光手段により、撮像範囲内にある密封用フィルムを照明する光が遮光される。このため、手段3又は4に記載の作用効果が確実に奏される。また、遮光手段の位置を適宜調整することにより、そのときどきの錠剤に応じた照明状態の設定が容易になる。
【0017】
手段6.少なくとも前記錠剤を移送可能な移送手段を有し、前記撮像手段は錠剤の移送方向と直交する方向から撮像可能となっており、前記照明手段は前記移送方向に対し斜め方向から前記錠剤を照明可能となっていることを特徴とする手段1乃至5のいずれかに記載の錠剤の外観検査装置。なお、「前記移送手段は、複数の錠剤を面状に配列して移送可能となっており、前記撮像手段は錠剤の移送面と直交する方向から撮像可能となっている」こととしてもよい。さらに、「前記照明手段は、載置状態にある錠剤の頂部の法線上から撮像可能となっている」こととしてもよい。
【0018】
上記手段6によれば、移送手段により少なくとも前記錠剤が移送される。撮像手段は錠剤の移送方向と直交する方向から撮像することから、解像度の高い錠剤の外観検査が可能となる。また、照明手段は移送方向に対し斜め方向から錠剤を照明可能となっているため、撮像手段の配置等の妨げとなることがない。
【0019】
手段7.前記撮像手段の撮像範囲が所定幅のライン状であることを特徴とする手段1乃至6のいずれかに記載の錠剤の外観検査装置。
【0020】
上記手段7によれば、撮像手段の撮像範囲が所定幅のライン状であることから、撮像範囲内にある錠剤の周囲の背景物あるいは密封用フィルムを照射することなく錠剤を照明することが容易になる。
【0021】
手段8.前記照明手段にて照射される光が、所定の幅を持ったライン光であることを特徴とする手段7に記載の錠剤の外観検査装置。
【0022】
上記手段8によれば、照明手段にて照射される光が所定の幅を持ったライン光であることから、撮像範囲内にある錠剤の周囲の背景物あるいは密封用フィルムを照明すること無く錠剤を照明することが容易になる。
【0023】
手段9.前記照明手段にて照射されるライン光は、前記ライン状の撮像範囲と平行であることを特徴とする手段8に記載の錠剤の外観検査装置。
【0024】
上記手段9によれば、撮像範囲内にある錠剤の周囲の背景物あるいは密封用フィルムを照射することなく錠剤を照明することがより一層容易になる。
【0025】
手段10.少なくとも前記錠剤を移送する移送手段を有し、前記移送手段が前記錠剤を所定量移送するごとに前記撮像手段がライン状に撮像することを特徴とすることを特徴とする手段7乃至9のいずれかに記載の錠剤の外観検査装置。
【0026】
上記手段10によれば、移送手段により少なくとも錠剤が移送され、移送手段により錠剤が所定量移送されるごとに撮像手段がライン状に撮像するので、撮像範囲内にある錠剤の周囲の背景物あるいは密封用フィルムを照射することなく錠剤を照明しつつ、容易に錠剤全体の外観を検査することができる。
【0027】
手段11.前記撮像手段が撮像するライン状の撮像範囲の前記所定幅が1画素単位であることを特徴とする手段7乃至10のいずれかに記載の錠剤の外観検査装置。
【0028】
上記手段11によれば、撮像手段が撮像するライン状の撮像範囲の所定幅が1画素単位であることから、撮像する毎に送る長さが一定であれば、等ピッチによる撮像ができ、画像処理装置において異物などの面積や大きさを計算するといった処理が容易になる。ここで、1画素単位とは、白黒カメラの場合は1画素を意味する。また、例えば赤、緑および青の各受光素子を有するカラーCCDカメラの場合は、近隣の各色の画素一つずつを合わせた三つの画素をもって1画素単位とする。
【0029】
手段12.前記照明手段はライン状の光源からライン光を照射し、ライン光は前記ライン状の光源と直交する平面においては、略平行光であることを特徴とする手段7乃至11のいずれかに記載の錠剤の外観検査装置。
【0030】
上記手段12によれば、照明手段のライン状の光源からライン光が照射される。ここで、ライン光は光源と直交する平面においては、略平行光であることから、撮像範囲内にある錠剤の周囲の背景物あるいは密封用フィルムを照射することなく錠剤を照明することが容易になる。
【0031】
手段13.前記照明手段はライン状の光源からライン光を照射し、ライン光は前記ライン状の光源と平行な平面においては、拡散光であることを特徴とする請求項7乃至12のいずれかに記載する錠剤の外観検査装置。
【0032】
上記手段13によれば、照明手段のライン状の光源からライン光が照射される。該ライン光は光源と平行な平面においては、拡散光であることから、錠剤の表面は色々な方向からの光により照明され、割線や刻印などの窪み部についても影になりにくく、平面部に近い明るさが得られる。そのため、外観検査に際し、割線や刻印の影響を少なくすることができる。
【0033】
なお、「前記ライン光は、前記錠剤の移送方向に対し略30度の方向から照射されること」、「前記ライン光は、前記錠剤の移送方向に対し略60度の方向から照射されること」、「前記ライン光は、前記錠剤の移送方向に対し略30度及び略60度の方向から照射されること」としてもよい。この場合、ライン光が錠剤に対し略30度の方向から照明される場合には、糖衣錠の周縁部のように傾斜が強い部分についても十分な光量が得られることから、傾斜部の影響の少ない錠剤の外観検査が可能になる。また、ライン光が、錠剤に対し略60度の方向から照明される場合には、錠剤の割線や刻印等の影が軽減されるので、割線や刻印の影響を少なくすることができる。なお、上記なお書きの「前記錠剤の移送方向に対し」に代えて、「面状に複数配列された状態で移送可能となっている錠剤の移送面に対し」としてもよい。さらに、「載置状態にある錠剤の頂部の法線上から撮像可能となっている」こととしてもよい。
【0034】
手段14.前記照明手段からの光が、複数の角度から照射されるようにしたことを特徴とする手段1乃至13のいずれかに記載の錠剤の外観検査装置。
【0035】
上記手段14によれば、照明手段からの光が、複数の角度から照射されるので、外観検査に際し、錠剤の形状の変化等による悪影響を払拭することができる。
【0036】
手段15.前記照明手段を、少なくとも前記撮像手段を挟んでその両側に設けたことを特徴とする手段14に記載の錠剤の外観検査装置。
【0037】
上記手段15によれば、照明手段を、撮像手段を挟んでその両側に設けたことから、錠剤の割線や刻印等の影が軽減されるので、割線や刻印の影響が少なく、傾斜面についても傾斜の方向による明るさの差が小さくなることから、斜面の影響が少ない錠剤の外観検査が可能になる。
【0038】
手段16.手段1乃至請求項15のいずれかに記載の錠剤の外観検査装置を備えたPTP包装機。
【0039】
この手段16のようにPTP包装機に上記各手段にて特定された外観検査装置を設ければ、PTP包装機による包装過程において錠剤の外観検査を行うことができる。これにより、包装途中或いは包装後において、欠陥が発見された錠剤を含むPTPシートを精度よく排除することができる。
【0040】
【発明の実施の形態】
以下、一実施の形態について、図1乃至図8を参照しつつ説明する。
【0041】
この実施の形態では、図3に示すように、錠剤の外観検査装置をPTP包装機30に装備することによって、PTP包装機30内で錠剤の外観検査を実施することとしている。
【0042】
まず、PTPシートの外観検査が実施されるPTP包装機30について簡単に説明する。PTP包装機30は、固形製剤やカプセルなどの錠剤をPTPシートに自動的に包装するものである。具体的には、フィルム40が、フィルム送りロール33及びテンションロール31,32によって加熱板50、成形板51へと送り込まれるようになっている。なお、フィルム40としては、光透過性を有する、(ここでは透明性を有する)熱可塑性樹脂材料が採用される。具体的には、ポリ塩化ビニル(以下「PVC」という。)やポリプロピレン(以下「PP」という。)といった素材が挙げられるが、使用後の環境面を考慮するとPPが好適に用いられる。
【0043】
前記加熱板50、成形板51において、錠剤を充填するためのポケット部44(図4参照)がフィルム40に対し成形され、容器フィルム41が得られる。そして、容器フィルム41が、錠剤投入シャッター52の下にまで送られてくると、該錠剤投入シャッター52によって各ポケット部44に錠剤1(図4参照)が自動的に充填される。
【0044】
さらに、各ポケット部44に錠剤1が充填された容器フィルム41上にアルミ製の密封用フィルム42がテンションロール34,35を介して送り込まれ、一対のシールロール36,36にて取着(熱圧着)される。これにより、錠剤1が各ポケット部44に充填されたPTPフィルム43が製造される。かかるPTPフィルム43はその後図示しない打抜装置によってシート状に裁断されてPTPシートとされた後に、図示しない不良シート排出機構やPTPシート集積機構などへ順に送られる。
【0045】
次に、錠剤1(実際には容器フィルム41に充填された錠剤1)の外観検査装置について説明する。図2,5に示すように、外観検査装置は、撮像手段を構成するCCDカメラ11、モニタ25、照明手段としての照明装置12、画像処理装置10などから構成される。
【0046】
CCDカメラ11は、1画素単位が一列に並んだラインCCDカメラであり、錠剤1の被検査面の略法線上に、ライン状の撮像範囲が錠剤1の流れ方向と直交する向きになるように配置され、前記各ロールにより錠剤1(PTPフィルム43)が所定量移送されるごとに、ライン状に撮像可能となっている。ここで、1画素単位とは、白黒カメラの場合は1画素を意味し、例えば赤、緑および青の各受光素子を有するカラーCCDカメラの場合は、近隣の各色の画素一つずつを合わせた三つの画素をもって1画素単位とする。ここで、CCDカメラ11と照明装置12との関係について説明すると、図3及び図4に示すように、CCDカメラ11と照明装置12とは、密封フィルム42を貼着した後のPTPフィルム43のポケット部44側において、錠剤1に向かって配置されている。そして、照明装置12から照射されるライン光13が容器フィルム41越しに錠剤1を照らし、CCDカメラ11は、錠剤1から反射した光を当該PTPフィルム43の幅方向に一次元撮像する。
【0047】
さて、照明装置12は、CCDカメラ11の撮像範囲内にある錠剤1の周囲の背景物(ここでは密封用フィルム42)を照明すること無く、錠剤1を照明することができるように配置されている。すなわち、図3および図4では照明装置12は、一つのみ表されているが、図2に示すように実際には、CCDカメラ11を挟んで両側の、錠剤1の被検査面に対し略60度の位置および略30度の位置に、合わせて4つ配置されている。各照明装置12は、ライン状であり、錠剤1上におけるCCDカメラ11の撮像範囲にライン光13を照射する。
【0048】
光源から照射されるライン光13は、ライン状の光源と直交する平面においては略平行光となっており、ライン状の光源と平行する平面においては拡散光となっている(図6参照)。
【0049】
照明装置12にはライン光13の下端を遮光して照射の一部を規制するための遮光手段としての遮光板9が設けられている。遮光板9は図2の矢印方向に移動可能に設けられており、これらを適宜移動することによりライン光13が撮像範囲内の密封用フィルム42を照射しないように調節可能となっている。より詳しくは、図2,7に示すように、錠剤1が撮像範囲内にあるときは、錠剤1の表面には4つの照明装置12からのライン光13がそれぞれ照射される。これに対し、錠剤1が撮像範囲から外れたときは、図8に示すように、密封用フィルム42上の撮像範囲を含む領域(図8のDZ間)には、ライン光13は照射されない。従って、照明装置12は、錠剤1が撮像範囲内にあるときは、錠剤1の被検査面を照明し、そこからの乱反射光がCCDカメラ11に到達することから、錠剤1の表面は明るく撮像される。一方、錠剤1が撮像範囲内にない場合は、照明装置12は、撮像範囲内にあるいかなるものも照明しないことから、密封用フィルム42が暗く撮像される。
【0050】
遮光板9は、ライン光13の平行性の乱れによるにじみを少なくするために、錠剤1の撮像範囲に可能な限り近づけて設けるのが好ましい。しかし、錠剤1に近づくほど遮光板9を設ける空間が小さくなることから、本実施の形態においては、照明装置12側から錠剤1に向けて所定の角度を持たせて差し込むように設けている。また、遮光手段としては、いわゆる板状のものでなくとも、密封用シート42を照射する光をさえぎることができれば、ブロック状であってもよいし棒状であってもよい。
【0051】
次に、外観検査装置の電気的構成について説明する。図5に示すように、画像処理装置10は、A/D変換器3、シェーディング補正手段14、第1の二値化手段15、第2の二値化手段28、第1の画像メモリ17、第2の画像メモリ29、第3の画像メモリ16、CPU及び入出力インターフェース20、判定用メモリ22、外観検査結果及び統計データメモリ24、カメラタイミング制御手段26などから構成される。
【0052】
A/D変換器3は、CCDカメラ11で撮像した一次元イメージデータを、アナログ信号からデジタル信号に変換するものである。A/D変換された一次元イメージデータは、シェーディング補正テーブル18のデータに従って、シェーディング補正手段14によりシェーディング補正された後、第3の画像メモリ16に順次記憶され、PTPフィルム43の二次元濃淡イメージデータが形成される。なお、シェーディング補正は、容器フィルム41の幅全体を照明装置12のライン光13で一様に(均等に)照らすことは技術的に限界があることから、かかる位置の相違によるライン光13の明暗により生じる映像データの明度のばらつきを補正するために行われるものである。
【0053】
また、同時に、前記補正されたデータは、第1の二値化手段15により第1の閾値δ1をもって二値化された後、第1の画像メモリ17に順次記憶されるようになっている。これにより、PTPフィルム43の第1の二次元二値化イメージデータが形成される。第1の閾値δ1は、錠剤1を判別するためのもので、例えば錠剤1が白色の場合はその背景となる密封用フィルム42よりも明るい値が選択される。
【0054】
同様に、前記補正されたデータは、第2の二値化手段28により第2の閾値δ2をもって二値化された後、第2の画像メモリ29に順次記憶され、これによりPTPフィルム43の第二の二次元二値化イメージデータが形成される。第2の閾値δ2は、錠剤1上の異物やひび欠け等を判別するためのもので、比較的暗い値が選択される。
【0055】
CPU及び入出力インターフェース20は、各種画像処理プログラム、その他のプログラムを、判定用メモリ22の記憶内容などを使用しつつ実行するとともに、PTP包装機30に制御信号を送出し又はPTP包装機30から動作信号などの各種信号を受信するためのものである。これによって、例えば、PTP包装機30の不良シート排出機構などを制御することができるようになっている。また、CPU及び入出力インターフェース20は、モニタ25に表示データを送出する機能をも有する。かかる機能により、二次元化した二値あるいは濃淡のイメージデータや外観検査結果などを、モニタ25に表示させることができるようになっている。
【0056】
外観検査結果及び統計データメモリ24は、連結成分に関する座標等のデータ、外観検査結果データ、および該外観検査結果データを確率統計的に処理した統計データなどを記憶するものである。これらの外観検査結果データや統計データは、CPU及び入出力インターフェース20の制御に基づき、モニタ25に表示させることができる。また、これらの外観検査結果データや統計データに基づいてCPU及び入出力インターフェース20がPTP包装機30に制御信号を送出することもできる。入力手段27は、判定用メモリ22に記憶される良否判断の基準値等の設定を入力するためのものである。
【0057】
カメラタイミング制御手段26は、CCDカメラ11が撮像する一次元イメージデータを、A/D変換器3に取り込むタイミングを制御するものである。かかるタイミングはPTP包装機30に設けられた図示しないエンコーダからの信号に基づいて制御され、容器フィルム41を所定量送るごとにCCDカメラ11の撮像が行われる。
【0058】
次に、錠剤の外観検査の手順について、図1に基づいて説明する。すなわち、図1は画像処理装置10(主としてCPU)によって実行される「検査判定ルーチン」を示すフローチャートである。画像処理装置10は、まずステップS101において、第1の画像メモリに記憶された第1の二次元二値化イメージデータと、第2の画像メモリに記憶された第2の二次元二値化イメージデータとに対して塊処理を実行する。塊処理としては、二値化データの0(暗)および1(明)について各連結成分を特定する処理と、それぞれの連結成分についてラベル付けを行うラベル付け処理とがある。ここで、それぞれ特定される各連結成分の占有面積はCCDカメラ11の画素に応じたドット数で表される。
【0059】
次にステップS102において、画像処理装置10は、第1の二次元二値化イメージデータから求めた1(明)の連結成分の中から、錠剤1に相当する連結成分を特定する。錠剤1に相当する連結成分は、所定の座標を含む連結成分、所定の形状である連結成分、或いは所定の面積であるところの連結成分等の判断手法により容易に錠剤1に相当する連結成分を特定することができる。
【0060】
錠剤1に相当する連結成分を特定したら、その連結成分の領域を錠剤領域としてもよいし、錠剤1の形状によっては端部が暗くなり実際よりも小さく判断される場合があることから、錠剤1に相当する連結成分の領域を所定の大きさまで拡大して錠剤領域としてもよい。
【0061】
次に、ステップS103では、画像処理装置10は、錠剤領域内の異物の総面積Sdxを演算する。すなわち、第2の二次元二値化イメージデータから求めた0(暗)の連結成分のうち、ステップS102で特定した錠剤領域の座標に含まれる、あるいは連なるものを抽出し、その面積の総和つまり異物の総面積Sdxを求める。
【0062】
次に、ステップS104では、異物の総面積Sdxを予め定められた判定基準値Spxと比較する。そして、異物の総面積Sdxが判定基準値Spxよりも小さい場合には、ステップS105へ移行する。一方、異物の総面積Sdxが判定基準値Spx以上の場合はステップS108へ移行し、該ステップS108において不良判定を行い、その後の処理を一旦終了する。
【0063】
さて、ステップS105において、画像処理装置10は、錠剤領域内の異物の最大面積Sdmを演算する。すなわち、第2の二次元二値化イメージデータから求めた0(暗)の連結成分のうち、ステップS102で特定した錠剤領域の座標に含まれる、あるいは連なるものの中から、最大の面積のものを抽出し、その面積を最大面積Sdmとする。
【0064】
次に、ステップS106において、画像処理装置10は、異物の最大面積Sdmを予め定められた判定基準値Spmと比較する。そして、異物の最大面積Sdmが判定基準値Sdmよりも小さい場合には、ステップS107において良品判定を行いその後の処理を一旦終了する。これに対し、異物の総面積Sdmが判定基準値Spm以上の場合にはステップS108において不良判定を行う。
【0065】
上記ステップS101からステップS108の処理は、PTPフィルム43上の各錠剤1について実行され、後にPTPシートとなって裁断されたときに同一シート上に一つでも不良判定された錠剤1が含まれているときは、そのシートは不良と判断され排出される。
【0066】
以上詳述したように、本実施の形態によれば、照明装置12は撮像範囲内の密封用フィルム42を照明すること無く、撮像範囲内の錠剤1を照明することができるようになっている。このため、照明される錠剤1の被検査面からは十分な反射光がCCDカメラ11に到達するが、照明されない密封用フィルム42からの反射はなく錠剤1と密封用フィルム42との輝度の差が明確なものとなる。従って、錠剤1の輪郭を精度良く確実に判別することができ、割れ、欠けの有無を精度良く検査することができる。また、錠剤1の領域が明確になることにより、ひいては錠剤1上の異物に関する検査についても精度の向上を図ることができる。その結果、包装途中において、欠陥が発見された錠剤1を含むPTPシートを精度よく排除することができる。
【0067】
特に、本実施の形態では、照明装置12に対応して遮光板9を設けることとし、これにより撮像範囲内にある密封用フィルム42を照明する光を遮光することとした。このため、上記作用効果が確実に奏されるとともに、遮光板9の位置を適宜調整することにより、そのときどきの錠剤1に応じた照明状態の設定を容易に行うことができる。
【0068】
また、CCDカメラ11の撮像範囲が所定幅のライン状であり、照明装置12にて照射される光が、所定の幅を持ったライン光13であって、しかも、そのライン光13は、前記ライン状の撮像範囲と平行である。このため、上記作用効果をより一層容易なものとすることができる。
【0069】
尚、上述した実施の形態の記載内容に限定されることなく、例えば次のように実施してもよい。
【0070】
(a)上記実施の形態では、照明装置12の光源をライン状とし、その光源から照射されるライン光13は、ライン状の光源と直交する平面においては略平行光となるようにした。これに対し、必ずしも光源はライン状である必要はない。また、光源から照射される光は必ずしも厳密な意味での平行光でなくてもよい。すなわち、図9に示すように、照明装置12Bの光源から照射される光13Bが拡散光であったとしても、光源近傍での光の幅が光源から被検査部までの距離に対して十分に小さければ(略平行光の範疇に含まれる)、上記実施の形態に記載した作用効果を奏せしめることは可能である。
【0071】
(b)照明装置12の数は、上記実施の形態の4つに限定されるものではなく、1つでも、2つでも、3つでも、5つ以上でもよい。但し、錠剤1の形状、割線、刻印等の影響を払拭するためには、撮像装置を挟んで複数の角度から照射するのが望ましい。
【0072】
(c)上記実施の形態では容器フィルム41のポケット部44に収容された錠剤1の外観検査を行うための外観検査装置に具体化したが、例えば移送コンベア上に載置された錠剤の外観を検査する装置に具体化してもよいし、フィルム上に載置された錠剤の外観を検査する装置に具体化してもよい。或いは、PTPシートに打ち抜かれた後の外観検査装置に具体化してもよい。また、密封用フィルム42を貼着する前段階での外観検査装置に具体化してもよい。
【0073】
(d)上記実施の形態において説明した総面積等による判定に代えて、長径、長径/短径比、ペラウンド(面積/周囲長)、周囲長、外接周長等を用いてもよい。
【図面の簡単な説明】
【図1】一実施の形態において画像処理装置により実行される「検査判定ルーチン」を示すフローチャートである。
【図2】外観検査装置の特徴部分を模式的に示す構成図である。
【図3】PTP包装機等の概略構成を示す模式図である。
【図4】PTP包装機における外観検査装置を示す斜視図である。
【図5】画像処理装置等の電気的構成を示すブロック図である。
【図6】照明装置の配置関係を説明する模式的な平面図である。
【図7】外観検査装置の作用を説明するための概略図である。
【図8】外観検査装置の作用を説明するための概略図である。
【図9】別の実施の形態における外観検査装置の特徴部分を模式的に示す構成図である。
【符号の説明】
1…錠剤、9…遮光手段としての遮光板、10…画像処理装置、11…撮像手段としてのCCDカメラ、12…照明手段としての照明装置、13…ライン光、30…PTP包装機、31,32…移送手段を構成するテンションロール、33…移送手段を構成するフィルム送りロール、36…移送手段を構成するシールロール、40…フィルム、41…容器フィルム、42…密封用フィルム、43…PTPフィルム、44…ポケット部。
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an inspection device for inspecting the appearance of a tablet in the step of manufacturing a tablet or the subsequent step, or an inspection device for inspecting the appearance of a tablet in the step of packaging a tablet on a PTP sheet or the subsequent step, and the inspection device. Belongs to a technical field including a PTP packaging machine equipped with.
[0002]
[Prior art]
Generally, a PTP sheet is composed of a container film in which a pocket portion into which a tablet is inserted is formed, and a sealing film attached to the container film so as to seal the opening side of the pocket portion to the container film. Has been. Before the sealing film is attached (thermocompression bonding) to the container film, a tablet such as a solid preparation or a capsule is put into the pocket portion. The container film usually has transparency, and a thermoplastic resin material such as polyvinyl chloride (hereinafter referred to as “PVC”) or polypropylene (hereinafter referred to as “PP”) is used as the material of the container film.
[0003]
In the production of the PTP sheet, it is necessary to conduct an appearance inspection such as inspecting the presence or absence of a cracked or chipped tablet, or a defective product having dirt or foreign matter attached to the surface, and an appearance inspection apparatus is used for such inspection. That is, in this type of appearance inspection apparatus, the illumination device irradiates the tablet with light, and the reflected light is imaged by the imaging means. The video signal output from this imaging device is binarized with a predetermined threshold by the image processing means. Here, for example, a case where a white tablet is imaged will be described. The tablet surface appears bright, and the background sealing film and the portion where foreign substances are present appear dark. Then, by setting the threshold value in consideration of the difference in lightness, the image processing means recognizes the background object and the tablet separately and recognizes the presence or absence of cracks or chips that are dark portions. Can be judged by.
[0004]
[Problems to be solved by the invention]
However, since a reflective material such as an aluminum foil is generally used as the sealing film, the reflected light from the sealing film as the background may become strong. In this case, the difference in brightness between the background and the tablet becomes small, and there is a possibility that the outline of the tablet becomes unclear or the image of the tablet cannot be specified.
[0005]
The present invention has been made in view of the above circumstances, and it is possible to clearly understand the outline of a tablet without being affected by the background of a sealing film or the like, and to improve the inspection accuracy. The main purpose is to provide an appearance inspection apparatus and a PTP packaging machine equipped with an appearance inspection apparatus.
[0006]
[Means for solving problems and effects of invention]
Characteristic means capable of achieving the above object will be described below. For each means, characteristic actions and effects are described as necessary.
[0007]
Means 1. Illuminating means for illuminating the inspected portion of the tablet with light; and an imaging means having a predetermined imaging range, imaging the surface of the tablet within the imaging range illuminated by the illuminating means, and outputting a video signal; In the tablet appearance inspection apparatus having the image processing apparatus for processing the video signal, the illumination unit can illuminate the tablets in the imaging range without illuminating the background objects around the tablets in the imaging range. An appearance inspection apparatus for tablets.
[0008]
According to the above means 1, since the illumination means illuminates the tablet in the imaging range without illuminating the background object around the tablet in the imaging range, sufficient reflection from the surface to be inspected of the illuminated tablet Although light reaches the imaging means, there is no reflection from the unilluminated background, and the difference in brightness between the tablet and the background becomes clear. Therefore, the outline of the tablet can be determined with high accuracy and the presence or absence of cracks or chips can be inspected with high accuracy. In addition, since the region of the tablet becomes clear, the accuracy of the inspection regarding the presence or absence of foreign matter on the tablet is improved.
[0009]
Mean 2. 2. The tablet appearance inspection apparatus according to claim 1, wherein the illumination means includes a light shielding means for shielding light that illuminates a background object around the tablet within the imaging range.
[0010]
According to the means 2, the light for illuminating the background around the tablet in the imaging range is shielded by the light shielding means of the illumination means. For this reason, the effect as described in the means 1 is reliably produced. Further, by appropriately adjusting the position of the light shielding means, it becomes easy to set the illumination state according to the tablet at that time.
[0011]
Means 3. A tablet placed on a sealing film, illumination means for illuminating the inspected portion of the tablet with light, and a tablet surface within the imaging range having a predetermined imaging range and illuminated by the illumination means In the tablet appearance inspection apparatus having an image pickup means for picking up an image and outputting a video signal, and an image processing device for processing the video signal, the illumination means has an image pickup range without illuminating a sealing film in the image pickup range. A tablet external appearance inspection device characterized in that the tablet inside can be illuminated.
[0012]
According to the means 3, the illuminating means illuminates the tablet in the imaging range without illuminating the sealing film in the imaging range, so that sufficient reflected light is captured from the surface to be inspected of the illuminated tablet. However, there is no reflection from the sealing film that is not illuminated, and the difference in brightness between the tablet and the sealing film becomes clear. Therefore, the outline of the tablet can be determined with high accuracy and the presence or absence of cracks or chips can be inspected with high accuracy. In addition, since the area of the tablet is clarified, the accuracy of the inspection related to the foreign matter on the tablet is improved.
[0013]
Means 4. In a tablet appearance inspection apparatus for inspecting the appearance of a tablet contained in a packaging material comprising a container film and a sealing film, illumination means for illuminating the tablet inspected portion with light through the container film, and a predetermined The imaging means for imaging the tablet surface within the imaging range illuminated by the illumination means and outputting a video signal; and an image processing device for processing the video signal, wherein the illumination means A tablet inspection apparatus characterized in that a tablet in an imaging range can be illuminated without illuminating a sealing film in the imaging range.
[0014]
According to the means 4, the illuminating means illuminates the tablet in the imaging range without illuminating the sealing film in the imaging range, so that sufficient reflected light is captured from the surface to be inspected of the illuminated tablet. However, there is no reflection from the non-illuminated sealing film, and the difference in brightness between the tablet and the sealing film becomes clear. Therefore, the outline of the tablet can be determined with high accuracy and the presence or absence of cracks or chips can be inspected with high accuracy. In addition, since the area of the tablet is clarified, the accuracy of the inspection related to the foreign matter on the tablet is improved.
[0015]
Means 5. The tablet appearance inspection apparatus according to means 3 or 4, wherein the illuminating means includes a light shielding means for shielding light for illuminating a sealing film within an imaging range.
[0016]
According to the means 5, the light for illuminating the sealing film within the imaging range is shielded by the light shielding means of the illumination means. For this reason, the effect as described in the means 3 or 4 is reliably show | played. Further, by appropriately adjusting the position of the light shielding means, it becomes easy to set the illumination state according to the tablet at that time.
[0017]
Means 6. It has at least a transfer means capable of transferring the tablet, the imaging means can take an image from a direction orthogonal to the transfer direction of the tablet, and the illumination means can illuminate the tablet from an oblique direction with respect to the transfer direction. The tablet appearance inspection apparatus according to any one of means 1 to 5, characterized in that: It should be noted that “the transfer means can transfer a plurality of tablets arranged in a plane, and the imaging means can image from a direction orthogonal to the transfer surface of the tablets”. Furthermore, it is good also as "the said illumination means can be imaged from the normal line of the top part of the tablet in a mounting state."
[0018]
According to the means 6, at least the tablet is transferred by the transfer means. Since the imaging means captures an image from a direction orthogonal to the tablet transfer direction, it is possible to inspect the appearance of the tablet with high resolution. Moreover, since the illumination means can illuminate the tablet from an oblique direction with respect to the transfer direction, the arrangement of the imaging means is not hindered.
[0019]
Mean 7 The tablet appearance inspection apparatus according to any one of means 1 to 6, wherein an imaging range of the imaging means is a line having a predetermined width.
[0020]
According to the means 7, since the imaging range of the imaging means is a line having a predetermined width, it is easy to illuminate the tablet without irradiating the background or the sealing film around the tablet in the imaging range. become.
[0021]
Means 8. 8. The tablet appearance inspection apparatus according to claim 7, wherein the light irradiated by the illuminating means is line light having a predetermined width.
[0022]
According to the means 8, since the light irradiated by the illumination means is line light having a predetermined width, the tablet without illuminating the background object or the sealing film around the tablet within the imaging range. It becomes easy to illuminate.
[0023]
Means 9. 9. The tablet appearance inspection apparatus according to claim 8, wherein the line light emitted by the illumination means is parallel to the line-shaped imaging range.
[0024]
According to the above means 9, it becomes much easier to illuminate the tablet without irradiating the background or the sealing film around the tablet within the imaging range.
[0025]
Means 10. Any of means 7 to 9, characterized in that it has at least a transfer means for transferring said tablets, and said image pickup means takes an image in a line whenever said transfer means transfers a predetermined amount of said tablets. A device for inspecting the appearance of crabs.
[0026]
According to the means 10, since at least the tablet is transferred by the transfer means and the image pickup means images in a line shape every time the tablet is transferred by the transfer means, the background object around the tablets in the image pickup range or The appearance of the whole tablet can be easily inspected while illuminating the tablet without irradiating the sealing film.
[0027]
Means 11. The tablet appearance inspection apparatus according to any one of means 7 to 10, wherein the predetermined width of the line-shaped imaging range imaged by the imaging means is one pixel unit.
[0028]
According to the means 11, since the predetermined width of the line-shaped imaging range imaged by the imaging means is in units of one pixel, if the length to be sent each time an image is taken, imaging at an equal pitch can be performed. Processing such as calculating the area and size of foreign matter in the processing apparatus is facilitated. Here, the unit of one pixel means one pixel in the case of a monochrome camera. For example, in the case of a color CCD camera having light receiving elements of red, green, and blue, one pixel unit is composed of three pixels including one pixel of each neighboring color.
[0029]
Means 12. The lighting means emits line light from a linear light source, and the line light is substantially parallel light on a plane orthogonal to the linear light source. Tablet appearance inspection device.
[0030]
According to the means 12, the line light is emitted from the linear light source of the illumination means. Here, since the line light is substantially parallel light on a plane orthogonal to the light source, it is easy to illuminate the tablet without irradiating the background or the sealing film around the tablet within the imaging range. Become.
[0031]
Means 13. The illuminating unit emits line light from a linear light source, and the line light is diffused light in a plane parallel to the linear light source. Tablet appearance inspection device.
[0032]
According to said means 13, line light is irradiated from the linear light source of an illumination means. Since the line light is diffused light in a plane parallel to the light source, the surface of the tablet is illuminated with light from various directions, and the depressions such as secant lines and engravings are less likely to be shaded. Near brightness is obtained. Therefore, in the appearance inspection, the influence of the dividing line and the marking can be reduced.
[0033]
In addition, “the line light is irradiated from a direction of about 30 degrees with respect to the transfer direction of the tablet”, “the line light is irradiated from a direction of about 60 degrees with respect to the transfer direction of the tablet. "," The line light may be irradiated from directions of approximately 30 degrees and approximately 60 degrees with respect to the transfer direction of the tablet ". In this case, when the line light is illuminated from a direction of approximately 30 degrees with respect to the tablet, a sufficient amount of light can be obtained even in a portion with a strong inclination such as the peripheral portion of the sugar-coated tablet, and thus the influence of the inclined portion is small. Appearance inspection of tablets is possible. Further, when the line light is illuminated from a direction of approximately 60 degrees with respect to the tablet, shadows such as the dividing line and the marking of the tablet are reduced, so that the influence of the dividing line and the marking can be reduced. Instead of the above-mentioned “with respect to the tablet transfer direction”, it may be “with respect to the tablet transfer surface that can be transferred in a state of being arranged in a plurality of planes”. Furthermore, it may be “capable of imaging from the normal line of the top of the tablet in the placed state”.
[0034]
Means 14. The tablet appearance inspection apparatus according to any one of means 1 to 13, wherein light from the illumination means is irradiated from a plurality of angles.
[0035]
According to the above means 14, since the light from the illumination means is irradiated from a plurality of angles, it is possible to eliminate the adverse effects caused by changes in the shape of the tablet and the like during the appearance inspection.
[0036]
Means 15. 15. The tablet appearance inspection apparatus according to claim 14, wherein the illumination means is provided on both sides of at least the imaging means.
[0037]
According to the means 15, since the illumination means is provided on both sides of the imaging means, shadows such as the score line and the marking of the tablet are reduced, so that the influence of the score line and the marking is less and the inclined surface is also affected. Since the difference in brightness depending on the direction of inclination is reduced, it is possible to inspect the appearance of tablets with little influence of the slope.
[0038]
Means 16. A PTP packaging machine comprising the tablet appearance inspection apparatus according to claim 1.
[0039]
If the appearance inspection device specified by the above means is provided in the PTP packaging machine like the means 16, the appearance inspection of the tablets can be performed in the packaging process by the PTP packaging machine. Thereby, in the middle of packaging or after packaging, the PTP sheet including the tablet in which the defect is found can be accurately excluded.
[0040]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, an embodiment will be described with reference to FIGS.
[0041]
In this embodiment, as shown in FIG. 3, the appearance inspection of the tablets is performed in the PTP packaging machine 30 by installing the tablet appearance inspection apparatus in the PTP packaging machine 30.
[0042]
First, the PTP packaging machine 30 in which the appearance inspection of the PTP sheet is performed will be briefly described. The PTP packaging machine 30 automatically wraps tablets such as solid preparations and capsules on a PTP sheet. Specifically, the film 40 is fed into the heating plate 50 and the forming plate 51 by the film feeding roll 33 and the tension rolls 31 and 32. In addition, as the film 40, a thermoplastic resin material having light transparency (here, having transparency) is employed. Specific examples include materials such as polyvinyl chloride (hereinafter referred to as “PVC”) and polypropylene (hereinafter referred to as “PP”), and PP is preferably used in consideration of environmental aspects after use.
[0043]
In the heating plate 50 and the forming plate 51, a pocket portion 44 (see FIG. 4) for filling a tablet is formed on the film 40, and a container film 41 is obtained. Then, when the container film 41 is sent under the tablet insertion shutter 52, the tablet 1 is automatically filled with the tablets 1 (see FIG. 4) by the tablet insertion shutter 52.
[0044]
Further, an aluminum sealing film 42 is fed through the tension rolls 34 and 35 onto the container film 41 in which the tablets 1 are filled in the pocket portions 44 and attached (heated) by the pair of seal rolls 36 and 36. Crimped). Thereby, the PTP film 43 in which the tablet 1 is filled in each pocket portion 44 is manufactured. The PTP film 43 is then cut into a sheet shape by a punching device (not shown) to form a PTP sheet, and then sequentially sent to a defective sheet discharge mechanism, a PTP sheet stacking mechanism, and the like (not shown).
[0045]
Next, an appearance inspection apparatus for tablets 1 (actually tablets 1 filled in the container film 41) will be described. As shown in FIGS. 2 and 5, the appearance inspection apparatus includes a CCD camera 11 constituting an imaging unit, a monitor 25, an illumination device 12 as an illumination unit, an image processing device 10, and the like.
[0046]
The CCD camera 11 is a line CCD camera in which one pixel unit is arranged in a line so that the line-shaped imaging range is perpendicular to the flow direction of the tablet 1 on the substantially normal line of the surface to be inspected of the tablet 1. Each time the tablet 1 (PTP film 43) is transferred by a predetermined amount by the rolls, it can be imaged in a line. Here, one pixel unit means one pixel in the case of a black and white camera. For example, in the case of a color CCD camera having red, green, and blue light receiving elements, one pixel of each neighboring color is combined. Three pixels are used as one pixel unit. Here, the relationship between the CCD camera 11 and the illuminating device 12 will be described. As shown in FIGS. 3 and 4, the CCD camera 11 and the illuminating device 12 have the PTP film 43 after the sealing film 42 is adhered. It is arranged toward the tablet 1 on the pocket portion 44 side. The line light 13 emitted from the illumination device 12 illuminates the tablet 1 through the container film 41, and the CCD camera 11 performs one-dimensional imaging of the light reflected from the tablet 1 in the width direction of the PTP film 43.
[0047]
The illumination device 12 is arranged so that the tablet 1 can be illuminated without illuminating the background object (here, the sealing film 42) around the tablet 1 within the imaging range of the CCD camera 11. Yes. 3 and FIG. 4, only one illumination device 12 is shown, but actually, as shown in FIG. Four in total are arranged at a position of 60 degrees and a position of approximately 30 degrees. Each illuminating device 12 has a line shape and irradiates line light 13 to the imaging range of the CCD camera 11 on the tablet 1.
[0048]
The line light 13 emitted from the light source is substantially parallel light on a plane orthogonal to the line-shaped light source, and is diffused light on a plane parallel to the line-shaped light source (see FIG. 6).
[0049]
The illuminating device 12 is provided with a light shielding plate 9 as a light shielding means for shielding the lower end of the line light 13 to restrict a part of the irradiation. The light-shielding plate 9 is provided so as to be movable in the direction of the arrow in FIG. 2 and can be adjusted so that the line light 13 does not irradiate the sealing film 42 in the imaging range by appropriately moving these. More specifically, as shown in FIGS. 2 and 7, when the tablet 1 is within the imaging range, the surface of the tablet 1 is irradiated with line light 13 from the four illumination devices 12. On the other hand, when the tablet 1 is out of the imaging range, as shown in FIG. 8, the line light 13 is not irradiated onto the region including the imaging range on the sealing film 42 (between DZ in FIG. 8). Therefore, when the tablet 1 is within the imaging range, the illumination device 12 illuminates the surface to be inspected of the tablet 1 and diffusely reflected light from the illumination device 12 reaches the CCD camera 11 so that the surface of the tablet 1 is brightly imaged. Is done. On the other hand, when the tablet 1 is not within the imaging range, the illumination device 12 does not illuminate anything within the imaging range, so the sealing film 42 is imaged darkly.
[0050]
The light shielding plate 9 is preferably provided as close as possible to the imaging range of the tablet 1 in order to reduce bleeding due to the disturbance of parallelism of the line light 13. However, since the space where the light shielding plate 9 is provided becomes smaller as it approaches the tablet 1, in the present embodiment, it is provided so as to be inserted with a predetermined angle from the lighting device 12 toward the tablet 1. Further, the light shielding means is not limited to a so-called plate shape, and may be a block shape or a rod shape as long as it can block the light that irradiates the sealing sheet 42.
[0051]
Next, the electrical configuration of the appearance inspection apparatus will be described. As shown in FIG. 5, the image processing apparatus 10 includes an A / D converter 3, a shading correction unit 14, a first binarization unit 15, a second binarization unit 28, a first image memory 17, The second image memory 29, the third image memory 16, a CPU and input / output interface 20, a determination memory 22, an appearance inspection result and statistical data memory 24, a camera timing control means 26, and the like are included.
[0052]
The A / D converter 3 converts the one-dimensional image data captured by the CCD camera 11 from an analog signal to a digital signal. The A / D converted one-dimensional image data is subjected to shading correction by the shading correction means 14 in accordance with the data of the shading correction table 18, and then sequentially stored in the third image memory 16, and the two-dimensional grayscale image of the PTP film 43 is stored. Data is formed. The shading correction is technically limited to illuminate the entire width of the container film 41 uniformly (evenly) with the line light 13 of the illuminating device 12. This is performed to correct variations in brightness of video data caused by the above.
[0053]
At the same time, the corrected data is binarized by the first binarizing means 15 with the first threshold value δ1, and then sequentially stored in the first image memory 17. Thereby, the first two-dimensional binarized image data of the PTP film 43 is formed. The first threshold value δ1 is for discriminating the tablet 1. For example, when the tablet 1 is white, a value brighter than the sealing film 42 serving as the background is selected.
[0054]
Similarly, the corrected data is binarized by the second binarizing means 28 with the second threshold value δ2, and then sequentially stored in the second image memory 29, whereby the second data of the PTP film 43 is stored. Two two-dimensional binarized image data are formed. The second threshold value δ2 is for discriminating foreign matter or cracks on the tablet 1, and a relatively dark value is selected.
[0055]
The CPU and the input / output interface 20 execute various image processing programs and other programs while using the stored contents of the determination memory 22 and the like, and send control signals to the PTP packaging machine 30 or from the PTP packaging machine 30. This is for receiving various signals such as operation signals. Thereby, for example, the defective sheet discharge mechanism of the PTP packaging machine 30 can be controlled. The CPU and the input / output interface 20 also have a function of sending display data to the monitor 25. With such a function, two-dimensional binary or shaded image data, appearance inspection results, and the like can be displayed on the monitor 25.
[0056]
The appearance inspection result and statistical data memory 24 stores data such as coordinates regarding connected components, appearance inspection result data, and statistical data obtained by probabilistically processing the appearance inspection result data. These appearance inspection result data and statistical data can be displayed on the monitor 25 under the control of the CPU and the input / output interface 20. In addition, the CPU and the input / output interface 20 can send a control signal to the PTP packaging machine 30 based on these appearance inspection result data and statistical data. The input means 27 is for inputting settings such as a reference value for pass / fail judgment stored in the judgment memory 22.
[0057]
The camera timing control means 26 controls the timing at which the one-dimensional image data captured by the CCD camera 11 is taken into the A / D converter 3. Such timing is controlled based on a signal from an encoder (not shown) provided in the PTP packaging machine 30, and imaging of the CCD camera 11 is performed every time a predetermined amount of the container film 41 is fed.
[0058]
Next, the procedure of tablet appearance inspection will be described with reference to FIG. That is, FIG. 1 is a flowchart showing an “inspection determination routine” executed by the image processing apparatus 10 (mainly the CPU). First, in step S101, the image processing apparatus 10 stores the first two-dimensional binarized image data stored in the first image memory and the second two-dimensional binarized image stored in the second image memory. Perform chunk processing on data. As the block processing, there are processing for specifying each connected component for 0 (dark) and 1 (light) of the binarized data, and labeling processing for labeling each connected component. Here, the area occupied by each connected component specified is represented by the number of dots corresponding to the pixel of the CCD camera 11.
[0059]
Next, in step S <b> 102, the image processing apparatus 10 specifies a connected component corresponding to the tablet 1 from 1 (bright) connected components obtained from the first two-dimensional binarized image data. The connected component corresponding to the tablet 1 can be easily determined by a determination method such as a connected component including predetermined coordinates, a connected component having a predetermined shape, or a connected component having a predetermined area. Can be identified.
[0060]
If the connected component corresponding to the tablet 1 is specified, the region of the connected component may be set as the tablet region. Depending on the shape of the tablet 1, the edge may be darkened and may be determined to be smaller than the actual size. The region of the connected component corresponding to may be enlarged to a predetermined size to form a tablet region.
[0061]
Next, in step S103, the image processing apparatus 10 calculates the total area Sdx of the foreign matters in the tablet region. That is, among the 0 (dark) connected components obtained from the second two-dimensional binarized image data, the components included in or connected to the coordinates of the tablet region specified in step S102 are extracted, and the sum of the areas, The total area Sdx of the foreign matter is obtained.
[0062]
Next, in step S104, the total area Sdx of the foreign matter is compared with a predetermined determination reference value Spx. When the total area Sdx of the foreign matter is smaller than the determination reference value Spx, the process proceeds to step S105. On the other hand, if the total area Sdx of the foreign matter is greater than or equal to the determination reference value Spx, the process proceeds to step S108, where a defect is determined in step S108, and the subsequent processing is temporarily ended.
[0063]
In step S105, the image processing apparatus 10 calculates the maximum area Sdm of the foreign matter in the tablet region. That is, among the 0 (dark) connected components obtained from the second two-dimensional binarized image data, the one having the largest area among the components included in or linked to the coordinates of the tablet region specified in step S102. Extraction is performed and the area is set as the maximum area Sdm.
[0064]
In step S106, the image processing apparatus 10 compares the maximum foreign matter area Sdm with a predetermined determination reference value Spm. If the maximum area Sdm of the foreign matter is smaller than the determination reference value Sdm, the non-defective product is determined in step S107 and the subsequent processing is temporarily ended. On the other hand, when the total area Sdm of the foreign matter is equal to or larger than the determination reference value Spm, the defect is determined in step S108.
[0065]
The processing from step S101 to step S108 is executed for each tablet 1 on the PTP film 43, and includes one tablet 1 that is determined to be defective on the same sheet when it is cut into a PTP sheet later. The sheet is judged to be defective and discharged.
[0066]
As described in detail above, according to the present embodiment, the illumination device 12 can illuminate the tablet 1 in the imaging range without illuminating the sealing film 42 in the imaging range. . For this reason, sufficient reflected light reaches the CCD camera 11 from the surface to be inspected of the illuminated tablet 1, but there is no reflection from the unsealed sealing film 42, and the difference in luminance between the tablet 1 and the sealing film 42. Is clear. Therefore, the outline of the tablet 1 can be determined accurately and accurately, and the presence or absence of cracks and chips can be inspected with high accuracy. In addition, since the region of the tablet 1 is clarified, it is possible to improve the accuracy of the inspection related to the foreign matter on the tablet 1. As a result, it is possible to accurately eliminate the PTP sheet including the tablet 1 in which a defect is found during packaging.
[0067]
In particular, in the present embodiment, the light shielding plate 9 is provided corresponding to the illumination device 12, thereby shielding the light that illuminates the sealing film 42 within the imaging range. For this reason, while the said effect is show | played reliably, the setting of the illumination state according to the tablet 1 at that time can be easily performed by adjusting the position of the light shielding board 9 suitably.
[0068]
The imaging range of the CCD camera 11 is a line having a predetermined width, and the light irradiated by the illumination device 12 is a line light 13 having a predetermined width, and the line light 13 is It is parallel to the line-shaped imaging range. For this reason, the said effect can be made still easier.
[0069]
In addition, you may implement as follows, for example, without being limited to the content of description of embodiment mentioned above.
[0070]
(A) In the said embodiment, the light source of the illuminating device 12 was made into line shape, and the line light 13 irradiated from the light source was made to become substantially parallel light in the plane orthogonal to a line-shaped light source. On the other hand, the light source does not necessarily have a line shape. Further, the light emitted from the light source does not necessarily have to be parallel light in a strict sense. That is, as shown in FIG. 9, even if the light 13B emitted from the light source of the illuminating device 12B is diffused light, the light width in the vicinity of the light source is sufficiently large relative to the distance from the light source to the part to be inspected. If it is small (it is included in the category of substantially parallel light), it is possible to achieve the effects described in the above embodiment.
[0071]
(B) The number of lighting devices 12 is not limited to four in the above embodiment, and may be one, two, three, or five or more. However, in order to wipe off the influence of the shape, secant, marking, etc. of the tablet 1, it is desirable to irradiate from a plurality of angles with the imaging device interposed therebetween.
[0072]
(C) In the embodiment described above, the appearance inspection apparatus for performing the appearance inspection of the tablet 1 accommodated in the pocket portion 44 of the container film 41 is embodied. However, for example, the appearance of the tablet placed on the transfer conveyor is shown. It may be embodied in an apparatus for inspecting, or may be embodied in an apparatus for inspecting the appearance of a tablet placed on a film. Alternatively, it may be embodied in an appearance inspection apparatus after being punched into a PTP sheet. Moreover, you may actualize in the external appearance inspection apparatus in the step before sticking the film 42 for sealing.
[0073]
(D) Instead of the determination based on the total area or the like described in the above embodiment, a major axis, a major axis / minor axis ratio, a round (area / perimeter), a perimeter, a circumscribed perimeter, or the like may be used.
[Brief description of the drawings]
FIG. 1 is a flowchart illustrating an “inspection determination routine” executed by an image processing apparatus according to an embodiment.
FIG. 2 is a configuration diagram schematically showing a characteristic part of an appearance inspection apparatus.
FIG. 3 is a schematic diagram showing a schematic configuration of a PTP packaging machine or the like.
FIG. 4 is a perspective view showing an appearance inspection apparatus in a PTP packaging machine.
FIG. 5 is a block diagram illustrating an electrical configuration of an image processing apparatus and the like.
FIG. 6 is a schematic plan view for explaining an arrangement relationship of lighting devices.
FIG. 7 is a schematic view for explaining the operation of the appearance inspection apparatus.
FIG. 8 is a schematic view for explaining the operation of the appearance inspection apparatus.
FIG. 9 is a configuration diagram schematically showing a characteristic part of an appearance inspection apparatus according to another embodiment.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 ... Tablet, 9 ... Light-shielding plate as light-shielding means, 10 ... Image processing apparatus, 11 ... CCD camera as imaging means, 12 ... Illuminating device as illumination means, 13 ... Line light, 30 ... PTP packaging machine, 31, 32 ... Tension roll constituting transfer means 33 ... Film feed roll constituting transfer means 36 ... Seal roll constituting transfer means, 40 ... film, 41 ... container film, 42 ... sealing film, 43 ... PTP film 44 ... Pocket part.

Claims (10)

錠剤の被検査部に光を照射して照明する照明手段と、
所定の撮像範囲を有し、前記照明手段により照明された撮像範囲内の錠剤表面を撮像し映像信号を出力する撮像手段と、
前記映像信号を処理する画像処理装置と
を有する錠剤の外観検査装置において、
前記照明手段は、撮像範囲内にある錠剤の周囲の背景物を照明する光を遮光する遮光手段を有し、前記撮像範囲内にある錠剤の周囲の背景物を照明すること無く撮像範囲内の錠剤を照明可能となっており、
少なくとも前記錠剤を移送可能な移送手段を有し、
前記撮像手段は錠剤の移送方向と直交する方向から撮像可能となっているとともに、前記撮像手段の撮像範囲が所定幅のライン状であり、
前記照明手段は前記移送方向に対し斜め方向から前記錠剤を照明可能となっているとともに、前記照明手段にて照射される光が、前記ライン状の撮像範囲と平行であり、所定の幅を持ったライン光であることを特徴とする外観検査装置。
Illuminating means for illuminating the inspected portion of the tablet with light;
An imaging unit having a predetermined imaging range and imaging a tablet surface within the imaging range illuminated by the illumination unit and outputting a video signal;
In a tablet appearance inspection apparatus having an image processing apparatus for processing the video signal,
The illumination means includes a light shielding means for shielding light that illuminates a background object around the tablet in the imaging range, and illuminates the background object around the tablet in the imaging range. The tablet can be illuminated ,
Having at least a transfer means capable of transferring the tablets;
The imaging means is capable of imaging from a direction orthogonal to the tablet transfer direction, and the imaging range of the imaging means is a line with a predetermined width,
The illuminating means can illuminate the tablet from an oblique direction with respect to the transfer direction, and light irradiated by the illuminating means is parallel to the linear imaging range and has a predetermined width. Appearance inspection apparatus characterized by being a line light .
密封用フィルムに載置された錠剤と、
前記錠剤の被検査部に光を照射して照明する照明手段と、
所定の撮像範囲を有し、前記照明手段により照明された撮像範囲内の錠剤表面を撮像し映像信号を出力する撮像手段と、
前記映像信号を処理する画像処理装置と
を有する錠剤の外観検査装置において、
前記照明手段は、撮像範囲内にある密封用フィルムを照明する光を遮光する遮光手段を有し、前記撮像範囲内の密封用フィルムを照明すること無く撮像範囲内の錠剤を照明可能となっており、
少なくとも前記錠剤を移送可能な移送手段を有し、
前記撮像手段は錠剤の移送方向と直交する方向から撮像可能となっているとともに、前記撮像手段の撮像範囲が所定幅のライン状であり、
前記照明手段は前記移送方向に対し斜め方向から前記錠剤を照明可能となっているとともに、前記照明手段にて照射される光が、前記ライン状の撮像範囲と平行であり、所定の幅を持ったライン光であることを特徴とする外観検査装置。
A tablet placed on a sealing film;
Illumination means for illuminating the tablet to be inspected with light, and
An imaging unit having a predetermined imaging range and imaging a tablet surface within the imaging range illuminated by the illumination unit and outputting a video signal;
In a tablet appearance inspection apparatus having an image processing apparatus for processing the video signal,
The illumination means includes a light shielding means for shielding light for illuminating the sealing film in the imaging range, and can illuminate the tablets in the imaging range without illuminating the sealing film in the imaging range. And
Having at least a transfer means capable of transferring the tablets;
The imaging means is capable of imaging from a direction orthogonal to the tablet transfer direction, and the imaging range of the imaging means is a line with a predetermined width,
The illuminating means can illuminate the tablet from an oblique direction with respect to the transfer direction, and light irradiated by the illuminating means is parallel to the linear imaging range and has a predetermined width. Appearance inspection apparatus characterized by being a line light .
容器フィルムと密封用フィルムとからなる包材に収められた錠剤の外観を検査する錠剤の外観検査装置において、
錠剤の被検査部に光を容器フィルム越しに照射して照明する照明手段と、
所定の撮像範囲を有し、前記照明手段により照明された撮像範囲内の錠剤表面を撮像し映像信号を出力する撮像手段と、
前記映像信号を処理する画像処理装置とを有し、
前記照明手段は、撮像範囲内にある密封用フィルムを照明する光を遮光する遮光手段を有し、前記撮像範囲内の密封用フィルムを照明すること無く撮像範囲内の錠剤を照明可能となっており、
少なくとも前記錠剤を移送可能な移送手段を有し、
前記撮像手段は錠剤の移送方向と直交する方向から撮像可能となっているとともに、前記撮像手段の撮像範囲が所定幅のライン状であり、
前記照明手段は前記移送方向に対し斜め方向から前記錠剤を照明可能となっているとともに、前記照明手段にて照射される光が、前記ライン状の撮像範囲と平行であり、所定の幅を持ったライン光であることを特徴とする外観検査装置。
In the tablet appearance inspection apparatus for inspecting the appearance of tablets contained in a packaging material consisting of a container film and a sealing film,
Illumination means for illuminating the inspected portion of the tablet with light through the container film; and
An imaging unit having a predetermined imaging range and imaging a tablet surface within the imaging range illuminated by the illumination unit and outputting a video signal;
An image processing device for processing the video signal;
The illumination means includes a light shielding means for shielding light for illuminating the sealing film in the imaging range, and can illuminate the tablets in the imaging range without illuminating the sealing film in the imaging range. And
Having at least a transfer means capable of transferring the tablets;
The imaging means is capable of imaging from a direction orthogonal to the tablet transfer direction, and the imaging range of the imaging means is a line with a predetermined width,
The illuminating means can illuminate the tablet from an oblique direction with respect to the transfer direction, and light irradiated by the illuminating means is parallel to the linear imaging range and has a predetermined width. Appearance inspection apparatus characterized by being a line light .
前記移送手段が前記錠剤を所定量移送するごとに前記撮像手段がライン状に撮像することを特徴とすることを特徴とする請求項乃至のいずれかに記載の錠剤の外観検査装置。The tablet appearance inspection apparatus according to any one of claims 1 to 3 , wherein the image pickup means picks up an image in a line every time the transfer means transfers the tablet by a predetermined amount. 前記撮像手段が撮像するライン状の撮像範囲の前記所定幅が1画素単位であることを特徴とする請求項乃至のいずれかに記載の錠剤の外観検査装置。The tablet appearance inspection apparatus according to any one of claims 1 to 4 , wherein the predetermined width of the line-shaped imaging range captured by the imaging unit is in units of one pixel. 前記照明手段はライン状の光源からライン光を照射し、ライン光は前記ライン状の光源と直交する平面においては、略平行光であることを特徴とする請求項乃至のいずれかに記載の錠剤の外観検査装置。Said illumination means irradiates the line of light from the linear light source, in the plane line light perpendicular to the linear light source, according to any one of claims 1 to 5, wherein the substantially parallel light Tablet appearance inspection device. 前記照明手段はライン状の光源からライン光を照射し、ライン光は前記ライン状の光源と平行な平面においては、拡散光であることを特徴とする請求項乃至のいずれかに記載する錠剤の外観検査装置。Said illumination means irradiates the line of light from the linear light source, a line light in a plane parallel with the line-shaped light source according to any one of claims 1 to 6, characterized in that a diffused light Tablet appearance inspection device. 前記照明手段からの光が、複数の角度から照射されるようにしたことを特徴とする請求項1乃至のいずれかに記載の錠剤の外観検査装置。The tablet appearance inspection apparatus according to any one of claims 1 to 7 , wherein light from the illumination means is irradiated from a plurality of angles. 前記照明手段を、少なくとも前記撮像手段を挟んでその両側に設けたことを特徴とする請求項に記載の錠剤の外観検査装置。9. The tablet appearance inspection apparatus according to claim 8 , wherein the illumination unit is provided on both sides of the imaging unit at least. 請求項1乃至のいずれかに記載の錠剤の外観検査装置を備えたPTP包装機。The PTP packaging machine provided with the external appearance inspection apparatus of the tablet in any one of Claims 1 thru | or 9 .
JP2000334444A 2000-11-01 2000-11-01 Tablet appearance inspection device and PTP packaging machine Expired - Fee Related JP4030716B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2000334444A JP4030716B2 (en) 2000-11-01 2000-11-01 Tablet appearance inspection device and PTP packaging machine

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2000334444A JP4030716B2 (en) 2000-11-01 2000-11-01 Tablet appearance inspection device and PTP packaging machine

Publications (2)

Publication Number Publication Date
JP2002139444A JP2002139444A (en) 2002-05-17
JP4030716B2 true JP4030716B2 (en) 2008-01-09

Family

ID=18810360

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000334444A Expired - Fee Related JP4030716B2 (en) 2000-11-01 2000-11-01 Tablet appearance inspection device and PTP packaging machine

Country Status (1)

Country Link
JP (1) JP4030716B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220067559A (en) * 2020-11-16 2022-05-25 주식회사 트윔 Apparatus for checking defect of pouch

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102004008321B3 (en) * 2004-02-20 2005-11-17 Fette Gmbh Method and device for quality control in the manufacture of tablets
DE102004026375B4 (en) * 2004-05-29 2007-03-22 Isra Glass Vision Gmbh Apparatus and method for detecting scratches
JP5200353B2 (en) * 2006-09-21 2013-06-05 凸版印刷株式会社 Periodic pattern unevenness inspection system
ITBO20060832A1 (en) * 2006-12-06 2008-06-07 I M A Ind Macchine Automatic H DETECTOR DEVICE FOR PHARMACEUTICALS CONTROL.
CN110832113B (en) * 2017-07-13 2022-08-02 日本制铁株式会社 Grain-oriented electromagnetic steel sheet
JP6595662B1 (en) * 2018-05-30 2019-10-23 Ckd株式会社 Inspection device and PTP packaging machine
JP6852021B2 (en) * 2018-07-24 2021-03-31 Ckd株式会社 Inspection equipment, PTP packaging machine and PTP sheet manufacturing method

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220067559A (en) * 2020-11-16 2022-05-25 주식회사 트윔 Apparatus for checking defect of pouch
KR102558406B1 (en) * 2020-11-16 2023-07-25 주식회사 트윔 Apparatus for checking defect of pouch

Also Published As

Publication number Publication date
JP2002139444A (en) 2002-05-17

Similar Documents

Publication Publication Date Title
JP5747150B2 (en) Tablet inspection device and tablet inspection method
JP4523474B2 (en) Defect inspection device and PTP packaging machine
JPH06138056A (en) Method for inspecting foreign matter on solid body
JP3640247B2 (en) Tablet appearance inspection device and PTP packaging machine
JP4647643B2 (en) Defect inspection device and PTP packaging machine
JP4030716B2 (en) Tablet appearance inspection device and PTP packaging machine
JP2006133052A (en) Foreign matter inspection method and device
JP4048848B2 (en) Foreign object detection device in container and foreign object detection method in container
JP2003215047A (en) Visual inspection apparatus and ptp packaging machine equipped with the same
JP3929647B2 (en) Tablet appearance inspection device and PTP packaging machine
JP2010091530A (en) Method and apparatus for inspecting foreign substance
JP3549752B2 (en) PTP sheet appearance inspection device and PTP packaging machine
JP4034033B2 (en) Tablet appearance inspection device and PTP packaging machine
JP4580122B2 (en) Detecting foreign matter in liquid
JP4173257B2 (en) Sheet visual inspection device and PTP packaging machine
JP5679564B2 (en) Surface foreign matter inspection device
JP7041583B2 (en) Package inspection method and package inspection device
JP3761313B2 (en) Tablet appearance inspection method, tablet appearance inspection device and blister sheet packaging machine
JP2000266514A (en) Method and device for inspecting metallic sheet
JP3461136B2 (en) Tablet visual inspection device and PTP packaging machine
JPH11118721A (en) Method and device for inspecting appearance of tablet
JP4201143B2 (en) Appearance inspection device and PTP packaging machine equipped with appearance inspection device
JP4034222B2 (en) Appearance inspection apparatus for PTP sheet packed with tablets and PTP packaging machine
JP2006084289A (en) Visual inspection device and ptp packaging machine
JP2001296251A (en) Apparatus and method for inspecting foreign matter on liquid surface

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050114

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070514

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070605

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070702

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20071016

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20071017

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101026

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101026

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111026

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111026

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121026

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees