JPH10500770A - 穀物の自動評価方法および装置 - Google Patents

穀物の自動評価方法および装置

Info

Publication number
JPH10500770A
JPH10500770A JP7523985A JP52398595A JPH10500770A JP H10500770 A JPH10500770 A JP H10500770A JP 7523985 A JP7523985 A JP 7523985A JP 52398595 A JP52398595 A JP 52398595A JP H10500770 A JPH10500770 A JP H10500770A
Authority
JP
Japan
Prior art keywords
sample
determining
grain particles
color
grain
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP7523985A
Other languages
English (en)
Other versions
JP3769012B2 (ja
Inventor
リッカルド オーステ、
ペーター エゲルベルグ、
カールステン ペーターソン、
エイボー スベンソン、
オーレ モンソン、
Original Assignee
アグロビジオン・エービー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by アグロビジオン・エービー filed Critical アグロビジオン・エービー
Publication of JPH10500770A publication Critical patent/JPH10500770A/ja
Application granted granted Critical
Publication of JP3769012B2 publication Critical patent/JP3769012B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N33/00Investigating or analysing materials by specific methods not covered by groups G01N1/00 - G01N31/00
    • G01N33/02Food
    • G01N33/10Starch-containing substances, e.g. dough
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61PSPECIFIC THERAPEUTIC ACTIVITY OF CHEMICAL COMPOUNDS OR MEDICINAL PREPARATIONS
    • A61P19/00Drugs for skeletal disorders
    • A61P19/08Drugs for skeletal disorders for bone diseases, e.g. rachitism, Paget's disease
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61PSPECIFIC THERAPEUTIC ACTIVITY OF CHEMICAL COMPOUNDS OR MEDICINAL PREPARATIONS
    • A61P19/00Drugs for skeletal disorders
    • A61P19/08Drugs for skeletal disorders for bone diseases, e.g. rachitism, Paget's disease
    • A61P19/10Drugs for skeletal disorders for bone diseases, e.g. rachitism, Paget's disease for osteoporosis
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/85Investigating moving fluids or granular solids

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Immunology (AREA)
  • General Physics & Mathematics (AREA)
  • Medicinal Chemistry (AREA)
  • Pathology (AREA)
  • Biochemistry (AREA)
  • Analytical Chemistry (AREA)
  • Physics & Mathematics (AREA)
  • Food Science & Technology (AREA)
  • Orthopedic Medicine & Surgery (AREA)
  • Rheumatology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • General Chemical & Material Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Organic Chemistry (AREA)
  • Pharmacology & Pharmacy (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Chemical Kinetics & Catalysis (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Sorting Of Articles (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)

Abstract

(57)【要約】 穀粉生産量、プロテイン含有量、膨隆密度が、穀物粒子のイメージ、少なくとも、1つのカラーのパラメーターおよび/または少なくとも1つの幾何学形状のパラメーターが穀物粒子について決定され、前記カラーのパラメーターおよび/または幾何学形状のパラメーターによって、ニューラルネットワークへの入力信号がもたらされる。もし、ニューラルネットワークが適切な態様で学習に習熟すれば、このネットワークが入力信号に基づいて、穀粉生産量、プロテイン含有量、膨隆密度を決定することができる。

Description

【発明の詳細な説明】 穀物の自動評価方法および装置 この発明は、穀粉の生産量、すなわち、複数個の穀物の粒子からプロテイン常 数および膨隆密度を決定する方法と装置に関する。 穀粉の生産量は、与えられた穀物(corn)の総重量、例えば1トンから得られる 穀粉の総量として定義されており、重量パーセントとして表現される。製粉用の 穀物を購入する場合は、委託する穀物毎に穀粉の生産量の予告が可能であり、そ れによって、最大の穀粉生産量をもたらす穀物を委託し、製粉工業に最大の利益 をもたらすことが望ましい。 今日では、穀粉の生産量は、委託した穀物から採取した試料から得られる膨隆 密度(bulk density)(容積重量 voumetric weight とも呼ばれる)を決定するこ とによって予告される。一般的には、関係する1リットルの穀物粒子の重量が単 純に測定される。膨隆密度は事実上は穀粉生産量のおよその尺度であると考えら れている。 しかしながら、1986年の Aust.J.Agric.Res.37 号第 340ページに載って いる D.R.Marshall,D.J.Mares,H.J.Moss および F.W.Elison 等による「小麦粉 製造産業における小麦の穀物粒子の形状と大きさの関係」と題された論文におい ては、膨隆密度と穀粉の生産量との相関関係が、穀物の産地と品種の両方に依存 しており、また、膨隆密度は、したがって生産量を信頼できる程度に予告する尺 度には使用できないとされている。 特許文献中には、膨隆密度以外の手段によって穀粉の生産量を決定する実験例 が挙がっている。 例えば、FR 2,416,465号には、光を穀物粒子の試料に透過して、光の透過量に よって穀粉の生産量を決定する装置が開示されている。 この装置によって得られた結果は知られていない。しかしながら、もし、穀粉 の生産量が決定されるべきものとすれば、膨隆密度の使用に代わるべき、商業的 に有用で、実際に利用可能な代替指標が存在していないことがはっきりしている 。 Marshall,Mares,Moss および Elison 各氏による上記の論文は、穀粉の生産量 における穀物粒子の形状と大きさの関係についての研究が記述されている。同論 文の第340 ページにおける議論においては、穀粉の生産量における穀物粒子の形 状と大きさの関係は、他の要因との関係に比べると小さいこと、および、これを 明確に表現することは必ずしも容易ではないことが述べられている。研究された 他のパラメーター(例えば、プロテインの含有量、硬度、しわの深さ、もみ殻の 厚さ)については、膨隆密度だけが穀粉の生産量と有意な関係にあることを示し た。 この発明の第1の目的は、このように、製粉機にかけられる以前の複数個の穀 物粒子から、穀粉の生産量を正確に決定できる方法と装置を提供することである 。 委託した穀物のプロテインの含有量を迅速にかつ容易に決定することにも大い に関係する。末端のユーザーの異なる者同士、例えば、製粉業者、モルトハウス 、飼料製造業者などは、様々なプロテインを混合することが必要になる。したが って、所望のプロテイン含有量を有する委託穀物を選択し、または所望のプロテ イン含有量が得られるように委託穀物を混合することが、もしも、穀物を取り扱 う初期の段階ですでに可能であるならば有利である。 今日では、プロテインの含有量は、通常、赤外光を用いた分析によって決定さ れる。この分析は、反射赤外光または透過赤外光について、穀物粒子または粉末 の全量について行われる。 「今日の穀物科学」(Cereal Science Today)第17巻、1972年11月発行、所載の 「小麦の等級と穀物粒子のカラーとの関係」という論文は、客観的なカラーの測 定によって小麦のカラーを特定して、小麦の級を区別することを内容とする小麦 のカラー測定に″Hunter Color Difference Meter″を用いるという研究報告を 記述している。単純な、または複雑な、そして一部の相関技術が、ハンターのカ ラー値と級要素との間の評価を行うために使用されている。その他の要素中では 、小麦の5つの異なる級におけるプロテインの含有量とハンターのカラー値の相 関係数が研究された。柔らかい白色の小麦とハンターのカラー値B(ブルーイエ ロー)との間に、0.645 という最大の相関係数が得られた。小麦のその他の級と の関係においては、ハンターの様々なカラー値との間に0.004-0.476 の範囲の相 関 係数が得られた。得られた相関係数は、小さ過ぎて、ハンターのカラー値を小麦 のプロテイン含有量を決定することは困難であるとの記述もこの論文には存在す る。 この発明の第2の目的は、製粉処理前の委託穀物のプロテイン含有量を決定す る方法と装置を提供することである。 上に述べたように、膨隆密度は、今日では、対象穀物を標準化された1リット ル容器で重量測定を行うことによって決定される。この1リットル容器は、手動 操作で充填され測定されるが、この作業は時間を要しかつ重労働である。膨隆密 度は、穀物の代価を支払うための最も普遍的な根拠となるものであるから、何回 も反復して決定しなければならず、したがって、これを自動で決定できるならば 、大きな進歩となるであろう。 「今日の穀物科学」(Cereal Science Today)誌から引用した上記論文は、さら に、膨隆密度とハンターのカラー値との相関についても研究を行っている。小麦 の級とハンターのカラー値によって決まる相関係数は、0.023-0.468 の範囲であ った。この相関係数もまた弱過ぎて、膨隆密度を正確に予告することはできない 、と同論文は別の箇所で述べている。 この発明の第3の目的は、したがって、製粉処理前の委託穀物の膨隆密度を自 動的に決定する方法と装置を提供することである。 この発明の第4の目的は、穀物粒子の試料から、単純な測定プロセスによって 膨隆密度、プロテイン含有量および穀粉生産量を決定する装置を提供することで ある。 第1の目的は、請求の範囲1および15に、それぞれその特徴を規定した穀粉 の生産量を決定する方法と装置によって達成される。第2の目的は、請求の範囲 2および16に、それぞれその特徴を規定したプロテインの含有量を決定する方 法と装置によって達成される。第3の目的は、請求の範囲3、4および17、1 8に、それぞれその特徴を規定した膨隆密度を自動的に決定する方法と装置によ って達成される。 穀粉の生産量と穀物粒子のカラー、幾何学的形状との間に関連が存在すること が判明している。すでに穀粉の生産量が知られている様々な委託穀物の穀物粒子 のカラーと幾何学的形状を決定し、これらの情報を、例えば、ニューラルネット ワーク(neural network)に供給することによって、ネットワークを、大きな確度 で、穀粉の生産量がまだ判明していない委託穀物の生産量を予告できるように学 習させることが可能である。 プロテインの含有量が、穀物粒子のカラー、特に、カラーの分散と関連するこ とも知られている。したがって、委託穀物のプロテイン含有量は、もし適切に訓 練することができれば、穀粉の生産量の場合と対応する態様で、例えばニューラ ルネットワークによって予告することが可能となる。 膨隆密度もまた、穀物粒子のカラー分散または幾何学的形状を決定することに よって同様にして得られる。 膨隆密度、プロテイン含有量、穀粉生産量の決定は迅速に、そしていつでも実 行することができる。それは、自動的に、しかも穀物粒子の破壊を伴うことなく 行うことができる。これらの決定は、委託穀物の荷積み、荷下ろしの間に穀物粒 子の流れから試料を採取することによって実行することが可能である。 この発明を、添付図面を参照しつつ、その実施例について説明する。 図1は、この発明の装置の1実施例であり、供給装置が長手方向断面図で、イ メージ処理装置がブロックダイアグラムで示されている。 図2は、ダイアグラムであり、実際の穀粉生産量決定機能として、この発明に よって決定された穀粉の生産量を示す。 図3A、3Bもダイアグラムであって、カラー入力信号の第1回目と第2回目 のセットによる実際のプロテイン含有量決定機能として、この発明によって決定 されたプロテインの含有量を示す。 図4A、4B、4Cは、カラー入力信号の第1回目と第2回目のセットと、幾 何学的形状に関する入力信号のセットのそれぞれによる実際の膨隆密度決定機能 として、この発明によって決定された膨隆密度を示す。 この発明の第1の実施例として示す図1の装置は、必須の構成として供給装置 1と、ビデオカメラ40と、イメージ処理装置2からなっている。供給装置1は 、、ケーシング4内に設けられた第1のベルトコンベヤー3を含み、(図示しな い)モーターによって駆動される第1のホイール5、第2のホイール6、および 、両 ホイール5、6を周回するエンドレスベルト7とを備える。このベルトは、横断 方向の溝8を有しており、この溝に、ケーシング内に貯留された穀物粒子が貯留 庫9から配置されて、前記溝が穀物粒子の試料で充填される。貯留庫9は、互い に向かって傾斜したプレート10、11からなる外に、ケーシングの壁部によっ て規定される。一方のプレート11の下端部は、ベルト7から隔たっており、ス クレーパー12がこのプレートの端部に取り付けられており、穀物粒子を溝8内 に下降案内する。 第2のベルトコンベヤー15が、第1のベルトコンベヤー3に対して垂直方向 および水平方向にオフセットして設けられる。この第2のベルトコンベヤー15 は、(図示しない)モーターによって駆動される第1のホイール16と、第2の ホイール17と、前記両ホイール16、17を周回して前記ベルト7と同じ方向 に走行する第2のエンドレスベルト18とからなる。ベルト18は、横断方向の 溝14を備えており、前記溝は、穀物粒子が溝の長手方向にに配向するように、 その幅と深さを穀物粒子の任意の大きさに合わせた間隔に調節することができる 。第1のホイール16と第2のホイール17の間に、これらとは別に、ベルト1 8と係合する第3のホイール19があり、その機能については後述する。 第2のベルトコンベヤー15の第1のホイール16は、穀物粒子が、第1のコ ンベヤー3から第2のコンベヤー15の上に落下して広がるように、第1のベル トコンベヤー3の第2のホイール6の下方に設けられている。穀物粒子をエンド レスベルト18の溝14上に通過させて、穀物粒子が単一の層を形成して、これ らが互いに実質的に重ならないようにするために、1つのカーテン23が設けら れる。第1のホイール16と第3のホイール19の間、および、ベルト18の上 部と下部との間には、バイブレーター25が設けられており、これがベルト18 の上部を垂直方向に振動させる。 歯車である第3のホイール19と隣り合ってパルス発生器が設置されている。 これは、第3のホイール19の円周部に隣接して設けられており、発光ダイオー ド32の形態をなす光エミッターとフォトセル33の形態をなす受光器とで構成 される。パルス発生器31は、コンピューター42に接続される。第3のホイー ル19がベルト18と係合して回転すると、パルス発生器31がイメージ処理装 置2内のコンピューター42に対してパルス状の信号を発する。このコンピュー ター42は、ホイール5、16、バイブレーター25、ビデオカメラ40を制御 する。第3のホイール19もまた、第3のホイール19と第2のホイール17と の間におけるベルト18の振動を緩衝する機能を果たす。 第2のホイール17と隣り合う区域におけるエンドレスベルト18の上方に、 第2のホイール17の近傍におけるベルト18のイメージが捉えられるような態 様でビデオカメラ40が設けられている。このカメラ40は、イメージ処理装置 2と接続されており、その構造と機能については以下に詳細に説明する。 差し当たり、供給装置1の機能を説明する。穀物粒子の試料は、貯留庫9から 第1のベルトコンベヤー3上に流入する。穀物粒子はベルトの上で1つの堆積体 を形成するが、ベルトが移動するとベルトがやや上向きの傾斜傾向を付与されて いることと、スクレーパー12を通過することの2つにより、ベルトの溝8内で 広がるようになる。穀物粒子が第2のホイール6に達すると、それらは落下して ベルト18の上に広がる。溝と溝の間の細長い***部の上に位置する穀物粒子は 、カーテン23によって、溝14内に流入させられる、第2のベルト18が振動 させられるので、前進しつつある穀物粒子は、溝内でベルトの幅方向の両端部に 向かって側方に移動する。したがって、穀物粒子がビデオカメラ40の下方区域 に達すると、穀物粒子はベルトの長手方向に分離されて実質的に同一方向に配向 され、ベルト上で実質的に一層をなして配置される。穀物粒子は、このように、 互いに重なり合うけれども、その重なりの程度はごく小さいものである。しかし ながら、穀物粒子は、溝14の長さ方向においては互いに密接して並ぶ。 コンピューター42は、パルス発生器から発生する予定数のパルスをカウント し終わる度に、停止信号を発して、すべての駆動モーターとバイブレーター25 を停止する。次いで、第1および第2のベルトが停止し、振動が中断する。コン ピューター42は、ベルト18上にある穀物粒子のイメージを撮影するようにビ デオカメラに信号を発する。これに伴って、コンピューターはモーターを再起動 し、停止信号が再度発せられるまで、穀物粒子の供給が、上記のとおり継続する 。カウント終了後に停止信号が発せられる前記パルスのカウント数は、ベルト上 の穀物粒子に欠落や重複を生じることなく、これらを撮影できるように選択され る。 言い換えれば、ビデオカメラの視野を通過する穀物粒子のそれぞれは、集まって 正しく1個のイメージを生じ、前記の各イメージは、複数個の穀物粒子を含んで いる。穀物粒子のイメージが、普通の可視光線で撮影される点も指摘しておかな ければならない。 ベルトを連続的に動かして、その代わりに、装置にはストロボスコープを具備 させ、このストロボスコープをベルトから穀物粒子に欠落や重複を生じることな くイメージを撮影できるようにカメラ40とともに制御することもできる。 イメージ処理装置2は、基本的に、ビデオカメラ40とユーザー端末43とに 接続されたコンピューター42からなっており、前記ユーザー端末43のディス プレイ装置に分析の結果が表示される。コンピューター42は内部には、モータ ー、バイブレーター25およびビデオカメラ40の制御プログラムに加えて、ビ デオカメラ40によってもたらされるイメージに基づいて穀粉の生産量、プロテ インの含有量および膨隆密度を決定するプログラムを組み込んでいる。これらの プログラムは、カメラ40からのビデオ信号を、穀粉生産量、プロテイン含有量 および膨隆密度の実際の決定を有効に行うニューラルネットワーク(neural netw ork)への適切な入力信号に変換する内容からなっている。 ビデオカメラ40が、ベルトのイメージの撮影を完了すると、このイメージは コンピューターに読み込まれて、いわゆるフレームグラバー(frame grabber)と 呼ばれる先行技術によってデジタル化される。発生するデジタルイメージは、例 えば、512 X 512 個の画素で構成される。これらの画素は、RGB 表示で、すなわ ち、赤色成分の強度(intensity)、緑色成分の色度および青色成分の色度で表示 される。これに代替できるものとして、他の色に関する表現も使用できる。 次のステップにおいて、プログラムは前記デジタルイメージを記憶する。この 場合は、各画素の色の強さのしきい値が利用される。画素の強さがしき値を越え ると、この画素は穀物粒子を表すものと見做されるのに対して、画素の強さが閾 値を越えない場合は、背景すなわちベルトを表すものと見做される。良好な対照 関係を得るためには、ベルト18は青色に構成するのが有利である。プログラム は、各ポイント、各ラインごとに精査を行う。プログラムによって画像が穀物粒 子であることが見出だされると、隣り合うすべての画像が精査される。穀物粒子 を表現していると考えられる隣接画像については、最初の画素と接続しているす べての画像がどちらかに決まるまで、プロセスが反復される。これに伴って、穀 物粒子を表現する接続画素の長手方向軸が決定される。もし長手方向軸の方向が 、予定の値よりも大きくイメージのY軸(垂直軸)から隔たっていれば、コヒー レントな穀物粒子の区域は、その長手方向軸がイメージのY軸と平行になるまで 回転される。 ベルト上の穀物粒子のイメージが撮影されたときは、2個またはそれ以上の数 の穀物粒子がベルトの1本の溝内で密接して並んでいるか、または、ある程度ま で重なり合っている場合が起こり得る。イメージ中で同定されたコヒーレントな 穀物粒子の区域は、このように、1粒の粒子よりも大きいものを表す。この場合 に該当するかどうかをチェックするために、1粒子を表すX方向(水平方向)の 画素の数が、コヒーレントな穀物粒子の区域内にある各Y値用に合計される。プ ログラムは、このように、X方向にある穀物粒子の画素の数に関しヒストグラム を作成する。次いで、前記ヒストグラムの包絡曲線が決定され、Y方向における 前記包絡曲線の両終点の中間に最小値があるかどうかが精査される。充分に顕著 な最小値が存在すれば、それはコヒーレントな穀物粒子の画素が実際に2つの穀 物粒子であることを意味する。もしそうであれば、プログラムは、包絡曲線をそ の最小値の点でX軸と平行にカットする。その結果、コヒーレントな穀物粒子の 画素区域のそれぞれが1つの穀物粒子として記憶される。もしも、最小値が2つ 存在する場合は、それぞれの最小値でカットが行われる。こうして2つに分離し た後、もし必要ならば、各粒子は、それらの長手方向軸がイメージのY軸と一致 するまで回転される。 その後で、表面積、長さ、幅のような異なる幾何学的なパラメーターが各穀物 粒子について決定される。さらにまた、各穀物粒子に固有の複数の画素について 、赤、緑、青に関する平均値と標準偏差値のようなカラーのパラメーターが決定 される。分析した試料中に含まれる穀物粒子数も決定される。 さらにまた、有利にも、1000個の穀物粒子1つずつの重量が決定される、すな わち、1000個の穀物粒子の合計重量が決定される。この目的で、計量器が装置と 接続されて設置される。穀物粒子はカウントされて、或る適切な態様で、例えば 、 ベルトの溝内に圧縮空気を吹き込むことによって前記計量器に供給されて重量を 測定される。もちろん、その代わりに穀物粒子の計量予定個数を変更してもよい 。上記のパラメーターの値に基づいて、赤、緑、青の値に基づいて決定されるカ ラーの強さと飽和度(saturation)のような付加的なパラメーターを各粒子につい て決定することも可能である。 パラメーターの値は次第にメモリーに記憶されていく。パラメーターの値がす べての粒子について決定されると、全分析試料に亘る平均値と標準偏差値を、決 定された各パラメーターについて計算することが好ましい。これらの平均値と標 準偏差値の様々な組み合わせが、ニューラルネットワークへの入力信号として適 切に利用される。入力信号として平均値と標準偏差値とを利用することは、ニュ ーラルネットワークに試料全体の「概観」を与え、このことが膨隆密度の決定に 重要である。例えば、粒子の大きさがバラバラであると、粒子が小さくなって膨 隆密度も別の値になる。穀粉の生産量が粒子についての大きさのバラツキ、およ び同時に他のパラメーターのバラツキによっても影響を受ける可能性があり、そ うであればこそ、より優れた結果は、ニューラルネットワークへの試料全体の諸 性質を反映する入力信号とともに得られる。 ニューラルネットワークは、多数の入力ノード、この場合は、各入力パラメー ターについての1つのノードと、この場合は、穀粉生産量、プロテイン含有量、 および、膨隆密度を示す多数の出力ノードとからなっている。入力ノードと出力 ノードの間には隠れたノードが存在する。穀粉生産量がすでに知られている既知 の穀物試料を表す入力信号をニューラルネットワークに供給することによって、 および、当該試料についてどれだけの穀粉生産量が得られているかを判断するこ とによって、ニューラルネットワークは学習を重ねることができ、穀粉4産量を 予告できるようになる。ニューラルネットワークが穀粉生産量決定の学習を完了 すると、このネットワークは、穀粉生産量が知られていない試料について穀粉生 産量を決定するために利用することができる。同様な態様で、ニューラルネット ワークは、プロテイン含有量と膨隆密度の決定を学習できるであろう。隠された ノードは、sigmoid 関数、ガウスの(Gaussian)関数すなわち高次の多項関数であ り、このノードによって、入力データを任意の(リニアー、またはノンリニアー の)関数に適応させることが可能になる。もし、穀物の級が入力データにリニア ーに依存するとすれば、このネットワークは、リニアーな適応に有効なように学 習を行うことができる。このニューラルネットワーク法は、このように、特殊な ケースをリニアーに適応させることを含んでいる。 上記の装置によって、複数個の穀物粒子からなる試料の穀粉生産量、プロテイ ン含有量、膨隆密度を迅速にかつ容易に決定することが可能である。100gの試料 すなわち約2000個の粒子からなる試料の分析に要する時間は約4 分である。 以下に、穀粉生産量、プロテイン含有量、膨隆密度がすでに判明している試料 について、この発明によって、穀粉生産量、プロテイン含有量、膨隆密度を予告 した実例を掲げる。各実例は、いずれも、100gの小麦の穀粒を含んでいた。これ らの試料は、上に説明した通りの手順で装置を通過し、それぞれの穀物粒子のイ メージが記憶された。穀物粒子のそれぞれのイメージは、それらの長手方向軸が イメージのY軸と平行になるように配向された。 各粒子について次ぎのパラメーターが測定された。Y方向の大きさが最大であ ると規定された穀物粒子の長さが、多数の画素中から決められ、Y方向と直角を なす方向の大きさが最大であると規定された穀物粒子の幅が、多数の画素中から 決められ、表面積が多数の画素中から決められ、粒子のイメージに含まれるすべ ての画素についての赤、緑、青の値が、標準化ユニット内で0.0(黒)から1.0( 最大強さ)の範囲の値に決められた。 これらの測定値によって、各粒子について下記の値も決められた。これらは、 赤、緑、青の諸値の平均値、標準偏差、カラー飽和度のと平均値と標準偏差、お よび穀物粒子のイメージに含まれる全画素の強さである。 上記のパラメーターに基づいて、ニューラルネットワークへ入力するための穀 粉生産量の決定に関する下記の入力信号決定された。 1)試料の長さの諸値についての標準偏差値。 2)試料の幅の諸値についての標準偏差値。 3)試料の表面積の諸値についての標準偏差値。 4)試料の赤色の諸平均値についての標準偏差値。 5)試料の緑色の諸平均値についての標準偏差値。 6)試料の青色の諸平均値についての標準偏差値。 7)試料のカラー飽和度の諸平均値についての標準偏差値。 8)試料のカラー強度の諸平均値についての標準偏差値。 9)試料の赤色の諸標準偏差値についての平均値。 10)試料の赤色の諸標準偏差値についての標準偏差値。 11)試料の緑色の諸標準偏差値についての平均値。 12)試料の緑色の諸標準偏差値についての標準偏差値。 13)試料の青色の諸標準偏差値についての平均値。 14)試料の青色の諸標準偏差値についての標準偏差値。 15)試料のカラー強度の諸標準偏差値についての平均値。 16)試料のカラー強度の諸標準偏差値についての標準偏差値。 17)試料重量(g)のユニット当たりの試料の諸長さの合計値。 18)試料重量(g)のユニット当たりの試料の諸幅の合計値。 19)試料重量(g)のユニット当たりの試料の諸表面積の合計値。 20)試料重量(g)のユニット当たりの試料の赤色に関する諸値の合計値。 21)試料重量(g)のユニット当たりの試料の緑色に関する諸値の合計値。 22)試料重量(g)のユニット当たりの試料の青色に関する諸値の合計値。 さらには、1000個の穀物粒子の重量の合計値(TKW)が決定される。 図2は、実際の穀粉生産量の関数としての穀粉生産量の決定結果を示しており 、実際の穀粉生産量は、製粉作業に関連して発生する粉の様々な端数重量を標準 的な方法により測定することによって決定されている。すでに知られている方法 によって測定した穀粉生産量と、この発明によって決定された穀粉生産量との相 関指数は、0.77であった。 プロテイン含有量の決定については、ニューラルネットワークへ入力するため の次ぎに示す色の入力信号のうちの第1のケースが利用された。この入力信号は 、上のNO.4〜6と1000個の穀物粒子の重量の合計値であった。 第2のケースでは、次ぎのカラーに関する入力信号が利用された。入力信号は 、上で言及した入力信号のNO.8、15、16および26)試料の色強度の平 均値の平均値、27)試料の重量(g)ユニット当たりの色強度の諸値の合計値、 そ して1000個の穀物粒子の重量の合計値が利用された。 図3A、3Bは、実際のプロテイン含有量の関数としての入力信号の様々なセ ットについてプロテイン含有量を決定した結果を示しており、実際のプロテイン 含有量は、Kjeldahlの方法によって決定された。相関指数は、第1のケースが0. 89、第2のケースが0.75であった。下記の入力信号すなわち、上に述べた入力信 号20〜22と、23)試料の赤色平均諸値の平均値、および、24)試料の緑 色平均諸値の平均値、および、25)試料の青色平均諸値の平均値が、第1のケ ースに付加された場合、相関指数は僅かだけ増加した。 膨隆密度の決定に付いては、プロテイン含有量の決定に関する第1のケースに 利用されたものと同じ色に関する入力信号、すなわち上記の入力信号4〜16と 1000個の穀物粒子の重量の合計値が利用された。 これらの入力信号による膨隆密度の決定結果が図4Aに示されている。 第2のケースにおいては、プロテイン含有量を決定するための第2のケースで 利用されたものと同じ入力信号、すなわち、入力信号8、15、16、26、2 7および1000個の穀物粒子の重量の合計値が利用された。 これらの入力信号による膨隆密度の決定結果が図4Bに示されている。 第3のケースにおいては、幾何学的形状に基づく入力信号、すなわち、入力信 号1〜3、17〜19、および試料の長さの諸値についての平均値、試料の幅の 諸値についての平均値、試料の表面積の諸値についての平均値、そして前と同じ 1000個の穀物粒子の重量の合計値が利用された。 これらの入力信号による膨隆密度の決定結果が図4Cに示されている。 膨隆密度を決定するあらゆる場合に、実際の膨隆密度は、「農業自然委員会」 (National Boad of Agriculture)の開示図面にしたがうStatmos-Lindell equipm ent N0.1400 によって決定された。実測された膨隆密度とこの発明によって決定 された膨隆密度の相関指数は、第1のケースが0.76、第2のケースが0.82、第3 のケースが0.89であった。 以上に亘って、発明の1実施例を説明したが、この実施例においては、カラー のパラメーターおよび/または幾何学的形状に関するパラメーターが、各穀物粒 子について決定されており、ニューラルネットワークに入力するための入力信号 が、試料全体の性質を反映する平均値と分散値によってもたらされている。しか しながら、プロテインの含有量を決定する場合に、各粒子についてパラメーター を決定し、これらのパラメーターを入力信号として直接ニューラルネットワーク に供給することも可能であり、このようにすれば、この場合は穀物粒子のそれぞ れについてプロテイン含有量を決定することができる。穀物粒子それぞれについ てカラーのパラメーターを記録することなく、試料全体についてカラーのパラメ ーターを決定することも可能である。例えば、穀物粒子の試料全体の1つのイメ ージについてカラーのパラメーターを決定することも可能であり、この場合は、 穀物粒子が、1粒子の末端部と隣接粒子の始端部を決定されずに、互いに密接し て並んでいる。 上には、穀粉生産量、プロテイン含有量および膨隆密度が、ニューラルネット ワークによって決定されると述べられている。しかしながら、将来は、パラメー ターと穀粉生産量、プロテイン含有量および/または膨隆密度の間の関数関係が 、明確に決定できるようになるであろう。このような場合には、ニューラルネッ トワークをルチーン化された計算と置換することができ、前記のようにして決定 された諸関数によって、穀粉生産量、プロテイン含有量および膨隆密度が計算さ れる。 上にはまた、赤、緑、青の諸値がカラーのパラメーターとして使用されること が記載されている。もちろん、HSI 表現のような他のカラー表現も利用可能であ り、このことは、例えば、カラーパラメーターという術語が広義に解されること を意味しており、これらの広義の概念には、例えば hue、色強度、色飽和度など も含まれる。 最後に、膨隆密度の決定は、穀物粒子以外の他の顆粒状産出品にも実行可能で ある点に言及しておくべきである。
───────────────────────────────────────────────────── フロントページの続き (81)指定国 EP(AT,BE,CH,DE, DK,ES,FR,GB,GR,IE,IT,LU,M C,NL,PT,SE),OA(BF,BJ,CF,CG ,CI,CM,GA,GN,ML,MR,NE,SN, TD,TG),AP(KE,MW,SD,SZ,UG), AM,AT,AU,BB,BG,BR,BY,CA,C H,CN,CZ,DE,DK,EE,ES,FI,GB ,GE,HU,JP,KE,KG,KP,KR,KZ, LK,LR,LT,LU,LV,MD,MG,MN,M W,MX,NL,NO,NZ,PL,PT,RO,RU ,SD,SE,SG,SI,SK,TJ,TM,TT, UA,UG,US,UZ,VN (72)発明者 ペーターソン、 カールステン スウェーデン国、 エス − 224 60 ルンド、 ネールマンス・ベーグ 14 (72)発明者 スベンソン、 エイボー スウェーデン国、 エス − 245 62 ヒャルプ、 ボンガベーゲン 17 (72)発明者 モンソン、 オーレ スウェーデン国、 エス − 212 32 マルモ、 ホルムボガタン 10

Claims (1)

  1. 【特許請求の範囲】 1.‐試料について、少なくとも1つのカラーのパラメーターと少なくとも1 つの幾何学的形状についてのパラメーターが決定される点、 ‐計算プロセスへの入力信号が、カラーのパラメーターと幾何学的形状に ついてのパラメーターによって作り出され、穀粉の生産量が、計算プロセスから の出力信号として得られる点、 に特徴を有する、穀物粒子の試料について穀粉生産量を決定する方法。 2.‐試料に関し前記カラーのパラメーターについて分散値が決定される点、 ‐前記分散値が、計算プロセスへの入力信号として利用され、プロテイン 含有量が、計算プロセスからの出力信号として得られる点、、 に特徴を有し、試料について少なくとも1つのカラーパラメーターを決定する 、穀物粒子の試料についてプロテインの含有量を決定する方法。 3.‐試料について少なくとも1つの幾何学的形状についてのパラメーターが 決定される点、 ‐計算プロセスへの入力信号が、幾何学的形状についてのパラメーターに よって作り出され、膨隆密度が、計算プロセスの出力信号として得られる点、 に特徴を有する、顆粒物質、特に、穀物粒子の試料について膨隆密度を決定す る方法。 4.‐試料に関し前記のカラーのパラメーターについて分散値が決定される点 、 ‐分散値が、計算プロセスへの入力信号として利用され、膨隆密度が、計 算プロセスからの出力信号として得られる点、 に特徴を有し、試料について少なくとも1つのカラーパラメーターを決定する 、顆粒物質、特に、穀物粒子の試料について膨隆密度を決定する方法。 5. 計算プロセスが、ニューラルネットワークによって実行される点に特徴 を有する、他の請求の範囲のいずれか1記載の方法。 6. 前記の1つまたはそれ以上の数のパラメーターが、穀物粒子のそれぞれ について決定される点に特徴を有する、他の請求の範囲のいずれか1記載の方法 。 7. 穀物粒子のイメージが作り出され、前記の1つまたはそれ以上の数のパ ラメーターが、イメージに基づいて決定される点に特徴を有する、他の請求の範 囲のいずれか1記載の方法。 8. 穀物粒子についてカラーのパラメーターを決定することが、穀物粒子の イメージに含まれる複数の画素について、少なくとも1つの画素成分について、 画素の値を決定することを含む点に特徴を有する、請求の範囲7記載の方法。 9. カラーのパラメーターを決定することが、前記の画素の値について平均 値および/または分散量を決定することを含む点に特徴を有する、請求の範囲8 記載の方法。 10. 穀物粒子について、幾何学的形状を決定することが、イメージに含まれ る画素数を計算することを含む点に特徴を有する、他の請求の範囲のいずれか1 記載の方法。 11. 穀物粒子について、幾何学的形状を決定することが、穀物粒子の幅およ び/または長さを決定することを含む点に特徴を有する、他の請求の範囲のいず れか1記載の方法。 12. 穀物粒子の予め決めた個数の重量が決定され、計算プロセスへの入力信 号を作り出すことに利用される点に特徴を有する、他の請求の範囲のいずれか1 記載の方法。 13. 計算プロセスへの入力信号の作り出しが、少なくとも1つのパラメータ ーに関し前記穀物粒子の試料について平均値を決定することを含む点に特徴を有 する、他の請求の範囲のいずれか1記載の方法。 14. 計算プロセスへの入力信号の作り出しが、少なくとも1つのパラメータ ーに関し前記穀物粒子の試料について分散値を決定することを含む点に特徴を有 する、請求の範囲1、35ー13のいずれか1記載の方法。 15. 穀物粒子のイメージを作り出すための装置(40)、試料について、少なく とも1つのカラーのパラメーターと少なくとも1つの幾何学的形状に関するパラ メーターを決定するためのイメージ分析手段(2)、カラーのパラメーターと幾何 学的形状に関するパラメーターとによって計算手段への入力信号を作り出す手段 、 とに特徴を有し、前記計算手段は、入力信号に基づいて穀粉の生産量を決定する ために適応される、穀物粒子の試料について穀粉生産量を決定する装置。 16. 穀物粒子のイメージを作り出すための装置(40)、試料について少なくと も1つのカラーのパラメーターを決定するためのイメージ分析手段(2)、前記カ ラーのパラメーターに関し、試料について分散値を計算することによって、計算 手段への入力信号を作り出す手段とに特徴を有し、前記計算手段は、入力信号に 基づいてプロテイン含有量を決定するために適応される、穀物粒子の試料につい てプロテインの含有量を決定する装置。 17. 穀物粒子のイメージを作り出すための装置(40)、少なくとも1つのカラ ーのパラメーターを決定するためのイメージ分析手段(2)、前記カラーのパラメ ーターに関し試料について分散値を計算することによって、計算手段への入力信 号を作り出す手段、に特徴を有し、前記計算手段は、入力信号に基づいて膨隆密 度を決定するために適応される、顆粒物質、特に、穀物粒子の試料について膨隆 密度を決定する装置。 18. 穀物粒子のイメージを作り出すための装置(40)、試料について少なくと も1つの幾何学的形状に関するパラメーターを決定するためのイメージ分析手段 (2)、幾何学的形状に関するパラメーターによって、計算手段への入力信号を作 り出すための手段に特徴を有し、前記計算手段は、入力信号に基づいて膨隆密度 を決定するために適応される、顆粒物質、特に、穀物粒子の試料について膨隆密 度を決定する装置。 19. イメージを作り出すために装置(40)を越えて穀物粒子を供給するための 供給装置(1)に特徴を有し、前記供給装置が(1)が、凹部(14)とバイブレーター(2 5)を備えるコンベヤーベルト(18)を含む、請求の範囲16、17または18記載 の装置。 20. 前記計算手段がニューラルネットワークである点に特徴を有する、請求 の範囲15ー19のいずれか1記載の装置。
JP52398595A 1994-03-17 1995-03-17 穀物の自動評価方法および装置 Expired - Fee Related JP3769012B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
SE9400919-8 1994-03-17
SE9400919A SE504769C2 (sv) 1994-03-17 1994-03-17 Sätt och anordning för automatisk bedömning av spannmål
PCT/SE1995/000268 WO1995025273A1 (en) 1994-03-17 1995-03-17 Methods and devices for automatic assessment of corn

Publications (2)

Publication Number Publication Date
JPH10500770A true JPH10500770A (ja) 1998-01-20
JP3769012B2 JP3769012B2 (ja) 2006-04-19

Family

ID=20393331

Family Applications (1)

Application Number Title Priority Date Filing Date
JP52398595A Expired - Fee Related JP3769012B2 (ja) 1994-03-17 1995-03-17 穀物の自動評価方法および装置

Country Status (9)

Country Link
US (1) US5898792A (ja)
EP (1) EP0750743B1 (ja)
JP (1) JP3769012B2 (ja)
AU (1) AU2089795A (ja)
DE (1) DE69533238T2 (ja)
DK (1) DK0750743T3 (ja)
ES (1) ES2244964T3 (ja)
SE (1) SE504769C2 (ja)
WO (1) WO1995025273A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000180369A (ja) * 1998-10-09 2000-06-30 Satake Eng Co Ltd 穀粒品位測定方法及びその装置
JP2015535084A (ja) * 2012-11-20 2015-12-07 テクノロギアン トゥトキムスケスクス ヴェーテーテー オイ 光学的試料測定装置、及びこの試料測定装置の利用方法

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU702574B2 (en) * 1995-09-28 1999-02-25 Npwp Toreks Method and system for determining the geometric dimensions of particles of a pelletized and/or granulated material
SE508076C2 (sv) * 1996-11-14 1998-08-24 Bohlin Reologi Ab Sätt och anordning för bestämning av kvaliten hos cerealier
AUPP115597A0 (en) * 1997-12-23 1998-01-29 Bureau Of Sugar Experiment Stations On-line measuring system and method
KR20000077034A (ko) * 1999-04-22 2000-12-26 사따께 사또루 입상물의 품질을 평가하기 위한 장치 및 방법
US6845326B1 (en) 1999-11-08 2005-01-18 Ndsu Research Foundation Optical sensor for analyzing a stream of an agricultural product to determine its constituents
US6624888B2 (en) * 2000-01-12 2003-09-23 North Dakota State University On-the-go sugar sensor for determining sugar content during harvesting
EP1352356B1 (en) * 2000-06-08 2009-10-14 Virco Bvba Method for predicting therapeutic agent resistance using neural networks
US7058616B1 (en) 2000-06-08 2006-06-06 Virco Bvba Method and system for predicting resistance of a disease to a therapeutic agent using a neural network
US7087395B1 (en) 2001-01-16 2006-08-08 Quest Diagnostics Investments Incorporated Vitamin D assay
EP1315219B1 (en) * 2001-06-20 2010-09-01 Dai Nippon Printing Co., Ltd. Battery packing material
GB2397423B (en) * 2001-09-17 2005-06-01 Ca Minister Agriculture & Food A method and apparatus for identifying and quantifying characteristics of seeds and other small objects
US7123750B2 (en) * 2002-01-29 2006-10-17 Pioneer Hi-Bred International, Inc. Automated plant analysis method, apparatus, and system using imaging technologies
CA2390056A1 (en) * 2002-06-07 2003-12-07 Du Pont Canada Inc. Method and system for managing commodity information in a supply chain of production
AR046430A1 (es) * 2003-10-28 2005-12-07 Cargill Inc Sistema de manipulacion de productos agricolas.
US20050097021A1 (en) * 2003-11-03 2005-05-05 Martin Behr Object analysis apparatus
US9091623B2 (en) 2009-02-16 2015-07-28 Satake Usa, Inc. System to determine product characteristics, counts, and per unit weight details
US8175327B2 (en) * 2009-02-16 2012-05-08 Satake Usa, Inc. System to determine in near real-time product density in a continuous dispensing product flow
US8682027B2 (en) * 2009-02-16 2014-03-25 Satake Usa, Inc. System to determine product density
CN101881598B (zh) * 2010-06-28 2011-10-19 北京农业智能装备技术研究中心 基于机器视觉的玉米果穗性状参数自动检测装置
US10402835B2 (en) * 2014-07-16 2019-09-03 Raytheon Company Agricultural situational awareness tool
CN109342352A (zh) * 2018-12-18 2019-02-15 龙口味美思环保科技有限公司 一种基于混合模拟退火与遗传算法的面粉质量检测方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2416465A1 (fr) * 1978-02-07 1979-08-31 Grosz Thomas Dispositif pour la mesure du rendement en farine des cereales
US4260262A (en) * 1978-11-28 1981-04-07 Neotec Corporation Grain quality analyzer
US4713781A (en) * 1985-09-19 1987-12-15 Deere & Company Grain damage analyzer
US4975863A (en) * 1988-06-16 1990-12-04 Louisiana State University And Agricultural And Mechanical College System and process for grain examination
US5321764A (en) * 1992-01-10 1994-06-14 Kansas State University Research Foundation Identification of wheat cultivars by visual imaging
SE470465B (sv) * 1992-09-07 1994-04-18 Agrovision Ab Sätt och anordning för automatisk bedömning av spannmålskärnor och andra kornformiga produkter

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000180369A (ja) * 1998-10-09 2000-06-30 Satake Eng Co Ltd 穀粒品位測定方法及びその装置
JP2015535084A (ja) * 2012-11-20 2015-12-07 テクノロギアン トゥトキムスケスクス ヴェーテーテー オイ 光学的試料測定装置、及びこの試料測定装置の利用方法

Also Published As

Publication number Publication date
EP0750743A1 (en) 1997-01-02
SE504769C2 (sv) 1997-04-21
EP0750743B1 (en) 2004-07-07
WO1995025273A1 (en) 1995-09-21
SE9400919D0 (sv) 1994-03-17
DE69533238T2 (de) 2005-08-18
JP3769012B2 (ja) 2006-04-19
DK0750743T3 (da) 2004-11-29
DE69533238D1 (de) 2004-08-12
ES2244964T3 (es) 2005-12-16
US5898792A (en) 1999-04-27
SE9400919L (sv) 1995-09-18
AU2089795A (en) 1995-10-03

Similar Documents

Publication Publication Date Title
JPH10500770A (ja) 穀物の自動評価方法および装置
EP3605064B1 (en) Raw material particle size distribution measuring device, particle size distribution measuring method, and void ratio measuring device
US5956413A (en) Method and device for automatic evaluation of cereal grains and other granular products
JP3588108B2 (ja) 穀物の穀粒及び他の粒状の製品の自動的評価のための方法及び装置
US20030063276A1 (en) Sorting grain during harvesting
NL1004209C2 (nl) Werkwijze en inrichting voor de kwaliteitsbeoordeling van zaad.
EP0402877A1 (en) Method and apparatus for photometric determination of properties of meat pieces
US9091623B2 (en) System to determine product characteristics, counts, and per unit weight details
JPH08504522A (ja) 境界ピクセル・パラメータの規則正しいシーケンスを用いた物体を識別するための方法及び装置
CN106455594A (zh) 虾加工***和方法
JPS61107139A (ja) 米粒品位測定装置
JP4402915B2 (ja) 穀粒選別装置
WO2002103329A3 (en) Apparatus and method for determining the dispersibility of a product in particulate form
JPH08117694A (ja) 青果物選果方法および装置
JP2974335B2 (ja) 穀類乾燥調製施設における穀粒仕分方法及びその装置
EP1884739A2 (de) Verfahren und vorrichtung zur bestimmung der masse von stückgut oder pulver auf einer fördereinrichtung
JP2003251282A (ja) 苺用等階級計測判定装置
JP6742011B1 (ja) アスファルト混合物の骨材供給量最適化システム及び骨材供給量最適化方法
CN208155791U (zh) 大米碎米率在线检测采集装置
JP6742010B1 (ja) アスファルト混合物の成分情報推定システム及び成分情報推定方法
Aghayeghazvini et al. Determining percentage of broken rice by using image analysis
JPH06213796A (ja) 塊状物の粒度測定方法
Hansen et al. State estimation of the performance of gravity tables using multispectral image analysis
JP3331662B2 (ja) 玄米選別装置
JPS5810649A (ja) 穀類の種類および熱度識別装置

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040706

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20041006

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050510

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20050810

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20050926

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20051110

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060104

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060203

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20060125

A72 Notification of change in name of applicant

Free format text: JAPANESE INTERMEDIATE CODE: A721

Effective date: 20060125

R154 Certificate of patent or utility model (reissue)

Free format text: JAPANESE INTERMEDIATE CODE: R154

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090210

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100210

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100210

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110210

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees