JP3757279B2 - Method and apparatus for selective harvesting of fruit vegetables - Google Patents
Method and apparatus for selective harvesting of fruit vegetables Download PDFInfo
- Publication number
- JP3757279B2 JP3757279B2 JP2002349712A JP2002349712A JP3757279B2 JP 3757279 B2 JP3757279 B2 JP 3757279B2 JP 2002349712 A JP2002349712 A JP 2002349712A JP 2002349712 A JP2002349712 A JP 2002349712A JP 3757279 B2 JP3757279 B2 JP 3757279B2
- Authority
- JP
- Japan
- Prior art keywords
- fruit
- manipulator
- harvesting
- tip
- fruits
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Landscapes
- Harvesting Machines For Specific Crops (AREA)
Description
【0001】
【発明の属する技術分野】
本発明は、ナス、キュウリ、ピーマン、イチゴなど収穫適期と収穫適期前の果実が混在する中から収穫適期の果実を選択し、収穫対象となる果実に接近し、果実部分に接触することなく果柄を切断して採果することにより、栽培施設において効率的に自動収穫する方法及び装置に関する。
【0002】
【従来の技術】
従来はナスやキュウリの収穫は手作業で行われ、収穫適期果実と適期前の果実が混在する中から、収穫適期の果実を選択して収穫している。
近年、キュウリ等の自動収穫に関し、その方法や装置が提案されている(例えば、特許文献1,特許文献2等参照)。この先行技術においては、果実部分を挟持し収穫を行うことを基本としているため、果実に損傷を与える可能性がある。また切断位置の決定はマニピュレータ先端が果実に接近した状態で行っているため、接近工数が掛かる。
【0003】
また、ナスの自動収穫に関する方法や装置も提案されている(例えば、特許文献3参照)。この先行技術においては、上記キュウリ等の自動収穫の場合と同様に、果実部を把持して摘み取る機構であり、エンドエフェクタが果実に接触する距離まで接近した状態で収穫適否の判定を行うことから収穫工数が掛かる。さらに、施設内の自然光下における移動機構と組み合わせた収穫方法は示されていない。そのため、収穫装置を栽培施設で効率利用するには課題が残されている。
【0004】
【特許文献1】
特許第3018581号公報
【特許文献2】
特開平8−56459号公報
【特許文献3】
特許第3054706号公報
【0005】
【発明が解決しようとする課題】
したがって、果菜類の自動収穫は実現されず、収穫作業は依然として手作業で行われ、長時間労働が強いられている。また、品質の低下を防ぐため早朝に収穫作業が行われ、果皮に傷つけないように丁寧に採果されている。
本発明は、上記のような問題点、課題を解決するためになされたもので、ナス等の果菜類が栽培されている施設内において、畝間を移動走行しながら、収穫適否の判定工程を低減し、収穫適期果実を損傷なく選択的に収穫する方法と装置を提供することを目的とする。
【0006】
【課題を解決するための手段】
本発明は、上記目的を達成するために、
A.マニピュレータ先端に取り付けたカメラで撮影した果菜類の全体画像を解析し、画面内にある果実の方向を計算した結果から、上下左右及び前後移動、垂直及び水平旋回が可能なマニピュレータを制御し、該マニピュレータ先端を果実方向に向け接近させた後、前記カメラにより再度撮影した画像データとマニピュレータ先端から果実までの距離データを融合させて果実の大きさ判定と果柄の位置検出を行い、採果ハサミを果柄に接近させて果柄を切断するとともに、採果ハサミの下側に取り付けた果柄挟持用下刃で果柄を把持し果実部分に接触することなく採果し、この動作を走行車両の両側の果実に対して繰り返すとともに順次移動走行することにより、栽培施設内の収穫適期果実を選択的に収穫することを特徴とする果菜類の選択収穫方法である。
【0007】
B.左右の畝の果実に先端が届くように走行車両の左右中央に設置され、上下左右及び前後移動と垂直及び水平旋回が可能なマニピュレータと、該マニピュレータ先端に取り付けたカメラと、果実までの距離を測定する距離センサと、撮影画像を解析し果実位置と果柄位置を計算する画像装置と、前記計算の結果を基に前記マニピュレータの移動位置を決定するコンピュータと、該コンピュータの計算結果に基づき、前記マニピュレータを駆動するコントローラと、前記コンピュータからのデジタル信号により開閉し果柄挟持用下刃を有する採果ハサミとを備え、前記カメラで撮影した果菜類の全体画像を前記画像装置で解析し、画面内にある果実の方向を計算した前記コンピュータの結果から、前記コントローラによって前記マニピュレータを制御して、該マニピュレータ先端を果実方向に向け接近させ、前記コンピュータは、前記カメラにより再度撮影した画像データと前記マニピュレータ先端から果実までの距離データを融合させて果実の大きさ判定と果柄の位置検出を行い、前記採果ハサミを果柄に接近させて果柄を切断するともに、前記果柄挟持用下刃で果柄を把持する信号を出力することを特徴とする果菜類の選択収穫装置である。
【0008】
【作用】
上記手段、構成により、施設内に栽培された果菜類のうち収穫適期の果実のみを自動収穫するときに、マニピュレータ先端に取り付けたカメラで一定領域内の画像を撮影し、コンピュータで解析し、検出した果実の方向にマニピュレータ先端を向け接近し、前記カメラで再度撮影した画像データと距離データを融合させて果実の大きさを推定するため、マニピュレータが果実に接触する位置まで接近する前に収穫適期果実を自動で判定できる。また、このセンシングにより果柄位置、つまり採果ハサミを挿入する位置が決定されことから、収穫作業工程を低減することができる。さらに、採果ハサミが果柄を切断した後、採果ハサミの開閉に連動して動作する果柄挟持用下刃により果実を把持したまま収穫箱に搬送するため、エンドエフェクタ部は果皮に接触することなく果実への損傷を防止できる。
また、走行車両により栽培施設内の任意の位置に移動できることから、茎葉に隠れて正面位置からでは検出できない果実に対しても、走行車両の位置を変更することにより、収穫適否判定と収穫動作が可能となり、効率的な収穫作業が実現する。
【0009】
【発明の実施の形態】
以下、ナス収穫に適応したときの本発明の一実施の形態を、図面を参照にして具体的に説明する。
本発明に係る果菜類の選択収穫装置1は、図1及び図2に示すように、走行車両2、制御部3、視覚部4、マニピュレータ部5、エンドエフェクタ部6等から構成されている。
走行車両2は、制御部3からのデジタル信号によりバッテリ等からの電源で走行車両モータ2aを駆動させ、施設内に敷設された配管パイプ7上を移動する。移動距離は走行車両ロータリエンコーダ2bで検出され、任意の位置で走行車両2を停止させることが可能である。また、走行軌道内に障害物がある場合には、リミットスイッチA2cまたはリミットスイッチB2dが作動し、走行車両2は自動で停止する。
【0010】
制御部3は、コンピュータ3aと、超音波距離センサ6aの出力値を変換するAD/DA変換ボード3bと、採果ハサミ6b及び走行車両2を制御するデジタルI/Oボード3cと、走行車両2の移動距離を検出するためのエンコーダカウンタボード3dと、からなる。コンピュータ3aは走行車両2の後方に設置され、その中にAD/DA変換ボード3b、デジタルI/Oボード3c及びエンコーダカウンタボード3dが挿入されている。
【0011】
視覚部4にはCCDカラーカメラ4aを採用し、マニピュレータ5a先端に取り付けられている。また、画像処理ボード4bを設けている。
マニピュレータ部5は、コンピュータ3aとの通信を行うマニピュレータコントローラ5bと、その通信情報を基に作動し収穫動作を行うマニピュレータ6aと、からなる。マニピュレータコントローラ5bは走行車両2の後方でコンピュータ3aに隣接して設置しているが、コンピュータ3aやマニピュレータコントローラ5bをマニピュレータ5aの下部に収納させる構造としても良い。マニピュレータ5aは両側の果実を収穫できるように走行車両2の左右方向の中央に設置している。
【0012】
エンドエフェクタ部6は、図3にも示すように、コンピュータ3aからの信号により開閉する電動開閉ハンド6cと、電動開閉ハンド6cの往復動作によりナスの果柄を切断する採果ハサミ6bと、採果ハサミ6bの下側に取り付けられ、採果ハサミ6bの動作に伴い開閉し果柄を挟持する果柄挟持用下刃6dと、マニピュレータ5aが果実に接近する際に果実までの距離を測定する超音波距離センサ6aと、から構成され、マニピュレータ5a先端に取り付けられている。
【0013】
以下、上記構成の果菜類の選択収穫装置1の動作について説明する。
図4及び図5に示すように、走行車両2は、走査原点を出発して、マニピュレータ5a先端が左右両側の下段、中段、上段の位置でナス画像を走査し収穫処理を行い、両側の株の収穫が終了すると株間距離だけ移動し、次のナスの株の手前で停止する。この自動収穫動作を繰り返し、目的とする範囲の収穫が終了すると走査原点に復帰する。
【0014】
選択収穫装置1は、図6に示すように、ナスが栽培された畝間の通路中央を移動し、通路側に傾いた主茎の節から伸びる結果枝に着果した果実にマニピュレータ5a先端を到達させることができる。また、マニピュレータ5aは走行車両2の左右方向の中央に設置し、配管パイプ7を通路中央に敷設することにより、1回の走行で両側の果実の収穫が可能である。下段または中段から収穫する場合には、カメラ4aの仰角方向にある葉裏果実の検出が容易である。さらに、ナスの株の正面から果実を検出できなかった場合でも、走行機能によりカメラ4a視点を走行車両2の前後方向に移動させることができるため、果実の検出率が向上する。
【0015】
走行車両2がナスの株の正面で停止し、マニピュレータ5a先端を下段、中段または上段の初期位置に移した後の果実への接近と採果動作を図7を用いて詳しく説明する。初期位置でナス画像をCCDカラーカメラ4aにより撮影し画像処理を行う。この画像処理の方法については後述する。画像処理により図8のような検出結果を得て、画面の中心位置からの変位を基に果実方向を決定する。そして左上から右下の順で検出果実に接近し、収穫処理を行う。収穫順序はカメラ4aから近い順、つまり画面中央に近い順としても良い。マニピュレータ5a先端を最初の果実方向に旋回、前進させ、超音波距離センサ6aで果実までの距離を測定する。
【0016】
さらに後述する画像処理、マニピュレータ5a先端の旋回と前後進を繰り返すことにより果実が画面に納まる範囲でいっぱいになるまで接近する。この位置で再度画像処理を行い、果実長を基に収穫適否を判定する。イチゴなどの場合では、果実部分の赤色度合いにより収穫適否を判定する。適期果実ならば、果実基部の方向にマニピュレータ5a先端を旋回及び前進させ、図9のように採果ハサミ6bで果柄を挟む。コンピュータ3aからのデジタル信号で電動開閉ハンド6cを閉じ、採果ハサミ6bで果柄を切断する。この動作と同時に果柄挟持用下刃6dが閉じ、果柄は切断されても下刃6dにより把持させるため、果実は落下しない。ナスの果柄は強靱であるため切断のとき後方に逃げるが、図10のように採果ハサミ6bが閉じるとともに支点が前方に移動すること、マニピュレータ5a先端を前方に制御すること、により果柄の逃げを押さえ切断できる。最後に採果した果実を収穫箱8に入れる。この一連の動作を初期位置で検出した果実がなくなるまで続ける。この収穫方法では、採果から収穫箱8への搬送までの工程において果実に接触しないため果実品質の向上が見込める。特にイチゴなどでは、果実の接触による品質の低下が起こりやすいため、果柄を挟持して運搬するメリットが大きい。
【0017】
次にマニピュレータ5a先端の初期位置及び果実への接近途中での画像処理手法について図11を用いて詳しく説明する。
CCDカラーカメラ4aで撮影したカラー画像のG画像(緑成分)からB画像(青成分)を減算し、2値化することにより緑以外の部分を抽出する。G画像を2値化することにより背景以外の暗い部分を抽出し、緑以外の部分と背景以外の部分との論理積の画像を求める。得られた画像に対し、膨張、収縮及び穴埋め処理を行い、図12のような果柄を含む黒紫色の果実部分を抽出する。イチゴなどの場合、R画像(赤成分)とG画像(緑成分)の比などにより果実部分を抽出する。そして、果柄径に相当する画像上での画素数だけ水平方向に収縮、膨張処理を行うことにより、果実基部より上側の部分を除去し果実部のみを抽出する。さらに、画像上での収穫適期果実の最低果実長に相当する画素数だけ垂直方向に収縮、膨張処理を行うことにより、収穫適期前の短い果実を除去する。
【0018】
次に、マニピュレータ5a先端が初期位置の場合は、画面上に数個の収穫適期果実が存在する可能性があるので、果実数とそれぞれの面積、重心位置を計算する。一方、マニピュレータ5a先端が収穫目的果実に接近した場合は、最大面積の果実のみを対象に計算を行い、重心位置、最大長、最大幅及び果実基部位置を計算する。ナスやキュウリの場合の収穫適否の判定は、図12に示す最大長から推定した果実長を基に行うが、丸形のナス品種やピーマンなどでは果実長と果実幅を組み合わせた判定も可能である。
【0019】
本発明による果菜類の選択収穫装置1の動作試験を実施した結果について説明する。施設内の畝方向距離4.0m、高さ1.7m、両側20株の領域を対象に、画像走査試験を2回、収穫動作試験を4回行った。
初期位置で撮影した画像に対し、果実検出の画像処理を施した結果を図13に示す。自然光下の施設内においても、通路側から目視できる果実の内59.6〜83.3%(全体平均69.3%)を自動で検出でき、隣接する株の果実も25.0〜63.9%(全体平均40.9%)で検出することができた。ただし、正面及び左右方向から見ても果実が茎葉に隠れている場合には果実を検出できなかった。
【0020】
選択収穫装置1による試験結果を図14に示す。収穫成功割合は茎葉の剪定の仕方に影響され、12.8〜46.7%(全体平均29.1%)であった。収穫適期前果実の誤収穫は0.0〜8.0%(全体平均3.5%)であった。なお、収穫に成功した果実に対しては、果皮への損傷は見られなかった。切断した果柄部の径が果柄挟持用下刃6dの隙間より小さいため収穫箱8への搬送工程で落下する果実が0.0〜10.6%(全体平均7.6%)あった。収穫ミスの主な原因は、果実が茎葉に隠れることから生じる画像処理による果実検出ミスであった。
【0021】
選択収穫装置1の動作時間については、設定した領域の画像走査に必要な時間は312〜319秒であった。また、収穫処理時間は965〜3157秒で、収穫適期の果実数と収穫処理時間の関係は図15のように、果実数の増加に伴い処理時間も比例して増加した。原点復帰を含めた収穫作業能率は4.56〜14.92m/h(全体平均6.98m/h)であった。時間あたりの収穫果実数は9.1〜26.2果/h(全体平均20.5果/h)であった。なお、収穫に成功した果実の収穫処理のみに必要な動作時間は全体平均で43.2秒/果であった。
【0022】
次に果実の収穫状態については、図16に示すように果実基部から25.6〜28.6mm上側で切断され、切断径は5.9〜6.3mmであった。果柄に挟持の際の圧痕が残るが、採果及び運搬工程で果実を把持しないため果皮への損傷は見られなかった。途中落下した果実の切断位置は図17に示すように基部から16.0〜34.0mm上側とばらつき、切断面の直径は3.5〜4.0mmであった。
【0023】
【発明の効果】
以上説明したように、本発明の果菜類の収穫方法及び装置によれば、請求項1及び2記載の手段・構成を有することにより、以下の作用効果を奏することができる。
日射量の変化する自然光下の施設内で栽培された果菜類の畝間を走行しながら、両側にある果実を検出し、果実の方向と収穫適否の判定と果柄の位置検出を行い、果柄を切断、挟持し収穫箱に収納することができ、自動かつ効率的な収穫技術を提供する。
また、果柄の切断と同時に果柄を挟持するため、果実に接触することなく把持し運搬することができ、果皮に傷つけず果実の品質を低下させないという効果も発揮する。
【図面の簡単な説明】
【図1】選択収穫装置の全体図である。
【図2】選択収穫装置のブロック図である。
【図3】エンドエフェクタ部の側面図(a)、正面図(b)、底面図(c)である。
【図4】畝間両側果実の収穫方法の行程図である。
【図5】畝間走行と収穫処理のフローチャートである。
【図6】畝間走行の概念図である。
【図7】果実への接近方法と採果動作のフローチャートである。
【図8】果実検出画像処理と果実方向の推定を行う説明図である。
【図9】果柄の切断と果柄の挟持動作である。
【図10】採果ハサミの開閉図で、閉じた状態(a)、開いた状態(b)である。
【図11】果実検出のための画像処理のフローチャートである。
【図12】果実基部の検出と収穫適否の判定方法を示す説明図である。
【図13】画像処理による果実の検出結果を示すグラフである。
【図14】施設内のナス果実の収穫結果を示すグラフである。
【図15】収穫適期の果実数と収穫処理時間の関係を示すグラフである。
【図16】収穫成功果実の果柄切断位置と切断部の果柄径を示すグラフである。
【図17】途中落下果実の果柄切断位置と切断部の果柄径を示すグラフである。
【符号の説明】
1 果菜類の選択収穫装置
2 走行車両 2a 走行車両モータ 2b 走行車両ロータリエンコーダ2c リミットスイッチA 2d リミットスイッチB
3 制御部 3a コンピュータ 3b AD/DA変換ボード 3c デジタルI/Oボード 3d エンコーダカウンタボード
4 視覚部 4a CCDカラーカメラ 4b 画像処理ボード
5 マニピュレータ部 5a マニピュレータ 5b マニピュレータコントローラ
6 エンドエフェクタ部 6a 超音波距離センサ 6b 採果ハサミ 6c電動開閉ハンド 6d 果柄挟持用下刃
7 配管パイプ
8 収穫箱[0001]
BACKGROUND OF THE INVENTION
The present invention selects fruits of suitable harvest time from among a mixture of fruits such as eggplant, cucumber, peppers, and strawberries that are suitable for harvest and before harvest, and approaches the fruits to be harvested without touching the fruits. The present invention relates to a method and an apparatus for automatically harvesting efficiently in a cultivation facility by cutting and harvesting a handle.
[0002]
[Prior art]
Conventionally, eggplants and cucumbers are harvested manually, and the fruits at the best time to harvest are selected and harvested from the mixture of the fruits at the right time and the fruits before the right time.
In recent years, methods and apparatuses for automatic harvesting of cucumbers and the like have been proposed (see, for example,
[0003]
In addition, a method and apparatus relating to the automatic harvesting of eggplant has been proposed (see, for example, Patent Document 3). In this prior art, as in the case of automatic harvesting such as the cucumber, it is a mechanism for gripping and picking the fruit part, and it is determined whether or not harvesting is appropriate in a state where the end effector is close to the distance in contact with the fruit. Harvest man-hours are required. Furthermore, the harvesting method combined with the movement mechanism under natural light in the facility is not shown. Therefore, a problem remains in using the harvesting apparatus efficiently in the cultivation facility.
[0004]
[Patent Document 1]
Japanese Patent No. 3018581 [Patent Document 2]
JP-A-8-56459 [Patent Document 3]
Japanese Patent No. 3054706 gazette
[Problems to be solved by the invention]
Therefore, automatic harvesting of fruits and vegetables is not realized, and the harvesting work is still carried out manually and forced to work for a long time. In addition, harvesting is performed early in the morning to prevent quality degradation, and the fruit is carefully harvested so as not to damage the skin.
The present invention was made in order to solve the above problems and problems, and reduces the determination process of harvest suitability while traveling between furrows in a facility where fruit vegetables such as eggplant are grown. It is an object of the present invention to provide a method and apparatus for selectively harvesting fruits at an appropriate harvest time without damage.
[0006]
[Means for Solving the Problems]
In order to achieve the above object, the present invention provides
A. Analyzing the whole image of fruit and vegetables taken with a camera attached to the tip of the manipulator, and calculating the direction of the fruit in the screen, the manipulator capable of vertical and horizontal movement, vertical and horizontal turning is controlled, After approaching the manipulator tip in the direction of the fruit, the image data re-captured by the camera and the distance data from the manipulator tip to the fruit are fused to determine the size of the fruit and the position of the fruit pattern. The fruit handle is cut by bringing it close to the fruit handle, and the fruit handle is gripped by the lower blade for holding the fruit handle attached to the lower side of the fruit scissors and harvested without touching the fruit part. Selective harvesting of fruits and vegetables characterized by selectively harvesting fruits at the appropriate harvest time in the cultivation facility by repeating and sequentially moving the fruits on both sides of the vehicle It is the law.
[0007]
B. A manipulator that is installed at the center of the left and right of the traveling vehicle so that the tip reaches the fruit of the left and right cocoons, can move up and down, left and right, and back and forth, vertical and horizontal, a camera attached to the tip of the manipulator, and the distance to the fruit Based on a distance sensor to measure, an image device that analyzes a captured image and calculates a fruit position and a fruit handle position, a computer that determines a movement position of the manipulator based on the calculation result, and a calculation result of the computer, A controller for driving the manipulator, and a fruit collection scissors having a lower blade for holding a fruit handle that is opened and closed by a digital signal from the computer, and the image device analyzes an entire image of fruit vegetables taken by the camera, From the computer result of calculating the direction of the fruit in the screen, the controller manipulates the manipulator. Then, the tip of the manipulator is made to approach toward the fruit, and the computer fuses the image data taken again by the camera and the distance data from the tip of the manipulator to the fruit to determine the size of the fruit and Selective harvesting of fruit vegetables characterized by performing position detection, cutting the fruit handle by bringing the fruiting scissors closer to the fruit pattern, and outputting a signal for gripping the fruit pattern by the lower blade for holding the fruit pattern Device.
[0008]
[Action]
With the above means and configuration, when automatically harvesting fruits and vegetables cultivated in the facility, only images in a certain area are captured with a camera attached to the tip of the manipulator, and analyzed and detected by a computer. The manipulator tip is approached in the direction of the fruit, and the size of the fruit is estimated by fusing the image data and the distance data taken again with the camera. Fruits can be judged automatically. In addition, the pattern position, that is, the position to insert the harvesting scissors is determined by this sensing, so that the harvesting process can be reduced. In addition, after the fruit scissors cut the fruit handle, the end effector part contacts the fruit skin to convey the fruit to the harvesting box while holding the fruit by the lower knife for holding the fruit handle that operates in conjunction with the opening and closing of the fruit scissors. It is possible to prevent damage to the fruit without doing so.
In addition, since the traveling vehicle can move to any position in the cultivation facility, it is possible to determine the harvest suitability and the harvesting operation by changing the position of the traveling vehicle even for the fruit hidden behind the foliage and not detectable from the front position. This will enable efficient harvesting operations.
[0009]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, an embodiment of the present invention adapted to eggplant harvest will be described in detail with reference to the drawings.
As shown in FIGS. 1 and 2, the fruit and vegetables
The
[0010]
The
[0011]
The
The manipulator unit 5 includes a manipulator controller 5b that performs communication with the computer 3a, and a
[0012]
As shown in FIG. 3, the end effector section 6 includes an electric open /
[0013]
Hereinafter, the operation of the fruit and vegetables
As shown in FIGS. 4 and 5, the traveling
[0014]
As shown in FIG. 6, the
[0015]
The approach to the fruit and the fruiting operation after the traveling
[0016]
Further, by repeating image processing, which will be described later, and turning and forward / backward movement of the tip of the
[0017]
Next, the initial position of the tip of the
The B image (blue component) is subtracted from the G image (green component) of the color image photographed by the
[0018]
Next, when the tip of the
[0019]
The result of having performed the operation test of the fruit and vegetables
FIG. 13 shows the result of image processing for fruit detection performed on the image taken at the initial position. Even in a facility under natural light, 59.6 to 83.3% (total average of 69.3%) of fruits visible from the passage side can be automatically detected, and fruits of adjacent strains are also 25.0 to 63.63. Detection was possible at 9% (overall average 40.9%). However, even when viewed from the front and left and right directions, the fruit was not detected when the fruit was hidden in the foliage.
[0020]
The test result by the
[0021]
Regarding the operation time of the
[0022]
Next, about the harvest state of the fruit, as shown in FIG. 16, it cut | disconnected 25.6-28.6 mm upper side from the fruit base, and the cut diameter was 5.9-6.3 mm. Although the indentation at the time of pinching remained in the fruit handle, the fruit skin was not damaged because the fruit was not grasped in the fruit collection and transportation process. As shown in FIG. 17, the cut position of the fruit that fell midway varied from 16.0 to 34.0 mm above the base, and the diameter of the cut surface was 3.5 to 4.0 mm.
[0023]
【The invention's effect】
As described above, according to the fruit vegetable harvesting method and apparatus of the present invention, the following effects can be achieved by having the means and configuration according to
While running through the furrows of fruit and vegetables grown in a facility under natural light where the amount of solar radiation changes, the fruit on both sides is detected, the direction of the fruit and the suitability of harvest are determined, and the position of the fruit pattern is detected. Can be cut and sandwiched and stored in a harvesting box, providing automatic and efficient harvesting technology.
Further, since the fruit pattern is sandwiched simultaneously with the cutting of the fruit pattern, it can be gripped and transported without contacting the fruit, and the fruit quality is not deteriorated without damaging the fruit skin.
[Brief description of the drawings]
FIG. 1 is an overall view of a selective harvesting apparatus.
FIG. 2 is a block diagram of a selective harvesting apparatus.
FIG. 3 is a side view (a), a front view (b), and a bottom view (c) of an end effector section.
FIG. 4 is a process chart of a method for harvesting fruit on both sides of the furrow.
FIG. 5 is a flowchart of furrow running and harvesting processing.
FIG. 6 is a conceptual diagram of traveling between furrows.
FIG. 7 is a flowchart of a method for approaching a fruit and a fruit harvesting operation.
FIG. 8 is an explanatory diagram for performing fruit detection image processing and fruit direction estimation;
FIG. 9 shows a fruit pattern cutting operation and a fruit pattern clamping operation.
FIG. 10 is an open / close view of the fruit scissors, showing a closed state (a) and an open state (b).
FIG. 11 is a flowchart of image processing for fruit detection.
FIG. 12 is an explanatory diagram showing a method for detecting a fruit base and determining whether or not to harvest.
FIG. 13 is a graph showing fruit detection results by image processing.
FIG. 14 is a graph showing the result of harvesting eggplant fruits in the facility.
FIG. 15 is a graph showing the relationship between the number of fruits in a suitable harvest period and harvest processing time.
FIG. 16 is a graph showing the fruit pattern cutting position and fruit pattern diameter of the cut part of successfully harvested fruits.
FIG. 17 is a graph showing the fruit pattern cutting position and fruit pattern diameter of a cut part of a fruit falling midway.
[Explanation of symbols]
DESCRIPTION OF
DESCRIPTION OF
Claims (2)
該マニピュレータ先端に取り付けたカメラと、
果実までの距離を測定する距離センサと、
撮影画像を解析し果実位置と果柄位置を計算する画像装置と、
前記計算の結果を基に前記マニピュレータの移動位置を決定するコンピュータと、
該コンピュータの計算結果に基づき、前記マニピュレータを駆動するコントローラと、
前記コンピュータからのデジタル信号により開閉し果柄挟持用下刃を有する採果ハサミとを備え、
前記カメラで撮影した果菜類の全体画像を前記画像装置で解析し、画面内にある果実の方向を計算した前記コンピュータの結果から、前記コントローラによって前記マニピュレータを制御して、該マニピュレータ先端を果実方向に向け接近させ、
前記コンピュータは、
前記カメラにより再度撮影した画像データと前記マニピュレータ先端から果実までの距離データを融合させて果実の大きさ判定と果柄の位置検出を行い、前記採果ハサミを果柄に接近させて果柄を切断するともに、前記果柄挟持用下刃で果柄を把持する信号を出力することを特徴とする果菜類の選択収穫装置。 A manipulator installed at the center of the left and right of the traveling vehicle so that the tip reaches the fruits of the left and right cocoons, and capable of vertical and horizontal turning, vertical and horizontal turning,
A camera attached to the tip of the manipulator;
A distance sensor that measures the distance to the fruit;
An image device that analyzes the captured image and calculates the fruit position and the fruit pattern position;
A computer for determining a movement position of the manipulator based on the result of the calculation;
A controller for driving the manipulator based on a calculation result of the computer;
A fruit scissors having a lower blade for pinching a fruit handle that is opened and closed by a digital signal from the computer,
The whole image of fruit and vegetables taken by the camera is analyzed by the imaging device, and the manipulator is controlled by the controller from the result of the computer that calculates the direction of the fruit in the screen, and the tip of the manipulator is moved in the fruit direction. Close to
The computer
The image data taken again by the camera and the distance data from the tip of the manipulator to the fruit are fused to determine the size of the fruit and the position of the fruit pattern, and the fruiting scissors are brought close to the fruit pattern to remove the fruit pattern. A selective harvesting apparatus for fruit vegetables, which cuts and outputs a signal for gripping the fruit pattern by the lower blade for sandwiching the fruit pattern .
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002349712A JP3757279B2 (en) | 2002-12-02 | 2002-12-02 | Method and apparatus for selective harvesting of fruit vegetables |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002349712A JP3757279B2 (en) | 2002-12-02 | 2002-12-02 | Method and apparatus for selective harvesting of fruit vegetables |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2004180554A JP2004180554A (en) | 2004-07-02 |
JP3757279B2 true JP3757279B2 (en) | 2006-03-22 |
Family
ID=32752170
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2002349712A Expired - Lifetime JP3757279B2 (en) | 2002-12-02 | 2002-12-02 | Method and apparatus for selective harvesting of fruit vegetables |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3757279B2 (en) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102687624A (en) * | 2012-06-18 | 2012-09-26 | 中国农业大学 | Intelligent cucumber harvesting vehicle |
CN103053267A (en) * | 2013-01-22 | 2013-04-24 | 苏州博田自动化技术有限公司 | Monorail intelligent cucumber harvester |
CN103782721A (en) * | 2014-03-05 | 2014-05-14 | 山东理工大学 | Air suction comb brushing type pepper picking harvester |
CN105359726A (en) * | 2015-10-23 | 2016-03-02 | 钟山县橙浩水果种植专业合作社 | Citrus gonggan picking device and method for same |
CN106976102A (en) * | 2017-05-12 | 2017-07-25 | 陈汉元 | A kind of fruit high efficiency automatic sorting machine people |
CN108243726A (en) * | 2018-01-18 | 2018-07-06 | 连雪芳 | A kind of Chinese walnut picking robot equipment |
EP3366107A1 (en) | 2017-02-23 | 2018-08-29 | Panasonic Corporation | Harvesting equipment and harvest method |
CN108718685A (en) * | 2018-08-01 | 2018-11-02 | 榆林学院 | A kind of visualization motorized adjustment picking fruit collection device |
Families Citing this family (39)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN100352623C (en) * | 2005-04-11 | 2007-12-05 | 中国科学院自动化研究所 | Control device and method for intelligent mobile robot capable of picking up article automatically |
JP4961555B2 (en) * | 2005-12-28 | 2012-06-27 | 国立大学法人宇都宮大学 | Method for locating target part of plant, target part locating device by the method, and working robot using the device |
EP1891852B1 (en) * | 2006-08-25 | 2010-02-03 | EGA MATIC ApS | Method and collection vehicle for harvesting crops growing on stems |
JP5407020B2 (en) * | 2007-06-26 | 2014-02-05 | 井関農機株式会社 | Fruit harvesting robot |
JP5294173B2 (en) * | 2008-09-18 | 2013-09-18 | 独立行政法人農業・食品産業技術総合研究機構 | Fruit and vegetable bunch harvesting apparatus and fruit and vegetable selective harvesting method |
CN101878699B (en) * | 2010-06-21 | 2012-08-22 | 中国农业大学 | Twist-off picking paw mechanism and picking method thereof |
JP5782622B2 (en) * | 2010-11-22 | 2015-09-24 | 国立研究開発法人農業・食品産業技術総合研究機構 | Fruit pattern cutting device |
JP5818240B2 (en) * | 2010-11-22 | 2015-11-18 | 国立研究開発法人農業・食品産業技術総合研究機構 | Fruit pattern cutting device |
JP5842444B2 (en) * | 2011-08-02 | 2016-01-13 | 株式会社ニコン | Sales processing system, sales processing method and program |
KR101191100B1 (en) | 2012-04-10 | 2012-10-18 | (주)오씨티 | Harvestng end-effector for melon |
CN102714974B (en) * | 2012-06-18 | 2014-04-16 | 中国农业大学 | Cucumber harvesting device and using method thereof |
CN103252790A (en) * | 2013-05-23 | 2013-08-21 | 四川农业大学 | Control system of watermelon-picking mechanical arm |
KR101405858B1 (en) | 2013-12-04 | 2014-06-16 | 안성훈 | Robot apparatus for harvesting fruit |
PE20161167A1 (en) * | 2014-02-12 | 2016-11-27 | Federacion Nac De Cafeteros De Colombia | PORTABLE EQUIPMENT FOR SELECTIVE HARVESTING WITH IDENTIFICATION OF FRUITS BY COLOR |
AR104234A1 (en) * | 2016-04-12 | 2017-07-05 | Hernan Perez Roca Diego | AUTONOMOUS SET OF DEVICES AND METHOD FOR THE DETECTION AND IDENTIFICATION OF VEGETABLE SPECIES IN AN AGRICULTURAL CULTURE FOR THE APPLICATION OF AGROCHEMICALS IN A SELECTIVE FORM |
WO2018087546A1 (en) | 2016-11-08 | 2018-05-17 | Dogtooth Technologies Limited | A robotic fruit picking system |
KR20190122227A (en) * | 2017-03-14 | 2019-10-29 | 메토모션 엘티디. | Automatic harvester effector |
JP6939262B2 (en) * | 2017-08-29 | 2021-09-22 | 株式会社デンソー | End effector |
IT201700099467A1 (en) * | 2017-09-05 | 2019-03-05 | Cottlab Ltd | Self-propelled robotic harvester for the selective collection of agricultural crops in high quality rows |
CN107787681A (en) * | 2017-10-17 | 2018-03-13 | 江苏大学 | Robot system and implementation method of a kind of grape cluster fruit quickly without the harvesting that comes off |
JP7174217B2 (en) * | 2017-11-07 | 2022-11-17 | シブヤ精機株式会社 | Vegetable harvesting equipment |
CN108575317B (en) * | 2017-12-27 | 2021-03-30 | 杭州电子科技大学 | Fruit picking equipment |
CN108781762B (en) * | 2018-04-10 | 2021-04-13 | 河海大学文天学院 | Efficient strawberry picking robot and picking method |
CN108401684A (en) * | 2018-05-03 | 2018-08-17 | 黄冈师范学院 | A kind of intelligence fruit picking and picking method |
CN109197160B (en) * | 2018-09-12 | 2020-05-15 | 华南农业大学 | Guava picking robot and implementation method thereof |
CN109531571A (en) * | 2018-12-10 | 2019-03-29 | 浙江树人学院 | A kind of flexible mechanical arm end effector control method |
JP7103990B2 (en) * | 2019-04-11 | 2022-07-20 | 本田技研工業株式会社 | Claw switchgear |
JP7152351B2 (en) * | 2019-04-16 | 2022-10-12 | 本田技研工業株式会社 | Harvesting method and fruit and vegetable harvesting device |
CN110065074B (en) * | 2019-05-29 | 2021-02-12 | 北京禾泽方圆智能科技有限公司 | Visual servo laser positioning system and method for picking robot |
CN110226407A (en) * | 2019-06-28 | 2019-09-13 | 洛阳智能农业装备研究院有限公司 | A kind of portable pepper picking device |
CN112894753A (en) * | 2021-01-20 | 2021-06-04 | 山西农业大学 | Greenhouse melon picking robot based on multiple sensors |
CN113711774A (en) * | 2021-06-25 | 2021-11-30 | 中苏科技股份有限公司 | Bar fruit picking system and method |
JP6988018B1 (en) * | 2021-09-28 | 2022-01-05 | アルスコーポレーション株式会社 | Industrial scissors |
CN113994814A (en) * | 2021-11-25 | 2022-02-01 | 陕西科技大学 | Intelligent fruit and vegetable picking robot |
CN114731845A (en) * | 2022-02-24 | 2022-07-12 | 华南农业大学 | Receiving equipment is picked to portable navel orange |
CN114586535B (en) * | 2022-03-17 | 2023-05-16 | 许昌学院 | Device for cutting spina gleditsiae in scenic forest area |
CN114830915B (en) * | 2022-04-13 | 2023-09-26 | 华南农业大学 | Litchi vision picking robot based on laser radar navigation and implementation method thereof |
CN114874852A (en) * | 2022-05-16 | 2022-08-09 | 嘉兴源升堂健康科技有限公司 | Hangzhou white chrysanthemum essence processing and extracting device and extracting method thereof |
CN115015495B (en) * | 2022-06-02 | 2023-03-28 | 中国农业大学 | Dynamic close-range miniature intelligent sensor for quality of growing spherical fruits and vegetables |
-
2002
- 2002-12-02 JP JP2002349712A patent/JP3757279B2/en not_active Expired - Lifetime
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102687624B (en) * | 2012-06-18 | 2013-11-27 | 中国农业大学 | Intelligent cucumber harvesting vehicle |
CN102687624A (en) * | 2012-06-18 | 2012-09-26 | 中国农业大学 | Intelligent cucumber harvesting vehicle |
CN103053267B (en) * | 2013-01-22 | 2016-06-01 | 苏州博田自动化技术有限公司 | Monorail intelligent cucumber harvester |
CN103053267A (en) * | 2013-01-22 | 2013-04-24 | 苏州博田自动化技术有限公司 | Monorail intelligent cucumber harvester |
CN103782721A (en) * | 2014-03-05 | 2014-05-14 | 山东理工大学 | Air suction comb brushing type pepper picking harvester |
CN103782721B (en) * | 2014-03-05 | 2015-10-07 | 山东理工大学 | A kind of aspiration curries formula pepper picking reaping machine |
CN105359726A (en) * | 2015-10-23 | 2016-03-02 | 钟山县橙浩水果种植专业合作社 | Citrus gonggan picking device and method for same |
EP3366107A1 (en) | 2017-02-23 | 2018-08-29 | Panasonic Corporation | Harvesting equipment and harvest method |
JP2018134059A (en) * | 2017-02-23 | 2018-08-30 | パナソニック株式会社 | Harvesting device and harvesting method |
CN106976102A (en) * | 2017-05-12 | 2017-07-25 | 陈汉元 | A kind of fruit high efficiency automatic sorting machine people |
CN106976102B (en) * | 2017-05-12 | 2019-05-07 | 陈汉元 | A kind of fruit high efficiency automatic sorting machine people |
CN108243726A (en) * | 2018-01-18 | 2018-07-06 | 连雪芳 | A kind of Chinese walnut picking robot equipment |
CN108718685A (en) * | 2018-08-01 | 2018-11-02 | 榆林学院 | A kind of visualization motorized adjustment picking fruit collection device |
Also Published As
Publication number | Publication date |
---|---|
JP2004180554A (en) | 2004-07-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3757279B2 (en) | Method and apparatus for selective harvesting of fruit vegetables | |
US20200008355A1 (en) | Automated harvester effector | |
Yaguchi et al. | Development of an autonomous tomato harvesting robot with rotational plucking gripper | |
Sarig | Robotics of fruit harvesting: A state-of-the-art review | |
JP6856411B2 (en) | Fruit stalk position estimation device and fruit stalk position estimation method | |
Yamamoto et al. | Development of a stationary robotic strawberry harvester with a picking mechanism that approaches the target fruit from below | |
US20190029178A1 (en) | A robotic harvester | |
US20100292841A1 (en) | Robot with 3d grasping capability | |
JP2001095348A (en) | Plucking hard for harvesting fruit vegetable and method for harvesting fruit vegetable with the same | |
WO2010063075A1 (en) | Crop picking device and method | |
CN108496538A (en) | harvesting device and harvesting method | |
CN102654463A (en) | Watermelon quality NDT (non-destructive testing) method and device | |
CN116749173A (en) | Control method and system of fruit picking robot and fruit picking robot | |
JP7174217B2 (en) | Vegetable harvesting equipment | |
CN114600641B (en) | Strawberry picking machine based on image recognition technology and picking method thereof | |
JPH0981749A (en) | Fruit recognition device | |
JPH08112021A (en) | Fruit discrimination apparatus of harvesting robot | |
JP3396920B2 (en) | Harvesting robot imaging method | |
JP6845485B2 (en) | Onion harvesting work machine and onion harvesting work method | |
FR2760595A1 (en) | Harvesting bunches of grapes | |
JPH07246016A (en) | Harvesting hand device for fruit vegetable | |
Parsa et al. | Autonomous strawberry picking robotic system (robofruit) | |
JPH05168333A (en) | Fruit harvesting robot | |
JP3396905B2 (en) | Fruit detection system of fruit harvester | |
Kurhade et al. | Review on “Automation in Fruit Harvesting |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20050824 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050902 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20051026 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20051122 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 3757279 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
EXPY | Cancellation because of completion of term |