JP2022061911A - Crane monitoring device and crane monitoring method as well as overhead crane - Google Patents
Crane monitoring device and crane monitoring method as well as overhead crane Download PDFInfo
- Publication number
- JP2022061911A JP2022061911A JP2020170172A JP2020170172A JP2022061911A JP 2022061911 A JP2022061911 A JP 2022061911A JP 2020170172 A JP2020170172 A JP 2020170172A JP 2020170172 A JP2020170172 A JP 2020170172A JP 2022061911 A JP2022061911 A JP 2022061911A
- Authority
- JP
- Japan
- Prior art keywords
- unit
- detection
- suspended load
- point cloud
- cloud data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012806 monitoring device Methods 0.000 title claims abstract description 148
- 238000012544 monitoring process Methods 0.000 title claims abstract description 82
- 238000000034 method Methods 0.000 title claims abstract description 64
- 238000012545 processing Methods 0.000 claims abstract description 297
- 238000001514 detection method Methods 0.000 claims description 378
- 230000003028 elevating effect Effects 0.000 claims description 42
- 238000003384 imaging method Methods 0.000 description 25
- 238000003860 storage Methods 0.000 description 25
- 238000010586 diagram Methods 0.000 description 19
- 238000003825 pressing Methods 0.000 description 12
- 230000002093 peripheral effect Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 230000001174 ascending effect Effects 0.000 description 5
- 238000013527 convolutional neural network Methods 0.000 description 4
- 238000013459 approach Methods 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000003786 synthesis reaction Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 238000013136 deep learning model Methods 0.000 description 2
- 230000015654 memory Effects 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 239000000725 suspension Substances 0.000 description 1
- 238000004804 winding Methods 0.000 description 1
- 230000003936 working memory Effects 0.000 description 1
Images
Landscapes
- Control And Safety Of Cranes (AREA)
Abstract
Description
本発明は、天井クレーンに関わる対象者を監視するクレーン監視装置および該方法ならびに前記クレーン監視装置を備えた天井クレーンに関する。 The present invention relates to a crane monitoring device for monitoring a subject involved in an overhead crane, the method thereof, and an overhead crane provided with the crane monitoring device.
例えば、工場や倉庫等では、重量物を移動するために、天井クレーンが利用されることが多い。このような天井クレーンでは、吊り荷が上げ下げされる際に、吊り荷が揺れて作業者に危険が及ぶ虞がある。特に、いわゆる地切りの際に吊り荷が大きく揺れて危険が大きい。このため、このような危険を回避するシステムが提案されており、例えば、特許文献1に開示されている。
For example, in factories, warehouses, etc., overhead cranes are often used to move heavy objects. In such an overhead crane, when the suspended load is raised and lowered, the suspended load may shake and pose a danger to the operator. In particular, there is a great danger that the suspended load will shake greatly during so-called ground cutting. Therefore, a system for avoiding such a danger has been proposed, and is disclosed in, for example,
この特許文献1に開示されたクレーンの吊り荷監視システムは、クレーンにおける吊り荷を撮影可能な位置に装備されたカメラと、該カメラの画像データに基づき吊り荷周囲の危険領域に人が存在しているか否かを画像解析により判定する演算装置とを備え、吊り荷周囲の危険領域に人が存在していると判定された場合に警報信号及び非常停止信号の少なくとも何れか一方を出力するように前記演算装置が構成されている。そして、この特許文献1の[0024]段落には「更に、次のステップS3においては、背景から抽出された移動体が夫々に特有の形状パターン等から吊り荷8と人(地上作業員9)に判別され、次のステップS4にて前記吊り荷8の周囲に危険領域が設定されることになり、ここで設定された危険領域に人が存在するか否かが次のステップS5で判定されることになる。」と記載されている。
In the suspended load monitoring system of the crane disclosed in
ところで、例えば作業者等の監視の対象者の安全性を的確に判断するためには、吊り荷と対象者との間の間隔を正確に測定する必要がある。吊り荷には、様々な形状や大きさが存在するので、前記間隔を正確に測定するために、吊り荷の形状や大きさを認識する必要がある。前記特許文献1に開示されたクレーンの吊り荷監視システムでは、上記の通り、背景から抽出された移動体が、夫々に特有の形状パターン等から吊り荷8と人(地上作業員9)に判別され、前記吊り荷8の周囲に危険領域が設定されており、前記特許文献1に開示されたクレーンの吊り荷監視システムは、吊り荷の形状や大きさを認識していない。
By the way, for example, in order to accurately determine the safety of the monitored person such as a worker, it is necessary to accurately measure the distance between the suspended load and the target person. Since there are various shapes and sizes of the suspended load, it is necessary to recognize the shape and size of the suspended load in order to accurately measure the interval. In the crane suspended load monitoring system disclosed in
本発明は、上述の事情に鑑みて為された発明であり、その目的は、吊り荷の形状を認識して吊り荷と対象者との間の間隔をより正確に測定できるクレーン監視装置およびクレーン監視方法ならびに前記クレーン監視装置を備えた天井クレーンを提供することである。 The present invention has been made in view of the above circumstances, and an object thereof is a crane monitoring device and a crane capable of recognizing the shape of a suspended load and more accurately measuring the distance between the suspended load and the subject. It is to provide an overhead crane equipped with a monitoring method and the crane monitoring device.
本発明者は、種々検討した結果、上記目的は、以下の本発明により達成されることを見出した。すなわち、本発明の一態様にかかるクレーン監視装置は、ガータを移動可能に構成され、フックを昇降自在に懸吊する昇降台車を備える天井クレーンに関わる対象者を監視する装置であって、吊り荷および前記吊り荷の形状を検出する吊荷検出部と、前記対象者および前記対象者の形状を検出する対象者検出部と、前記吊荷検出部で検出した吊り荷と前記対象者検出部で検出した対象者との間の最小間隔を前記吊荷検出部で検出した吊り荷の形状および前記対象者検出部で検出した対象者の形状に基づいて求める間隔処理部と、前記間隔処理部で求めた最小間隔が所定の閾値以下または未満である場合に、警告を外部に報知する警告処理部とを備え、前記吊荷検出部は、前記フックを特定し、前記特定したフックを含む所定範囲の検出領域を設定し、前記設定した検出領域内で前記吊り荷および前記吊り荷の形状を検出する。 As a result of various studies, the present inventor has found that the above object can be achieved by the following invention. That is, the crane monitoring device according to one aspect of the present invention is a device for monitoring a target person related to an overhead crane provided with an elevating trolley that is configured to move a garter and suspends a hook so as to be able to move up and down. And the suspended load detecting unit that detects the shape of the suspended load, the target person detecting unit that detects the shape of the target person and the target person, and the suspended load detected by the suspended load detecting unit and the target person detecting unit. The interval processing unit and the interval processing unit obtain the minimum distance between the detected target person based on the shape of the suspended load detected by the suspended load detection unit and the shape of the target person detected by the target person detection unit. A warning processing unit for notifying the warning to the outside when the obtained minimum interval is equal to or less than a predetermined threshold is provided, and the suspended load detecting unit identifies the hook and has a predetermined range including the specified hook. The detection area of the above is set, and the suspended load and the shape of the suspended load are detected within the set detection area.
このようなクレーン監視装置は、フックを含む検出領域を設定して吊り荷を検出する。吊り荷は、フックに掛けられた荷物であるので、上記クレーン監視装置は、吊荷検出部の検出範囲内に吊り荷ではない荷物が在っても吊り荷をより正確に検出できる。上記クレーン監視装置は、より正確に検出できる吊り荷における形状も検出するので、吊り荷と対象者との間の最小間隔をより正確に求めることができる。よって、上記クレーン監視装置は、吊り荷の形状を認識して吊り荷と対象者との間の間隔をより正確に測定できる。 Such a crane monitoring device sets a detection area including a hook to detect a suspended load. Since the suspended load is a load hung on a hook, the crane monitoring device can more accurately detect the suspended load even if there is a non-suspended load within the detection range of the suspended load detecting unit. Since the crane monitoring device also detects the shape of the suspended load that can be detected more accurately, the minimum distance between the suspended load and the target person can be obtained more accurately. Therefore, the crane monitoring device can recognize the shape of the suspended load and measure the distance between the suspended load and the target person more accurately.
他の一態様では、上述のクレーン監視装置において、前記吊荷検出部は、フック側に検出方向を向くように前記昇降台車に配設され、前記検出方向の3次元点群データを生成する第1点群データ生成部と、前記第1点群データ生成部で生成した3次元点群データに基づいて前記吊り荷および前記吊り荷の形状を検出する第1検出処理部とを備え、前記対象者検出部は、前記フック側に検出方向を向くように前記昇降台車に配設され、前記検出方向の3次元点群データを生成する第2点群データ生成部と、前記第2点群データ生成部で生成した3次元点群データに基づいて前記対象者および前記対象者の形状を検出する第2検出処理部とを備え、前記第1点群データ生成部と前記第2点群データ生成部は、別体、または、兼用されて一体である。好ましくは、上述のクレーン監視装置において、前記第1および第2点群データ生成部は、それぞれ、LiDAR、ステレオカメラおよびTOFカメラのうちのいずれかである。 In another aspect, in the crane monitoring device described above, the suspended load detection unit is arranged on the elevating platform so as to face the detection direction toward the hook side, and generates three-dimensional point cloud data in the detection direction. The object is provided with a one-point cloud data generation unit and a first detection processing unit that detects the suspended load and the shape of the suspended load based on the three-dimensional point cloud data generated by the first point cloud data generation unit. The person detection unit is arranged on the elevating platform so as to face the detection direction toward the hook side, and is a second point cloud data generation unit that generates three-dimensional point cloud data in the detection direction, and the second point cloud data. A second detection processing unit that detects the target person and the shape of the target person based on the three-dimensional point cloud data generated by the generation unit is provided, and the first point cloud data generation unit and the second point cloud data generation unit are provided. The parts are separate or combined and integrated. Preferably, in the crane monitoring device described above, the first and second point cloud data generation units are either a LiDAR, a stereo camera, or a TOF camera, respectively.
このようなクレーン監視装置は、吊荷検出部および対象者検出部それぞれが物体表面の形状を表す3次元点群データを生成するので、3次元点群データから吊り荷や対象者を容易に検出できる。上記クレーン監視装置は、吊荷検出部および対象者検出部それぞれを、フックを昇降自在に懸吊する昇降台車に配設するので、フックを特定し易く、検出領域を設定し易い。吊荷検出部および対象者検出部は、それぞれ、吊り荷および対象者を略真上から検出することになるので、陰となる部分が低減するから、上記クレーン監視装置は、最小間隔をより正確に求めることができる。 In such a crane monitoring device, since each of the suspended load detection unit and the target person detection unit generates three-dimensional point cloud data representing the shape of the object surface, the suspended load and the target person can be easily detected from the three-dimensional point cloud data. can. In the crane monitoring device, since each of the suspended load detecting unit and the target person detecting unit is arranged on an elevating carriage that suspends the hook so as to be able to move up and down, it is easy to identify the hook and set a detection area. Since the suspended load detection unit and the target person detection unit detect the suspended load and the target person from substantially directly above, respectively, the shaded area is reduced, so that the crane monitoring device can make the minimum interval more accurate. Can be asked for.
他の一態様では、上述のクレーン監視装置において、前記吊荷検出部は、フック側に検出方向を向くように前記昇降台車に配設され、前記検出方向の3次元点群データを生成する点群データ生成部と、前記点群データ生成部で生成した3次元点群データに基づいて前記吊り荷および前記吊り荷の形状を検出する第1検出処理部とを備え、前記対象者検出部は、前記フック側に撮像方向を向くように前記昇降台車に配設され、前記撮像方向の画像を生成する撮像部と、前記撮像部で生成した画像に基づいて前記対象者および前記対象者の形状を検出する第2検出処理部とを備える。 In another aspect, in the crane monitoring device described above, the suspended load detection unit is arranged on the elevating trolley so as to face the detection direction toward the hook side, and generates three-dimensional point group data in the detection direction. The target person detection unit includes a group data generation unit and a first detection processing unit that detects the suspended load and the shape of the suspended load based on the three-dimensional point group data generated by the point group data generation unit. The shape of the subject and the subject based on the image pickup unit arranged on the elevating platform so as to face the image pickup direction toward the hook side and generating an image in the image pickup direction, and the image generated by the image pickup section. It is provided with a second detection processing unit for detecting.
点群データ生成部は、例えば検出範囲の中央領域の分解能が相対的に高くその周辺領域の分解能が相対的に低い等の、分解能に偏りが有るものもあり、例えば作業者等の対象者は、通常、吊り荷の周囲に居る。上記クレーン監視装置は、形状を検出する吊荷検出部に点群データ生成部を優先的に用い、対象者検出部に撮像部を用いることで、分解能に偏りの有る点群データ生成部であっても、検出範囲における高い分解能の領域によって吊り荷およびその形状を点群データ生成部で的確に検出する一方、吊り荷の周囲に散らばる対象者を撮像部で検出できる。 The point cloud data generation unit may have a bias in resolution, for example, the resolution in the central region of the detection range is relatively high and the resolution in the peripheral region is relatively low. , Usually around the suspended load. The crane monitoring device is a point cloud data generation unit having a bias in resolution by preferentially using a point cloud data generation unit for the suspended load detection unit for detecting the shape and using an imaging unit for the target person detection unit. However, the point cloud data generation unit can accurately detect the suspended load and its shape in the high resolution area in the detection range, while the imaging unit can detect the target person scattered around the suspended load.
他の一態様では、上述のクレーン監視装置において、前記吊荷検出部は、フック側に検出方向を向くように前記ガータの端部に配設され、前記検出方向の3次元点群データを生成する第1点群データ生成部と、前記第1点群データ生成部で生成した3次元点群データに基づいて前記吊り荷および前記吊り荷の形状を検出する第1検出処理部とを備え、前記対象者検出部は、前記フック側に検出方向を向くように前記ガータの端部に配設され、前記検出方向の3次元点群データを生成する第2点群データ生成部と、前記第2点群データ生成部で生成した3次元点群データに基づいて前記対象者および前記対象者の形状を検出する第2検出処理部とを備え、前記第1点群データ生成部と前記第2点群データ生成部は、別体、または、兼用されて一体である。好ましくは、上述のクレーン監視装置において、互いに死角をカバーする観点から、前記第1点群データ生成部は、前記ガータの両端部それぞれに配設された2個の1組の第1Aおよび第1B点群データ生成部を備え、前記第1検出処理部は、前記第1Aおよび第1B点群データ生成部それぞれで生成した各3次元点群データに基づいて前記吊り荷および前記吊り荷の形状を検出し、前記第2点群データ生成部は、前記ガータの両端部それぞれに配設された2個の1組の第2Aおよび第2B点群データ生成部を備え、前記第2検出処理部は、前記第2Aおよび第2B点群データ生成部それぞれで生成した各3次元点群データに基づいて前記対象者および前記対象者の形状を検出する。 In another aspect, in the crane monitoring device described above, the suspended load detection unit is arranged at the end of the garter so as to face the detection direction toward the hook side, and generates three-dimensional point group data in the detection direction. A first point group data generation unit and a first detection processing unit that detects the suspended load and the shape of the suspended load based on the three-dimensional point group data generated by the first point group data generation unit are provided. The target person detection unit is arranged at the end of the garter so as to face the detection direction toward the hook side, and has a second point group data generation unit that generates three-dimensional point group data in the detection direction, and the first. A second detection processing unit that detects the target person and the shape of the target person based on the three-dimensional point group data generated by the two-point group data generation unit is provided, and the first point group data generation unit and the second point group data generation unit are provided. The point group data generation unit is a separate body or is also used and integrated. Preferably, in the above-mentioned crane monitoring device, from the viewpoint of covering each other's blind spots, the first point cloud data generation unit is a set of two sets 1A and 1B arranged at both ends of the garter. The first detection processing unit includes a point cloud data generation unit, and the first detection processing unit obtains the shapes of the suspended load and the suspended load based on the three-dimensional point cloud data generated by each of the first A and first B point cloud data generation units. The second point cloud data generation unit for detection includes two sets of second A and second point cloud data generation units arranged at both ends of the garter, and the second detection processing unit includes two sets of second A and second point cloud data generation units. , The shape of the target person and the target person is detected based on each three-dimensional point cloud data generated by the second A and second B point cloud data generation units, respectively.
このようなクレーン監視装置は、吊荷検出部および対象者検出部それぞれが物体表面の形状を表す3次元点群データを生成するので、3次元点群データから吊り荷や対象者を容易に検出できる。フックは、昇降方向に直交する平面内を、走行レールに対するガータの移動およびガータに対する昇降台車の移動によって、移動する。このため、ガータの振動は、昇降台車の振動より小さいと推察される。上記クレーン監視装置は、吊荷検出部および対象者検出部それぞれをガータに配設するので、吊荷検出部および対象者検出部の各検出に与える振動の影響を昇降台車の場合より低減できる。また、作業者は、昇降台車よりガータの方がアクセス(アプローチ)し易いので、上記クレーン監視装置では、吊荷検出部および対象者検出部の保守管理がし易い。 In such a crane monitoring device, since each of the suspended load detection unit and the target person detection unit generates three-dimensional point cloud data representing the shape of the object surface, the suspended load and the target person can be easily detected from the three-dimensional point cloud data. can. The hook moves in a plane orthogonal to the elevating direction by the movement of the garter with respect to the traveling rail and the movement of the elevating carriage with respect to the garter. Therefore, it is presumed that the vibration of the garter is smaller than the vibration of the lift bogie. In the crane monitoring device, since the suspended load detection unit and the target person detection unit are respectively arranged on the garter, the influence of vibration on each detection of the suspended load detection unit and the target person detection unit can be reduced as compared with the case of the lift truck. Further, since the garter is easier for the operator to access (approach) than the elevating trolley, it is easy to maintain and manage the suspended load detection unit and the target person detection unit in the crane monitoring device.
他の一態様では、上述のクレーン監視装置において、前記吊荷検出部は、フック側に検出方向を向くように前記ガータの端部に配設され、前記検出方向の3次元点群データを生成する点群データ生成部と、前記点群データ生成部で生成した3次元点群データに基づいて前記吊り荷および前記吊り荷の形状を検出する第1検出処理部とを備え、前記対象者検出部は、前記フック側に撮像方向を向くように前記ガータの端部に配設され、前記撮像方向の画像を生成する撮像部と、前記撮像部で生成した画像に基づいて前記対象者および前記対象者の形状を検出する第2検出処理部とを備える。好ましくは、上述のクレーン監視装置において、互いに死角をカバーする観点から、前記点群データ生成部は、前記ガータの両端部それぞれに配設された2個の1組の第Aおよび第B点群データ生成部を備え、前記第1検出処理部は、前記第Aおよび第B点群データ生成部それぞれで生成した各3次元点群データに基づいて前記吊り荷および前記吊り荷の形状を検出し、前記撮像部は、前記ガータの両端部それぞれに配設された2個の1組の第Aおよび第B撮像部を備え、前記第2検出処理部は、前記第Aおよび第B撮像部それぞれで生成した各画像に基づいて前記対象者および前記対象者の形状を検出する。 In another aspect, in the crane monitoring device described above, the suspended load detection unit is arranged at the end of the garter so as to face the detection direction toward the hook side, and generates three-dimensional point group data in the detection direction. A target person detection unit is provided with a point group data generation unit and a first detection processing unit that detects the suspended load and the shape of the suspended load based on the three-dimensional point group data generated by the point group data generation unit. The unit is arranged at the end of the garter so as to face the image pickup direction toward the hook side, and the image pickup unit that generates an image in the image pickup direction, and the subject and the subject based on the image generated by the image pickup unit. It is provided with a second detection processing unit that detects the shape of the target person. Preferably, in the above-mentioned crane monitoring device, from the viewpoint of covering each other's blind spots, the point cloud data generation unit is a set of two sets of A and B point clouds arranged at both ends of the garter. The first detection processing unit includes a data generation unit, and the first detection processing unit detects the suspended load and the shape of the suspended load based on the three-dimensional point cloud data generated by each of the first A and B point cloud group data generation units. The image pickup unit includes two sets of A and B image pickup units arranged at both ends of the garter, and the second detection processing unit includes the A and B image pickup units, respectively. The shape of the target person and the target person is detected based on each image generated in.
このようなクレーン監視装置は、形状を検出する吊荷検出部に点群データ生成部を優先的に用い、対象者検出部に撮像部を用いることで、分解能に偏りの有る点群データ生成部であっても、吊り荷およびその形状を点群データ生成部で的確に検出する一方、吊り荷の周囲に散らばる対象者を撮像部で検出できる。 In such a crane monitoring device, the point cloud data generation unit is preferentially used for the suspended load detection unit for detecting the shape, and the image pickup unit is used for the target person detection unit, so that the point cloud data generation unit has a bias in resolution. Even so, the point cloud data generation unit can accurately detect the suspended load and its shape, while the imaging unit can detect the subjects scattered around the suspended load.
他の一態様では、これら上述のクレーン監視装置において、前記監視の開始および前記監視の終了を制御する開始終了制御部をさらに備える。 In another aspect, these crane monitoring devices further include a start / end control unit that controls the start of the monitoring and the end of the monitoring.
このようなクレーン監視装置は、監視の開始および終了を自動化できる。 Such a crane monitoring device can automate the start and end of monitoring.
他の一態様では、これら上述のクレーン監視装置において、前記間隔処理部で求めた最小間隔が所定の第2閾値以下または未満である場合に、前記天井クレーンの動作を停止する停止処理部をさらに備える。 In another aspect, in these above-mentioned crane monitoring devices, a stop processing unit that stops the operation of the overhead crane when the minimum interval obtained by the interval processing unit is equal to or less than a predetermined second threshold value is further provided. Be prepared.
このようなクレーン監視装置は、停止処理部をさらに備えるので、天井クレーンの動作に起因する不具合を回避できる。 Since such a crane monitoring device further includes a stop processing unit, it is possible to avoid problems caused by the operation of the overhead crane.
本発明の一態様にかかるクレーン監視方法は、ガータを移動可能に構成され、フックを昇降自在に懸吊する昇降台車を備える天井クレーンに関わる対象者を監視する方法であって、吊り荷および前記吊り荷の形状を検出する吊荷検出工程と、前記対象者および前記対象者の形状を検出する対象者検出工程と、前記吊荷検出工程で検出した吊り荷と前記対象者検出工程で検出した対象者との間の最小間隔を前記吊荷検出工程で検出した吊り荷の形状および前記対象者検出工程で検出した吊り荷の形状に基づいて求める間隔処理工程と、前記間隔処理工程で求めた最小間隔が所定の閾値以下または未満である場合に、警告を外部に報知する警告処理工程とを備え、前記吊荷検出工程は、前記フックを特定し、前記特定したフックを含む所定範囲の検出領域を設定し、前記設定した検出領域内で前記吊り荷および前記吊り荷の形状を検出する。 The crane monitoring method according to one aspect of the present invention is a method for monitoring a subject involved in an overhead crane having a liftable carriage that is configured to move a garter and suspends a hook so as to be able to move up and down. The suspended load detection step for detecting the shape of the suspended load, the target person detection step for detecting the shape of the target person and the target person, and the suspended load detected in the suspended load detection step and the target person detection step for detecting the target person. The minimum distance between the subject and the subject was determined in the interval processing step of determining the minimum distance based on the shape of the suspended load detected in the suspended load detection step and the shape of the suspended load detected in the subject detecting step, and the interval processing step. A warning processing step for notifying the warning to the outside when the minimum interval is equal to or less than a predetermined threshold is provided, and the suspended load detecting step identifies the hook and detects a predetermined range including the specified hook. A region is set, and the suspended load and the shape of the suspended load are detected within the set detection region.
このようなクレーン監視方法は、フックを含む検出領域を設定して吊り荷を検出する。吊り荷は、フックに掛けられた荷物であるので、上記クレーン監視方法は、吊り荷検出工程の検出範囲内に吊り荷ではない荷物が在っても吊り荷をより正確に検出できる。上記クレーン監視方法は、より正確に検出できる吊り荷の形状も検出するので、吊り荷と対象者との間の最小間隔をより正確に求めることができる。よって、上記クレーン監視方法は、吊り荷の形状を認識して吊り荷と対象者との間の間隔をより正確に測定できる。 In such a crane monitoring method, a detection area including a hook is set to detect a suspended load. Since the suspended load is a load hung on a hook, the crane monitoring method can more accurately detect the suspended load even if there is a non-suspended load within the detection range of the suspended load detection process. Since the crane monitoring method also detects the shape of the suspended load that can be detected more accurately, the minimum distance between the suspended load and the target person can be obtained more accurately. Therefore, the crane monitoring method can recognize the shape of the suspended load and measure the distance between the suspended load and the target person more accurately.
本発明の他の一態様にかかる天井クレーンは、これら上述のいずれかのクレーン監視装置を備える。 The overhead crane according to another aspect of the present invention includes any of the above-mentioned crane monitoring devices.
これによれば、これら上述のいずれかのクレーン監視装置を備えた天井クレーンが提供できる。このような天井クレーンは、これら上述のいずれかのクレーン監視装置を備えるので、吊り荷の形状を認識して吊り荷と対象者との間の間隔をより正確に測定できる。 According to this, it is possible to provide an overhead crane equipped with any of the above-mentioned crane monitoring devices. Since such an overhead crane is equipped with any of the above-mentioned crane monitoring devices, it is possible to recognize the shape of the suspended load and measure the distance between the suspended load and the target person more accurately.
本発明にかかるクレーン監視装置およびクレーン監視方法は、吊り荷の形状を認識して吊り荷と対象者との間の間隔をより正確に測定できる。本発明によれば、このようなクレーン監視装置を備えた天井クレーンが提供できる。 The crane monitoring device and the crane monitoring method according to the present invention can recognize the shape of the suspended load and measure the distance between the suspended load and the subject more accurately. According to the present invention, it is possible to provide an overhead crane provided with such a crane monitoring device.
以下、図面を参照して、本発明の1または複数の実施形態が説明される。しかしながら、発明の範囲は、開示された実施形態に限定されない。なお、各図において同一の符号を付した構成は、同一の構成であることを示し、適宜、その説明を省略する。本明細書において、総称する場合には添え字を省略した参照符号で示し、個別の構成を指す場合には添え字を付した参照符号で示す。 Hereinafter, one or more embodiments of the present invention will be described with reference to the drawings. However, the scope of the invention is not limited to the disclosed embodiments. It should be noted that the configurations with the same reference numerals in the respective drawings indicate the same configurations, and the description thereof will be omitted as appropriate. In the present specification, when they are generically referred to, they are indicated by reference numerals without subscripts, and when they refer to individual configurations, they are indicated by reference numerals with subscripts.
実施形態におけるクレーン監視装置は、ガータを移動可能に構成され、フックを昇降自在に懸吊する昇降台車を備える天井クレーンに関わる対象者を監視する装置である。このクレーン監視装置は、吊り荷および前記吊り荷の形状を検出する吊荷検出部と、前記対象者および前記対象者の形状を検出する対象者検出部と、前記吊荷検出部で検出した吊り荷と前記対象者検出部で検出した対象者との間の最小間隔を前記吊荷検出部で検出した吊り荷の形状および前記対象者検出部で検出した対象者の形状に基づいて求める間隔処理部と、前記間隔処理部で求めた最小間隔が所定の閾値以下または未満である場合に、警告を外部に報知する警告処理部とを備える。そして、本実施形態では、前記吊荷検出部は、前記フックを特定し、前記特定したフックを含む所定範囲の検出領域を設定し、前記設定した検出領域内で前記吊り荷および前記吊り荷の形状を検出する。以下、このクレーン監視装置を備えた天井クレーンを例に、第1ないし第4実施形態を用いて、より具体的に説明する。 The crane monitoring device according to the embodiment is a device for monitoring a target person involved in an overhead crane, which is configured to be able to move a garter and includes an elevating trolley for suspending a hook so as to be able to move up and down. This crane monitoring device includes a suspended load detecting unit that detects a suspended load and the shape of the suspended load, a target person detecting unit that detects the target person and the shape of the target person, and a suspension detected by the suspended load detecting unit. Interval processing to obtain the minimum distance between the load and the target person detected by the target person detection unit based on the shape of the suspended load detected by the suspended load detection unit and the shape of the target person detected by the target person detection unit. It is provided with a unit and a warning processing unit that notifies the warning to the outside when the minimum interval obtained by the interval processing unit is equal to or less than a predetermined threshold value. Then, in the present embodiment, the suspended load detecting unit identifies the hook, sets a detection area in a predetermined range including the specified hook, and sets the suspended load and the suspended load within the set detection area. Detect the shape. Hereinafter, an overhead crane provided with this crane monitoring device will be described in more detail by using the first to fourth embodiments as an example.
(第1実施形態)
図1は、第1実施形態におけるクレーン監視装置の構成を示すブロック図である。図2は、前記第1実施形態のクレーン監視装置によって監視される天井クレーンの構成を示す模式図である。図2Aは、上面図であり、図2Bは、側面図である。図3は、3次元点群データの一例、ならびに、吊り荷と対象者の検出方法および最小間隔の演算方法を説明するための図である。図3Aは、3次元点群データの一例、および、吊り荷と対象者の検出方法を説明するための図であり、図3Bは、最小間隔の演算方法を説明するための図である。
(First Embodiment)
FIG. 1 is a block diagram showing a configuration of a crane monitoring device according to the first embodiment. FIG. 2 is a schematic diagram showing a configuration of an overhead crane monitored by the crane monitoring device of the first embodiment. 2A is a top view and FIG. 2B is a side view. FIG. 3 is a diagram for explaining an example of three-dimensional point cloud data, a method of detecting a suspended load and a subject, and a method of calculating the minimum interval. FIG. 3A is a diagram for explaining an example of three-dimensional point cloud data and a method for detecting a suspended load and a target person, and FIG. 3B is a diagram for explaining a method for calculating a minimum interval.
第1実施形態におけるクレーン監視装置は、ガータを移動可能に構成され、フックを昇降自在に懸吊する昇降台車を備える天井クレーンに関わる対象者を監視する装置である。前記対象者には、例えば、前記天井クレーンに吊られる吊り荷を扱う作業者や、前記天井クレーンを操作する作業者等が含まれる。前記天井クレーンCRaは、例えば、図2に示すように、1対の第1および第2走行レールRL-1、RL-2と、ガータGTと、昇降台車LTと備える。 The crane monitoring device according to the first embodiment is a device for monitoring a target person involved in an overhead crane, which is configured to be able to move a garter and includes an elevating trolley for suspending a hook so as to be able to move up and down. The target person includes, for example, a worker who handles a suspended load suspended by the overhead crane, a worker who operates the overhead crane, and the like. As shown in FIG. 2, the overhead crane CRa includes, for example, a pair of first and second traveling rails RL-1 and RL-2, a garter GT, and an elevating carriage LT.
第1および第2走行レールRL-1、RL-2は、例えば工場や倉庫等の建屋の両側壁それぞれに一方向(第1方向、Y方向)に延びるように配設され、ガータGTにおける後述の第1および第2車輪を案内する棒状の部材である。 The first and second traveling rails RL-1 and RL-2 are arranged so as to extend in one direction (first direction, Y direction) on both side walls of a building such as a factory or a warehouse, and will be described later in the garter GT. It is a rod-shaped member that guides the first and second wheels of the above.
ガータGTは、昇降台車LTを案内し、支持する部材であり、例えば、前記一方向(第1方向)に直交する方向(第2方向、X方向)に延びるように前記一方向に間隔を開けて配置された棒状の部材である1対の第1および第2主けた、前記第1および第2主けたの各両端それぞれでこれらを連結する第1および第2連結部材、前記第1および第2連結部材それぞれに回転自在に取り付けられ、第1および第2走行レールRL-1、RL-2に案内される第1および第2車輪、前記第1および第2車輪を同期して駆動する例えばモータ等の第1駆動部、ならびに、前記第1および第2主けた上に前記第2方向に延びるように配設され、昇降台車LTにおける後述の第3および第4車輪を案内する棒状の第3および第4走行レールを備える。 The gata GT is a member that guides and supports the elevating wheel LT, and is, for example, spaced in one direction so as to extend in a direction (second direction, X direction) orthogonal to the one direction (first direction). A pair of first and second main digits, the first and second connecting members connecting them at both ends of the first and second main digits, the first and second main digits, which are rod-shaped members arranged in a row. For example, the first and second wheels, which are rotatably attached to each of the two connecting members and are guided by the first and second traveling rails RL-1 and RL-2, and the first and second wheels are driven synchronously, for example. A rod-shaped first drive unit such as a motor, and a rod-shaped third wheel that is arranged so as to extend in the second direction on the first and second main digits and guides the third and fourth wheels described later in the elevator carriage LT. It is equipped with 3rd and 4th running rails.
昇降台車LTは、フックHKを前記一方向(第1方向)および前記第2方向に直交する方向(第3方向、Z方向)に沿って昇降自在に懸吊し、ガータGTの前記第3および第4走行レールに案内される装置である。昇降台車LTには、回転自在に取り付けられ、前記第3および第4走行レールに案内される第3および第4車輪、前記第3および第4車輪を同期して駆動する例えばモータ等の第2駆動部、フックHKに取り付けられるワイヤロープ、前記ワイヤロープを巻き取るワイヤ巻取機、ならびに、前記ワイヤ巻取機を駆動する例えばモータ等の第3駆動部を備える。 The elevating carriage LT suspends the hook HK up and down along the one direction (first direction) and the direction orthogonal to the second direction (third direction, Z direction), and suspends the hook HK in the third and third directions of the garter GT. It is a device guided by the fourth traveling rail. A second wheel, such as a motor, which is rotatably attached to the lift bogie LT and drives the third and fourth wheels guided by the third and fourth traveling rails, and the third and fourth wheels in synchronization with each other. It includes a drive unit, a wire rope attached to the hook HK, a wire winder for winding the wire rope, and a third drive unit such as a motor for driving the wire winder.
天井クレーンCRには、天井クレーンCRを操作するための操作ペンダントHPが、ケーブルCVを介して、昇降台車LTに取り付けられている。操作ペンダントHPは、ガータGT(フックHK)を前記第1方向の一方(北方向)に移動させる北方ボタン、ガータGT(フックHK)を前記第1方向の他方(南方向)に移動させる南方ボタン、昇降台車LT(フックHK)を前記第2方向の一方(東方向)に移動させる東方ボタン、昇降台車LT(フックHK)を前記第2方向の他方(西方向)に移動させる西方ボタン、フックHKを前記第3方向の一方(上方向)に移動させる上昇ボタン、および、フックHKを前記第3方向の他方(下方向)に移動させる降下ボタンを備える。オペレータ(ユーザ)が北方ボタンを操作することで(例えば押すことで)、前記第1駆動部によって前記第1および第2車輪が正転し、これによってガータGTが北方向に移動し、これに伴いフックHKが北方向に移動する。オペレータ(ユーザ)が北方ボタンの操作を停止することで(例えば前記押すことを止めることで)、この北方向の移動が停止される。オペレータ(ユーザ)が南方ボタンを操作することで(例えば押すことで)、前記第1駆動部によって前記第1および第2車輪が逆転し、これによってガータGTが南方向に移動し、これに伴いフックHKが南方向に移動する。オペレータ(ユーザ)が南方ボタンの操作を停止することで(例えば前記押すことを止めることで)、この南方向の移動が停止される。オペレータ(ユーザ)が東方ボタンを操作することで(例えば押すことで)、前記第2駆動部によって前記第3および第4車輪が正転し、これによって昇降台車LTが東方向に移動し、これに伴いフックHKが東方向に移動する。オペレータ(ユーザ)が東方ボタンの操作を停止することで(例えば前記押すことを止めることで)、この東方向の移動が停止される。オペレータ(ユーザ)が西方ボタンを操作することで(例えば押すことで)、前記第2駆動部によって前記第3および第4車輪が逆転し、これによって昇降台車LTが西方向に移動し、これに伴いフックHKが西方向に移動する。オペレータ(ユーザ)が西方ボタンの操作を停止することで(例えば前記押すことを止めることで)、この西方向の移動が停止される。オペレータ(ユーザ)が上昇ボタンを操作することで(例えば押すことで)、前記第3駆動部によって前記ワイヤ巻取機が正転し、これによってフックHKが上昇する。オペレータ(ユーザ)が上昇ボタンの操作を停止することで(例えば前記押すことを止めることで)、この上昇が停止される。オペレータ(ユーザ)が降下ボタンを操作することで(例えば押すことで)、前記第3駆動部によって前記ワイヤ巻取機が逆転し、これによってフックHKが降下する。オペレータ(ユーザ)が降下ボタンの操作を停止することで(例えば前記押すことを止めることで)、この降下が停止される。 On the overhead crane CR, an operation pendant HP for operating the overhead crane CR is attached to the elevating trolley LT via a cable CV. The operation pendant HP is a north button that moves the gata GT (hook HK) in one direction (north direction) of the first direction, and a south button that moves the gata GT (hook HK) in the other (south direction) of the first direction. , East button to move the lift cart LT (hook HK) to one (east direction) in the second direction, west button to move the lift cart LT (hook HK) to the other (west direction) in the second direction, hook It includes an ascending button for moving the HK in one (upward) direction of the third direction, and a descending button for moving the hook HK to the other (downward) in the third direction. When the operator (user) operates the north button (for example, by pressing it), the first drive unit causes the first and second wheels to rotate in the normal direction, whereby the garter GT moves northward. Along with this, the hook HK moves northward. When the operator (user) stops the operation of the north button (for example, by stopping the pressing), the movement in the north direction is stopped. When the operator (user) operates the south button (for example, by pressing it), the first drive unit reverses the first and second wheels, which causes the garter GT to move southward. Hook HK moves southward. When the operator (user) stops the operation of the south button (for example, by stopping the pressing), the movement in the south direction is stopped. When the operator (user) operates the east button (for example, by pressing it), the second drive unit causes the third and fourth wheels to rotate forward, whereby the lift cart LT moves eastward. As a result, the hook HK moves eastward. When the operator (user) stops the operation of the east button (for example, by stopping the pressing), the movement in the east direction is stopped. When the operator (user) operates the west button (for example, by pressing it), the second drive unit reverses the third and fourth wheels, which causes the lift cart LT to move westward. Along with this, the hook HK moves westward. When the operator (user) stops the operation of the west button (for example, by stopping the pressing), the movement in the west direction is stopped. When the operator (user) operates the ascending button (for example, by pressing it), the wire winder is rotated forward by the third drive unit, whereby the hook HK is ascended. When the operator (user) stops the operation of the ascending button (for example, by stopping the pressing), this ascending is stopped. When the operator (user) operates the descend button (for example, by pressing it), the wire winder is reversed by the third drive unit, whereby the hook HK is lowered. When the operator (user) stops the operation of the descent button (for example, by stopping the pressing), this descent is stopped.
クレーン監視装置Dは、例えば、図1に示すように、第1および第2撮像部1-1、1-2と、制御処理部2と、入力部3と、出力部4と、インターフェース部(IF部)5と、記憶部6とを備える。
As shown in FIG. 1, for example, the crane monitoring device D includes first and second imaging units 1-1 and 1-2, a
第1実施形態におけるクレーン監視装置Daは、例えば、図1に示すように、吊荷検出部1aと、対象者検出部2aと、制御処理部3aと、入力部4と、出力部5と、インターフェース部(IF部)6と、記憶部7とを備える。
The crane monitoring device Da in the first embodiment includes, for example, as shown in FIG. 1, a suspended
吊荷検出部1aは、制御処理部3aに有線または無線によって接続され、制御処理部3aの制御に従って、吊り荷および前記吊り荷の形状を検出する装置である。より具体的には、本実施形態では、吊荷検出部1aは、検出方向の3次元点群データを生成する第1点群データ生成部11aと、第1点群データ生成部11aで生成した3次元点群データに基づいて吊り荷および吊り荷の形状を検出する第1検出処理部12aとを備える。第1点群データ生成部11aは、フックHKに掛けられる吊り荷PKを検出できるように、図2Bに示すように、フック側に検出方向を向くように昇降台車LTに配設される。本実施形態では、第1点群データ生成部11aは、その検出方向が平行に前記第3方向(Z方向)に沿うように、昇降台車LTの下部に配設される。なお、第1点群データ生成部11aは、検出方向が斜めに(前記第3方向と交差するように)昇降台車LTの下部に配設されてもよい。前記3次元点群データは、検出方向に存在する物体の表面における各点の3次元座標であり、通常、XYZ直交座標系の座標値(x、y、z)で表される。このため、3次元点群データによって、物体の有無や物体の形状が認識できる。このような3次元点群データを生成する装置として、例えば、LiDAR(Light Detection and Ranging)、ステレオカメラおよびTOF(Time of Flight)カメラ(TOFセンサ)等がある。LiDARには、例えば、検出範囲の中央領域の分解能が相対的に高くその周辺領域の分解能が相対的に低い等の、分解能に偏りが有るものや、検出範囲で分解能に偏りの無い比較的均一なものがある。前者のLiDARとして、例えば、Velodyne Lidar inc.社製 VLP-32MR等が挙げられる。このVLP-32MRは、32個のTOFレーザセンサにより、水平方向360°で垂直方向40°(+15°~-25°)の検出範囲を持ち、その中央領域の分解能が相対的に高くその周辺領域の分解能が相対的に低い。後者のLiDARとして、例えば、北陽電機株式会社製YVT-35LX-FO等が挙げられる。このYVT-35LX-FOは、パルスレーザ光を走査することにより、水平方向210°で垂直方向40°(+35°~-5°)の検出範囲を持ち、約2590点の解像度点数で分解能に略偏りが無く分解能が略均一である。第1点群データ生成部11aは、例えば、LiDAR、ステレオカメラおよびTOFカメラのうちのいずれかを備えて構成されてよく、本実施形態では、LiDARを備えて構成された。第1点群データ生成部11aによって、例えば、図3Aに示す点群データRSaが生成され、各点の座標値が記憶部7に記憶される。第1検出処理部12a(32a)は、本実施形態では、制御処理部3aに機能的に構成され、第1検出処理部12a(32a)については、後述する。
The suspended
対象者検出部2aは、制御処理部3aに有線または無線によって接続され、制御処理部3aの制御に従って、対象者および前記対象者の形状を検出する装置である。より具体的には、本実施形態では、対象者検出部2aは、検出方向の3次元点群データを生成する第2点群データ生成部21aと、第2点群データ生成部21aで生成した3次元点群データに基づいて対象者および対象者の形状を検出する第2検出処理部22aとを備える。第2点群データ生成部21aは、第1点群データ生成部11aと同様に、フックHKに掛けられる吊り荷PKを検出できるように、図2Bに示すように、フックHK側に検出方向を向くように昇降台車LTに配設される。第2検出処理部22a(33a)は、本実施形態では、制御処理部3aに機能的に構成され、第2検出処理部22a(33a)については、後述する。
The target
このような吊荷検出部1aの第1点群データ生成部11aと対象者検出部2aの第2点群データ生成部21aとは、別体であってよいが、本実施形態では、兼用されて一体である。すなわち、吊荷検出部1aの第1点群データ生成部11aと対象者検出部2aの第2点群データ生成部21aとは、例えば、1個のLiDARを備えて構成される。
The first point cloud
入力部4は、制御処理部3aに接続され、例えば、監視開始を指示するコマンド等の各種コマンド、および、警告の要否を判別する所定の閾値(第1閾値)等のクレーン監視装置Daを動作させる上で必要な各種データをクレーン監視装置Daに入力する機器であり、例えば、所定の機能を割り付けられた複数の入力スイッチ等である。出力部5は、制御処理部3aに接続され、制御処理部3aの制御に従って、入力部4から入力されたコマンドやデータおよび警告等を出力する機器であり、例えばCRTディスプレイ、液晶ディスプレイおよび有機ELディスプレイ等の表示を行う表示装置や、例えばスピーカやブザー等の音を出力する音出力装置等である。
The
IF部6は、制御処理部3aに接続され、制御処理部3aの制御に従って、外部機器との間でデータの入出力を行う回路であり、例えば、シリアル通信方式であるRS-232Cのインターフェース回路、および、USB(Universal Serial Bus)規格を用いたインターフェース回路等である。また、IF部6は、外部機器との間で通信を行う回路であり、例えば、データ通信カードや、IEEE802.11規格等に従った通信インターフェース回路等であってもよい。
The
記憶部7は、制御処理部3aに接続され、制御処理部3aの制御に従って、各種の所定のプログラムおよび各種の所定のデータを記憶する回路である。前記各種の所定のプログラムには、例えば、制御処理プログラムが含まれ、前記制御処理プログラムには、クレーン監視装置Daの各部1a、2a、4~7を当該各部の機能に応じてそれぞれ制御し、監視の開始および前記監視の終了を制御する制御プログラムや、第1点群データ生成部11aで生成した3次元点群データに基づいて吊り荷および吊り荷の形状を検出する第1検出処理プログラムや、第2点群データ生成部21aで生成した3次元点群データに基づいて対象者および対象者の形状を検出する第2検出処理プログラムや、前記第1検出処理プログラムで検出した吊り荷と前記第2検出処理プログラムで検出した対象者との間の最小間隔を前記第1検出処理プログラムで検出した吊り荷の形状および前記第2検出処理プログラムで検出した対象者の形状に基づいて求める間隔処理部プログラムや、前記間隔処理プログラムで求めた最小間隔が所定の閾値以下または未満である場合に、警告を外部に報知する警告処理プログラム等が含まれる。前記各種の所定のデータには、例えば前記閾値や検出領域(形状およびサイズ)等の、これら各プログラムを実行する上で必要なデータが含まれる。このような記憶部7は、例えば不揮発性の記憶素子であるROM(Read Only Memory)や書き換え可能な不揮発性の記憶素子であるEEPROM(Electrically Erasable Programmable Read Only Memory)等を備える。そして、記憶部7は、前記所定のプログラムの実行中に生じるデータ等を記憶するいわゆる制御処理部3aのワーキングメモリとなるRAM(Random Access Memory)等を含む。
The storage unit 7 is a circuit connected to the
制御処理部3aは、クレーン監視装置Daの各部1a、2a、4~7を当該各部の機能に応じてそれぞれ制御し、天井クレーンCRaに関わる対象者を監視するための回路である。制御処理部3aは、例えば、CPU(Central Processing Unit)およびその周辺回路を備えて構成される。制御処理部3aには、前記制御処理プログラムが実行されることによって、制御部31、第1検出処理部32a(12a)、第2検出処理部33a(22a)、間隔処理部34aおよび警告処理部35が機能的に構成される。
The
制御部31は、クレーン監視装置Daの各部1a、2a、4~7を当該各部の機能に応じてそれぞれ制御し、クレーン監視装置Da全体の制御を司るものである。
The
制御部31は、本実施形態では、監視の開始および前記監視の終了を制御する。通常、天井クレーンの作業では、安全性の確保のため、作業者(対象者)は、操作ペンダントHPの電源をオフにした状態で、吊り荷玉掛作業等の作業を行い、その後、操作ペンダントHPの電源をオンにした状態で、前記操作ペンダントの上昇ボタンや北方ボタン等の天井クレーンを駆動するためのボタンを操作する。そして、天井クレーンの駆動後(所定の位置に移動後)、降下ボタンで吊り荷を下ろし、作業者は、吊り荷をフックから外すために、操作中のボタンの操作を停止する。このため、制御部31は、例えば、操作ペンダントHPをモニタし、操作ペンダントHPの電源がオンされた場合に監視を開始し、操作ペンダントHPの電源がオフされた場合に前記監視を終了する。あるいは、例えば、吊り荷の有無でフックにかかる荷重が変化するので、フックHKの荷重を測定する荷重センサがフックHKに設けられ、制御部31は、前記荷重センサで測定したフックHKの荷重が予め設定された開始判定閾値を超えた場合に、監視を開始し、前記荷重センサで測定したフックHKの荷重が予め設定された終了判定閾値を下回った場合に、前記監視を終了する。前記開始判定閾値と前記終了判定閾値とは、同値であってよく、異値であってよい。前記異値の場合、安全性の観点から、前記開始判定閾値は、前記終了判定閾値より小さいことが好ましい。
In the present embodiment, the
第1検出処理部32a(12a)は、第1点群データ生成部11aで生成した3次元点群データに基づいて吊り荷および吊り荷の形状を検出するものである。本実施形態では、第1検出処理部32aは、前記フックを特定し、前記特定したフックを含む所定範囲の検出領域を設定し、前記設定した検出領域内で前記吊り荷および前記吊り荷の形状を検出する。より具体的には、第1点群データ生成部11aは、フックを昇降自在に懸吊する昇降台車LTにフック側に検出方向を向くように配設されるので、第1点群データ生成部11aで生成した3次元点群データにおけるフックHKの位置X0は、予め既知である。このため、3次元点群データにおけるフックHKの位置X0が前記各種データの1つとして予め記憶部7に記憶される。第1検出処理部32aは、例えば、図3Aに示すように、第1点群データ生成部11aで生成した3次元点群データRSaにおいて、記憶部7に記憶されたフックHKの位置X0でフックHKを特定し、前記特定したフックHKを含む所定範囲の検出領域SAを設定する。例えば、前記フックHKの位置X0に、検出領域SAの対角線の交点が一致するように、破線で示す矩形状(角柱状)の検出領域SAが設定される。そして、第1検出処理部32aは、この検出領域SA内で、予め設定された吊り荷判定閾値以上の高さ(Z座標値)を持つ点群を吊り荷PKとして検出し、例えば図3Bに示すように、この検出した点群から輪郭PPを吊り荷PKの形状PPとして求める。前記検出領域SAの形状およびサイズ、ならびに、前記吊り荷判定閾値は、それぞれ、例えば天井クレーンCRaの使用用途等を考慮することによって、予め適宜に設定される。なお、検出領域SAの形状は、矩形状(角柱状)に限らず、任意であってよく、例えば、円形状(円柱状)であってよい。
The first
第2検出処理部33a(22a)は、第2点群データ生成部21a(本実施形態では兼用されているので第1点群データ生成部11a)で生成した3次元点群データに基づいて対象者および対象者の形状を検出するものである。3次元点群データから人物を検出する人物検出技術は、種々、開発されており、例えば、深層学習モデルを用いた、公知のPointPillarsや、VoxelNetや、Vote3Deep等が利用できる。第2検出処理部33a(22a)は、これらのいずれかの人物検出技術、例えばPointPillarsを用いて、第1点群データ生成部11aで生成した3次元点群データから対象者Obを検出し、この検出した対象者Obの点群からその輪郭を対象者Obの形状として求める。図3Aに示す例では、吊り荷PKの周りに、3人の第1ないし第3対象者Oba、Obb、Obcが検出され、図3Bに示すように、これら第1ないし第3対象者Oba、Obb、Obcの各形状POa、POb、POcが求められる。
The second
間隔処理部34aは、第1検出処理部32a(12a)で検出した吊り荷と第2検出処理部33a(22a)で検出した対象者との間の最小間隔を第1検出処理部32a(12a)で検出した吊り荷の形状および第2検出処理部33a(22a)で検出した対象者の形状に基づいて求めるものである。より具体的には、間隔処理部34aは、第2検出処理部33aで抽出した対象者Obそれぞれについて、第1検出処理部32aで検出した吊り荷PKから見て、吊り荷PKの輪郭形状PPと対象者Obの輪郭形状POとの間の間隔を求め、この求めた間隔のうちの最も小さい(短い)間隔を最小間隔として求める。例えば、図3Bに示すように、間隔処理部34aは、第2検出処理部33aで抽出した第1ないし第3対象者Oba、Obb、Obcそれぞれについて、第1検出処理部32aで検出した吊り荷PKから見て、吊り荷PKの輪郭形状PPと対象者Obの輪郭形状POとの間の間隔SDを求め、この求めた各間隔SDa、SDb、SDcのうちの最も小さい(短い)間隔SDcを最小間隔として求める(SDc<SDb<SDa)。なお、第2検出処理部33aで1人の対象者Obしか抽出されなかった場合、この1人の対象者Obと吊り荷PKとの間の間隔が最小間隔となる。
The
警告処理部35は、間隔処理部34aで求めた最小間隔が所定の閾値(第1閾値)以下または未満である場合に、出力部5によって警告を外部に報知するものである。前記閾値は、例えば1mや2m等で安全性等を考慮して適宜に設定される。例えば、出力部5は、音出力装置であって、警告処理部35は、サイレン音やブザー音等の警告音を前記音出力装置から出力することで、警告を外部に報知する。あるいは、例えば、出力部5は、表示装置であって、警告処理部35は、「危険です。吊り荷から離れて下さい」等の警告する旨の警告メッセージを前記表示装置に表示することで、警告を外部に報知する。なお、出力部5が、例えばパトライト回転灯等の発光装置であって、警告処理部35は、前記発光装置を発光させることで、警告を外部に報知してもよい。また、これらが組み合わされてもよい。
The
本実施形態では、前記閾値は、オペレータ(ユーザ)によって入力部4から入力可能に構成されるが、設計者によって予め設定され、記憶部7に記憶されてもよい。
In the present embodiment, the threshold value is configured to be inputtable from the
これら制御処理部3a、入力部4、出力部5、IF部6および記憶部7は、例えば、デスクトップ型やノート型等のコンピュータによって構成可能である。また、制御処理部3a、入力部4、出力部5、IF部6および記憶部7は、例えば、ボード型やワンチップ型等のコンピュータによって構成され、昇降台車LTに搭載されてもよい。
The
次に、本実施形態の動作について説明する。図4は、前記クレーン監視装置の動作を示すフローチャートである。 Next, the operation of this embodiment will be described. FIG. 4 is a flowchart showing the operation of the crane monitoring device.
このような構成のクレーン監視装置Daは、その電源が投入されると、必要な各部の初期化を実行し、その稼働を始める。制御処理部3aには、その制御処理プログラムの実行によって、制御部31、第1検出処理部32a(12a)、第2検出処理部33a(22a)、間隔処理部34aおよび警告処理部35が機能的に構成される。ここで、前記閾値は、オペレータ(ユーザ)によって入力部4から入力され、記憶部7に記憶されているものとする。
When the power of the crane monitoring device Da having such a configuration is turned on, the necessary initialization of each part is executed and the operation of the crane monitoring device Da is started. The
図4において、クレーン監視装置Daは、制御処理部3aの制御部31によって、監視の開始か否かを判定する(S1)。この判定は、上述したように、操作ペンダントHPの操作状況やフックHKの荷重に基づいて実施される。この判定の結果、監視の開始ではない場合(No)には、制御部31は、処理を処理S1に戻す。一方、前記判定の結果、監視の開始である場合(Yes)には、制御処理部3aは、次に、処理S2を実行する。したがって、制御処理部3aは、監視の開始と判定されるまで、処理S1を繰り返し実行する。
In FIG. 4, the crane monitoring device Da determines whether or not monitoring is started by the
この処理S2では、クレーン監視装置Daは、制御処理部3aによって、第1および第2点群データ生成部11a、21aで生成した各3次元点群データを取得する。本実施形態では、上述のように兼用されているので、制御処理部3aは、第1点群データ生成部11aで生成した3次元点群データを取得する。
In this process S2, the crane monitoring device Da acquires the three-dimensional point cloud data generated by the first and second point cloud
次に、クレーン監視装置Daは、制御処理部3aの第1検出処理部32a(12a)によって、第1点群データ生成部11aで生成した3次元点群データに基づいて吊り荷PKおよびその形状PPを検出し、制御処理部3aの第2検出処理部33a(22a)によって、第2点群データ生成部21aで生成した3次元点群データ(本実施形態では第1点群データ生成部11aで生成した3次元点群データ)に基づいて対象者Obおよびその形状POを検出する。
Next, the crane monitoring device Da is a suspended load PK and its shape based on the three-dimensional point cloud data generated by the first point cloud
次に、クレーン監視装置Daは、制御処理部3aの間隔処理部34aによって、第1検出処理部32aで検出した吊り荷と第2検出処理部33aで検出した対象者との間の最小間隔を第1検出処理部32aで検出した吊り荷の形状および第2検出処理部33aで検出した対象者の形状に基づいて求める(S4)。
Next, the crane monitoring device Da determines the minimum distance between the suspended load detected by the first
次に、クレーン監視装置Daは、制御処理部3aの警告処理部35によって、警告の要否を判定する(S5)。本実施形態では、警告処理部35は、間隔処理部34aで求めた最小間隔が所定の閾値以下または未満であるか否かを判定することで、警告の要否を判定する。この判定の結果、前期最小間隔が所定の閾値以下または未満である場合には、警告処理部35は、警告の必要と判定し(Yes)、出力部5によって警告を外部に報知し(S6)、次に、処理S7を実行する。一方、前記判定の結果、前期最小間隔が所定の閾値以下または未満ではない場合には、警告処理部35は、警告の不要と判定し(No)、次に、処理S7を実行する。
Next, the crane monitoring device Da determines the necessity of warning by the
この処理S7では、クレーン監視装置Daは、制御処理部3aの制御部31によって、監視の終了か否かを判定する。この判定は、上述したように、操作ペンダントHPの操作状況やフックHKの荷重に基づいて実施される。この判定の結果、監視の終了ではない場合(No)には、制御部31は、処理を処理S2に戻す。したがって、監視中は、処理S2ないし処理S7の各処理が繰り返し実行される。一方、前記判定の結果、監視の終了である場合(Yes)には、制御処理部3aは、本処理を終了する。
In this process S7, the crane monitoring device Da determines whether or not the monitoring is completed by the
以上説明したように、第1実施形態におけるクレーン監視装置Daおよびこれに実装されたクレーン監視方法ならびに天井クレーンCRaは、フックを含む検出領域SAを設定して吊り荷PKを検出する。吊り荷PKは、フックに掛けられた荷物であるので、上記クレーン監視装置Daおよびクレーン監視方法ならびに天井クレーンCRaは,吊荷検出部1aの検出範囲内に吊り荷PKではない荷物が在っても吊り荷PKをより正確に検出できる。上記クレーン監視装置Daおよびクレーン監視方法ならびに天井クレーンCRaは、より正確に検出できる吊り荷PKにおける形状も検出するので、吊り荷PKと対象者Obとの間の最小間隔をより正確に求めることができる。よって、上記クレーン監視装置Daおよびクレーン監視方法ならびに天井クレーンCRaは、吊り荷の形状を認識して吊り荷PKと対象者Obとの間の間隔をより正確に測定できる。
As described above, the crane monitoring device Da, the crane monitoring method mounted on the crane monitoring device Da, and the overhead crane CRa in the first embodiment set a detection area SA including a hook to detect the suspended load PK. Since the suspended load PK is a load hung on a hook, the crane monitoring device Da, the crane monitoring method, and the overhead crane CRa have a load that is not a suspended load PK within the detection range of the suspended
上記クレーン監視装置Daおよびクレーン監視方法ならびに天井クレーンCRaは、吊荷検出部1aおよび対象者検出部2aそれぞれが物体表面の形状を表す3次元点群データを生成するので、3次元点群データから吊り荷PKや対象者Obを容易に検出できる。上記クレーン監視装置Daおよびクレーン監視方法ならびに天井クレーンCRaは、吊荷検出部1aおよび対象者検出部2aそれぞれを、フックHKを昇降自在に懸吊する昇降台車LTに配設するので、フックHKを特定し易く、検出領域SAを設定し易い。吊荷検出部1aおよび対象者検出部2aは、それぞれ、吊り荷PKおよび対象者Obを略真上から検出することになるので、陰となる部分が低減するから、上記クレーン監視装置Daおよびクレーン監視方法ならびに天井クレーンCRaは、最小間隔をより正確に求めることができる。
Since the crane monitoring device Da, the crane monitoring method, and the overhead crane CRa each generate 3D point cloud data representing the shape of the object surface in the suspended
上記クレーン監視装置Daおよびクレーン監視方法ならびに天井クレーンCRaは、監視の開始および終了を自動化できる。 The crane monitoring device Da, the crane monitoring method, and the overhead crane CRa can automate the start and end of monitoring.
次に、別の実施形態について説明する。
(第2実施形態)
第1実施形態における天井クレーンCRaならびにクレーン監視装置Daにおける吊荷検出部1aおよび対象者検出部2aは、検出範囲内の物体の3次元点群データを生成するLiDARを備えて構成されたが、上述のように、LiDARには、分解能に偏りのある装置と偏りの無い装置とがある。例えば、図3Aに示す例では、検出範囲の中央領域の分解能が相対的に高くその周辺領域の分解能が相対的に低い。このため、吊り荷PKは、中央領域に存在するため、大抵、検出可能である。一方、図3Aに示す例では、作業者等の対象者Ob(Oba、Obb、Obc)も比較的中央領域付近に存在するため、検出可能であるが、対象者Obが周辺領域に存在すると、検出し難い。このため、第2実施形態における天井クレーンCRbおよびクレーン監視装置Dbでは、吊荷検出部1bは、第1実施形態と同様に、3次元点群データを生成する点群データ生成部を備えて構成される一方、対象者検出部2bは、検出範囲全体に亘ってより確実に対象者Obを検出するために、検出範囲における被写体の画像を生成する撮像部を備えて構成される。
Next, another embodiment will be described.
(Second Embodiment)
The overhead crane CRa and the suspended
図5は、第2実施形態におけるクレーン監視装置の構成を示すブロック図である。図6は、前記第2実施形態のクレーン監視装置によって監視される天井クレーンの構成を示す模式図である。図6Aは、上面図であり、図6Bは、側面図である。図7は、第2実施形態において、吊荷検出部の検出結果と対象者検出部の検出結果との合成処理を説明するための図である。図7Aは、対象者検出部の検出結果を示し、図7Bは、吊荷検出部の検出結果を示し、図7Cは、これらの合成結果を示す。 FIG. 5 is a block diagram showing the configuration of the crane monitoring device according to the second embodiment. FIG. 6 is a schematic view showing the configuration of an overhead crane monitored by the crane monitoring device of the second embodiment. 6A is a top view and FIG. 6B is a side view. FIG. 7 is a diagram for explaining a synthesis process of the detection result of the suspended load detection unit and the detection result of the target person detection unit in the second embodiment. FIG. 7A shows the detection result of the subject detection unit, FIG. 7B shows the detection result of the suspended load detection unit, and FIG. 7C shows the synthesis result of these.
第2実施形態におけるクレーン監視装置Dbを備える天井クレーンCRbは、図6に示すように、第1実施形態におけるクレーン監視装置Daに代え、第2実施形態におけるクレーン監視装置Dbを備える点を除き、第1実施形態における天井クレーンCRaと同様である。すなわち、天井クレーンCRbは、例えば、図6に示すように、1対の第1および第2走行レールRL-1、RL-2と、ガータGTと、昇降台車LTと備える。これらは、天井クレーンCRaの場合と同様であるので、その説明を省略する。 As shown in FIG. 6, the overhead crane CRb provided with the crane monitoring device Db in the second embodiment is provided with the crane monitoring device Db in the second embodiment in place of the crane monitoring device Da in the first embodiment, except that the crane monitoring device Db is provided. It is the same as the overhead crane CRa in the first embodiment. That is, the overhead crane CRb includes, for example, a pair of first and second traveling rails RL-1 and RL-2, a garter GT, and an elevating carriage LT, as shown in FIG. Since these are the same as in the case of the overhead crane CRa, the description thereof will be omitted.
第2実施形態におけるクレーン監視装置Dbは、例えば、図5に示すように、吊荷検出部1bと、対象者検出部2bと、制御処理部3bと、入力部4と、出力部5と、インターフェース部(IF部)6と、記憶部7とを備える。これら第2実施形態のクレーン監視装置Dbにおける入力部4、出力部5、IF部6および記憶部7は、それぞれ、第1実施形態のクレーン監視装置Daにおける入力部4、出力部5、IF部6および記憶部7と同様であるので、その説明を省略する。
The crane monitoring device Db in the second embodiment includes, for example, as shown in FIG. 5, a suspended
吊荷検出部1bは、制御処理部3bに有線または無線によって接続され、制御処理部3bの制御に従って、吊り荷および前記吊り荷の形状を検出する装置である。より具体的には、吊荷検出部1bは、検出方向の3次元点群データを生成する点群データ生成部11bと、点群データ生成部11bで生成した3次元点群データに基づいて吊り荷および吊り荷の形状を検出する第1検出処理部12bとを備える。これら吊荷検出部1bにおける点群データ生成部11bおよび第1検出処理部12bは、それぞれ、第1実施形態の吊荷検出部1aにおける第1点群データ生成部11aおよび第1検出処理部12aと同様であるので、その説明を省略する。
The suspended
対象者検出部2bは、制御処理部3bに有線または無線によって接続され、制御処理部3bの制御に従って、対象者および前記対象者の形状を検出する装置である。より具体的には、第2実施形態では、対象者検出部2bは、撮像方向の画像を生成する撮像部21bと、撮像部21bで生成した画像に基づいて対象者および対象者の形状を検出する第2検出処理部22bとを備える。撮像部21bは、例えば、被写体の光学像を所定の結像面上に結像する結像光学系、前記結像面に受光面を一致させて配置され、前記被写体の光学像を電気的な信号に変換するイメージセンサ、および、イメージセンサの出力を画像処理することで前記被写体の画像を表すデータである画像データを生成する画像処理部等を備えるデジタルカメラである。撮像部21bは、天井クレーンCRbに関わる対象者Obを監視できるように、図6Bに示すように、フック側に撮像方向を向くように昇降台車LTに配設される。本実施形態では、撮像部21bは、その撮像方向が平行に前記第3方向(Z方向)に沿うように、昇降台車LTの下部に配設される。よって、撮像部21bは、点群データ生成部11b(第1点群データ生成部11a)に並置するように配設される。なお、撮像部21bは、撮像方向が斜めに(前記第3方向と交差するように)昇降台車LTの下部に配設されてもよい。第2検出処理部22b(33b)は、本実施形態では、制御処理部3bに機能的に構成され、第2検出処理部22b(33b)については、後述する。
The target
制御処理部3bは、クレーン監視装置Dbの各部1b、2b、4~7を当該各部の機能に応じてそれぞれ制御し、天井クレーンCRbに関わる対象者を監視するための回路である。制御処理部3bは、例えば、CPUおよびその周辺回路を備えて構成される。制御処理部3bには、その制御処理プログラムが実行されることによって、制御部31、第1検出処理部32b(12b)、第2検出処理部33b(22b)、間隔処理部34bおよび警告処理部35が機能的に構成される。これら第2実施形態の制御処理部3bにおける制御部31、第1検出処理部32b(12b)および警告処理部35は、それぞれ、第1実施形態の制御処理部3aにおける制御部31、第1検出処理部32a(12a)および警告処理部35と同様であるので、その説明を省略する。
The
第2検出処理部33b(22b)は、撮像部21bで生成した画像に基づいて対象者および前記対象者の形状を検出するものである。3次元点群データから人物を検出する人物検出技術は、種々、開発されており、R-CNN、YOLOおよびSSD等が利用できる。本実施形態では、第2検出処理部33b(22b)は、これらのいずれかの人物検出技術、例えばR-CNNの1つであるMask R-CNNを用いて、撮像部21bで生成した画像から対象者Obを検出し、この検出した対象者Obの画素群(対象者Obと判定された画素の集合)からその輪郭を対象者Obの形状として求める。
The second
間隔処理部34bは、第1検出処理部32b(12b)で検出した吊り荷と第2検出処理部33b(22b)で検出した対象者との間の最小間隔を第1検出処理部32b(12b)で検出した吊り荷の形状および第2検出処理部33b(22b)で検出した対象者の形状に基づいて求めるものである。より具体的には、第2実施形態では、間隔処理部34bは、例えば、図7Aに示す第2検出処理部33b(22b)で検出した対象者およびその形状RO(ROa、ROb、ROc)と、図7Bに示す第1検出処理部32b(12b)で検出した吊り荷およびその形状RPとを、図7Cに示すように、合成し、この合成した検出結果CDにおいて、第2検出処理部33bで抽出した対象者それぞれについて、第1検出処理部32bで検出した吊り荷から見て、吊り荷の輪郭形状RPと対象者の輪郭形状ROとの間の間隔を求め、この求めた間隔のうちの最も小さい(短い)間隔を最小間隔として求める。画像がZ方向(第3方向)の情報を有しないので、前記合成は、XY平面上で実行され、前記間隔は、XY平面で求められる。この図7Cに示す例では、間隔処理部34bは、第2検出処理部33bで抽出した第1ないし第3対象者それぞれについて、第1検出処理部32bで検出した吊り荷から見て、吊り荷の輪郭形状RPと対象者の輪郭形状ROとの間の間隔SDを求め、この求めた各間隔SDa、SDb、SDcのうちの最も小さい(短い)間隔SDaを最小間隔として求める(SDa<SDb<SDc)。なお、R-CNNは、図7Aに破線で示すように、物体検出を矩形領域で判定するので、この場合では、この矩形領域が対象者の形状とされ、この矩形領域と吊り荷との間の間隔が求められる。
The
このような第2実施形態におけるクレーン監視装置Dbは、第1実施形態におけるクレーン監視装置Daと同様な図4に示す処理S1ないし処理S7の各処理が実行される。 The crane monitoring device Db in the second embodiment executes each of the processes S1 to S7 shown in FIG. 4, which is the same as the crane monitoring device Da in the first embodiment.
第2実施形態におけるクレーン監視装置Dbおよびこれに実装されたクレーン監視方法ならびに天井クレーンCRbは、第1実施形態におけるクレーン監視装置Daおよびこれに実装されたクレーン監視方法ならびに天井クレーンCRaと同様に、吊り荷の形状を認識して吊り荷と対象者との間の間隔をより正確に測定できる。 The crane monitoring device Db and the crane monitoring method and the overhead crane CRb mounted on the crane monitoring device Db in the second embodiment are the same as the crane monitoring device Da and the crane monitoring method and the overhead crane CRa mounted on the crane monitoring device Da in the first embodiment. The shape of the suspended load can be recognized and the distance between the suspended load and the subject can be measured more accurately.
上記クレーン監視装置Dbおよびクレーン監視方法ならびに天井クレーンCRbは、形状を検出する吊荷検出部1bに点群データ生成部11bを優先的に用い、対象者検出部2bに撮像部21bを用いることで、分解能に偏りの有る点群データ生成部11bであっても、検出範囲における高い分解能の領域によって吊り荷およびその形状を点群データ生成部11bで的確に検出する一方、吊り荷の周囲に散らばる対象者Obを撮像部21bで検出できる。
In the crane monitoring device Db, the crane monitoring method, and the overhead crane CRb, the point cloud
上記クレーン監視装置Dbおよびクレーン監視方法ならびに天井クレーンCRbは、監視の開始および終了を自動化できる。 The crane monitoring device Db, the crane monitoring method, and the overhead crane CRb can automate the start and end of monitoring.
次に、別の実施形態について説明する。
(第3実施形態)
第1および第2実施形態における天井クレーンCRa、CRbおよびクレーン監視装置Da、Dbは、吊荷検出部1a、1bおよび対象者検出部2a、2bを昇降台車LTに配設したが、第3実施形態における天井クレーンCRcおよびクレーン監視装置Dcは、吊荷検出部1cおよび対象者検出部2cをガータGTに配設するものである。
Next, another embodiment will be described.
(Third Embodiment)
In the overhead cranes CRa and CRb and the crane monitoring devices Da and Db in the first and second embodiments, the suspended
図8は、第3実施形態におけるクレーン監視装置の構成を示すブロック図である。図9は、前記第3実施形態のクレーン監視装置によって監視される天井クレーンの構成を示す模式図である。図9Aは、上面図であり、図9Bは、側面図である。図10は、第3実施形態において、フックの位置を検出する第1演算形態を説明するための図である。図11は、第3実施形態において、フックの位置を検出する第2演算形態を説明するための図である。 FIG. 8 is a block diagram showing the configuration of the crane monitoring device according to the third embodiment. FIG. 9 is a schematic view showing the configuration of an overhead crane monitored by the crane monitoring device of the third embodiment. 9A is a top view and FIG. 9B is a side view. FIG. 10 is a diagram for explaining the first calculation mode for detecting the position of the hook in the third embodiment. FIG. 11 is a diagram for explaining a second calculation mode for detecting the position of the hook in the third embodiment.
第3実施形態におけるクレーン監視装置Dcを備える天井クレーンCRcは、図9に示すように、第1実施形態におけるクレーン監視装置Daに代え、第3実施形態におけるクレーン監視装置Dcを備える点を除き、第1実施形態における天井クレーンCRaと同様である。すなわち、天井クレーンCRcは、例えば、図9に示すように、1対の第1および第2走行レールRL-1、RL-2と、ガータGTと、昇降台車LTと備える。これらは、天井クレーンCRaの場合と同様であるので、その説明を省略する。 As shown in FIG. 9, the overhead crane CRc provided with the crane monitoring device Dc in the third embodiment is provided with the crane monitoring device Dc in the third embodiment in place of the crane monitoring device Da in the first embodiment, except that the crane monitoring device Dc is provided. It is the same as the overhead crane CRa in the first embodiment. That is, the overhead crane CRc includes, for example, a pair of first and second traveling rails RL-1 and RL-2, a garter GT, and an elevating carriage LT, as shown in FIG. Since these are the same as in the case of the overhead crane CRa, the description thereof will be omitted.
第3実施形態におけるクレーン監視装置Dcは、例えば、図8に示すように、吊荷検出部1cと、対象者検出部2cと、制御処理部3cと、入力部4と、出力部5と、インターフェース部(IF部)6と、記憶部7と、フック検出部8caとを備える。これら第3実施形態のクレーン監視装置Dcにおける入力部4、出力部5、IF部6および記憶部7は、それぞれ、第1実施形態のクレーン監視装置Daにおける入力部4、出力部5、IF部6および記憶部7と同様であるので、その説明を省略する。
The crane monitoring device Dc in the third embodiment includes, for example, as shown in FIG. 8, a suspended
吊荷検出部1cは、制御処理部3cに有線または無線によって接続され、制御処理部3cの制御に従って、吊り荷および前記吊り荷の形状を検出する装置である。より具体的には、吊荷検出部1cは、検出方向の3次元点群データを生成する第1点群データ生成部11c(11c-A、11c-B)と、第1点群データ生成部11cで生成した3次元点群データに基づいて吊り荷および前記吊り荷の形状を検出する第1検出処理部12c(32c)とを備える。第1点群データ生成部11cは、第3実施形態では、フック側に検出方向を向くようにガータGTの端部に配設される。より詳しくは、互いに死角をカバーする観点から、第1点群データ生成部11cは、図9Bに示すように、ガータGTの両端部それぞれに配設された2個の1組の第1Aおよび第1B点群データ生成部11c-A、11c-Bを備え、第1検出処理部12c(32c)は、これら第1Aおよび第1B点群データ生成部11c-A、11c-Bそれぞれで生成した各3次元点群データに基づいて吊り荷および前記吊り荷の形状を検出する。第1A点群データ生成部11c-Aは、フック側に検出方向を向くようにガータGTの一方の端部に配設され、第1B点群データ生成部11c-Bは、フック側に検出方向を向くようにガータGTの他方の端部に配設される。すなわち、第1Aおよび第1B点群データ生成部11c-A、11c-Bは、各検出方向が、上方から斜め下方に向き、そして、互いに交差するように、ガータGTの各端部に配設される。このため、第1A点群データ生成部11c-A(または第1B点群データ生成部11c-B)は、ワイヤロープ、フックHKおよび荷物等の奥側がこれらによって遮蔽されて死角となるが、この死角は、第1B点群データ生成部11c-B(または第1A点群データ生成部11c-A)によってカバーされる。第1検出処理部12c(32c)は、本実施形態では、制御処理部3cに機能的に構成され、第1検出処理部12c(32c)については、後述する。
The suspended
対象者検出部2cは、制御処理部3cに有線または無線によって接続され、制御処理部3cの制御に従って、対象者および前記対象者の形状を検出する装置である。より具体的には、対象者検出部2cは、検出方向の3次元点群データを生成する第2点群データ生成部21c(21c-A、21c-B)と、第2点群データ生成部21cで生成した3次元点群データに基づいて対象者および前記対象者の形状を検出する第2検出処理部22c(33c)とを備える。第2点群データ生成部21cは、第3実施形態では、フック側に検出方向を向くようにガータGTの端部に配設される。より詳しくは、互いに死角をカバーする観点から、第2点群データ生成部21cは、図9Bに示すように、ガータGTの両端部それぞれに配設された2個の1組の第2Aおよび第2B点群データ生成部21c-A、21c-Bを備え、第2検出処理部22c(33c)は、これら第2Aおよび第2B点群データ生成部21c-A、21c-Bそれぞれで生成した各3次元点群データに基づいて対象者および前記対象者の形状を検出する。第2A点群データ生成部21c-Aは、フック側に検出方向を向くようにガータGTの一方の端部に配設され、第2B点群データ生成部21c-Bは、フック側に検出方向を向くようにガータGTの他方の端部に配設される。すなわち、第2Aおよび第2B点群データ生成部21c-A、21c-Bは、各検出方向が、上方から斜め下方に向き、そして、互いに交差するように、ガータGTの各端部に配設される。このため、第2A点群データ生成部21c-A(または第2B点群データ生成部21c-B)は、ワイヤロープ、フックHKおよび荷物等の奥側がこれらによって遮蔽されて死角となるが、この死角は、第2B点群データ生成部21c-B(または第2A点群データ生成部21c-A)によってカバーされる。第2検出処理部22c(33c)は、本実施形態では、制御処理部3cに機能的に構成され、第2検出処理部22c(33c)については、後述する。
The target
このような吊荷検出部1cの第1点群データ生成部11cと対象者検出部2cの第2点群データ生成部21cとは、別体であってよいが、本実施形態では、兼用されて一体である。すなわち、吊荷検出部1aの第1A点群データ生成部11a-Aと対象者検出部2aの第2A点群データ生成部21a-Aとは、例えば、1個のLiDARを備えて構成され、吊荷検出部1aの第1B点群データ生成部11a-Bと対象者検出部2aの第2B点群データ生成部21a-Bとは、例えば、他の1個のLiDARを備えて構成される。
The first point cloud
フック検出部8caは、制御処理部3cに有線または無線によって接続され、制御処理部3cの制御に従って、フックHKの位置を検出する装置である。より具体的には、フック検出部8caは、例えば、図10Aに示すように、床面から、対象者の身長を超えるような所定の高さ(例えば2m等)以上であってガータGTの下側である範囲(フック検出範囲、Xサイズがx0[mm]で、Yサイズがy0[mm]で、Zサイズがz0[mm]である所定サイズの3次元領域)DAにおける3次元点群データを、前記第1方向(Y方向)に沿った検出方向で(側方から)生成する第3点群データ生成部81caと、第3点群データ生成部81caで生成した3次元点群データに基づいてフックHKの位置を検出する第3検出処理部82ca(37ca)とを備える。第3検出処理部82ca(37ca)は、本実施形態では、制御処理部3cに機能的に構成され、第3検出処理部82ca(37ca)については、後述する。
The hook detection unit 8ca is a device that is connected to the
制御処理部3cは、クレーン監視装置Dcの各部1c、2c、4~7を当該各部の機能に応じてそれぞれ制御し、天井クレーンCRcに関わる対象者を監視するための回路である。制御処理部3cは、例えば、CPUおよびその周辺回路を備えて構成される。制御処理部3cには、その制御処理プログラムが実行されることによって、制御部31、第1検出処理部32c(12c)、第2検出処理部33c(22c)、間隔処理部34c、警告処理部35および第3検出処理部37ca(82ca)が機能的に構成される。これら第3実施形態の制御処理部3cにおける制御部31および警告処理部35は、それぞれ、第1実施形態の制御処理部3aにおける制御部31および警告処理部35と同様であるので、その説明を省略する。
The
第3検出処理部37ca(82ca)は、第3点群データ生成部81caで生成した3次元点群データに基づいてフックHKの位置を検出するものである。フックHKは、上述したように、ワイヤロープに取り付けられている。前記フック検出範囲DAでは、例えば、図10Aに示すように、このワイヤロープの3次元点群データが優位に生成される。このため、第3検出処理部37ca(82ca)は、例えば、図10Bに示すように、前記フック検出範囲DAにおいて、第3点群データ生成部81caで生成した3次元点群データをX方向(前記第2方向)に沿って度数分布図(ヒストグラム)を求め、最も度数の大きいピークの位置をフックHKの位置として求める。 The third detection processing unit 37ca (82ca) detects the position of the hook HK based on the three-dimensional point cloud data generated by the third point cloud data generation unit 81ca. The hook HK is attached to the wire rope as described above. In the hook detection range DA, for example, as shown in FIG. 10A, the three-dimensional point cloud data of this wire rope is predominantly generated. Therefore, for example, as shown in FIG. 10B, the third detection processing unit 37ca (82ca) transmits the three-dimensional point cloud data generated by the third point cloud data generation unit 81ca in the X direction (in the hook detection range DA). The frequency distribution map (histogram) is obtained along the second direction), and the position of the peak having the highest frequency is obtained as the position of the hook HK.
なお、フックHKの位置は、図11に示すように、フックを昇降自在に懸吊する昇降台車LTの位置を測定することによって求められてもよい。この場合では、クレーン監視装置Dcは、図8に示すように、フック検出部8caに代え、フック検出部8cbを備える。このフック検出部8cbは、制御処理部3cに有線または無線によって接続され、制御処理部3cの制御に従って、フックHKの位置を検出する装置であり、昇降台車LTまでの距離を測定する距離測定部81cbと、距離測定部81cbで測定した昇降台車LTまでの距離に基づいてフックHKの位置を求める第3検出処理部37cb(82cb)とを備える。距離測定部81cbは、予め設定された距離測定の基準位置(例えばガータGTの一方端の位置等)に配置され、X方向(前記第2方向)に沿って前記基準位置から昇降台車LTまでの距離を測定する。距離測定部81cbは、例えばレーザ距離計等を備えて構成される。X方向(前記第2方向)に沿った、前記基準位置から昇降台車LTまでの距離とフックHKの位置との対応関係が予め求められて前記各種データの1つとして記憶部7に予め記憶され、第3検出処理部37cb(82cb)は、距離測定部81cbで測定した昇降台車LTまでの距離と前記対応関係とから、フックHKの位置を求める。
As shown in FIG. 11, the position of the hook HK may be determined by measuring the position of the elevating carriage LT that suspends the hook so as to be able to move up and down. In this case, as shown in FIG. 8, the crane monitoring device Dc includes a hook detection unit 8cc instead of the hook detection unit 8ca. The hook detection unit 8cb is a device that is connected to the
図8に戻って、第1検出処理部32c(12c)は、第1点群データ生成部11c(11c-A、11c-B)で生成した3次元点群データに基づいて吊り荷および吊り荷の形状を検出するものである。より具体的には、第3実施形態では、1組の第1Aおよび第1B点群データ生成部11c-A、11c-Bを備えるので、第1検出処理部32c(12c)は、第1A点群データ生成部11c-Aで生成した3次元点群データと、第1B点群データ生成部11c-Bで生成した3次元点群データと足し合わせ、これら足し合わせた3次元点群データから、第1実施形態と同様に、吊り荷およびその形状を求める。
Returning to FIG. 8, the first
第2検出処理部33c(22c)は、第2点群データ生成部21c(21c-A、21c-B)(本実施形態では兼用されているので第1Aおよび第1B点群データ生成部11c-A、11c-B)で生成した3次元点群データに基づいて対象者および対象者の形状を検出するものである。より具体的には、第3実施形態では、第2検出処理部33c(22c)は、第2A点群データ生成部21c-A(第1A点群データ生成部11c-A)で生成した3次元点群データと、第2B点群データ生成部21c-B(第1B点群データ生成部11c-B)で生成した3次元点群データとを足し合わせ、これら足し合わせた3次元点群データから、第1実施形態と同様に、対象者およびその形状を求める。
The second detection processing unit 33c (22c) is the second point cloud
間隔処理部34cは、第1検出処理部32c(12c)で検出した吊り荷と第2検出処理部33c(22c)で検出した対象者との間の最小間隔を第1検出処理部32c(12c)で検出した吊り荷の形状および第2検出処理部33c(22c)で検出した対象者の形状に基づいて求めるものである。より具体的には、第3実施形態では、間隔処理部34cは、まず、第1A点群データ生成部11c-Aで生成した3次元点群データのうち、フックHKの位置より当該第1A点群データ生成部11c-Aの配設側の3次元点群データから第1検出処理部32cで求められた吊り荷およびその形状と、第2A点群データ生成部21c-A(第1A点群データ生成部11c-A)で生成した3次元点群データのうち、フックHKの位置より当該第2A点群データ生成部11c-Aの配設側の3次元点群データから第2検出処理部33cで求められた対象者およびその形状とにおいて、第1実施形態の間隔処理部34aと同様に処理することによって前記吊り荷と前記対象者との間の最小間隔(第A側最小間隔)を検出する。次に、間隔処理部34cは、第1B点群データ生成部11c-Bで生成した3次元点群データのうち、フックHKの位置より当該第1B点群データ生成部11c-Bの配設側の3次元点群データから第1検出処理部32cで求められた吊り荷およびその形状と、第2B点群データ生成部21c-B(第1B点群データ生成部11c-B)で生成した3次元点群データのうち、フックHKの位置より当該第2B点群データ生成部11c-Bの配設側の3次元点群データから第2検出処理部33cで求められた対象者およびその形状とにおいて、第1実施形態の間隔処理部34aと同様に処理することによって前記吊り荷と前記対象者との間の最小間隔(第B側最小間隔)を検出する。そして、間隔処理部34cは、これら第A側最小間隔と第B側最小間隔とのうち、小さい方を最終的な最小間隔として求める。
The
なお、同一の対象者について、フックHKの位置より第1A点群データ生成部11c-Aの配設側の3次元点群データに基づく吊り荷と対象者との間の間隔と、フックHKの位置より第1B点群データ生成部11c-Bの配設側の3次元点群データに基づく吊り荷と対象者との間の間隔とが、異なる値で求められる場合が生じ得る。しかしながら、最終的に、最小間隔が求められるので、このような場合でも結果は、同じになるから、差し支えない。
For the same target person, the distance between the suspended load and the target person based on the three-dimensional point cloud data on the arrangement side of the first A point cloud group
このような第3実施形態におけるクレーン監視装置Dcは、第1実施形態におけるクレーン監視装置Daと同様な図4に示す処理S1ないし処理S7の各処理が実行される。 The crane monitoring device Dc in the third embodiment executes each of the processes S1 to S7 shown in FIG. 4, which is the same as the crane monitoring device Da in the first embodiment.
第3実施形態におけるクレーン監視装置Dcおよびこれに実装されたクレーン監視方法ならびに天井クレーンCRcは、第1実施形態におけるクレーン監視装置Daおよびこれに実装されたクレーン監視方法ならびに天井クレーンCRaと同様に、吊り荷の形状を認識して吊り荷と対象者との間の間隔をより正確に測定できる。 The crane monitoring device Dc and the crane monitoring method and the overhead crane CRc mounted on the crane monitoring device Dc in the third embodiment are the same as the crane monitoring device Da and the crane monitoring method and the overhead crane CRa mounted on the crane monitoring device Da in the first embodiment. The shape of the suspended load can be recognized and the distance between the suspended load and the subject can be measured more accurately.
上記クレーン監視装置Dcおよびクレーン監視方法ならびに天井クレーンCRcは、吊荷検出部1cおよび対象者検出部2cそれぞれが物体表面の形状を表す3次元点群データを生成するので、3次元点群データから吊り荷や対象者を容易に検出できる。
Since the crane monitoring device Dc, the crane monitoring method, and the overhead crane CRc each generate 3D point cloud data representing the shape of the object surface in the suspended
フックHKは、昇降方向に直交する平面内を、走行レールRL-1、RL-2に対するガータGTの移動およびガータGTに対する昇降台車LTの移動によって、移動する。このため、ガータGTの振動は、昇降台車LTの振動より小さいと推察される。上記クレーン監視装置Dcおよびクレーン監視方法ならびに天井クレーンCRcは、吊荷検出部1cおよび対象者検出部2cそれぞれをガータGTに配設するので、吊荷検出部1cおよび対象者検出部2cの各検出に与える振動の影響を昇降台車LTの場合より低減できる。また、作業者は、昇降台車LTよりガータGTの方がアクセス(アプローチ)し易いので、上記クレーン監視装置Dcおよびクレーン監視方法ならびに天井クレーンCRcは、吊荷検出部1cおよび対象者検出部2cの保守管理がし易い。
The hook HK moves in a plane orthogonal to the elevating direction by the movement of the garter GT with respect to the traveling rails RL-1 and RL-2 and the movement of the elevating carriage LT with respect to the garter GT. Therefore, it is presumed that the vibration of the garter GT is smaller than the vibration of the lift bogie LT. Since the crane monitoring device Dc, the crane monitoring method, and the overhead crane CRc each dispose the suspended
上記クレーン監視装置Dcおよびクレーン監視方法ならびに天井クレーンCRcは、監視の開始および終了を自動化できる。 The crane monitoring device Dc, the crane monitoring method, and the overhead crane CRc can automate the start and end of monitoring.
次に、別の実施形態について説明する。
(第4実施形態)
第1実施形態の構成に対し、第2実施形態が構成されたように、第4実施形態は、第3実施形態の構成に対して構成されたものである。すなわち、第4実施形態における天井クレーンCRdおよびクレーン監視装置Ddでは、吊荷検出部1dは、第3実施形態と同様に、3次元点群データを生成する点群データ生成部を備えて構成される一方、対象者検出部2dは、検出範囲全体に亘ってより確実に対象者Obを検出するために、検出範囲における被写体の画像を生成する撮像部を備えて構成される。
Next, another embodiment will be described.
(Fourth Embodiment)
The fourth embodiment is configured with respect to the configuration of the third embodiment, just as the second embodiment is configured with respect to the configuration of the first embodiment. That is, in the overhead crane CRd and the crane monitoring device Dd in the fourth embodiment, the suspended
図12は、第4実施形態におけるクレーン監視装置の構成を示すブロック図である。図13は、前記第4実施形態のクレーン監視装置によって監視される天井クレーンの構成を示す模式図である。図13Aは、上面図であり、図13Bは、側面図である。 FIG. 12 is a block diagram showing the configuration of the crane monitoring device according to the fourth embodiment. FIG. 13 is a schematic view showing the configuration of an overhead crane monitored by the crane monitoring device of the fourth embodiment. 13A is a top view and FIG. 13B is a side view.
第4実施形態におけるクレーン監視装置Ddを備える天井クレーンCRdは、図13に示すように、第1実施形態におけるクレーン監視装置Daに代え、第4実施形態におけるクレーン監視装置Ddを備える点を除き、第1実施形態における天井クレーンCRaと同様である。すなわち、天井クレーンCRdは、例えば、図13に示すように、1対の第1および第2走行レールRL-1、RL-2と、ガータGTと、昇降台車LTと備える。これらは、天井クレーンCRaの場合と同様であるので、その説明を省略する。 As shown in FIG. 13, the overhead crane CRd provided with the crane monitoring device Dd in the fourth embodiment is provided with the crane monitoring device Dd in the fourth embodiment in place of the crane monitoring device Da in the first embodiment, except that the crane monitoring device Dd is provided. It is the same as the overhead crane CRa in the first embodiment. That is, the overhead crane CRd includes, for example, a pair of first and second traveling rails RL-1 and RL-2, a garter GT, and an elevating carriage LT, as shown in FIG. Since these are the same as in the case of the overhead crane CRa, the description thereof will be omitted.
第4実施形態におけるクレーン監視装置Ddは、例えば、図12に示すように、吊荷検出部1dと、対象者検出部2dと、制御処理部3dと、入力部4と、出力部5と、インターフェース部(IF部)6と、記憶部7と、フック検出部8daとを備える。これら第4実施形態のクレーン監視装置Ddにおける入力部4、出力部5、IF部6および記憶部7は、それぞれ、第1実施形態のクレーン監視装置Daにおける入力部4、出力部5、IF部6および記憶部7と同様であるので、その説明を省略する。第4実施形態のクレーン監視装置Ddにおけるフック検出部8daは、第3実施形態のクレーン監視装置Dcにおけるフック検出部8caと同様であるので、その説明を省略する。
The crane monitoring device Dd in the fourth embodiment includes, for example, as shown in FIG. 12, a suspended
吊荷検出部1dは、制御処理部3dに有線または無線によって接続され、制御処理部3dの制御に従って、吊り荷および前記吊り荷の形状を検出する装置である。より具体的には、吊荷検出部1dは、検出方向の3次元点群データを生成する点群データ生成部11d(11d-A、11d-B)と、点群データ生成部11dで生成した3次元点群データに基づいて吊り荷および吊り荷の形状を検出する第1検出処理部12dとを備える。これら吊荷検出部1dにおける点群データ生成部11dおよび第1検出処理部12dは、それぞれ、第3実施形態の吊荷検出部1cにおける第1点群データ生成部11cおよび第1検出処理部12cと同様である。すなわち、点群データ生成部11dは、図12および図13Bに示すように、ガータGTの両端部それぞれに配設された2個の1組の第Aおよび第B点群データ生成部11d-A、11d-Bを備え、第1検出処理部12c(32c)は、これら第Aおよび第B点群データ生成部11d-A、11d-Bそれぞれで生成した各3次元点群データに基づいて吊り荷および前記吊り荷の形状を検出する。
The suspended
対象者検出部2dは、制御処理部3dに有線または無線によって接続され、制御処理部3dの制御に従って、対象者および前記対象者の形状を検出する装置である。より具体的には、対象者検出部2dは、撮像方向の画像を生成する撮像部21d(21d-A、21d-B)と、撮像部21dで生成した画像に基づいて対象者および対象者の形状を検出する第2検出処理部22dとを備える。撮像部21dは、第4実施形態では、フック側に検出方向を向くようにガータGTの端部に配設される。より詳しくは、互いに死角をカバーする観点から、撮像部21dは、図13Bに示すように、ガータGTの両端部それぞれに配設された2個の1組の第Aおよび第B撮像部21d-A、21d-Bを備え、第2検出処理部22dc(33d)は、これら第Aおよび撮像部21d-A、21d-Bそれぞれで生成した各画像に基づいて対象者および前記対象者の形状を検出する。第A撮像部21d-Aは、フック側に撮像方向を向くようにガータGTの一方の端部に配設され、第B撮像部21d-Bは、フック側に撮像方向を向くようにガータGTの他方の端部に配設される。すなわち、第Aおよび第B撮像部21d-A、21d-Bは、各撮像方向が、上方から斜め下方に向き、そして、互いに交差するように、ガータGTの各端部に配設される。よって、対象者検出部2dにおける第Aおよび第B撮像部21d-A、21d-Bは、それぞれ、吊荷検出部1dにおける第Aおよび第B点群データ生成部11d-A、11d-B)に並置するように配設される。このため、第A撮像部21d-A(または第B撮像部21d-B)は、ワイヤロープ、フックHKおよび荷物等の奥側がこれらによって遮蔽されて死角となるが、この死角は、第B撮像部21d-B(または第A撮像部21d-A)によってカバーされる。
The target
制御処理部3dは、クレーン監視装置Ddの各部1d、2d、4~7を当該各部の機能に応じてそれぞれ制御し、天井クレーンCRdに関わる対象者を監視するための回路である。制御処理部3dは、例えば、CPUおよびその周辺回路を備えて構成される。制御処理部3dには、その制御処理プログラムが実行されることによって、制御部31、第1検出処理部32d(12d)、第2検出処理部33d(22d)、間隔処理部34d、警告処理部35および第3検出処理部37da(82da)が機能的に構成される。これら第4実施形態の制御処理部3dにおける制御部31および警告処理部35は、それぞれ、第1実施形態の制御処理部3aにおける制御部31および警告処理部35と同様であるので、その説明を省略する。これら第4実施形態の制御処理部3dにおける第1検出処理部32d(12d)および第3検出処理部37da(82da)は、それぞれ、第3実施形態の制御処理部3cにおける第1検出処理部32c(12c)および第3検出処理部37ca(82ca)と同様であるので、その説明を省略する。
The
第2検出処理部33d(22d)は、撮像部21d(21d-A、21d-B)で生成した画像に基づいて対象者および前記対象者の形状を検出するものである。より具体的には、第4実施形態では、第2検出処理部33d(22d)は、第A撮像部21d-Aで生成した画像のうち、フックHKの位置より当該第A撮像部21d-Aの配設側(フックHKの位置より手前側)の画像において、第2実施形態の第2検出処理部33bと同様に処理することによって対象者を検出し、その形状を求め、第B撮像部21d-Bで生成した画像のうち、フックHKの位置より当該第B撮像部21d-Bの配設側(フックHKの位置より手前側)の画像において、第2実施形態の第2検出処理部33bと同様に処理することによって対象者を検出し、その形状を求める。より詳しくは、第2検出処理部33dは、フックHKの位置より第A撮像部21d-Aの配設側の画像から対象者を検出し、この検出した対象者の画素群(対象者と判定された画素の集合)からその輪郭を対象者の形状として求め、フックHKの位置より第B撮像部21d-Bの配設側の画像から対象者を検出し、この検出した対象者の画素群(対象者と判定された画素の集合)からその輪郭を対象者の形状として求める。
The second
間隔処理部34dは、第1検出処理部32d(12d)で検出した吊り荷と第2検出処理部33d(22d)で検出した対象者との間の最小間隔を第1検出処理部32d(12d)で検出した吊り荷の形状および第2検出処理部33d(22d)で検出した対象者の形状に基づいて求めるものである。より具体的には、第4実施形態では、間隔処理部34dは、まず、第A点群データ生成部11d-Aで生成した3次元点群データのうち、フックHKの位置より当該第A点群データ生成部11d-Aの配設側の3次元点群データから第1検出処理部32dで求められた吊り荷およびその形状と、第A撮像部21d-Aで生成した画像のうち、フックHKの位置より当該第A撮像部21d-Aの配設側の画像から第2検出処理部33dで求められた対象者およびその形状とにおいて、第2実施形態の間隔処理部34bと同様に処理することによって前記吊り荷と前記対象者との間の最小間隔(第A側最小間隔)を検出する。次に、間隔処理部34dは、第B点群データ生成部11d-Bで生成した3次元点群データのうち、フックHKの位置より当該第B点群データ生成部11d-Bの配設側の3次元点群データから第1検出処理部32dで求められた吊り荷およびその形状と、第B撮像部21d-Bで生成した画像のうち、フックHKの位置より当該第B撮像部21d-Bの配設側の画像から第2検出処理部33dで求められた対象者およびその形状とにおいて、第2実施形態の間隔処理部34bと同様に処理することによって前記吊り荷と前記対象者との間の最小間隔(第B側最小間隔)を検出する。そして、間隔処理部34cは、これら第A側最小間隔と第B側最小間隔とのうち、小さい方を最終的な最小間隔として求める。
The
このような第4実施形態におけるクレーン監視装置Ddは、第1実施形態におけるクレーン監視装置Ddと同様な図4に示す処理S1ないし処理S7の各処理が実行される。 The crane monitoring device Dd in the fourth embodiment executes each of the processes S1 to S7 shown in FIG. 4, which is the same as the crane monitoring device Dd in the first embodiment.
第4実施形態におけるクレーン監視装置Ddおよびこれに実装されたクレーン監視方法ならびに天井クレーンCRdは、第1実施形態におけるクレーン監視装置Daおよびこれに実装されたクレーン監視方法ならびに天井クレーンCRaと同様に、吊り荷の形状を認識して吊り荷と対象者との間の間隔をより正確に測定できる。 The crane monitoring device Dd and the crane monitoring method and the overhead crane CRd mounted on the crane monitoring device Dd in the fourth embodiment are the same as the crane monitoring device Da and the crane monitoring method and the overhead crane CRa mounted on the crane monitoring device Da in the first embodiment. The shape of the suspended load can be recognized and the distance between the suspended load and the subject can be measured more accurately.
上記クレーン監視装置Ddおよびクレーン監視方法ならびに天井クレーンCRdは、形状を検出する吊荷検出部1dに点群データ生成部11d(11d-A、11d-B)を優先的に用い、対象者検出部2dに撮像部21d(21d-A、21d-B)を用いることで、分解能に偏りの有る点群データ生成部11dであっても、検出範囲における高い分解能の領域によって吊り荷およびその形状を点群データ生成部11dで的確に検出する一方、吊り荷の周囲に散らばる対象者を撮像部21dで検出できる。
In the crane monitoring device Dd, the crane monitoring method, and the overhead crane CRd, the point cloud
上記クレーン監視装置Ddおよびクレーン監視方法ならびに天井クレーンCRdは、吊荷検出部1dおよび対象者検出部2dそれぞれをガータGTに配設するので、吊荷検出部1dおよび対象者検出部2dの各検出に与える振動の影響を昇降台車LTの場合より低減できる。また、作業者は、昇降台車LTよりガータGTの方がアクセス(アプローチ)し易いので、上記クレーン監視装置Ddおよびクレーン監視方法ならびに天井クレーンCRdは、吊荷検出部1dおよび対象者検出部2dの保守管理がし易い。
Since the crane monitoring device Dd, the crane monitoring method, and the overhead crane CRd dispose the suspended
上記クレーン監視装置Ddおよびクレーン監視方法ならびに天井クレーンCRdは、監視の開始および終了を自動化できる。 The crane monitoring device Dd, the crane monitoring method, and the overhead crane CRd can automate the start and end of monitoring.
なお、上述の実施形態では、操作ペンダントHPの操作状況やフックHKの荷重に基づいて監視の開始を判定したが、画像を生成する撮像部が設けられ、制御部31は、前記撮像部で生成された画像から、作業者(対象者)がフックHKの近傍に立ち止まっており、腕を動かしていることを検出した場合に、前記監視を開始してもよい。例えば、深層学習モデルを用いた、公知のopen pose技術を用いて画像から作業者の骨格が検出され、この検出された骨格の脚部に基づいて立ち止まっているか否かが判定され、立ち止まっている場合に、前記検出された骨格の腕部に基づいて腕を動かしているか否かが判定される。
In the above-described embodiment, the start of monitoring is determined based on the operation status of the operation pendant HP and the load of the hook HK, but an image pickup unit for generating an image is provided, and the
また、第1ないし第4実施形態におけるクレーン監視装置Da~Ddは、間隔処理部34で求めた最小距離が所定の第2閾値以下または未満である場合に、天井クレーンCRa~CRdの動作を停止する停止処理部をさらに備えてもよい。このような停止処理部36は、例えば、図1、図5、図8および図12に破線で示すように、制御処理部3a~3dに機能的に構成される。前記第2閾値は、例えば1mや2m等で安全性等を考慮して適宜に予め設定される。前記第2閾値は、前記閾値と同値であってよく、異値であってよい。このようなクレーン監視装置Da~Ddは、停止処理部36をさらに備えるので、天井クレーンの動作に起因する不具合を回避できる。
Further, the crane monitoring devices Da to Dd in the first to fourth embodiments stop the operation of the overhead cranes CRa to CRd when the minimum distance obtained by the interval processing unit 34 is equal to or less than a predetermined second threshold value. A stop processing unit may be further provided. Such a
本発明を表現するために、上述において図面を参照しながら実施形態を通して本発明を適切且つ十分に説明したが、当業者であれば上述の実施形態を変更および/または改良することは容易に為し得ることであると認識すべきである。したがって、当業者が実施する変更形態または改良形態が、請求の範囲に記載された請求項の権利範囲を離脱するレベルのものでない限り、当該変更形態または当該改良形態は、当該請求項の権利範囲に包括されると解釈される。 In order to express the present invention, the present invention has been appropriately and sufficiently described through the embodiments with reference to the drawings described above, but those skilled in the art can easily change and / or improve the above-described embodiments. It should be recognized that it is possible. Therefore, unless the modified or improved form implemented by a person skilled in the art is at a level that deviates from the scope of rights of the claims stated in the claims, the modified form or the improved form is the scope of rights of the claims. It is interpreted to be included in.
Da~Dd クレーン監視装置
CRa~CRd 天井クレーン
1a~1d 吊荷検出部
2a~2d 対象者検出部
3a~3d 制御処理部
4 出力部
6 記憶部
8ca(8cb) フック検出部
11a 第1点群データ生成部
11b 点群データ生成部
11c-A 第1A点群データ生成部
11c-B 第1B点群データ生成部
11d-A 第A点群データ生成部
11d-B 第B点群データ生成部
21a 第2点群データ生成部
21b 撮像部
21c-A 第2A点群データ生成部
21c-B 第2B点群データ生成部
21d-A 第A撮像部
21d-B 第B撮像部
31 制御部
32a~32d(12a~12d) 第1検出処理部
33a~33d(22a~22d) 第2検出処理部
34a~34d 間隔処理部
35 警告処理部
36 停止処理部
37ca(82ca)、37cb(82cb)、37da(82da)、37db(82db) 第3検出処理部
81ca、81cb 第3点群データ生成部
Da to Dd Crane monitoring device CRa to
Claims (9)
吊り荷および前記吊り荷の形状を検出する吊荷検出部と、
前記対象者および前記対象者の形状を検出する対象者検出部と、
前記吊荷検出部で検出した吊り荷と前記対象者検出部で検出した対象者との間の最小間隔を前記吊荷検出部で検出した吊り荷の形状および前記対象者検出部で検出した対象者の形状に基づいて求める間隔処理部と、
前記間隔処理部で求めた最小間隔が所定の閾値以下または未満である場合に、警告を外部に報知する警告処理部とを備え、
前記吊荷検出部は、前記フックを特定し、前記特定したフックを含む所定範囲の検出領域を設定し、前記設定した検出領域内で前記吊り荷および前記吊り荷の形状を検出する、
クレーン監視装置。 It is a crane monitoring device that monitors the target person involved in an overhead crane equipped with an elevating trolley that is configured to move the garter and suspends the hook so that it can be lifted and lowered.
A suspended load detector that detects the suspended load and the shape of the suspended load, and
A target person detection unit that detects the target person and the shape of the target person,
The minimum distance between the suspended load detected by the suspended load detection unit and the target person detected by the target person detection unit is the shape of the suspended load detected by the suspended load detection unit and the target detected by the target person detection unit. The interval processing unit that is obtained based on the shape of the person,
A warning processing unit for notifying the outside of a warning when the minimum interval obtained by the interval processing unit is equal to or less than a predetermined threshold value is provided.
The suspended load detecting unit identifies the hook, sets a detection area in a predetermined range including the specified hook, and detects the suspended load and the shape of the suspended load within the set detection area.
Crane monitoring device.
前記対象者検出部は、前記フック側に検出方向を向くように前記昇降台車に配設され、前記検出方向の3次元点群データを生成する第2点群データ生成部と、前記第2点群データ生成部で生成した3次元点群データに基づいて前記対象者および前記対象者の形状を検出する第2検出処理部とを備え、
前記第1点群データ生成部と前記第2点群データ生成部は、別体、または、兼用されて一体である、
請求項1に記載のクレーン監視装置。 The suspended load detection unit is arranged on the elevating platform so as to face the detection direction toward the hook side, and is a first point cloud data generation unit that generates three-dimensional point cloud data in the detection direction, and the first point cloud. A first detection processing unit that detects the suspended load and the shape of the suspended load based on the three-dimensional point cloud data generated by the data generation unit is provided.
The target person detection unit is arranged on the elevating platform so as to face the detection direction toward the hook side, and is a second point cloud data generation unit that generates three-dimensional point cloud data in the detection direction, and the second point. A second detection processing unit that detects the target person and the shape of the target person based on the three-dimensional point cloud data generated by the group data generation unit is provided.
The first point cloud data generation unit and the second point cloud data generation unit are separate or combined.
The crane monitoring device according to claim 1.
前記対象者検出部は、前記フック側に撮像方向を向くように前記昇降台車に配設され、前記撮像方向の画像を生成する撮像部と、前記撮像部で生成した画像に基づいて前記対象者および前記対象者の形状を検出する第2検出処理部とを備える、
請求項1に記載のクレーン監視装置。 The suspended load detection unit is arranged on the elevating platform so as to face the detection direction toward the hook side, and is a point cloud data generation unit that generates three-dimensional point cloud data in the detection direction, and the point cloud data generation unit. It is provided with a suspended load and a first detection processing unit that detects the shape of the suspended load based on the generated three-dimensional point cloud data.
The target person detection unit is arranged on the elevating trolley so as to face the image pickup direction toward the hook side, the image pickup unit that generates an image in the image pickup direction, and the target person based on the image generated by the image pickup unit. And a second detection processing unit that detects the shape of the subject.
The crane monitoring device according to claim 1.
前記対象者検出部は、前記フック側に検出方向を向くように前記ガータの端部に配設され、前記検出方向の3次元点群データを生成する第2点群データ生成部と、前記第2点群データ生成部で生成した3次元点群データに基づいて前記対象者および前記対象者の形状を検出する第2検出処理部とを備え、
前記第1点群データ生成部と前記第2点群データ生成部は、別体、または、兼用されて一体である、
請求項1に記載のクレーン監視装置。 The suspended load detection unit is arranged at the end of the garter so as to face the detection direction toward the hook side, and the first point cloud data generation unit and the first point cloud data generation unit that generate three-dimensional point cloud data in the detection direction. A first detection processing unit that detects the suspended load and the shape of the suspended load based on the three-dimensional point cloud data generated by the point cloud data generation unit is provided.
The target person detection unit is arranged at the end of the garter so as to face the detection direction toward the hook side, and has a second point cloud data generation unit that generates three-dimensional point cloud data in the detection direction, and the first. A second detection processing unit that detects the target person and the shape of the target person based on the three-dimensional point cloud data generated by the two-point cloud data generation unit is provided.
The first point cloud data generation unit and the second point cloud data generation unit are separate or combined.
The crane monitoring device according to claim 1.
前記対象者検出部は、前記フック側に撮像方向を向くように前記ガータの端部に配設され、前記撮像方向の画像を生成する撮像部と、前記撮像部で生成した画像に基づいて前記対象者および前記対象者の形状を検出する第2検出処理部とを備える、
請求項1に記載のクレーン監視装置。 The suspended load detection unit is arranged at the end of the garter so as to face the detection direction toward the hook side, and a point cloud data generation unit that generates three-dimensional point cloud data in the detection direction and the point cloud data generation unit. A first detection processing unit that detects the suspended load and the shape of the suspended load based on the three-dimensional point cloud data generated by the unit is provided.
The subject detection unit is arranged at the end of the garter so as to face the image pickup direction toward the hook side, and is based on an image pickup unit that generates an image in the image pickup direction and an image generated by the image pickup unit. It includes a target person and a second detection processing unit that detects the shape of the target person.
The crane monitoring device according to claim 1.
請求項1ないし請求項5のいずれか1項に記載のクレーン監視装置。 A start / end control unit for controlling the start of the monitoring and the end of the monitoring is further provided.
The crane monitoring device according to any one of claims 1 to 5.
請求項1ないし請求項6のいずれか1項に記載のクレーン監視装置。 A stop processing unit for stopping the operation of the overhead crane when the minimum interval obtained by the interval processing unit is equal to or less than a predetermined second threshold value is further provided.
The crane monitoring device according to any one of claims 1 to 6.
吊り荷および前記吊り荷の形状を検出する吊荷検出工程と、
前記対象者および前記対象者の形状を検出する対象者検出工程と、
前記吊荷検出工程で検出した吊り荷と前記対象者検出工程で検出した対象者との間の最小間隔を前記吊荷検出工程で検出した吊り荷の形状および前記対象者検出工程で検出した対象者の形状に基づいて求める間隔処理工程と、
前記間隔処理工程で求めた最小間隔が所定の閾値以下または未満である場合に、警告を外部に報知する警告処理工程とを備え、
前記吊荷検出工程は、前記フックを特定し、前記特定したフックを含む所定範囲の検出領域を設定し、前記設定した検出領域内で前記吊り荷および前記吊り荷の形状を検出する、
クレーン監視方法。 It is a crane monitoring method that monitors the target person involved in an overhead crane equipped with an elevating trolley that is configured to move the garter and suspends the hook so that it can be lifted and lowered.
The suspended load detection process for detecting the suspended load and the shape of the suspended load, and
The target person detection step for detecting the target person and the shape of the target person, and
The minimum distance between the suspended load detected in the suspended load detection step and the target person detected in the target person detection step is the shape of the suspended load detected in the suspended load detection step and the target detected in the target person detection step. The interval processing process obtained based on the shape of the person,
A warning processing step of notifying the outside of a warning when the minimum interval obtained in the interval processing step is equal to or less than a predetermined threshold value is provided.
The suspended load detection step identifies the hook, sets a detection area in a predetermined range including the specified hook, and detects the suspended load and the shape of the suspended load within the set detection area.
Crane monitoring method.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020170172A JP7447373B2 (en) | 2020-10-07 | 2020-10-07 | Crane monitoring device and method and overhead crane |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020170172A JP7447373B2 (en) | 2020-10-07 | 2020-10-07 | Crane monitoring device and method and overhead crane |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022061911A true JP2022061911A (en) | 2022-04-19 |
JP7447373B2 JP7447373B2 (en) | 2024-03-12 |
Family
ID=81210628
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020170172A Active JP7447373B2 (en) | 2020-10-07 | 2020-10-07 | Crane monitoring device and method and overhead crane |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7447373B2 (en) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05229782A (en) * | 1992-02-15 | 1993-09-07 | Nippon Steel Corp | Crane device with built-in remote wireless controller |
JP2017019647A (en) * | 2015-07-14 | 2017-01-26 | 株式会社五合 | Notification device and moving system |
JP2019024150A (en) * | 2017-07-21 | 2019-02-14 | 株式会社タダノ | Guide information display device and crane |
JP2019069836A (en) * | 2017-10-06 | 2019-05-09 | 前田建設工業株式会社 | Suspended load alarm system |
JP2020007134A (en) * | 2018-07-12 | 2020-01-16 | Ihi運搬機械株式会社 | Hanging load monitoring system for crane |
JP2020093890A (en) * | 2018-12-12 | 2020-06-18 | 株式会社神鋼エンジニアリング&メンテナンス | Crane work monitoring system, crane work monitoring method, dangerous state determination device, and program |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
FI125689B (en) | 2012-10-02 | 2016-01-15 | Konecranes Global Oy | Handling a load with a load handler |
-
2020
- 2020-10-07 JP JP2020170172A patent/JP7447373B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05229782A (en) * | 1992-02-15 | 1993-09-07 | Nippon Steel Corp | Crane device with built-in remote wireless controller |
JP2017019647A (en) * | 2015-07-14 | 2017-01-26 | 株式会社五合 | Notification device and moving system |
JP2019024150A (en) * | 2017-07-21 | 2019-02-14 | 株式会社タダノ | Guide information display device and crane |
JP2019069836A (en) * | 2017-10-06 | 2019-05-09 | 前田建設工業株式会社 | Suspended load alarm system |
JP2020007134A (en) * | 2018-07-12 | 2020-01-16 | Ihi運搬機械株式会社 | Hanging load monitoring system for crane |
JP2020093890A (en) * | 2018-12-12 | 2020-06-18 | 株式会社神鋼エンジニアリング&メンテナンス | Crane work monitoring system, crane work monitoring method, dangerous state determination device, and program |
Also Published As
Publication number | Publication date |
---|---|
JP7447373B2 (en) | 2024-03-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2018115078A (en) | Optical detection system for lift crane | |
US10495880B2 (en) | Controlling of lifting device | |
WO2018220614A1 (en) | Method and apparatus for load handling | |
US9718651B2 (en) | Determining movement distance of lifting device | |
WO2011060640A1 (en) | Hook pose detecting equipment and crane | |
KR102463556B1 (en) | Monitoring system for preventing lift objects collision against crane | |
CN103998367A (en) | Crane control | |
CN102862915A (en) | Performance line display unit | |
KR102369031B1 (en) | APPARATUS FOR Real-Time MONITORING COLLISION PREVENTING OF CRANE AND CONTROL METHOD THEREOF | |
JP5380747B2 (en) | Monitoring system and monitoring method under suspended load | |
KR102623060B1 (en) | Accident prevention monitoring method and system for tower crane | |
KR102357499B1 (en) | Tower crane autonomous operation system and autonomous operation method thereof | |
JP2015214409A (en) | Boom collision avoidance system for work machine | |
CN110615368A (en) | Building construction tower crane anti-collision early warning system considering wind speed influence | |
CN112010187B (en) | Monitoring method and device based on tower crane | |
CN105253775A (en) | Tower crane jacking trim control system, method and device and tower crane | |
JP2021008366A (en) | Rope shaking detection device | |
JP2019167221A (en) | Climbing crane control method, building construction method, and discrimination method of suspended load for climbing crane | |
JP2022061911A (en) | Crane monitoring device and crane monitoring method as well as overhead crane | |
JP2019064814A (en) | Target-position specifying device and suspension member guiding method and system for crane using target-position specifying device | |
CN114647011B (en) | Anti-hanging monitoring method, device and system for integrated cards | |
CN207748759U (en) | A kind of bridge crane | |
US20240025708A1 (en) | Information acquisition system | |
JPS6087198A (en) | Method and device for monitoring crane | |
JP7351231B2 (en) | Hanging load monitoring device, crane, hanging load monitoring method and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221209 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20221209 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20221209 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230907 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230926 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231106 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240130 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240201 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7447373 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |