JP2016001354A - Projection area setting device, and work detection system using the projection area setting device - Google Patents

Projection area setting device, and work detection system using the projection area setting device Download PDF

Info

Publication number
JP2016001354A
JP2016001354A JP2014120179A JP2014120179A JP2016001354A JP 2016001354 A JP2016001354 A JP 2016001354A JP 2014120179 A JP2014120179 A JP 2014120179A JP 2014120179 A JP2014120179 A JP 2014120179A JP 2016001354 A JP2016001354 A JP 2016001354A
Authority
JP
Japan
Prior art keywords
projection
area
detection
setting
projection area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014120179A
Other languages
Japanese (ja)
Inventor
伸行 刀根
Nobuyuki Tone
伸行 刀根
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority to JP2014120179A priority Critical patent/JP2016001354A/en
Publication of JP2016001354A publication Critical patent/JP2016001354A/en
Pending legal-status Critical Current

Links

Images

Abstract

PROBLEM TO BE SOLVED: To obtain a projection area setting device that can more easily set a projection area, and a work detection system using the projection area setting device.SOLUTION: A projection area setting device includes an irradiation part that can limit an irradiation range of light with which a projection surface C is irradiated to a partial area of a projection range. The projection area setting device further includes an area setting part that sets, as a projection area R, an area that is at least a part of the projection range and on which light from the irradiation part is projected. At least either one factor of the size, position, or shape of the projection area R, color to be projected, or brightness of projection can be changed by operating instruction means on the projection surface C, and the changed projection area R is set by the area setting part.

Description

本発明は、投影領域設定装置および当該投影領域設定装置を用いた作業検知システムに関するものである。   The present invention relates to a projection area setting device and a work detection system using the projection area setting device.

従来より、投影領域設定装置を用いた作業検知システムが知られている(例えば、特許文献1参照)。   Conventionally, an operation detection system using a projection area setting device is known (see, for example, Patent Document 1).

この特許文献1に記載の作業検知システムは、距離画像センサと、検知装置と、報知装置と、投影領域設定装置と、を備えている。   The work detection system described in Patent Document 1 includes a distance image sensor, a detection device, a notification device, and a projection region setting device.

ここで、距離画像センサは、作業領域の距離画像を出力するものである。また、検知装置は、距離画像に現れる作業主体または作業主体が扱うワークを検知対象としており、距離画像に基づき作業内容の異常を検知した際に、報知命令を出力するものである。   Here, the distance image sensor outputs a distance image of the work area. The detection device targets a work subject appearing in the distance image or a work handled by the work subject, and outputs a notification command when an abnormality in the work content is detected based on the distance image.

また、報知装置は、報知命令が入力されると報知動作を行うものである。そして、投影領域設定装置は、距離画像内で検知装置が検知対象の存否を検知する複数の検知領域を設定するものである。   The notification device performs a notification operation when a notification command is input. The projection region setting device sets a plurality of detection regions in which the detection device detects the presence or absence of a detection target in the distance image.

この特許文献1では、距離画像内で検知装置が検知対象の存否を検知する複数の検知領域を、以下に示す方法で設定している。   In Patent Document 1, a plurality of detection areas in which a detection device detects the presence / absence of a detection target in a distance image is set by the following method.

まず、設定対象の検知領域に対応した大きさに形成された設定用シートを作業領域に配置する。次に、作業領域に配置した設定用シートを二次元カメラで撮影する。   First, a setting sheet formed in a size corresponding to the detection area to be set is placed in the work area. Next, the setting sheet placed in the work area is photographed with a two-dimensional camera.

その後、投影領域設定装置が、二次元カメラの画像を解析することによって作業領域に配置された設定用シートの位置および範囲を検出する。そして、検出された設定用シートの位置および範囲に基づき検知領域を設定する。   After that, the projection area setting device detects the position and range of the setting sheet arranged in the work area by analyzing the image of the two-dimensional camera. Then, a detection area is set based on the detected position and range of the setting sheet.

特開2013−145422号公報JP 2013-145422 A

しかしながら、上記従来の技術では、投影領域の状態を変更させる際には、変更後の投影領域に対応するように設定用シートを作業領域に再度配置させる必要があり、投影領域の設定に手間がかかっていた。   However, in the conventional technique, when changing the state of the projection area, it is necessary to arrange the setting sheet again in the work area so as to correspond to the projection area after the change, and it is troublesome to set the projection area. It was hanging.

そこで、本発明は、より容易に投影領域を設定することのできる投影領域設定装置および当該投影領域設定装置を用いた作業検知システムを得ることを目的とする。   Therefore, an object of the present invention is to obtain a projection region setting device that can set a projection region more easily and a work detection system using the projection region setting device.

本発明の投影領域設定装置は、投影面の投影範囲に光を照射することが可能であるとともに、照射される光の照射範囲を前記投影範囲の一部の領域に制限することが可能な照射部を備えている。   The projection region setting device of the present invention can irradiate light onto the projection range of the projection surface and can irradiate the irradiation range of the irradiated light to a partial region of the projection range. Department.

さらに、投影領域設定装置は、前記投影範囲の少なくとも一部の領域であって前記照射部から照射された光が投影される領域を、投影領域として設定する領域設定部を備えている。   The projection area setting device further includes an area setting unit that sets, as a projection area, an area that is at least a part of the projection range and onto which the light emitted from the irradiation unit is projected.

ここで、前記投影領域は、前記投影面上で指示手段を操作することで、当該投影領域の大きさ、位置、形状、投影される色、および投影される明るさのうち少なくともいずれか1つの要素を変化させることができるようになっている。さらに、変化した前記投影領域が前記領域設定部によって設定されるようになっている。   Here, the projection area operates at least one of a size, a position, a shape, a projected color, and a projected brightness of the projection area by operating an instruction unit on the projection plane. The elements can be changed. Furthermore, the changed projection area is set by the area setting unit.

また、本発明の作業検知システムは、作業領域の距離画像を出力する距離画像センサを備えている。さらに、作業検知システムは、前記距離画像に現れる作業主体又は前記作業主体が扱うワークを検知対象とし、前記距離画像をもとに作業内容の異常を検知すると報知命令を出力する検知装置を備えている。   In addition, the work detection system of the present invention includes a distance image sensor that outputs a distance image of the work area. Furthermore, the work detection system includes a detection device that outputs a notification command when an abnormality of a work content is detected based on the distance image, with the work subject appearing in the distance image or a work handled by the work subject being detected. Yes.

そして、作業検知システムは、前記報知命令が入力されると報知動作を行う報知装置と、前記距離画像内で前記検知装置が検知対象の存否を検知する検知領域及び検知順序を設定する設定装置として用いられる前記投影領域設定装置を備えている。   The work detection system includes a notification device that performs a notification operation when the notification command is input, and a setting device that sets a detection region and a detection order in which the detection device detects the presence or absence of a detection target in the distance image. The projection area setting device used is provided.

本発明によれば、より容易に投影領域を設定することのできる投影領域設定装置および当該投影領域設定装置を用いた作業検知システムを得ることができる。   According to the present invention, it is possible to obtain a projection area setting device that can set a projection area more easily and a work detection system that uses the projection area setting device.

本実施形態にかかる投影領域設定装置を用いた作業検知システムの設定方法を説明する図であって、(a)および(c)は平面図、(b)および(d)は側断面図である。It is a figure explaining the setting method of the operation | work detection system using the projection area | region setting apparatus concerning this embodiment, Comprising: (a) And (c) is a top view, (b) And (d) is a sectional side view. . 本実施形態にかかる投影領域設定装置を用いて設定される投影領域を示す図である。It is a figure which shows the projection area | region set using the projection area | region setting apparatus concerning this embodiment. 本実施形態にかかる指示手段を示す図であって、(a)は指先を示す図、(b)はポインタを示す図である。It is a figure which shows the instruction | indication means concerning this embodiment, Comprising: (a) is a figure which shows a fingertip, (b) is a figure which shows a pointer. 投影領域を移動させる方法を(a)〜(c)の順に示す図である。It is a figure which shows the method of moving a projection area in order of (a)-(c). 投影領域の大きさを変更させる方法を(a)〜(c)の順に示す図である。It is a figure which shows the method of changing the magnitude | size of a projection area in order of (a)-(c). 投影領域設定装置を用いた作業検知システムの別の設定方法を説明する図であって、(a)および(c)は平面図、(b)および(d)は側断面図である。It is a figure explaining another setting method of the operation | work detection system using a projection area | region setting apparatus, Comprising: (a) And (c) is a top view, (b) And (d) is a sectional side view. 投影領域設定装置を用いた作業検知システムのさらに別の設定方法を説明する図であって、(a)および(c)は平面図、(b)および(d)は側断面図である。It is a figure explaining another setting method of the operation | work detection system using a projection area | region setting apparatus, Comprising: (a) And (c) is a top view, (b) And (d) is a sectional side view. 作業検知システムの設定方法で用いられる反射部材の説明図である。It is explanatory drawing of the reflection member used with the setting method of a work detection system. 投影領域設定装置を用いた作業検知システムの設定方法を説明する図であって、(a)はワークを置いた状態の平面図、(b)は側面図である。It is a figure explaining the setting method of the operation | work detection system using a projection area | region setting apparatus, Comprising: (a) is a top view of the state which put the workpiece | work, (b) is a side view. 作業検知システムのブロック図である。It is a block diagram of a work detection system. 作業検知システムの作業領域を示す図であって、(a)は正面図、(b)は側面図である。It is a figure which shows the work area | region of a work detection system, Comprising: (a) is a front view, (b) is a side view. 検知対象の作業内容の一例を(a)〜(e)の順に示した説明図である。It is explanatory drawing which showed an example of the work content of a detection target in order of (a)-(e). 作業工程ごとの撮像画像の一例を(a)〜(i)の順に示した図である。It is the figure which showed an example of the captured image for every work process in order of (a)-(i). 本実施形態にかかる作業検知システムの動作を説明するフローチャートである。It is a flowchart explaining operation | movement of the work detection system concerning this embodiment.

以下、本発明の実施形態について図面を参照しつつ詳細に説明する。なお、以下では、投影領域設定装置を用いた作業検知システムについて例示する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. In the following, an example of a work detection system using a projection area setting device will be described.

本実施形態にかかる作業検知システムは、作業者が複数のワーク(例えば完成品や取扱説明書など)を箱に梱包する梱包作業において、ワーク(検知対象物)が所定位置に置かれたか否かを検出するために用いられるものである。なお、作業検知システムの適用事例は本実施形態に限定されるものではなく、種々の用途に適用が可能である。   In the work detection system according to the present embodiment, whether or not a work (detection target) is placed at a predetermined position in a packing work in which an operator packs a plurality of works (for example, finished products and instruction manuals) in a box. Is used to detect. The application examples of the work detection system are not limited to this embodiment, and can be applied to various uses.

図11は、本実施形態の作業検知システムが適用された作業台50を示しており、図11(a)は作業台50の正面図、図11(b)は作業台50の側面図である。なお、以下の説明では特に断りがないかぎり、図11(a)に示す向きにおいて上下左右の方向を規定し、図11(b)における左側を前側、右側を後側として説明を行うものとする。   FIG. 11 shows a workbench 50 to which the work detection system of the present embodiment is applied. FIG. 11A is a front view of the workbench 50 and FIG. 11B is a side view of the workbench 50. . In the following description, unless otherwise specified, the vertical and horizontal directions are defined in the direction shown in FIG. 11A, and the left side in FIG. 11B is described as the front side and the right side as the rear side. .

作業台50は、金属パイプを組み合わせて構成されるフレーム51と、フレーム51にそれぞれ支持された3段の棚板52,53,54とを備えている。   The work table 50 includes a frame 51 configured by combining metal pipes and three-stage shelf plates 52, 53, and 54 respectively supported by the frame 51.

下段および中段の棚板52,53は、平面視の形状が略正方形(多角形状)の棚板であって、外形寸法が略同じ寸法となっている。そして、下段の棚板52にはパーソナルコンピュータPC1が載置されている。一方、中段の棚板53は、作業者が作業しやすい高さ位置(例えば作業者の腰付近の高さ位置)に設けられており、この棚板53上で検査対象の梱包作業が行われるようになっている。   The lower and middle shelf plates 52 and 53 are shelf plates having a substantially square shape (polygonal shape) in plan view and have substantially the same outer dimensions. A personal computer PC1 is placed on the lower shelf 52. On the other hand, the middle shelf 53 is provided at a height position where the worker can easily work (for example, the height near the waist of the worker), and the packing work to be inspected is performed on the shelf 53. It is like that.

上段の棚板54は、平面視の形状が長方形状に形成されており、棚板53と左右方向の幅寸法は同じであるが、棚板53に比べて奥行き寸法が小さくなっている。この棚板54は、棚板53の奥側寄りに設けられており、箱の中に入れられるワークW1,W2を載せておく部品棚として用いられるものである。フレーム51の上方には、作業者の背丈よりも高い位置に、金属パイプを組み合わせて構成された支持部55が設けられており、この支持部55に距離画像センサ1と音出力装置4と照射装置5とが取り付けられている。   The upper shelf plate 54 is formed in a rectangular shape in plan view, and the width dimension in the left-right direction is the same as that of the shelf plate 53, but the depth dimension is smaller than that of the shelf plate 53. This shelf board 54 is provided near the back side of the shelf board 53, and is used as a parts shelf on which the workpieces W1, W2 to be put in the box are placed. Above the frame 51, a support portion 55 configured by combining metal pipes is provided at a position higher than the height of the operator, and the distance image sensor 1, the sound output device 4, and the irradiation are provided on the support portion 55. A device 5 is attached.

図10は、作業検知システムのブロック図である。この作業検知システムは、距離画像センサ1と検知装置2と入力装置3と音出力装置4と照射装置5とモニタ6とを主要な構成として備えている。なお、検知装置2と入力装置3とモニタ6とは、例えば、図11に示すように、ノート型のパーソナルコンピュータPC1で実現することができる。   FIG. 10 is a block diagram of the work detection system. This work detection system includes a distance image sensor 1, a detection device 2, an input device 3, a sound output device 4, an irradiation device 5, and a monitor 6 as main components. Note that the detection device 2, the input device 3, and the monitor 6 can be realized by, for example, a notebook personal computer PC1 as shown in FIG.

距離画像センサ1は、支持部55に取り付けられ、作業領域である中段の棚板53および上段の棚板54を上方から撮影するものである。   The distance image sensor 1 is attached to a support portion 55 and photographs the middle shelf 53 and the upper shelf 54, which are work areas, from above.

この距離画像センサ1の測定方式としては、レーザー・パターンを投影する方式やTOF(Time Of Flight)方式などの周知の測定方式を用いることができる。距離画像センサ1は、これら周知の測定方式を用いて撮像領域に存在する物体までの距離を検出し、各画素の画素値が検出対象までの距離となる距離画像を作成し、距離画像の画像データを検知装置2に出力するようになっている。   As a measurement method of the distance image sensor 1, a known measurement method such as a method of projecting a laser pattern or a time of flight (TOF) method can be used. The distance image sensor 1 detects the distance to the object existing in the imaging region using these known measurement methods, creates a distance image in which the pixel value of each pixel is the distance to the detection target, and the image of the distance image Data is output to the detection device 2.

また、距離画像センサ1は、撮像範囲内の2次元画像を撮影する機能も備えており、距離画像の画像データに加えて、二次元画像の画像データを検知装置2へ出力するようになっている。このように、本実施形態では、距離画像センサ1が、作業領域の二次元画像を撮影する二次元カメラを兼用しているが、距離画像センサ1とは別に二次元カメラを備えるようにしてもよい。   The distance image sensor 1 also has a function of capturing a two-dimensional image within the imaging range, and outputs image data of a two-dimensional image to the detection device 2 in addition to image data of the distance image. Yes. As described above, in the present embodiment, the distance image sensor 1 also serves as a two-dimensional camera that captures a two-dimensional image of the work area. However, the distance image sensor 1 may include a two-dimensional camera separately from the distance image sensor 1. Good.

入力装置3は、パーソナルコンピュータPC1が備えるキーボードやマウスなどの入力デバイスで構成されている。   The input device 3 is composed of input devices such as a keyboard and a mouse provided in the personal computer PC1.

音出力装置4は、作業領域を含む空間に音を出力するスピーカ(図示せず)を有しており、スピーカを下側に向けた状態で支持部55に取り付けられている。このように、スピーカを下側に向けた状態で支持部55に取り付けることで、異常の発生を報知する報知音などの音を下側へ出力するようにしている。   The sound output device 4 has a speaker (not shown) that outputs sound in a space including a work area, and is attached to the support portion 55 with the speaker facing downward. Thus, by attaching the speaker to the support portion 55 with the speaker facing downward, a sound such as a notification sound for notifying the occurrence of an abnormality is output downward.

照射装置5としては、例えば、液晶プロジェクタを用いることができる。この照射装置5は、支持部55に取り付けられており、上段の棚板54および中段の棚板53を光の投影範囲としている。   As the irradiation device 5, for example, a liquid crystal projector can be used. The irradiation device 5 is attached to a support portion 55, and uses an upper shelf plate 54 and an intermediate shelf plate 53 as a light projection range.

さらに、照射装置5は、照射される光を投影範囲の一部に制限する機能を有しており、棚板53および棚板54の所望の位置に光を照射することができるようになっている。   Furthermore, the irradiation device 5 has a function of limiting the irradiated light to a part of the projection range, and can irradiate the desired position of the shelf board 53 and the shelf board 54 with light. Yes.

本実施形態では、音出力装置4と照射装置5とで報知装置が構成されており、検知装置2からの報知命令にしたがって音および光を生じさせることで報知動作を行うようにしている。しかしながら、報知装置として音出力装置4または照射装置5のいずれか一方のみを備えるようにしてもよい。   In this embodiment, the sound output device 4 and the irradiation device 5 constitute a notification device, and a notification operation is performed by generating sound and light according to a notification command from the detection device 2. However, only one of the sound output device 4 and the irradiation device 5 may be provided as a notification device.

モニタ6は、検知領域や検知順序を設定するための設定画面を表示したり、検知結果などを表示したりするものである。このモニタ6としては、例えば、パーソナルコンピュータPC1が備える液晶ディスプレイを用いることができる。なお、モニタ6に表示される表示内容は、検知装置2によって制御されている。   The monitor 6 displays a setting screen for setting a detection area and a detection order, and displays a detection result and the like. As the monitor 6, for example, a liquid crystal display provided in the personal computer PC1 can be used. Note that the display content displayed on the monitor 6 is controlled by the detection device 2.

検知装置2は、距離画像センサ1から入力される距離画像に現れるワークや作業者の体の一部(例えば手など)を検知対象とし、距離画像をもとに検知対象物の存否を検出することによって、作業内容に異常がないかを判定するものである。   The detection device 2 detects the presence or absence of a detection object based on the distance image, with a workpiece or a part of the worker's body (for example, a hand) appearing in the distance image input from the distance image sensor 1 as a detection target. Thus, it is determined whether there is an abnormality in the work content.

検知装置2は、作業内容に異常があると判断すると、報知装置(音出力装置4及び照射装置5)に報知命令を出力して、異常の発生を報知させる。   When the detection device 2 determines that the work content is abnormal, the detection device 2 outputs a notification command to the notification device (the sound output device 4 and the irradiation device 5) to notify the occurrence of the abnormality.

本実施形態では、検知装置2はパーソナルコンピュータPC1からなり、パーソナルコンピュータPC1の演算機能によってそれぞれ実現された設定部7および異常判定部8を備えている。   In the present embodiment, the detection device 2 includes a personal computer PC1 and includes a setting unit 7 and an abnormality determination unit 8 that are realized by the calculation function of the personal computer PC1.

設定部7は、距離画像において検知対象物(例えばワークや作業者の手など)の存否を検知する検知領域や、作業手順にしたがって各々の検知領域で検知対象の存否を検出する順番を設定するものであり、その設定方法については後述する。   The setting unit 7 sets a detection area for detecting the presence / absence of a detection target (for example, a work or a worker's hand) in the distance image, and an order of detecting the presence / absence of the detection target in each detection area according to a work procedure. The setting method will be described later.

異常判定部8は、距離画像センサ1から入力される距離画像をもとに検知対象物の存否を検出するものである。例えば、いずれかの検知領域で検出されるべき検知対象物が検出されなかったり、別の検知対象物が検出されたり、いずれかの検知領域で検知順序とは異なる順序で検知対象物が検出されたりすると、異常判定部8が異常と判定するようになっている。そして、異常判定部8が異常と判定した場合には、報知命令が報知装置に出力されるようになっている。   The abnormality determination unit 8 detects the presence / absence of the detection target based on the distance image input from the distance image sensor 1. For example, a detection target that should be detected in any detection area is not detected, another detection target is detected, or a detection target is detected in an order different from the detection order in any detection area. If this happens, the abnormality determination unit 8 determines that the abnormality has occurred. And when the abnormality determination part 8 determines with abnormality, a notification command is output to a notification apparatus.

次に、本実施形態の作業検知システムによる検知対象物の検知動作を図12〜図14に基づいて説明する。   Next, the detection operation of the detection target object by the work detection system of this embodiment is demonstrated based on FIGS.

図12(a)〜図12(e)は、梱包作業の各作業工程を示す説明図であり、距離画像センサ1で撮影された距離画像P1内には、部品棚となる棚板54に載せられた4つの箱B1〜B4と、棚板53に載せられた箱B10が映されている。4つの箱B1〜B4にはそれぞれ異種のワークW1〜W4が入れられており、作業者は、箱B1,B2,B3,B4の順番でワークW1,W2,W3,W4を1個ずつ取り出し、箱B10に箱詰めする作業を行う。   12 (a) to 12 (e) are explanatory views showing each work process of the packing work, and the distance image P1 photographed by the distance image sensor 1 is placed on a shelf board 54 as a parts shelf. The four boxes B1 to B4 and the box B10 placed on the shelf board 53 are shown. Different types of workpieces W1 to W4 are placed in the four boxes B1 to B4, respectively, and the operator takes out the workpieces W1, W2, W3, and W4 one by one in the order of the boxes B1, B2, B3, and B4. The box B10 is packed.

図12(a)は、梱包作業を行う前の状態であり、箱B10は空になっている。図12(b)は、作業者が左端の箱B1からワークW1を1個取り出して箱B10に入れた状態を示している。図12(c)は、作業者が左端から2番目の箱B2からワークW2を1個取り出して箱B10に入れた状態を示している。図12(d)は、作業者が左端から3番目の箱B3からワークW3を1個取り出して箱B10に入れた状態を示している。図12(e)は、作業者が右端の箱B4からワークW4を1個取り出して箱B10に入れた状態を示している。図12(e)の状態は1サイクル分の梱包作業が終了した状態であり、箱B10には4種類のワークW1〜W4が1個ずつ入れられている。   FIG. 12A shows a state before the packaging work is performed, and the box B10 is empty. FIG. 12B shows a state where the worker has taken out one workpiece W1 from the leftmost box B1 and put it in the box B10. FIG. 12C shows a state where the worker has taken out one workpiece W2 from the second box B2 from the left end and put it in the box B10. FIG. 12D shows a state where the worker has taken out one workpiece W3 from the third box B3 from the left end and put it in the box B10. FIG. 12 (e) shows a state where the worker has taken out one workpiece W4 from the rightmost box B4 and put it in the box B10. The state shown in FIG. 12E is a state in which one cycle of packing work has been completed, and four types of workpieces W1 to W4 are placed one by one in the box B10.

本実施形態の作業検知システムを用いて上記梱包作業の検査を行う場合、まず、設定作業者は、後述の設定方法により梱包作業の各工程で検知対象物が検出されるべき検知領域とその検知順序を検知装置2に設定する。その後、設定内容に応じて異常の有無を検知する。   When performing the inspection of the packing operation using the operation detection system according to the present embodiment, first, the setting operator first detects a detection region in which a detection target is to be detected in each step of the packing operation by the setting method described later and the detection thereof. The order is set in the detection device 2. Thereafter, the presence or absence of an abnormality is detected according to the setting contents.

図13(a)〜図13(i)は、上記の梱包作業において異常の有無を判定する処理を説明する説明図である。本実施形態では、距離画像P1内でワークを収めた箱B1〜B4と、ワークが箱詰めされる箱B10が検知領域として設定されている。また、作業開始時に作業者が手H1を置く検知領域が開始領域A1として設定されている。なお、初めに箱B1からワークW1を取り出す作業を行う動作を作業開始時とし、箱B1が存在する検知領域を開始領域として設定することも可能である。   Fig.13 (a)-FIG.13 (i) are explanatory drawings explaining the process which determines the presence or absence of abnormality in said packing operation | work. In the present embodiment, boxes B1 to B4 in which workpieces are stored in the distance image P1 and a box B10 in which workpieces are packed are set as detection areas. In addition, a detection area where the operator places his hand H1 at the start of work is set as the start area A1. It is also possible to set the detection area where the box B1 is present as the start area, with the operation of first taking out the work W1 from the box B1 as the work start time.

図14は、異常判定部8による判定処理を説明するフローチャートである。以下、各ステップでの処理について説明する。   FIG. 14 is a flowchart illustrating the determination process performed by the abnormality determination unit 8. Hereinafter, processing in each step will be described.

検知装置2には、距離画像センサ1から所定の時間間隔(作業者の動きを連続的に検出可能な時間間隔)で撮影された距離画像が入力される(ステップST1)。そして、異常判定部8は、距離画像センサ1から距離画像が入力されると、異常判定処理の実施中か否かを判定する(ステップST2)。   A distance image captured at a predetermined time interval (a time interval at which an operator's movement can be continuously detected) is input from the distance image sensor 1 to the detection device 2 (step ST1). Then, when a distance image is input from the distance image sensor 1, the abnormality determination unit 8 determines whether or not an abnormality determination process is being performed (step ST2).

ここで、異常判定処理が停止中であれば(ステップST2のNo)、異常判定部8は開始領域A1で作業者が検知されるか否かを判定する(ステップST3)。図13(a)に示すように、作業者は1サイクル分の梱包作業を開始する毎に開始領域A1に手H1を置いており、異常判定部8は、開始領域A1で作業者が検知されたことから作業開始と判断し、異常判定処理を開始する(ステップST4)。なお、ステップST3の判定で開始領域A1に検知対象がいないと判定された場合、異常判定部8はステップST1に戻って、距離画像の入力待ちの状態となる。   If the abnormality determination process is stopped (No in step ST2), the abnormality determination unit 8 determines whether an operator is detected in the start area A1 (step ST3). As shown in FIG. 13A, the worker places his hand H1 in the start area A1 every time one cycle of packing work is started, and the abnormality determination unit 8 detects the worker in the start area A1. Therefore, it is determined that the work has started, and the abnormality determination process is started (step ST4). When it is determined in step ST3 that there is no detection target in the start area A1, the abnormality determination unit 8 returns to step ST1 and enters a state of waiting for a distance image input.

一方、異常判定処理を実施中であれば(ステップST2のYes)、異常判定部8は、いずれかの検知領域で検知対象物が検知さるか否かを判定する(ステップST5)。ステップST5の判定で、いずれの検知領域でも検知対象物が検知されなければ、異常判定部8はステップST1の処理に戻り、距離画像の入力待ちの状態となる。一方、ステップST5の判定でいずれかの検知領域で検知対象物が検知された場合、異常判定部8は、検知対象物の検出された検知領域の順番が、設定部7によって予め設定された検知順序と異なっているか否かを判定する(ステップST6)。図12で説明した梱包作業を作業者が行う場合、図13(b)〜図13(i)に示すように、作業者の手H1が、箱B1→箱B10→箱B2→箱B10→箱B3→箱B10→箱B4→箱B10の順番で検出されることになる。また、箱B10にはワークW1、ワークW2、ワークW3、ワークW4が1つずつ順番に箱詰めされるので、箱B10を含む検知領域ではワークW1、ワークW2、ワークW3、ワークW4がその順番で検出されることになる。ここで、定期的に入力される距離画像から作業者の手H1が検知された検知領域の順番が、作業工程に従って設定された検知順序と異なる場合(ステップST6のYes)、異常判定部8は、予め決められた作業内容とは異なる作業が行われたと判断する。或いは、箱B10を含む検知領域でワークW1〜W4が検出される順番が、作業工程に従って設定された検知順序と異なる場合(ステップST6のYes)、異常判定部8は、予め決められた作業内容とは異なる作業が行われたと判断する。このとき、異常判定部8は、報知命令を音出力装置4および照射装置5に出力し、異常と判定された検知対象の検知履歴を記憶部9に記憶させる。音出力装置4は、報知命令が入力されると、所定の報知音を出力し、異常の発生を音で報知する。一方、照射装置5は、報知命令が入力されると、例えば、検知順序が異なると判定された検知領域に光を照射させ、異常の発生を光で報知する(ステップST7)。   On the other hand, if the abnormality determination process is being performed (Yes in step ST2), the abnormality determination unit 8 determines whether or not a detection target is detected in any detection region (step ST5). If it is determined in step ST5 that no detection object is detected in any detection region, the abnormality determination unit 8 returns to the process in step ST1 and enters a state of waiting for input of a distance image. On the other hand, when a detection target is detected in any detection region in the determination of step ST5, the abnormality determination unit 8 detects that the order of the detection regions in which the detection target is detected is set by the setting unit 7 in advance. It is determined whether or not the order is different (step ST6). When the operator performs the packing operation described in FIG. 12, as shown in FIGS. 13B to 13I, the operator's hand H1 is box B1 → box B10 → box B2 → box B10 → box. The detection is performed in the order of B3 → box B10 → box B4 → box B10. In addition, since the work W1, the work W2, the work W3, and the work W4 are sequentially packed in the box B10, the work W1, the work W2, the work W3, and the work W4 are sequentially arranged in the detection area including the box B10. Will be detected. Here, when the order of the detection areas where the worker's hand H1 is detected from the distance image periodically input is different from the detection order set according to the work process (Yes in step ST6), the abnormality determination unit 8 Then, it is determined that an operation different from the predetermined operation content has been performed. Alternatively, when the order in which the workpieces W1 to W4 are detected in the detection area including the box B10 is different from the detection order set in accordance with the work process (Yes in step ST6), the abnormality determination unit 8 determines the work content determined in advance. It is determined that a different work has been performed. At this time, the abnormality determination unit 8 outputs a notification command to the sound output device 4 and the irradiation device 5 and causes the storage unit 9 to store the detection history of the detection target determined to be abnormal. When the notification command is input, the sound output device 4 outputs a predetermined notification sound and notifies the occurrence of abnormality by sound. On the other hand, when the notification command is input, the irradiation device 5 irradiates light to a detection area determined to have a different detection order, for example, and notifies the occurrence of an abnormality with light (step ST7).

また、ステップST6において、検知順序が正常であった場合(ステップST6のNo)、異常判定部8は梱包作業が1サイクル分終了したか否かを判断する(ステップST8)。ここで、検知順序が正常である場合とは、作業者の手H1が検知された検知領域の順番が所定の検知順序と同じであり、箱B10を含む検知領域でワークW1〜W4が検出される順番が所定の検知順序と同じであった場合のことをいう。   In step ST6, when the detection order is normal (No in step ST6), the abnormality determining unit 8 determines whether or not the packing operation is completed for one cycle (step ST8). Here, when the detection order is normal, the order of the detection areas in which the operator's hand H1 is detected is the same as the predetermined detection order, and the workpieces W1 to W4 are detected in the detection area including the box B10. Is the same as the predetermined detection order.

ステップST8において、1サイクル分の梱包作業が終了していなければ(ステップST8のNo)、異常判定部8はステップST1に戻って距離画像の入力待ちの状態となり、次の工程の検出に備える。一方、1サイクル分の梱包作業が終了していれば(ステップST8のYes)、異常判定部8は、1サイクル分の梱包作業が正常に行われたと判断して、異常判定処理を終了する。   In step ST8, if the packing work for one cycle is not completed (No in step ST8), the abnormality determining unit 8 returns to step ST1 and waits for input of a distance image, and prepares for the detection of the next process. On the other hand, if the packing work for one cycle has been completed (Yes in step ST8), the abnormality determination unit 8 determines that the packing work for one cycle has been normally performed, and ends the abnormality determination process.

なお、図12で説明した梱包作業では、箱B1,B2,B3,B4からワークを1個とるごとに箱B10に入れている。しかしながら、梱包作業はこれに限られるものではなく、例えば、箱B1,B2,B3,B4から1個ずつ取り出したワークをトレー(図示せず)に入れ、最後にトレーから箱B10へと移し替えるようにしてもよい。この場合の検知順序は、箱B1→箱B2→箱B3→箱B4→箱B10となり、異常判定部8は、いずれかの検知領域において、上記の検知順序とは異なる順序で検知対象が検出されると、異常が発生したと判定する。   In the packing operation described with reference to FIG. 12, every time one workpiece is taken from the boxes B1, B2, B3, and B4, the work is put in the box B10. However, the packing operation is not limited to this. For example, the works taken out from the boxes B1, B2, B3, and B4 one by one are put in a tray (not shown), and finally transferred from the tray to the box B10. You may do it. The detection order in this case is box B1 → box B2 → box B3 → box B4 → box B10, and the abnormality determination unit 8 detects the detection target in an order different from the above detection order in any detection region. Then, it is determined that an abnormality has occurred.

ここで、この作業検知システムにおいて、検知対象の存否を検知する複数の検知領域およびその検知順序を設定する設定方法について、図1〜図9を参照して説明する。   Here, in this work detection system, a setting method for setting a plurality of detection areas for detecting the presence / absence of a detection target and its detection order will be described with reference to FIGS.

図1(b)に示すように、作業領域となる棚板53上に設定された矩形の検知領域A11,A12,A13,A14の各々でワークW11,W12,W13,W14の存否を検知する場合、検知領域A1〜A4とその検知順序を検知装置2に設定する必要がある。なお、図1(b)に示すように、検知領域A11,A12,A13は、棚板53の図中下側に左右に並んで設定されており、検知領域A14は、棚板53の図中左上に設定されている。   As shown in FIG. 1B, the presence / absence of the workpieces W11, W12, W13, W14 is detected in each of the rectangular detection areas A11, A12, A13, A14 set on the shelf board 53 as the work area. The detection areas A1 to A4 and their detection order need to be set in the detection device 2. As shown in FIG. 1B, the detection areas A11, A12, and A13 are set side by side on the lower side of the shelf 53 in the figure, and the detection area A14 is shown in the figure of the shelf 53. It is set at the upper left.

本実施形態の設定方法では、検知領域A11〜A14を設定するために、設定対象の検知領域A11〜A14に対応した形状および大きさの設定用シートS11〜S14を用いている(図1(a)参照)。設定用シートS11〜S14は矩形状をしており、対応する検知領域A11〜A14と縦横の長さがほぼ同じ長さとなるように設定されている。また、設定用シートS11〜S14の要所(例えば左上隅)には、検知順序の情報を含む識別コードが印刷などの方法で表示されている。ここで、設定用シートS11には「01」、設定用シートS12には「02」、設定用シートS13には「03」、設定用シートS14には「04」の文字が識別コードとして表示されている。なお、設定用シートS11〜S14に付された識別コードは、「01」「02」…などの数字に限定されるものではなく、アルファベットなどの文字でもよいし、文字と数字の組み合わせでもよいし、バーコードや二次元コードでもよい。また、設定用シートS11〜S14の色を異ならせ、設定用シートS11〜S14の色で識別コードを構成するようにしてもよい。なお、設定用シートS11〜S14として、製造現場で入手が容易な帯電防止シートを用いるようにするのが好ましい。また、設定用シートS11〜S14の色は、作業領域の表面(棚板53の上面)とコントラストが大きくなるような色とするのが好ましい。例えば、作業領域の表面が黒色である場合には、設定用シートS11〜S14の色を白色とするのが好ましい。   In the setting method of this embodiment, in order to set the detection areas A11 to A14, setting sheets S11 to S14 having shapes and sizes corresponding to the detection areas A11 to A14 to be set are used (FIG. 1A). )reference). The setting sheets S11 to S14 have a rectangular shape, and are set so that the vertical and horizontal lengths of the corresponding detection areas A11 to A14 are substantially the same. In addition, identification codes including detection order information are displayed at important points (for example, the upper left corner) of the setting sheets S11 to S14 by a method such as printing. Here, “01” is displayed as an identification code on the setting sheet S11, “02” is displayed on the setting sheet S12, “03” is displayed on the setting sheet S13, and “04” is displayed on the setting sheet S14. ing. The identification codes given to the setting sheets S11 to S14 are not limited to numbers such as “01”, “02”, etc., and may be letters such as alphabets, or a combination of letters and numbers. A barcode or a two-dimensional code may be used. Alternatively, the setting sheets S11 to S14 may have different colors, and the identification code may be configured with the colors of the setting sheets S11 to S14. As the setting sheets S11 to S14, it is preferable to use an antistatic sheet that is easily available at the manufacturing site. The colors of the setting sheets S11 to S14 are preferably colors that increase the contrast with the surface of the work area (the upper surface of the shelf board 53). For example, when the surface of the work area is black, the setting sheets S11 to S14 are preferably white.

そして、設定作業者は、まず、図1(a)に示すように、設定対象の検知領域A11,A12,A13,A14とそれぞれ同じ形状および大きさに形成された設定用シートS11,S12,S13,S14を、棚板53上の設定したい位置に配置する。   The setting operator first sets the setting sheets S11, S12, S13 formed in the same shape and size as the detection areas A11, A12, A13, A14 to be set as shown in FIG. , S14 are arranged at positions to be set on the shelf board 53.

その後、設定作業者が入力装置3を用いて検知装置2に設定命令を入力する。すると、検知装置2の設定部7は、設定命令に基づいて距離画像センサ1を起動し、作業領域である棚板53の二次元画像を撮像させる。そして、設定部7は、距離画像センサ1が撮像した二次元画像に画像処理(エッジ検出やラベリング処理など)を施すことによって、設定用シートS11〜S14の位置、形状および大きさと、設定用シートS11〜S14に表示された識別コードを抽出する。図1(a)の例では、設定用シートS11,S12,S13,S14にそれぞれ識別コードとして「01」「02」「03」「04」の数字が付されており、設定部7は、設定用シートS11〜S14に付された数字の昇順を各検知領域の検知順序として設定する。したがって、設定部7は、設定用シートS11,S12,S13,S14がそれぞれ置かれた領域を検知領域A11,A12,A13,A14として設定する。また、設定部7は、設定用シートS11,S12,S13,S14に付された識別コードの昇順で各検知領域A11〜A14の検知順序を設定する。すなわち、図1(a)の例では、A11→A12→A13→A14の順番に検知順序を設定する。また、識別コードの「01」「02」「03」「04」には、検知対象であるワークの種別を示す情報も含まれている。そこで、設定部7は、検知領域A11,A12,A13,A14での検知対象をそれぞれワークW11,W12,W13,W14と設定する。   Thereafter, the setting operator inputs a setting command to the detection device 2 using the input device 3. Then, the setting unit 7 of the detection device 2 activates the distance image sensor 1 based on the setting command, and causes a two-dimensional image of the shelf 53 that is a work area to be captured. Then, the setting unit 7 performs image processing (edge detection, labeling processing, etc.) on the two-dimensional image captured by the distance image sensor 1, thereby setting the position, shape, and size of the setting sheets S11 to S14 and the setting sheet. The identification code displayed in S11 to S14 is extracted. In the example of FIG. 1A, numbers “01”, “02”, “03”, and “04” are assigned as identification codes to the setting sheets S11, S12, S13, and S14, respectively. The ascending order of the numbers assigned to the sheets S11 to S14 is set as the detection order of each detection area. Therefore, the setting unit 7 sets the areas where the setting sheets S11, S12, S13, and S14 are placed as detection areas A11, A12, A13, and A14. The setting unit 7 sets the detection order of the detection areas A11 to A14 in ascending order of the identification codes given to the setting sheets S11, S12, S13, and S14. That is, in the example of FIG. 1A, the detection order is set in the order of A11 → A12 → A13 → A14. The identification codes “01”, “02”, “03”, and “04” also include information indicating the type of workpiece that is a detection target. Therefore, the setting unit 7 sets the detection targets in the detection areas A11, A12, A13, and A14 as workpieces W11, W12, W13, and W14, respectively.

上述のようにして設定部7が検知領域およびその検知順序を設定すると、その設定内容がモニタ6に表示される。ここで、設定作業者は、モニタ6に表示された設定内容を確認し、設定が正しい場合には、入力装置3を用いて設定完了を入力する。設定完了を入力すると、設定部7は、設定完了の入力に基づいて、検知領域およびその検知順序の設定内容を記憶部9に記憶させ、設定処理を終了する。その後、検知装置2が検査処理を開始すると、記憶部9に記憶された検知領域およびその検知順序に従って作業内容の検査処理が実行される。   When the setting unit 7 sets the detection area and its detection order as described above, the setting content is displayed on the monitor 6. Here, the setting operator confirms the setting content displayed on the monitor 6, and inputs the setting completion using the input device 3 when the setting is correct. When setting completion is input, the setting unit 7 stores the setting contents of the detection area and its detection order in the storage unit 9 based on the input of setting completion, and ends the setting process. Thereafter, when the detection device 2 starts the inspection process, the inspection process for the work content is executed in accordance with the detection areas and the detection order stored in the storage unit 9.

なお、複数種類のワークについて高さ、面積、形状などの部品情報が予め記憶部9に登録されていれば、設定装置は、各検知領域の検知対象であるワークの部品情報を記憶部9から読み込むことができる。よって、作業者がワークの部品情報を入力する作業や、各検知領域に置かれたワークの部品情報を二次元画像や距離画像から検出して登録する処理が不要になる。   Note that if part information such as height, area, and shape is registered in advance in the storage unit 9 for a plurality of types of workpieces, the setting device stores the part information of the workpieces to be detected in each detection area from the storage unit 9. Can be read. Therefore, there is no need for an operator to input workpiece part information or a process for detecting and registering workpiece part information placed in each detection area from a two-dimensional image or a distance image.

また、本実施形態の作業検知システムは、上述した何れかの設定方法を用い、距離画像センサ1と、検知装置2と、報知装置(音出力装置4及び照射装置5)と、設定装置(設定部7)と、二次元カメラ(距離画像センサ1で兼用)とを備えることを特徴とする。   In addition, the work detection system of the present embodiment uses any of the setting methods described above, the distance image sensor 1, the detection device 2, the notification device (the sound output device 4 and the irradiation device 5), and the setting device (setting). Unit 7) and a two-dimensional camera (shared with the distance image sensor 1).

これにより、検知領域や検知順序の設定を容易に行うことができる作業検知システムを実現できる。   Thereby, the operation | work detection system which can set a detection area and a detection order easily is realizable.

なお、上述の設定方法では、ワークの検知領域とその検知順序を設定しているが、検知領域で検出されるワークの高さ情報を設定することも可能である。   In the above-described setting method, the workpiece detection area and the detection order are set, but it is also possible to set workpiece height information detected in the detection area.

具体的には、以下の方法でワークの高さ情報を設定することができる。   Specifically, the workpiece height information can be set by the following method.

まず、設定作業者は、図8(a)に示すように、作業領域となる棚板53上に設定用シートS11,S12,S13,S14を配置し、上述した設定方法により対応する検知領域A11,A12,A13,A14の検知領域およびその検知順序を行う。   First, as shown in FIG. 8A, the setting worker arranges the setting sheets S11, S12, S13, and S14 on the shelf board 53 that is the work area, and the corresponding detection area A11 by the setting method described above. , A12, A13, and A14 detection areas and their detection order.

次に、設定作業者は、図8(b)に示すように設定用シートS11,S12,S13,S14の上に各検知領域で検知されるワークW11,W12,W13,W14を載せる。その後、入力装置3を用いてワークの高さ情報を登録する登録命令を入力する。このとき、検知装置2の設定部7は、登録命令に基づいて距離画像センサ1を起動し、作業領域である棚板53の距離画像を撮像させる。そして、設定部7は、距離画像センサ1によって撮像された距離画像をもとに、検知領域A11,A12,A13,A14のそれぞれに配置されたワークW11,W12,W13,W14の高さ寸法および面積値を検出し、記憶部9に登録する。   Next, the setting operator places the workpieces W11, W12, W13, and W14 detected in the respective detection areas on the setting sheets S11, S12, S13, and S14 as shown in FIG. 8B. Thereafter, a registration command for registering workpiece height information is input using the input device 3. At this time, the setting unit 7 of the detection device 2 activates the distance image sensor 1 based on the registration command, and captures a distance image of the shelf board 53 that is a work area. And the setting part 7 is based on the distance image imaged by the distance image sensor 1, and the height dimension of the workpiece | work W11, W12, W13, W14 arrange | positioned in each of detection area | region A11, A12, A13, A14, and The area value is detected and registered in the storage unit 9.

ここで、ワークW11を例に距離画像からワークW11の高さ寸法および面積値を検出する方法について説明する。   Here, a method for detecting the height dimension and area value of the workpiece W11 from the distance image will be described taking the workpiece W11 as an example.

図9(a)はワークW11が棚板53に置かれた状態の平面図、図9(b)はワークW11が棚板53に置かれた状態の側面図である。   FIG. 9A is a plan view of a state in which the workpiece W11 is placed on the shelf board 53, and FIG. 9B is a side view of a state in which the workpiece W11 is placed on the shelf board 53.

設定部7には、ワークW11〜W14の各々について高さ寸法の上限値h2および下限値h3と、面積の上限値および下限値とが予め設定されている。なお、設定部7は、高さ寸法が上限値h2と下限値h3との間に入る画素数をワークの面積として求めている。設定部7は、高さ寸法が上限値h2と下限値h3との間に入る画素の集まりを抽出して、面積が上限値と下限値との間に入る画素群をワークW11と判断している。そして、設定部7は、この画素群について、上限値h2と下限値h3との間に入る高さ寸法の平均値を求めることによってワークW11の高さ寸法h1を求め、また、画素群に含まれる画素数から面積を求めている。   In the setting unit 7, an upper limit value h2 and a lower limit value h3 of the height dimension and an upper limit value and a lower limit value of the area are set in advance for each of the workpieces W11 to W14. The setting unit 7 obtains the number of pixels whose height dimension falls between the upper limit value h2 and the lower limit value h3 as the work area. The setting unit 7 extracts a group of pixels whose height dimension is between the upper limit value h2 and the lower limit value h3, and determines a pixel group whose area is between the upper limit value and the lower limit value as the work W11. Yes. Then, the setting unit 7 obtains the height dimension h1 of the workpiece W11 by obtaining an average value of the height dimensions that fall between the upper limit value h2 and the lower limit value h3 for the pixel group, and is included in the pixel group. The area is obtained from the number of pixels to be obtained.

設定部7は、他のワークW12〜W14についても同様の処理を行って高さ寸法および面積を求め、ワークW11〜W14の高さ寸法および面積値を記憶部9に記憶させる。こうすれば、実際にワークW11〜W14を検知領域に置いた状態で各ワークW11〜W14の高さ情報を取得することができるようになるため、ワークの正確な高さ情報を予め登録しておく必要がなくなって設定の手間を簡略化させることができる。   The setting unit 7 performs the same processing on the other workpieces W12 to W14 to obtain height dimensions and areas, and stores the height dimensions and area values of the workpieces W11 to W14 in the storage unit 9. If it carries out like this, since the height information of each workpiece | work W11-W14 can be acquired in the state which actually set | placed the workpiece | work W11-W14 in the detection area, the exact height information of a workpiece | work is registered beforehand. This eliminates the need for setting and simplifies the setting.

ところで、ワークW11,W12,W13,W14がそれぞれ検知される検知領域A11,A12,A13,A14を作業内容の変更によって図1(d)に示すように変更させたい場合、検知装置2に変更後の検知領域およびその検知順序を設定する必要がある。なお、図1(d)の例では、検知領域A11〜A13が棚板53において図中上側に設定され、検知領域A14が棚板53において図中左下側に設定される。   By the way, when it is desired to change the detection areas A11, A12, A13, and A14 in which the workpieces W11, W12, W13, and W14 are detected as shown in FIG. It is necessary to set the detection area and its detection order. In the example of FIG. 1D, the detection areas A11 to A13 are set on the upper side in the figure on the shelf 53, and the detection area A14 is set on the lower left side in the figure on the shelf 53.

このように、検知領域A11,A12,A13,A14の位置を変更させる場合に、図1(c)に示すように、設定用シートS11,S12,S13,S14を棚板53上の設定したい位置に再度配置して設定を行うようにすると、手間がかかってしまう。   In this way, when the positions of the detection areas A11, A12, A13, and A14 are changed, the setting sheets S11, S12, S13, and S14 are positions to be set on the shelf 53 as shown in FIG. If it is arranged again and set, it takes time and effort.

そこで、本実施形態では、設定用シートS11,S12,S13,S14を用いることなく、検知領域A11,A12,A13,A14の位置を変更させることができるようにした。   Therefore, in the present embodiment, the positions of the detection areas A11, A12, A13, and A14 can be changed without using the setting sheets S11, S12, S13, and S14.

具体的には、下記のような投影領域設定装置を用い、当該投影領域設定装置を本実施形態の作業検知システムに適用することで、設定用シートを用いることなく、検知領域A11,A12,A13,A14の位置を変更させることができるようにした。   Specifically, by using the projection area setting apparatus as described below and applying the projection area setting apparatus to the work detection system of the present embodiment, the detection areas A11, A12, and A13 are used without using a setting sheet. , A14 can be changed.

ここで用いられる投影領域設定装置は、光を投影することが可能な投影面Cの投影範囲に光を照射することが可能であるとともに、照射される光の照射範囲を投影範囲の一部の領域に制限することが可能な照射部を備えている。   The projection area setting device used here can irradiate light onto the projection range of the projection plane C capable of projecting light, and the irradiation range of the irradiated light is a part of the projection range. An irradiation unit that can be limited to a region is provided.

さらに、投影領域設定装置は、投影範囲の少なくとも一部の領域であって照射部から照射された光が投影される領域を、投影領域Rとして設定する領域設定部を備えるものである。   Further, the projection area setting device includes an area setting unit that sets, as a projection area R, an area that is at least a part of the projection range and onto which the light emitted from the irradiation unit is projected.

ここで、投影領域Rは、投影面C上で指示手段を操作することで、当該投影領域の大きさ、位置、形状、投影される色、および投影される明るさのうち少なくともいずれか1つの要素を変化させることができるようになっている。さらに、変化した投影領域Rが領域設定部によって設定されるようになっている。   Here, the projection area R operates at least one of the size, position, shape, projected color, and projected brightness of the projection area by operating the instruction unit on the projection plane C. The elements can be changed. Further, the changed projection region R is set by the region setting unit.

なお、領域設定部によって複数の投影領域Rが設定される場合には、指示手段は、少なくとも1つの投影領域Rを任意に選択できるようにするのが好ましい。そして、それぞれの投影領域Rが、指示手段によって選択された場合に、選択された投影領域Rの大きさ、位置、形状、投影される色、および明るさのうち少なくともいずれか1つの要素を指示手段によって変化させることができるようにするのが好ましい。   When a plurality of projection regions R are set by the region setting unit, it is preferable that the instruction unit can arbitrarily select at least one projection region R. Then, when each projection region R is selected by the instruction unit, at least one element of the size, position, shape, projected color, and brightness of the selected projection region R is designated. Preferably, it can be changed by means.

本実施形態の作業検知システムでは、投影部としての棚板53の上面53aが投影面Cに相当している。そして、照射される光を投影範囲の一部に制限する機能を有しており、棚板53および棚板54の所望の位置に光を照射することができる照射装置5が照射部に相当している。   In the work detection system of the present embodiment, the upper surface 53a of the shelf 53 as a projection unit corresponds to the projection plane C. And the irradiation apparatus 5 which has a function which restrict | limits the irradiated light to a part of projection range, and can irradiate light to the desired position of the shelf 53 and the shelf 54 corresponds to an irradiation part. ing.

このとき、照射装置5は、棚板53の上面53aの全面に光が照射されるように設定されているため、棚板53の上面53aの全面が投影範囲となっている。なお、照射装置5と棚板53との配置状況によっては、照射装置5から照射される光を投影させることのできる最大範囲が上面53aの一部となる場合がある。そして、その場合には、光を投影させることのできる最大範囲が投影範囲となる。   At this time, since the irradiation device 5 is set so that light is irradiated onto the entire upper surface 53a of the shelf 53, the entire upper surface 53a of the shelf 53 is within the projection range. Depending on the arrangement state of the irradiation device 5 and the shelf board 53, the maximum range in which the light irradiated from the irradiation device 5 can be projected may be a part of the upper surface 53a. In this case, the maximum range in which light can be projected is the projection range.

また、設定部7が領域設定部に相当しており、検知領域A11,A12,A13,A14がそれぞれ投影領域Rに相当している。   The setting unit 7 corresponds to an area setting unit, and the detection areas A11, A12, A13, and A14 correspond to the projection area R, respectively.

したがって、本実施形態の作業検知システムには、領域設定部によって複数の投影領域Rが設定される投影領域設定装置が適用されている。   Therefore, a projection area setting device in which a plurality of projection areas R are set by the area setting unit is applied to the work detection system of the present embodiment.

なお、投影領域Rは、図2に示すように、平面視で略四角形状(多角形状)をしている。   As shown in FIG. 2, the projection region R has a substantially quadrangular shape (polygonal shape) in plan view.

また、指示手段としては、図3(a)に示すように、作業者の指先Fを用いることもできるし、図3(b)に示すように、把持部11と操作子12とを有する指示部材としてのポインタ10などを用いることができる。なお、どちらを用いても、投影領域Rの大きさ、位置、形状、投影される色、および明るさのうち少なくともいずれか1つの要素を変化させることができるようにするのが好ましい。   Further, as the instruction means, the operator's fingertip F can be used as shown in FIG. 3A, or an instruction having the grip portion 11 and the operator 12 as shown in FIG. 3B. A pointer 10 or the like as a member can be used. Whichever is used, it is preferable that at least one of the size, position, shape, projected color, and brightness of the projection region R can be changed.

そして、このような指示手段を用いて、投影面C(上面53a)上に投影された投影領域Rを選択することで、選択された投影領域Rの要素を指示手段によって変化させることができるようになっている。   Then, by using such an instruction unit and selecting the projection region R projected on the projection plane C (the upper surface 53a), the elements of the selected projection region R can be changed by the instruction unit. It has become.

本実施形態では、選択された投影領域Rの大きさや位置を変化させることができるようにしたものを例示しているが、その他の要素(形状、投影される色、明るさ等)を変化させるようにすることもできる。   In the present embodiment, an example is shown in which the size and position of the selected projection region R can be changed, but other elements (shape, projected color, brightness, etc.) are changed. It can also be done.

また、指示手段が投影面C上に投影された投影領域Rに接触することで、投影領域Rが選択されるようにしている。指示手段と投影領域Rとが接触しているか否かの判断は、例えば、距離画像センサ1を用い、指示手段の先端までの距離を測定することにより行うことができる。すなわち、距離画像センサ1から指先までの距離や距離画像センサ1からポインタ10の操作子12先端までの距離が距離画像センサ1から投影面C(投影領域R)までの距離とほぼ同一と判断された際に、指示手段が投影領域Rに接触したと判断させることができる。   Further, the projection unit R is selected when the instruction unit comes into contact with the projection region R projected on the projection plane C. The determination as to whether or not the instruction unit is in contact with the projection region R can be performed by measuring the distance to the tip of the instruction unit using the distance image sensor 1, for example. That is, the distance from the distance image sensor 1 to the fingertip and the distance from the distance image sensor 1 to the tip of the operation element 12 of the pointer 10 are determined to be substantially the same as the distance from the distance image sensor 1 to the projection plane C (projection region R). It can be determined that the instruction means has touched the projection region R.

なお、ポインタ10を用いる場合、先端の操作子12を光らせることができる構成とするのが好ましい。こうすれば、操作子12が光っていない状態で投影領域Rに接触した場合に、当該投影領域Rが選択されないようにすることができ、投影領域Rが意図せずに選択されてしまうことを防止することができるようになる。また、操作子12が光ることで、指示手段の位置検出が容易になるという利点もある。   In addition, when using the pointer 10, it is preferable to set it as the structure which can light up the operation element 12 at the front-end | tip. In this way, when the operator 12 touches the projection region R in a state where it is not illuminated, the projection region R can be prevented from being selected, and the projection region R can be selected unintentionally. Can be prevented. Further, there is an advantage that the position of the pointing means can be easily detected by the fact that the operation element 12 is illuminated.

さらに、本実施形態では、投影領域Rの境界線L内部を、投影領域Rの位置を変更させる指示領域R1としている。   Further, in the present embodiment, the inside of the boundary line L of the projection area R is set as an instruction area R1 for changing the position of the projection area R.

すなわち、投影領域Rの境界線L内部に指示手段を当接させた状態で、指示手段を投影面C上で動かすことにより、投影領域Rの位置を変化させることができるようにしている。   That is, the position of the projection area R can be changed by moving the instruction means on the projection plane C in a state where the instruction means is in contact with the boundary line L of the projection area R.

具体的には、まず、図4(a)に示すように、投影面C上で指示手段(図4では指先Fを例示している)を投影領域Rの境界線L内部に接触させて、投影領域Rの指示領域R1が選択された状態とする。そして、このままの状態(指先Fを投影領域Rの指示領域R1に接触させた状態)で、図4(b)に示すように、投影面C上を滑らせるように指示手段(指先F)を移動させると、指示手段(指先F)の移動に伴って選択された投影領域Rも移動する。そして、投影領域Rを所望の位置に移動させた際に、図4(c)に示すように、指示手段(指先F)を投影領域R(投影面C)から離すと、投影領域Rがその位置にとどまることとなる。こうして、投影領域Rの移動が行われる。   Specifically, first, as shown in FIG. 4A, the pointing means (fingertip F is illustrated in FIG. 4) is brought into contact with the inside of the boundary line L of the projection area R on the projection plane C, It is assumed that the instruction area R1 of the projection area R is selected. Then, in this state (a state in which the fingertip F is in contact with the instruction area R1 of the projection area R), the instruction means (fingertip F) is slid on the projection surface C as shown in FIG. When moved, the selected projection region R is also moved in accordance with the movement of the instruction means (fingertip F). When the projection area R is moved to a desired position, as shown in FIG. 4C, when the pointing means (fingertip F) is moved away from the projection area R (projection plane C), the projection area R becomes Will stay in position. Thus, the projection area R is moved.

一方、投影領域Rの境界線L、具体的には、四角形状(多角形状)をした境界線Lの4つの頂点部分Tを、投影領域Rの大きさを変化させる指示領域R2としている。   On the other hand, the boundary line L of the projection area R, specifically, the four vertex portions T of the quadrangular (polygonal) boundary line L are used as the instruction area R2 for changing the size of the projection area R.

すなわち、頂点部分Tに指示手段を当接させた状態で、当該指示手段を投影面C上で動かすことにより、投影領域Rの大きさを変化させることができるようにしている。   That is, the size of the projection region R can be changed by moving the instruction means on the projection plane C in a state where the instruction means is in contact with the apex portion T.

具体的には、まず、図5(a)に示すように、投影面C上で指示手段(図5では指先Fを例示している)を投影領域Rの頂点部分Tに接触させて、投影領域Rの指示領域R2が選択された状態とする。そして、このままの状態(指先Fを投影領域Rの指示領域R2に接触させた状態)で、図5(b)に示すように、投影面C上を滑らせるように指示手段(指先F)を移動させると、指示手段(指先F)の移動に伴って選択された投影領域Rの大きさが変化する。そして、投影領域Rを所望の大きさに変化させた際に、図5(c)に示すように、指示手段(指先F)を投影領域R(投影面C)から離すと、投影領域Rがその大きさにとどまることとなる。こうして、投影領域Rの変形(大きさの変化)が行われる。   Specifically, first, as shown in FIG. 5A, the pointing means (fingertip F is illustrated in FIG. 5) is brought into contact with the apex portion T of the projection region R on the projection plane C to perform projection. It is assumed that the instruction area R2 of the area R is selected. Then, in this state (a state in which the fingertip F is in contact with the instruction area R2 of the projection area R), as shown in FIG. When moved, the size of the selected projection region R changes as the instruction means (fingertip F) moves. Then, when the projection area R is changed to a desired size, as shown in FIG. 5C, when the instruction means (fingertip F) is moved away from the projection area R (projection plane C), the projection area R is changed. It will remain at that size. Thus, the projection region R is deformed (change in size).

なお、複数の投影領域Rを有する場合に、投影領域Rを任意に移動させると、2つ以上の投影領域Rの一部または全部が重複した状態となる可能性がある。また、ある投影領域R内に他の投影領域Rが完全に含まれてしまうこととなる可能性もある。この場合、例えば、移動させている投影領域Rが外側に存在するように重なるものと設定し、互いに重なった状態で重複する領域に指示手段を接触させた際には、最内にある投影領域Rが選択されるように設定するのが好ましい。こうすれば、直前に移動させた投影領域Rを再度、移動させたり変形させたりすることなく、重なっている他の投影領域Rを移動させたり、変形させたりすることができるようになる。   In addition, in the case of having a plurality of projection regions R, if the projection region R is arbitrarily moved, there is a possibility that a part or all of the two or more projection regions R overlap each other. Further, there is a possibility that another projection region R is completely included in a certain projection region R. In this case, for example, when the moving projection region R is set to overlap so that it exists outside, and the pointing unit is brought into contact with the overlapping region in a state of overlapping each other, the innermost projection region It is preferable to set so that R is selected. In this way, it is possible to move or deform another overlapping projection region R without moving or deforming the projection region R moved immediately before.

なお、投影領域Rの変化を、変化の前後だけでなく、変化の途中もモニタ6に反映させることができるようにするのが好ましい。そして、投影領域Rの変化を、例えば、パーソナルコンピュータPC1を用いて、キャンセルできるようにするのが好ましい。   In addition, it is preferable that the change of the projection region R can be reflected on the monitor 6 not only before and after the change but also during the change. Then, it is preferable that the change in the projection region R can be canceled using, for example, the personal computer PC1.

さらに、パーソナルコンピュータPC1を用いても、投影領域Rを変化させることができるようにするのが好ましい。すなわち、マウス等を用いてモニタ6に表示されている投影領域を変化させることができるようにするのが好ましい。こうすれば、投影領域設定装置の使い勝手をより向上させることができる。   Furthermore, it is preferable that the projection region R can be changed even if the personal computer PC1 is used. That is, it is preferable that the projection area displayed on the monitor 6 can be changed using a mouse or the like. In this way, usability of the projection area setting device can be further improved.

このような投影領域設定装置を本実施形態の作業検知システムに適用すると、例えば、以下のようにして検知領域を図1(b)から図1(d)のように変更することができる。   When such a projection area setting device is applied to the work detection system of this embodiment, for example, the detection area can be changed from FIG. 1B to FIG. 1D as follows.

まず、指示手段を用いて検知領域A12の境界線内を選択し、選択した状態で検知領域A12を図1(d)の位置に移動させる。   First, the inside of the boundary line of the detection area A12 is selected using the instruction means, and the detection area A12 is moved to the position shown in FIG.

次に、指示手段を用いて検知領域A13の境界線内を選択し、選択した状態で検知領域A13を図1(d)の位置に移動させる。   Next, the inside of the boundary line of the detection area A13 is selected using the instruction means, and the detection area A13 is moved to the position shown in FIG.

そして、指示手段を用いて検知領域A14の境界線内を選択し、選択した状態で検知領域A14を図1(b)の検知領域A12が存在する位置に移動させる。   Then, the inside of the boundary line of the detection area A14 is selected using the instruction means, and the detection area A14 is moved to a position where the detection area A12 in FIG.

次に、指示手段を用いて検知領域A11の境界線内を選択し、選択した状態で検知領域A11を図1(d)の位置に移動させる。   Next, the inside of the boundary line of the detection area A11 is selected using the instruction means, and the detection area A11 is moved to the position shown in FIG.

最後に、指示手段を用いて検知領域A14の境界線内を選択し、選択した状態で検知領域A14を再度移動させて図1(d)の位置にくるようにする。   Finally, the inside of the boundary line of the detection area A14 is selected using the instruction means, and the detection area A14 is moved again in the selected state so as to come to the position shown in FIG.

こうして、検知領域A11,A12,A13,A14が図1(b)の配置から図1(d)の配置に変更される。   Thus, the detection areas A11, A12, A13, and A14 are changed from the arrangement shown in FIG. 1B to the arrangement shown in FIG.

なお、検知領域A14を動かす際に、検知領域A11と重複するように動かして、一回の移動で図1(d)の位置に移動させ、その後、検知領域A11が検知領域A14と重複しないように図1(d)の位置に動かすようにしてもよい。こうすれば、移動回数を削減することができる。   When moving the detection area A14, the detection area A14 is moved so as to overlap with the detection area A11, and moved to the position shown in FIG. 1D by one movement. Alternatively, it may be moved to the position shown in FIG. In this way, the number of movements can be reduced.

その後、変更後の検知領域およびその検知順序が設定部7により設定されて設定内容がモニタ6に表示される。ここで、設定作業者は、モニタ6に表示された設定内容を確認し、設定が正しい場合には、入力装置3を用いて設定完了を入力する。設定完了を入力すると、設定部7は、設定完了の入力に基づいて、検知領域およびその検知順序の設定内容を記憶部9に記憶させ、設定処理を終了する。その後、検知装置2が検査処理を開始すると、記憶部9に記憶された検知領域およびその検知順序に従って作業内容の検査処理が実行される。   Thereafter, the changed detection area and its detection order are set by the setting unit 7 and the setting contents are displayed on the monitor 6. Here, the setting operator confirms the setting content displayed on the monitor 6, and inputs the setting completion using the input device 3 when the setting is correct. When setting completion is input, the setting unit 7 stores the setting contents of the detection area and its detection order in the storage unit 9 based on the input of setting completion, and ends the setting process. Thereafter, when the detection device 2 starts the inspection process, the inspection process for the work content is executed in accordance with the detection areas and the detection order stored in the storage unit 9.

このように、本実施形態によれば、各検知領域A11〜A14の位置を変更する作業をより容易に行うことができる。   Thus, according to this embodiment, the operation | work which changes the position of each detection area | region A11-A14 can be performed more easily.

また、投影領域設定装置を本実施形態の作業検知システムに適用すると、図6(c)に示すような設定用シートS21〜S24を用いることなく検知領域を図6(b)から図6(d)のように変更することができる。   Further, when the projection area setting device is applied to the work detection system of the present embodiment, the detection area is set from FIG. 6B to FIG. 6D without using the setting sheets S21 to S24 as shown in FIG. ) Can be changed.

例えば、以下のようにして検知領域を図6(b)から図6(d)のように変更することができる。   For example, the detection area can be changed from FIG. 6B to FIG. 6D as follows.

まず、指示手段を用いて検知領域A13の頂点部分を選択し、選択した状態で検知領域A13を図6(d)の大きさとなるように変化させる。   First, the apex portion of the detection area A13 is selected using the instruction means, and the detection area A13 is changed to the size shown in FIG.

次に、指示手段を用いて検知領域A14の頂点部分を選択し、選択した状態で検知領域A14を図6(d)の大きさとなるように変化させる。   Next, the apex portion of the detection area A14 is selected using the instruction means, and the detection area A14 is changed to the size shown in FIG. 6D in the selected state.

そして、指示手段を用いて検知領域A11の頂点部分を選択し、選択した状態で検知領域A11を図6(d)の大きさとなるように変化させる。   Then, the apex portion of the detection area A11 is selected using the instruction means, and the detection area A11 is changed to the size shown in FIG. 6D in the selected state.

最後に、指示手段を用いて検知領域A12の頂点部分を選択し、選択した状態で検知領域A12を図6(d)の大きさとなるように変化させる。なお、検知領域A12は、2回大きさを変化させて図6(d)の状態となるようにしてもよいし、大きさを変えつつ移動させることで図6(d)の状態となるようにしてもよい。   Finally, the apex portion of the detection area A12 is selected using the instruction means, and the detection area A12 is changed to the size shown in FIG. 6D in the selected state. The detection area A12 may be changed in size twice to be in the state of FIG. 6D, or may be changed in size to be in the state of FIG. 6D. It may be.

こうして、検知領域A11,A12,A13,A14が図6(b)の状態から図6(d)の状態に変更される。   Thus, the detection areas A11, A12, A13, and A14 are changed from the state shown in FIG. 6B to the state shown in FIG.

その後、変更後の検知領域およびその検知順序が設定部7により設定されて設定内容がモニタ6に表示される。ここで、設定作業者は、モニタ6に表示された設定内容を確認し、設定が正しい場合には、入力装置3を用いて設定完了を入力する。設定完了を入力すると、設定部7は、設定完了の入力に基づいて、検知領域およびその検知順序の設定内容を記憶部9に記憶させ、設定処理を終了する。その後、検知装置2が検査処理を開始すると、記憶部9に記憶された検知領域およびその検知順序に従って作業内容の検査処理が実行される。   Thereafter, the changed detection area and its detection order are set by the setting unit 7 and the setting contents are displayed on the monitor 6. Here, the setting operator confirms the setting content displayed on the monitor 6, and inputs the setting completion using the input device 3 when the setting is correct. When setting completion is input, the setting unit 7 stores the setting contents of the detection area and its detection order in the storage unit 9 based on the input of setting completion, and ends the setting process. Thereafter, when the detection device 2 starts the inspection process, the inspection process for the work content is executed in accordance with the detection areas and the detection order stored in the storage unit 9.

このように、本実施形態によれば、各検知領域A11〜A14の範囲(形状や大きさ)を変更する作業をより容易に行うことができる。   Thus, according to this embodiment, the operation | work which changes the range (shape and magnitude | size) of each detection area | region A11-A14 can be performed more easily.

上述の設定例では、変更前と変更後とで検知領域A11〜A14の位置や大きさを異ならせているが、この移動および大きさ変更を適宜組み合わせることで、検知される場所の順序を変更することもできる。   In the above setting example, the positions and sizes of the detection areas A11 to A14 are different between before and after the change, but the order of the detected locations is changed by appropriately combining this movement and size change. You can also

例えば、検知領域A11,A12,A13,A14の検知順序がA11→A12→A13→A14と設定されている場合、検知される場所は、図7(b)の左下→下部中央→右下→左上となっている。   For example, when the detection order of the detection areas A11, A12, A13, and A14 is set as A11 → A12 → A13 → A14, the detected place is the lower left → lower center → lower right → upper left in FIG. It has become.

このとき、検知領域A11と検知領域A13の位置や大きさを入れ替えると、検知される場所は、図7(b)の右下→下部中央→左下→左上となる。   At this time, if the positions and sizes of the detection area A11 and the detection area A13 are interchanged, the detected location is the lower right → the lower center → the lower left → the upper left in FIG. 7B.

検知領域A11と検知領域A13の位置や大きさの入れ替えは、以下のようにして行うことができる。   The positions and sizes of the detection area A11 and the detection area A13 can be exchanged as follows.

まず、検知領域A11を指示手段により選択して検知領域A13と同様の大きさとなるようにするとともに、検知領域A13を指示手段により選択して検知領域A11と同様の大きさとなるようにする。   First, the detection area A11 is selected by the instruction means so as to be the same size as the detection area A13, and the detection area A13 is selected by the instruction means so as to be the same size as the detection area A11.

次に、検知領域A11を指示手段により選択して検知領域A13の位置に移動させるとともに、検知領域A13を指示手段により選択して検知領域A11の位置に移動させる。   Next, the detection area A11 is selected by the instruction means and moved to the position of the detection area A13, and the detection area A13 is selected by the instruction means and moved to the position of the detection area A11.

こうすれば、検知順序が一番目である検知領域A11が検知領域A13の位置にきて、検知順序が三番目である検知領域A13が検知領域A11の位置にくることとなる。   In this way, the detection area A11 with the first detection order comes to the position of the detection area A13, and the detection area A13 with the third detection order comes to the position of the detection area A11.

なお、検知領域A11と検知領域A13の位置や大きさを入れ替えた後に、検知領域A11で検知されるワークがワークW13となり、検知領域A13で検知されるワークがワークW11となるように設定するのが好ましい。こうすれば、図7(d)に示すように、W13→W12→W11→W14の順でワークが検知されるようになる。   After the positions and sizes of the detection area A11 and the detection area A13 are exchanged, the workpiece detected in the detection area A11 is set as the workpiece W13, and the workpiece detected in the detection area A13 is set as the workpiece W11. Is preferred. If it carries out like this, as shown in FIG.7 (d), a workpiece | work will be detected now in order of W13-> W12-> W11-> W14.

その後、変更後の検知領域およびその検知順序が設定部7により設定されて設定内容がモニタ6に表示される。ここで、設定作業者は、モニタ6に表示された設定内容を確認し、設定が正しい場合には、入力装置3を用いて設定完了を入力する。設定完了を入力すると、設定部7は、設定完了の入力に基づいて、検知領域およびその検知順序の設定内容を記憶部9に記憶させ、設定処理を終了する。その後、検知装置2が検査処理を開始すると、記憶部9に記憶された検知領域およびその検知順序に従って作業内容の検査処理が実行される。   Thereafter, the changed detection area and its detection order are set by the setting unit 7 and the setting contents are displayed on the monitor 6. Here, the setting operator confirms the setting content displayed on the monitor 6, and inputs the setting completion using the input device 3 when the setting is correct. When setting completion is input, the setting unit 7 stores the setting contents of the detection area and its detection order in the storage unit 9 based on the input of setting completion, and ends the setting process. Thereafter, when the detection device 2 starts the inspection process, the inspection process for the work content is executed in accordance with the detection areas and the detection order stored in the storage unit 9.

このように、本実施形態によれば、検知されるワークの検知順序を変更する作業をより容易に行うことができる。   Thus, according to this embodiment, the operation | work which changes the detection order of the workpiece | work detected can be performed more easily.

以上説明したように、本実施形態では、距離画像センサ1と、検知装置2と、報知装置(音出力装置4及び照射装置5)と、設定部7とを備えた作業検知システムの設定方法を例示している。   As described above, in the present embodiment, there is provided a method for setting a work detection system including the distance image sensor 1, the detection device 2, the notification device (the sound output device 4 and the irradiation device 5), and the setting unit 7. Illustrated.

ここで、距離画像センサ1は作業領域の距離画像を出力するものである。検知装置2は、距離画像に現れる作業主体または作業主体が扱うワークを検知対象とし、距離画像をもとに作業内容の異常を検知すると報知命令を出力するものである。報知装置は報知命令が入力されると報知動作を行うものである。設定部7は、距離画像内で検知装置2が検知対象の存否を検知する複数の検知領域及びその検知順序を設定するものである。   Here, the distance image sensor 1 outputs a distance image of the work area. The detection device 2 targets a work subject appearing in the distance image or a work handled by the work subject, and outputs a notification command when an abnormality in the work content is detected based on the distance image. The notification device performs a notification operation when a notification command is input. The setting unit 7 sets a plurality of detection areas in which the detection device 2 detects the presence / absence of a detection target in the distance image and the detection order thereof.

そして、本実施形態では、以下のようにして複数の検知領域及びその検知順序を設定している。   In this embodiment, a plurality of detection areas and their detection order are set as follows.

まず、それぞれ設定対象の検知領域と同じ大きさに形成されるとともに検知順序の情報を含む識別コードが付された設定用シートを作業領域に配置した状態で作業領域を二次元カメラ(距離画像センサ1が兼用)で撮影する。次に、設定部7が、二次元カメラの画像を解析することによって作業領域に配置された設定用シートの位置および設定用シートに付された識別コードを検出する。そして、設定部7が、検出された設定用シートの位置および範囲をもとに検知領域を設定し、設定用シートに付された識別コードをもとに検知順序を設定する。   First, the work area is placed in the work area with a setting sheet formed with the same size as the detection area to be set and attached with an identification code including detection order information. 1 is also used for shooting. Next, the setting unit 7 detects the position of the setting sheet arranged in the work area and the identification code attached to the setting sheet by analyzing the image of the two-dimensional camera. Then, the setting unit 7 sets a detection area based on the detected position and range of the setting sheet, and sets a detection order based on the identification code attached to the setting sheet.

このように、設定用シートが所望の検知領域に置かれた状態を二次元カメラで撮影すると、設定部7が二次元カメラの画像を解析し、検知領域およびその検知順序が設定されるようになっている。そのため、設定作業者は、検知領域の範囲に合わせた形状および大きさの設定用シートを所望の位置に置き、その状態を二次元カメラで撮影するだけで、検知領域や検知順序の設定を行えるようになる。その結果、検知領域や検知順序の設定を容易に行うことができるようになる。   In this way, when the state where the setting sheet is placed in the desired detection area is photographed by the two-dimensional camera, the setting unit 7 analyzes the image of the two-dimensional camera, and the detection area and the detection order are set. It has become. Therefore, the setting operator can set the detection area and the detection order simply by placing a setting sheet having a shape and size matching the detection area range at a desired position and photographing the state with a two-dimensional camera. It becomes like this. As a result, detection areas and detection order can be easily set.

さらに、本実施形態の作業検知システムでは、以下の構成を備える投影領域設定装置が用いられている。   Furthermore, in the work detection system of the present embodiment, a projection area setting device having the following configuration is used.

すなわち、投影領域設定装置は、投影面Cの投影範囲に光を照射することが可能であるとともに、照射される光の照射範囲を投影範囲の一部の領域に制限することが可能な照射部を備えている。   That is, the projection area setting device can irradiate the projection range of the projection plane C with light, and can irradiate the irradiation range of the irradiated light to a partial area of the projection range. It has.

さらに、投影領域設定装置は、投影範囲の少なくとも一部の領域であって照射部から照射された光が投影される領域を、投影領域Rとして設定する領域設定部を備えている。   Further, the projection area setting device includes an area setting unit that sets, as a projection area R, an area that is at least a part of the projection range and onto which the light emitted from the irradiation unit is projected.

そして、投影領域Rは、投影面C上で指示手段を操作することで、当該投影領域の大きさ、位置、形状、投影される色、および投影される明るさのうち少なくともいずれか1つの要素を変化させることができるようになっている。さらに、変化した投影領域Rが領域設定部によって設定されるようになっている。   The projection area R is operated by operating the instruction unit on the projection plane C, so that at least one element of the size, position, shape, projected color, and projected brightness of the projection area Can be changed. Further, the changed projection region R is set by the region setting unit.

このような投影領域設定装置を用いることで、検知領域Rの要素を変化させる作業をより容易に行うことができるようになる。   By using such a projection area setting device, the operation of changing the elements of the detection area R can be performed more easily.

また、本実施形態では、領域設定部によって複数の投影領域Rが設定されるようにしており、指示手段が、少なくとも1つの投影領域Rを任意に選択できるようにしている。そして、それぞれの投影領域Rが、指示手段によって選択された場合に、選択された投影領域Rの大きさ、位置、形状、投影される色、および明るさのうち少なくともいずれか1つの要素を指示手段によって変化させることができるようにしている。   In this embodiment, a plurality of projection regions R are set by the region setting unit, and the instruction unit can arbitrarily select at least one projection region R. Then, when each projection region R is selected by the instruction unit, at least one element of the size, position, shape, projected color, and brightness of the selected projection region R is designated. It can be changed by means.

こうすることで、上述した作業検知システムのように複数の検知領域を設定する場合であっても、検知領域Rの要素を変化させる作業をより容易に行うことができるようになる。   By doing so, even when a plurality of detection areas are set as in the above-described work detection system, the work of changing the elements of the detection area R can be performed more easily.

また、投影領域Rを、平面視で略四角形状(多角形状)となるように設定すれば、領域の形状を簡素化させることができるようになる。また、投影範囲にデッドスペースができてしまうのを抑制することができるようになって、より効率的に投影領域を設定することができるようになる。   Further, if the projection region R is set to have a substantially rectangular shape (polygonal shape) in plan view, the shape of the region can be simplified. In addition, it becomes possible to suppress the creation of a dead space in the projection range, and the projection area can be set more efficiently.

また、指示手段として、作業者の指先Fや把持部11と操作子12とを有する指示部材としてのポインタ10を用いるようにすれば、より簡単に、検知領域Rの要素を変化させる作業を行うことができる。   Further, if the pointer 10 as the pointing member having the operator's fingertip F or the grip portion 11 and the operation element 12 is used as the pointing means, the work of changing the element of the detection region R is performed more easily. be able to.

そして、このような指示手段を用いて、投影面C上に投影された投影領域Rを選択することで、選択された投影領域Rの要素を指示手段によって変化させることができるようになっている。   Then, by selecting the projection area R projected on the projection plane C using such an instruction means, the elements of the selected projection area R can be changed by the instruction means. .

本実施形態では、選択された投影領域Rの大きさや位置を変化させることができるようにしたものを例示しているが、その他の要素(形状、投影される色、明るさ等)を変化させるようにすることもできる。   In the present embodiment, an example is shown in which the size and position of the selected projection region R can be changed, but other elements (shape, projected color, brightness, etc.) are changed. It can also be done.

また、本実施形態では、投影領域Rの境界線L内部を、投影領域Rの位置を変更させる指示領域R1とし、四角形状(多角形状)をした境界線Lの4つの頂点部分Tを、投影領域Rの大きさを変化させる指示領域R2としている。   In the present embodiment, the inside of the boundary line L of the projection area R is set as an instruction area R1 for changing the position of the projection area R, and the four vertex portions T of the quadrangular (polygonal) boundary line L are projected. An instruction area R2 for changing the size of the area R is used.

こうすることで、移動、大きさ変更という2つの変化を行うために選択する場所がより明確に区別されることとなり、投影領域の操作性をより向上させることができるようになる。   By doing so, the place to be selected for performing two changes of movement and size change is more clearly distinguished, and the operability of the projection area can be further improved.

そして、このような投影領域設定装置を作業検知システムに適用することで、より容易に投影領域を設定することのできる作業検知システムを得ることができる。   By applying such a projection area setting device to the work detection system, a work detection system that can set the projection area more easily can be obtained.

以上、本発明の好適な実施形態について説明したが、本発明は上記実施形態には限定されず、種々の変形が可能である。   The preferred embodiments of the present invention have been described above. However, the present invention is not limited to the above embodiments, and various modifications can be made.

例えば、上記実施形態では、投影領域設定装置を作業検知システムに適用し、棚板53に光を投影させるようにしたものを例示したが、投影領域設定装置を他の用途に用いることも可能である。例えば、会議室等に配置されているプロジェクタを用いてホワイトボードやスクリーンに投影させるようにしたシステムに、本実施形態で示した投影領域設定装置を適用することも可能である。   For example, in the above-described embodiment, the projection area setting device is applied to the work detection system and the light is projected onto the shelf plate 53. However, the projection area setting device can be used for other purposes. is there. For example, the projection area setting apparatus shown in the present embodiment can be applied to a system in which a projector disposed in a conference room or the like is projected onto a whiteboard or screen.

また、上記実施形態では、設定用シートを用いて初期設定を行い、その後、設定を変更させる場合に、投影面上で投影領域を変更できるようにしたものを例示したが、投影面上で投影領域の初期設定も行えるようにしてもよい。この場合、何も設定されていない投影面上で指示手段が何らかの操作を行うことで新しい投影領域が設定されるようにするのが好ましい。   In the above-described embodiment, the initial setting is performed using the setting sheet, and when the setting is changed thereafter, the projection area can be changed on the projection plane. However, the projection is performed on the projection plane. The initial setting of the area may be performed. In this case, it is preferable that a new projection area is set by performing some operation on the projection plane on which nothing is set.

また、指示手段としてレーザポインタを用いることも可能である。   It is also possible to use a laser pointer as the instruction means.

また、投影領域、その他細部のスペック(形状、大きさ、レイアウト等)も適宜に変更可能である。   Also, the projection area and other detailed specifications (shape, size, layout, etc.) can be changed as appropriate.

1 距離画像センサ
2 検知装置
4 音出力装置(報知装置)
5 照射装置(照射部)
7 設定部(領域設定部)
10 ポインタ(指示部材:指示手段)
11 把持部
12 操作子
53a 上面(投影面)
A11〜A14 検知領域(投影領域)
C 投影面
F 指先(指示手段)
L 境界線
R 投影領域
R1 指示領域
R2 指示領域
T 頂点部分
DESCRIPTION OF SYMBOLS 1 Distance image sensor 2 Detection apparatus 4 Sound output device (notification device)
5 Irradiation device (irradiation part)
7 Setting part (area setting part)
10 Pointer (indicating member: indicating means)
11 Grasping part 12 Operating element 53a Upper surface (projection surface)
A11 to A14 Detection area (projection area)
C Projection plane F Fingertip (instruction means)
L boundary line R projection area R1 indicating area R2 indicating area T vertex portion

Claims (9)

投影面の投影範囲に光を照射することが可能であるとともに、照射される光の照射範囲を前記投影範囲の一部の領域に制限することが可能な照射部と、
前記投影範囲の少なくとも一部の領域であって前記照射部から照射された光が投影される領域を、投影領域として設定する領域設定部と、
を備え、
前記投影領域は、前記投影面上で指示手段を操作することで、当該投影領域の大きさ、位置、形状、投影される色、および投影される明るさのうち少なくともいずれか1つの要素を変化させることができるようになっており、
変化した前記投影領域が前記領域設定部によって設定されることを特徴とする投影領域設定装置。
An irradiation unit capable of irradiating light onto the projection range of the projection surface and capable of limiting the irradiation range of the irradiated light to a partial region of the projection range;
An area setting unit that sets, as a projection area, an area in which light emitted from the irradiation unit is projected, which is at least a part of the projection range;
With
The projection area changes at least one of the size, position, shape, projected color, and projected brightness of the projection area by operating an instruction unit on the projection plane. Can be made to
The projection area setting apparatus, wherein the changed projection area is set by the area setting unit.
前記領域設定部によって複数の投影領域が設定されており、
前記指示手段は、少なくとも1つの投影領域を任意に選択できるようになっており、
前記投影領域は、前記指示手段によって選択された場合に、当該投影領域の大きさ、位置、形状、投影される色、および明るさのうち少なくともいずれか1つの要素を前記指示手段によって変化させることができるようになっていることを特徴とする請求項1に記載の投影領域設定装置。
A plurality of projection areas are set by the area setting unit,
The instructing means can arbitrarily select at least one projection area,
When the projection area is selected by the instruction means, the instruction means changes at least one of the size, position, shape, projected color, and brightness of the projection area. The projection region setting device according to claim 1, wherein
前記指示手段が指先であることを特徴とする請求項1または請求項2に記載の投影領域設定装置。   The projection area setting apparatus according to claim 1, wherein the instruction unit is a fingertip. 前記指示手段が、把持部と操作子とを有する指示部材であることを特徴とする請求項1〜3のうちいずれか1項に記載の投影領域設定装置。   The projection area setting apparatus according to claim 1, wherein the instruction unit is an instruction member having a grip portion and an operation element. 前記指示部材がポインタであることを特徴とする請求項4に記載の投影領域設定装置。   The projection area setting apparatus according to claim 4, wherein the pointing member is a pointer. 前記投影領域は、前記指示手段によって大きさを変化させることができるようになっており、
前記指示手段が前記投影領域の境界線の一部を選択した状態で、当該指示手段を移動させることで、前記投影領域の大きさを変化させるようにしたことを特徴とする請求項1〜5のうちいずれか1項に記載の投影領域設定装置。
The projection area can be changed in size by the instruction means,
6. The size of the projection area is changed by moving the instruction means in a state in which the instruction means selects a part of the boundary line of the projection area. The projection region setting device according to any one of the above.
前記投影領域が多角形状をしており、前記境界線の一部が多角形の頂点であることを特徴とする請求項6に記載の投影領域設定装置。   The projection area setting device according to claim 6, wherein the projection area has a polygonal shape, and a part of the boundary line is a vertex of the polygon. 前記投影領域は、前記指示手段によって位置を変化させることができるようになっており、
前記指示手段が前記投影領域の境界線の内部を選択した状態で、当該指示手段を移動させることで、前記投影領域の位置を変化させるようにしたことを特徴とする請求項1〜7のうちいずれか1項に記載の投影領域設定装置。
The projection area can be changed in position by the instruction means,
The position of the projection area is changed by moving the instruction means in a state where the instruction means selects the inside of the boundary line of the projection area. The projection area setting device according to any one of the preceding claims.
作業領域の距離画像を出力する距離画像センサと、
前記距離画像に現れる作業主体又は前記作業主体が扱うワークを検知対象とし、前記距離画像をもとに作業内容の異常を検知すると報知命令を出力する検知装置と、
前記報知命令が入力されると報知動作を行う報知装置と、
前記距離画像内で前記検知装置が検知対象の存否を検知する検知領域及び検知順序を設定する設定装置として用いられる請求項1〜8のうちいずれか1項に記載の投影領域設定装置と、
を備えることを特徴とする作業検知システム。
A distance image sensor that outputs a distance image of the work area;
A detection device that outputs a notification command when an abnormality of a work content is detected based on the distance image, with a work subject that appears in the distance image or a work handled by the work subject being detected.
A notification device that performs a notification operation when the notification command is input;
The projection region setting device according to any one of claims 1 to 8, which is used as a setting device for setting a detection region and a detection order in which the detection device detects the presence or absence of a detection target in the distance image;
A work detection system comprising:
JP2014120179A 2014-06-11 2014-06-11 Projection area setting device, and work detection system using the projection area setting device Pending JP2016001354A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014120179A JP2016001354A (en) 2014-06-11 2014-06-11 Projection area setting device, and work detection system using the projection area setting device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014120179A JP2016001354A (en) 2014-06-11 2014-06-11 Projection area setting device, and work detection system using the projection area setting device

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2018154704A Division JP6675086B2 (en) 2018-08-21 2018-08-21 Work detection system

Publications (1)

Publication Number Publication Date
JP2016001354A true JP2016001354A (en) 2016-01-07

Family

ID=55076931

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014120179A Pending JP2016001354A (en) 2014-06-11 2014-06-11 Projection area setting device, and work detection system using the projection area setting device

Country Status (1)

Country Link
JP (1) JP2016001354A (en)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006522967A (en) * 2003-04-08 2006-10-05 スマート テクノロジーズ インコーポレイテッド Automatic alignment touch system and method
JP2009225432A (en) * 2008-02-22 2009-10-01 Panasonic Electric Works Co Ltd Light projection device and illumination device
JP2009290354A (en) * 2008-05-27 2009-12-10 Panasonic Electric Works Co Ltd Lighting device, and space production system
JP2010160403A (en) * 2009-01-09 2010-07-22 Seiko Epson Corp Projection type display device
JP2011043876A (en) * 2009-08-19 2011-03-03 Brother Industries Ltd Image display device
JP2012160079A (en) * 2011-02-01 2012-08-23 Toshiba Corp Interface apparatus, method, and program
JP2013061552A (en) * 2011-09-14 2013-04-04 Ricoh Co Ltd Projector device and operation detection method
JP2013145422A (en) * 2012-01-13 2013-07-25 Panasonic Corp Setting method of work detection system and work detection system using the same
JP2013152529A (en) * 2012-01-24 2013-08-08 Canon Inc Information processor and method for controlling the same

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006522967A (en) * 2003-04-08 2006-10-05 スマート テクノロジーズ インコーポレイテッド Automatic alignment touch system and method
JP2009225432A (en) * 2008-02-22 2009-10-01 Panasonic Electric Works Co Ltd Light projection device and illumination device
JP2009290354A (en) * 2008-05-27 2009-12-10 Panasonic Electric Works Co Ltd Lighting device, and space production system
JP2010160403A (en) * 2009-01-09 2010-07-22 Seiko Epson Corp Projection type display device
JP2011043876A (en) * 2009-08-19 2011-03-03 Brother Industries Ltd Image display device
JP2012160079A (en) * 2011-02-01 2012-08-23 Toshiba Corp Interface apparatus, method, and program
JP2013061552A (en) * 2011-09-14 2013-04-04 Ricoh Co Ltd Projector device and operation detection method
JP2013145422A (en) * 2012-01-13 2013-07-25 Panasonic Corp Setting method of work detection system and work detection system using the same
JP2013152529A (en) * 2012-01-24 2013-08-08 Canon Inc Information processor and method for controlling the same

Similar Documents

Publication Publication Date Title
TWI641545B (en) Pick Support Device
CN111315670B (en) Shelf label detection device, shelf label detection method, and recording medium
JP2013025478A (en) Work detection system
US8896688B2 (en) Determining position in a projection capture system
JP2017014014A (en) Image processing apparatus
JP7174074B2 (en) Image processing equipment, work robots, substrate inspection equipment and specimen inspection equipment
JP5891399B2 (en) Work detection system setting method and work detection system using the same
JP2013171425A (en) Image processing device
WO2016163564A1 (en) Information processing device, information processing system, position reporting method, and program recording medium
EP2951322B1 (en) Leather process automation for die cutting operations
JP2015014882A5 (en)
JP6207764B2 (en) Work support system, work support device, and work support method
JP6757517B2 (en) Visual confirmation support device and visual confirmation support method
TWI470376B (en) Drawing apparatus and drawing method
JP6675086B2 (en) Work detection system
JP2016001354A (en) Projection area setting device, and work detection system using the projection area setting device
JP2014036053A (en) Storage device for individual piece and storage method
KR101724441B1 (en) Apparatus for projecting drawing image
EP3789937A1 (en) Imaging device, method for controlling image device, and system including image device
JP2009224476A (en) Defect relevance displaying apparatus, substrate testing apparatus, and defect relevance displaying method
JP2008212954A (en) Laser beam machining apparatus
JP6459613B2 (en) Printed wiring board work support method and printed wiring board work support system
TWM479415U (en) Fluorescence automatic optical inspection machine
JP7375049B2 (en) Image processing device and method
JPWO2019186974A1 (en) Image identification cash register device, image identification cash register system, product information display method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170412

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20171206

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171212

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180206

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180227

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180426

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20180522