JP2012141884A - Evaluation support device and evaluation support system - Google Patents

Evaluation support device and evaluation support system Download PDF

Info

Publication number
JP2012141884A
JP2012141884A JP2011000588A JP2011000588A JP2012141884A JP 2012141884 A JP2012141884 A JP 2012141884A JP 2011000588 A JP2011000588 A JP 2011000588A JP 2011000588 A JP2011000588 A JP 2011000588A JP 2012141884 A JP2012141884 A JP 2012141884A
Authority
JP
Japan
Prior art keywords
line segment
image data
unit
change
segment information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2011000588A
Other languages
Japanese (ja)
Inventor
Toru Ishii
徹 石井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2011000588A priority Critical patent/JP2012141884A/en
Publication of JP2012141884A publication Critical patent/JP2012141884A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)

Abstract

PROBLEM TO BE SOLVED: To quantitatively evaluate an existence degree of an object and support safety securement and efficiency enhancement according to the evaluation.SOLUTION: An evaluation support device comprises: a line segment extraction unit 14 that extracts line segment information of an object from image data; a characteristic change determination unit 16 that compares line segment information of input image data with line segment information of image data recorded in a recording unit 15 to detect a change in the line segment information; an image comparison unit 17 that specifies an occurrence part of the change in the line segment information detected by the characteristic change determination unit 16 with reference to the input image data and the image data recorded in the recording unit 15; and an efficiency enhancement control unit 18 that performs quantitative evaluation on the change in the line segment information detected by the characteristic change determination unit 16, and displays the quantitative evaluation and the occurrence part of the change in the line segment information specified by the image comparison unit 17 on a display device 3.

Description

この発明は、作業環境のレベルを判定し、作業環境の安全化および効率化支援を行う評価支援装置および評価支援システムに関するものである。   The present invention relates to an evaluation support apparatus and an evaluation support system that determine the level of a work environment and support the safety and efficiency of the work environment.

従来より、物体の移動を検出する装置が提案されている。例えば、特許文献1に開示された映像監視システムでは、入力画像から監視エリアの画像認識処理の基準となる画像を生成し、入力画像と基準画像との比較により出現物体の動き状態を検出し、所定時間停止状態にあるものを停止物体とし停止物体画像を取得し保持し、出現物体と判定された領域を除外したマスク画像を入力画像と停止物体画像でそれぞれ生成し、停止物体画像に対する入力画像の類似度から監視エリアの物体の変化を検出している。   Conventionally, an apparatus for detecting the movement of an object has been proposed. For example, in the video surveillance system disclosed in Patent Document 1, an image serving as a reference for image recognition processing of a monitoring area is generated from an input image, and a motion state of an appearing object is detected by comparing the input image with the reference image. A stop object image is acquired and held as a stop object for a predetermined time, and a mask image excluding an area determined to be an appearance object is generated as an input image and a stop object image, respectively. The change of the object in the monitoring area is detected from the similarity.

特開2008−104130号公報JP 2008-104130 A

しかしながら、上述した特許文献1に開示された技術では、入力画像と基準画像とを比較して物体の動き状態を検出しているため、物体の動きは検出できるものの、当該動きの度合いを評価し、当該評価に応じた支援情報を提供することは困難であった。   However, since the technique disclosed in Patent Document 1 described above detects the movement state of the object by comparing the input image and the reference image, the movement of the object can be detected, but the degree of the movement is evaluated. It was difficult to provide support information according to the evaluation.

この発明は、上記のような課題を解決するためになされたもので、物体の存在度合いの変化と、並び方を定量的に評価し、当該評価に応じた安全化支援および効率化支援を行うことを目的とする。   The present invention has been made to solve the above-described problems, and quantitatively evaluates the change in the degree of existence and arrangement of objects, and performs safety support and efficiency support according to the evaluation. With the goal.

この発明に係る評価支援装置は、画像データから物体の線分情報を抽出する線分抽出部と、画像データと、線分抽出部が抽出した線分情報とを記録する記録部と、入力された画像データの線分情報と、記録部に記録された画像データの線分情報とを比較し、線分情報の変化を検出する変化検出部と、入力された画像データと記録部に記録された画像データを参照して、変化検出部が検出した線分情報の変化の発生箇所を特定する画像比較部と、変化検出部が検出した線分情報の変化について定量的評価を行うと共に、当該定量的評価と画像比較部が特定した線分情報の変化の発生箇所とを表示手段に表示する効率化制御部とを備えるものである。   An evaluation support apparatus according to the present invention receives a line segment extraction unit that extracts line segment information of an object from image data, a recording unit that records image data, and line segment information extracted by the line segment extraction unit, and an input The line information of the image data is compared with the line information of the image data recorded in the recording unit, the change detecting unit for detecting the change of the line segment information, the input image data and the recording unit The image comparison unit that identifies the occurrence location of the change in the line segment information detected by the change detection unit and the change in the line segment information detected by the change detection unit are quantitatively evaluated and And an efficiency control unit that displays on the display means the quantitative evaluation and the occurrence location of the change in the line segment information specified by the image comparison unit.

この発明によれば、入力された画像データの線分情報と、画像データから物体の線分情報を抽出する線分抽出部と、記録部に記録された画像データの線分情報とを比較し、線分情報の変化を検出する変化検出部と、入力された画像データと記録部に記録された画像データを参照して、変化検出部が検出した線分情報の変化の発生箇所を特定する画像比較部と、変化検出部が検出した線分情報の変化について定量的評価を行うと共に、当該定量的評価と画像比較部が特定した線分情報の変化の発生箇所とを表示手段に表示する効率化制御部とを備えるように構成したので、定量的評価に基づき作業環境を評価し、安全化支援および効率化支援を行うことができる。   According to the present invention, the line segment information of the input image data, the line segment extraction unit that extracts the line segment information of the object from the image data, and the line segment information of the image data recorded in the recording unit are compared. The change detection unit that detects a change in line segment information, and the input image data and the image data recorded in the recording unit are referenced to identify the location where the change in the line segment information detected by the change detection unit occurs. Quantitative evaluation is performed on the change of the line segment information detected by the image comparison unit and the change detection unit, and the quantitative evaluation and the occurrence point of the change of the line segment information specified by the image comparison unit are displayed on the display unit. Since it comprised so that the efficiency improvement control part might be provided, a work environment can be evaluated based on quantitative evaluation, and safety | security support and efficiency improvement support can be performed.

実施の形態1による評価支援装置の構成を示すブロック図である。1 is a block diagram illustrating a configuration of an evaluation support apparatus according to Embodiment 1. FIG. 実施の形態1による評価支援装置の動作を示すフローチャートである。4 is a flowchart illustrating an operation of the evaluation support apparatus according to the first embodiment. 実施の形態1による評価支援装置の安全化・効率化支援の表示例を示す図である。6 is a diagram illustrating a display example of safety / efficiency support of the evaluation support device according to Embodiment 1. FIG. 実施の形態2による評価支援装置の構成を示すブロック図である。It is a block diagram which shows the structure of the evaluation assistance apparatus by Embodiment 2. 実施の形態2による評価支援装置の動作を示すフローチャートである。6 is a flowchart illustrating an operation of the evaluation support apparatus according to the second embodiment. 実施の形態2による評価支援装置の安全化・効率化支援の表示例を示す図である。FIG. 10 is a diagram illustrating a display example of safety / efficiency support of the evaluation support device according to the second embodiment. 実施の形態3による評価支援装置の構成を示すブロック図である。FIG. 10 is a block diagram illustrating a configuration of an evaluation support apparatus according to Embodiment 3. 実施の形態3による評価支援装置の動作を示すフローチャートである。10 is a flowchart showing the operation of the evaluation support apparatus according to the third embodiment. 実施の形態4による評価支援装置の構成を示すブロック図である。It is a block diagram which shows the structure of the evaluation assistance apparatus by Embodiment 4.

実施の形態1.
図1は、この発明の実施の形態1による評価支援装置の構成を示すブロック図である。
評価支援装置1は、キャプチャ部11、ユーザ入力部12、抽出パラメータ設定部13、線分抽出部14、記録部15、特徴的変化判定部(変化検出部)16、画像比較部17および効率化制御部18で構成されている。また評価支援装置1は、画像センサ2および表示装置3と接続されている。画像センサ2は、画像を検知して検出信号を出力する。表示装置3は、評価支援装置1から出力される表示指示に基づき画像データ、評価結果、および安全化・効率化支援の情報を表示する。
Embodiment 1 FIG.
FIG. 1 is a block diagram showing a configuration of an evaluation support apparatus according to Embodiment 1 of the present invention.
The evaluation support apparatus 1 includes a capture unit 11, a user input unit 12, an extraction parameter setting unit 13, a line segment extraction unit 14, a recording unit 15, a characteristic change determination unit (change detection unit) 16, an image comparison unit 17, and an improvement in efficiency. The controller 18 is configured. The evaluation support device 1 is connected to the image sensor 2 and the display device 3. The image sensor 2 detects an image and outputs a detection signal. The display device 3 displays image data, evaluation results, and information on safety / efficiency support based on the display instruction output from the evaluation support device 1.

キャプチャ部11は、画像センサ2から入力されるセンサ信号に基づき画像データを構成する。ユーザ入力部12は、ユーザ操作を受け付ける。抽出パラメータ設定部13は、画像データ中の線分を抽出する際のパラメータを設定する。ここで、パラメータの設定は種々構成可能である。例えば、画像データ中の人の顔を認識し、認識した顔の大きさを基準として、当該顔の1/2程度の長さを線分と設定し、顔の1/4程度の長さを線分間隔と設定する。このように、画像データ中のあるオブジェクトの大きさを基準として線分および線分間隔を設定することができる。また異なる構成として、ユーザ入力部12を介してユーザが設定した値を抽出パラメータとしてもよい。   The capture unit 11 configures image data based on a sensor signal input from the image sensor 2. The user input unit 12 receives a user operation. The extraction parameter setting unit 13 sets parameters for extracting line segments in the image data. Here, various parameters can be set. For example, a person's face in the image data is recognized, and the length of about ½ of the face is set as a line segment based on the size of the recognized face, and the length of about ¼ of the face is set. Set as line segment interval. In this way, line segments and line segment intervals can be set based on the size of an object in the image data. As a different configuration, a value set by the user via the user input unit 12 may be used as the extraction parameter.

線分抽出部14は、抽出パラメータ設定部13において設定された抽出パラメータを用いて、Hough変換により画像データから線分を抽出する。さらに抽出した線分の座標データも合せて取得する。取得した線分の座標データおよび線分の本数などは線分情報として画像データと共に記録部15に格納する。記録部15は、画像データと当該画像データの線分情報を合せて記録する。   The line segment extraction unit 14 extracts line segments from the image data by Hough conversion using the extraction parameters set by the extraction parameter setting unit 13. Furthermore, the coordinate data of the extracted line segment is also acquired. The acquired coordinate data of the line segment, the number of line segments, and the like are stored in the recording unit 15 together with the image data as line segment information. The recording unit 15 records the image data and the line segment information of the image data together.

特徴的変化判定部16は、記録部15に記録された過去の画像の線分情報と、現在の画像の線分情報とを比較して特徴的な変化が生じているか否か判定する。ここで特徴的な変化とは、例えば線分の数に急な増減があった場合、線分の座標に大きな変化があった場合などである。なお、ユーザ入力部12を介して設定された基準に基づいて特徴的変化と判断するように構成してもよい。画像比較部17は、特徴的変化判定部16において特徴的な変化が生じていると判定された線分情報を有する画像データを比較し、画像データ内の最も変化している領域を特定する。   The characteristic change determination unit 16 compares the line segment information of the past image recorded in the recording unit 15 with the line segment information of the current image to determine whether or not a characteristic change has occurred. Here, the characteristic change is, for example, when the number of line segments suddenly increases or decreases, or when there is a large change in the coordinates of the line segments. In addition, you may comprise so that it may be judged that it is a characteristic change based on the reference | standard set via the user input part 12. FIG. The image comparison unit 17 compares image data having line segment information determined as having undergone a characteristic change by the characteristic change determination unit 16 and identifies the most changed region in the image data.

効率化制御部18は、画像比較部17において特定された画像データ内の最も変化している領域について、当該変化を視認し易い表示レイアウトデータを作成する。例えば、記録部15に記録された画像データから最も線分数が少ない場合、最も線分数が多い場合、あるいは平均的な線分数の場合の画像データと、現在の画像データを並べて表示する表示レイアウトデータを作成する。さらに効率化制御部18は、記録部15に記録された過去の画像データと現在の画像データにおける線分数を算出し、当該線分数の増減に基づいて定量的評価を行い、当該評価に対応するメッセージなどの支援情報を作成する。   The efficiency control unit 18 creates display layout data that makes it easy to visually recognize the change in the most changed region in the image data specified by the image comparison unit 17. For example, when the number of line segments is the smallest from the image data recorded in the recording unit 15, the image data when the number of line segments is the largest, or the average number of line segments, and the display layout data for displaying the current image data side by side Create Furthermore, the efficiency control unit 18 calculates the number of line segments in the past image data and the current image data recorded in the recording unit 15, performs a quantitative evaluation based on the increase / decrease in the number of line segments, and corresponds to the evaluation. Create support information such as messages.

定量的評価とは、例えば過去の画像データと現在の画像データにおける線分数をそれぞれ数値で示したものである。過去の画像データの線分数に対する現在の画像データの線分数の増加量が所定値以上であるか否かにより作業環境の整理整頓度合いを評価する。効率化制御部18において生成された表示レイアウトデータ、定量的評価の結果および支援情報の表示指示は表示装置3に出力される。   Quantitative evaluation is a numerical value indicating the number of line segments in past image data and current image data, for example. The degree of organization of the work environment is evaluated based on whether or not the amount of increase in the number of line segments in the current image data with respect to the number of line segments in the past image data is greater than or equal to a predetermined value. The display layout data generated by the efficiency control unit 18, the result of quantitative evaluation, and the display instruction of support information are output to the display device 3.

次に、実施の形態1の評価支援装置1の動作について説明する。図2は、実施の形態1による評価支援装置の動作を示すフローチャートである。
評価支援装置1に画像センサ2からセンサ信号が入力されると(ステップST1)、キャプチャ部11は入力されたセンサ信号に基づいた画像データを構成する(ステップST2)。抽出パラメータ設定部13は、ステップST2で構成された画像データから線分および線分間隔の抽出パラメータを設定する(ステップST3)。
Next, the operation of the evaluation support apparatus 1 according to the first embodiment will be described. FIG. 2 is a flowchart showing the operation of the evaluation support apparatus according to the first embodiment.
When a sensor signal is input from the image sensor 2 to the evaluation support apparatus 1 (step ST1), the capture unit 11 configures image data based on the input sensor signal (step ST2). The extraction parameter setting unit 13 sets extraction parameters for line segments and line segment intervals from the image data configured in step ST2 (step ST3).

線分抽出部14は、ステップST3で設定された抽出パラメータを用いて、ステップST2で構成された画像データから線分を抽出し、抽出した線分の数および線分の座標データなどの線分情報を取得する(ステップST4)。取得した線分情報は画像データと共に記録部15に格納される(ステップST5)。特徴的変化判定部16は、記録部15に格納された過去の画像データの線分情報と、ステップST4で取得された現在の画像データの線分情報とを比較し、現在の画像データの線分情報に特徴的変化が生じているか否か判定を行う。(ステップST6)。   The line segment extraction unit 14 extracts line segments from the image data configured in step ST2 using the extraction parameters set in step ST3, and extracts line segments such as the number of extracted line segments and the coordinate data of the line segments. Information is acquired (step ST4). The acquired line segment information is stored in the recording unit 15 together with the image data (step ST5). The characteristic change determination unit 16 compares the line segment information of the past image data stored in the recording unit 15 with the line segment information of the current image data acquired in step ST4, and compares the line information of the current image data. It is determined whether a characteristic change has occurred in the minute information. (Step ST6).

ステップST6において、現在の画像データの線分情報に特徴的変化が発生していないと判定された場合には、ステップST1の処理に戻り、新たにセンサ信号が入力されるまで待機する。一方、ステップST6において、現在の画像データの線分情報に特徴的変化が発生していると判定された場合には、画像比較部17が、当該線分情報を有する現在および過去の画像データを比較し、画像データ内で最も大きく変化している領域を特定する(ステップST7)。   If it is determined in step ST6 that no characteristic change has occurred in the line segment information of the current image data, the process returns to step ST1 and waits until a new sensor signal is input. On the other hand, when it is determined in step ST6 that a characteristic change has occurred in the line segment information of the current image data, the image comparison unit 17 determines the current and past image data having the line segment information. The comparison is performed to identify the region that has changed the most in the image data (step ST7).

効率化制御部18は、ステップST7における特定結果を参照し、画像データ内で最も変化している領域が視認し易い表示レイアウトデータを作成する(ステップST8)。さらに、効率化制御部18は、ステップST7における特定結果を参照し、線分数の増減に基づいて定量的評価を行い、当該定量的評価に対応した表示メッセージなどを作成する(ステップST9)。表示装置3は、ステップST8で作成された表示レイアウトデータに基づいた画面表示を行い、当該画面上にステップST9で作成した定量的評価の結果およびメッセージを合せて表示する(ステップST10)。その後フローチャートはステップST1の処理に戻り、上述した処理を繰り返す。   The efficiency control unit 18 refers to the identification result in step ST7, and creates display layout data in which the most changed area in the image data is easily visible (step ST8). Furthermore, the efficiency control unit 18 refers to the specific result in step ST7, performs a quantitative evaluation based on the increase or decrease in the number of line segments, and creates a display message corresponding to the quantitative evaluation (step ST9). The display device 3 performs screen display based on the display layout data created in step ST8, and displays the quantitative evaluation result and message created in step ST9 on the screen together (step ST10). Thereafter, the flowchart returns to the process of step ST1 and repeats the above-described process.

なお、上述したステップST3の抽出パラメータの設定は、画像データ中のオブジェクトの大きさを基準としてもよいし、ユーザ入力部12を介して設定されたユーザが所望する値としてもよい。ユーザが所望する値をパラメータとして設定すると、特に細かい部品を扱う作業環境や、大きな部品を扱う作業環境であった場合にも、線分抽出部14において有効な線分抽出を行うことができる。   Note that the setting of the extraction parameter in step ST3 described above may be based on the size of the object in the image data, or may be a value desired by the user set via the user input unit 12. When a value desired by the user is set as a parameter, the line segment extraction unit 14 can perform effective line segment extraction even in a work environment that handles particularly fine parts or a work environment that handles large parts.

図3は、実施の形態1による評価支援装置の安全化・効率化支援の表示例を示す図である。表示装置3の表示画面3aには、現在の画像3bと過去の画像3cが並列に表示され、現在の画像3bに対する定量的評価の結果3dが「2010.10.15 15:47 整理整頓レベル742」と表示され、過去の画像3cに対する定量的評価の結果3eが「2010.10.15 08:30 整理整頓レベル217」と表示されている。図3の例では定量的評価の結果、すなわち線分数を「整理整頓レベル」として記載している。また、図3の例では過去の画像3cの線分数に対して現在の画像3bの線分数の増加量が所定値「500」を超えているため、支援情報であるメッセージ3f「机の上のものがだいぶ増えてきました。使わない部品や工具を棚に戻して、作業環境をシンプルにし、ミスや怪我のないように作業環境を整えましょう。」が作成され、表示される。   FIG. 3 is a diagram illustrating a display example of safety / efficiency support of the evaluation support apparatus according to the first embodiment. On the display screen 3a of the display device 3, the current image 3b and the past image 3c are displayed in parallel. The result 3d of the quantitative evaluation for the current image 3b is “2010.10.15 15:47 Organized level 742”. The result 3e of the quantitative evaluation for the past image 3c is displayed as “2010.10.15 08:30, organized level 217”. In the example of FIG. 3, the result of the quantitative evaluation, that is, the number of line segments is described as the “organization level”. In addition, in the example of FIG. 3, the amount of increase in the number of line segments in the current image 3b exceeds the predetermined value “500” with respect to the number of line segments in the past image 3c. Things have increased a lot, let's return unused parts and tools to the shelf, simplify the work environment, and prepare the work environment so that there are no mistakes or injuries. "Is created and displayed.

ユーザは、表示装置3の表示画面3aに表示された定量的評価の結果3d,3eを確認することにより、作業環境にオブジェクトが増大していることを確認することができる。さらにメッセージ3fを表示することにより、作業環境を整える必要があることを認識することができる。   The user can confirm that the number of objects has increased in the work environment by confirming the quantitative evaluation results 3d and 3e displayed on the display screen 3a of the display device 3. Further, by displaying the message 3f, it can be recognized that the work environment needs to be prepared.

以上のように、この実施の形態1によれば、抽出パラメータに基づいて画像データから線分を抽出し、抽出した線分の数および線分の座標データなどの線分情報を取得する線分抽出部14と、過去の画像データの線分情報と現在の画像データの線分情報とを比較して特徴的変化が発生しているか否か判定を行う特徴的変化判定部16と、画像データ内の最も大きく変化している領域を特定する画像比較部17と、変化している領域を明示する表示レイアウトデータを作成すると共に、線分情報に基づいて定量的評価を行い、当該評価に対応した支援情報を作成する効率化制御部18を備えるように構成したので、作業環境の整理整頓度合いを数値化して判断することができる。また、整理整頓度合いを示す数値に基づき作業環境を評価するため、評価が容易となり、作業環境の安全化・効率化支援を容易に行うことができる。   As described above, according to the first embodiment, line segments are extracted from image data based on extraction parameters, and line segment information such as the number of extracted line segments and line segment coordinate data is acquired. An extraction unit 14; a characteristic change determination unit 16 that compares line segment information of past image data and line segment information of current image data to determine whether or not a characteristic change has occurred; and image data The image comparison unit 17 that identifies the region that has changed most greatly and the display layout data that specifies the region that has changed are created, and quantitative evaluation is performed based on the line segment information, and this evaluation is supported. Since the efficiency control unit 18 for creating the support information is provided, it is possible to determine the degree of organization of the work environment by quantifying it. In addition, since the work environment is evaluated based on the numerical value indicating the degree of organization, the evaluation becomes easy, and it is possible to easily support the safety and efficiency of the work environment.

また、この実施の形態1によれば、効率化制御部18が、変化している領域を明示する表示レイアウトデータを作成すると共に、線分情報に基づいて定量的評価を行い、当該評価に対応した支援情報を作成し、表示装置3に表示レイアウトデータ、定量的評価の結果および支援情報を表示するように構成したので、ユーザは作業環境の整理整頓度合いを数値により容易に把握することができる。また、変化している領域が明示されているため、どの作業環境を整えるべきか容易に判断することができる。さらに支援情報が表示されることから作業環境を整える必要があることを容易に認識することができる。これらにより、ユーザは容易且つスムーズに作業環境の安全化・効率化を実施することができる。   Further, according to the first embodiment, the efficiency control unit 18 creates display layout data that clearly indicates a changing area, and performs a quantitative evaluation based on the line segment information to cope with the evaluation. Since the support information is generated and the display layout data, the result of quantitative evaluation, and the support information are displayed on the display device 3, the user can easily grasp the degree of organization of the work environment by numerical values. . In addition, since the changing area is clearly indicated, it is possible to easily determine which work environment should be prepared. Furthermore, since the support information is displayed, it can be easily recognized that the work environment needs to be prepared. As a result, the user can easily and smoothly implement a safe and efficient work environment.

なお、上述した実施の形態1では、特徴的変化判定部16が記録部15に記録された過去の画像の線分情報と、現在の画像の線分情報とを比較して特徴的な変化が生じているか否か判定する構成を示したが、特徴的変化判定部16に学習機能を持たせて構成してもよい。例えば、これまでの判定において最も少ない線分数を最良値として記録部15に記録しておき、当該最良値と現在の画像の線分情報とを比較して特徴的な変化が生じているか否か判定する。また異なる例として、作業環境が整理整頓されていると思われる始業時の線分数、あるいは始業時間帯の線分数の平均値を判定の指標として記録部15に記録し、当該判定の指標と現在の画像の線分情報とを比較して特徴的な変化が生じているか否か判定してもよい。
また、特徴的変化判定部16に学習機能を持たせる構成は、以下で説明する実施の形態2−5においても適用可能である。
In the first embodiment described above, the characteristic change determination unit 16 compares the line segment information of the past image recorded in the recording unit 15 with the line segment information of the current image, and there is a characteristic change. Although the configuration for determining whether or not the occurrence has occurred is shown, the characteristic change determination unit 16 may be configured to have a learning function. For example, the smallest number of line segments in the determination so far is recorded in the recording unit 15 as the best value, and whether the characteristic value is changed by comparing the best value with the line segment information of the current image. judge. Also, as a different example, the number of line segments at the start of work, or the average value of the number of line segments in the start time period, where the work environment seems to be organized, is recorded in the recording unit 15 as a determination index, and the determination index and current It may be determined whether or not there is a characteristic change by comparing the line segment information of the image.
The configuration in which the characteristic change determination unit 16 has a learning function can also be applied to Embodiment 2-5 described below.

また、上述した実施の形態1の構成に追加して、表示装置3に評価パターン設定画面を表示し、ユーザがユーザ入力部12を介して評価パターンを設定するように構成してもよい。評価パターンの設定として、評価対象の設定、評価対象の広さの設定、評価対象での作業内容の設定などが考えられる。例えば、評価対象について「工場」「事務所」「運動場」などの項目が表示され、評価対象の広さについて「グランド」「1フロア」「1机」などの項目が表示され、評価対象での作業内容について「分解組み立て」「デザインワーク」「文書作成」「調査」などの項目が表示され、ユーザがユーザ入力部12を介してこれらの項目から該当する項目を選択する。   In addition to the configuration of the first embodiment described above, an evaluation pattern setting screen may be displayed on the display device 3 so that the user sets an evaluation pattern via the user input unit 12. As the setting of the evaluation pattern, the setting of the evaluation target, the setting of the size of the evaluation target, the setting of the work content on the evaluation target, and the like can be considered. For example, items such as “factory”, “office”, and “playground” are displayed for the evaluation target, and items such as “ground”, “one floor”, and “one desk” are displayed for the size of the evaluation target. Items such as “disassembly / assembly”, “design work”, “document creation”, and “investigation” are displayed for the work content, and the user selects a corresponding item from these items via the user input unit 12.

評価パターンを設定することにより、線分抽出パラメータ13、線分抽出部14、特徴的変化判定部16、画像比較部17および効率化制御部18における処理動作がより的確なものとなる。なお、評価パターンや、評価対象、評価対象の広さおよび評価対象での作業内容に関する項目は上述した項目に限定されるものではなく、使用環境に応じて適宜変更や追加が可能である。
また、このユーザ入力部12を介して評価パターンを設定する構成は、以下で説明する実施の形態2−5においても適用可能である。
By setting the evaluation pattern, the processing operations in the line segment extraction parameter 13, the line segment extraction unit 14, the characteristic change determination unit 16, the image comparison unit 17, and the efficiency control unit 18 become more accurate. Note that the items related to the evaluation pattern, the evaluation target, the size of the evaluation target, and the work content of the evaluation target are not limited to the items described above, and can be changed or added as appropriate according to the use environment.
Moreover, the structure which sets an evaluation pattern via this user input part 12 is applicable also in Embodiment 2-5 demonstrated below.

実施の形態2.
上述した実施の形態1では、画像データの線分情報を比較して作業環境を評価する構成を示したが、この実施の形態2では、画像データの輪郭を用いて物体の移動を判断して作業環境を評価する構成を示す。
図4は、実施の形態2による評価支援装置の構成を示すブロック図である。実施の形態1で示した線分抽出部14に替えてオブジェクト抽出部21を備えている。さらに、物体の移動を示す移動ベクトルを抽出する移動ベクトル抽出部22を追加して設けている。なお以下では、実施の形態1による評価支援装置1の構成要素と同一または相当する部分には実施の形態1で使用した符号と同一の符号を付して説明を省略または簡略化する。
Embodiment 2. FIG.
In the above-described first embodiment, the configuration in which the work environment is evaluated by comparing the line segment information of the image data is shown. However, in this second embodiment, the movement of the object is determined using the contour of the image data. A configuration for evaluating the work environment is shown.
FIG. 4 is a block diagram showing the configuration of the evaluation support apparatus according to the second embodiment. An object extracting unit 21 is provided instead of the line segment extracting unit 14 shown in the first embodiment. Further, a movement vector extraction unit 22 for extracting a movement vector indicating the movement of the object is additionally provided. In the following description, the same or corresponding parts as the components of the evaluation support apparatus 1 according to the first embodiment are denoted by the same reference numerals as those used in the first embodiment, and the description thereof is omitted or simplified.

抽出パラメータ設定部13は、画像データ中の物体を認識し、認識した物体の大きさを基準としてその他のオブジェクトサイズを設定する。オブジェクト抽出部21は、キャプチャ部11において構成された画像データをWavelet変換することによりオブジェクトを抽出する。さらに抽出したオブジェクトの座標データを取得する。抽出したオブジェクトの座標データおよびオブジェクトの数をオブジェクト情報として画像データと共に記録部15に格納する。記録部15は、画像データと当該画像データのオブジェクト情報を合せて記録する。   The extraction parameter setting unit 13 recognizes an object in the image data and sets other object sizes based on the size of the recognized object. The object extraction unit 21 extracts an object by wavelet transforming the image data configured in the capture unit 11. Further, the coordinate data of the extracted object is acquired. The extracted coordinate data and the number of objects are stored as object information in the recording unit 15 together with the image data. The recording unit 15 records the image data and the object information of the image data together.

特徴的変化判定部16は、記録部15に記録された過去の画像データのオブジェクト情報と、オブジェクト抽出部21から入力される現在の画像のオブジェクト情報とを比較し、オブジェクトに特徴的な変化が生じているか否か判定する。ここでオブジェクトの特徴的な変化とは、例えばオブジェクトの座標データに急な変化があった場合などである。なお、ユーザ入力部12を介して設定された基準に基づいて特徴的変化と判断するように構成してもよい。画像比較部17は、特徴的変化判定部16において特徴的な変化が生じていると判定されたオブジェクト情報を有する画像データを比較し、画像データ内の最も変化しているオブジェクトを特定する。   The characteristic change determination unit 16 compares the object information of the past image data recorded in the recording unit 15 with the object information of the current image input from the object extraction unit 21, and there is a characteristic change in the object. Determine if it has occurred. Here, the characteristic change of the object is, for example, a case where there is a sudden change in the coordinate data of the object. In addition, you may comprise so that it may be judged that it is a characteristic change based on the reference | standard set via the user input part 12. FIG. The image comparison unit 17 compares the image data having the object information determined as having undergone the characteristic change by the characteristic change determination unit 16 and identifies the most changed object in the image data.

移動ベクトル抽出部22は、画像比較部17において最も変化していると特定されたオブジェクトについて、記録部15に記録された過去の画像データのオブジェクト情報と、オブジェクト抽出部21から入力される現在の画像データのオブジェクト情報とを参照し、座標データの変化から移動ベクトルを抽出する。抽出した移動ベクトルは効率化制御部18に出力される。   The movement vector extraction unit 22 uses the object information of the past image data recorded in the recording unit 15 and the current input from the object extraction unit 21 for the object identified as having changed most by the image comparison unit 17. The movement vector is extracted from the change of the coordinate data with reference to the object information of the image data. The extracted movement vector is output to the efficiency control unit 18.

効率化制御部18は、画像比較部17において特定された最も変化しているオブジェクトについて、オブジェクトの変化を視認し易い表示レイアウトデータを作成する。さらにオブジェクトの移動あるいはオブジェクト数の増加などの変化に基づいて定量的評価を行い、当該評価に対応した支援情報を作成する。さらに、移動ベクトル抽出部22が抽出した移動ベクトルに基づき、最も変化しているオブジェクトがどのような移動ベクトルを持って出現したかを示したベクトル線、あるいはオブジェクトを何処に収納すべきかを示したベクトル線を作成する。効率化制御部18において生成された表示レイアウトデータ、支援情報およびベクトル線の表示指示は表示装置3に出力される。表示装置3は、効率化制御部18から入力される画像の表示レイアウトデータ、支援情報およびベクトル線の表示指示に基づき、画面表示を行う。   The efficiency control unit 18 creates display layout data for the most changed object specified by the image comparison unit 17 so that the change of the object can be easily seen. Furthermore, quantitative evaluation is performed based on changes such as movement of objects or increase in the number of objects, and support information corresponding to the evaluation is created. Furthermore, based on the movement vector extracted by the movement vector extraction unit 22, a vector line indicating what kind of movement vector the most changing object appeared, or where the object should be stored is shown. Create vector lines. The display layout data, support information, and vector line display instruction generated by the efficiency control unit 18 are output to the display device 3. The display device 3 performs screen display based on the image display layout data, the support information, and the vector line display instruction input from the efficiency control unit 18.

次に、実施の形態2の評価支援装置1の動作について説明する。図5は、実施の形態2による評価支援装置の動作を示すフローチャートである。なお、以下では実施の形態1に係る評価支援装置1と同一のステップには図2で使用した符号と同一の符号を付し、説明を省略または簡略化する。
ステップST3においてオブジェクトを抽出するためのパラメータが設定されると、オブジェクト抽出部21は、当該抽出パラメータを用いて、ステップST2で構成された画像データからオブジェクトを抽出し、抽出したオブジェクトの数およびオブジェクトの座標データなどのオブジェクト情報を取得する(ステップST21)。取得したオブジェクト情報は画像データと共に記録部15に格納される(ステップST22)。
Next, the operation of the evaluation support apparatus 1 according to the second embodiment will be described. FIG. 5 is a flowchart showing the operation of the evaluation support apparatus according to the second embodiment. In the following, the same steps as those of the evaluation support apparatus 1 according to Embodiment 1 are denoted by the same reference numerals as those used in FIG. 2, and the description thereof is omitted or simplified.
When parameters for extracting objects are set in step ST3, the object extraction unit 21 extracts objects from the image data configured in step ST2 using the extraction parameters, and the number of objects and objects extracted. Object information such as coordinate data is acquired (step ST21). The acquired object information is stored in the recording unit 15 together with the image data (step ST22).

特徴的変化判定部16は、記録部15に格納された過去の画像データのオブジェクト情報と、ステップST21で取得された現在の画像データのオブジェクト情報とを比較し、現在の画像データのオブジェクト情報に特徴的変化が発生しているか否か判定を行う。(ステップST23)。ステップST23において、現在の画像データのオブジェクト情報に特徴的変化が発生していないと判定された場合には、ステップST1の処理に戻り、新たなセンサ信号が入力されるまで待機する。一方、ステップST23において、現在の画像データのオブジェクト情報に特徴的変化が発生していると判定された場合には、当該オブジェクト情報を有する現在および過去の画像データのオブジェクト情報を比較し、最も大きく変化しているオブジェクトを特定する(ステップST24)。   The characteristic change determination unit 16 compares the object information of the past image data stored in the recording unit 15 with the object information of the current image data acquired in step ST21, and uses it as the object information of the current image data. It is determined whether a characteristic change has occurred. (Step ST23). If it is determined in step ST23 that no characteristic change has occurred in the object information of the current image data, the process returns to step ST1 and waits until a new sensor signal is input. On the other hand, if it is determined in step ST23 that a characteristic change has occurred in the object information of the current image data, the object information of the current and past image data having the object information is compared, and the largest The changing object is specified (step ST24).

移動ベクトル抽出部22は、ステップST24において特定されたオブジェクトについて、記録部15に記録された過去の画像データのオブジェクト情報と、オブジェクト抽出部21から入力される現在の画像データのオブジェクト情報とを参照して移動ベクトルを抽出する(ステップST25)。   The movement vector extraction unit 22 refers to the object information of the past image data recorded in the recording unit 15 and the object information of the current image data input from the object extraction unit 21 for the object specified in step ST24. Then, a movement vector is extracted (step ST25).

効率化制御部18は、ステップST24における特定結果を参照し、画像データ内で最も変化しているオブジェクトが視認し易い表示レイアウトデータを作成する(ステップST26)と共に、オブジェクト数の増減に基づいて定量的評価を行い、当該評価に対応した表示メッセージを作成する(ステップST27)。さらに効率化制御部18は、ステップST25において抽出した移動ベクトルを用いて、最も変化しているオブジェクトの出現方向あるいは収納方向を示すベクトル線を作成する(ステップST28)。   The efficiency control unit 18 refers to the identification result in step ST24, creates display layout data in which the object that changes most in the image data is easy to visually recognize (step ST26), and quantifies it based on the increase / decrease in the number of objects. Evaluation is performed, and a display message corresponding to the evaluation is created (step ST27). Further, the efficiency control unit 18 uses the movement vector extracted in step ST25 to create a vector line indicating the appearance direction or the storage direction of the most changing object (step ST28).

表示装置3は、ステップST26において生成された表示レイアウトデータに基づいた画面表示を行い、当該画面上にステップST27およびステップST28で作成した定量的評価の結果、メッセージおよびベクトル線を合せて表示する(ステップST29)。その後フローチャートはステップST1の処理に戻り、上述した処理を繰り返す。   The display device 3 performs screen display based on the display layout data generated in step ST26, and displays the result of the quantitative evaluation created in step ST27 and step ST28, a message, and a vector line on the screen (see FIG. Step ST29). Thereafter, the flowchart returns to the process of step ST1 and repeats the above-described process.

図6は、実施の形態2による評価支援装置の安全化・効率化支援の表示例を示す図である。表示装置3の表示画面3aには、現在の画像データ3bと過去の画像データ3cが並列に表示される。また、定量的評価結果3d,3e、およびオブジェクトの変化に応じたメッセージ3fが表示される。さらに、画像比較部17において最も大きく変化していると特定されたオブジェクトをどこに収納すべきかを示すベクトル線3gが表示されている。   FIG. 6 is a diagram illustrating a display example of safety / efficiency support of the evaluation support apparatus according to the second embodiment. On the display screen 3a of the display device 3, the current image data 3b and the past image data 3c are displayed in parallel. Further, the quantitative evaluation results 3d and 3e and a message 3f corresponding to the change of the object are displayed. Further, a vector line 3g indicating where to store the object identified as the largest change in the image comparison unit 17 is displayed.

ユーザは、表示装置3の表示画面3aに表示されたメッセージ3fにより作業環境を整える必要があることを認識することができる。さらにベクトル線3gにより、オブジェクトを何処に収納すべきか容易に認識することができる。   The user can recognize that the work environment needs to be adjusted by the message 3 f displayed on the display screen 3 a of the display device 3. Furthermore, the vector line 3g can easily recognize where the object should be stored.

以上のように、この実施の形態2によれば、抽出パラメータに基づいて画像データからオブジェクトを抽出し、抽出したオブジェクトの数および座標データなどのオブジェクト情報を取得するオブジェクト抽出部21と、過去の画像データのオブジェクト情報と現在の画像データのオブジェクト情報とを比較して特徴的変化が発生しているか否か判定を行う特徴的変化判定部16と、画像データ内の最も大きく変化しているオブジェクトを特定する画像比較部17と、特定されたオブジェクトの移動ベクトルを抽出する移動ベクトル抽出部22と、変化しているオブジェクトを明示する表示レイアウトデータを作成すると共に、オブジェクト情報に基づいて定量的評価を行い、当該評価に対応した支援情報および特定されたオブジェクトの移動方向を示すベクトル線を作成する効率化制御部18を備えるように構成したので、変化したオブジェクトを明示し、変化したオブジェクトの出現方向あるいは収納方向を示すことができる。これによりユーザは、整理すべき対象および収納するべき方向を容易に認識することができる。   As described above, according to the second embodiment, an object extraction unit 21 that extracts objects from image data based on extraction parameters and obtains object information such as the number of extracted objects and coordinate data, A characteristic change determination unit 16 that compares the object information of the image data with the object information of the current image data to determine whether or not a characteristic change has occurred, and the object that has changed the most in the image data The image comparison unit 17 that identifies the object, the movement vector extraction unit 22 that extracts the movement vector of the identified object, and display layout data that clearly shows the changing object are created, and quantitative evaluation is performed based on the object information The support information corresponding to the evaluation and the transfer of the identified object Since it is configured to include a more efficient control unit 18 to create a vector line representing the direction, clearly altered object may indicate the emergence direction or the housing direction of the changed object. Thereby, the user can easily recognize the object to be organized and the direction to be accommodated.

また、この実施の形態2によれば、効率化制御部18が、変化しているオブジェクトを明示する表示レイアウトデータを作成すると共に、定量的評価に対応した支援情報およびベクトル線の表示制御を行うように構成したので、ユーザはどのオブジェクトを整理すべきか容易に判断することができる。さらに支援情報が表示されることから作業環境を整える必要があることを容易に認識することができる。また、ベクトル線を参照することにより、ユーザは容易且つスムーズに作業環境を整えることができる。   Further, according to the second embodiment, the efficiency control unit 18 creates display layout data that clearly shows the changing object, and performs display control of support information and vector lines corresponding to quantitative evaluation. With this configuration, the user can easily determine which objects should be organized. Furthermore, since the support information is displayed, it can be easily recognized that the work environment needs to be prepared. Also, by referring to the vector lines, the user can easily and smoothly prepare the work environment.

実施の形態3.
この実施の形態3では、実施の形態1で示した線分抽出部14と、実施の形態2で示したオブジェクト抽出部21および移動ベクトル抽出部22とを有する評価支援装置1について説明する。図7は、実施の形態3による評価支援装置の構成を示すブロック図である。なお以下では、実施の形態1および実施の形態2による評価支援装置1の構成要素と同一または相当する部分には実施の形態1で使用した符号と同一の符号を付して説明を省略または簡略化する。
Embodiment 3 FIG.
In the third embodiment, an evaluation support apparatus 1 having the line segment extraction unit 14 shown in the first embodiment and the object extraction unit 21 and the movement vector extraction unit 22 shown in the second embodiment will be described. FIG. 7 is a block diagram showing the configuration of the evaluation support apparatus according to the third embodiment. In the following description, the same or corresponding parts as those of the evaluation support apparatus 1 according to the first and second embodiments are denoted by the same reference numerals as those used in the first embodiment, and the description thereof is omitted or simplified. Turn into.

記録部15は、線分抽出部14において抽出された線分情報と、オブジェクト抽出部21において抽出されたオブジェクト情報とを画像データと共に記録する。移動ベクトル抽出部22は、画像比較部17において特定される領域内のオブジェクト情報に特徴的変化があると判断した場合に、当該特徴的変化のあるオジェクトの移動ベクトルを抽出する。   The recording unit 15 records the line segment information extracted by the line segment extraction unit 14 and the object information extracted by the object extraction unit 21 together with image data. When the movement vector extraction unit 22 determines that there is a characteristic change in the object information in the region specified by the image comparison unit 17, the movement vector extraction unit 22 extracts the movement vector of the object having the characteristic change.

効率化制御部18は、画像比較部17において特定された画像データ内の最も変化している領域について当該変化を視認し易い表示レイアウトデータを作成する。また、過去の画像データの線分数やオブジェクト数と現在の画像データの線分数やオブジェクト数の増減に基づいて定量的評価を行い、当該評価に対応するメッセージなどの支援情報を作成する。さらに、移動ベクトル抽出部22が抽出した移動ベクトルに基づき、画像比較部17において特定された最も変化しているオブジェクトのベクトル線を作成する。効率化制御部18において生成された表示レイアウトデータ、定量的評価の結果、支援情報およびベクトル線の表示指示は表示装置3に出力される。   The efficiency control unit 18 creates display layout data that makes it easy to visually recognize the change in the most changing region in the image data specified by the image comparison unit 17. Further, quantitative evaluation is performed based on the number of line segments and objects in the past image data and the increase and decrease in the number of line segments and objects in the current image data, and support information such as a message corresponding to the evaluation is created. Further, based on the movement vector extracted by the movement vector extraction unit 22, the vector line of the most changed object specified by the image comparison unit 17 is created. The display layout data generated by the efficiency control unit 18, the result of quantitative evaluation, support information, and a display instruction for vector lines are output to the display device 3.

表示装置3は、効率化制御部18から出力される表示指示に基づき画像表示を行う。具体的には、変化している領域を明示した表示画面上に、定量的評価の結果、整理整頓を指示するメッセージ、およびオブジェクトの収納場所を示すベクトル線を表示する。   The display device 3 performs image display based on a display instruction output from the efficiency control unit 18. Specifically, on the display screen clearly showing the changing area, a message for instructing organization and a vector line indicating the storage location of the object are displayed as a result of the quantitative evaluation.

次に、実施の形態3の評価支援装置1の動作について説明する。図8は、実施の形態3による評価支援装置の動作を示すフローチャートである。なお、以下では実施の形態1および実施の形態2による評価支援装置1と同一のステップには図2または図4で使用した符号と同一の符号を付し、説明を省略または簡略化する。   Next, the operation of the evaluation support apparatus 1 according to the third embodiment will be described. FIG. 8 is a flowchart showing the operation of the evaluation support apparatus according to the third embodiment. In the following, the same steps as those in the evaluation support apparatus 1 according to the first and second embodiments are denoted by the same reference numerals as those used in FIG. 2 or FIG. 4, and description thereof is omitted or simplified.

線分抽出部14は、線分情報を取得し(ステップST4)、画像データと共に記録部15に格納する(ステップST5)。オブジェクト抽出部21は、オブジェクト情報を取得し(ステップST21)、画像データと共に記録部15に格納する(ステップST22)。   The line segment extraction unit 14 acquires line segment information (step ST4) and stores it in the recording unit 15 together with the image data (step ST5). The object extraction unit 21 acquires object information (step ST21), and stores it in the recording unit 15 together with the image data (step ST22).

次に特徴的変化判定部16は、現在の画像データの線分情報と、現在の画像の線分情報とを比較して特徴的な変化が生じているか否か判定を行う(ステップST6)。ステップST6において現在の画像データの線分情報に特徴的変化が発生していないと判定された場合にはステップST1の処理に戻る。一方、ステップST6において線分情報に特徴的変化が発生していると判定された場合には、画像比較部17が画像データ内で最も大きく変化している領域を特定する(ステップST7)。   Next, the characteristic change determination unit 16 compares the line segment information of the current image data with the line segment information of the current image to determine whether or not a characteristic change has occurred (step ST6). If it is determined in step ST6 that no characteristic change has occurred in the line segment information of the current image data, the process returns to step ST1. On the other hand, when it is determined in step ST6 that a characteristic change has occurred in the line segment information, the image comparison unit 17 specifies the region where the change is largest in the image data (step ST7).

次に、移動ベクトル抽出部22は、ステップST7において特定された領域内のオブジェクト情報に特徴的変化があるか否か判定を行う(ステップST31)。ステップST31において特徴的変化があると判定された場合には、特徴的変化があると判定されたオブジェクトの移動ベクトルを抽出する(ステップST32)。   Next, the movement vector extraction unit 22 determines whether or not there is a characteristic change in the object information in the area specified in step ST7 (step ST31). If it is determined in step ST31 that there is a characteristic change, the movement vector of the object determined to have a characteristic change is extracted (step ST32).

効率化制御部18は、ステップST7における特定結果、およびステップST31において特徴的変化があると判定されたオブジェクト情報を参照し、画像データ内で最も変化している領域が視認し易い表示レイアウトデータを作成する(ステップST33)。さらに、効率化制御部18は、ステップST7における特定結果およびステップST31において特徴的変化があると判定されたオブジェクト情報を参照し、線分数およびオブジェクト数の増減に基づいて定量的評価を行い、当該定量的評価に対応した表示メッセージなどを作成する(ステップST34)。   The efficiency control unit 18 refers to the identification result in step ST7 and the object information determined to have a characteristic change in step ST31, and displays the display layout data in which the most changed area in the image data is easily visible. Create (step ST33). Further, the efficiency control unit 18 refers to the specific result in step ST7 and the object information determined to have a characteristic change in step ST31, performs a quantitative evaluation based on increase / decrease in the number of line segments and the number of objects, and A display message or the like corresponding to the quantitative evaluation is created (step ST34).

さらに効率化制御部18は、ステップST32において抽出した移動ベクトルを用いて、最も変化しているオブジェクトの出現方向あるいは収納方向を示すベクトル線を作成する(ステップST35)。表示装置3は、ステップST33で作成された表示レイアウトデータに基づいた画面表示を行い、当該画面上にステップST34およびステップST35で作成した定量的評価の結果、メッセージおよびベクトル線を合せて表示する(ステップST36)。   Further, the efficiency control unit 18 uses the movement vector extracted in step ST32 to create a vector line indicating the appearance direction or the storage direction of the most changing object (step ST35). The display device 3 performs screen display based on the display layout data created in step ST33, and displays the result of the quantitative evaluation created in steps ST34 and ST35, the message, and the vector line on the screen (see FIG. Step ST36).

一方、ステップST31において、領域内のオブジェクト情報に特徴的変化がないと判定された場合には、実施の形態1と同様の処理(ステップST8〜10)を行う。その後フローチャートはステップST1の処理に戻り、上述した処理を繰り返す。   On the other hand, if it is determined in step ST31 that there is no characteristic change in the object information in the region, the same processing as in the first embodiment (steps ST8 to ST10) is performed. Thereafter, the flowchart returns to the process of step ST1 and repeats the above-described process.

この実施の形態3による評価支援装置1の安全化・効率化支援の表示例は、図3と同一の表示画面3a、あるいは表示画面3aの過去の画像3cにベクトル線3gを追加したものとなる。   The display example of the safety / efficiency support of the evaluation support apparatus 1 according to the third embodiment is the same display screen 3a as in FIG. 3 or a vector image 3c added to the past image 3c of the display screen 3a. .

以上のように、この実施の形態3によれば、画像比較部17において特定された最も変化している領域内のオブジェクト情報に変化がある場合に、当該オブジェクトの移動ベクトルを抽出するように構成したので、定量的評価の結果および支援情報に加えてオブジェクトの収納方向などを同時に表示することができる。これにより、ユーザはより容易且つスムーズに作業環境を整えることができる。   As described above, according to the third embodiment, when there is a change in the object information in the most changed region specified by the image comparison unit 17, the movement vector of the object is extracted. Therefore, in addition to the result of quantitative evaluation and support information, the storage direction of the object can be displayed at the same time. Thereby, the user can arrange a working environment more easily and smoothly.

実施の形態4.
この実施の形態4では、実施の形態1から実施の形態3で示した評価支援装置1に、作業者が行った整理状況と画像データの変化とを関連付けて記録させる構成を追加して設けている。図9は、実施の形態4による評価支援装置の構成を示すブロック図である。なお以下では、実施の形態1による評価支援装置1の構成要素と同一または相当する部分には実施の形態1で使用した符号と同一の符号を付して説明を省略または簡略化する。
Embodiment 4 FIG.
In the fourth embodiment, the evaluation support apparatus 1 shown in the first to third embodiments is additionally provided with a configuration for recording the state of organization performed by the worker in association with the change in the image data. Yes. FIG. 9 is a block diagram illustrating a configuration of the evaluation support apparatus according to the fourth embodiment. In the following description, the same or corresponding parts as the components of the evaluation support apparatus 1 according to the first embodiment are denoted by the same reference numerals as those used in the first embodiment, and the description thereof is omitted or simplified.

ユーザは作業環境を整理した際に、ユーザ入力部12を介して整理前後の画像を選択する。画像の選択方法としては、例えば整理前の時間と整理後の時間を入力する、あるいは表示部に表示された画像から選択するなど適宜構成可能である。なお、画像の選択方法は一般的な方法を用いて構成可能であることから、詳細な説明は省略する。さらにユーザ入力部12を介して、整理した物体の種別や量なども入力される。   When the user arranges the work environment, the user selects images before and after the arrangement via the user input unit 12. As an image selection method, for example, a time before organizing and a time after organizing are input, or selection from an image displayed on the display unit is possible. Since the image selection method can be configured using a general method, detailed description thereof is omitted. Further, the type and amount of the sorted object are also input via the user input unit 12.

特徴的変化判定部16は、変化算出部16aを備えている。変化算出部16aは、ユーザ入力部12を介して指示された整理前後の画像データと当該画像データの線分情報を記録部15から読み出し、読み出した線分情報に基づき整理前後の線分の変化量を取得する。取得した変化量、整理した物体の種別や量などは画像データと関連付けて記録部15に格納される。特徴的変化判定部16は、現在の画像データと過去の画像データを比較して特徴的変化があると判定した場合に、記録部15に記録された画像データ、線分の数の変化、および整理した物体の種別や量などを参照し、整理した物体の種別と量を推定することができる。   The characteristic change determination unit 16 includes a change calculation unit 16a. The change calculation unit 16a reads out the image data before and after organizing and the line segment information of the image data instructed via the user input unit 12 from the recording unit 15, and changes the line segments before and after the organizing based on the read line segment information. Get the quantity. The acquired amount of change, the type and amount of the organized object, and the like are stored in the recording unit 15 in association with the image data. When the characteristic change determination unit 16 determines that there is a characteristic change by comparing the current image data and past image data, the characteristic change determination unit 16 changes the number of line segments, the image data recorded in the recording unit 15, and The type and amount of the arranged object can be estimated by referring to the type and amount of the arranged object.

また、異なる構成として、ユーザは作業環境を整理した際に、ユーザ入力部12を介して整理した場所の画像データの座標を入力するように構成してもよい。この場合、特徴的変化判定部16の変化算出部16aは、ユーザ入力部12を介して指示された整理前後の画像データと整理した場所の画像データの座標、および整理前後の線分の変化量とを関連付けて記録部15に記録させる。特徴的変化判定部16は、現在の画像データと過去の画像データを比較して特徴的変化があると判定した場合に、記録部15に記録された画像データ、および整理した場所の画像データの座標、線分の数の変化、整理した物体の種別や量などから、物体の収納方向および物体の移動量などを推定することができる。   Further, as a different configuration, the user may input the coordinates of the image data of the arranged place via the user input unit 12 when the work environment is arranged. In this case, the change calculation unit 16a of the characteristic change determination unit 16 instructs the coordinates of the image data before and after the ordering and the image data of the organized place specified via the user input unit 12, and the change amount of the line segment before and after the ordering. Are recorded in the recording unit 15. When the characteristic change determination unit 16 compares the current image data with the past image data and determines that there is a characteristic change, the characteristic change determination unit 16 compares the image data recorded in the recording unit 15 and the image data of the arranged place. It is possible to estimate the storage direction of the object, the amount of movement of the object, and the like from the change in coordinates, the number of line segments, the type and amount of the arranged object, and the like.

以上のように、この実施の形態4によれば、ユーザ入力部12を介して整理した物体の種別や量、あるいは整理した場所の画像データの座標の入力を受け付け、特徴的変化判定部16においてこれら入力された情報と画像データ、線分の数の変化を関連付けて記録するように構成したので、線分情報に変化が生じた際に、整理すべき物体および物体の収納場所を推定することができ、ユーザに作業環境を整理するためのより詳しい支援情報を提示することができる。   As described above, according to the fourth embodiment, the input of the type and amount of the object arranged via the user input unit 12 or the coordinates of the image data of the arranged place is accepted, and the characteristic change determination unit 16 Since the input information, image data, and changes in the number of line segments are recorded in association with each other, when the line segment information changes, it is possible to estimate the object to be organized and the storage location of the object. And more detailed support information for organizing the work environment can be presented to the user.

なお、上述した実施の形態4では、実施の形態1の評価支援装置1に上述した構成を追加する構成を示したが、実施の形態2および実施の形態3の評価支援装置1に追加して設けてもよい。実施の形態2に上述した実施の形態4の構成を追加する場合には、変化算出部16aは画像データのオブジェクト情報を参照する。   In the above-described fourth embodiment, the configuration in which the above-described configuration is added to the evaluation support device 1 in the first embodiment has been described. However, in addition to the evaluation support device 1 in the second and third embodiments, It may be provided. When the configuration of the fourth embodiment described above is added to the second embodiment, the change calculation unit 16a refers to the object information of the image data.

実施の形態5.
この実施の形態5では、実施の形態1から実施の形態4で示した評価支援装置1に、画像データの輝度を記録部15に記録させる構成を追加して設けている。なお以下では、実施の形態1から実施の形態4による評価支援装置1の構成要素と同一または相当する部分は説明を省略または簡略化する。
Embodiment 5 FIG.
In the fifth embodiment, the evaluation support apparatus 1 shown in the first to fourth embodiments is additionally provided with a configuration for recording the luminance of image data in the recording unit 15. In the following description, the description of the same or corresponding parts as the components of the evaluation support apparatus 1 according to the first to fourth embodiments will be omitted or simplified.

キャプチャ部11に入力される画像データには輝度を示す情報が含まれていることから、線分抽出部14あるいはオブジェクト抽出部21において線分情報あるいはオブジェクト情報と画像データとを記録部15に格納する際に、輝度情報も合せて格納する。特徴的変化判定部16は、輝度情報を参照し、輝度が所定の範囲内の画像データのみを採用し、特徴的変化が生じているか否かの判定を行う。また、画像データの輝度が所定の範囲外である場合には、所定の範囲内となるように輝度調整を行った後に特徴的変化の発生を判定するように構成してもよい。これらにより、画像の輝度を一定の範囲として特徴的変化の判定を行うことができる。   Since the image data input to the capture unit 11 includes information indicating luminance, the line segment extraction unit 14 or the object extraction unit 21 stores the line segment information or object information and image data in the recording unit 15. In this case, the luminance information is also stored. The characteristic change determination unit 16 refers to the luminance information, adopts only image data whose luminance is within a predetermined range, and determines whether or not a characteristic change has occurred. Further, when the brightness of the image data is outside the predetermined range, the occurrence of a characteristic change may be determined after adjusting the brightness so as to be within the predetermined range. Thus, it is possible to determine the characteristic change with the luminance of the image as a certain range.

なお、記録部15に格納する輝度情報は、画像データ全体の輝度、あるいは基準となる部分の輝度であってもよい。   Note that the luminance information stored in the recording unit 15 may be the luminance of the entire image data or the luminance of a reference portion.

この実施の形態5によれば、画像データの輝度情報を記録し、当該輝度が所定範囲内である画像データを用いて特徴的変化が生じているか否かの判定を行うように構成したので、画像データの輝度を一定範囲内として評価することができ、正確な判定を行うことができる。   According to the fifth embodiment, the luminance information of the image data is recorded, and it is configured to determine whether or not a characteristic change has occurred using the image data whose luminance is within a predetermined range. The brightness of the image data can be evaluated within a certain range, and an accurate determination can be made.

なお、上述した実施の形態1−5では、画像センサ2および画像キャプチャ部11を備える構成を示したが、画像データ取得方法はこれらに限定されることはなく、適宜変更可能である。例えば、撮像手段を用いて画像データを取得してもよいし、撮影手段により取得された映像データから画像データを取得するように構成してもよい。   In the above-described first to fifth embodiments, the configuration including the image sensor 2 and the image capture unit 11 has been described. However, the image data acquisition method is not limited to these and can be changed as appropriate. For example, image data may be acquired using an imaging unit, or image data may be acquired from video data acquired by the imaging unit.

なお、上述した実施の形態1−5では、最も変化が大きい物を認識させる構成を示したが、認識対象は適宜変更可能である。例えば、変化が大きい上位3つの画像データの部分あるいはオブジェクトを抽出するように構成してもよい。   In addition, in Embodiment 1-5 mentioned above, although the structure which recognizes the thing with the largest change was shown, the recognition object can be changed suitably. For example, the configuration may be such that the top three image data portions or objects having the largest changes are extracted.

なお、本願発明はその発明の範囲内において、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。   In the present invention, within the scope of the invention, any combination of the embodiments, or any modification of any component in each embodiment, or omission of any component in each embodiment is possible. .

1 評価支援装置、2 画像センサ、3 表示装置、11 キャプチャ部、12 ユーザ入力部、13 抽出パラメータ設定部、14 線分抽出部、15 記録部、16 特徴的変化判定部、16a 変化算出部、17 画像比較部、18 効率化制御部、21 オブジェクト抽出部、22 移動ベクトル抽出部。   DESCRIPTION OF SYMBOLS 1 Evaluation support apparatus, 2 Image sensor, 3 Display apparatus, 11 Capture part, 12 User input part, 13 Extraction parameter setting part, 14 Line segment extraction part, 15 Recording part, 16 Characteristic change determination part, 16a Change calculation part, 17 image comparison unit, 18 efficiency control unit, 21 object extraction unit, 22 movement vector extraction unit.

Claims (10)

画像データから物体の線分情報を抽出する線分抽出部と、
前記画像データと、前記線分抽出部が抽出した線分情報とを記録する記録部と、
入力された画像データの線分情報と、前記記録部に記録された画像データの線分情報とを比較し、前記線分情報の変化を検出する変化検出部と、
前記入力された画像データと前記記録部に記録された画像データを参照して、前記変化検出部が検出した線分情報の変化の発生箇所を特定する画像比較部と、
前記変化検出部が検出した線分情報の変化について定量的評価を行うと共に、当該定量的評価と前記画像比較部が特定した線分情報の変化の発生箇所とを表示手段に表示する効率化制御部とを備えた評価支援装置。
A line segment extraction unit that extracts line segment information of an object from image data;
A recording unit that records the image data and line segment information extracted by the line segment extraction unit;
A change detection unit that compares the line segment information of the input image data with the line segment information of the image data recorded in the recording unit, and detects a change in the line segment information;
An image comparison unit that refers to the input image data and the image data recorded in the recording unit, and identifies the occurrence location of the change in line segment information detected by the change detection unit;
Efficient control for performing quantitative evaluation on the change in line segment information detected by the change detection unit and displaying the quantitative evaluation and the occurrence point of the change in line segment information specified by the image comparison unit on the display means And an evaluation support apparatus.
画像データから物体の輪郭情報を抽出するオブジェクト抽出部と、
前記画像データと、前記オブジェクト抽出部が抽出した輪郭情報とを記録する記録部と、
入力された画像データの輪郭情報と、前記記録部に記録された画像データの輪郭情報とを比較し、前記輪郭情報の変化を検出する変化検出部と、
前記入力された画像データと前記記録部に記録された画像データを参照して、前記変化検出部が検出した輪郭情報に対応する物体を特定する画像比較部と、
前記入力された画像データおよび前記記録部に記録された画像データの輪郭情報を参照して、前記物体の移動方向を示す移動ベクトルを抽出する移動ベクトル抽出部と、
前記移動ベクトル抽出部が抽出した移動ベクトルに基づき前記物体の移動を指示するベクトル線を作成すると共に、前記変化検出部が検出した輪郭情報の変化について定量的評価を行い、前記ベクトル線、前記定量的評価および前記画像比較部において特定された輪郭情報の変化の発生箇所とを表示手段に表示する効率化制御部とを備えた評価支援装置。
An object extraction unit for extracting contour information of an object from image data;
A recording unit that records the image data and the contour information extracted by the object extraction unit;
A change detecting unit that compares the contour information of the input image data with the contour information of the image data recorded in the recording unit, and detects a change in the contour information;
An image comparison unit that identifies an object corresponding to the contour information detected by the change detection unit with reference to the input image data and the image data recorded in the recording unit;
A movement vector extraction unit that extracts a movement vector indicating a movement direction of the object with reference to the input image data and contour information of the image data recorded in the recording unit;
A vector line for instructing movement of the object is created based on the movement vector extracted by the movement vector extraction unit, and a change in the contour information detected by the change detection unit is quantitatively evaluated. An evaluation support apparatus comprising: an efficiency control unit that displays on a display unit a target evaluation and a location where a change in contour information identified by the image comparison unit occurs.
画像データから物体の線分情報を抽出する線分抽出部と、
画像データから物体の輪郭情報を抽出するオブジェクト抽出部と、
前記画像データ、前記線分抽出部が抽出した線分情報、および前記オブジェクト抽出部が抽出した輪郭情報を記録する記録部と、
入力された画像データの線分情報と、前記記録部に記録された画像データの線分情報とを比較し、前記線分情報の変化を検出する変化検出部と、
前記入力された画像データと前記記録部に記録された画像データを参照して、前記変化検出部が検出した線分情報の変化の発生箇所を特定する画像比較部と、
前記入力された画像データおよび前記記録部に記録された画像データの輪郭情報を参照して、前記画像比較部が特定した線分情報の変化の発生箇所において輪郭情報に変化がある場合に、当該輪郭情報に対応する物体の移動ベクトルを抽出する移動ベクトル抽出部と、
前記変化検出部が検出した線分情報の変化および前記線分情報の変化の発生箇所における輪郭情報の変化について定量的評価を行い、前記移動ベクトル抽出部が抽出した移動ベクトルに基づき前記物体の移動を指示するベクトル線を作成し、前記定量的評価、前記ベクトル線、および前記画像比較部が特定した線分情報の変化の発生箇所とを表示手段に表示する効率化制御部とを備えた評価支援装置。
A line segment extraction unit that extracts line segment information of an object from image data;
An object extraction unit for extracting contour information of an object from image data;
A recording unit for recording the image data, the line segment information extracted by the line segment extraction unit, and the contour information extracted by the object extraction unit;
A change detection unit that compares the line segment information of the input image data with the line segment information of the image data recorded in the recording unit, and detects a change in the line segment information;
An image comparison unit that refers to the input image data and the image data recorded in the recording unit, and identifies the occurrence location of the change in line segment information detected by the change detection unit;
With reference to the input image data and the contour information of the image data recorded in the recording unit, when there is a change in the contour information at the occurrence point of the change in the line segment information specified by the image comparison unit, A movement vector extraction unit for extracting a movement vector of an object corresponding to the contour information;
Quantitative evaluation is performed on a change in line segment information detected by the change detection unit and a change in outline information at a location where the change in the line segment information occurs, and the movement of the object is performed based on the movement vector extracted by the movement vector extraction unit. And an efficiency control unit that displays a vector line that indicates a change, and displays on the display means the quantitative evaluation, the vector line, and the occurrence location of the change in line segment information specified by the image comparison unit. Support device.
画像データに含まれる物体を認識し、当該物体の大きさを基準として他の物体の線分長および線分間隔を設定するパラメータ設定部を備え、
前記線分抽出部は、前記パラメータ設定部が設定した前記線分長および前記線分間隔に基づき画像データから物体の線分情報を抽出することを特徴とする請求項1または請求項3記載の評価支援装置。
A parameter setting unit that recognizes an object included in the image data and sets a line segment length and a line segment interval of another object based on the size of the object;
The line segment extraction unit extracts line segment information of an object from image data based on the line segment length and the line segment interval set by the parameter setting unit. Evaluation support device.
画像データに含まれる物体を認識し、当該物体の大きさを基準として他のオブジェクトサイズを設定するパラメータ設定部を備え、
前記オブジェクト抽出部は、前記パラメータ設定部が設定した前記オブジェクトサイズに基づき画像データからオブジェクトを抽出することを特徴とする請求項2または請求項3記載の評価支援装置。
A parameter setting unit that recognizes an object included in the image data and sets another object size based on the size of the object;
The evaluation support apparatus according to claim 2, wherein the object extraction unit extracts an object from image data based on the object size set by the parameter setting unit.
物体の移動に関する情報を入力するユーザ入力部と、
前記記録部に記録された線分情報から、前記物体の移動前後の線分情報の変化量を算出する変化算出部とを備え、
前記記録部は、前記変化算出部が算出した線分情報の変化量と前記物体の移動に関する情報とを関連付けて記録し、
前記変化検出部は、線分情報の変化を検出した場合に、前記記録部に記録された前記線分情報の変化量と前記物体の移動に関する情報とを参照して、移動した物体を推定することを特徴とする請求項1または請求項3記載の評価支援装置。
A user input unit for inputting information related to the movement of the object;
A change calculation unit that calculates a change amount of line segment information before and after the movement of the object from the line segment information recorded in the recording unit;
The recording unit records the change amount of the line segment information calculated by the change calculation unit and information related to the movement of the object in association with each other,
When the change detection unit detects a change in line segment information, the change detection unit estimates the moved object by referring to the change amount of the line segment information recorded in the recording unit and the information related to the movement of the object. The evaluation support apparatus according to claim 1 or claim 3, wherein
画像データにおける物体の移動前後の座標を入力するユーザ入力部と、
前記記録部に記録された線分情報から、前記物体の移動前後の線分情報の変化量を算出する変化算出部とを備え、
前記記録部は、前記変化算出部が算出した線分情報の変化量と前記物体の移動前後の座標とを関連付けて記録し、
前記変化検出部は、線分情報の変化を検出した場合に、前記記録部に記録された前記線分情報の変化量と前記物体の移動に関する情報とを参照して、物体の移動量および移動方向を推定することを特徴とする請求項1または請求項3記載の評価支援装置。
A user input unit for inputting coordinates before and after the movement of the object in the image data;
A change calculation unit that calculates a change amount of line segment information before and after the movement of the object from the line segment information recorded in the recording unit;
The recording unit records the change amount of the line segment information calculated by the change calculation unit and the coordinates before and after the movement of the object,
When the change detection unit detects a change in line segment information, the change detection unit refers to the change amount of the line segment information recorded in the recording unit and the information related to the movement of the object, and moves and moves the object. The evaluation support apparatus according to claim 1, wherein the direction is estimated.
前記記録部は、前記画像データの輝度を記録し、
前記変化検出部は、前記画像データの輝度が所定範囲内である場合に、前記線分情報の変化を検出することを特徴とする請求項1または請求項3記載の評価支援装置。
The recording unit records the luminance of the image data,
The evaluation support apparatus according to claim 1, wherein the change detection unit detects a change in the line segment information when the luminance of the image data is within a predetermined range.
前記記録部は、前記画像データの輝度を記録し、
前記変化検出部は、前記画像データの輝度が所定範囲内である場合に、前記輪郭情報の変化を検出することを特徴とする請求項2または請求項3記載の評価支援装置。
The recording unit records the luminance of the image data,
4. The evaluation support apparatus according to claim 2, wherein the change detecting unit detects a change in the contour information when the luminance of the image data is within a predetermined range.
画像を取得する撮像装置と、
前記画像から画像データを構成するキャプチャ部と、
画像データから物体の線分情報を抽出する線分抽出部と、
前記画像データと、前記線分抽出部が抽出した線分情報とを記録する記録部と、
入力された画像データの線分情報と、前記記録部に記録された画像データの線分情報とを比較し、前記線分情報の変化を検出する変化検出部と、
前記入力された画像データと前記記録部に記録された画像データを参照して、前記変化検出部が検出した線分情報の変化の発生箇所を特定する画像比較部と、
前記変化検出部が検出した線分情報の変化について定量的評価を行うと共に、当該定量的評価と前記画像比較部が特定した線分情報の変化の発生箇所との表示指示を出力する効率化制御部とを備えた評価支援装置と、
前記効率化制御部から出力された表示指示に基づき前記定量的評価および前記線分情報の変化の発生箇所を画面表示する表示装置とを備えた評価支援システム。
An imaging device for acquiring images;
A capture unit constituting image data from the image;
A line segment extraction unit that extracts line segment information of an object from image data;
A recording unit that records the image data and line segment information extracted by the line segment extraction unit;
A change detection unit that compares the line segment information of the input image data with the line segment information of the image data recorded in the recording unit, and detects a change in the line segment information;
An image comparison unit that refers to the input image data and the image data recorded in the recording unit, and identifies the occurrence location of the change in line segment information detected by the change detection unit;
Efficiency control for performing a quantitative evaluation on the change in line segment information detected by the change detection unit and outputting a display instruction of the quantitative evaluation and the location where the change in the line segment information specified by the image comparison unit is specified An evaluation support apparatus comprising
An evaluation support system comprising: a display device configured to display on a screen a location where the quantitative evaluation and the change of the line segment information have occurred based on a display instruction output from the efficiency control unit.
JP2011000588A 2011-01-05 2011-01-05 Evaluation support device and evaluation support system Pending JP2012141884A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011000588A JP2012141884A (en) 2011-01-05 2011-01-05 Evaluation support device and evaluation support system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011000588A JP2012141884A (en) 2011-01-05 2011-01-05 Evaluation support device and evaluation support system

Publications (1)

Publication Number Publication Date
JP2012141884A true JP2012141884A (en) 2012-07-26

Family

ID=46678093

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011000588A Pending JP2012141884A (en) 2011-01-05 2011-01-05 Evaluation support device and evaluation support system

Country Status (1)

Country Link
JP (1) JP2012141884A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016042305A (en) * 2014-08-18 2016-03-31 富士通株式会社 Evaluation method, evaluation program, and information processing device
JP2016128977A (en) * 2015-01-09 2016-07-14 富士通株式会社 Monitoring method of changing tendency in disorderliness, monitoring program of changing tendency in disorderliness and monitor system of tendency changing tendency in disorderliness
JP2016149024A (en) * 2015-02-12 2016-08-18 富士通株式会社 Evaluation method of cleaning state, evaluation program of cleaning state and evaluation apparatus of cleaning state
JP2019113901A (en) * 2017-12-20 2019-07-11 ヤフー株式会社 Device, method, and program for processing information

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016042305A (en) * 2014-08-18 2016-03-31 富士通株式会社 Evaluation method, evaluation program, and information processing device
JP2016128977A (en) * 2015-01-09 2016-07-14 富士通株式会社 Monitoring method of changing tendency in disorderliness, monitoring program of changing tendency in disorderliness and monitor system of tendency changing tendency in disorderliness
JP2016149024A (en) * 2015-02-12 2016-08-18 富士通株式会社 Evaluation method of cleaning state, evaluation program of cleaning state and evaluation apparatus of cleaning state
JP2019113901A (en) * 2017-12-20 2019-07-11 ヤフー株式会社 Device, method, and program for processing information

Similar Documents

Publication Publication Date Title
JP6764481B2 (en) Monitoring device
JP5691807B2 (en) Abandoned or removed detection system
KR20150096319A (en) Gesture recognition device and method of controlling gesture recognition device
KR101455200B1 (en) Learning monitering device and method for monitering of learning
JP2008108008A (en) Moving pattern specification device, moving pattern specification method, moving pattern specification program, and recording medium that recorded this
CN104811660A (en) Control apparatus and control method
EP2472862A1 (en) Displaying method and displaying device
WO2018235198A1 (en) Information processing device, control method, and program
JP2012141884A (en) Evaluation support device and evaluation support system
JP2019101549A (en) Work site monitoring device and program
JP6270488B2 (en) Operator monitoring control device and operator monitoring control method
CN111753587B (en) Ground falling detection method and device
US20220012514A1 (en) Identification information assignment apparatus, identification information assignment method, and program
JP2014033429A (en) Image processing program and image processing apparatus
EP3819862A1 (en) Determination method, determination program, and information processing device
JP2020098409A (en) Image processing apparatus, image processing method, and image processing program
US11423622B2 (en) Apparatus for generating feature positions in a virtual world, information processing method, and storage medium
CN106922194A (en) Abnormal detector, method for detecting abnormality and abnormality detecting program
KR101447958B1 (en) Method and apparatus for recognizing body point
KR101413558B1 (en) Analysis device of user multi-intent, method of analysis user multi-intent
JP2007048232A (en) Information processing device, information processing method, and computer program
JP2008009938A (en) Moving image data processor, moving image data processing method, moving image data processing program and storage medium recording the program
JP2020197899A (en) Work monitoring device and work monitoring method
US20220343112A1 (en) Learning data generation device, learning data generation method, and learning data generation program
US11694571B2 (en) Information processing system, information processing apparatus, and non-transitory storage medium