JP2012141884A - Evaluation support device and evaluation support system - Google Patents
Evaluation support device and evaluation support system Download PDFInfo
- Publication number
- JP2012141884A JP2012141884A JP2011000588A JP2011000588A JP2012141884A JP 2012141884 A JP2012141884 A JP 2012141884A JP 2011000588 A JP2011000588 A JP 2011000588A JP 2011000588 A JP2011000588 A JP 2011000588A JP 2012141884 A JP2012141884 A JP 2012141884A
- Authority
- JP
- Japan
- Prior art keywords
- line segment
- image data
- unit
- change
- segment information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
Abstract
Description
この発明は、作業環境のレベルを判定し、作業環境の安全化および効率化支援を行う評価支援装置および評価支援システムに関するものである。 The present invention relates to an evaluation support apparatus and an evaluation support system that determine the level of a work environment and support the safety and efficiency of the work environment.
従来より、物体の移動を検出する装置が提案されている。例えば、特許文献1に開示された映像監視システムでは、入力画像から監視エリアの画像認識処理の基準となる画像を生成し、入力画像と基準画像との比較により出現物体の動き状態を検出し、所定時間停止状態にあるものを停止物体とし停止物体画像を取得し保持し、出現物体と判定された領域を除外したマスク画像を入力画像と停止物体画像でそれぞれ生成し、停止物体画像に対する入力画像の類似度から監視エリアの物体の変化を検出している。
Conventionally, an apparatus for detecting the movement of an object has been proposed. For example, in the video surveillance system disclosed in
しかしながら、上述した特許文献1に開示された技術では、入力画像と基準画像とを比較して物体の動き状態を検出しているため、物体の動きは検出できるものの、当該動きの度合いを評価し、当該評価に応じた支援情報を提供することは困難であった。
However, since the technique disclosed in
この発明は、上記のような課題を解決するためになされたもので、物体の存在度合いの変化と、並び方を定量的に評価し、当該評価に応じた安全化支援および効率化支援を行うことを目的とする。 The present invention has been made to solve the above-described problems, and quantitatively evaluates the change in the degree of existence and arrangement of objects, and performs safety support and efficiency support according to the evaluation. With the goal.
この発明に係る評価支援装置は、画像データから物体の線分情報を抽出する線分抽出部と、画像データと、線分抽出部が抽出した線分情報とを記録する記録部と、入力された画像データの線分情報と、記録部に記録された画像データの線分情報とを比較し、線分情報の変化を検出する変化検出部と、入力された画像データと記録部に記録された画像データを参照して、変化検出部が検出した線分情報の変化の発生箇所を特定する画像比較部と、変化検出部が検出した線分情報の変化について定量的評価を行うと共に、当該定量的評価と画像比較部が特定した線分情報の変化の発生箇所とを表示手段に表示する効率化制御部とを備えるものである。 An evaluation support apparatus according to the present invention receives a line segment extraction unit that extracts line segment information of an object from image data, a recording unit that records image data, and line segment information extracted by the line segment extraction unit, and an input The line information of the image data is compared with the line information of the image data recorded in the recording unit, the change detecting unit for detecting the change of the line segment information, the input image data and the recording unit The image comparison unit that identifies the occurrence location of the change in the line segment information detected by the change detection unit and the change in the line segment information detected by the change detection unit are quantitatively evaluated and And an efficiency control unit that displays on the display means the quantitative evaluation and the occurrence location of the change in the line segment information specified by the image comparison unit.
この発明によれば、入力された画像データの線分情報と、画像データから物体の線分情報を抽出する線分抽出部と、記録部に記録された画像データの線分情報とを比較し、線分情報の変化を検出する変化検出部と、入力された画像データと記録部に記録された画像データを参照して、変化検出部が検出した線分情報の変化の発生箇所を特定する画像比較部と、変化検出部が検出した線分情報の変化について定量的評価を行うと共に、当該定量的評価と画像比較部が特定した線分情報の変化の発生箇所とを表示手段に表示する効率化制御部とを備えるように構成したので、定量的評価に基づき作業環境を評価し、安全化支援および効率化支援を行うことができる。 According to the present invention, the line segment information of the input image data, the line segment extraction unit that extracts the line segment information of the object from the image data, and the line segment information of the image data recorded in the recording unit are compared. The change detection unit that detects a change in line segment information, and the input image data and the image data recorded in the recording unit are referenced to identify the location where the change in the line segment information detected by the change detection unit occurs. Quantitative evaluation is performed on the change of the line segment information detected by the image comparison unit and the change detection unit, and the quantitative evaluation and the occurrence point of the change of the line segment information specified by the image comparison unit are displayed on the display unit. Since it comprised so that the efficiency improvement control part might be provided, a work environment can be evaluated based on quantitative evaluation, and safety | security support and efficiency improvement support can be performed.
実施の形態1.
図1は、この発明の実施の形態1による評価支援装置の構成を示すブロック図である。
評価支援装置1は、キャプチャ部11、ユーザ入力部12、抽出パラメータ設定部13、線分抽出部14、記録部15、特徴的変化判定部(変化検出部)16、画像比較部17および効率化制御部18で構成されている。また評価支援装置1は、画像センサ2および表示装置3と接続されている。画像センサ2は、画像を検知して検出信号を出力する。表示装置3は、評価支援装置1から出力される表示指示に基づき画像データ、評価結果、および安全化・効率化支援の情報を表示する。
FIG. 1 is a block diagram showing a configuration of an evaluation support apparatus according to
The
キャプチャ部11は、画像センサ2から入力されるセンサ信号に基づき画像データを構成する。ユーザ入力部12は、ユーザ操作を受け付ける。抽出パラメータ設定部13は、画像データ中の線分を抽出する際のパラメータを設定する。ここで、パラメータの設定は種々構成可能である。例えば、画像データ中の人の顔を認識し、認識した顔の大きさを基準として、当該顔の1/2程度の長さを線分と設定し、顔の1/4程度の長さを線分間隔と設定する。このように、画像データ中のあるオブジェクトの大きさを基準として線分および線分間隔を設定することができる。また異なる構成として、ユーザ入力部12を介してユーザが設定した値を抽出パラメータとしてもよい。
The
線分抽出部14は、抽出パラメータ設定部13において設定された抽出パラメータを用いて、Hough変換により画像データから線分を抽出する。さらに抽出した線分の座標データも合せて取得する。取得した線分の座標データおよび線分の本数などは線分情報として画像データと共に記録部15に格納する。記録部15は、画像データと当該画像データの線分情報を合せて記録する。
The line
特徴的変化判定部16は、記録部15に記録された過去の画像の線分情報と、現在の画像の線分情報とを比較して特徴的な変化が生じているか否か判定する。ここで特徴的な変化とは、例えば線分の数に急な増減があった場合、線分の座標に大きな変化があった場合などである。なお、ユーザ入力部12を介して設定された基準に基づいて特徴的変化と判断するように構成してもよい。画像比較部17は、特徴的変化判定部16において特徴的な変化が生じていると判定された線分情報を有する画像データを比較し、画像データ内の最も変化している領域を特定する。
The characteristic
効率化制御部18は、画像比較部17において特定された画像データ内の最も変化している領域について、当該変化を視認し易い表示レイアウトデータを作成する。例えば、記録部15に記録された画像データから最も線分数が少ない場合、最も線分数が多い場合、あるいは平均的な線分数の場合の画像データと、現在の画像データを並べて表示する表示レイアウトデータを作成する。さらに効率化制御部18は、記録部15に記録された過去の画像データと現在の画像データにおける線分数を算出し、当該線分数の増減に基づいて定量的評価を行い、当該評価に対応するメッセージなどの支援情報を作成する。
The
定量的評価とは、例えば過去の画像データと現在の画像データにおける線分数をそれぞれ数値で示したものである。過去の画像データの線分数に対する現在の画像データの線分数の増加量が所定値以上であるか否かにより作業環境の整理整頓度合いを評価する。効率化制御部18において生成された表示レイアウトデータ、定量的評価の結果および支援情報の表示指示は表示装置3に出力される。
Quantitative evaluation is a numerical value indicating the number of line segments in past image data and current image data, for example. The degree of organization of the work environment is evaluated based on whether or not the amount of increase in the number of line segments in the current image data with respect to the number of line segments in the past image data is greater than or equal to a predetermined value. The display layout data generated by the
次に、実施の形態1の評価支援装置1の動作について説明する。図2は、実施の形態1による評価支援装置の動作を示すフローチャートである。
評価支援装置1に画像センサ2からセンサ信号が入力されると(ステップST1)、キャプチャ部11は入力されたセンサ信号に基づいた画像データを構成する(ステップST2)。抽出パラメータ設定部13は、ステップST2で構成された画像データから線分および線分間隔の抽出パラメータを設定する(ステップST3)。
Next, the operation of the
When a sensor signal is input from the
線分抽出部14は、ステップST3で設定された抽出パラメータを用いて、ステップST2で構成された画像データから線分を抽出し、抽出した線分の数および線分の座標データなどの線分情報を取得する(ステップST4)。取得した線分情報は画像データと共に記録部15に格納される(ステップST5)。特徴的変化判定部16は、記録部15に格納された過去の画像データの線分情報と、ステップST4で取得された現在の画像データの線分情報とを比較し、現在の画像データの線分情報に特徴的変化が生じているか否か判定を行う。(ステップST6)。
The line
ステップST6において、現在の画像データの線分情報に特徴的変化が発生していないと判定された場合には、ステップST1の処理に戻り、新たにセンサ信号が入力されるまで待機する。一方、ステップST6において、現在の画像データの線分情報に特徴的変化が発生していると判定された場合には、画像比較部17が、当該線分情報を有する現在および過去の画像データを比較し、画像データ内で最も大きく変化している領域を特定する(ステップST7)。
If it is determined in step ST6 that no characteristic change has occurred in the line segment information of the current image data, the process returns to step ST1 and waits until a new sensor signal is input. On the other hand, when it is determined in step ST6 that a characteristic change has occurred in the line segment information of the current image data, the
効率化制御部18は、ステップST7における特定結果を参照し、画像データ内で最も変化している領域が視認し易い表示レイアウトデータを作成する(ステップST8)。さらに、効率化制御部18は、ステップST7における特定結果を参照し、線分数の増減に基づいて定量的評価を行い、当該定量的評価に対応した表示メッセージなどを作成する(ステップST9)。表示装置3は、ステップST8で作成された表示レイアウトデータに基づいた画面表示を行い、当該画面上にステップST9で作成した定量的評価の結果およびメッセージを合せて表示する(ステップST10)。その後フローチャートはステップST1の処理に戻り、上述した処理を繰り返す。
The
なお、上述したステップST3の抽出パラメータの設定は、画像データ中のオブジェクトの大きさを基準としてもよいし、ユーザ入力部12を介して設定されたユーザが所望する値としてもよい。ユーザが所望する値をパラメータとして設定すると、特に細かい部品を扱う作業環境や、大きな部品を扱う作業環境であった場合にも、線分抽出部14において有効な線分抽出を行うことができる。
Note that the setting of the extraction parameter in step ST3 described above may be based on the size of the object in the image data, or may be a value desired by the user set via the
図3は、実施の形態1による評価支援装置の安全化・効率化支援の表示例を示す図である。表示装置3の表示画面3aには、現在の画像3bと過去の画像3cが並列に表示され、現在の画像3bに対する定量的評価の結果3dが「2010.10.15 15:47 整理整頓レベル742」と表示され、過去の画像3cに対する定量的評価の結果3eが「2010.10.15 08:30 整理整頓レベル217」と表示されている。図3の例では定量的評価の結果、すなわち線分数を「整理整頓レベル」として記載している。また、図3の例では過去の画像3cの線分数に対して現在の画像3bの線分数の増加量が所定値「500」を超えているため、支援情報であるメッセージ3f「机の上のものがだいぶ増えてきました。使わない部品や工具を棚に戻して、作業環境をシンプルにし、ミスや怪我のないように作業環境を整えましょう。」が作成され、表示される。
FIG. 3 is a diagram illustrating a display example of safety / efficiency support of the evaluation support apparatus according to the first embodiment. On the display screen 3a of the
ユーザは、表示装置3の表示画面3aに表示された定量的評価の結果3d,3eを確認することにより、作業環境にオブジェクトが増大していることを確認することができる。さらにメッセージ3fを表示することにより、作業環境を整える必要があることを認識することができる。
The user can confirm that the number of objects has increased in the work environment by confirming the
以上のように、この実施の形態1によれば、抽出パラメータに基づいて画像データから線分を抽出し、抽出した線分の数および線分の座標データなどの線分情報を取得する線分抽出部14と、過去の画像データの線分情報と現在の画像データの線分情報とを比較して特徴的変化が発生しているか否か判定を行う特徴的変化判定部16と、画像データ内の最も大きく変化している領域を特定する画像比較部17と、変化している領域を明示する表示レイアウトデータを作成すると共に、線分情報に基づいて定量的評価を行い、当該評価に対応した支援情報を作成する効率化制御部18を備えるように構成したので、作業環境の整理整頓度合いを数値化して判断することができる。また、整理整頓度合いを示す数値に基づき作業環境を評価するため、評価が容易となり、作業環境の安全化・効率化支援を容易に行うことができる。
As described above, according to the first embodiment, line segments are extracted from image data based on extraction parameters, and line segment information such as the number of extracted line segments and line segment coordinate data is acquired. An
また、この実施の形態1によれば、効率化制御部18が、変化している領域を明示する表示レイアウトデータを作成すると共に、線分情報に基づいて定量的評価を行い、当該評価に対応した支援情報を作成し、表示装置3に表示レイアウトデータ、定量的評価の結果および支援情報を表示するように構成したので、ユーザは作業環境の整理整頓度合いを数値により容易に把握することができる。また、変化している領域が明示されているため、どの作業環境を整えるべきか容易に判断することができる。さらに支援情報が表示されることから作業環境を整える必要があることを容易に認識することができる。これらにより、ユーザは容易且つスムーズに作業環境の安全化・効率化を実施することができる。
Further, according to the first embodiment, the
なお、上述した実施の形態1では、特徴的変化判定部16が記録部15に記録された過去の画像の線分情報と、現在の画像の線分情報とを比較して特徴的な変化が生じているか否か判定する構成を示したが、特徴的変化判定部16に学習機能を持たせて構成してもよい。例えば、これまでの判定において最も少ない線分数を最良値として記録部15に記録しておき、当該最良値と現在の画像の線分情報とを比較して特徴的な変化が生じているか否か判定する。また異なる例として、作業環境が整理整頓されていると思われる始業時の線分数、あるいは始業時間帯の線分数の平均値を判定の指標として記録部15に記録し、当該判定の指標と現在の画像の線分情報とを比較して特徴的な変化が生じているか否か判定してもよい。
また、特徴的変化判定部16に学習機能を持たせる構成は、以下で説明する実施の形態2−5においても適用可能である。
In the first embodiment described above, the characteristic
The configuration in which the characteristic
また、上述した実施の形態1の構成に追加して、表示装置3に評価パターン設定画面を表示し、ユーザがユーザ入力部12を介して評価パターンを設定するように構成してもよい。評価パターンの設定として、評価対象の設定、評価対象の広さの設定、評価対象での作業内容の設定などが考えられる。例えば、評価対象について「工場」「事務所」「運動場」などの項目が表示され、評価対象の広さについて「グランド」「1フロア」「1机」などの項目が表示され、評価対象での作業内容について「分解組み立て」「デザインワーク」「文書作成」「調査」などの項目が表示され、ユーザがユーザ入力部12を介してこれらの項目から該当する項目を選択する。
In addition to the configuration of the first embodiment described above, an evaluation pattern setting screen may be displayed on the
評価パターンを設定することにより、線分抽出パラメータ13、線分抽出部14、特徴的変化判定部16、画像比較部17および効率化制御部18における処理動作がより的確なものとなる。なお、評価パターンや、評価対象、評価対象の広さおよび評価対象での作業内容に関する項目は上述した項目に限定されるものではなく、使用環境に応じて適宜変更や追加が可能である。
また、このユーザ入力部12を介して評価パターンを設定する構成は、以下で説明する実施の形態2−5においても適用可能である。
By setting the evaluation pattern, the processing operations in the line
Moreover, the structure which sets an evaluation pattern via this
実施の形態2.
上述した実施の形態1では、画像データの線分情報を比較して作業環境を評価する構成を示したが、この実施の形態2では、画像データの輪郭を用いて物体の移動を判断して作業環境を評価する構成を示す。
図4は、実施の形態2による評価支援装置の構成を示すブロック図である。実施の形態1で示した線分抽出部14に替えてオブジェクト抽出部21を備えている。さらに、物体の移動を示す移動ベクトルを抽出する移動ベクトル抽出部22を追加して設けている。なお以下では、実施の形態1による評価支援装置1の構成要素と同一または相当する部分には実施の形態1で使用した符号と同一の符号を付して説明を省略または簡略化する。
In the above-described first embodiment, the configuration in which the work environment is evaluated by comparing the line segment information of the image data is shown. However, in this second embodiment, the movement of the object is determined using the contour of the image data. A configuration for evaluating the work environment is shown.
FIG. 4 is a block diagram showing the configuration of the evaluation support apparatus according to the second embodiment. An
抽出パラメータ設定部13は、画像データ中の物体を認識し、認識した物体の大きさを基準としてその他のオブジェクトサイズを設定する。オブジェクト抽出部21は、キャプチャ部11において構成された画像データをWavelet変換することによりオブジェクトを抽出する。さらに抽出したオブジェクトの座標データを取得する。抽出したオブジェクトの座標データおよびオブジェクトの数をオブジェクト情報として画像データと共に記録部15に格納する。記録部15は、画像データと当該画像データのオブジェクト情報を合せて記録する。
The extraction
特徴的変化判定部16は、記録部15に記録された過去の画像データのオブジェクト情報と、オブジェクト抽出部21から入力される現在の画像のオブジェクト情報とを比較し、オブジェクトに特徴的な変化が生じているか否か判定する。ここでオブジェクトの特徴的な変化とは、例えばオブジェクトの座標データに急な変化があった場合などである。なお、ユーザ入力部12を介して設定された基準に基づいて特徴的変化と判断するように構成してもよい。画像比較部17は、特徴的変化判定部16において特徴的な変化が生じていると判定されたオブジェクト情報を有する画像データを比較し、画像データ内の最も変化しているオブジェクトを特定する。
The characteristic
移動ベクトル抽出部22は、画像比較部17において最も変化していると特定されたオブジェクトについて、記録部15に記録された過去の画像データのオブジェクト情報と、オブジェクト抽出部21から入力される現在の画像データのオブジェクト情報とを参照し、座標データの変化から移動ベクトルを抽出する。抽出した移動ベクトルは効率化制御部18に出力される。
The movement
効率化制御部18は、画像比較部17において特定された最も変化しているオブジェクトについて、オブジェクトの変化を視認し易い表示レイアウトデータを作成する。さらにオブジェクトの移動あるいはオブジェクト数の増加などの変化に基づいて定量的評価を行い、当該評価に対応した支援情報を作成する。さらに、移動ベクトル抽出部22が抽出した移動ベクトルに基づき、最も変化しているオブジェクトがどのような移動ベクトルを持って出現したかを示したベクトル線、あるいはオブジェクトを何処に収納すべきかを示したベクトル線を作成する。効率化制御部18において生成された表示レイアウトデータ、支援情報およびベクトル線の表示指示は表示装置3に出力される。表示装置3は、効率化制御部18から入力される画像の表示レイアウトデータ、支援情報およびベクトル線の表示指示に基づき、画面表示を行う。
The
次に、実施の形態2の評価支援装置1の動作について説明する。図5は、実施の形態2による評価支援装置の動作を示すフローチャートである。なお、以下では実施の形態1に係る評価支援装置1と同一のステップには図2で使用した符号と同一の符号を付し、説明を省略または簡略化する。
ステップST3においてオブジェクトを抽出するためのパラメータが設定されると、オブジェクト抽出部21は、当該抽出パラメータを用いて、ステップST2で構成された画像データからオブジェクトを抽出し、抽出したオブジェクトの数およびオブジェクトの座標データなどのオブジェクト情報を取得する(ステップST21)。取得したオブジェクト情報は画像データと共に記録部15に格納される(ステップST22)。
Next, the operation of the
When parameters for extracting objects are set in step ST3, the
特徴的変化判定部16は、記録部15に格納された過去の画像データのオブジェクト情報と、ステップST21で取得された現在の画像データのオブジェクト情報とを比較し、現在の画像データのオブジェクト情報に特徴的変化が発生しているか否か判定を行う。(ステップST23)。ステップST23において、現在の画像データのオブジェクト情報に特徴的変化が発生していないと判定された場合には、ステップST1の処理に戻り、新たなセンサ信号が入力されるまで待機する。一方、ステップST23において、現在の画像データのオブジェクト情報に特徴的変化が発生していると判定された場合には、当該オブジェクト情報を有する現在および過去の画像データのオブジェクト情報を比較し、最も大きく変化しているオブジェクトを特定する(ステップST24)。
The characteristic
移動ベクトル抽出部22は、ステップST24において特定されたオブジェクトについて、記録部15に記録された過去の画像データのオブジェクト情報と、オブジェクト抽出部21から入力される現在の画像データのオブジェクト情報とを参照して移動ベクトルを抽出する(ステップST25)。
The movement
効率化制御部18は、ステップST24における特定結果を参照し、画像データ内で最も変化しているオブジェクトが視認し易い表示レイアウトデータを作成する(ステップST26)と共に、オブジェクト数の増減に基づいて定量的評価を行い、当該評価に対応した表示メッセージを作成する(ステップST27)。さらに効率化制御部18は、ステップST25において抽出した移動ベクトルを用いて、最も変化しているオブジェクトの出現方向あるいは収納方向を示すベクトル線を作成する(ステップST28)。
The
表示装置3は、ステップST26において生成された表示レイアウトデータに基づいた画面表示を行い、当該画面上にステップST27およびステップST28で作成した定量的評価の結果、メッセージおよびベクトル線を合せて表示する(ステップST29)。その後フローチャートはステップST1の処理に戻り、上述した処理を繰り返す。
The
図6は、実施の形態2による評価支援装置の安全化・効率化支援の表示例を示す図である。表示装置3の表示画面3aには、現在の画像データ3bと過去の画像データ3cが並列に表示される。また、定量的評価結果3d,3e、およびオブジェクトの変化に応じたメッセージ3fが表示される。さらに、画像比較部17において最も大きく変化していると特定されたオブジェクトをどこに収納すべきかを示すベクトル線3gが表示されている。
FIG. 6 is a diagram illustrating a display example of safety / efficiency support of the evaluation support apparatus according to the second embodiment. On the display screen 3a of the
ユーザは、表示装置3の表示画面3aに表示されたメッセージ3fにより作業環境を整える必要があることを認識することができる。さらにベクトル線3gにより、オブジェクトを何処に収納すべきか容易に認識することができる。
The user can recognize that the work environment needs to be adjusted by the
以上のように、この実施の形態2によれば、抽出パラメータに基づいて画像データからオブジェクトを抽出し、抽出したオブジェクトの数および座標データなどのオブジェクト情報を取得するオブジェクト抽出部21と、過去の画像データのオブジェクト情報と現在の画像データのオブジェクト情報とを比較して特徴的変化が発生しているか否か判定を行う特徴的変化判定部16と、画像データ内の最も大きく変化しているオブジェクトを特定する画像比較部17と、特定されたオブジェクトの移動ベクトルを抽出する移動ベクトル抽出部22と、変化しているオブジェクトを明示する表示レイアウトデータを作成すると共に、オブジェクト情報に基づいて定量的評価を行い、当該評価に対応した支援情報および特定されたオブジェクトの移動方向を示すベクトル線を作成する効率化制御部18を備えるように構成したので、変化したオブジェクトを明示し、変化したオブジェクトの出現方向あるいは収納方向を示すことができる。これによりユーザは、整理すべき対象および収納するべき方向を容易に認識することができる。
As described above, according to the second embodiment, an
また、この実施の形態2によれば、効率化制御部18が、変化しているオブジェクトを明示する表示レイアウトデータを作成すると共に、定量的評価に対応した支援情報およびベクトル線の表示制御を行うように構成したので、ユーザはどのオブジェクトを整理すべきか容易に判断することができる。さらに支援情報が表示されることから作業環境を整える必要があることを容易に認識することができる。また、ベクトル線を参照することにより、ユーザは容易且つスムーズに作業環境を整えることができる。
Further, according to the second embodiment, the
実施の形態3.
この実施の形態3では、実施の形態1で示した線分抽出部14と、実施の形態2で示したオブジェクト抽出部21および移動ベクトル抽出部22とを有する評価支援装置1について説明する。図7は、実施の形態3による評価支援装置の構成を示すブロック図である。なお以下では、実施の形態1および実施の形態2による評価支援装置1の構成要素と同一または相当する部分には実施の形態1で使用した符号と同一の符号を付して説明を省略または簡略化する。
In the third embodiment, an
記録部15は、線分抽出部14において抽出された線分情報と、オブジェクト抽出部21において抽出されたオブジェクト情報とを画像データと共に記録する。移動ベクトル抽出部22は、画像比較部17において特定される領域内のオブジェクト情報に特徴的変化があると判断した場合に、当該特徴的変化のあるオジェクトの移動ベクトルを抽出する。
The
効率化制御部18は、画像比較部17において特定された画像データ内の最も変化している領域について当該変化を視認し易い表示レイアウトデータを作成する。また、過去の画像データの線分数やオブジェクト数と現在の画像データの線分数やオブジェクト数の増減に基づいて定量的評価を行い、当該評価に対応するメッセージなどの支援情報を作成する。さらに、移動ベクトル抽出部22が抽出した移動ベクトルに基づき、画像比較部17において特定された最も変化しているオブジェクトのベクトル線を作成する。効率化制御部18において生成された表示レイアウトデータ、定量的評価の結果、支援情報およびベクトル線の表示指示は表示装置3に出力される。
The
表示装置3は、効率化制御部18から出力される表示指示に基づき画像表示を行う。具体的には、変化している領域を明示した表示画面上に、定量的評価の結果、整理整頓を指示するメッセージ、およびオブジェクトの収納場所を示すベクトル線を表示する。
The
次に、実施の形態3の評価支援装置1の動作について説明する。図8は、実施の形態3による評価支援装置の動作を示すフローチャートである。なお、以下では実施の形態1および実施の形態2による評価支援装置1と同一のステップには図2または図4で使用した符号と同一の符号を付し、説明を省略または簡略化する。
Next, the operation of the
線分抽出部14は、線分情報を取得し(ステップST4)、画像データと共に記録部15に格納する(ステップST5)。オブジェクト抽出部21は、オブジェクト情報を取得し(ステップST21)、画像データと共に記録部15に格納する(ステップST22)。
The line
次に特徴的変化判定部16は、現在の画像データの線分情報と、現在の画像の線分情報とを比較して特徴的な変化が生じているか否か判定を行う(ステップST6)。ステップST6において現在の画像データの線分情報に特徴的変化が発生していないと判定された場合にはステップST1の処理に戻る。一方、ステップST6において線分情報に特徴的変化が発生していると判定された場合には、画像比較部17が画像データ内で最も大きく変化している領域を特定する(ステップST7)。
Next, the characteristic
次に、移動ベクトル抽出部22は、ステップST7において特定された領域内のオブジェクト情報に特徴的変化があるか否か判定を行う(ステップST31)。ステップST31において特徴的変化があると判定された場合には、特徴的変化があると判定されたオブジェクトの移動ベクトルを抽出する(ステップST32)。
Next, the movement
効率化制御部18は、ステップST7における特定結果、およびステップST31において特徴的変化があると判定されたオブジェクト情報を参照し、画像データ内で最も変化している領域が視認し易い表示レイアウトデータを作成する(ステップST33)。さらに、効率化制御部18は、ステップST7における特定結果およびステップST31において特徴的変化があると判定されたオブジェクト情報を参照し、線分数およびオブジェクト数の増減に基づいて定量的評価を行い、当該定量的評価に対応した表示メッセージなどを作成する(ステップST34)。
The
さらに効率化制御部18は、ステップST32において抽出した移動ベクトルを用いて、最も変化しているオブジェクトの出現方向あるいは収納方向を示すベクトル線を作成する(ステップST35)。表示装置3は、ステップST33で作成された表示レイアウトデータに基づいた画面表示を行い、当該画面上にステップST34およびステップST35で作成した定量的評価の結果、メッセージおよびベクトル線を合せて表示する(ステップST36)。
Further, the
一方、ステップST31において、領域内のオブジェクト情報に特徴的変化がないと判定された場合には、実施の形態1と同様の処理(ステップST8〜10)を行う。その後フローチャートはステップST1の処理に戻り、上述した処理を繰り返す。 On the other hand, if it is determined in step ST31 that there is no characteristic change in the object information in the region, the same processing as in the first embodiment (steps ST8 to ST10) is performed. Thereafter, the flowchart returns to the process of step ST1 and repeats the above-described process.
この実施の形態3による評価支援装置1の安全化・効率化支援の表示例は、図3と同一の表示画面3a、あるいは表示画面3aの過去の画像3cにベクトル線3gを追加したものとなる。
The display example of the safety / efficiency support of the
以上のように、この実施の形態3によれば、画像比較部17において特定された最も変化している領域内のオブジェクト情報に変化がある場合に、当該オブジェクトの移動ベクトルを抽出するように構成したので、定量的評価の結果および支援情報に加えてオブジェクトの収納方向などを同時に表示することができる。これにより、ユーザはより容易且つスムーズに作業環境を整えることができる。
As described above, according to the third embodiment, when there is a change in the object information in the most changed region specified by the
実施の形態4.
この実施の形態4では、実施の形態1から実施の形態3で示した評価支援装置1に、作業者が行った整理状況と画像データの変化とを関連付けて記録させる構成を追加して設けている。図9は、実施の形態4による評価支援装置の構成を示すブロック図である。なお以下では、実施の形態1による評価支援装置1の構成要素と同一または相当する部分には実施の形態1で使用した符号と同一の符号を付して説明を省略または簡略化する。
Embodiment 4 FIG.
In the fourth embodiment, the
ユーザは作業環境を整理した際に、ユーザ入力部12を介して整理前後の画像を選択する。画像の選択方法としては、例えば整理前の時間と整理後の時間を入力する、あるいは表示部に表示された画像から選択するなど適宜構成可能である。なお、画像の選択方法は一般的な方法を用いて構成可能であることから、詳細な説明は省略する。さらにユーザ入力部12を介して、整理した物体の種別や量なども入力される。
When the user arranges the work environment, the user selects images before and after the arrangement via the
特徴的変化判定部16は、変化算出部16aを備えている。変化算出部16aは、ユーザ入力部12を介して指示された整理前後の画像データと当該画像データの線分情報を記録部15から読み出し、読み出した線分情報に基づき整理前後の線分の変化量を取得する。取得した変化量、整理した物体の種別や量などは画像データと関連付けて記録部15に格納される。特徴的変化判定部16は、現在の画像データと過去の画像データを比較して特徴的変化があると判定した場合に、記録部15に記録された画像データ、線分の数の変化、および整理した物体の種別や量などを参照し、整理した物体の種別と量を推定することができる。
The characteristic
また、異なる構成として、ユーザは作業環境を整理した際に、ユーザ入力部12を介して整理した場所の画像データの座標を入力するように構成してもよい。この場合、特徴的変化判定部16の変化算出部16aは、ユーザ入力部12を介して指示された整理前後の画像データと整理した場所の画像データの座標、および整理前後の線分の変化量とを関連付けて記録部15に記録させる。特徴的変化判定部16は、現在の画像データと過去の画像データを比較して特徴的変化があると判定した場合に、記録部15に記録された画像データ、および整理した場所の画像データの座標、線分の数の変化、整理した物体の種別や量などから、物体の収納方向および物体の移動量などを推定することができる。
Further, as a different configuration, the user may input the coordinates of the image data of the arranged place via the
以上のように、この実施の形態4によれば、ユーザ入力部12を介して整理した物体の種別や量、あるいは整理した場所の画像データの座標の入力を受け付け、特徴的変化判定部16においてこれら入力された情報と画像データ、線分の数の変化を関連付けて記録するように構成したので、線分情報に変化が生じた際に、整理すべき物体および物体の収納場所を推定することができ、ユーザに作業環境を整理するためのより詳しい支援情報を提示することができる。
As described above, according to the fourth embodiment, the input of the type and amount of the object arranged via the
なお、上述した実施の形態4では、実施の形態1の評価支援装置1に上述した構成を追加する構成を示したが、実施の形態2および実施の形態3の評価支援装置1に追加して設けてもよい。実施の形態2に上述した実施の形態4の構成を追加する場合には、変化算出部16aは画像データのオブジェクト情報を参照する。
In the above-described fourth embodiment, the configuration in which the above-described configuration is added to the
実施の形態5.
この実施の形態5では、実施の形態1から実施の形態4で示した評価支援装置1に、画像データの輝度を記録部15に記録させる構成を追加して設けている。なお以下では、実施の形態1から実施の形態4による評価支援装置1の構成要素と同一または相当する部分は説明を省略または簡略化する。
Embodiment 5 FIG.
In the fifth embodiment, the
キャプチャ部11に入力される画像データには輝度を示す情報が含まれていることから、線分抽出部14あるいはオブジェクト抽出部21において線分情報あるいはオブジェクト情報と画像データとを記録部15に格納する際に、輝度情報も合せて格納する。特徴的変化判定部16は、輝度情報を参照し、輝度が所定の範囲内の画像データのみを採用し、特徴的変化が生じているか否かの判定を行う。また、画像データの輝度が所定の範囲外である場合には、所定の範囲内となるように輝度調整を行った後に特徴的変化の発生を判定するように構成してもよい。これらにより、画像の輝度を一定の範囲として特徴的変化の判定を行うことができる。
Since the image data input to the
なお、記録部15に格納する輝度情報は、画像データ全体の輝度、あるいは基準となる部分の輝度であってもよい。
Note that the luminance information stored in the
この実施の形態5によれば、画像データの輝度情報を記録し、当該輝度が所定範囲内である画像データを用いて特徴的変化が生じているか否かの判定を行うように構成したので、画像データの輝度を一定範囲内として評価することができ、正確な判定を行うことができる。 According to the fifth embodiment, the luminance information of the image data is recorded, and it is configured to determine whether or not a characteristic change has occurred using the image data whose luminance is within a predetermined range. The brightness of the image data can be evaluated within a certain range, and an accurate determination can be made.
なお、上述した実施の形態1−5では、画像センサ2および画像キャプチャ部11を備える構成を示したが、画像データ取得方法はこれらに限定されることはなく、適宜変更可能である。例えば、撮像手段を用いて画像データを取得してもよいし、撮影手段により取得された映像データから画像データを取得するように構成してもよい。
In the above-described first to fifth embodiments, the configuration including the
なお、上述した実施の形態1−5では、最も変化が大きい物を認識させる構成を示したが、認識対象は適宜変更可能である。例えば、変化が大きい上位3つの画像データの部分あるいはオブジェクトを抽出するように構成してもよい。 In addition, in Embodiment 1-5 mentioned above, although the structure which recognizes the thing with the largest change was shown, the recognition object can be changed suitably. For example, the configuration may be such that the top three image data portions or objects having the largest changes are extracted.
なお、本願発明はその発明の範囲内において、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。 In the present invention, within the scope of the invention, any combination of the embodiments, or any modification of any component in each embodiment, or omission of any component in each embodiment is possible. .
1 評価支援装置、2 画像センサ、3 表示装置、11 キャプチャ部、12 ユーザ入力部、13 抽出パラメータ設定部、14 線分抽出部、15 記録部、16 特徴的変化判定部、16a 変化算出部、17 画像比較部、18 効率化制御部、21 オブジェクト抽出部、22 移動ベクトル抽出部。
DESCRIPTION OF
Claims (10)
前記画像データと、前記線分抽出部が抽出した線分情報とを記録する記録部と、
入力された画像データの線分情報と、前記記録部に記録された画像データの線分情報とを比較し、前記線分情報の変化を検出する変化検出部と、
前記入力された画像データと前記記録部に記録された画像データを参照して、前記変化検出部が検出した線分情報の変化の発生箇所を特定する画像比較部と、
前記変化検出部が検出した線分情報の変化について定量的評価を行うと共に、当該定量的評価と前記画像比較部が特定した線分情報の変化の発生箇所とを表示手段に表示する効率化制御部とを備えた評価支援装置。 A line segment extraction unit that extracts line segment information of an object from image data;
A recording unit that records the image data and line segment information extracted by the line segment extraction unit;
A change detection unit that compares the line segment information of the input image data with the line segment information of the image data recorded in the recording unit, and detects a change in the line segment information;
An image comparison unit that refers to the input image data and the image data recorded in the recording unit, and identifies the occurrence location of the change in line segment information detected by the change detection unit;
Efficient control for performing quantitative evaluation on the change in line segment information detected by the change detection unit and displaying the quantitative evaluation and the occurrence point of the change in line segment information specified by the image comparison unit on the display means And an evaluation support apparatus.
前記画像データと、前記オブジェクト抽出部が抽出した輪郭情報とを記録する記録部と、
入力された画像データの輪郭情報と、前記記録部に記録された画像データの輪郭情報とを比較し、前記輪郭情報の変化を検出する変化検出部と、
前記入力された画像データと前記記録部に記録された画像データを参照して、前記変化検出部が検出した輪郭情報に対応する物体を特定する画像比較部と、
前記入力された画像データおよび前記記録部に記録された画像データの輪郭情報を参照して、前記物体の移動方向を示す移動ベクトルを抽出する移動ベクトル抽出部と、
前記移動ベクトル抽出部が抽出した移動ベクトルに基づき前記物体の移動を指示するベクトル線を作成すると共に、前記変化検出部が検出した輪郭情報の変化について定量的評価を行い、前記ベクトル線、前記定量的評価および前記画像比較部において特定された輪郭情報の変化の発生箇所とを表示手段に表示する効率化制御部とを備えた評価支援装置。 An object extraction unit for extracting contour information of an object from image data;
A recording unit that records the image data and the contour information extracted by the object extraction unit;
A change detecting unit that compares the contour information of the input image data with the contour information of the image data recorded in the recording unit, and detects a change in the contour information;
An image comparison unit that identifies an object corresponding to the contour information detected by the change detection unit with reference to the input image data and the image data recorded in the recording unit;
A movement vector extraction unit that extracts a movement vector indicating a movement direction of the object with reference to the input image data and contour information of the image data recorded in the recording unit;
A vector line for instructing movement of the object is created based on the movement vector extracted by the movement vector extraction unit, and a change in the contour information detected by the change detection unit is quantitatively evaluated. An evaluation support apparatus comprising: an efficiency control unit that displays on a display unit a target evaluation and a location where a change in contour information identified by the image comparison unit occurs.
画像データから物体の輪郭情報を抽出するオブジェクト抽出部と、
前記画像データ、前記線分抽出部が抽出した線分情報、および前記オブジェクト抽出部が抽出した輪郭情報を記録する記録部と、
入力された画像データの線分情報と、前記記録部に記録された画像データの線分情報とを比較し、前記線分情報の変化を検出する変化検出部と、
前記入力された画像データと前記記録部に記録された画像データを参照して、前記変化検出部が検出した線分情報の変化の発生箇所を特定する画像比較部と、
前記入力された画像データおよび前記記録部に記録された画像データの輪郭情報を参照して、前記画像比較部が特定した線分情報の変化の発生箇所において輪郭情報に変化がある場合に、当該輪郭情報に対応する物体の移動ベクトルを抽出する移動ベクトル抽出部と、
前記変化検出部が検出した線分情報の変化および前記線分情報の変化の発生箇所における輪郭情報の変化について定量的評価を行い、前記移動ベクトル抽出部が抽出した移動ベクトルに基づき前記物体の移動を指示するベクトル線を作成し、前記定量的評価、前記ベクトル線、および前記画像比較部が特定した線分情報の変化の発生箇所とを表示手段に表示する効率化制御部とを備えた評価支援装置。 A line segment extraction unit that extracts line segment information of an object from image data;
An object extraction unit for extracting contour information of an object from image data;
A recording unit for recording the image data, the line segment information extracted by the line segment extraction unit, and the contour information extracted by the object extraction unit;
A change detection unit that compares the line segment information of the input image data with the line segment information of the image data recorded in the recording unit, and detects a change in the line segment information;
An image comparison unit that refers to the input image data and the image data recorded in the recording unit, and identifies the occurrence location of the change in line segment information detected by the change detection unit;
With reference to the input image data and the contour information of the image data recorded in the recording unit, when there is a change in the contour information at the occurrence point of the change in the line segment information specified by the image comparison unit, A movement vector extraction unit for extracting a movement vector of an object corresponding to the contour information;
Quantitative evaluation is performed on a change in line segment information detected by the change detection unit and a change in outline information at a location where the change in the line segment information occurs, and the movement of the object is performed based on the movement vector extracted by the movement vector extraction unit. And an efficiency control unit that displays a vector line that indicates a change, and displays on the display means the quantitative evaluation, the vector line, and the occurrence location of the change in line segment information specified by the image comparison unit. Support device.
前記線分抽出部は、前記パラメータ設定部が設定した前記線分長および前記線分間隔に基づき画像データから物体の線分情報を抽出することを特徴とする請求項1または請求項3記載の評価支援装置。 A parameter setting unit that recognizes an object included in the image data and sets a line segment length and a line segment interval of another object based on the size of the object;
The line segment extraction unit extracts line segment information of an object from image data based on the line segment length and the line segment interval set by the parameter setting unit. Evaluation support device.
前記オブジェクト抽出部は、前記パラメータ設定部が設定した前記オブジェクトサイズに基づき画像データからオブジェクトを抽出することを特徴とする請求項2または請求項3記載の評価支援装置。 A parameter setting unit that recognizes an object included in the image data and sets another object size based on the size of the object;
The evaluation support apparatus according to claim 2, wherein the object extraction unit extracts an object from image data based on the object size set by the parameter setting unit.
前記記録部に記録された線分情報から、前記物体の移動前後の線分情報の変化量を算出する変化算出部とを備え、
前記記録部は、前記変化算出部が算出した線分情報の変化量と前記物体の移動に関する情報とを関連付けて記録し、
前記変化検出部は、線分情報の変化を検出した場合に、前記記録部に記録された前記線分情報の変化量と前記物体の移動に関する情報とを参照して、移動した物体を推定することを特徴とする請求項1または請求項3記載の評価支援装置。 A user input unit for inputting information related to the movement of the object;
A change calculation unit that calculates a change amount of line segment information before and after the movement of the object from the line segment information recorded in the recording unit;
The recording unit records the change amount of the line segment information calculated by the change calculation unit and information related to the movement of the object in association with each other,
When the change detection unit detects a change in line segment information, the change detection unit estimates the moved object by referring to the change amount of the line segment information recorded in the recording unit and the information related to the movement of the object. The evaluation support apparatus according to claim 1 or claim 3, wherein
前記記録部に記録された線分情報から、前記物体の移動前後の線分情報の変化量を算出する変化算出部とを備え、
前記記録部は、前記変化算出部が算出した線分情報の変化量と前記物体の移動前後の座標とを関連付けて記録し、
前記変化検出部は、線分情報の変化を検出した場合に、前記記録部に記録された前記線分情報の変化量と前記物体の移動に関する情報とを参照して、物体の移動量および移動方向を推定することを特徴とする請求項1または請求項3記載の評価支援装置。 A user input unit for inputting coordinates before and after the movement of the object in the image data;
A change calculation unit that calculates a change amount of line segment information before and after the movement of the object from the line segment information recorded in the recording unit;
The recording unit records the change amount of the line segment information calculated by the change calculation unit and the coordinates before and after the movement of the object,
When the change detection unit detects a change in line segment information, the change detection unit refers to the change amount of the line segment information recorded in the recording unit and the information related to the movement of the object, and moves and moves the object. The evaluation support apparatus according to claim 1, wherein the direction is estimated.
前記変化検出部は、前記画像データの輝度が所定範囲内である場合に、前記線分情報の変化を検出することを特徴とする請求項1または請求項3記載の評価支援装置。 The recording unit records the luminance of the image data,
The evaluation support apparatus according to claim 1, wherein the change detection unit detects a change in the line segment information when the luminance of the image data is within a predetermined range.
前記変化検出部は、前記画像データの輝度が所定範囲内である場合に、前記輪郭情報の変化を検出することを特徴とする請求項2または請求項3記載の評価支援装置。 The recording unit records the luminance of the image data,
4. The evaluation support apparatus according to claim 2, wherein the change detecting unit detects a change in the contour information when the luminance of the image data is within a predetermined range.
前記画像から画像データを構成するキャプチャ部と、
画像データから物体の線分情報を抽出する線分抽出部と、
前記画像データと、前記線分抽出部が抽出した線分情報とを記録する記録部と、
入力された画像データの線分情報と、前記記録部に記録された画像データの線分情報とを比較し、前記線分情報の変化を検出する変化検出部と、
前記入力された画像データと前記記録部に記録された画像データを参照して、前記変化検出部が検出した線分情報の変化の発生箇所を特定する画像比較部と、
前記変化検出部が検出した線分情報の変化について定量的評価を行うと共に、当該定量的評価と前記画像比較部が特定した線分情報の変化の発生箇所との表示指示を出力する効率化制御部とを備えた評価支援装置と、
前記効率化制御部から出力された表示指示に基づき前記定量的評価および前記線分情報の変化の発生箇所を画面表示する表示装置とを備えた評価支援システム。 An imaging device for acquiring images;
A capture unit constituting image data from the image;
A line segment extraction unit that extracts line segment information of an object from image data;
A recording unit that records the image data and line segment information extracted by the line segment extraction unit;
A change detection unit that compares the line segment information of the input image data with the line segment information of the image data recorded in the recording unit, and detects a change in the line segment information;
An image comparison unit that refers to the input image data and the image data recorded in the recording unit, and identifies the occurrence location of the change in line segment information detected by the change detection unit;
Efficiency control for performing a quantitative evaluation on the change in line segment information detected by the change detection unit and outputting a display instruction of the quantitative evaluation and the location where the change in the line segment information specified by the image comparison unit is specified An evaluation support apparatus comprising
An evaluation support system comprising: a display device configured to display on a screen a location where the quantitative evaluation and the change of the line segment information have occurred based on a display instruction output from the efficiency control unit.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011000588A JP2012141884A (en) | 2011-01-05 | 2011-01-05 | Evaluation support device and evaluation support system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011000588A JP2012141884A (en) | 2011-01-05 | 2011-01-05 | Evaluation support device and evaluation support system |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2012141884A true JP2012141884A (en) | 2012-07-26 |
Family
ID=46678093
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011000588A Pending JP2012141884A (en) | 2011-01-05 | 2011-01-05 | Evaluation support device and evaluation support system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2012141884A (en) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016042305A (en) * | 2014-08-18 | 2016-03-31 | 富士通株式会社 | Evaluation method, evaluation program, and information processing device |
JP2016128977A (en) * | 2015-01-09 | 2016-07-14 | 富士通株式会社 | Monitoring method of changing tendency in disorderliness, monitoring program of changing tendency in disorderliness and monitor system of tendency changing tendency in disorderliness |
JP2016149024A (en) * | 2015-02-12 | 2016-08-18 | 富士通株式会社 | Evaluation method of cleaning state, evaluation program of cleaning state and evaluation apparatus of cleaning state |
JP2019113901A (en) * | 2017-12-20 | 2019-07-11 | ヤフー株式会社 | Device, method, and program for processing information |
-
2011
- 2011-01-05 JP JP2011000588A patent/JP2012141884A/en active Pending
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016042305A (en) * | 2014-08-18 | 2016-03-31 | 富士通株式会社 | Evaluation method, evaluation program, and information processing device |
JP2016128977A (en) * | 2015-01-09 | 2016-07-14 | 富士通株式会社 | Monitoring method of changing tendency in disorderliness, monitoring program of changing tendency in disorderliness and monitor system of tendency changing tendency in disorderliness |
JP2016149024A (en) * | 2015-02-12 | 2016-08-18 | 富士通株式会社 | Evaluation method of cleaning state, evaluation program of cleaning state and evaluation apparatus of cleaning state |
JP2019113901A (en) * | 2017-12-20 | 2019-07-11 | ヤフー株式会社 | Device, method, and program for processing information |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6764481B2 (en) | Monitoring device | |
JP5691807B2 (en) | Abandoned or removed detection system | |
KR20150096319A (en) | Gesture recognition device and method of controlling gesture recognition device | |
KR101455200B1 (en) | Learning monitering device and method for monitering of learning | |
JP2008108008A (en) | Moving pattern specification device, moving pattern specification method, moving pattern specification program, and recording medium that recorded this | |
CN104811660A (en) | Control apparatus and control method | |
EP2472862A1 (en) | Displaying method and displaying device | |
WO2018235198A1 (en) | Information processing device, control method, and program | |
JP2012141884A (en) | Evaluation support device and evaluation support system | |
JP2019101549A (en) | Work site monitoring device and program | |
JP6270488B2 (en) | Operator monitoring control device and operator monitoring control method | |
CN111753587B (en) | Ground falling detection method and device | |
US20220012514A1 (en) | Identification information assignment apparatus, identification information assignment method, and program | |
JP2014033429A (en) | Image processing program and image processing apparatus | |
EP3819862A1 (en) | Determination method, determination program, and information processing device | |
JP2020098409A (en) | Image processing apparatus, image processing method, and image processing program | |
US11423622B2 (en) | Apparatus for generating feature positions in a virtual world, information processing method, and storage medium | |
CN106922194A (en) | Abnormal detector, method for detecting abnormality and abnormality detecting program | |
KR101447958B1 (en) | Method and apparatus for recognizing body point | |
KR101413558B1 (en) | Analysis device of user multi-intent, method of analysis user multi-intent | |
JP2007048232A (en) | Information processing device, information processing method, and computer program | |
JP2008009938A (en) | Moving image data processor, moving image data processing method, moving image data processing program and storage medium recording the program | |
JP2020197899A (en) | Work monitoring device and work monitoring method | |
US20220343112A1 (en) | Learning data generation device, learning data generation method, and learning data generation program | |
US11694571B2 (en) | Information processing system, information processing apparatus, and non-transitory storage medium |