JP2021077070A - Motion analysis device, motion analysis method, and motion analysis program - Google Patents

Motion analysis device, motion analysis method, and motion analysis program Download PDF

Info

Publication number
JP2021077070A
JP2021077070A JP2019203039A JP2019203039A JP2021077070A JP 2021077070 A JP2021077070 A JP 2021077070A JP 2019203039 A JP2019203039 A JP 2019203039A JP 2019203039 A JP2019203039 A JP 2019203039A JP 2021077070 A JP2021077070 A JP 2021077070A
Authority
JP
Japan
Prior art keywords
evaluation
unit
display
motion
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019203039A
Other languages
Japanese (ja)
Other versions
JP7385826B2 (en
Inventor
雅 宮崎
Masa Miyazaki
雅 宮崎
洋貴 和田
Hirotaka Wada
洋貴 和田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Omron Corp
Original Assignee
Omron Corp
Omron Tateisi Electronics Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omron Corp, Omron Tateisi Electronics Co filed Critical Omron Corp
Priority to JP2019203039A priority Critical patent/JP7385826B2/en
Priority to CN202011089015.1A priority patent/CN112784667A/en
Priority to US17/070,880 priority patent/US11700450B2/en
Publication of JP2021077070A publication Critical patent/JP2021077070A/en
Application granted granted Critical
Publication of JP7385826B2 publication Critical patent/JP7385826B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/23—Recognition of whole body movements, e.g. for sport training
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681—Motion detection
    • H04N23/6812—Motion detection based on additional sensors, e.g. acceleration sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Social Psychology (AREA)
  • Psychiatry (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • General Factory Administration (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

To provide a motion analysis device, a motion analysis method, and a motion analysis program that allow an operator to more smoothly improve an operation.SOLUTION: A motion analysis device 10 comprises: an acquisition unit 11 that acquires time series data on an operation performed by an operator and on motions of a plurality of regions of the operator; an analysis unit 12 that analyzes the time series data to generate motion data representing the types of element motions and the execution times from the start to the end of the element motions; an evaluation unit 14 that, based on execution timings of the element motions, evaluates the element motions performed by the plurality of regions; and a display control unit 15 that distinguishes among periods corresponding to the different element motions, and controls to display the evaluation on a display unit together with the motion data.SELECTED DRAWING: Figure 1

Description

本発明は、動作分析装置、動作分析方法及び動作分析プログラムに関する。 The present invention relates to a motion analyzer, a motion analysis method and a motion analysis program.

従来、作業者の動作データを測定するモーションセンサや、作業者が動作する様子を撮影した動画を解析して動作データを生成する技術が用いられている。動作データは、作業者が適切な動作をしているか否かを評価するために用いられることがある。 Conventionally, a motion sensor for measuring motion data of an operator and a technique for generating motion data by analyzing a moving image of an operator's motion have been used. The motion data may be used to evaluate whether or not the worker is performing an appropriate motion.

例えば下記特許文献１には、被験者の日常生活の身体動作時における身体部位の位置および／または角度を計測し、計測結果に基づいて、被験者の身体部位の運動能力を時系列的に算出し、算出された被験者の身体部位の運動能力に基づいて、上半身、左側の下半身、および右側の下半身の少なくとも３つの身体部位の運動能力の特定値を算出して、運動能力の特定値を、被験者の日常生活の身体動作時における運動能力と評価して、上半身、左側の下半身、右側の下半身に分けて出力する運動能力評価システムが記載されている。 For example, in Patent Document 1 below, the position and / or angle of a body part during physical movement of a subject in daily life is measured, and the motor ability of the body part of the subject is calculated in chronological order based on the measurement result. Based on the calculated athletic ability of the body part of the subject, the specific value of the athletic ability of at least three body parts of the upper body, the lower body on the left side, and the lower body on the right side is calculated, and the specific value of the athletic ability is determined by the subject. An athletic ability evaluation system that evaluates the athletic ability during physical movements in daily life and outputs the upper body, the lower body on the left side, and the lower body on the right side separately is described.

特許第６５３５７７８号Patent No. 6535778

特許文献１では、複数の身体部位に分けて運動能力を評価しているが、どのような動作がどのような評価に結び付いたのかについてフィードバックが与えられていない。そのため、作業者は、自らの動作のうちどのような点が良く、どのような点が悪いのか把握しづらく、動作の改善が行いづらい。 In Patent Document 1, the athletic ability is evaluated by dividing it into a plurality of body parts, but no feedback is given as to what kind of movement is linked to what kind of evaluation. Therefore, it is difficult for the worker to grasp what is good and what is bad in his / her own movement, and it is difficult to improve the movement.

そこで、本発明は、作業者がより円滑に動作を改善することができる動作分析装置、動作分析方法及び動作分析プログラムを提供する。 Therefore, the present invention provides a motion analysis device, a motion analysis method, and a motion analysis program capable of improving the motion more smoothly by the operator.

本開示の一態様に係る動作分析装置は、作業者が行った作業に関し、作業者の複数の部位の動作に関する時系列データを取得する取得部と、時系列データを解析し、要素動作の種類及び要素動作の開始時から終了時までの実行時間を表す動作データを生成する解析部と、要素動作の実行タイミングに基づいて、複数の部位により行われた要素動作を評価する評価部と、異なる要素動作に対応する期間を区別して、評価を動作データと併せて表示部に表示するよう制御する表示制御部と、を備える。 The motion analysis device according to one aspect of the present disclosure includes an acquisition unit that acquires time-series data related to the motions of a plurality of parts of the worker regarding the work performed by the worker, and an acquisition unit that analyzes the time-series data and types of element motions. And the analysis unit that generates operation data representing the execution time from the start to the end of the element operation, and the evaluation unit that evaluates the element operation performed by multiple parts based on the execution timing of the element operation. It is provided with a display control unit that distinguishes the period corresponding to the element operation and controls the evaluation to be displayed on the display unit together with the operation data.

この態様によれば、要素動作に関する評価を動作データと併せて表示することで、どのような要素動作がどのような評価に結び付いたのかについて作業者にフィードバックを与えることができ、作業者がより円滑に動作を改善することができるようになる。 According to this aspect, by displaying the evaluation related to the element operation together with the operation data, it is possible to give feedback to the operator about what kind of element operation is linked to what kind of evaluation, and the operator can be more. The operation can be improved smoothly.

上記態様において、複数の部位に関する時系列データは、左手及び右手に関する時系列データを含み、評価部は、要素動作が左手及び右手によって並行して実行されている場合に、高評価してもよい。 In the above aspect, the time series data relating to the plurality of parts includes the time series data relating to the left hand and the right hand, and the evaluation unit may highly evaluate the element movements when they are executed in parallel by the left hand and the right hand. ..

この態様によれば、左手及び右手を使って要素動作を並行して実行できている場合に高評価を与えることで、作業者がより短時間で作業を行えるように動機付けることができる。 According to this aspect, it is possible to motivate the worker to perform the work in a shorter time by giving a high evaluation when the element movements can be executed in parallel by using the left hand and the right hand.

上記態様において、評価部は、複数の部位がいずれも作業に関する動作をしてない場合に、低評価してもよい。 In the above aspect, the evaluation unit may give a low evaluation when none of the plurality of parts is performing an operation related to the work.

この態様によれば、作業者が作業に関する動作をしてない場合に低評価を与えることで、作業における無駄時間を減らすように動機付けることができる。 According to this aspect, it is possible to motivate the operator to reduce the wasted time in the work by giving a low evaluation when the worker is not performing the operation related to the work.

上記態様において、表示制御部は、評価を表すアイコンを動作データに沿って表示部に表示するよう制御してもよい。 In the above aspect, the display control unit may control the display unit to display the icon representing the evaluation along with the operation data.

この態様によれば、アイコンによって要素動作に関する評価が一目で把握できるようにすることができる。 According to this aspect, the evaluation regarding the element operation can be grasped at a glance by the icon.

上記態様において、表示制御部は、評価に応じた異なる表示態様で動作データを表示部に表示するよう制御してもよい。 In the above aspect, the display control unit may control to display the operation data on the display unit in different display modes according to the evaluation.

この態様によれば、評価に応じた異なる表示態様で動作データを表示することで、要素動作に関する評価が一目で把握できるようにすることができる。 According to this aspect, by displaying the operation data in different display modes according to the evaluation, it is possible to grasp the evaluation regarding the element operation at a glance.

上記態様において、表示制御部は、評価を表すコメントを動作データと併せて表示部に表示するよう制御してもよい。 In the above aspect, the display control unit may control the display unit to display the comment representing the evaluation together with the operation data.

この態様によれば、評価を表すコメントを表示することで、要素動作に関する評価の詳細が把握できるようになる。 According to this aspect, by displaying the comment representing the evaluation, the details of the evaluation regarding the element operation can be grasped.

本開示の他の態様に係る動作分析方法は、作業者が行った作業に関し、作業者の複数の部位に関する時系列データを取得することと、時系列データを解析し、要素動作の種類及び実行時間を表す動作データを生成することと、要素動作の実行タイミングに基づいて、複数の部位により行われた要素動作を評価することと、異なる要素動作に対応する期間を区別可能に、評価を動作データと併せて表示部に表示するよう制御することと、を含む。 The motion analysis method according to another aspect of the present disclosure includes acquiring time-series data relating to a plurality of parts of the worker with respect to the work performed by the worker, analyzing the time-series data, and performing the type and execution of the element motion. The evaluation is performed so that the operation data representing the time can be generated, the element operation performed by multiple parts can be evaluated based on the execution timing of the element operation, and the period corresponding to the different element operation can be distinguished. It includes controlling to be displayed on the display unit together with the data.

この態様によれば、どのような要素動作がどのような評価に結び付いたのかについて作業者にフィードバックを与えることができ、作業者がより円滑に動作を改善することができるようになる。 According to this aspect, it is possible to give feedback to the worker about what kind of elemental movement is linked to what kind of evaluation, and the worker can improve the movement more smoothly.

本開示の他の態様に係る動作分析プログラムは、動作分析装置が備える演算部を、作業者が行った作業に関し、作業者の複数の部位に関する時系列データを取得する取得部、時系列データを解析し、要素動作の種類及び実行時間を表す動作データを生成する解析部、要素動作の実行タイミングに基づいて、複数の部位により行われた要素動作を評価する評価部、及び異なる要素動作に対応する期間を区別可能に、評価を動作データと併せて表示部に表示するよう制御する表示制御部、として機能させる。 The motion analysis program according to another aspect of the present disclosure uses the arithmetic unit included in the motion analysis device to acquire time-series data related to a plurality of parts of the worker in relation to the work performed by the worker, and time-series data. Corresponds to an analysis unit that analyzes and generates operation data representing the type and execution time of element operations, an evaluation unit that evaluates element operations performed by multiple parts based on the execution timing of element operations, and different element operations. It functions as a display control unit that controls the evaluation to be displayed on the display unit together with the operation data so that the period to be performed can be distinguished.

この態様によれば、どのような要素動作がどのような評価に結び付いたのかについて作業者にフィードバックを与えることができ、作業者がより円滑に動作を改善することができるようになる。 According to this aspect, it is possible to give feedback to the worker about what kind of elemental movement is linked to what kind of evaluation, and the worker can improve the movement more smoothly.

本発明によれば、作業者がより円滑に動作を改善することができる動作分析装置、動作分析方法及び動作分析プログラムを提供することができる。 According to the present invention, it is possible to provide a motion analysis device, a motion analysis method, and a motion analysis program capable of improving the motion more smoothly by an operator.

本発明の実施形態に係る動作分析システムの概要を示す図である。It is a figure which shows the outline of the motion analysis system which concerns on embodiment of this invention. 本実施形態に係る動作分析装置の機能ブロックを示す図である。It is a figure which shows the functional block of the motion analyzer which concerns on this embodiment. 本実施形態に係る動作分析装置の物理的構成を示す図である。It is a figure which shows the physical structure of the motion analyzer which concerns on this embodiment. 本実施形態に係る動作分析装置により生成される動作データを示す図である。It is a figure which shows the operation data generated by the operation analyzer which concerns on this embodiment. 本実施形態に係る動作分析装置により表示制御される画面例を示す図である。It is a figure which shows the screen example which the display is controlled by the motion analyzer which concerns on this embodiment. 本実施形態に係る動作分析装置により実行される表示制御処理の第１例のフローチャートである。It is a flowchart of 1st example of the display control processing executed by the motion analysis apparatus which concerns on this embodiment. 本実施形態に係る動作分析装置により実行される表示制御処理の第２例のフローチャートである。It is a flowchart of the 2nd example of the display control processing executed by the motion analysis apparatus which concerns on this embodiment. 本実施形態に係る動作分析装置により実行される表示制御処理の第３例のフローチャートである。It is a flowchart of the 3rd example of the display control processing executed by the motion analysis apparatus which concerns on this embodiment.

添付図面を参照して、本発明の実施形態について説明する。なお、各図において、同一の符号を付したものは、同一又は同様の構成を有する。 Embodiments of the present invention will be described with reference to the accompanying drawings. In each figure, those having the same reference numerals have the same or similar configurations.

§１ 適用例
まず、図１を用いて、本発明が適用される場面の一例について説明する。図１は、本発明の実施形態に係る動作分析システム１００の概要を示す図である。本実施形態に係る動作分析システム１００は、作業領域Ｒにおいて実行される作業者の動作に関する動画を撮影するカメラ２０と、作業者の手が所定の領域に出入りしたことを検出する光電センサ２１と、所定の領域に加えられた圧力を測定する圧力センサ２２とを備える。ここで、カメラ２０により撮影される動画、光電センサ２１により測定される信号及び圧力センサ２２により測定される信号は、それぞれ本発明の時系列データの例である。本例の作業領域Ｒは、製造ライン全体を含む領域であるが、作業領域Ｒは、任意の領域であってよく、例えば所定の工程が行われる領域であったり、所定の要素動作が行われる領域であったりしてよい。ここで、要素動作とは、作業者により実行される一単位の動作であり、例えば、部品の把持、部品の運搬、部品の組み立て及び調整、組み立てた製品の収納といった動作を含む。 §1 Application example First, an example of a situation in which the present invention is applied will be described with reference to FIG. FIG. 1 is a diagram showing an outline of the motion analysis system 100 according to the embodiment of the present invention. The motion analysis system 100 according to the present embodiment includes a camera 20 that captures a moving image of the worker's motion executed in the work area R, and a photoelectric sensor 21 that detects that the worker's hand has entered or exited a predetermined area. , A pressure sensor 22 for measuring the pressure applied to a predetermined area. Here, the moving image captured by the camera 20, the signal measured by the photoelectric sensor 21, and the signal measured by the pressure sensor 22 are examples of the time series data of the present invention, respectively. The work area R of this example is an area including the entire production line, but the work area R may be an arbitrary area, for example, an area where a predetermined process is performed or a predetermined element operation is performed. It may be an area. Here, the element operation is a unit operation performed by an operator, and includes, for example, operations such as gripping parts, transporting parts, assembling and adjusting parts, and storing assembled products.

本例では、第１作業者Ａ１及び第２作業者Ａ２が、作業領域Ｒにおいて、予め定められた作業を行う場合について説明する。以下では、第１作業者Ａ１及び第２作業者Ａ２を総称して作業者Ａと記載する。 In this example, a case where the first worker A1 and the second worker A2 perform a predetermined work in the work area R will be described. Hereinafter, the first worker A1 and the second worker A2 are collectively referred to as the worker A.

動作分析システム１００は、動作分析装置１０を含む。動作分析装置１０は、動画等の作業者Ａの複数の部位の動作に関する時系列データを取得し、時系列データを解析して、要素動作の種類及び要素動作の開始時から終了時までの実行時間を表す動作データを生成する。そして、動作分析装置１０は、要素動作の実行タイミングに基づいて、複数の部位により行われた要素動作を評価し、異なる要素動作に対応する期間を区別して、評価を動作データと併せて表示部１０ｆに表示するよう制御する。 The motion analysis system 100 includes a motion analysis device 10. The motion analysis device 10 acquires time-series data related to the motions of a plurality of parts of the worker A such as a moving image, analyzes the time-series data, and executes the element motion type and the execution from the start time to the end time of the element motion. Generate operation data that represents time. Then, the motion analysis device 10 evaluates the element motion performed by the plurality of parts based on the execution timing of the element motion, distinguishes the period corresponding to the different element motion, and displays the evaluation together with the motion data. It is controlled to be displayed at 10f.

表示部１０ｆは、異なる要素動作に対応する期間を区別して、評価を動作データと併せて表示する。また、表示部１０ｆは、評価を表すコメントを表示してもよい。さらに、表示部１０ｆは、作業者Ａの動作に関する動画を、複数の要素動作毎に再生してもよい。 The display unit 10f distinguishes the period corresponding to the different element operation and displays the evaluation together with the operation data. Further, the display unit 10f may display a comment indicating the evaluation. Further, the display unit 10f may reproduce a moving image related to the operation of the worker A for each of a plurality of element operations.

本実施形態に係る動作分析装置１０によれば、要素動作に関する評価を動作データと併せて表示することで、どのような要素動作がどのような評価に結び付いたのかについて作業者にフィードバックを与えることができ、作業者がより円滑に動作を改善することができるようになる。 According to the motion analysis device 10 according to the present embodiment, by displaying the evaluation related to the element motion together with the motion data, feedback is given to the operator about what kind of element motion is linked to what kind of evaluation. This allows the operator to improve the operation more smoothly.

§２ 構成例
［機能構成］
図２は、本実施形態に係る動作分析装置１０の機能ブロックを示す図である。動作分析装置１０は、取得部１１、解析部１２、記憶部１３、評価部１４及び表示制御部１５を備える。 §2 Configuration example [Functional configuration]
FIG. 2 is a diagram showing a functional block of the motion analyzer 10 according to the present embodiment. The motion analysis device 10 includes an acquisition unit 11, an analysis unit 12, a storage unit 13, an evaluation unit 14, and a display control unit 15.

＜取得部＞
取得部１１は、作業者Ａが行った作業に関し、作業者Ａの複数の部位の動作に関する時系列データを取得する。時系列データは、カメラ２０で撮影した動画、光電センサ２１で測定した信号及び圧力センサ２２で測定した信号を含む。 <Acquisition department>
The acquisition unit 11 acquires time-series data relating to the movements of a plurality of parts of the worker A regarding the work performed by the worker A. The time series data includes a moving image taken by the camera 20, a signal measured by the photoelectric sensor 21, and a signal measured by the pressure sensor 22.

＜解析部＞
解析部１２は、時系列データを解析し、要素動作の種類及び要素動作の開始時から終了時までの実行時間を表す動作データを生成する。要素動作の種類は、例えば、部品の把持、運搬、調整及び収納であるが、これら以外の種類の動作を含んでもよい。また、要素動作は、任意に設定されてよい。要素動作の開始時及び終了時は、時刻によって表されてもよいし、時系列データの開始時点からの経過時間で表されてもよい。 <Analysis Department>
The analysis unit 12 analyzes the time series data and generates operation data representing the type of element operation and the execution time from the start time to the end time of the element operation. The types of elemental movements are, for example, gripping, transporting, adjusting and storing parts, but may include other types of movements. Moreover, the element operation may be set arbitrarily. The start time and end time of the element operation may be represented by the time, or may be represented by the elapsed time from the start time of the time series data.

＜記憶部＞
記憶部１３は、解析部１２により生成された動作データ１３ａを記憶する。記憶部１３は、時系列データを記憶してもよい。 <Memory>
The storage unit 13 stores the operation data 13a generated by the analysis unit 12. The storage unit 13 may store time series data.

＜評価部＞
評価部１４は、要素動作の実行タイミングに基づいて、複数の部位により行われた要素動作を評価する。複数の部位に関する時系列データが、左手及び右手に関する時系列データを含む場合、評価部１４は、要素動作が左手及び右手によって並行して実行されている場合に、高評価してよい。このように、左手及び右手を使って要素動作を並行して実行できている場合に高評価を与えることで、作業者がより短時間で作業を行えるように動機付けることができる。 <Evaluation Department>
The evaluation unit 14 evaluates the element movements performed by the plurality of parts based on the execution timing of the element movements. When the time-series data relating to the plurality of parts includes the time-series data relating to the left hand and the right hand, the evaluation unit 14 may highly evaluate when the element movements are executed in parallel by the left hand and the right hand. In this way, by giving a high evaluation when the element movements can be executed in parallel using the left hand and the right hand, it is possible to motivate the worker to perform the work in a shorter time.

評価部１４は、複数の部位がいずれも作業に関する動作をしてない場合に、低評価してよい。このように、作業者が作業に関する動作をしてない場合に低評価を与えることで、作業における無駄時間を減らすように動機付けることができる。 The evaluation unit 14 may give a low evaluation when none of the plurality of parts is performing an operation related to the work. In this way, by giving a low evaluation when the worker is not performing an operation related to the work, it is possible to motivate the worker to reduce the wasted time in the work.

＜表示制御部＞
表示制御部１５は、異なる要素動作に対応する期間を区別して、評価を動作データと併せて表示部１０ｆに表示するよう制御する。異なる要素動作に対応する期間を区別することは、異なる要素動作に対応する期間を異なる表示態様で表示させることを含む。評価を動作データと併せて表示することは、動作データを時系列順に表示し、その動作データが表す要素動作の実行タイミングに対応するように評価を表示することを含む。 <Display control unit>
The display control unit 15 controls so that the evaluation is displayed on the display unit 10f together with the operation data by distinguishing the periods corresponding to the different element operations. Distinguishing the periods corresponding to different element actions includes displaying the periods corresponding to different element actions in different display modes. Displaying the evaluation together with the operation data includes displaying the operation data in chronological order and displaying the evaluation so as to correspond to the execution timing of the element operation represented by the operation data.

表示制御部１５は、評価を表すアイコンを動作データに沿って表示部１０ｆに表示するよう制御してもよい。アイコンは、高評価であるか、低評価であるかを視覚的に示すものであってよく、高評価を表す丸印及び低評価を表すバツ印を含んでよい。このように、アイコンによって要素動作に関する評価が一目で把握できるようにすることができる。 The display control unit 15 may control the display unit 10f to display an icon representing the evaluation along with the operation data. The icon may visually indicate whether the evaluation is high or low, and may include a circle indicating a high evaluation and a cross mark indicating a low evaluation. In this way, the icon makes it possible to grasp the evaluation of the element operation at a glance.

表示制御部１５は、評価に応じた異なる表示態様で動作データを表示部１０ｆに表示するよう制御してもよい。表示制御部１５は、例えば、高評価の要素動作に対応する動作データを青色で表示させ、低評価の要素動作に対応する動作データを赤色で表示させてよい。このように、評価に応じた異なる表示態様で動作データを表示することで、要素動作に関する評価が一目で把握できるようにすることができる。 The display control unit 15 may control the display unit 10f to display the operation data in different display modes according to the evaluation. For example, the display control unit 15 may display the operation data corresponding to the highly evaluated element operation in blue and the operation data corresponding to the low evaluation element operation in red. In this way, by displaying the operation data in different display modes according to the evaluation, it is possible to grasp the evaluation related to the element operation at a glance.

表示制御部１５は、評価を表すコメントを動作データと併せて表示部１０ｆに表示するよう制御してもよい。コメントは、高評価であること、低評価であること、評価の理由及び評価を改善するためのアドバイスを含んでよい。このように、評価を表すコメントを表示することで、要素動作に関する評価の詳細が把握できるようになる。 The display control unit 15 may control the display unit 10f to display the comment representing the evaluation together with the operation data. Comments may include high rating, low rating, reasons for rating and advice for improving rating. By displaying the comment representing the evaluation in this way, the details of the evaluation regarding the element operation can be grasped.

［ハードウェア構成］
図３は、本実施形態に係る動作分析装置１０の物理的構成を示す図である。動作分析装置１０は、演算部に相当するＣＰＵ（Central Processing Unit）１０ａと、記憶部に相当するＲＡＭ（Random Access Memory）１０ｂと、記憶部に相当するＲＯＭ（Read only Memory）１０ｃと、通信部１０ｄと、入力部１０ｅと、表示部１０ｆと、を有する。これらの各構成は、バスを介して相互にデータ送受信可能に接続される。なお、本例では動作分析装置１０が一台のコンピュータで構成される場合について説明するが、動作分析装置１０は、複数のコンピュータが組み合わされて実現されてもよい。また、図３で示す構成は一例であり、動作分析装置１０はこれら以外の構成を有してもよいし、これらの構成のうち一部を有さなくてもよい。 [Hardware configuration]
FIG. 3 is a diagram showing a physical configuration of the motion analyzer 10 according to the present embodiment. The motion analyzer 10 includes a CPU (Central Processing Unit) 10a corresponding to a calculation unit, a RAM (Random Access Memory) 10b corresponding to a storage unit, a ROM (Read only Memory) 10c corresponding to a storage unit, and a communication unit. It has 10d, an input unit 10e, and a display unit 10f. Each of these configurations is connected to each other via a bus so that data can be transmitted and received. In this example, the case where the motion analysis device 10 is composed of one computer will be described, but the motion analysis device 10 may be realized by combining a plurality of computers. Further, the configuration shown in FIG. 3 is an example, and the motion analysis device 10 may have configurations other than these, or may not have a part of these configurations.

ＣＰＵ１０ａは、ＲＡＭ１０ｂ又はＲＯＭ１０ｃに記憶されたプログラムの実行に関する制御やデータの演算、加工を行う制御部である。ＣＰＵ１０ａは、作業者が行った作業に関する時系列データを解析して動作データを生成し、動作データとその評価を表示部に表示するように制御するプログラム（動作分析プログラム）を実行する演算部である。ＣＰＵ１０ａは、入力部１０ｅや通信部１０ｄから種々のデータを受け取り、データの演算結果を表示部１０ｆに表示したり、ＲＡＭ１０ｂに格納したりする。 The CPU 10a is a control unit that controls execution of a program stored in the RAM 10b or ROM 10c, calculates data, and processes data. The CPU 10a is a calculation unit that executes a program (motion analysis program) that analyzes time-series data related to the work performed by the worker, generates motion data, and controls the motion data and its evaluation to be displayed on the display section. is there. The CPU 10a receives various data from the input unit 10e and the communication unit 10d, displays the calculation result of the data on the display unit 10f, and stores the data in the RAM 10b.

ＲＡＭ１０ｂは、記憶部のうちデータの書き換えが可能なものであり、例えば半導体記憶素子で構成されてよい。ＲＡＭ１０ｂは、ＣＰＵ１０ａが実行するプログラム、動作データといったデータを記憶してよい。なお、これらは例示であって、ＲＡＭ１０ｂには、これら以外のデータが記憶されていてもよいし、これらの一部が記憶されていなくてもよい。 The RAM 10b is a storage unit in which data can be rewritten, and may be composed of, for example, a semiconductor storage element. The RAM 10b may store data such as a program executed by the CPU 10a and operation data. It should be noted that these are examples, and data other than these may be stored in the RAM 10b, or a part of these may not be stored.

ＲＯＭ１０ｃは、記憶部のうちデータの読み出しが可能なものであり、例えば半導体記憶素子で構成されてよい。ＲＯＭ１０ｃは、例えば動作分析プログラムや、書き換えが行われないデータを記憶してよい。 The ROM 10c is a storage unit capable of reading data, and may be composed of, for example, a semiconductor storage element. The ROM 10c may store, for example, an operation analysis program or data that is not rewritten.

通信部１０ｄは、動作分析装置１０を他の機器に接続するインターフェースである。通信部１０ｄは、インターネット等の通信ネットワークに接続されてよい。 The communication unit 10d is an interface for connecting the motion analysis device 10 to another device. The communication unit 10d may be connected to a communication network such as the Internet.

入力部１０ｅは、ユーザからデータの入力を受け付けるものであり、例えば、キーボード及びタッチパネルを含んでよい。 The input unit 10e receives data input from the user, and may include, for example, a keyboard and a touch panel.

表示部１０ｆは、ＣＰＵ１０ａによる演算結果を視覚的に表示するものであり、例えば、ＬＣＤ（Liquid Crystal Display）により構成されてよい。表示部１０ｆは、動作データ及びその評価を表示してよい。 The display unit 10f visually displays the calculation result by the CPU 10a, and may be configured by, for example, an LCD (Liquid Crystal Display). The display unit 10f may display the operation data and its evaluation.

動作分析プログラムは、ＲＡＭ１０ｂやＲＯＭ１０ｃ等のコンピュータによって読み取り可能な記憶媒体に記憶されて提供されてもよいし、通信部１０ｄにより接続される通信ネットワークを介して提供されてもよい。動作分析装置１０では、ＣＰＵ１０ａが動作分析プログラムを実行することにより、図２を用いて説明した様々な動作が実現される。なお、これらの物理的な構成は例示であって、必ずしも独立した構成でなくてもよい。例えば、動作分析装置１０は、ＣＰＵ１０ａとＲＡＭ１０ｂやＲＯＭ１０ｃが一体化したＬＳＩ（Large-Scale Integration）を備えていてもよい。 The motion analysis program may be stored in a storage medium readable by a computer such as RAM 10b or ROM 10c and provided, or may be provided via a communication network connected by the communication unit 10d. In the motion analysis device 10, the CPU 10a executes the motion analysis program to realize various operations described with reference to FIG. It should be noted that these physical configurations are examples and do not necessarily have to be independent configurations. For example, the motion analysis device 10 may include an LSI (Large-Scale Integration) in which the CPU 10a and the RAM 10b or ROM 10c are integrated.

§３ 動作例
図４は、本実施形態に係る動作分析装置１０により生成される動作データを示す図である。同図では、左手の動作データＤ１及び右手の動作データＤ２の一例を示している。同図に記載したｔ１〜ｔ１２という文字は、時系列順に並んだ時刻を示している。 §3 Operation example FIG. 4 is a diagram showing operation data generated by the operation analysis device 10 according to the present embodiment. The figure shows an example of the left-hand motion data D1 and the right-hand motion data D2. The letters t1 to t12 shown in the figure indicate the times arranged in chronological order.

左手の動作データＤ１及び右手の動作データＤ２は、要素動作の種類を示す「要素動作」の列と、要素動作の開始時を示す「開始時」の列と、要素動作の終了時を示す「終了時」の列とを含む。 The left-hand motion data D1 and the right-hand motion data D2 are a column of "element actions" indicating the type of element action, a column of "start time" indicating the start time of the element action, and "at the end of the element action". Includes "at end" column.

例えば、左手の動作データＤ１について、開始時が「ｔ２」であり、終了時が「ｔ４」である「要素動作」は、「把持」である。また、右手の動作データＤ２について、開始時が「ｔ１」であり、終了時が「ｔ３」である「要素動作」は、「把持」である。この場合、右手で把持の動作が開始され、その後、左手で把持の動作が開始されて、右手の把持が終了し、左手の把持が終了したことを表している。 For example, with respect to the left-hand motion data D1, the "elemental motion" in which the start time is "t2" and the end time is "t4" is "grasping". Further, regarding the motion data D2 of the right hand, the "elemental motion" in which the start time is "t1" and the end time is "t3" is "grasping". In this case, the gripping operation is started with the right hand, then the gripping operation is started with the left hand, the gripping of the right hand is completed, and the gripping of the left hand is completed.

また、右手の動作データＤ２について、開始時が「ｔ７」であり、終了時が「ｔ８」である「要素動作」は、「ＮＡ」であり、作業に関する動作が行われていないことを示している。なお、「要素動作」が「ＮＡ」であることは、作業者Ａが停止していることや所定の要素動作と関係しない動作を行っていることを含む。 Further, regarding the operation data D2 of the right hand, the "element operation" in which the start time is "t7" and the end time is "t8" is "NA", indicating that no operation related to the work is performed. There is. The fact that the "element operation" is "NA" includes that the worker A is stopped and that an operation that is not related to a predetermined element operation is performed.

図５は、本実施形態に係る動作分析装置１０により表示制御される画面例を示す図である。本例は、図４に示す左手の動作データＤ１及び右手の動作データＤ２を動作分析装置１０によって評価し、評価及び動作データを併せて表示させている例である。 FIG. 5 is a diagram showing an example of a screen whose display is controlled by the motion analysis device 10 according to the present embodiment. In this example, the left-hand motion data D1 and the right-hand motion data D2 shown in FIG. 4 are evaluated by the motion analyzer 10, and the evaluation and motion data are displayed together.

例えば、時刻ｔ１からｔ３まで右手で把持の動作が行われ、時刻ｔ２からｔ４まで左手で把持の動作が行われていることが、把持を示すグラフによって表示されている。ここで、時刻ｔ２からｔ３まで、右手及び左手で把持を並行して実行している。動作分析装置１０は、把持の要素動作が右手及び左手によって並行して実行されていることを検出し、その動作について高評価を与える。そのような高評価に対応して、「両手作業」というコメント、丸印のアイコン及び両手作業を表すアイコンが表示されている。このようなアイコンは、時刻ｔ４からｔ５までに関しても表示されている。時刻ｔ４からｔ５までは、運搬の要素動作が右手及び左手によって並行して実行されている。 For example, a graph showing gripping indicates that the gripping operation is performed with the right hand from time t1 to t3 and the gripping operation is performed with the left hand from time t2 to t4. Here, from time t2 to t3, gripping is performed in parallel with the right hand and the left hand. The motion analyzer 10 detects that the elemental motion of the grip is executed in parallel by the right hand and the left hand, and gives a high evaluation for the motion. Corresponding to such a high evaluation, the comment "two-handed work", the icon with a circle, and the icon representing the two-handed work are displayed. Such an icon is also displayed for times t4 to t5. From time t4 to t5, the elemental movements of transportation are executed in parallel by the right hand and the left hand.

一方、時刻ｔ７からｔ８まで、右手及び左手がいずれも作業に関する動作をしていない。換言すると、時刻ｔ７からｔ８までの動作データは、右手及び左手がいずれもＮＡである。動作分析装置１０は、右手及び左手がいずれも作業に関する動作をしていない場合、低評価を与える。そのような低評価に対応して、「無駄」というコメント、バツ印のアイコン及び手が彷徨う様子を示すアイコンが表示されている。 On the other hand, from time t7 to t8, neither the right hand nor the left hand is performing the work-related operation. In other words, in the operation data from time t7 to t8, both the right hand and the left hand are NA. The motion analyzer 10 gives a low rating when neither the right hand nor the left hand is performing a work-related motion. Corresponding to such a low rating, a comment "useless", an icon with a cross, and an icon indicating how the hand is wandering are displayed.

図６は、本実施形態に係る動作分析装置１０により実行される表示制御処理の第１例のフローチャートである。表示制御処理の第１例は、動作データを表示部１０ｆに表示するよう制御する処理の例である。 FIG. 6 is a flowchart of a first example of the display control process executed by the motion analyzer 10 according to the present embodiment. The first example of the display control process is an example of the process of controlling the operation data to be displayed on the display unit 10f.

はじめに、動作分析装置１０は、手順データを記憶部１３から読み込む（Ｓ１０）。ここで、手順データは、作業者Ａの作業に関する理想的な手順を示した動作データである。手順データは、記憶部１３から読み込まれてよいが、外部記憶装置から読み込まれてもよい。 First, the motion analysis device 10 reads the procedure data from the storage unit 13 (S10). Here, the procedure data is operation data showing an ideal procedure for the work of the worker A. The procedure data may be read from the storage unit 13, but may also be read from an external storage device.

次に、動作分析装置１０は、手順データの終端まで、以下の処理Ｓ１１１及びＳ１１２を繰り返し実行する（Ｓ１１）。動作分析装置１０は、要素動作の開始時から終了時までの実行時間に応じて、表示幅を設定し（Ｓ１１１）、異なる要素動作に対応する期間を区別して、左詰めでデータを表示する（Ｓ１１２）。 Next, the motion analysis device 10 repeatedly executes the following processes S111 and S112 until the end of the procedure data (S11). The motion analyzer 10 sets the display width according to the execution time from the start to the end of the element motion (S111), distinguishes the periods corresponding to the different element motions, and displays the data left-justified (left-justified). S112).

表示制御処理の第１例が実行されることで、手順データが、時系列順に、実行時間に応じた幅で表示部１０ｆに表示される。 By executing the first example of the display control process, the procedure data is displayed on the display unit 10f in chronological order with a width corresponding to the execution time.

図７は、本実施形態に係る動作分析装置１０により実行される表示制御処理の第２例のフローチャートである。表示制御処理の第２例は、表示制御処理の第１例の後に実行される処理であり、要素動作の評価を動作データと併せて表示するよう制御する処理の例である。 FIG. 7 is a flowchart of a second example of the display control process executed by the motion analyzer 10 according to the present embodiment. The second example of the display control process is a process executed after the first example of the display control process, and is an example of a process for controlling the evaluation of the element operation to be displayed together with the operation data.

動作分析装置１０は、右手の動作データを読み込み（Ｓ１２）、左手の動作データを読み込む（Ｓ１３）。なお、当然ながら、右手の動作データ及び左手の動作データを読み込む順序は、どちらが先でもよい。 The motion analysis device 10 reads the motion data of the right hand (S12) and reads the motion data of the left hand (S13). As a matter of course, either of the right-hand motion data and the left-hand motion data may be read first.

次に、動作分析装置１０は、動作データの終端まで、以下の処理Ｓ１４１〜Ｓ１４５を繰り返し実行する（Ｓ１４）。動作分析装置１０は、要素動作の開始時から終了時までの実行時間に応じて、表示幅を設定し（Ｓ１４１）、異なる要素動作に対応する期間を区別して、左詰めでデータを表示する（Ｓ１４２）。 Next, the motion analysis device 10 repeatedly executes the following processes S141 to S145 until the end of the motion data (S14). The motion analyzer 10 sets the display width according to the execution time from the start to the end of the element motion (S141), distinguishes the periods corresponding to the different element motions, and displays the data left-justified (left-justified). S142).

そして、動作分析装置１０は、両手により行われた要素動作を評価し（Ｓ１４３）、その要素動作に関する評価が高評価又は低評価である場合（Ｓ１４４：ＹＥＳ）、評価を表すアイコンをデータに沿って表示する（Ｓ１４５）。一方、要素動作に関する評価が高評価又は低評価でない場合（Ｓ１４４：ＮＯ）、動作分析装置１０は、アイコンを表示せずに次の処理を実行する。 Then, the motion analysis device 10 evaluates the element motion performed by both hands (S143), and when the evaluation regarding the element motion is a high evaluation or a low evaluation (S144: YES), the icon representing the evaluation is set along the data. Is displayed (S145). On the other hand, when the evaluation regarding the element motion is not high evaluation or low evaluation (S144: NO), the motion analyzer 10 executes the next process without displaying the icon.

表示制御処理の第２例が実行されることで、右手及び左手の動作データが、時系列順に、実行時間に応じた幅で表示部１０ｆに表示され、動作データと併せて評価を表すアイコンが表示部１０ｆに表示される。 By executing the second example of the display control process, the operation data of the right hand and the left hand are displayed on the display unit 10f in chronological order with a width corresponding to the execution time, and an icon indicating the evaluation is displayed together with the operation data. It is displayed on the display unit 10f.

図８は、本実施形態に係る動作分析装置１０により実行される表示制御処理の第３例のフローチャートである。表示制御処理の第３例は、表示制御処理の第１例の後に実行される処理であり、要素動作の評価に応じて動作データの表示態様を変更するよう制御する処理の例である。 FIG. 8 is a flowchart of a third example of the display control process executed by the motion analyzer 10 according to the present embodiment. The third example of the display control process is a process executed after the first example of the display control process, and is an example of a process of controlling to change the display mode of the operation data according to the evaluation of the element operation.

動作分析装置１０は、右手の動作データを読み込み（Ｓ１２）、左手の動作データを読み込む（Ｓ１３）。なお、当然ながら、右手の動作データ及び左手の動作データを読み込む順序は、どちらが先でもよい。 The motion analysis device 10 reads the motion data of the right hand (S12) and reads the motion data of the left hand (S13). As a matter of course, either of the right-hand motion data and the left-hand motion data may be read first.

次に、動作分析装置１０は、動作データの終端まで、以下の処理Ｓ１４１〜Ｓ１４５を繰り返し実行する（Ｓ１４）。動作分析装置１０は、要素動作の開始時から終了時までの実行時間に応じて、表示幅を設定し（Ｓ１４１）、異なる要素動作に対応する期間を区別して、左詰めでデータを表示する（Ｓ１４２）。 Next, the motion analysis device 10 repeatedly executes the following processes S141 to S145 until the end of the motion data (S14). The motion analyzer 10 sets the display width according to the execution time from the start to the end of the element motion (S141), distinguishes the periods corresponding to the different element motions, and displays the data left-justified (left-justified). S142).

そして、動作分析装置１０は、両手により行われた要素動作を評価し（Ｓ１４３）、その要素動作に関する評価が高評価又は低評価である場合（Ｓ１４４：ＹＥＳ）、動作データの表示態様を、評価に応じて変更する（Ｓ１４５）。動作分析装置１０は、例えば、高評価の要素動作に対応する動作データを青色で表示し、低評価の要素動作に対応する動作データを赤色で表示してよい。一方、要素動作に関する評価が高評価又は低評価でない場合（Ｓ１４４：ＮＯ）、動作分析装置１０は、動作データの表示態様を変更せず、例えば黒色で表示させて次の処理を実行する。 Then, the motion analysis device 10 evaluates the element motion performed by both hands (S143), and when the evaluation regarding the element motion is high or low (S144: YES), the motion data display mode is evaluated. (S145). The motion analysis device 10 may, for example, display the motion data corresponding to the highly evaluated element motion in blue and the motion data corresponding to the low rated element motion in red. On the other hand, when the evaluation regarding the element motion is not high evaluation or low evaluation (S144: NO), the motion analyzer 10 does not change the display mode of the motion data, for example, displays it in black and executes the next process.

表示制御処理の第３例が実行されることで、右手及び左手の動作データが、時系列順に、実行時間に応じた幅で表示部１０ｆに表示され、要素動作の評価に応じた表示態様で動作データが表示部１０ｆに表示される。 By executing the third example of the display control process, the motion data of the right hand and the left hand are displayed on the display unit 10f in chronological order with a width corresponding to the execution time, and in a display mode according to the evaluation of the element motion. The operation data is displayed on the display unit 10f.

本発明の実施形態は、以下の付記のようにも記載され得る。ただし、本発明の実施形態
は、以下の付記に記載した形態に限定されない。また、本発明の実施形態は、付記間の記
載を置換したり、組み合わせたりした形態であってもよい。 Embodiments of the present invention may also be described as the following appendices. However, the embodiment of the present invention is not limited to the embodiment described in the following appendix. Moreover, the embodiment of the present invention may be a form in which the description between the appendices is replaced or combined.

［付記１］
作業者が行った作業に関し、前記作業者の複数の部位の動作に関する時系列データを取得する取得部（１１）と、
前記時系列データを解析し、要素動作の種類及び前記要素動作の開始時から終了時までの実行時間を表す動作データを生成する解析部（１２）と、
前記要素動作の実行タイミングに基づいて、前記複数の部位により行われた前記要素動作を評価する評価部（１４）と、
異なる要素動作に対応する期間を区別して、前記評価を前記動作データと併せて表示部に表示するよう制御する表示制御部（１５）と、
を備える動作分析装置（１０）。 [Appendix 1]
An acquisition unit (11) that acquires time-series data related to the movements of a plurality of parts of the worker with respect to the work performed by the worker, and
An analysis unit (12) that analyzes the time-series data and generates operation data indicating the type of element operation and the execution time from the start time to the end time of the element operation.
An evaluation unit (14) that evaluates the element movement performed by the plurality of parts based on the execution timing of the element movement, and an evaluation unit (14).
A display control unit (15) that controls to display the evaluation together with the operation data on the display unit by distinguishing periods corresponding to different element operations.
Motion analyzer (10).

［付記２］
前記複数の部位に関する時系列データは、左手及び右手に関する時系列データを含み、
前記評価部（１４）は、前記要素動作が前記左手及び前記右手によって並行して実行されている場合に、高評価する、
付記１に記載の動作分析装置（１０）。 [Appendix 2]
The time-series data relating to the plurality of parts includes time-series data relating to the left hand and the right hand.
The evaluation unit (14) highly evaluates when the element operation is executed in parallel by the left hand and the right hand.
The motion analyzer (10) according to Appendix 1.

［付記３］
前記評価部（１４）は、前記複数の部位がいずれも前記作業に関する動作をしてない場合に、低評価する、
付記１又は２に記載の動作分析装置（１０）。 [Appendix 3]
The evaluation unit (14) gives a low evaluation when none of the plurality of parts is performing the operation related to the work.
The motion analyzer (10) according to Appendix 1 or 2.

［付記４］
前記表示制御部（１５）は、前記評価を表すアイコンを前記動作データに沿って前記表示部に表示するよう制御する、
付記１から３のいずれか一項に記載の動作分析装置（１０）。 [Appendix 4]
The display control unit (15) controls the display to display the icon representing the evaluation on the display unit according to the operation data.
The motion analyzer (10) according to any one of Appendix 1 to 3.

［付記５］
前記表示制御部（１５）は、前記評価に応じた異なる表示態様で前記動作データを前記表示部に表示するよう制御する、
付記１から３のいずれか一項に記載の動作分析装置（１０）。 [Appendix 5]
The display control unit (15) controls to display the operation data on the display unit in different display modes according to the evaluation.
The motion analyzer (10) according to any one of Appendix 1 to 3.

［付記６］
前記表示制御部（１５）は、前記評価を表すコメントを前記動作データと併せて前記表示部に表示するよう制御する、
付記１から５のいずれか一項に記載の動作分析装置（１０）。 [Appendix 6]
The display control unit (15) controls to display a comment representing the evaluation on the display unit together with the operation data.
The motion analyzer (10) according to any one of Appendix 1 to 5.

［付記７］
作業者が行った作業に関し、前記作業者の複数の部位に関する時系列データを取得することと、
前記時系列データを解析し、要素動作の種類及び実行時間を表す動作データを生成することと、
前記要素動作の実行タイミングに基づいて、前記複数の部位により行われた前記要素動作を評価することと、
異なる要素動作に対応する期間を区別可能に、前記評価を前記動作データと併せて表示部に表示するよう制御することと、
を含む動作分析方法。 [Appendix 7]
Acquiring time-series data on multiple parts of the worker regarding the work performed by the worker, and
Analyzing the time-series data to generate operation data representing the type of element operation and execution time,
To evaluate the element movement performed by the plurality of parts based on the execution timing of the element movement, and to evaluate the element movement.
Controlling the evaluation to be displayed on the display unit together with the operation data so that the periods corresponding to the different element operations can be distinguished.
Behavioral analysis methods including.

［付記８］
動作分析装置（１０）が備える演算部を、
作業者が行った作業に関し、前記作業者の複数の部位に関する時系列データを取得する取得部（１１）、
前記時系列データを解析し、要素動作の種類及び実行時間を表す動作データを生成する解析部（１２）、
前記要素動作の実行タイミングに基づいて、前記複数の部位により行われた前記要素動作を評価する評価部（１４）、及び
異なる要素動作に対応する期間を区別可能に、前記評価を前記動作データと併せて表示部に表示するよう制御する表示制御部（１５）、
として機能させる動作分析プログラム。 [Appendix 8]
The arithmetic unit included in the motion analyzer (10)
Acquisition unit (11), which acquires time-series data related to a plurality of parts of the worker with respect to the work performed by the worker.
Analysis unit (12), which analyzes the time-series data and generates operation data indicating the type of element operation and execution time.
Based on the execution timing of the element operation, the evaluation unit (14) for evaluating the element operation performed by the plurality of parts and the period corresponding to the different element operation can be distinguished from the evaluation with the operation data. Display control unit (15), which also controls display on the display unit,
A motion analysis program that functions as.

１０…動作分析装置、１０ａ…ＣＰＵ、１０ｂ…ＲＡＭ、１０ｃ…ＲＯＭ、１０ｄ…通信部、１０ｅ…入力部、１０ｆ…表示部、１１…取得部、１２…解析部、１３…記憶部、１３ａ…動作データ、１４…評価部、１５…表示制御部、２０…カメラ、２１…光電センサ、２２…圧力センサ、１００…動作分析システム 10 ... Motion analyzer, 10a ... CPU, 10b ... RAM, 10c ... ROM, 10d ... Communication unit, 10e ... Input unit, 10f ... Display unit, 11 ... Acquisition unit, 12 ... Analysis unit, 13 ... Storage unit, 13a ... Operation data, 14 ... Evaluation unit, 15 ... Display control unit, 20 ... Camera, 21 ... Photoelectric sensor, 22 ... Pressure sensor, 100 ... Motion analysis system

Claims (8)

作業者が行った作業に関し、前記作業者の複数の部位の動作に関する時系列データを取得する取得部と、
前記時系列データを解析し、要素動作の種類及び前記要素動作の開始時から終了時までの実行時間を表す動作データを生成する解析部と、
前記要素動作の実行タイミングに基づいて、前記複数の部位により行われた前記要素動作を評価する評価部と、
異なる要素動作に対応する期間を区別して、前記評価を前記動作データと併せて表示部に表示するよう制御する表示制御部と、
を備える動作分析装置。 An acquisition unit that acquires time-series data related to the movements of a plurality of parts of the worker with respect to the work performed by the worker.
An analysis unit that analyzes the time-series data and generates operation data that represents the type of element operation and the execution time from the start to the end of the element operation.
An evaluation unit that evaluates the element movement performed by the plurality of parts based on the execution timing of the element movement, and an evaluation unit.
A display control unit that distinguishes periods corresponding to different element operations and controls the evaluation to be displayed on the display unit together with the operation data.
Motion analyzer. 前記複数の部位に関する時系列データは、左手及び右手に関する時系列データを含み、
前記評価部は、前記要素動作が前記左手及び前記右手によって並行して実行されている場合に、高評価する、
請求項１に記載の動作分析装置。 The time-series data relating to the plurality of parts includes time-series data relating to the left hand and the right hand.
The evaluation unit highly evaluates when the element operation is executed in parallel by the left hand and the right hand.
The motion analyzer according to claim 1. 前記評価部は、前記複数の部位がいずれも前記作業に関する動作をしてない場合に、低評価する、
請求項１又は２に記載の動作分析装置。 The evaluation unit gives a low evaluation when none of the plurality of parts is performing the operation related to the work.
The motion analyzer according to claim 1 or 2. 前記表示制御部は、前記評価を表すアイコンを前記動作データに沿って前記表示部に表示するよう制御する、
請求項１から３のいずれか一項に記載の動作分析装置。 The display control unit controls the display to display the icon representing the evaluation on the display unit according to the operation data.
The motion analyzer according to any one of claims 1 to 3. 前記表示制御部は、前記評価に応じた異なる表示態様で前記動作データを前記表示部に表示するよう制御する、
請求項１から３のいずれか一項に記載の動作分析装置。 The display control unit controls to display the operation data on the display unit in different display modes according to the evaluation.
The motion analyzer according to any one of claims 1 to 3. 前記表示制御部は、前記評価を表すコメントを前記動作データと併せて前記表示部に表示するよう制御する、
請求項１から５のいずれか一項に記載の動作分析装置。 The display control unit controls to display a comment representing the evaluation on the display unit together with the operation data.
The motion analyzer according to any one of claims 1 to 5. 作業者が行った作業に関し、前記作業者の複数の部位に関する時系列データを取得することと、
前記時系列データを解析し、要素動作の種類及び実行時間を表す動作データを生成することと、
前記要素動作の実行タイミングに基づいて、前記複数の部位により行われた前記要素動作を評価することと、
異なる要素動作に対応する期間を区別可能に、前記評価を前記動作データと併せて表示部に表示するよう制御することと、
を含む動作分析方法。 Acquiring time-series data on multiple parts of the worker regarding the work performed by the worker, and
Analyzing the time-series data to generate operation data representing the type of element operation and execution time,
To evaluate the element movement performed by the plurality of parts based on the execution timing of the element movement, and to evaluate the element movement.
Controlling the evaluation to be displayed on the display unit together with the operation data so that the periods corresponding to the different element operations can be distinguished.
Behavioral analysis methods including. 動作分析装置が備える演算部を、
作業者が行った作業に関し、前記作業者の複数の部位に関する時系列データを取得する取得部、
前記時系列データを解析し、要素動作の種類及び実行時間を表す動作データを生成する解析部、
前記要素動作の実行タイミングに基づいて、前記複数の部位により行われた前記要素動作を評価する評価部、及び
異なる要素動作に対応する期間を区別可能に、前記評価を前記動作データと併せて表示部に表示するよう制御する表示制御部、
として機能させる動作分析プログラム。 The arithmetic unit of the motion analyzer
An acquisition unit that acquires time-series data related to a plurality of parts of the worker regarding the work performed by the worker.
An analysis unit that analyzes the time-series data and generates operation data indicating the type of element operation and execution time.
Based on the execution timing of the element operation, the evaluation unit for evaluating the element operation performed by the plurality of parts and the period corresponding to the different element operation can be distinguished, and the evaluation is displayed together with the operation data. Display control unit that controls the display on the unit,
A motion analysis program that functions as.
JP2019203039A 2019-11-08 2019-11-08 Motion analysis device, motion analysis method, and motion analysis program Active JP7385826B2 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2019203039A JP7385826B2 (en) 2019-11-08 2019-11-08 Motion analysis device, motion analysis method, and motion analysis program
CN202011089015.1A CN112784667A (en) 2019-11-08 2020-10-13 Motion analysis device, motion analysis method, and computer-readable storage medium
US17/070,880 US11700450B2 (en) 2019-11-08 2020-10-14 Motion analysis device, motion analysis method for improving motions of operator

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019203039A JP7385826B2 (en) 2019-11-08 2019-11-08 Motion analysis device, motion analysis method, and motion analysis program

Publications (2)

Publication Number Publication Date
JP2021077070A true JP2021077070A (en) 2021-05-20
JP7385826B2 JP7385826B2 (en) 2023-11-24

Family

ID=75750472

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019203039A Active JP7385826B2 (en) 2019-11-08 2019-11-08 Motion analysis device, motion analysis method, and motion analysis program

Country Status (3)

Country Link
US (1) US11700450B2 (en)
JP (1) JP7385826B2 (en)
CN (1) CN112784667A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023181804A1 (en) * 2022-03-22 2023-09-28 パナソニックＩｐマネジメント株式会社 Operation analysis device and operation analysis method
WO2023181805A1 (en) * 2022-03-22 2023-09-28 パナソニックＩｐマネジメント株式会社 Work analyzing system and work analyzing method

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7339604B2 (en) * 2019-11-12 2023-09-06 オムロン株式会社 Motion recognition device, motion recognition method, motion recognition program, and motion recognition system

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003006286A (en) * 2001-06-19 2003-01-10 Sharp Corp Work added-value evaluation system, work added-value evaluation method, and program for implementing method with computer
JP2013116676A (en) * 2011-12-02 2013-06-13 Hitachi Ltd People flow prediction device and method
JPWO2012073407A1 (en) * 2010-11-29 2014-05-19 日本電気株式会社 Display processing system, display processing method, and program
JP2015197847A (en) * 2014-04-02 2015-11-09 富士電機株式会社 Work analysis system, work analysis method, and work analysis program
JP2018045512A (en) * 2016-09-15 2018-03-22 オムロン株式会社 Workability evaluation device
JP2019101919A (en) * 2017-12-06 2019-06-24 キヤノン株式会社 Information processor, information processing method, computer program, and storage medium
JP2019114285A (en) * 2017-12-24 2019-07-11 Ｇｖａ Ｔｅｃｈ株式会社 Legal document review program, legal document review method, and legal document review system

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8560267B2 (en) * 2009-09-15 2013-10-15 Imetrikus, Inc. Identifying one or more activities of an animate or inanimate object
JP5318834B2 (en) 2010-09-29 2013-10-16 日立電線株式会社 Optical fiber end processing method and optical fiber end processing apparatus
US10558854B2 (en) * 2013-12-27 2020-02-11 Sony Corporation Analysis device, recording medium, and analysis method
JP6326701B2 (en) * 2014-11-04 2018-05-23 国立大学法人宇都宮大学 Cooperative movement evaluation device
JP6710644B2 (en) * 2017-01-05 2020-06-17 株式会社東芝 Motion analysis device, motion analysis method and program
JP6535778B1 (en) 2018-03-07 2019-06-26 社会福祉法人兵庫県社会福祉事業団 Motor ability evaluation system
JP7385825B2 (en) * 2019-11-07 2023-11-24 オムロン株式会社 Motion analysis device, motion analysis method, and motion analysis program
JP7421745B2 (en) * 2019-11-12 2024-01-25 オムロン株式会社 Motion analysis device, motion analysis method, and motion analysis program

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003006286A (en) * 2001-06-19 2003-01-10 Sharp Corp Work added-value evaluation system, work added-value evaluation method, and program for implementing method with computer
JPWO2012073407A1 (en) * 2010-11-29 2014-05-19 日本電気株式会社 Display processing system, display processing method, and program
JP2013116676A (en) * 2011-12-02 2013-06-13 Hitachi Ltd People flow prediction device and method
JP2015197847A (en) * 2014-04-02 2015-11-09 富士電機株式会社 Work analysis system, work analysis method, and work analysis program
JP2018045512A (en) * 2016-09-15 2018-03-22 オムロン株式会社 Workability evaluation device
JP2019101919A (en) * 2017-12-06 2019-06-24 キヤノン株式会社 Information processor, information processing method, computer program, and storage medium
JP2019114285A (en) * 2017-12-24 2019-07-11 Ｇｖａ Ｔｅｃｈ株式会社 Legal document review program, legal document review method, and legal document review system

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023181804A1 (en) * 2022-03-22 2023-09-28 パナソニックＩｐマネジメント株式会社 Operation analysis device and operation analysis method
WO2023181805A1 (en) * 2022-03-22 2023-09-28 パナソニックＩｐマネジメント株式会社 Work analyzing system and work analyzing method

Also Published As

Publication number Publication date
JP7385826B2 (en) 2023-11-24
US11700450B2 (en) 2023-07-11
US20210144303A1 (en) 2021-05-13
CN112784667A (en) 2021-05-11

Similar Documents

Publication Publication Date Title
JP2021077070A (en) Motion analysis device, motion analysis method, and motion analysis program
US8830052B2 (en) Alarm display apparatus and alarm display method
CN110050237A (en) Transacter, method of data capture and program
JP6811465B2 (en) Learning device, learning method, learning program, automatic control device, automatic control method and automatic control program
JP7393720B2 (en) Skill evaluation device, skill evaluation method, and skill evaluation program
CN110490034B (en) Action analysis device, action analysis method, recording medium, and action analysis system
JP7385825B2 (en) Motion analysis device, motion analysis method, and motion analysis program
JP2021077186A (en) Motion analysis device, motion analysis method, and motion analysis program
JP6840627B2 (en) Hyperparameter evaluation method, computer and program
JP7520711B2 (en) Work behavior recognition system and work behavior recognition method
JP7339604B2 (en) Motion recognition device, motion recognition method, motion recognition program, and motion recognition system
US20230129280A1 (en) Computer readable storage medium, program creation support apparatus, and program creation support method
KR20100085632A (en) Sporting apparatus for providing personally adusted biorhythm information, and thereof method
JP5733269B2 (en) Method for supporting program generation and apparatus for supporting program generation
CN102955763B (en) Display packing and display device
Koehler et al. Trace induction for complete manufacturing process model discovery
JP6112233B2 (en) Energy analysis apparatus, energy analysis program, and recording medium
WO2020136924A1 (en) Motion analysis device, motion analysis method, and motion analysis program
WO2021241069A1 (en) Display device, water quality meter management system, and display method
EP3508258B1 (en) Method for calculating residual anaerobic work capacity, and device for calculating residual anaerobic work capacity
Czerniak et al. Analysis of different types of navigational structures for machine tool controlling
JP2023140036A (en) Operation analysis device and operation analysis method
JP2022109646A (en) Operation level conversion device, operation level conversion method, and operation level conversion program
JP2021043631A (en) State estimation device and state estimation program
JPS6215606A (en) Method for confirming executing speed of programmable controller

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220907

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230731

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230801

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230929

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231013

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231026

R150 Certificate of patent or registration of utility model

Ref document number: 7385826

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150