JP7376446B2 - 作業分析プログラム、および、作業分析装置 - Google Patents
作業分析プログラム、および、作業分析装置 Download PDFInfo
- Publication number
- JP7376446B2 JP7376446B2 JP2020162424A JP2020162424A JP7376446B2 JP 7376446 B2 JP7376446 B2 JP 7376446B2 JP 2020162424 A JP2020162424 A JP 2020162424A JP 2020162424 A JP2020162424 A JP 2020162424A JP 7376446 B2 JP7376446 B2 JP 7376446B2
- Authority
- JP
- Japan
- Prior art keywords
- mark
- work
- person
- data
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004458 analytical method Methods 0.000 title claims description 74
- 238000000605 extraction Methods 0.000 claims description 20
- 238000000034 method Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 10
- 210000000707 wrist Anatomy 0.000 description 8
- 230000006870 function Effects 0.000 description 5
- 238000010801 machine learning Methods 0.000 description 5
- 239000003550 marker Substances 0.000 description 4
- 230000006399 behavior Effects 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 238000013135 deep learning Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/30—Computing systems specially adapted for manufacturing
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Image Analysis (AREA)
Description
本発明による作業分析装置は、画像データを入力とした画像認識により、前記画像データに写る人物の関節位置を示す特徴点データを含む骨格データを取得する骨格抽出部と、前記画像データに写る特定のマークを認識するマーク認識部と、前記マーク認識部により認識した前記マークと、前記骨格抽出部が取得した前記骨格データの特定部分とに基づいて、前記人物が行う作業を分析する分析部と、を有し、前記マークは、前記人物が前記作業時に使用する工具に貼付されており、前記分析部は、前記マーク認識部が認識した前記マークの向きを判別し、判別した前記マークの向きと、前記マークと前記特定部分の位置関係と、に基づいて、前記人物が前記工具を使用中であるか否かを判断することで、前記作業を分析するものである。
11 骨格抽出部
12 モデル生成部
13 分析部
14 出力部
15 マーク認識部
18 画像データ
19 骨格データ
22 モデルデータ
23 推定結果データ
31 ビデオカメラ
32 ビデオレコーダ
33 入出力装置
41 モニタ
42 記憶装置
43 アプリケーション装置
Claims (5)
- 画像データを入力とした画像認識により、前記画像データに写る人物の関節位置を示す特徴点データを含む骨格データを取得する骨格抽出部、
前記画像データに写る特定のマークを認識するマーク認識部、
前記マーク認識部により認識した前記マークと、前記骨格抽出部が取得した前記骨格データの特定部分とに基づいて、前記人物が行う作業を分析する分析部、としてコンピュータを機能させるための作業分析プログラムであって、
前記マークは、前記人物が前記作業時に使用する工具に貼付されており、
前記分析部は、前記マーク認識部が認識した前記マークの向きを判別し、判別した前記マークの向きと、前記マークと前記特定部分の位置関係と、に基づいて、前記人物が前記工具を使用中であるか否かを判断することで、前記作業を分析する
作業分析プログラム。 - 前記マークは縞模様を含み、
前記分析部は、前記縞模様の方向に応じて前記マークの向きを判別する
請求項1に記載の作業分析プログラム。 - 前記分析部は、
前記画像データに対して所定の領域を設定し、
前記マークの向きが縦であり、かつ、前記特定部分が前記マークの近傍または前記領域内にある場合は、前記人物が前記工具を使用中であると判断し、
前記マークの向きが縦でないか、前記特定部分が前記マークの近傍と前記領域内のいずれにもない場合は、前記人物が前記工具を使用中でないと判断する
請求項1に記載の作業分析プログラム。 - 前記マーク認識部は、個人を特定可能な識別情報を含んだ別のマークを認識し、認識した前記別のマークに基づいて前記作業を行っている人物を特定する
請求項1に記載の作業分析プログラム。 - 画像データを入力とした画像認識により、前記画像データに写る人物の関節位置を示す特徴点データを含む骨格データを取得する骨格抽出部と、
前記画像データに写る特定のマークを認識するマーク認識部と、
前記マーク認識部により認識した前記マークと、前記骨格抽出部が取得した前記骨格データの特定部分とに基づいて、前記人物が行う作業を分析する分析部と、を有し、
前記マークは、前記人物が前記作業時に使用する工具に貼付されており、
前記分析部は、前記マーク認識部が認識した前記マークの向きを判別し、判別した前記マークの向きと、前記マークと前記特定部分の位置関係と、に基づいて、前記人物が前記工具を使用中であるか否かを判断することで、前記作業を分析する
作業分析装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020162424A JP7376446B2 (ja) | 2020-09-28 | 2020-09-28 | 作業分析プログラム、および、作業分析装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020162424A JP7376446B2 (ja) | 2020-09-28 | 2020-09-28 | 作業分析プログラム、および、作業分析装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022055057A JP2022055057A (ja) | 2022-04-07 |
JP7376446B2 true JP7376446B2 (ja) | 2023-11-08 |
Family
ID=80998142
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020162424A Active JP7376446B2 (ja) | 2020-09-28 | 2020-09-28 | 作業分析プログラム、および、作業分析装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7376446B2 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002310617A (ja) | 2001-04-18 | 2002-10-23 | Matsushita Electric Works Ltd | 作業分析システム及びその方法 |
JP2016066270A (ja) | 2014-09-25 | 2016-04-28 | Kddi株式会社 | 作業類似度算出方法、装置およびプログラム |
-
2020
- 2020-09-28 JP JP2020162424A patent/JP7376446B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002310617A (ja) | 2001-04-18 | 2002-10-23 | Matsushita Electric Works Ltd | 作業分析システム及びその方法 |
JP2016066270A (ja) | 2014-09-25 | 2016-04-28 | Kddi株式会社 | 作業類似度算出方法、装置およびプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP2022055057A (ja) | 2022-04-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6783713B2 (ja) | 人行動推定システム | |
JP5403699B2 (ja) | 手指形状推定装置、手指形状の推定方法及びプログラム | |
JP6825041B2 (ja) | 姿勢分析プログラム、および、姿勢分析装置 | |
US10692291B2 (en) | Apparatus, method, and medium for generating a 3D model of a finger using captured image | |
US20210216821A1 (en) | Training data generating method, estimating device, and recording medium | |
WO2016068869A1 (en) | Three dimensional object recognition | |
JP2007072620A (ja) | 画像認識装置及びその方法 | |
JP6066093B2 (ja) | 手指形状推定装置、手指形状推定方法、及び手指形状推定プログラム | |
Andrianakos et al. | An approach for monitoring the execution of human based assembly operations using machine learning | |
JP6487642B2 (ja) | 手指形状の検出方法、そのプログラム、そのプログラムの記憶媒体、及び、手指の形状を検出するシステム。 | |
JP7010542B2 (ja) | 作業分析装置、作業分析方法、及びプログラム | |
JPWO2018154709A1 (ja) | 動作学習装置、技能判別装置および技能判別システム | |
CN105892633A (zh) | 手势识别方法及虚拟现实显示输出设备 | |
Chen et al. | Projection-based augmented reality system for assembly guidance and monitoring | |
TW202201275A (zh) | 手部作業動作評分裝置、方法及電腦可讀取存儲介質 | |
JP5083715B2 (ja) | 三次元位置姿勢計測方法および装置 | |
JP7376446B2 (ja) | 作業分析プログラム、および、作業分析装置 | |
JP2007048232A (ja) | 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム | |
JP7431714B2 (ja) | 視線分析装置と視線分析方法及び視線分析システム | |
JP6303918B2 (ja) | ジェスチャ管理システム、ジェスチャ管理プログラム、ジェスチャ管理方法および指さし認識装置 | |
Rong et al. | RGB-D hand pose estimation using fourier descriptor | |
JP4449483B2 (ja) | 画像解析装置、および画像解析方法、並びにコンピュータ・プログラム | |
JP7500895B1 (ja) | 作業管理装置、作業管理システム、および、作業管理方法 | |
JP7470069B2 (ja) | 指示物体検出装置、指示物体検出方法及び指示物体検出システム | |
JP7350222B1 (ja) | 動作分析装置、動作分析方法、及び動作分析プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220711 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230523 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230530 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230707 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231010 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231026 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7376446 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |