JP7375829B2 - 生成方法、生成プログラム及び情報処理システム - Google Patents
生成方法、生成プログラム及び情報処理システム Download PDFInfo
- Publication number
- JP7375829B2 JP7375829B2 JP2021563516A JP2021563516A JP7375829B2 JP 7375829 B2 JP7375829 B2 JP 7375829B2 JP 2021563516 A JP2021563516 A JP 2021563516A JP 2021563516 A JP2021563516 A JP 2021563516A JP 7375829 B2 JP7375829 B2 JP 7375829B2
- Authority
- JP
- Japan
- Prior art keywords
- noise
- fitting
- influence
- cylindrical model
- point group
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 131
- 230000010365 information processing Effects 0.000 title claims description 61
- 238000012545 processing Methods 0.000 claims description 131
- 238000005259 measurement Methods 0.000 claims description 12
- 238000004519 manufacturing process Methods 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 24
- 230000006870 function Effects 0.000 description 13
- 238000004891 communication Methods 0.000 description 8
- 238000011156 evaluation Methods 0.000 description 8
- 238000009826 distribution Methods 0.000 description 6
- 230000007423 decrease Effects 0.000 description 5
- 230000036544 posture Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 238000012854 evaluation process Methods 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 235000005156 Brassica carinata Nutrition 0.000 description 1
- 244000257790 Brassica carinata Species 0.000 description 1
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 241001026509 Kata Species 0.000 description 1
- 230000037237 body shape Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000009194 climbing Effects 0.000 description 1
- 230000009189 diving Effects 0.000 description 1
- YYJNOYZRYGDPNH-MFKUBSTISA-N fenpyroximate Chemical compound C=1C=C(C(=O)OC(C)(C)C)C=CC=1CO/N=C/C=1C(C)=NN(C)C=1OC1=CC=CC=C1 YYJNOYZRYGDPNH-MFKUBSTISA-N 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000009182 swimming Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/23—Recognition of whole body movements, e.g. for sport training
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/75—Determining position or orientation of objects or cameras using feature-based methods involving models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/149—Segmentation; Edge detection involving deformable models, e.g. active contour models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/30—Noise filtering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10028—Range image; Depth image; 3D point clouds
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/03—Recognition of patterns in medical or anatomical images
- G06V2201/033—Recognition of patterns in medical or anatomical images of skeletal patterns
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Social Psychology (AREA)
- Psychiatry (AREA)
- Health & Medical Sciences (AREA)
- Software Systems (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Description
40 円筒モデルデータ
100 情報処理装置
110 通信部
120 入力部
130 表示部
140 記憶部
141 距離画像テーブル
142 骨格モデルテーブル
151 取得部
152 フィッティング処理部
153 生成部
154 技認識部
155 画面情報出力制御部
Claims (5)
- コンピュータが実行する生成方法であって、
被写体を3次元計測する3Dセンサの計測結果を基にして、3次元点群データを取得し、
前記3次元点群データに対して、人体の各部位を複数の円筒で表現した円筒モデルを当てはめた結果を基にして、前記計測結果におけるノイズの影響を、前記部位ごとに評価し、
前記ノイズの影響が所定以上と判断された部位に対応する円筒モデルの表面から所定の範囲の点群を前記3次元点群データから除外し、前記点群を除外した3次元点群データに対して、前記円筒モデルを再度当てはめる処理を繰り返し実行し、
前記部位ごとの前記ノイズの影響が所定未満となった場合の前記3次元点群データに対して前記円筒モデルの当てはめた結果を基にして、前記被写体の骨格認識結果を生成し、
前記骨格認識結果を出力する
処理を実行することを特徴とする生成方法。 - 前記ノイズの影響を評価する処理は、前記3次元点群データに対して当てはめられた前記円筒モデルの表面から所定の範囲の点群に含まれる点の数を、前記部位ごとにカウントし、前記円筒モデルを当てはめる処理は、前記点の数が前記部位ごとに設定された所定数以上となるまで、前記円筒モデルを再度当てはめる処理を繰り返し実行することを特徴とする請求項1に記載の生成方法。
- 前記ノイズの影響を評価する処理は、前記3次元点群データに前記円筒モデルが再度当てはめられる度に、前記円筒モデルの表面からの前記所定の範囲を大きくすることを特徴とする請求項1または2に記載の生成方法。
- コンピュータに、
被写体を3次元計測する3Dセンサの計測結果を基にして、3次元点群データを取得し、
前記3次元点群データに対して、人体の各部位を複数の円筒で表現した円筒モデルを当てはめた結果を基にして、前記計測結果におけるノイズの影響を、前記部位ごとに評価し、
前記ノイズの影響が所定以上と判断された部位に対応する円筒モデルの表面から所定の範囲の点群を前記3次元点群データから除外し、前記点群を除外した3次元点群データに対して、前記円筒モデルを再度当てはめる処理を繰り返し実行し、
前記部位ごとの前記ノイズの影響が所定未満となった場合の前記3次元点群データに対して前記円筒モデルの当てはめた結果を基にして、前記被写体の骨格認識結果を生成し、
前記骨格認識結果を出力する
処理を実行させることを特徴とする生成プログラム。 - 被写体を3次元計測する3Dセンサと、情報処理装置とを有する情報処理システムであって、
前記3Dセンサは、センシングした計測結果を、前記情報処理装置に出力し、
前記情報処理装置は、
前記計測結果を基にして、3次元点群データを取得する取得部と、
前記3次元点群データに対して、人体の各部位を複数の円筒で表現した円筒モデルを当てはめた結果を基にして、前記計測結果におけるノイズの影響を、前記部位ごとに評価し、前記ノイズの影響が所定以上と判断された部位に対応する円筒モデルの表面から所定の範囲の点群を前記3次元点群データから除外し、前記点群を除外した3次元点群データに対して、前記円筒モデルを再度当てはめる処理を繰り返し実行するフィッティング処理部と、
前記部位ごとの前記ノイズの影響が所定未満となった場合の前記3次元点群データに対する前記円筒モデルの当てはめた結果を基にして、前記被写体の骨格認識結果を生成し、前記骨格認識結果を出力する生成部と
を有することを特徴とする情報処理システム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2019/048515 WO2021117165A1 (ja) | 2019-12-11 | 2019-12-11 | 生成方法、生成プログラム及び情報処理システム |
Publications (3)
Publication Number | Publication Date |
---|---|
JPWO2021117165A1 JPWO2021117165A1 (ja) | 2021-06-17 |
JPWO2021117165A5 JPWO2021117165A5 (ja) | 2022-04-20 |
JP7375829B2 true JP7375829B2 (ja) | 2023-11-08 |
Family
ID=76330012
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021563516A Active JP7375829B2 (ja) | 2019-12-11 | 2019-12-11 | 生成方法、生成プログラム及び情報処理システム |
Country Status (5)
Country | Link |
---|---|
US (1) | US20220270408A1 (ja) |
EP (1) | EP4075377A4 (ja) |
JP (1) | JP7375829B2 (ja) |
CN (1) | CN114730497A (ja) |
WO (1) | WO2021117165A1 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015102913A (ja) | 2013-11-21 | 2015-06-04 | キヤノン株式会社 | 姿勢推定装置及び姿勢推定方法 |
WO2019030794A1 (ja) | 2017-08-07 | 2019-02-14 | 富士通株式会社 | 情報処理装置、モデルデータ作成プログラム、モデルデータ作成方法 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4930854B2 (ja) * | 2005-07-19 | 2012-05-16 | 日本電気株式会社 | 関節物***置姿勢推定装置及びその方法ならびにプログラム |
AU2011323799B2 (en) * | 2010-10-25 | 2015-10-29 | Lockheed Martin Corporation | Detecting structural changes to underwater structures |
US10033979B2 (en) * | 2012-03-23 | 2018-07-24 | Avigilon Fortress Corporation | Video surveillance systems, devices and methods with improved 3D human pose and shape modeling |
WO2018207292A1 (ja) | 2017-05-10 | 2018-11-15 | 富士通株式会社 | 対象物認識方法、装置、システム、プログラム |
-
2019
- 2019-12-11 WO PCT/JP2019/048515 patent/WO2021117165A1/ja unknown
- 2019-12-11 JP JP2021563516A patent/JP7375829B2/ja active Active
- 2019-12-11 EP EP19955580.6A patent/EP4075377A4/en not_active Withdrawn
- 2019-12-11 CN CN201980102506.4A patent/CN114730497A/zh active Pending
-
2022
- 2022-05-11 US US17/741,824 patent/US20220270408A1/en active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015102913A (ja) | 2013-11-21 | 2015-06-04 | キヤノン株式会社 | 姿勢推定装置及び姿勢推定方法 |
WO2019030794A1 (ja) | 2017-08-07 | 2019-02-14 | 富士通株式会社 | 情報処理装置、モデルデータ作成プログラム、モデルデータ作成方法 |
Also Published As
Publication number | Publication date |
---|---|
EP4075377A1 (en) | 2022-10-19 |
US20220270408A1 (en) | 2022-08-25 |
WO2021117165A1 (ja) | 2021-06-17 |
CN114730497A (zh) | 2022-07-08 |
JPWO2021117165A1 (ja) | 2021-06-17 |
EP4075377A4 (en) | 2022-12-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6733738B2 (ja) | 運動認識装置、運動認識プログラムおよび運動認識方法 | |
CN105229666B (zh) | 3d图像中的运动分析 | |
US11763603B2 (en) | Physical activity quantification and monitoring | |
EP2391988B1 (en) | Visual target tracking | |
US8175326B2 (en) | Automated scoring system for athletics | |
CN102331840B (zh) | 基于回环运动的用户选择和导航 | |
US8682028B2 (en) | Visual target tracking | |
US20140328519A1 (en) | Method and apparatus for estimating a pose | |
US20100197400A1 (en) | Visual target tracking | |
JP6943294B2 (ja) | 技認識プログラム、技認識方法および技認識システム | |
US20100197392A1 (en) | Visual target tracking | |
JP7327494B2 (ja) | 補正方法、補正プログラムおよび情報処理システム | |
JP7375829B2 (ja) | 生成方法、生成プログラム及び情報処理システム | |
CN111784660B (zh) | 一种用于人脸图像的正脸程度的分析方法和*** | |
JP7331927B2 (ja) | 生成方法、生成プログラムおよび情報処理装置 | |
US20220222974A1 (en) | Evaluation method, non-transitory computer readable recording medium, and information processing apparatus | |
JP2022138007A (ja) | 骨格認識方法、骨格認識プログラムおよび体操採点支援システム | |
WO2023162223A1 (ja) | 学習プログラム、生成プログラム、学習方法および生成方法 | |
CN113705536B (zh) | 连续动作打分方法、装置及存储介质 | |
WO2023106028A1 (ja) | 動体検出装置、動体検出方法、及びコンピュータ読み取り可能な記録媒体 | |
JP2021196691A (ja) | 算出方法、算出プログラムおよび情報処理装置 | |
JP2023105537A (ja) | 学習プログラム、学習方法および情報処理装置 | |
JP2023179239A (ja) | 情報処理プログラム、情報処理方法および情報処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220202 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220202 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230418 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230606 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230627 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230807 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230926 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231009 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7375829 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |