JP7429887B2 - 球技映像解析装置、球技映像解析方法、及び、コンピュータプログラム - Google Patents
球技映像解析装置、球技映像解析方法、及び、コンピュータプログラム Download PDFInfo
- Publication number
- JP7429887B2 JP7429887B2 JP2020039760A JP2020039760A JP7429887B2 JP 7429887 B2 JP7429887 B2 JP 7429887B2 JP 2020039760 A JP2020039760 A JP 2020039760A JP 2020039760 A JP2020039760 A JP 2020039760A JP 7429887 B2 JP7429887 B2 JP 7429887B2
- Authority
- JP
- Japan
- Prior art keywords
- reference frame
- frame image
- image
- video
- ball game
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004458 analytical method Methods 0.000 title claims description 114
- 238000004590 computer program Methods 0.000 title claims description 7
- 230000008859 change Effects 0.000 claims description 54
- 238000012790 confirmation Methods 0.000 claims description 46
- 230000009471 action Effects 0.000 claims description 29
- 238000000034 method Methods 0.000 claims description 17
- 238000004891 communication Methods 0.000 claims description 10
- 230000008569 process Effects 0.000 claims description 7
- 238000010586 diagram Methods 0.000 description 16
- 238000012545 processing Methods 0.000 description 16
- 230000006870 function Effects 0.000 description 10
- 238000001514 detection method Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 7
- 239000000284 extract Substances 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 230000001360 synchronised effect Effects 0.000 description 4
- 238000007792 addition Methods 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000630 rising effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B69/00—Training appliances or apparatus for special sports
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/292—Multi-camera tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Physical Education & Sports Medicine (AREA)
- Image Analysis (AREA)
- Closed-Circuit Television Systems (AREA)
Description
<球技映像解析システムの構成>
図1は、本実施の形態に係る球技映像解析システムの構成例を示す図である。
図3は、本実施の形態に係る球技映像解析装置100の構成例を示すブロック図である。
図5は、事前作業の一例を示すフローチャートである。事前作業とは、解析部105によって本番のアクションの解析を行う前に行われる作業であり、例えば、同期ずれ情報203を生成するために行われる作業である。
図6は、事前作業に関する処理の一例を示すシーケンスチャートである。図6は、図5におけるS106~S107の詳細な説明に相当する。
図8は、基準フレーム確認用UIの詳細例を示す図である。
図9は、基準フレーム変更用UIの詳細例を示す図である。
図10は、解析結果の表示例を示す図である。
上述では、フレーム同期のずれを示す情報として、第1の携帯端末20Aが第1のフレーム画像に付与した第1のタイムコードと、第2の携帯端末20Bが第2のフレーム画像に付与した第2のタイムコードとを用いる例を説明した。しかし、フレーム同期のずれを示す情報は、タイムコードに限られない。
以上、本開示に係る実施形態について図面を参照して詳述した。なお、上述した第1の携帯端末20A、第2の携帯端末20B、表示端末30、及び、球技映像解析装置100の機能は、コンピュータプログラムにより実現され得る。
本開示に係る、球技映像解析装置(100)は、球技に用いられる移動体に対する人物のアクションを互いに異なる位置から撮影した第1の動画(201A)及び第2の動画(201B)を受信する受信部(101)と、第1の動画及び前記第2の動画の各々から、アクションを構成する特定のサブアクションが撮影されたフレーム画像である基準フレーム画像を特定し、第1の動画から特定された基準フレーム画像である第1の基準フレーム画像と第2の動画から特定された基準フレーム画像である第2の基準フレーム画像との間の時間のずれを示す情報である同期ずれ情報(203)を生成する基準フレーム特定部(103)と、第1の動画と第2の動画との間のフレーム画像の同期ずれを同期ずれ情報に基づいて補正し、移動体の移動軌跡を特定する解析部(105)と、を備える。
20A 第1の携帯端末
20B 第2の携帯端末
30 表示端末
100 球技映像解析装置
101 動画受信部
102 画像変換部
103 基準フレーム特定部
104 基準フレーム変更部
105 解析部
106 結果表示部
201A 第1の動画
201B 第2の動画
202A 第1のフレーム画像群
202B 第2のフレーム画像群
203 同期ずれ情報
204 解析結果情報
210A 第1の画像表示領域
210B 第2の画像表示領域
211A、211B ボールの検出領域
310 基準フレーム確認用UI
312 OKボタン
313 変更ボタン
314 やり直しボタン
320 基準フレーム変更用UI
322 OKボタン
323 戻るボタン
324A、324B 1フレーム戻りボタン
325A、325B Nフレーム戻りボタン
326A、326B 1フレーム進みボタン
327A、327B Nフレーム進みボタン
330 解析結果画面
331 ボールの移動軌跡
1000A、1000B コンピュータ
1001 入力装置
1002 出力装置
1003 CPU
1004 GPU
1005 ROM
1006 RAM
1007 記憶装置
1008 読取装置
1009 送受信装置
1010 バス
1011 カメラ装置
Claims (7)
- 球技に用いられる移動体に対する人物のアクションを互いに異なる位置から撮影した第1の動画及び第2の動画を受信する受信部と、
前記第1の動画及び前記第2の動画の各々から、前記アクションを構成する特定のサブアクションが撮影されたフレーム画像である基準フレーム画像を特定し、前記第1の動画から特定された前記基準フレーム画像である第1の基準フレーム画像と前記第2の動画から特定された前記基準フレーム画像である第2の基準フレーム画像との間の時間のずれを示す情報である同期ずれ情報を生成する基準フレーム特定部と、
第1の動画と第2の動画との間のフレーム画像の同期ずれを前記同期ずれ情報に基づいて補正し、前記移動体の移動軌跡を特定する解析部と、を備え、
前記基準フレーム特定部は、
前記第1の基準フレーム画像及び前記第2の基準フレーム画像をユーザに提示する基準フレーム確認用UIを生成及び出力し、
前記解析部は、
前記基準フレーム確認用UIから前記基準フレーム画像を変更しない旨のユーザの指示を受信した場合、前記同期ずれ情報を確定させ、
前記基準フレーム確認用UIから前記基準フレーム画像を変更する旨のユーザの指示を受信した場合、前記第1の基準フレーム画像および前記第2の基準フレーム画像の候補画像を抽出し、前記候補画像から前記基準フレーム画像を選択するユーザの操作を受け付ける、
球技映像解析装置。 - 前記基準フレーム特定部は、前記第1の動画及び前記第2の動画の再撮影を行うか否かの指示を受け付ける前記基準フレーム確認用UIを生成及び出力する、
請求項1に記載の球技映像解析装置。 - 前記第1の動画及び前記第2の動画は、それぞれ、カメラ及び無線通信装置を備えた第1の携帯端末及び第2の携帯端末にて撮影されたものである、
請求項1または2のいずれか1項に記載の球技映像解析装置。 - 前記第1の基準フレーム画像及び前記第2の基準フレーム画像、並びに、前記解析部による解析の結果を示す情報を、第3の携帯端末に出力する結果表示部、をさらに備えた、
請求項3に記載の球技映像解析装置。 - 前記球技はバレーボールであり、
前記移動体は前記バレーボールのボールであり、
前記アクションは前記バレーボールのサーブであり、
前記サブアクションは前記サーブを行った前記人物の手が前記ボールに当たった瞬間である、
請求項1から4のいずれか1項に記載の球技映像解析装置。 - 装置が、
球技に用いられる移動体に対する人物のアクションを互いに異なる位置から撮影した第1の動画及び第2の動画を受信し、
前記第1の動画及び前記第2の動画の各々から、前記アクションを構成する特定のサブアクションが撮影されたフレーム画像である基準フレーム画像を特定し、前記第1の動画から特定された前記基準フレーム画像である第1の基準フレーム画像と前記第2の動画から特定された前記基準フレーム画像である第2の基準フレーム画像との間の時間のずれを示す情報である同期ずれ情報を生成し、
第1の動画と第2の動画との間のフレーム画像の同期ずれを前記同期ずれ情報に基づいて補正し、前記移動体の移動軌跡を特定し、
前記基準フレーム画像を特定する際、
前記第1の基準フレーム画像及び前記第2の基準フレーム画像をユーザに提示する基準フレーム確認用UIを生成及び出力し、
前記基準フレーム確認用UIから前記基準フレーム画像を変更しない旨のユーザの指示を受信した場合、前記同期ずれ情報を確定させ、
前記基準フレーム確認用UIから前記基準フレーム画像を変更する旨のユーザの指示を受信した場合、前記第1の基準フレーム画像および前記第2の基準フレーム画像の候補画像を抽出し、前記候補画像から前記基準フレーム画像を選択するユーザの操作を受け付ける、
球技映像解析方法。 - 球技に用いられる移動体に対する人物のアクションを互いに異なる位置から撮影した第1の動画及び第2の動画を受信し、
前記第1の動画及び前記第2の動画の各々から、前記アクションを構成する特定のサブアクションが撮影されたフレーム画像である基準フレーム画像を特定し、前記第1の動画から特定された前記基準フレーム画像である第1の基準フレーム画像と前記第2の動画から特定された前記基準フレーム画像である第2の基準フレーム画像との間の時間のずれを示す情報である同期ずれ情報を生成し、
第1の動画と第2の動画との間のフレーム画像の同期ずれを前記同期ずれ情報に基づいて補正し、前記移動体の移動軌跡を解析し、
前記基準フレーム画像を特定する際、
前記第1の基準フレーム画像及び前記第2の基準フレーム画像をユーザに提示する基準フレーム確認用UIを生成及び出力し、
前記基準フレーム確認用UIから前記基準フレーム画像を変更しない旨のユーザの指示を受信した場合、前記同期ずれ情報を確定させ、
前記基準フレーム確認用UIから前記基準フレーム画像を変更する旨のユーザの指示を受信した場合、前記第1の基準フレーム画像および前記第2の基準フレーム画像の候補画像を抽出し、前記候補画像から前記基準フレーム画像を選択するユーザの操作を受け付ける、
処理をコンピュータに実行させる、コンピュータプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020039760A JP7429887B2 (ja) | 2020-03-09 | 2020-03-09 | 球技映像解析装置、球技映像解析方法、及び、コンピュータプログラム |
PCT/JP2021/006501 WO2021182081A1 (ja) | 2020-03-09 | 2021-02-19 | 球技映像解析装置、球技映像解析方法、及び、コンピュータプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020039760A JP7429887B2 (ja) | 2020-03-09 | 2020-03-09 | 球技映像解析装置、球技映像解析方法、及び、コンピュータプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2021140643A JP2021140643A (ja) | 2021-09-16 |
JP2021140643A5 JP2021140643A5 (ja) | 2023-03-01 |
JP7429887B2 true JP7429887B2 (ja) | 2024-02-09 |
Family
ID=77668770
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020039760A Active JP7429887B2 (ja) | 2020-03-09 | 2020-03-09 | 球技映像解析装置、球技映像解析方法、及び、コンピュータプログラム |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7429887B2 (ja) |
WO (1) | WO2021182081A1 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008199557A (ja) | 2007-02-16 | 2008-08-28 | Nec Corp | ストリーム同期再生システム、ストリーム同期再生装置、同期再生方法、及び同期再生用プログラム |
WO2019225415A1 (ja) | 2018-05-21 | 2019-11-28 | パナソニックIpマネジメント株式会社 | 球技映像解析装置、及び、球技映像解析方法 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6213146B2 (ja) * | 2013-10-24 | 2017-10-18 | ソニー株式会社 | 情報処理装置、記録媒体、および情報処理方法 |
JP6704606B2 (ja) * | 2018-08-24 | 2020-06-03 | 独立行政法人日本スポーツ振興センター | 判定システム、及び判定方法 |
-
2020
- 2020-03-09 JP JP2020039760A patent/JP7429887B2/ja active Active
-
2021
- 2021-02-19 WO PCT/JP2021/006501 patent/WO2021182081A1/ja active Application Filing
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008199557A (ja) | 2007-02-16 | 2008-08-28 | Nec Corp | ストリーム同期再生システム、ストリーム同期再生装置、同期再生方法、及び同期再生用プログラム |
WO2019225415A1 (ja) | 2018-05-21 | 2019-11-28 | パナソニックIpマネジメント株式会社 | 球技映像解析装置、及び、球技映像解析方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2021182081A1 (ja) | 2021-09-16 |
JP2021140643A (ja) | 2021-09-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7289080B2 (ja) | 球技映像解析装置、及び、球技映像解析方法 | |
JP7437652B2 (ja) | 球技映像解析装置、球技映像解析システム、球技映像解析方法、及び、コンピュータプログラム | |
US20100194892A1 (en) | Video processing device, video processing method, and program | |
JP6720587B2 (ja) | 映像処理装置、映像処理方法および映像処理プログラム | |
US20070064975A1 (en) | Moving object measuring apparatus, moving object measuring system, and moving object measurement | |
EP3514761A1 (en) | Casting a ray projection from a perspective view | |
WO2020235339A1 (ja) | プレイ分析装置、及び、プレイ分析方法 | |
US10950276B2 (en) | Apparatus and method to display event information detected from video data | |
WO2019070011A1 (ja) | 移動体追跡装置及び移動体追跡方法 | |
JP7429887B2 (ja) | 球技映像解析装置、球技映像解析方法、及び、コンピュータプログラム | |
KR101701632B1 (ko) | 판정 방법 및 장치 | |
JP7345108B2 (ja) | プレイ分析装置、プレイ分析方法、及び、コンピュータプログラム | |
KR101802783B1 (ko) | 골프 스윙 표시 방법, 이를 수행하는 모바일 장치 및 이를 포함하는 골프 스윙 분석 시스템 | |
JP7113335B2 (ja) | プレイ分析装置、及び、プレイ分析方法 | |
JP7113336B2 (ja) | プレイ分析装置、及び、プレイ分析方法 | |
KR102454801B1 (ko) | 스포츠 중계를 위한 영상을 결정하는 장치, 방법 및 명령을 기록한 기록 매체 | |
EP3836012B1 (en) | A device, computer program and method for determining handball performed by a player | |
WO2020071092A1 (ja) | プレイ分析装置、及び、プレイ分析方法 | |
JP6941769B2 (ja) | 動画分割方法、動画分割装置および動画処理システム | |
JP7442089B2 (ja) | 球技映像解析装置、球技映像解析方法、及び、コンピュータプログラム | |
JP6303525B2 (ja) | 抽出プログラム、方法、及び装置、並びに野球映像メタ情報作成装置、方法、及びプログラム | |
JP7296546B2 (ja) | プレイ分析装置、及び、プレイ分析方法 | |
JP7300668B2 (ja) | プレイ分析装置、及び、プレイ分析方法 | |
WO2023106201A1 (ja) | プレイ分析装置、プレイ分析方法、及びコンピュータ読み取り可能な記録媒体 | |
JP2021150668A (ja) | 解析情報修正装置、解析情報修正方法、及び、コンピュータプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230220 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230220 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231219 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240118 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7429887 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |