JP7444238B2 - 情報処理プログラム、装置、及び方法 - Google Patents
情報処理プログラム、装置、及び方法 Download PDFInfo
- Publication number
- JP7444238B2 JP7444238B2 JP2022507936A JP2022507936A JP7444238B2 JP 7444238 B2 JP7444238 B2 JP 7444238B2 JP 2022507936 A JP2022507936 A JP 2022507936A JP 2022507936 A JP2022507936 A JP 2022507936A JP 7444238 B2 JP7444238 B2 JP 7444238B2
- Authority
- JP
- Japan
- Prior art keywords
- time
- ice
- information processing
- athlete
- sound signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 87
- 238000000034 method Methods 0.000 title claims description 32
- 230000005236 sound signal Effects 0.000 claims description 63
- 230000001360 synchronised effect Effects 0.000 claims description 11
- 230000008034 disappearance Effects 0.000 claims description 6
- 238000003672 processing method Methods 0.000 claims description 4
- 238000010191 image analysis Methods 0.000 claims 1
- 230000008014 freezing Effects 0.000 description 22
- 238000007710 freezing Methods 0.000 description 22
- 238000010586 diagram Methods 0.000 description 12
- 238000005516 engineering process Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 6
- 239000000284 extract Substances 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000003111 delayed effect Effects 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
- A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/215—Motion-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
- H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8547—Content authoring involving timestamps for synchronizing content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B2220/00—Measuring of physical parameters relating to sporting activity
- A63B2220/10—Positions
- A63B2220/13—Relative positions
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B2220/00—Measuring of physical parameters relating to sporting activity
- A63B2220/80—Special sensors, transducers or devices therefor
- A63B2220/806—Video cameras
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B2220/00—Measuring of physical parameters relating to sporting activity
- A63B2220/80—Special sensors, transducers or devices therefor
- A63B2220/807—Photo cameras
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B2220/00—Measuring of physical parameters relating to sporting activity
- A63B2220/80—Special sensors, transducers or devices therefor
- A63B2220/808—Microphones
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B2220/00—Measuring of physical parameters relating to sporting activity
- A63B2220/80—Special sensors, transducers or devices therefor
- A63B2220/83—Special sensors, transducers or devices therefor characterised by the position of the sensor
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B2244/00—Sports without balls
- A63B2244/18—Skating
- A63B2244/183—Artistic or figure skating
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30221—Sports video; Sports image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30241—Trajectory
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Physical Education & Sports Medicine (AREA)
- Computer Security & Cryptography (AREA)
- Image Analysis (AREA)
- User Interface Of Digital Computer (AREA)
- Studio Devices (AREA)
- Devices For Executing Special Programs (AREA)
Description
まず、第1実施形態に係る情報処理システムの概要について説明する。図1に示すように、情報処理システム100は、情報処理装置10と、マイク20と、カメラ22とを含む。情報処理システム100は、マイク20から出力される音信号、及びカメラ22から出力される映像に対して情報処理を行い、競技者の位置の軌跡上における、離氷点から着氷点までのジャンプの区間を特定する。
次に、第2実施形態について説明する。なお、第2実施形態に係る情報処理システムにおいて、第1実施形態に係る情報処理システム100と同様の構成については、同一符号を付して詳細な説明を省略する。
12、212 取得部
14 推定部
16、216 特定部
18、218 出力部
19 算出部
20 マイク
22 カメラ、第1カメラ
24 第2カメラ
30 スケートリンク
32 競技者
34 ブレードの先端
36 ブレードの終端
38 画像
40 コンピュータ
41 CPU
42 メモリ
43 記憶部
49 記憶媒体
50、250 情報処理プログラム
100、200 情報処理システム
Claims (10)
- スケートリンクを含む会場内に設けられたマイクで集音された音信号、及び前記スケートリンク上の競技者を撮影した第1の映像を取得し、
前記音信号に基づく氷の音の消失及び復帰に応じて、前記競技者が行ったジャンプの離氷時刻及び着氷時刻を推定し、
前記音信号の時刻情報と前記第1の映像の時刻情報とを同期させ、前記第1の映像に基づく前記スケートリンク上での前記競技者の位置の軌跡において、前記離氷時刻に対応する位置、及び前記着氷時刻に対応する位置の各々を特定する
ことを含む処理をコンピュータに実行させるための情報処理プログラムであって、
前記軌跡における前記競技者の位置は、前記第1の映像に含まれるフレームの各々に対応して取得されており、
前記離氷時刻の直前の時刻情報に対応するフレームから取得された位置と、前記離氷時刻の直後の時刻情報に対応するフレームから取得された位置との間で、前記離氷時刻に対応する位置を特定し、
前記着氷時刻の直前の時刻情報に対応するフレームから取得された位置と、前記着氷時刻の直後の時刻情報に対応するフレームから取得された位置との間で、前記着氷時刻に対応する位置を特定する
情報処理プログラム。 - 前記音信号の時刻情報と前記第1の映像の時刻情報とを同期させる際、前記第1の映像に対する前記音信号の遅延時間を反映させる請求項1に記載の情報処理プログラム。
- 前記コンピュータに、さらに、
前記スケートリンクを表す画像に、前記競技者の位置の軌跡を示す画像を重畳すると共に、特定したジャンプの区間を、前記軌跡における他の区間とは異なる表示態様で表示するための画像データを出力する
処理を実行させるための請求項1又は請求項2に記載の情報処理プログラム。 - 前記コンピュータに、さらに、
前記離氷時刻に対応する位置と前記着氷時刻に対応する位置とを通る直線を、前記ジャンプの回転を判定するための基準線として特定する
処理を実行させるための請求項1~請求項3のいずれか1項に記載の情報処理プログラム。 - 前記コンピュータに、さらに、
前記スケートリンク上の競技者及び前記競技者が装着する装着物の所定部位の3次元位置を特定可能に撮影した第2の映像を取得し、
前記音信号の時刻情報と前記第2の映像の時刻情報とを同期させ、前記第2の映像に含まれる前記ジャンプの区間に対応するフレームの各々から3次元画像解析により取得される前記所定部位の3次元位置に基づいて、前記基準線に対する前記所定部位の角度を算出する
処理を実行させる請求項4に記載の情報処理プログラム。 - 前記所定部位は、前記競技者が装着するスケートシューズのブレードの向きを特定可能な部位である請求項5に記載の情報処理プログラム。
- 前記マイクは、前記スケートリンクの氷中に設けられる請求項1~請求項6のいずれか1項に記載の情報処理プログラム。
- 前記音信号に含まれる所定の周波数成分を除去した後の音信号に基づいて、前記離氷時刻及び前記着氷時刻を推定する請求項1~請求項7のいずれか1項に記載の情報処理プログラム。
- スケートリンクを含む会場内に設けられたマイクで集音された音信号、及び前記スケートリンク上の競技者を撮影した第1の映像を取得する取得部と、
前記音信号に基づく氷の音の消失及び復帰に応じて、前記競技者が行ったジャンプの離氷時刻及び着氷時刻を推定する推定部と、
前記音信号の時刻情報と前記第1の映像の時刻情報とを同期させ、前記第1の映像に基づく前記スケートリンク上での前記競技者の位置の軌跡において、前記離氷時刻に対応する位置、及び前記着氷時刻に対応する位置の各々を特定する特定部と、を含み、
前記軌跡における前記競技者の位置は、前記第1の映像に含まれるフレームの各々に対応して取得されており、
前記特定部は、
前記離氷時刻の直前の時刻情報に対応するフレームから取得された位置と、前記離氷時刻の直後の時刻情報に対応するフレームから取得された位置との間で、前記離氷時刻に対応する位置を特定し、
前記着氷時刻の直前の時刻情報に対応するフレームから取得された位置と、前記着氷時刻の直後の時刻情報に対応するフレームから取得された位置との間で、前記着氷時刻に対応する位置を特定する
情報処理装置。 - スケートリンクを含む会場内に設けられたマイクで集音された音信号、及び前記スケートリンク上の競技者を撮影した第1の映像を取得し、
前記音信号に基づく氷の音の消失及び復帰に応じて、前記競技者が行ったジャンプの離氷時刻及び着氷時刻を推定し、
前記音信号の時刻情報と前記第1の映像の時刻情報とを同期させ、前記第1の映像に基づく前記スケートリンク上での前記競技者の位置の軌跡において、前記離氷時刻に対応する位置、及び前記着氷時刻に対応する位置の各々を特定する
ことを含む処理をコンピュータが実行する情報処理方法であって、
前記軌跡における前記競技者の位置は、前記第1の映像に含まれるフレームの各々に対応して取得されており、
前記離氷時刻の直前の時刻情報に対応するフレームから取得された位置と、前記離氷時刻の直後の時刻情報に対応するフレームから取得された位置との間で、前記離氷時刻に対応する位置を特定し、
前記着氷時刻の直前の時刻情報に対応するフレームから取得された位置と、前記着氷時刻の直後の時刻情報に対応するフレームから取得された位置との間で、前記着氷時刻に対応する位置を特定する
情報処理方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2020/012122 WO2021186645A1 (ja) | 2020-03-18 | 2020-03-18 | 情報処理プログラム、装置、及び方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JPWO2021186645A1 JPWO2021186645A1 (ja) | 2021-09-23 |
JPWO2021186645A5 JPWO2021186645A5 (ja) | 2022-10-27 |
JP7444238B2 true JP7444238B2 (ja) | 2024-03-06 |
Family
ID=77771747
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022507936A Active JP7444238B2 (ja) | 2020-03-18 | 2020-03-18 | 情報処理プログラム、装置、及び方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20220394322A1 (ja) |
EP (1) | EP4093024A4 (ja) |
JP (1) | JP7444238B2 (ja) |
KR (1) | KR20220128433A (ja) |
CN (1) | CN115136591A (ja) |
WO (1) | WO2021186645A1 (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013235534A (ja) | 2012-05-11 | 2013-11-21 | Seiko Epson Corp | センサーユニット、運動解析装置 |
WO2016092933A1 (ja) | 2014-12-08 | 2016-06-16 | ソニー株式会社 | 情報処理装置、情報処理方法およびプログラム |
WO2016098415A1 (ja) | 2014-12-18 | 2016-06-23 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
JP2018189924A (ja) | 2017-05-11 | 2018-11-29 | キヤノン株式会社 | 情報処理装置、情報処理方法、およびプログラム |
JP2019033869A (ja) | 2017-08-14 | 2019-03-07 | ソニー株式会社 | 情報処理装置、情報処理方法、及び、プログラム |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6539336B1 (en) * | 1996-12-12 | 2003-03-25 | Phatrat Technologies, Inc. | Sport monitoring system for determining airtime, speed, power absorbed and other factors such as drop distance |
DE19614253A1 (de) * | 1996-03-05 | 1997-09-11 | Karl Leonhardtsberger | Elektronisches Aufzeichnungs- und Wiedergabeverfahren für Bewegungsabläufe auf Sportplätzen und/oder in Sport- und Eislaufhallen |
JP6213146B2 (ja) | 2013-10-24 | 2017-10-18 | ソニー株式会社 | 情報処理装置、記録媒体、および情報処理方法 |
US10083537B1 (en) * | 2016-02-04 | 2018-09-25 | Gopro, Inc. | Systems and methods for adding a moving visual element to a video |
KR20220128404A (ko) * | 2020-02-27 | 2022-09-20 | 후지쯔 가부시끼가이샤 | 정보 처리 프로그램, 장치 및 방법 |
-
2020
- 2020-03-18 CN CN202080096865.6A patent/CN115136591A/zh active Pending
- 2020-03-18 KR KR1020227028571A patent/KR20220128433A/ko unknown
- 2020-03-18 EP EP20925729.4A patent/EP4093024A4/en active Pending
- 2020-03-18 WO PCT/JP2020/012122 patent/WO2021186645A1/ja unknown
- 2020-03-18 JP JP2022507936A patent/JP7444238B2/ja active Active
-
2022
- 2022-08-17 US US17/890,024 patent/US20220394322A1/en active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013235534A (ja) | 2012-05-11 | 2013-11-21 | Seiko Epson Corp | センサーユニット、運動解析装置 |
WO2016092933A1 (ja) | 2014-12-08 | 2016-06-16 | ソニー株式会社 | 情報処理装置、情報処理方法およびプログラム |
WO2016098415A1 (ja) | 2014-12-18 | 2016-06-23 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
JP2018189924A (ja) | 2017-05-11 | 2018-11-29 | キヤノン株式会社 | 情報処理装置、情報処理方法、およびプログラム |
JP2019033869A (ja) | 2017-08-14 | 2019-03-07 | ソニー株式会社 | 情報処理装置、情報処理方法、及び、プログラム |
Also Published As
Publication number | Publication date |
---|---|
US20220394322A1 (en) | 2022-12-08 |
EP4093024A1 (en) | 2022-11-23 |
JPWO2021186645A1 (ja) | 2021-09-23 |
EP4093024A4 (en) | 2023-03-01 |
CN115136591A (zh) | 2022-09-30 |
KR20220128433A (ko) | 2022-09-20 |
WO2021186645A1 (ja) | 2021-09-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10771760B2 (en) | Information processing device, control method of information processing device, and storage medium | |
EP2227299B1 (en) | Methods and processes for detecting a mark on a playing surface and for tracking an object | |
JP6641163B2 (ja) | オブジェクト追跡装置及びそのプログラム | |
WO2016111069A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
KR102622909B1 (ko) | 스포츠 공 타격 요소의 충격 특성을 결정하는 시스템 및 방법 | |
WO2018226692A1 (en) | Techniques for object tracking | |
KR20150128886A (ko) | 운동 기술들에 대한 동기화된 디스플레이를 위한 시스템 및 방법과, 비일시적 컴퓨터 판독가능 매체 | |
JP2004500756A (ja) | ビデオシーケンスと時空正規化との調整および合成 | |
US20160065984A1 (en) | Systems and methods for providing digital video with data identifying motion | |
EP4358035A1 (en) | Apparatus, systems and methods for shadow assisted object recognition and tracking | |
US20220392222A1 (en) | Information processing program, device, and method | |
JP7444238B2 (ja) | 情報処理プログラム、装置、及び方法 | |
WO2022215116A1 (ja) | 情報処理プログラム、装置、及び方法 | |
JP2003304444A (ja) | 画像合成装置及び画像合成方法 | |
JP7074059B2 (ja) | 情報処理装置及び情報処理システム | |
JPWO2021171470A5 (ja) | ||
JP5934865B2 (ja) | 反復動作のパラメータをリアルタイムに決定するシステムおよび方法 | |
JP7054950B1 (ja) | 位置計測システム、及び位置計測方法 | |
JP6772593B2 (ja) | 移動体識別装置、移動体識別システム、移動体識別方法及びプログラム | |
JP2022160233A (ja) | 情報処理装置、情報処理方法およびプログラム | |
JPWO2021186645A5 (ja) | ||
KR101231587B1 (ko) | 영상 비교 처리 장치 | |
JP2023146131A (ja) | 音声映像データ同期処理装置および方法 | |
JP2023048531A (ja) | 情報処理装置、情報処理方法、プログラム、及び音響自動合成システム | |
KR20220114129A (ko) | 스포츠 기술들에 대한 동기화된 디스플레이를 위한 시스템 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220810 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220810 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230627 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230804 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240123 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240205 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7444238 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |