JP2022533754A - ボリュメトリック映像の符号化および復号化のための方法、装置、およびコンピュータプログラム製品 - Google Patents
ボリュメトリック映像の符号化および復号化のための方法、装置、およびコンピュータプログラム製品 Download PDFInfo
- Publication number
- JP2022533754A JP2022533754A JP2021569317A JP2021569317A JP2022533754A JP 2022533754 A JP2022533754 A JP 2022533754A JP 2021569317 A JP2021569317 A JP 2021569317A JP 2021569317 A JP2021569317 A JP 2021569317A JP 2022533754 A JP2022533754 A JP 2022533754A
- Authority
- JP
- Japan
- Prior art keywords
- bitstream
- depth
- block
- patch
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/06—Ray-tracing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T9/00—Image coding
- G06T9/001—Model-based coding, e.g. wire frame
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/25—Image signal generators using stereoscopic image cameras using two or more image sensors with different characteristics other than in their location or field of view, e.g. having different resolutions or colour pickup characteristics; using image signals from one sensor to control the characteristics of another sensor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/56—Particle system, point based geometry or rendering
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Image Generation (AREA)
Abstract
Description
- (1.0,0.0,0.0)、
- (0.0,1.0,0.0)、
- (0.0,0.0,1.0)、
- (-1.0,0.0,0.0)、
- (0.0,-1.0,0.0)、
- (0.0,0.0,-1.0)
● ジオメトリ:WxH YUV420-8bit、
● テクスチャ:WxH YUV420-8bit、
MSE(R1-R2,G1-G2,B1-B2)>閾値;
閾値=20
ここで、R1、G1、B1は、T0に属する属性値であり、R2、G2、B2は、T1に属する属性値である。
● 投影平面のインデックス
○ 平面(1.0,0.0,0.0)および(-1.0,0.0,0.0)のためのインデックス0
○ 平面(0.0,1.0,0.0)および(0.0,-1.0,0.0)のためのインデックス1
○ 平面(0.0,0.0,1.0)および(0.0,0.0,-1.0)のためのインデックス2。
● 2Dバウンディングボックス(u0,v0,u1,v1)
● 深度δ0、接線シフトs0、および複接線シフトr0を用いて表現されたパッチの3D位置(x0,y0,z0)。選定された投影平面に応じて、(δ0、s0、r0)は以下のように計算される:
○ インデックス0、δ0=x0、s0=z0、およびr0=y0
○ インデックス1、δ0=y0、s0=z0、およびr0=x0
○ インデックス2、δ0=z0、s0=x0、およびr0=y0
● TxTブロックごとに、Lを、パッチのインデックスの順序付けられたリストとし、これにより、それらの2Dバウンディングボックスがそのブロックを包含するようにする。リスト内の順序は、2Dバウンディングボックスを符号化するために用いられる順序と同じである。Lは候補パッチのリストと呼ばれる。
● パッチ間の空き空間はパッチとして考慮され、全てのブロックの候補パッチリストに追加される、特別インデックス0を付与される。
● Iを、現在のTxTブロックが属するパッチのインデックスとし、Jを、L内のIの位置とする。インデックスIを明示的に符号化する代わりに、その位置Jが代わりに算術的に符号化され、これはより優れた圧縮効率をもたらす。
● バイナリ値が、同じTxTブロックに属するB0xB0サブブロックに関連付けられ得る。それが少なくとも、パディングされていないピクセルを包含する場合には、値1がサブブロックに関連付けられ、さもなければ、0が関連付けられる。サブブロックが1の値を有する場合には、それは、満杯であると言われ、さもなければ、それは空きサブブロックである。
● TxTブロックの全てのサブブロックが満杯である(すなわち、値1を有する)場合。ブロックは、満杯であると言われる。さもなければ、ブロックは、非満杯であると言われる。
● TxTブロックごとに、それが満杯であるか否かを指示するためのバイナリ情報が符号化され得る。
● ブロックが非満杯である場合には、満杯/空きサブブロックの場所を指示する追加情報が以下のように符号化され得る:
○ 異なる走査順序が、サブブロックのために、例えば、右上または左上の角部から出発して、水平に、鉛直に、または対角線的に定義され得る
○ 符号器が走査順序のうちの1つを選定し、そのインデックスをビットストリームに含めて明示的に信号で通知し得る。
○ サブブロックに関連付けられたバイナリ値が、ランレングス符号化方略を用いることによって符号化され得る。
・ 初期サブブロックのバイナリ値が符号化される。
・ 符号器によって選択された走査順序を追う間に、0および1の連続ラン(continuous run)が検出される。
・ 検出されたランの数が符号化される。
・ 最後のものを除く、各ランの長さも符号化される。
○ TxTブロックごとに、そのブロックを包含する全てのパッチを考慮することによって、候補パッチのリストが作成される。
○ 候補のリストがパッチの逆順に並べ替えられる。
○ ブロックごとに、
1.候補のリストが1つのインデックスを有する場合には、このとき、何も符号化されない。
2.さもなければ、このリスト内のパッチのインデックスが算術的に符号化される。
δ(u,v)=δ0+g(u,v)
s(u,v)=s0-u0+u
r(u,v)=r0-v0+v
ここで、g(u,v)はジオメトリ画像のルマ成分である。
Claims (27)
- 符号化のための方法であって、
- 映像提示フレームを受信することであって、前記映像提示が3次元データを表現する、受信することと、
- 前記映像提示フレームから1つまたは複数のパッチを生成することと、
- 映像フレームのパッチを1つまたは複数のブロックに分割することと、
- パッチの前記1つまたは複数のブロックに関する情報に従ってパッチごとの表面パラメータを決定することと、
- 前記決定された表面パラメータをビットストリームに符号化することと、
- 前記符号化されたビットストリームをレンダリング装置への伝送のために記憶することと、
を含む、方法。 - 復号化のための方法であって、
- 映像提示に関する圧縮ビットストリームを受信することであって、前記ビットストリームが少なくともジオメトリ画像およびテクスチャ画像を含む、受信することと、
- 前記受信されたビットストリームから、映像フレームの1つまたは複数の3次元ブロックに関するデータを復号化することと、
- 前記映像フレームのブロックごとに、1つまたは複数の表面パラメータに関する情報を決定することと、
- 前記1つまたは複数の表面パラメータに従って3次元ブロックのためのバウンディングボックスを生成することと、
- 視点から前記ピクセルの座標への前記3次元ブロックのピクセルごとの光線方向を算出することと、
- 前記生成されたバウンディングボックスに対する前記光線の交差に従って少なくとも2つの点を決定することと、
- 前記決定された少なくとも2つの点の間の点を、レイキャストを終えるための条件が満たされるまでレイキャストすることと、
- ブロックのための1つまたは複数の表面パラメータに関する前記情報に従って前記ジオメトリ画像および前記テクスチャ画像から3次元データを再構成することと、
- 前記再構成された3次元データに従って映像提示をレンダリングのために再構成することと、
を含む、方法。 - ビットストリームを符号化するための装置であって、
- 映像提示フレームを受信するための手段であって、前記映像提示が3次元データを表現する、手段と、
- 前記映像提示フレームから1つまたは複数のパッチを生成するための手段と、
- 映像フレームのパッチを1つまたは複数のブロックに分割するための手段と、
- パッチの前記1つまたは複数のブロックに関する情報に従ってパッチごとの表面パラメータを決定するための手段と、
- 前記決定された表面パラメータをビットストリームに符号化するための手段と、
- 前記符号化されたビットストリームをレンダリング装置への伝送のために記憶するための手段と、
を備える、装置。 - 前記表面パラメータがパッチの深度または深度差である、請求項3に記載の装置。
- 前記表面パラメータが、深度差から決定されたレンダリング厚さパラメータである、請求項3に記載の装置。
- 前記レンダリング厚さパラメータを補足強化情報(SEI)メッセージに符号化するための手段をさらに備える、請求項3~5のいずれか1項に記載の装置。
- 前記レンダリングパラメータがブロックごとに決定される、請求項3~6のいずれか1項に記載の装置。
- 前記レンダリングパラメータが占有マップに符号化される、請求項3~7のいずれか1項に記載の装置。
- 深度レイヤの間の色補間を前記ビットストリームに符号化することをさらに含む、請求項3~8のいずれか1項に記載の装置。
- 少なくとも1つのプロセッサと、コンピュータプログラムコードを含むメモリと、を備える、請求項3~9のいずれか1項に記載の装置。
- ビットストリームを復号化するための装置であって、
- 映像提示に関する圧縮ビットストリームを受信するための手段であって、前記ビットストリームが少なくともジオメトリ画像およびテクスチャ画像を含む、手段と、
- 前記受信されたビットストリームから、映像フレームの1つまたは複数の3次元ブロックに関するデータを復号化するための手段と、
- 前記映像フレームのブロックごとに、1つまたは複数の表面パラメータに関する情報を決定するための手段と、
- 前記1つまたは複数の表面パラメータに従って3次元ブロックのためのバウンディングボックスを生成するための手段と、
- 視点から前記ピクセルの座標への前記3次元ブロックのピクセルごとの光線方向を算出するための手段と、
- 前記生成されたバウンディングボックスに対する前記光線の交差に従って少なくとも2つの点を決定するための手段と、
- 前記決定された少なくとも2つの点の間の点を、レイキャストを終えるための条件が満たされるまでレイキャストするための手段と、
- ブロックのための1つまたは複数の表面パラメータに関する前記情報に従って前記ジオメトリ画像および前記テクスチャ画像から3次元データを再構成するための手段と、
- 前記再構成された3次元データに従って映像提示をレンダリングのために再構成するための手段と、
を備える、装置。 - 1つまたは複数の表面パラメータに関する前記情報がビットストリームから復号化される、請求項11に記載の装置。
- 1つまたは複数の表面パラメータに関する前記情報が様々な深度レイヤのピクセルから決定される、請求項11に記載の装置。
- 前記レイキャストを終えるための前記条件が、ピクセルの位置上の両方の深度レイヤのための深度値を決定することによって、前記視光線からの深度値を算出することによって、および前記視光線からの前記深度値を、前記決定された深度値と比較することによって決定される、請求項11~13のいずれか1項に記載の装置。
- 前記レイキャストを終えるための前記条件が、深度差値およびピクセル座標から形成された別のバウンディングボックスから決定される、請求項11~14のいずれか1項に記載の装置。
- 前記表面パラメータがパッチの深度または深度差である、請求項11~15のいずれか1項に記載の装置。
- 前記表面パラメータが、深度差から決定されたレンダリング厚さパラメータである、請求項11~15のいずれか1項に記載の装置。
- 前記光線方向に基づいて少なくとも2つの点を決定し、2次元座標における前記2つの点の間のあらゆるピクセルをレイキャストすることをさらに含む、請求項11~17のいずれか1項に記載の装置。
- 前記2つの点の間の2次元ピクセルごとに第1および第2の深度レイヤのための深度値を得ることをさらに含む、請求項18に記載の装置。
- 点群コンテンツと前記光線との間の交差が存在するかどうかを決定することをさらに含む、請求項19に記載の装置。
- 前記レンダリング厚さパラメータを補足強化情報(SEI)メッセージから復号化するための手段をさらに備える、請求項11~20のいずれか1項に記載の装置。
- 前記レンダリングパラメータがブロックごとに復号化される、請求項11~21のいずれか1項に記載の装置。
- 前記レンダリングパラメータが占有マップから復号化される、請求項11~22のいずれか1項に記載の装置。
- 深度レイヤの間の色補間を前記ビットストリームから復号化することをさらに含む、請求項11~23のいずれか1項に記載の装置。
- 少なくとも1つのプロセッサと、コンピュータプログラムコードを含むメモリと、を備える、請求項11~24のいずれか1項に記載の装置。
- 少なくとも1つのプロセッサと、コンピュータプログラムコードを含むメモリと、を備える装置であって、前記メモリおよび前記コンピュータプログラムコードが、前記少なくとも1つのプロセッサを用いて、前記装置に、少なくとも以下のこと:
- 映像提示フレームを受信することであって、前記映像提示が3次元データを表現する、受信することと、
- 前記映像提示フレームから1つまたは複数のパッチを生成することと、
- 映像フレームのパッチを1つまたは複数のブロックに分割することと、
- パッチの前記1つまたは複数のブロックに関する情報に従ってパッチごとの表面パラメータを決定することと、
- 前記決定された表面パラメータをビットストリームに符号化することと、
- 前記符号化されたビットストリームをレンダリング装置への伝送のために記憶することと、
を遂行させるように構成されている、装置。 - 少なくとも1つのプロセッサと、コンピュータプログラムコードを含むメモリと、を備える装置であって、前記メモリおよび前記コンピュータプログラムコードが、前記少なくとも1つのプロセッサを用いて、前記装置に、少なくとも以下のこと:
- 映像提示に関する圧縮ビットストリームを受信することであって、前記ビットストリームが少なくともジオメトリ画像およびテクスチャ画像を含む、受信することと、
- 前記受信されたビットストリームから、映像フレームの1つまたは複数の3次元ブロックに関するデータを復号化することと、
- 前記映像フレームのブロックごとに、1つまたは複数の表面パラメータに関する情報を決定することと、
- 前記1つまたは複数の表面パラメータに従って3次元ブロックのためのバウンディングボックスを生成することと、
- 視点から前記ピクセルの座標への前記3次元ブロックのピクセルごとの光線方向を算出することと、
- 前記生成されたバウンディングボックスに対する前記光線の交差に従って少なくとも2つの点を決定することと、
- 前記決定された少なくとも2つの点の間の点を、レイキャストを終えるための条件が満たされるまでレイキャストすることと、
- ブロックのための1つまたは複数の表面パラメータに関する前記情報に従って前記ジオメトリ画像および前記テクスチャ画像から3次元データを再構成することと、
- 前記再構成された3次元データに従って映像提示をレンダリングのために再構成することと、
を遂行させるように構成されている、装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FI20195425 | 2019-05-22 | ||
FI20195425 | 2019-05-22 | ||
PCT/FI2020/050243 WO2020234509A1 (en) | 2019-05-22 | 2020-04-15 | A method, an apparatus and a computer program product for volumetric video encoding and decoding |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022533754A true JP2022533754A (ja) | 2022-07-25 |
JP7344988B2 JP7344988B2 (ja) | 2023-09-14 |
Family
ID=73459024
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021569317A Active JP7344988B2 (ja) | 2019-05-22 | 2020-04-15 | ボリュメトリック映像の符号化および復号化のための方法、装置、およびコンピュータプログラム製品 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20220217400A1 (ja) |
EP (1) | EP3973710A4 (ja) |
JP (1) | JP7344988B2 (ja) |
KR (1) | KR20220011180A (ja) |
CN (1) | CN113853796A (ja) |
WO (1) | WO2020234509A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20220135483A (ko) * | 2021-03-30 | 2022-10-07 | 삼성전자주식회사 | 이동 통신 시스템에서 영상 대화 서비스를 제공하기 위한 방법 및 장치 |
CN113628286B (zh) * | 2021-08-09 | 2024-03-22 | 咪咕视讯科技有限公司 | 视频色域检测方法、装置、计算设备及计算机存储介质 |
WO2023167430A1 (ko) * | 2022-03-04 | 2023-09-07 | 엘지전자 주식회사 | 포인트 클라우드 데이터 송신 장치, 포인트 클라우드 데이터 송신 방법, 포인트 클라우드 데이터 수신 장치 및 포인트 클라우드 데이터 수신 방법 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019198523A1 (ja) * | 2018-04-11 | 2019-10-17 | ソニー株式会社 | 画像処理装置および方法 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9336624B2 (en) * | 2008-10-07 | 2016-05-10 | Mitsubishi Electric Research Laboratories, Inc. | Method and system for rendering 3D distance fields |
US9928640B2 (en) * | 2015-12-18 | 2018-03-27 | Intel Corporation | Decompression and traversal of a bounding volume hierarchy |
US10762668B2 (en) * | 2018-12-28 | 2020-09-01 | Intel Corporation | Context-aware compression with quantization of hierarchical transform matrices |
US10929948B2 (en) * | 2018-12-28 | 2021-02-23 | Intel Corporation | Page cache system and method for multi-agent environments |
US10909741B2 (en) * | 2018-12-28 | 2021-02-02 | Intel Corporation | Speculative execution of hit and intersection shaders on programmable ray tracing architectures |
US10930051B2 (en) * | 2018-12-28 | 2021-02-23 | Intel Corporation | Apparatus and method for general ray tracing queries |
US11127107B2 (en) * | 2019-09-30 | 2021-09-21 | Intel Corporation | Apparatus and method for real time graphics processing using local and cloud-based graphics processing resources |
US11210860B2 (en) * | 2020-01-27 | 2021-12-28 | Facebook Technologies, Llc. | Systems, methods, and media for visualizing occluded physical objects reconstructed in artificial reality |
-
2020
- 2020-04-15 EP EP20809109.0A patent/EP3973710A4/en active Pending
- 2020-04-15 WO PCT/FI2020/050243 patent/WO2020234509A1/en unknown
- 2020-04-15 JP JP2021569317A patent/JP7344988B2/ja active Active
- 2020-04-15 US US17/611,243 patent/US20220217400A1/en active Pending
- 2020-04-15 CN CN202080037271.8A patent/CN113853796A/zh active Pending
- 2020-04-15 KR KR1020217042062A patent/KR20220011180A/ko unknown
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019198523A1 (ja) * | 2018-04-11 | 2019-10-17 | ソニー株式会社 | 画像処理装置および方法 |
Also Published As
Publication number | Publication date |
---|---|
EP3973710A4 (en) | 2023-05-03 |
JP7344988B2 (ja) | 2023-09-14 |
KR20220011180A (ko) | 2022-01-27 |
EP3973710A1 (en) | 2022-03-30 |
CN113853796A (zh) | 2021-12-28 |
WO2020234509A1 (en) | 2020-11-26 |
US20220217400A1 (en) | 2022-07-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3751857A1 (en) | A method, an apparatus and a computer program product for volumetric video encoding and decoding | |
US11509933B2 (en) | Method, an apparatus and a computer program product for volumetric video | |
EP3669333B1 (en) | Sequential encoding and decoding of volymetric video | |
US11599968B2 (en) | Apparatus, a method and a computer program for volumetric video | |
US11202086B2 (en) | Apparatus, a method and a computer program for volumetric video | |
US20230068178A1 (en) | A method, an apparatus and a computer program product for volumetric video encoding and decoding | |
EP3104603B1 (en) | Efficient image receiver for multiple views | |
JP7344988B2 (ja) | ボリュメトリック映像の符号化および復号化のための方法、装置、およびコンピュータプログラム製品 | |
WO2019138163A1 (en) | A method and technical equipment for encoding and decoding volumetric video | |
WO2021260266A1 (en) | A method, an apparatus and a computer program product for volumetric video coding | |
WO2019122504A1 (en) | Method for encoding and decoding volumetric video data | |
WO2021205068A1 (en) | A method, an apparatus and a computer program product for volumetric video coding | |
WO2019077199A1 (en) | APPARATUS, METHOD, AND COMPUTER PROGRAM FOR VOLUMETRIC VIDEO | |
EP4032314A1 (en) | A method, an apparatus and a computer program product for video encoding and video decoding | |
WO2019185983A1 (en) | A method, an apparatus and a computer program product for encoding and decoding digital volumetric video | |
WO2022219230A1 (en) | A method, an apparatus and a computer program product for video encoding and video decoding | |
WO2022074286A1 (en) | A method, an apparatus and a computer program product for video encoding and video decoding | |
WO2019211519A1 (en) | A method and an apparatus for volumetric video encoding and decoding | |
Colleu | A floating polygon soup representation for 3D video |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220105 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20221122 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221205 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20230306 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230508 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230803 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230904 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7344988 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |