JP7079242B2 - 画像表示方法及び画像表示装置 - Google Patents
画像表示方法及び画像表示装置 Download PDFInfo
- Publication number
- JP7079242B2 JP7079242B2 JP2019514511A JP2019514511A JP7079242B2 JP 7079242 B2 JP7079242 B2 JP 7079242B2 JP 2019514511 A JP2019514511 A JP 2019514511A JP 2019514511 A JP2019514511 A JP 2019514511A JP 7079242 B2 JP7079242 B2 JP 7079242B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- viewpoint
- user interface
- images
- image display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 69
- 230000008859 change Effects 0.000 claims description 19
- 230000004044 response Effects 0.000 claims description 11
- 230000002441 reversible effect Effects 0.000 claims description 10
- 238000003384 imaging method Methods 0.000 claims 2
- 238000010586 diagram Methods 0.000 description 39
- 230000005540 biological transmission Effects 0.000 description 35
- 238000012545 processing Methods 0.000 description 25
- 230000008569 process Effects 0.000 description 15
- 238000004891 communication Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 7
- 230000006835 compression Effects 0.000 description 6
- 238000007906 compression Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 238000004590 computer program Methods 0.000 description 4
- 238000010079 rubber tapping Methods 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 230000007613 environmental effect Effects 0.000 description 3
- 230000007704 transition Effects 0.000 description 3
- 240000004050 Pentaglottis sempervirens Species 0.000 description 2
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000013139 quantization Methods 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/239—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
- H04N21/2393—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
- H04N21/4854—End-user interface for client configuration for modifying image parameters, e.g. image brightness, contrast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
- H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Description
本実施の形態では、多視点カメラで撮影された多視点映像と、その多視点映像を利用して生成された自由視点映像とを含む複数の映像を複数のユーザに同時に提供し、各ユーザが視聴する映像を変更可能な画像配信システムについて説明する。
本実施の形態では、画像表示装置103におけるUIの詳細について説明する。なお、画像表示装置103の構成は図9と同様である。
101 カメラ
102 画像配信装置
103 画像表示装置
104 自由視点映像生成装置
105 統合映像送信装置
151A、151B、151C、151D、151E、151F 統合画像
152、152A、152B、152C 画像
153 視点映像
201 統合映像生成部
202 送信部
203 視聴情報解析部
301 受信部
302 視点映像選択部
303 映像表示部
304 UI部
305 UI制御部
306 視聴情報送信部
401、401A、401B 視点制御UI
402、402A、402B 速度制御UI
403 インジケータ
411 軌跡
412、424、432、441 オブジェクト
421 第1操作部
422 第2操作部
423 選手
431 環境情報
Claims (16)
- 同一シーンを異なる視点から見た複数の映像であって、実映像を基に生成された仮想映像を少なくとも一つ含む複数の映像を一つのフレーム内に配置した統合映像を表示する表示ステップと、
前記複数の映像の視点を選択するための第1ユーザインタフェースを表示し、前記第1ユーザインタフェースを介した入力に応じて、前記複数の映像の視点を変更する視点変更ステップと、
前記複数の映像の再生速度及び再生方向を変更するための第2ユーザインタフェースを表示し、前記第2ユーザインタフェースを介した入力に応じて、前記複数の映像の再生速度及び再生方向を変更する再生速度変更ステップとを含み、
前記第2ユーザインタフェースに対する操作が終了した場合、操作終了時の前記再生速度及び前記再生方向が維持される
画像表示方法。 - 前記第2ユーザインタフェースでは、オブジェクトを第1方向に移動させることで前記再生速度が変更され、前記オブジェクトを前記第1方向と直行する第2方向に移動させることで前記再生方向が変更される
請求項1記載の画像表示方法。 - 前記第2ユーザインタフェースは、ダイアルを含み、前記ダイアルの回転量に応じて前記再生速度が変更され、前記ダイアルの回転方向に応じて前記再生方向が変更される
請求項1記載の画像表示方法。 - 前記第2ユーザインタフェースは、スライドバーを含み、前記スライドバーのスライド
量に応じて前記再生速度が変更され、前記スライドバーのスライド方向に応じて前記再生方向が変更される
請求項1記載の画像表示方法。 - 前記第1ユーザインタフェース及び前記第2ユーザインタフェースの少なくとも一方は、非操作時において透過表示される
請求項1~4のいずれか1項に記載の画像表示方法。 - 画面内の予め定められた位置への選択操作に基づき、前記予め定められた位置に前記第1ユーザインタフェース及び前記第2ユーザインタフェースの少なくとも一方が表示される
請求項1~4のいずれか1項に記載の画像表示方法。 - 画面内の任意の位置への選択操作に基づき、選択された位置に前記第1ユーザインタフェース及び前記第2ユーザインタフェースの少なくとも一方が表示される
請求項1~4のいずれか1項に記載の画像表示方法。 - 前記第1ユーザインタフェース及び前記第2ユーザインタフェースの少なくとも一方は、前記複数の映像の各々に対応して表示され、
対応する前記第1ユーザインタフェース又は前記第2ユーザインタフェースへの操作に基づき、対応する映像の視点又は再生速度が変更される
請求項1~7のいずれか1項に記載の画像表示方法。 - 前記第1ユーザインタフェース及び前記第2ユーザインタフェースの少なくとも一方の操作に基づき、前記複数の映像の視点又は再生速度が変更される
請求項1~7のいずれか1項に記載の画像表示方法。 - 前記第1ユーザインタフェースは、選択可能な視点位置の軌跡と、前記軌跡上に配置され、視点位置を示すオブジェクトとを含み、前記オブジェクトを前記軌跡上の任意の位置に移動させることで、移動後の前記軌跡上に位置に対応する視点に前記複数の映像の視点が変更される
請求項1~9のいずれか1項に記載の画像表示方法。 - 前記第1ユーザインタフェースは、複数の注視点のいずれかを選択するための第1操作部と、前記複数の注視点のうち、選択された注視点を写す複数の視点からいずれかの視点を選択するための第2操作部とを含む
請求項1~9のいずれか1項に記載の画像表示方法。 - 前記第1ユーザインタフェースでは、周辺環境を二次元又は三次元的に示す環境情報上に、複数の視点位置に対応する複数のオブジェクトが配置されており、前記複数のオブジェクトのいずれかが選択されることで、選択されたオブジェクトに対応する視点位置の映像に前記複数の映像が変更される
請求項1~7のいずれか1項に記載の画像表示方法。 - 前記複数の映像は、第1映像と、第2映像とを含み、
前記第1映像の第1解像度は、前記第2映像の第2解像度と異なる
請求項1~12のいずれか1項に記載の画像表示方法。 - 前記複数の映像は、第1画像と、第2画像とを含み、
前記第1画像と前記第2画像は、同一視点から撮像され、
前記第1画像の撮像タイミングと、前記第2画像の撮像タイミングは異なる
請求項1~13のいずれか1項に記載の画像表示方法。 - 前記視点変更ステップでは、前記再生速度変更ステップで前記複数の映像を逆再生するときに、視点変更された順序の逆順序で視点を変更する
請求項1~14のいずれか1項に記載の画像表示方法。 - 同一シーンを異なる視点から見た複数の映像であって、実映像を基に生成された仮想映像を少なくとも一つ含む複数の映像を一つのフレーム内に配置した統合映像を表示する表示部と、
前記複数の映像の視点を選択するための第1ユーザインタフェースを表示し、前記第1ユーザインタフェースを介した入力に応じて、前記複数の映像の視点を変更する視点変更部と、
前記複数の映像の再生速度及び再生方向を変更するための第2ユーザインタフェースを表示し、前記第2ユーザインタフェースを介した入力に応じて、前記複数の映像の再生速度及び再生方向を変更する再生速度変更部とを備え、
前記第2ユーザインタフェースに対する操作が終了した場合、操作終了時の前記再生速度及び前記再生方向が維持される
画像表示装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201762489582P | 2017-04-25 | 2017-04-25 | |
US62/489,582 | 2017-04-25 | ||
PCT/JP2018/016517 WO2018199052A1 (ja) | 2017-04-25 | 2018-04-24 | 画像表示方法及び画像表示装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2018199052A1 JPWO2018199052A1 (ja) | 2020-03-12 |
JP7079242B2 true JP7079242B2 (ja) | 2022-06-01 |
Family
ID=63920281
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019514511A Active JP7079242B2 (ja) | 2017-04-25 | 2018-04-24 | 画像表示方法及び画像表示装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US11102520B2 (ja) |
JP (1) | JP7079242B2 (ja) |
WO (1) | WO2018199052A1 (ja) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018155670A1 (ja) * | 2017-02-27 | 2018-08-30 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 画像配信方法、画像表示方法、画像配信装置及び画像表示装置 |
JP6922369B2 (ja) * | 2017-04-14 | 2021-08-18 | 富士通株式会社 | 視点選択支援プログラム、視点選択支援方法及び視点選択支援装置 |
JP2019125303A (ja) * | 2018-01-19 | 2019-07-25 | キヤノン株式会社 | 情報処理装置、情報処理方法、およびプログラム |
USD914734S1 (en) * | 2018-02-05 | 2021-03-30 | St Engineering Land Systems Ltd | Display screen or portion thereof with graphical user interface |
JP7170441B2 (ja) * | 2018-07-12 | 2022-11-14 | キヤノン株式会社 | 情報処理装置、情報処理方法及びプログラム |
CN113228690B (zh) * | 2018-12-25 | 2023-09-08 | 索尼集团公司 | 视频再现装置、再现方法和程序 |
JP7229040B2 (ja) | 2019-02-15 | 2023-02-27 | キヤノン株式会社 | 情報処理装置及びその制御方法、プログラム |
JP7353782B2 (ja) * | 2019-04-09 | 2023-10-02 | キヤノン株式会社 | 情報処理装置、情報処理方法、及びプログラム |
US11488633B2 (en) | 2019-04-11 | 2022-11-01 | Sony Group Corporation | Playback device |
JP7387286B2 (ja) * | 2019-05-07 | 2023-11-28 | キヤノン株式会社 | 情報処理装置、情報処理方法、及びプログラム |
JP7358078B2 (ja) * | 2019-06-07 | 2023-10-10 | キヤノン株式会社 | 情報処理装置、情報処理装置の制御方法、及び、プログラム |
JP7455524B2 (ja) * | 2019-07-11 | 2024-03-26 | キヤノン株式会社 | 情報処理装置、設定方法、及びプログラム |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013183209A (ja) | 2012-02-29 | 2013-09-12 | Nagoya Univ | 多視点映像ストリーム視聴システムおよび方法 |
JP2016220186A (ja) | 2015-05-22 | 2016-12-22 | カシオ計算機株式会社 | 表示装置、表示方法及びプログラム |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5850352A (en) * | 1995-03-31 | 1998-12-15 | The Regents Of The University Of California | Immersive video, including video hypermosaicing to generate from multiple video views of a scene a three-dimensional video mosaic from which diverse virtual video scene images are synthesized, including panoramic, scene interactive and stereoscopic images |
US6631240B1 (en) * | 1997-07-23 | 2003-10-07 | University Of Washington | Multiresolution video |
JP3681633B2 (ja) | 2000-11-27 | 2005-08-10 | 日本電信電話株式会社 | 遠隔観戦サービスサーバ |
JP2013012036A (ja) * | 2011-06-29 | 2013-01-17 | Nippon Telegr & Teleph Corp <Ntt> | 映像再生制御装置、映像再生制御方法、及び映像再生制御プログラム |
JP6607433B2 (ja) * | 2014-06-23 | 2019-11-20 | パナソニックIpマネジメント株式会社 | 映像配信方法及びサーバ |
EP3133819A4 (en) | 2014-04-14 | 2017-02-22 | Panasonic Intellectual Property Management Co., Ltd. | Image delivery method, image reception method, server, terminal apparatus, and image delivery system |
WO2016092864A1 (ja) * | 2014-12-13 | 2016-06-16 | Movin合同会社 | ユーザーインタフェースを提供する方法、プログラム及び電子機器 |
US10162516B2 (en) | 2015-05-22 | 2018-12-25 | Casio Computer Co., Ltd. | Display apparatus for displaying images |
JP2017016275A (ja) * | 2015-06-29 | 2017-01-19 | ヤマハ株式会社 | 制御方法 |
-
2018
- 2018-04-24 WO PCT/JP2018/016517 patent/WO2018199052A1/ja active Application Filing
- 2018-04-24 JP JP2019514511A patent/JP7079242B2/ja active Active
-
2019
- 2019-10-24 US US16/662,759 patent/US11102520B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013183209A (ja) | 2012-02-29 | 2013-09-12 | Nagoya Univ | 多視点映像ストリーム視聴システムおよび方法 |
JP2016220186A (ja) | 2015-05-22 | 2016-12-22 | カシオ計算機株式会社 | 表示装置、表示方法及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
WO2018199052A1 (ja) | 2018-11-01 |
US11102520B2 (en) | 2021-08-24 |
JPWO2018199052A1 (ja) | 2020-03-12 |
US20200059675A1 (en) | 2020-02-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7079242B2 (ja) | 画像表示方法及び画像表示装置 | |
JP7130653B2 (ja) | 画像表示方法、画像配信方法、画像表示装置及び画像配信装置 | |
JP7212611B2 (ja) | 画像配信方法、画像表示方法、画像配信装置及び画像表示装置 | |
JP5920708B2 (ja) | 多視点映像ストリーム視聴システムおよび方法 | |
JP6309749B2 (ja) | 画像データ再生装置および画像データ生成装置 | |
EP2490179B1 (en) | Method and apparatus for transmitting and receiving a panoramic video stream | |
JP7132730B2 (ja) | 情報処理装置および情報処理方法 | |
CN106605407A (zh) | 用于捕获、流传输和/或回放内容的方法和装置 | |
WO2020181084A1 (en) | Method, apparatus, medium, terminal, and device for multi-angle free-perspective interaction | |
US11997413B2 (en) | Media content presentation | |
JP2018511971A (ja) | 解像度低下画像を生成および使用するならびに/またはそのような画像を再生デバイスまたはコンテンツ配布デバイスに通信するための方法および装置 | |
KR101037797B1 (ko) | 복수의 입력 비디오(디지털,아날로그,ip 압축 비디오)들을 가상 그래픽 3차원 비디오 월의 가상모니터에 비디오 택스쳐링의 방식을 이용하여 표현하고 이를 가상 3차원 그래픽 공간에 배치한 가상카메라를 통해 실시간 3차원 렌더링을 통해 실시간으로 모니터에 보여 주는 매트릭스 및 스위처/믹서 기능을 갖는 3차원 공간속의 비디오 월을 보여 주는 멀티뷰 시스템 | |
CN111669567B (zh) | 多角度自由视角视频数据生成方法及装置、介质、服务器 | |
CN111669561B (zh) | 多角度自由视角图像数据处理方法及装置、介质、设备 | |
WO2019123957A1 (ja) | 表示制御装置、表示制御方法 | |
KR20190011224A (ko) | 6자유도 지원 360도 vr 영상 획득 및 재현을 위한 방법 및 그 장치 | |
JP6468847B2 (ja) | 画像復号装置、画像復号方法、及びプログラム | |
JP2020524450A (ja) | 多チャネル映像のための伝送システム及びその制御方法、多チャネル映像再生方法及びその装置 | |
CN111669570B (zh) | 多角度自由视角视频数据处理方法及装置、介质、设备 | |
KR102278748B1 (ko) | 360 vr 인터랙티브 중계를 위한 사용자 인터페이스 및 방법 | |
JPWO2019004073A1 (ja) | 画像配置決定装置、表示制御装置、画像配置決定方法、表示制御方法及びプログラム | |
EP3635958B1 (en) | Image processing device and system | |
KR20200001597A (ko) | 다채널 영상 생성 방법, 다채널 영상 재생 방법 및 다채널 영상 재생 프로그램 | |
JP2018174376A (ja) | 映像配信システム、端末装置及び映像データ配信装置 | |
CN111669568B (zh) | 多角度自由视角交互方法及装置、介质、终端、设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190712 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210409 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210409 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220426 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220520 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7079242 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |