JP2018200721A - 生成装置、生成方法、及び生成プログラム - Google Patents
生成装置、生成方法、及び生成プログラム Download PDFInfo
- Publication number
- JP2018200721A JP2018200721A JP2018159729A JP2018159729A JP2018200721A JP 2018200721 A JP2018200721 A JP 2018200721A JP 2018159729 A JP2018159729 A JP 2018159729A JP 2018159729 A JP2018159729 A JP 2018159729A JP 2018200721 A JP2018200721 A JP 2018200721A
- Authority
- JP
- Japan
- Prior art keywords
- image
- information
- superimposed
- generation
- content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 38
- 238000003860 storage Methods 0.000 description 35
- 238000012545 processing Methods 0.000 description 26
- 239000000284 extract Substances 0.000 description 25
- 230000008569 process Effects 0.000 description 18
- 238000010586 diagram Methods 0.000 description 17
- 238000009826 distribution Methods 0.000 description 17
- 230000010365 information processing Effects 0.000 description 15
- 238000004891 communication Methods 0.000 description 12
- 238000007796 conventional method Methods 0.000 description 12
- 238000004519 manufacturing process Methods 0.000 description 12
- 238000000605 extraction Methods 0.000 description 11
- 238000004458 analytical method Methods 0.000 description 9
- 101710171220 30S ribosomal protein S12 Proteins 0.000 description 8
- 230000000694 effects Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 101100135609 Arabidopsis thaliana PAP10 gene Proteins 0.000 description 6
- 101710171221 30S ribosomal protein S11 Proteins 0.000 description 5
- 101710171225 30S ribosomal protein S18 Proteins 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 5
- 230000008859 change Effects 0.000 description 5
- 230000000877 morphologic effect Effects 0.000 description 3
- 238000003058 natural language processing Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 102100031476 Cytochrome P450 1A1 Human genes 0.000 description 1
- 102100026533 Cytochrome P450 1A2 Human genes 0.000 description 1
- 101000941690 Homo sapiens Cytochrome P450 1A1 Proteins 0.000 description 1
- 101000855342 Homo sapiens Cytochrome P450 1A2 Proteins 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000008094 contradictory effect Effects 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
Landscapes
- Processing Or Creating Images (AREA)
- Editing Of Facsimile Originals (AREA)
- Image Analysis (AREA)
Abstract
Description
〔1.生成処理〕
まず、図1を用いて、実施形態に係る生成処理の一例について説明する。図1は、実施形態に係る生成処理の一例を示す図である。図1に示す生成処理は、生成装置100(図3参照)により実行される。図1では、生成装置100は、画像に含まれる物体(オブジェクト)の位置(範囲)を示す特徴領域情報に基づいて、ユーザに注目させたい対象物に関する関連情報を画像に重畳させた重畳画像(コンテンツ)を生成する例を示す。具体的には、生成装置100は、対象物を含む画像と文字情報に基づいて画像から抽出された対象物の特徴領域情報に基づいて、文字情報から生成された対象物に関連する関連情報を画像に重畳させた重畳画像(コンテンツ)を生成する。
図2に示すように、配信システム1は、端末装置10と、提供元端末50と、生成装置100とが含まれる。端末装置10と、提供元端末50と、生成装置100とは所定のネットワークNを介して、有線または無線により通信可能に接続される。図2は、実施形態に係る配信システムの構成例を示す図である。なお、図2に示した配信システム1には、複数台の端末装置10や、複数台の提供元端末50や、複数台の生成装置100が含まれてもよい。
次に、図3を用いて、実施形態に係る生成装置100の構成について説明する。図3は、実施形態に係る生成装置100の構成例を示す図である。図3に示すように、生成装置100は、通信部110と、記憶部120と、制御部130とを有する。なお、生成装置100は、生成装置100の管理者等から各種操作を受け付ける入力部(例えば、キーボードやマウス等)や、各種情報を表示するための表示部(例えば、液晶ディスプレイ等)を有してもよい。
通信部110は、例えば、NIC(Network Interface Card)等によって実現される。そして、通信部110は、ネットワークNと有線または無線で接続され、端末装置10との間で情報の送受信を行う。
記憶部120は、例えば、RAM(Random Access Memory)、フラッシュメモリ(Flash Memory)等の半導体メモリ素子、または、ハードディスク、光ディスク等の記憶装置によって実現される。実施形態に係る記憶部120は、図3に示すように、コンテンツ情報記憶部121を有する。
実施形態に係るコンテンツ情報記憶部121は、コンテンツに関する各種情報を記憶する。図4に、実施形態に係るコンテンツ情報記憶部121の一例を示す。図4に示すコンテンツ情報記憶部121は、「コンテンツID」、「文字情報」、「画像」、「画像ID」、「提供元ID」といった項目を有する。
図3の説明に戻って、制御部130は、例えば、CPU(Central Processing Unit)やMPU(Micro Processing Unit)等によって、生成装置100内部の記憶装置に記憶されている各種プログラム(生成プログラムの一例に相当)がRAMを作業領域として実行されることにより実現される。また、制御部130は、例えば、ASIC(Application Specific Integrated Circuit)やFPGA(Field Programmable Gate Array)等の集積回路により実現される。
取得部131は、対象物を含む画像を取得する。例えば、取得部131は、コンテンツ情報記憶部121から画像を取得する。また、取得部131は、画像に関連する文字情報を取得する。例えば、取得部131は、コンテンツ情報記憶部121から文字情報を取得する。また、取得部131は、画像に関連する関連情報を取得してもよい。例えば、取得部131は、外部の情報処理装置から画像に関連する関連情報を取得してもよい。
抽出部132は、画像における特徴情報が含まれる領域に関する特徴領域情報を抽出する。例えば、抽出部132は、画像と文字情報とに基づいて、画像から対象物の領域に関する情報である特徴領域情報を抽出する。なお、抽出部132は、サリエンシーディテクション等の画像処理における種々の従来手法を適宜用いて、画像における特徴領域情報を抽出する。例えば、抽出部132は、R−CNN等の画像認識技術を用いた画像処理を適宜用いてもよい。また、抽出部132は、画像処理等の種々の従来手法を適宜用いて、画像におけるオブジェクト(物体)の認識による情報の抽出を行ってもよい。図1では、抽出部132は、特徴領域情報FR11に示すように、画像IM11と文字情報IC11とに基づいて、画像IM11における特徴領域を抽出する。
判定部133は、種々の従来技術を適宜用いて、画像における余白領域を判定する。例えば、判定部133は、特徴領域情報における特徴量が所定の閾値未満の領域に対応する画像中の領域を余白領域と判定してもよい。また、判定部133は、画像における領域内の最大の輝度値と最小の輝度値との差が所定の閾値未満の領域を余白領域と判定してもよい。また、例えば、判定部133は、特徴領域情報における特徴量が所定の閾値未満の領域に対応する画像中の領域内において、最大の輝度値と最小の輝度値との差が所定の閾値未満の領域を余白領域と判定してもよい。なお、上記は一例であって、判定部133は、関連情報を重畳させても画像に含まれるオブジェクトの認識に影響が小さい領域であれば、どのような基準に基づいて余白領域と判定してもよい。
生成部134は、画像から抽出される情報であって、画像における前記対象物の領域に関する情報である特徴領域情報に基づいて、対象物に関連する関連情報を画像に重畳させた重畳画像を生成する。また、生成部134は、文字情報を用いて画像から抽出された対象物の特徴領域情報に基づいて、文字情報から生成された対象物に関連する関連情報を画像に重畳させた重畳画像を生成する。
配信部135は、生成部134により生成された重畳画像(コンテンツ)を端末装置10へ配信する。また、配信部135は、コンテンツ情報記憶部121に記憶されたコンテンツを端末装置10へ配信してもよい。
次に、図5を用いて、実施形態に係る端末装置10の構成について説明する。図5は、実施形態に係る端末装置10の構成例を示す図である。図5に示すように、端末装置10は、通信部11と、記憶部12と、入力部13と、出力部14と、制御部15とを有する。
通信部11は、例えば、通信回路等によって実現される。そして、通信部11は、図示しない所定の通信網と有線または無線で接続され、生成装置100との間で情報の送受信を行う。
記憶部12は、例えば、RAM、フラッシュメモリ等の半導体メモリ素子、または、ハードディスク、光ディスク等の記憶装置によって実現される。記憶部12は、例えば、端末装置10にインストールされているアプリケーションに関する情報、例えばプログラム等を記憶する。
入力部13は、ユーザからの各種操作を受け付ける。例えば、入力部13は、タッチパネル機能により表示面(例えば表示部153)を介してユーザからの各種操作を受け付けてもよい。また、入力部13は、端末装置10に設けられたボタンや、端末装置10に接続されたキーボードやマウスからの各種操作を受け付けてもよい。例えば、入力部13は、ユーザによる重畳画像に含まれる関連情報の指定を受け付ける。
出力部14は、例えば液晶ディスプレイや有機EL(Electro-Luminescence)ディスプレイ等によって実現されるタブレット端末等の表示画面であり、各種情報を表示するための表示装置である。
制御部15は、例えば、CPUやMPU等によって、端末装置10内部の記憶部12などの記憶装置に記憶されている各種プログラムがRAMを作業領域として実行されることにより実現される。例えば、この各種プログラムは、インストールされているアプリケーションのプログラムが含まれる。また、制御部15は、例えば、ASICやFPGA等の集積回路により実現される。
次に、図6を用いて、実施形態に係る端末装置10における重畳画像を含むコンテンツの表示について説明する。図6は、実施形態に係る端末装置における表示の一例を示す図である。図6では、端末装置10が生成装置100から重畳画像IS11を含むウェブページW10を受信した場合を示す。図6では、端末装置10が、重畳画像IS11を含むファッションサイトAのウェブページW10を表示する例を示す。このように、生成装置100が生成した重畳画像IS11は端末装置10においてコンテンツとして表示される。すなわち、生成装置100は、画像中の対象物であるバッグ付近に関連画像IR11を重畳させて表示させる重畳画像IS11を端末装置10へ配信する。これにより、生成装置100は、関連情報と対象物との関係をユーザが認識しやすい態様で表示される重畳画像(コンテンツ)を端末装置10に表示させることができる。
次に、図7を用いて、実施形態に係る配信システム1におけるコンテンツの生成処理について説明する。図7は、実施形態に係る生成処理の一例を示すフローチャートである。
生成装置100は、ユーザの指定に応じて所定の情報を出力させる関連情報を画像に重畳させた重畳画像を生成してもよい。この点について、図8を用いて説明する。図8は、実施形態に係る関連情報の指定の一例を示す図である。具体的には、図8は、重畳画像IS11に含まれる関連情報IR11がユーザにより指定された場合に、対象物「○○のバッグ」に関する音声IV11を出力する場合を示す。
上述した例においては、生成装置100が対象物を含む画像と文字情報に基づいて画像から抽出された対象物の特徴領域情報に基づいて、文字情報から生成された対象物に関連する関連情報を画像に重畳させた重畳画像(コンテンツ)を生成する場合を示した。しかしながら、生成装置100は、画像から対象物の特徴領域情報を抽出し、抽出した特徴領域情報からオブジェクトを判定してもよい。この点について、図9及び図10を用いて説明する。図9は、実施形態に係るオブジェクト情報を用いた生成処理の一例を示す図である。
次に、図10を用いて、実施形態に係る配信システム1におけるオブジェクト情報を用いたコンテンツの生成処理について説明する。図10は、実施形態に係るオブジェクト情報を用いた生成処理の一例を示すフローチャートである。
上述してきたように、実施形態に係る生成装置100は、取得部131と、生成部134とを有する。取得部131は、対象物を含む画像を取得する。生成部134は、画像から抽出される情報であって、画像における対象物の領域に関する情報である特徴領域情報に基づいて、対象物に関連する関連情報を画像に重畳させた重畳画像を生成する。
上述してきた実施形態に係る生成装置100は、例えば図11に示すような構成のコンピュータ1000によって実現される。図11は、生成装置の機能を実現するコンピュータの一例を示すハードウェア構成図である。コンピュータ1000は、CPU1100、RAM1200、ROM1300、HDD1400、通信インターフェイス(I/F)1500、入出力インターフェイス(I/F)1600、及びメディアインターフェイス(I/F)1700を有する。
また、上記実施形態において説明した各処理のうち、自動的に行われるものとして説明した処理の全部または一部を手動的に行うこともでき、あるいは、手動的に行われるものとして説明した処理の全部または一部を公知の方法で自動的に行うこともできる。この他、上記文書中や図面中で示した処理手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。例えば、各図に示した各種情報は、図示した情報に限られない。
100 生成装置
121 コンテンツ情報記憶部
130 制御部
131 取得部
132 抽出部
133 判定部
134 生成部
135 配信部
10 端末装置
151 送信部
152 受信部
153 表示部
N ネットワーク
Claims (8)
- 対象物を含む画像と、当該画像に関連する文字情報として当該画像と同一のコンテンツに含まれた文字情報と、を取得する取得部と、
前記文字情報を用いて前記画像から抽出される情報であって、前記画像における前記対象物の領域に関する情報である特徴領域情報に基づいて、前記文字情報から生成された前記対象物に関連する関連情報を前記画像に重畳させた重畳画像を生成する生成部と、
を備えることを特徴とする生成装置。 - 前記生成部は、
前記画像における前記対象物の領域付近に前記関連情報を重畳させた重畳画像を生成する
ことを特徴とする請求項1に記載の生成装置。 - 前記生成部は、
前記対象物と、前記対象物を指示する前記関連情報とを含む前記重畳画像を生成する
ことを特徴とする請求項1または請求項2に記載の生成装置。 - 前記生成部は、
前記画像における余白領域に前記関連情報を重畳させた重畳画像を生成する
ことを特徴とする請求項1〜3のいずれか1項に記載の生成装置。 - 前記生成部は、
ユーザの指定に応じて所定の情報を出力させる前記関連情報を前記画像に重畳させた重畳画像を生成する
ことを特徴とする請求項1〜4のいずれか1項に記載の生成装置。 - 前記生成部は、
前記関連情報として、前記対象物に関連する広告情報を前記画像に重畳させた重畳画像を生成する
ことを特徴とする請求項1〜5のいずれか1項に記載の生成装置。 - コンピュータが実行する生成方法であって、
対象物を含む画像と、当該画像に関連する文字情報として当該画像と同一のコンテンツに含まれた文字情報と、を取得する取得工程と、
前記文字情報を用いて前記画像から抽出される情報であって、前記画像における前記対象物の領域に関する情報である特徴領域情報に基づいて、前記文字情報から生成された前記対象物に関連する関連情報を前記画像に重畳させた重畳画像を生成する生成工程と、
を含むことを特徴とする生成方法。 - 対象物を含む画像と、当該画像に関連する文字情報として当該画像と同一のコンテンツに含まれた文字情報と、を取得する取得手順と、
前記文字情報を用いて前記画像から抽出される情報であって、前記画像における前記対象物の領域に関する情報である特徴領域情報に基づいて、前記文字情報から生成された前記対象物に関連する関連情報を前記画像に重畳させた重畳画像を生成する生成手順と、
をコンピュータに実行させることを特徴とする生成プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018159729A JP7044665B2 (ja) | 2018-08-28 | 2018-08-28 | 生成装置、生成方法、及び生成プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018159729A JP7044665B2 (ja) | 2018-08-28 | 2018-08-28 | 生成装置、生成方法、及び生成プログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016007646A Division JP6436922B2 (ja) | 2016-01-19 | 2016-01-19 | 生成装置、生成方法、及び生成プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018200721A true JP2018200721A (ja) | 2018-12-20 |
JP7044665B2 JP7044665B2 (ja) | 2022-03-30 |
Family
ID=64668249
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018159729A Active JP7044665B2 (ja) | 2018-08-28 | 2018-08-28 | 生成装置、生成方法、及び生成プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7044665B2 (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007096816A (ja) * | 2005-09-29 | 2007-04-12 | Fujifilm Corp | 画像合成装置、画像合成プログラム、および画像合成プログラム記憶媒体 |
JP2012128751A (ja) * | 2010-12-17 | 2012-07-05 | Hitachi Consumer Electronics Co Ltd | コンテンツ表示装置およびコンテンツ表示方法 |
JP2012256204A (ja) * | 2011-06-09 | 2012-12-27 | Dainippon Printing Co Ltd | 記事配信システム、記事配信方法、サーバ及びプログラム |
JP2014035642A (ja) * | 2012-08-08 | 2014-02-24 | Canon Inc | 表示装置及びその制御方法、表示システム、プログラム |
JP2015090553A (ja) * | 2013-11-05 | 2015-05-11 | 株式会社ソニー・コンピュータエンタテインメント | 端末装置、付加情報管理装置、および付加情報管理方法 |
-
2018
- 2018-08-28 JP JP2018159729A patent/JP7044665B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007096816A (ja) * | 2005-09-29 | 2007-04-12 | Fujifilm Corp | 画像合成装置、画像合成プログラム、および画像合成プログラム記憶媒体 |
JP2012128751A (ja) * | 2010-12-17 | 2012-07-05 | Hitachi Consumer Electronics Co Ltd | コンテンツ表示装置およびコンテンツ表示方法 |
JP2012256204A (ja) * | 2011-06-09 | 2012-12-27 | Dainippon Printing Co Ltd | 記事配信システム、記事配信方法、サーバ及びプログラム |
JP2014035642A (ja) * | 2012-08-08 | 2014-02-24 | Canon Inc | 表示装置及びその制御方法、表示システム、プログラム |
JP2015090553A (ja) * | 2013-11-05 | 2015-05-11 | 株式会社ソニー・コンピュータエンタテインメント | 端末装置、付加情報管理装置、および付加情報管理方法 |
Also Published As
Publication number | Publication date |
---|---|
JP7044665B2 (ja) | 2022-03-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Miller et al. | The global smartphone: Beyond a youth technology | |
KR102010221B1 (ko) | 스마트폰 기반 방법들 및 시스템들 | |
KR102021727B1 (ko) | 공유된 관심사를 갖는 메시지들의 갤러리 | |
US9484046B2 (en) | Smartphone-based methods and systems | |
JP5843207B2 (ja) | 直観的コンピューティング方法及びシステム | |
CN104346037B (zh) | 信息处理设备和信息处理方法 | |
CN113205112A (zh) | 用于辨别和匹配图像中描画的对象的方法和设备 | |
US20130268513A1 (en) | Annotations based on hierarchical categories and groups | |
KR20130062266A (ko) | 소셜 홈페이지 | |
KR20150024526A (ko) | 콘텐트를 기반으로 하는 정보 제공 방법 및 장치 | |
US11941149B2 (en) | Positioning participants of an extended reality conference | |
CN112136099A (zh) | 来自远程设备的直接输入 | |
JP2017135505A (ja) | 生成装置、生成方法、及び生成プログラム | |
JP2012059162A (ja) | 電子コンテンツ表示装置、サーバ装置 | |
US20230229279A1 (en) | User interfaces for managing visual content in media | |
JP2017028685A (ja) | 情報表示装置、情報表示方法、情報表示プログラムおよび配信装置 | |
JP5965035B1 (ja) | 情報表示プログラム、情報表示方法、情報表示装置、配信装置および配信方法 | |
US10120539B2 (en) | Method and device for setting user interface | |
US10606462B2 (en) | Graphical user interface using color spectrum to map sentiments | |
US11948263B1 (en) | Recording the complete physical and extended reality environments of a user | |
JP6436922B2 (ja) | 生成装置、生成方法、及び生成プログラム | |
KR20150123429A (ko) | 전자장치 및 컨텐츠 제공 방법 | |
JP7044665B2 (ja) | 生成装置、生成方法、及び生成プログラム | |
US20160224317A1 (en) | Audible photos & voice comments in digital social interactions | |
KR20140089069A (ko) | 재생 가능 객체를 생성하는 사용자 단말 장치 및 그 인터렉션 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181213 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20191101 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20191108 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200114 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200414 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200529 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20200804 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201028 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20201028 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20201106 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20201110 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20201211 |
|
C211 | Notice of termination of reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C211 Effective date: 20201215 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20210706 |
|
C13 | Notice of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: C13 Effective date: 20210824 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211012 |
|
C13 | Notice of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: C13 Effective date: 20211124 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220121 |
|
C23 | Notice of termination of proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C23 Effective date: 20220201 |
|
C03 | Trial/appeal decision taken |
Free format text: JAPANESE INTERMEDIATE CODE: C03 Effective date: 20220308 |
|
C30A | Notification sent |
Free format text: JAPANESE INTERMEDIATE CODE: C3012 Effective date: 20220308 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220317 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7044665 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |