JP6623565B2 - 棚割情報生成装置、棚割情報生成システム、棚割情報生成方法、撮像装置、およびプログラム - Google Patents
棚割情報生成装置、棚割情報生成システム、棚割情報生成方法、撮像装置、およびプログラム Download PDFInfo
- Publication number
- JP6623565B2 JP6623565B2 JP2015112783A JP2015112783A JP6623565B2 JP 6623565 B2 JP6623565 B2 JP 6623565B2 JP 2015112783 A JP2015112783 A JP 2015112783A JP 2015112783 A JP2015112783 A JP 2015112783A JP 6623565 B2 JP6623565 B2 JP 6623565B2
- Authority
- JP
- Japan
- Prior art keywords
- shelf
- product
- allocation information
- image
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 title claims description 104
- 238000000034 method Methods 0.000 title claims description 41
- 238000012545 processing Methods 0.000 claims description 36
- 238000010586 diagram Methods 0.000 description 35
- 238000012986 modification Methods 0.000 description 26
- 230000004048 modification Effects 0.000 description 26
- 230000006870 function Effects 0.000 description 20
- 230000000694 effects Effects 0.000 description 13
- 238000004891 communication Methods 0.000 description 10
- 230000010365 information processing Effects 0.000 description 8
- 238000004590 computer program Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Image Analysis (AREA)
Description
本発明の第1の実施の形態について、図面を参照して説明する。本実施の形態では、本発明の課題を解決する基本の構成について説明する。図1は、本実施の形態に係る棚割情報生成装置10の機能構成の一例を示す機能ブロック図である。図1に示す通り、本実施の形態に係る棚割情報生成装置10は、取得部11と、生成部12とを備えている。
次に、上述した第1の実施の形態を基本とする、本発明の第2の実施の形態について、図面を参照して説明する。図2は、本実施の形態に係る棚割情報生成システム1の全体構成の一例を示す図である。図2に示す棚割情報生成システム1は、棚割情報生成装置100と、撮像装置200とを含む。棚割情報生成装置100は、上述した棚割情報生成装置10の構成を含む。また、図3は、本実施の形態に係る棚割情報生成システム1の利用シーンを説明するための図である。図4は、本実施の形態に係る棚割情報生成システム1の機能構成の一例を示す機能ブロック図である。
撮像装置200は、図4に示す通り、撮影部210と、表示部220と、入力部230とを備えている。撮影部210は、静止画像または動画像を撮影する。そして、撮影部210は、撮影した画像が静止画像の場合、該静止画像を示す画像データを棚割情報生成装置100および表示部220に出力する。また、撮影した画像が動画像の場合、撮影部210は、該動画像から逐次得られる画像データを、棚割情報生成装置100および表示部220に出力する。以降、撮影部210が撮影し、棚割情報生成装置100および表示部220に出力した静止画像の画像データまたは動画像の画像データを、単に画像データとも呼ぶ。
次に、棚割情報生成装置100について説明する。棚割情報生成装置100は、図4に示す通り、取得部110と、生成部120と、記憶部130と、認識部140とを備えている。
次に、棚割情報生成システム1における処理の流れについて説明する。図10は、本実施の形態に係る棚割情報生成システム1における処理の流れの一例を示すフローチャートである。図10においては、撮像装置200の処理を左側に、棚割情報生成装置100の処理を右側に示している。また、撮像装置200に対するフローチャートと、棚割情報生成装置100に対するフローチャートとの間の破線の矢印は、情報の伝達を示している。
以上のように、棚割情報生成装置100は、画像に対して、指定された位置を示す位置情報を取得し、画像から認識された商品が、指定された位置に配置された状態を示す棚割情報を、認識結果および位置情報に基づいて生成する。これにより、位置情報に基づいて生成された棚割情報によって示される、商品の陳列位置は、実際の陳列位置をより正確に再現したものとなる。したがって、本実施の形態に係る棚割情報生成システム1は、より高精度な棚割情報を生成することができる。
上述した第2の実施の形態における棚割情報生成装置100は、撮像装置200と同様に、表示部と、入力部とを更に備えていてもよい。このとき、棚割情報生成装置100は、撮像装置200が撮影した撮影画像を自身の表示部に表示し、ユーザからの入力を受け付けてもよい。
次に、本発明の第3の実施の形態について、図面を参照して説明する。図11は、本実施の形態に係る棚割情報生成システム1の機能構成を示す機能ブロック図である。なお、説明の便宜上、前述した第2の実施の形態で説明した図面に含まれる部材と同じ機能を有する部材については、同じ符号を付し、その説明を省略する。また、本実施の形態に係る棚割情報生成システム1の全体構成は、図2に示した、第2の実施の形態における棚割情報生成システム1の構成と同様であるため、説明を省略する。
以上のように、本実施の形態に係る棚割情報生成システム1は、上述した第2の実施の形態の棚割情報生成システム1と同様の効果を得ることができる。また、本実施の形態に係る棚割情報生成システム1の棚割情報生成装置101では、認識部141が、商品棚を含む画像に対して指定された位置に基づいて、商品を認識する。したがって、本実施の形態に係る棚割情報生成システム1の生成部120は、指定された位置に基づいて認識された商品が、該指定された位置に配置された状態を示す棚割情報を生成する。これにより、棚割情報生成装置101は、商品棚20Aに陳列されていない商品を、商品棚20Aに陳列された商品であると認識することを防ぐことができる。よって、棚割情報生成装置101は、商品棚20Aに含まれる商品以外の商品が棚割情報に含まれることを防ぐことができ、より精度が高い棚割情報を生成することができる。
本実施の形態に係る棚割情報生成システム1は、上述した第2の実施の形態の変形例における棚割情報生成システム1と同様に、棚割情報生成装置101が表示部(不図示)と入力部(不図示)とを備える構成であってもよい。
次に、本発明の第4の実施の形態について、図面を参照して説明する。第2および第3の実施の形態では、商品棚20の各段の位置をユーザによる入力操作により取得する構成について説明した。本実施の形態では、商品棚20の各段の位置を、撮影画像から取得する方法について説明する。
次に、棚割情報生成装置102における処理の流れについて説明する。図13は、本実施の形態に係る棚割情報生成システム1における棚割情報生成装置102の処理の流れの一例を示すフローチャートである。
以上のように、本実施の形態に係る棚割情報生成システム1は、上述した第2の実施の形態の棚割情報生成システム1と同様の効果を得ることができる。また、本実施の形態では、取得部112が、撮影画像から、棚割情報を生成する対象となる商品棚の棚板の位置を、指定された棚板の位置として検出することにより、該棚板の位置を示す位置情報を取得する。このように、本実施の形態の棚割情報生成装置102は、ユーザが商品棚の棚板の位置を指定しなくても、撮影画像から商品棚の棚板の位置を取得することができる。そのため、本実施の形態に係る棚割情報生成システム1は、例えば、棚割情報生成装置102に撮影画像を供給するだけで、容易に、精度が高い棚割情報を生成することができる。
本実施の形態に係る棚割情報生成システム1の変形例1について説明する。本変形例における棚割情報生成装置102の認識部140は、上述した第2の実施の形態の変形例における棚割情報生成システム1と同様に、棚割情報生成装置102とは別個の装置で実現されてもよい。
本実施の形態に係る棚割情報生成システム1の変形例2について説明する。本変形例における棚割情報生成装置102の取得部112は、取得した位置情報と画像情報とを、生成部120だけでなく、認識部140にも出力してもよい。そして、認識部140は、上述した第3の実施の形態における認識部141と同様に、取得部112から受信した位置情報を用いて、撮影画像に含まれる商品を認識する。
次に、本発明の第5の実施の形態について、図面を参照して説明する。図14は、本実施の形態に係る棚割情報生成システム1の機能構成を示す機能ブロック図である。なお、説明の便宜上、前述した各実施の形態で説明した図面に含まれる部材と同じ機能を有する部材については、同じ符号を付し、その説明を省略する。また、本実施の形態に係る棚割情報生成システム1の全体構成は、図2に示した、第2の実施の形態における棚割情報生成システム1の構成と同様であるため、説明を省略する。
(a)商品棚パターンから取得する方法
まず、取得部113が、撮影画像に含まれる商品棚20の段の位置を、商品棚パターンから取得する方法について説明する。例えば、第2の記憶部163に、サイズや棚板が異なる複数の商品棚の夫々に関連する商品棚パターンが格納されているとする。そして、取得部113が撮影画像内の商品棚20と、複数の商品棚パターンの夫々とのマッチングを行い、類似度が高い商品棚パターンを、撮影画像に含まれる商品棚に関する情報であると判定する。そして、取得部113は、判定された商品棚パターンから、段の位置を示す情報を位置情報として取得する。
次に、取得部113が、撮影画像に含まれる商品棚20の段の位置を、商品棚パターンとユーザの入力操作とに基づいて取得する方法について説明する。
次に、棚割情報生成装置103における処理の流れについて説明する。図17は、本実施の形態に係る棚割情報生成システム1における棚割情報生成装置103の処理の流れの一例を示すフローチャートである。
以上のように、本実施の形態では、取得部113が、予め第2の記憶部163に格納された商品棚パターンによって示される商品棚の段の位置、および、該段の位置に対して、変更を加えられた位置の少なくとも何れかを含む位置情報を取得する。このような構成であっても、本実施の形態に係る棚割情報生成システム1は、本実施の形態に係る棚割情報生成システム1は、上述した第2の実施の形態の棚割情報生成システム1と同様の効果を得ることができる。
本実施の形態に係る棚割情報生成システム1の変形例1について説明する。本変形例における棚割情報生成装置103の認識部140は、上述した第2の実施の形態の変形例における棚割情報生成システム1と同様に、棚割情報生成装置103とは別個の装置で実現されてもよい。
本実施の形態に係る棚割情報生成システム1の変形例2について説明する。本変形例における棚割情報生成装置103の取得部113は、取得した位置情報と画像情報とを、生成部120だけでなく、認識部140にも出力してもよい。そして、認識部140は、上述した第3の実施の形態における認識部141と同様に、取得部113から受信した位置情報を用いて、撮影画像に含まれる商品を認識する。
次に、本発明の第6の実施の形態について、図面を参照して説明する。図18は、本実施の形態に係る棚割情報生成システム1の機能構成を示す機能ブロック図である。なお、説明の便宜上、前述した各実施の形態で説明した図面に含まれる部材と同じ機能を有する部材については、同じ符号を付し、その説明を省略する。また、本実施の形態に係る棚割情報生成システム1の全体構成は、図2に示した、第2の実施の形態における棚割情報生成システム1の構成と同様であるため、説明を省略する。
次に、本発明の第7の実施の形態について、図面を参照して説明する。図20は、本実施の形態に係る棚割情報生成システム1の機能構成を示す機能ブロック図である。なお、説明の便宜上、前述した各実施の形態で説明した図面に含まれる部材と同じ機能を有する部材については、同じ符号を付し、その説明を省略する。また、本実施の形態に係る棚割情報生成システム1の全体構成は、図2に示した、第2の実施の形態における棚割情報生成システム1の構成と同様であるため、説明を省略する。
次に、棚割情報生成装置105における処理の流れについて説明する。図21は、本実施の形態に係る棚割情報生成システム1における棚割情報生成装置105の処理の流れの一例を示すフローチャートである。
以上のように、本実施の形態に係る棚割情報生成システム1によれば、領域取得部116が棚割情報を生成する対象となる商品棚の領域を取得し、認識部145が上記領域に基づいて、商品の認識を行う。そして、推定部117が、認識結果に基づいて、商品棚20の棚板の位置を推定する。その後、生成部120は、認識された商品が推定された棚板の位置に配置された状態を示す棚割情報を生成する。
本発明の第8の実施の形態について、図面を参照して説明する。本実施の形態では、本発明の課題を解決する棚割情報生成システムについて説明する。まず、本実施の形態に係る棚割情報生成システム2の基本構成について説明する。図22は、本実施の形態に係る棚割情報生成システム2の基本構成の一例を示すブロック図である。この図に示す棚割情報生成システム2は、上述した棚割情報生成システム1の基本の構成であるとも言える。図22に示す通り、本実施の形態に係る棚割情報生成システム2は、取得部21と、生成部22と、撮影部23とを備えている。取得部21と、生成部22と、撮影部23とは、互いに通信可能に接続している。取得部21と、生成部22と、撮影部23との接続方法は、有線接続であってもよいし、無線接続であってもよい。
ここで、上述した各実施の形態に係る棚割情報生成装置(10、100〜106)および撮像装置(200、202、206)を実現可能なハードウェアの構成例について説明する。上述した棚割情報生成装置(10、100〜106)および撮像装置(200、202、206)は、専用の装置として実現してもよいが、コンピュータ(情報処理装置)を用いて実現してもよい。
10 棚割情報生成装置
11 取得部
12 生成部
21 取得部
22 生成部
23 撮影部
100〜106 棚割情報生成装置
110〜115 取得部
116 領域取得部
117 推定部
120 生成部
130 記憶部
132 第1の記憶部
140、141、145 認識部
152、163、174 第2の記憶部
200、202、206 撮像装置
210 撮影部
220 表示部
230 入力部
240 取得部
Claims (16)
- 商品棚を含む画像に、前記商品棚の棚板の位置を示す画像が重畳された画像に対して、指定された位置を示す位置情報を取得する取得手段と、
前記商品棚を含む画像から認識された商品が前記指定された位置に配置された状態を示す棚割情報を、前記商品の認識結果と前記位置情報とに基づいて生成する生成手段と、
を備え、
前記指定された位置には、前記棚割情報を生成する対象となる商品棚の棚板の位置であって、前記重畳された画像に示された棚板の位置に変更を加えられた位置が含まれる、
棚割情報生成装置。 - 前記指定された位置は、前記棚割情報を生成する対象となる商品棚を含む前記重畳された画像上において、入力媒体を用いて、前記商品棚の棚板の位置をなぞる、または、少なくとも前記棚板の両端を含む位置を指定することによって特定される位置である、請求項1に記載の棚割情報生成装置。
- 前記商品棚の棚板の位置を示す画像に含まれる当該棚板の位置は、予め記憶された商品棚を示す情報に含まれる該商品棚の棚板の位置である、
請求項1または2に記載の棚割情報生成装置。 - 前記取得手段は、所定の数分の前記商品棚の棚板の位置が入力されたことを示す情報を取得した場合、予め指定された、前記棚割情報を生成する対象となる商品棚の段数分の前記棚板の位置を、前記入力された棚板の位置に基づいて算出し、
前記商品棚の棚板の位置を示す画像に含まれる当該棚板の位置は、前記入力された棚板の位置および前記算出した位置である、請求項1または2に記載の棚割情報生成装置。 - 前記認識された商品は、前記指定された位置に基づいて認識された商品である、請求項1から4の何れか1項に記載の棚割情報生成装置。
- 前記商品棚を含む画像から商品を認識する認識手段を更に備える、請求項1から5の何れか1項に記載の棚割情報生成装置。
- 商品が陳列された商品棚を撮影する撮影手段と、
前記撮影手段によって撮影された画像に、前記商品棚の棚板の位置を示す画像が重畳された画像に対して、指定された位置を示す位置情報を取得する取得手段と、
前記撮影された画像から認識された商品が前記指定された位置に配置された状態を示す棚割情報を、前記商品の認識結果と前記位置情報とに基づいて生成する生成手段と、
を備え、
前記指定された位置には、前記棚割情報を生成する対象となる商品棚の棚板の位置であって、前記重畳された画像に示された棚板の位置に変更を加えられた位置が含まれる、
棚割情報生成システム。 - 前記指定された位置は、前記棚割情報を生成する対象となる商品棚を含む前記重畳された画像上において、入力媒体を用いて、前記商品棚の棚板の位置をなぞる、または、少なくとも前記棚板の両端を含む位置を指定することによって特定される位置である、請求項7に記載の棚割情報生成システム。
- 前記商品棚の棚板の位置を示す画像に含まれる当該棚板の位置は、予め記憶された商品棚を示す情報に含まれる該商品棚の棚板の位置である、
請求項7または8に記載の棚割情報生成システム。 - 前記取得手段は、所定の数分の前記商品棚の棚板の位置が入力されたことを示す情報を取得した場合、予め指定された、前記棚割情報を生成する対象となる商品棚の段数分の前記棚板の位置を、前記入力された棚板の位置に基づいて算出し、
前記商品棚の棚板の位置を示す画像に含まれる当該棚板の位置は、前記入力された棚板の位置および前記算出した位置である、請求項7または8に記載の棚割情報生成システム。 - 前記認識された商品は、前記指定された位置に基づいて認識された商品である、請求項7から10の何れか1項に記載の棚割情報生成システム。
- 撮影装置と、棚割情報生成装置とを備え、
前記撮影装置は、前記撮影手段と、前記取得手段とを含み、
前記棚割情報生成装置は、前記生成手段を含む、請求項7から11の何れか1項に記載の棚割情報生成システム。 - 撮影装置と、棚割情報生成装置とを備え、
前記撮影装置は、前記撮影手段を含み、
前記棚割情報生成装置は、前記取得手段と、前記生成手段とを含む、請求項7から11の何れか1項に記載の棚割情報生成システム。 - 前記商品棚を含む画像から商品を認識する認識手段を更に備える、請求項7から13の何れか1項に記載の棚割情報生成システム。
- 商品棚を含む画像に対し、前記商品棚の棚板の位置を示す画像が重畳され、当該重畳された画像に対して、指定された位置を示す位置情報を取得し、
前記商品棚を含む画像から認識された商品が前記指定された位置に配置された状態を示す棚割情報を、前記商品の認識結果と前記位置情報とに基づいて生成し、
前記指定された位置には、前記棚割情報を生成する対象となる商品棚の棚板の位置であって、前記重畳された画像に示された棚板の位置に変更を加えられた位置が含まれる、
棚割情報生成方法。 - 商品棚を含む画像に、前記商品棚の棚板の位置を示す画像が重畳された画像に対して、指定された位置を示す位置情報を取得する処理と、
前記商品棚を含む画像から認識された商品が前記指定された位置に配置された状態を示す棚割情報を、前記商品の認識結果と前記位置情報とに基づいて生成する処理と、をコンピュータに実行させ、
前記指定された位置には、前記棚割情報を生成する対象となる商品棚の棚板の位置であって、前記重畳された画像に示された棚板の位置に変更を加えられた位置が含まれる、
プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015112783A JP6623565B2 (ja) | 2015-06-03 | 2015-06-03 | 棚割情報生成装置、棚割情報生成システム、棚割情報生成方法、撮像装置、およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015112783A JP6623565B2 (ja) | 2015-06-03 | 2015-06-03 | 棚割情報生成装置、棚割情報生成システム、棚割情報生成方法、撮像装置、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016224831A JP2016224831A (ja) | 2016-12-28 |
JP6623565B2 true JP6623565B2 (ja) | 2019-12-25 |
Family
ID=57748300
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015112783A Active JP6623565B2 (ja) | 2015-06-03 | 2015-06-03 | 棚割情報生成装置、棚割情報生成システム、棚割情報生成方法、撮像装置、およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6623565B2 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6938169B2 (ja) * | 2017-03-01 | 2021-09-22 | 東芝テック株式会社 | ラベル生成装置及びプログラム |
US20200394599A1 (en) * | 2017-11-29 | 2020-12-17 | Ntt Docomo, Inc. | Shelf-allocation information generating device and shelf-allocation information generating program |
US20230237687A1 (en) * | 2020-05-14 | 2023-07-27 | Nec Corporation | Product identification apparatus, product identification method, and non-transitory computer-readable medium |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09160993A (ja) * | 1995-12-11 | 1997-06-20 | Casio Comput Co Ltd | 棚割表作成装置 |
JP4473676B2 (ja) * | 2004-08-18 | 2010-06-02 | 株式会社野村総合研究所 | フェイスアップ度評価システム及び評価プログラム |
JP2009187482A (ja) * | 2008-02-08 | 2009-08-20 | Nippon Sogo System Kk | 棚割再現方法、棚割再現プログラム、棚割評価方法、棚割評価プログラム及び記録媒体 |
EP2836977A4 (en) * | 2012-03-30 | 2015-12-02 | Intel Corp | DISPLAY OF PLANOGRAMS SENSITIVE TO THE PRESENTATION STRUCTURE |
WO2014087725A1 (ja) * | 2012-12-04 | 2014-06-12 | 日本電気株式会社 | 商品情報処理装置、そのデータ処理方法、およびプログラム |
JP2014222374A (ja) * | 2013-05-13 | 2014-11-27 | 大日本印刷株式会社 | 棚割情報生成装置、棚割情報生成方法、プログラム、棚割再現システム、及び、棚割情報再現装置 |
JP6160243B2 (ja) * | 2013-05-27 | 2017-07-12 | 日本電気株式会社 | 検出装置、検出方法及び検出プログラム |
-
2015
- 2015-06-03 JP JP2015112783A patent/JP6623565B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2016224831A (ja) | 2016-12-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102667525B1 (ko) | Ar/vr 디지털 콘텐츠를 생성하기 위한 디지털 이미지 적합성 결정 | |
US11288627B2 (en) | Information processing apparatus, control method, and program | |
US9911213B2 (en) | Panoramic image stitching using objects | |
JP6489262B2 (ja) | 誘導画像キャプチャユーザインタフェース | |
JP6962356B2 (ja) | 画像処理装置、表示制御装置、画像処理方法、および、記録媒体 | |
JP7147921B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
US20170076428A1 (en) | Information processing apparatus | |
JP2021177399A (ja) | 情報処理装置、制御方法、及びプログラム | |
CN109348731A (zh) | 一种图像匹配的方法及装置 | |
US10084936B2 (en) | Display system including an image forming apparatus and a display apparatus | |
US20170124765A1 (en) | Control method and information processing system | |
US20150156467A1 (en) | Image processing apparatus, image processing method, and computer-readable storage medium | |
JP6623565B2 (ja) | 棚割情報生成装置、棚割情報生成システム、棚割情報生成方法、撮像装置、およびプログラム | |
JP6722438B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
US11189053B2 (en) | Information processing apparatus, method of controlling information processing apparatus, and non-transitory computer-readable storage medium | |
JPWO2019016870A1 (ja) | 画像認識装置、画像認識方法及びプログラム | |
JP6679847B2 (ja) | 棚割情報生成装置、棚割情報生成システム、棚割情報生成方法、撮像装置、およびプログラム | |
JP7390628B2 (ja) | 識別情報付与装置、識別情報付与方法、及びプログラム | |
JP6933273B2 (ja) | 棚割情報生成システム | |
JP2017058657A (ja) | 情報処理装置、制御方法、コンピュータプログラム及び記憶媒体 | |
US20230237687A1 (en) | Product identification apparatus, product identification method, and non-transitory computer-readable medium | |
JP6168872B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP6695454B1 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP7255644B2 (ja) | 棚割情報生成システム、棚割情報生成方法、およびプログラム | |
JP7509257B2 (ja) | 棚割情報生成システム、棚割情報生成方法、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180515 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190423 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190514 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190711 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190820 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191009 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20191029 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191111 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6623565 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |