JP2017101960A - 情報処理装置および情報処理方法 - Google Patents
情報処理装置および情報処理方法 Download PDFInfo
- Publication number
- JP2017101960A JP2017101960A JP2015233669A JP2015233669A JP2017101960A JP 2017101960 A JP2017101960 A JP 2017101960A JP 2015233669 A JP2015233669 A JP 2015233669A JP 2015233669 A JP2015233669 A JP 2015233669A JP 2017101960 A JP2017101960 A JP 2017101960A
- Authority
- JP
- Japan
- Prior art keywords
- image
- light emitting
- information processing
- color
- light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 94
- 238000003672 processing method Methods 0.000 title claims abstract description 6
- 239000003550 marker Substances 0.000 claims abstract description 90
- 238000000605 extraction Methods 0.000 claims description 27
- 230000006870 function Effects 0.000 claims description 17
- 239000003086 colorant Substances 0.000 claims description 13
- 239000000284 extract Substances 0.000 claims description 10
- 238000004590 computer program Methods 0.000 claims description 2
- 238000002360 preparation method Methods 0.000 claims 1
- 230000005484 gravity Effects 0.000 abstract description 17
- 238000013507 mapping Methods 0.000 abstract description 2
- 238000003384 imaging method Methods 0.000 description 37
- 238000000034 method Methods 0.000 description 36
- 230000008859 change Effects 0.000 description 32
- 230000008569 process Effects 0.000 description 20
- 238000012545 processing Methods 0.000 description 19
- 238000013500 data storage Methods 0.000 description 14
- 230000007423 decrease Effects 0.000 description 8
- 238000004891 communication Methods 0.000 description 7
- 230000003247 decreasing effect Effects 0.000 description 7
- 238000004364 calculation method Methods 0.000 description 5
- 238000001514 detection method Methods 0.000 description 5
- 238000011156 evaluation Methods 0.000 description 5
- 229920006395 saturated elastomer Polymers 0.000 description 5
- 230000007246 mechanism Effects 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000007547 defect Effects 0.000 description 3
- 238000010191 image analysis Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000003705 background correction Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000006735 deficit Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000008570 general process Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004020 luminiscence type Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000011347 resin Substances 0.000 description 1
- 229920005989 resin Polymers 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/56—Extraction of image or video features relating to colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/211—Selection of the most significant subset of features
- G06F18/2113—Selection of the most significant subset of features by ranking or filtering the set of features, e.g. using a measure of variance or of feature cross-correlation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
- G06F18/2415—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on parametric or probabilistic models, e.g. based on likelihood ratio or false acceptance rate versus a false rejection rate
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- General Engineering & Computer Science (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Signal Processing (AREA)
- Probability & Statistics with Applications (AREA)
- Image Analysis (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Measurement Of Optical Distance (AREA)
- Image Processing (AREA)
Abstract
【解決手段】
動画撮影されたフレーム画像の各画素について、当該画素が発光マーカーの像を表している可能性を示すスコア値を算出し、画像平面にマッピングしたスコアマップを生成する(S10、S12)。スコア値は、画素が表す色相および彩度に基づき、元の被写体が所定色である確度と発光している確度を統合して求められる。スコア値の高い連続した画素集合からなる領域をスコアマップから抽出し(S14)、その重心位置およびサイズを取得する(S16)。サイズが所定範囲内にある領域を発光マーカーの領域として選別し(S18)、重心位置などに基づき元の発光マーカーの実空間での位置情報を生成、出力する(S20)。
【選択図】図9
Description
まず上記の構成により、運用段階において撮影画像から発光マーカーの像を検出し、その位置情報に基づき情報処理を実施する態様について説明する。図4は、本態様における情報処理装置10の機能ブロックの構成を示す。情報処理装置10は、撮像装置12から撮影画像のデータを取得する撮影画像取得部60、撮影画像や位置情報のデータを格納するデータ記憶部62、撮影画像から発光マーカーの像を検出することによりその実空間での位置情報を取得する位置情報取得部64、位置情報に基づき所定の情報処理を実施する情報処理部66、および、情報処理の結果として出力すべきデータを生成する出力データ生成部68を含む。
H≦Th1のときC(H)=0
Th1<H≦HtのときC(H)=(H−Th1)/(Ht−Th1)
Ht<H≦Th2のときC(H)=(Th2−H)/(Th2−Ht)
Th2<HのときC(H)=0
S=C(H)×L(S)
あるいは図6で示したのと同じ関数を色相Hの重み係数α(H)として次のようなスコア値Sを定義してもよい。
S=α(H)×H×L(S)
スコアマップ作成部70はこのようなスコア値を画素ごとに算出して、画像平面にマッピングすることでスコアマップを作成する。
これまで述べたように、撮影画像中、発光マーカーの像を構成する画素を画素値に基づき抽出する処理の精度を安定的に保つためには、マーカー自体の発光や撮像装置での光の検出が適切になされていることが前提となる。例えば上述のとおり、像の元となる物が発光している確度Lに彩度Sを利用した場合、マーカーの発光が強すぎれば彩度Sが低くなるため確度Lも低下する。さらに像が無彩色となりやすいため、色(色相)の区別が困難となり、結果として、発光マーカーは所定色で発光しているにも関わらずその像が正確に抽出されなかったり他の色と混同されたりすることがあり得る。
Claims (10)
- 所定色で発光する発光マーカーを含む被写空間を撮影した撮影画像のデータを取得する撮影画像取得部と、
撮影画像の画素ごとに、当該画素を含む像が表す被写体が前記所定色で発光している確度を示すスコア値を画素値に基づき決定し、画像平面の画素配列に対応づけてなるスコアマップを作成するスコアマップ作成部と、
前記スコアマップにおいて所定の基準を満たす画素集合を、前記発光マーカーの像の領域として抽出する対象領域抽出部と、
抽出された領域の位置に基づき前記発光マーカーの実空間における位置情報を生成し出力する位置情報生成部と、
を備えることを特徴とする情報処理装置。 - 前記スコアマップ作成部は、被写体が前記所定色である確度と、当該被写体が発光している確度との積に基づき前記スコア値を決定することを特徴とする請求項1に記載の情報処理装置。
- 前記スコアマップ作成部は、前記所定色である確度および前記発光している確度を、画素が表す色の、錐体のHSV色空間における色相および彩度に基づきそれぞれ決定することを特徴とする請求項2に記載の情報処理装置。
- 前記スコアマップ作成部は、前記所定色の色相を含む有限範囲の色相において0より大きい値を有し、それ以外の範囲において0の値となる、連続的に変化する所定の関数により、前記所定色である確度を算出することを特徴とする請求項2または3に記載の情報処理装置。
- 前記スコアマップ作成部は、前記所定色の色相において極大値を有し連続的に変化する所定の関数により、前記所定色である確度を算出することを特徴とする請求項2または3に記載の情報処理装置。
- 前記スコアマップ作成部は、前記彩度を前記発光している確度として決定することを特徴とする請求項3から5のいずれかに記載の情報処理装置。
- 前記スコアマップ作成部は、複数の発光マーカーが互いに異なる色で発光するとき、発光色ごとに前記スコアマップを作成し、
前記位置情報生成部は、発光色に対応づけて前記位置情報を生成することを特徴とする請求項1から6のいずれかに記載の情報処理装置。 - 前記対象領域抽出部は、抽出した領域のうちそのサイズが所定範囲外にある領域を、前記発光マーカーの像としての領域から除外することを特徴とする請求項1から7のいずれかに記載の情報処理装置。
- 所定色で発光する発光マーカーを含む被写空間を撮影した撮影画像のデータを取得しメモリに格納するステップと、
前記メモリから読み出した撮影画像の画素ごとに、当該画素を含む像が表す被写体が前記所定色で発光している確度を示すスコア値を画素値に基づき決定し、画像平面の画素配列に対応づけてなるスコアマップを作成するステップと、
前記スコアマップにおいて所定の基準を満たす画素集合を、前記発光マーカーの像の領域として抽出するステップと、
抽出された領域の位置に基づき前記発光マーカーの実空間における位置情報を生成し出力するステップと、
を含むことを特徴とする、情報処理装置による情報処理方法。 - 所定色で発光する発光マーカーを含む被写空間を撮影した撮影画像のデータを取得する機能と、
撮影画像の画素ごとに、当該画素を含む像が表す被写体が前記所定色で発光している確度を示すスコア値を画素値に基づき決定し、画像平面の画素配列に対応づけてなるスコアマップを作成する機能と、
前記スコアマップにおいて所定の基準を満たす画素集合を、前記発光マーカーの像の領域として抽出する機能と、
抽出された領域の位置に基づき前記発光マーカーの実空間における位置情報を生成し出力する機能と、
をコンピュータに実現させることを特徴とするコンピュータプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015233669A JP6629055B2 (ja) | 2015-11-30 | 2015-11-30 | 情報処理装置および情報処理方法 |
US15/351,849 US9978000B2 (en) | 2015-11-30 | 2016-11-15 | Information processing device, information processing method, light-emitting device regulating apparatus, and drive current regulating method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015233669A JP6629055B2 (ja) | 2015-11-30 | 2015-11-30 | 情報処理装置および情報処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017101960A true JP2017101960A (ja) | 2017-06-08 |
JP6629055B2 JP6629055B2 (ja) | 2020-01-15 |
Family
ID=58777645
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015233669A Active JP6629055B2 (ja) | 2015-11-30 | 2015-11-30 | 情報処理装置および情報処理方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US9978000B2 (ja) |
JP (1) | JP6629055B2 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018216464A1 (ja) | 2017-05-23 | 2018-11-29 | Phcホールディングス株式会社 | 冷凍装置 |
JP2019045381A (ja) * | 2017-09-05 | 2019-03-22 | 日本電気株式会社 | 空間認識装置、空間認識方法、プログラム |
JP2020088822A (ja) * | 2018-11-30 | 2020-06-04 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置、情報処理システム、位置姿勢取得用デバイス、およびデバイス情報取得方法 |
CN111256662A (zh) * | 2018-11-30 | 2020-06-09 | 卡西欧计算机株式会社 | 位置信息取得装置、位置信息取得方法、记录介质以及位置信息取得*** |
JP2020095005A (ja) * | 2018-11-30 | 2020-06-18 | カシオ計算機株式会社 | 位置情報取得システム、位置情報取得装置、位置情報取得方法及びプログラム |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110443097A (zh) * | 2018-05-03 | 2019-11-12 | 北京中科晶上超媒体信息技术有限公司 | 一种视频目标实时提取优化方法及*** |
CN109389040B (zh) * | 2018-09-07 | 2022-05-10 | 广东珺桦能源科技有限公司 | 一种作业现场人员安全着装的检查方法及装置 |
CN110826555B (zh) * | 2019-10-12 | 2021-05-04 | 天津大学 | 一种人机协同的图像目标检测数据半自动标注方法 |
US20230306215A1 (en) * | 2022-03-26 | 2023-09-28 | David Sean Kehoe | Identifying when an image of a symbol is scanned in place of the original symbol |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002269561A (ja) * | 2001-03-13 | 2002-09-20 | Sharp Corp | 画像処理装置及びマーカー |
JPWO2004094943A1 (ja) * | 2003-04-22 | 2006-07-13 | 博 有澤 | モーションキャプチャ方法、モーションキャプチャ装置、及びモーションキャプチャ用マーカ |
JP2006350578A (ja) * | 2005-06-14 | 2006-12-28 | Fuji Xerox Co Ltd | 画像分析装置 |
US20140343890A1 (en) * | 2013-05-10 | 2014-11-20 | Leica Geosystems Ag | Handheld measuring aid for use with a six-degrees-of-freedom laser tracker |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2296079A3 (en) | 2005-10-26 | 2011-04-13 | Sony Computer Entertainment Inc. | System and method for interfacing with a computer program |
KR100869800B1 (ko) * | 2007-04-04 | 2008-11-21 | 삼성에스디아이 주식회사 | 표시 장치 및 그 구동방법 |
KR101605157B1 (ko) * | 2009-03-24 | 2016-03-22 | 삼성디스플레이 주식회사 | 표시 장치 구동 방법 |
JP2012058845A (ja) * | 2010-09-06 | 2012-03-22 | Sony Corp | 画像処理装置および方法、並びにプログラム |
JP5085792B1 (ja) * | 2012-02-08 | 2012-11-28 | シャープ株式会社 | 映像表示装置およびテレビ受信装置 |
JP6330388B2 (ja) * | 2014-03-14 | 2018-05-30 | オムロン株式会社 | 画像処理方法、画像処理装置、並びに、当該方法を実行するプログラム、及び、当該プログラムを記録する記録媒体 |
-
2015
- 2015-11-30 JP JP2015233669A patent/JP6629055B2/ja active Active
-
2016
- 2016-11-15 US US15/351,849 patent/US9978000B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002269561A (ja) * | 2001-03-13 | 2002-09-20 | Sharp Corp | 画像処理装置及びマーカー |
JPWO2004094943A1 (ja) * | 2003-04-22 | 2006-07-13 | 博 有澤 | モーションキャプチャ方法、モーションキャプチャ装置、及びモーションキャプチャ用マーカ |
JP2006350578A (ja) * | 2005-06-14 | 2006-12-28 | Fuji Xerox Co Ltd | 画像分析装置 |
US20140343890A1 (en) * | 2013-05-10 | 2014-11-20 | Leica Geosystems Ag | Handheld measuring aid for use with a six-degrees-of-freedom laser tracker |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018216464A1 (ja) | 2017-05-23 | 2018-11-29 | Phcホールディングス株式会社 | 冷凍装置 |
JP2019045381A (ja) * | 2017-09-05 | 2019-03-22 | 日本電気株式会社 | 空間認識装置、空間認識方法、プログラム |
JP2020088822A (ja) * | 2018-11-30 | 2020-06-04 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置、情報処理システム、位置姿勢取得用デバイス、およびデバイス情報取得方法 |
WO2020110929A1 (ja) * | 2018-11-30 | 2020-06-04 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置、情報処理システム、位置姿勢取得用デバイス、およびデバイス情報取得方法 |
CN111256662A (zh) * | 2018-11-30 | 2020-06-09 | 卡西欧计算机株式会社 | 位置信息取得装置、位置信息取得方法、记录介质以及位置信息取得*** |
JP2020095005A (ja) * | 2018-11-30 | 2020-06-18 | カシオ計算機株式会社 | 位置情報取得システム、位置情報取得装置、位置情報取得方法及びプログラム |
US11361466B2 (en) | 2018-11-30 | 2022-06-14 | Casio Computer Co., Ltd. | Position information acquisition device, position information acquisition method, recording medium, and position information acquisition system |
JP7131487B2 (ja) | 2018-11-30 | 2022-09-06 | カシオ計算機株式会社 | 位置情報取得システム、位置情報取得装置、位置情報取得方法及びプログラム |
JP7202156B2 (ja) | 2018-11-30 | 2023-01-11 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置、情報処理システム、位置姿勢取得用デバイス、およびデバイス情報取得方法 |
US11816861B2 (en) | 2018-11-30 | 2023-11-14 | Casio Computer Co., Ltd. | Position information acquisition device, position information acquisition method, recording medium, and position information acquisition system |
US11831993B2 (en) | 2018-11-30 | 2023-11-28 | Sony Interactive Entertainment Inc. | Information processing apparatus, information processing system, device for position and posture acquisition, and device information acquisition method |
Also Published As
Publication number | Publication date |
---|---|
JP6629055B2 (ja) | 2020-01-15 |
US20170154247A1 (en) | 2017-06-01 |
US9978000B2 (en) | 2018-05-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6629055B2 (ja) | 情報処理装置および情報処理方法 | |
JP6650739B2 (ja) | 発光デバイス調整装置および駆動電流調整方法 | |
JP6602743B2 (ja) | 情報処理装置および情報処理方法 | |
TWI699707B (zh) | 結構光投射器的控制方法、深度相機和電子裝置 | |
JP6646936B2 (ja) | 画像処理装置、その制御方法、およびプログラム | |
JP5089060B2 (ja) | エンタテインメントシステムおよびゲームコントローラ | |
US10477175B2 (en) | Image pickup apparatus, information processing system, mat, and image generation method | |
JP4831267B2 (ja) | 情報処理装置、情報処理方法、プログラム及び電子装置 | |
US8947560B2 (en) | Image processing apparatus, image processing method, image processing program, and imaging apparatus | |
US10936900B2 (en) | Color identification using infrared imaging | |
US20130095919A1 (en) | Game device, game control method, and game control program adapted to control game by using position and posture of input device | |
CN108781268B (zh) | 图像处理装置和方法 | |
TWI646504B (zh) | 深度感測裝置及深度感測方法 | |
JP2011024612A (ja) | ゲーム装置 | |
EP2441503B1 (en) | Game device, game control method, system, and game control program | |
JP5453006B2 (ja) | ゲーム装置 | |
JP2015220607A (ja) | 情報処理装置、情報処理方法およびプログラム | |
WO2011010414A1 (ja) | ゲーム装置 | |
JP5031070B2 (ja) | 情報処理装置および情報処理システム | |
JP2012226762A (ja) | 情報処理装置および情報処理システム | |
JP5237990B2 (ja) | 情報処理装置、デバイスおよび情報処理システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180810 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190509 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190604 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190724 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20191119 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191204 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6629055 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |