JP6016552B2 - 反射除去システム - Google Patents
反射除去システム Download PDFInfo
- Publication number
- JP6016552B2 JP6016552B2 JP2012207879A JP2012207879A JP6016552B2 JP 6016552 B2 JP6016552 B2 JP 6016552B2 JP 2012207879 A JP2012207879 A JP 2012207879A JP 2012207879 A JP2012207879 A JP 2012207879A JP 6016552 B2 JP6016552 B2 JP 6016552B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- features
- frequency domain
- filtered
- modified
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 claims description 61
- 238000012545 processing Methods 0.000 claims description 33
- 230000001131 transforming effect Effects 0.000 claims description 14
- 238000007689 inspection Methods 0.000 claims description 12
- 230000008569 process Effects 0.000 description 40
- 230000006870 function Effects 0.000 description 32
- 238000004891 communication Methods 0.000 description 18
- 238000001228 spectrum Methods 0.000 description 16
- 238000003384 imaging method Methods 0.000 description 12
- 230000008859 change Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 10
- 230000003287 optical effect Effects 0.000 description 10
- 230000002085 persistent effect Effects 0.000 description 9
- 238000004458 analytical method Methods 0.000 description 8
- 238000010191 image analysis Methods 0.000 description 8
- 238000003491 array Methods 0.000 description 7
- 238000006243 chemical reaction Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 230000005670 electromagnetic radiation Effects 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- 230000007613 environmental effect Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000000717 retained effect Effects 0.000 description 2
- 238000002834 transmittance Methods 0.000 description 2
- 230000002457 bidirectional effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000004313 glare Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000010287 polarization Effects 0.000 description 1
- 238000010248 power generation Methods 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 210000003813 thumb Anatomy 0.000 description 1
- 238000001429 visible spectrum Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/10—Image enhancement or restoration using non-spatial domain filtering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/77—Retouching; Inpainting; Scratch removal
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Facsimile Image Signal Circuits (AREA)
Description
したがって、種々の有利な実施形態により、グリントによって生じた望ましくないフィーチャを画像から除去するための方法と装置を提供する。種々の有利な実施形態では、望ましくないフィーチャとは、画像解析の困難性を増す、及び/又は画像解析にかかる時間を引き伸ばすフィーチャである。
F(u,v)=|H(u,v)|a ejθ(u,v) (1)
ここで、F(u,v)はフィルタ済み画像230を表しており、|H(u,v)|は画像216のフーリエ変換226の振幅成分であり、uは周波数ドメイン222内の周波数の水平成分であり、vは周波数ドメイン222内の周波数の垂直成分であり、αは0〜1のパラメータ232であり、eは指数関数であり、θは位相角であり、jは−1の平方根である。
また、本発明は以下に記載する態様を含む。
(態様1)
画像内の望ましくないフィーチャ126を除去する方法であって、
画像を空間ドメイン136から周波数ドメイン138に変換することにより、変換済み画像140を形成するステップ、
変換済み画像140にフィルタ152を適用することにより、周波数ドメイン138内にフィルタ済み画像154を形成するステップ、
フィルタ済み画像154を周波数ドメイン138から空間ドメイン136に戻すことにより、修正済み画像156を形成するステップであって、修正済み画像156内の望ましくないフィーチャ126の強度が、元の画像内の望ましくないフィーチャ126の強度と比較して増大しているステップ、並びに
修正済み画像156を用いて画像から望ましくないフィーチャ126を除去することにより、処理済み画像160を形成するステップ
を含む方法。
(態様2)
画像を空間ドメイン136から周波数ドメイン138に変換することにより、変換済み画像140を形成するステップが、
画像を空間ドメイン136から周波数ドメイン138内の変換済み画像140に変換する画像のフーリエ変換142を演算するステップ
を含む、態様1に記載の方法。
(態様3)
変換済み画像140にフィルタ152を適用することにより、周波数ドメイン138内にフィルタ済み画像154を形成するステップが、
画像のフーリエ変換142の位相成分146を変化させずに画像のフーリエ変換142の振幅成分144を変化させることにより、フィルタ済み画像154を形成するステップを含む、
態様2に記載の方法。
(態様4)
画像のフーリエ変換142の位相成分146を変化させずに画像のフーリエ変換142の振幅成分144を変化させることにより、フィルタ済み画像154を形成するステップが、
ルートフィルタ228を使用して、フーリエ変換142の位相成分146の位相に影響を与えることなく画像のフーリエ変換142の振幅成分144の振幅を拡大縮小することにより、フィルタ済み画像154を形成するステップであって、ルートフィルタ228が非線型的に振幅を拡大縮小するステップを含む、
態様3に記載の方法。
(態様5)
フィルタ済み画像154を周波数ドメイン138から空間ドメイン136に戻すことにより、修正済み画像156を形成するステップが、
フィルタ済み画像154を周波数ドメイン138から空間ドメイン136に変換するフィルタ済み画像154の逆フーリエ変換142を演算するステップであって、修正済み画像156内の望ましくないフィーチャ126の強度が、元の画像内の望ましくないフィーチャ126の強度と比較して増大するステップを含む、
態様1に記載の方法。
(態様6)
修正済み画像156を用いて画像から望ましくないフィーチャ126を除去することにより、処理済み画像160を形成するステップが、
修正済み画像156に閾値240を適用して、閾値240を上回る値を有する修正済み画像156内のピクセルを保持することにより、閾値適用画像242を形成するステップ、
修正済み画像156を、画像の点拡がり関数246を用いて畳込むことにより、畳込み済み画像を形成するステップであって、畳込み済み画像により、元の画像内の望ましくないフィーチャ126の第2の位置158に対応する畳込み画像内の望ましくないフィーチャ126の第1の位置158が示されるステップ、並びに
画像から畳込み済み画像248を減算することにより、処理済み画像160を形成するステップであって、画像内の望ましくないフィーチャ126の第2の位置158における画像部分が画像から除去されることにより、望ましくないフィーチャ126が除去されるステップ
を含む、態様1に記載の方法。
(態様7)
ビークル検査システムであって、
ビークルの画像106を生成するように構成されたセンサシステム104、
センサシステム104から画像を受け取り;画像を空間ドメイン136から周波数ドメイン138に変換することにより変換済み画像140を形成し;変換済み画像140にフィルタ152を適用することにより周波数ドメイン138内にフィルタ済み画像154を形成し;フィルタ済み画像154を周波数ドメイン138から空間ドメイン136に戻すことにより修正済み画像156を形成し、このとき修正済み画像156内の望ましくないフィーチャ126の強度が元の画像内の望ましくないフィーチャ126の強度と比較して増大しており;且つ処理済み画像156を用いて画像から望ましくないフィーチャ126を除去することにより処理済み画像160を形成するように構成された画像処理プロセッサ120、並びに
処理済み画像160を解析してビークル内に不整合が存在するかどうかを決定するように構成された画像アナライザ122
を備えるビークル検査システム。
(態様8)
処理済み画像160を解析して不整合が存在するかどうかを決定するうえで、画像アナライザ122は、処理済み画像160をビークルの別の画像と比較することにより比較スペクトルを形成し;比較スペクトルを用いて不整合が存在するかどうかを決定する、態様7に記載のビークル検査システム。
Claims (7)
- 画像内の望ましくないフィーチャ(126)を除去する方法であって、
前記画像を空間ドメイン(136)から周波数ドメイン(138)に変換することにより、変換済み画像(140)を形成するステップ、
変換済み画像(140)にフィルタ(152)を適用することにより、周波数ドメイン(138)のフィルタ済み画像(154)を形成するステップ、
フィルタ済み画像(154)を周波数ドメイン(138)から空間ドメイン(136)に再変換して、修正済み画像(156)を形成するステップであって、修正済み画像(156)内の望ましくないフィーチャ(126)の強度が、前記画像内の望ましくないフィーチャ(126)の強度と比較して増大している、ステップ、並びに
前記画像から望ましくないフィーチャ(126)を除去するステップ、
を含み、
望ましくないフィーチャ(126)を除去するステップが、
修正済み画像(156)に閾値(240)を適用して、閾値(240)を上回る値を有する修正済み画像(156)内のピクセルを保持することにより、閾値適用画像(242)を形成するステップ、
閾値適用画像(242)を、画像の点拡がり関数(246)を用いて畳込むことにより、畳込み済み画像(248)を形成するステップであって、畳込み済み画像(248)が、前記画像内の望ましくないフィーチャ(126)の第2の位置に対応する、畳込み済み画像(248)内の望ましくないフィーチャ(126)の第1の位置を示す、ステップ、並びに
前記画像から畳込み済み画像(248)を減算することにより、処理済み画像(160)を形成するステップであって、前記画像内の望ましくないフィーチャ(126)の前記第2の位置における画像部分が前記画像から除去されることにより、望ましくないフィーチャ(126)が除去されるステップ
を含む、方法。 - 前記画像を空間ドメイン(136)から周波数ドメイン(138)に変換することにより、変換済み画像(140)を形成するステップが、
前記画像を空間ドメイン(136)から周波数ドメイン(138)内の変換済み画像(140)に変換する前記画像のフーリエ変換(142)を演算するステップ
を含む、請求項1に記載の方法。 - 変換済み画像(140)にフィルタ(152)を適用することにより、周波数ドメイン(138)のフィルタ済み画像(154)を形成するステップが、
前記画像のフーリエ変換(142)の位相成分(146)を変化させずに前記画像のフーリエ変換(142)の振幅成分(144)を変化させることにより、フィルタ済み画像(154)を形成するステップを含む、
請求項2に記載の方法。 - 前記画像のフーリエ変換(142)の位相成分(146)を変化させずに前記画像のフーリエ変換(142)の振幅成分(144)を変化させることにより、フィルタ済み画像(154)を形成するステップが、
ルートフィルタ(228)を使用して、フーリエ変換(142)の位相成分(146)の位相に影響を与えることなく前記画像のフーリエ変換(142)の振幅成分(144)の振幅を拡大縮小することにより、フィルタ済み画像(154)を形成するステップであって、ルートフィルタ(228)が非線型的に振幅を拡大縮小するステップを含む、
請求項3に記載の方法。 - フィルタ済み画像(154)を周波数ドメイン(138)から空間ドメイン(136)に再変換することにより、修正済み画像(156)を形成するステップが、
フィルタ済み画像(154)を周波数ドメイン(138)から空間ドメイン(136)に変換するフィルタ済み画像(154)の逆フーリエ変換(142)を演算するステップであって、修正済み画像(156)内の望ましくないフィーチャ(126)の強度が、前記画像内の望ましくないフィーチャ(126)の強度と比較して増大するステップを含む、
請求項1に記載の方法。 - ビークル検査システムであって、
ビークルの画像(106)を生成するように構成されたセンサシステム(104)、
センサシステム(104)から画像を受け取り;画像を空間ドメイン(136)から周波数ドメイン(138)に変換することにより変換済み画像(140)を形成し;変換済み画像(140)にフィルタ(152)を適用することにより周波数ドメイン(138)内にフィルタ済み画像(154)を形成し;フィルタ済み画像(154)を周波数ドメイン(138)から空間ドメイン(136)に再変換することにより修正済み画像(156)を形成し、このとき修正済み画像(156)内の望ましくないフィーチャ(126)の強度が前記画像内の望ましくないフィーチャ(126)の強度と比較して増大しており;且つ前記画像から望ましくないフィーチャ(126)を除去するように構成された画像処理プロセッサ(120)であって、修正済み画像(156)を用いて前記画像から望ましくないフィーチャ(126)を除去して処理済み画像(160)を形成するように構成された画像処理プロセッサ(120)、
コンピュータシステム(105)であって、
修正済み画像(156)に閾値(240)を適用して、閾値(240)を上回る値を有する修正済み画像(156)内のピクセルを保持することにより、閾値適用画像(242)を形成し、
閾値適用画像(242)を、前記画像の点拡がり関数(246)を用いて畳込むことにより、畳込み済み画像(248)を形成し、畳込み済み画像(248)が、前記画像内の望ましくないフィーチャ(126)の第2の位置に対応する、畳込み済み画像(248)内の望ましくないフィーチャ(126)の第1の位置を示し、並びに
前記画像から畳込み済み画像(248)を減算することにより、処理済み画像(160)を形成し、前記画像内の望ましくないフィーチャ(126)の前記第2の位置における画像部分が前記画像から除去されることにより、望ましくないフィーチャ(126)が除去されるように構成されたコンピュータシステム(105)、並びに
処理済み画像(160)を解析してビークル内に不整合が存在するかどうかを決定するように構成された画像アナライザ(122)
を備えるビークル検査システム。 - 処理済み画像(160)を解析して不整合が存在するかどうかを決定するうえで、画像アナライザ(122)は、処理済み画像(160)をビークルの別の画像と比較することにより比較を形成し;比較を用いて不整合が存在するかどうかを決定する、請求項6に記載のビークル検査システム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US13/243,053 | 2011-09-23 | ||
US13/243,053 US8559753B2 (en) | 2011-09-23 | 2011-09-23 | Reflection removal system |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2013069288A JP2013069288A (ja) | 2013-04-18 |
JP2013069288A5 JP2013069288A5 (ja) | 2015-11-12 |
JP6016552B2 true JP6016552B2 (ja) | 2016-10-26 |
Family
ID=46875689
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012207879A Active JP6016552B2 (ja) | 2011-09-23 | 2012-09-21 | 反射除去システム |
Country Status (6)
Country | Link |
---|---|
US (1) | US8559753B2 (ja) |
EP (1) | EP2573732B1 (ja) |
JP (1) | JP6016552B2 (ja) |
CN (1) | CN103020904B (ja) |
AU (1) | AU2012211359B8 (ja) |
CA (1) | CA2783900C (ja) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012171834A2 (de) * | 2011-06-17 | 2012-12-20 | Robert Bosch Gmbh | Verfahren und vorrichtung zur detektion einer sichtbeeinträchtigung einer scheibe |
US9536345B2 (en) * | 2012-12-26 | 2017-01-03 | Intel Corporation | Apparatus for enhancement of 3-D images using depth mapping and light source synthesis |
US9679522B2 (en) * | 2015-01-23 | 2017-06-13 | Abl Ip Holdings Llc | Frequency domain processing of image used to drive multi-pixel lighting device output |
JP7181202B2 (ja) | 2016-12-20 | 2022-11-30 | フォルシア イリステック インコーポレイテッド | ディスプレイ装置上の反射の補正のためのシステムおよび方法 |
EP3427664A1 (en) * | 2017-07-13 | 2019-01-16 | Koninklijke Philips N.V. | A device for scatter correction in an x-ray image and a method for scatter correction in an xray image |
US10825157B2 (en) | 2017-09-29 | 2020-11-03 | Apple Inc. | Glare reduction in captured images |
CN108052957B (zh) * | 2017-11-07 | 2021-09-14 | 聊城大学 | 一种航天器目标快速识别方法 |
CN107818552A (zh) * | 2017-11-17 | 2018-03-20 | 电子科技大学 | 一种双目图像的去反光方法 |
US10643329B2 (en) * | 2018-04-09 | 2020-05-05 | The Boeing Company | Automated paint quality control for aircraft |
CA3117946A1 (en) * | 2018-11-07 | 2020-05-14 | Spectrum Optix Inc. | Bright spot removal using a neural network |
JP7259676B2 (ja) * | 2019-09-20 | 2023-04-18 | 株式会社デンソーテン | 付着物検出装置および付着物検出方法 |
CN111882495B (zh) * | 2020-07-05 | 2022-08-02 | 东北林业大学 | 一种基于自定义模糊逻辑与gan的图像高光处理方法 |
US12039789B2 (en) | 2021-06-09 | 2024-07-16 | Magna Electronics, Llc | System and method to detect proper seatbelt usage and distance |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4863268A (en) * | 1984-02-14 | 1989-09-05 | Diffracto Ltd. | Diffractosight improvements |
JP2976869B2 (ja) * | 1995-12-28 | 1999-11-10 | 日産自動車株式会社 | 表面欠陥検査装置 |
US5686987A (en) * | 1995-12-29 | 1997-11-11 | Orfield Associates, Inc. | Methods for assessing visual tasks to establish desirable lighting and viewing conditions for performance of tasks; apparatus; and, applications |
AU2001253785A1 (en) * | 2000-04-25 | 2001-11-07 | Snap-On Technologies, Inc. | Measurement of wheel and axle alignment of motor vehicles |
US6532066B1 (en) * | 2000-08-05 | 2003-03-11 | Ford Global Technologies, Inc. | Vision system for identification of defects in wet polymeric coatings |
CN100533481C (zh) * | 2005-05-18 | 2009-08-26 | 光宝科技股份有限公司 | 清除图像噪声的方法与装置 |
US7508994B2 (en) * | 2005-12-05 | 2009-03-24 | Eastman Kodak Company | Method for detecting streaks in digital images |
JP2007303830A (ja) * | 2006-05-08 | 2007-11-22 | Toyota Motor Corp | 塗装面品質評価方法 |
JP4763525B2 (ja) * | 2006-06-21 | 2011-08-31 | 日本電信電話株式会社 | 映像整合方法 |
JP2009034413A (ja) * | 2007-08-03 | 2009-02-19 | Toshiba Corp | 放射線画像処理装置 |
EP2082863A1 (en) * | 2008-01-22 | 2009-07-29 | Inergy Automotive Systems Research (SA) | Method for detecting defects in a plastic fuel tank by radiography |
JP5210091B2 (ja) * | 2008-08-29 | 2013-06-12 | キヤノン株式会社 | 画像処理装置及びその制御方法、撮像装置、プログラム |
JP4719284B2 (ja) * | 2008-10-10 | 2011-07-06 | トヨタ自動車株式会社 | 表面検査装置 |
-
2011
- 2011-09-23 US US13/243,053 patent/US8559753B2/en active Active
-
2012
- 2012-07-26 CA CA2783900A patent/CA2783900C/en active Active
- 2012-08-03 AU AU2012211359A patent/AU2012211359B8/en active Active
- 2012-09-20 EP EP12185287.5A patent/EP2573732B1/en active Active
- 2012-09-21 JP JP2012207879A patent/JP6016552B2/ja active Active
- 2012-09-24 CN CN201210358599.7A patent/CN103020904B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
EP2573732A3 (en) | 2013-11-06 |
EP2573732B1 (en) | 2017-11-08 |
CA2783900C (en) | 2015-12-22 |
AU2012211359A1 (en) | 2013-04-11 |
EP2573732A2 (en) | 2013-03-27 |
CN103020904A (zh) | 2013-04-03 |
CA2783900A1 (en) | 2013-03-23 |
AU2012211359B2 (en) | 2016-12-01 |
AU2012211359A8 (en) | 2016-12-15 |
JP2013069288A (ja) | 2013-04-18 |
CN103020904B (zh) | 2017-10-03 |
US20130077829A1 (en) | 2013-03-28 |
US8559753B2 (en) | 2013-10-15 |
AU2012211359B8 (en) | 2016-12-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6016552B2 (ja) | 反射除去システム | |
CN108431938B (zh) | 使用图像重建以用于缺陷检测的***及方法 | |
Heredia Conde | Compressive sensing for the photonic mixer device | |
DE102016107959B4 (de) | Auf strukturiertem Licht basierende Multipfadlöschung bei ToF-Bilderzeugung | |
Lebouteiller et al. | Advanced optimal extraction for the Spitzer/IRS | |
CN109087325B (zh) | 一种基于单目视觉的直接法点云三维重建及尺度确定方法 | |
CN103778621A (zh) | 对外来物体碎片的识别方法 | |
US20130044213A1 (en) | System and method for diffuse imaging with time-varying illumination intensity | |
Haefner et al. | Noise estimation of an MTF measurement | |
EP3499201B1 (en) | Electromagnetic wave phase/amplitude generation device, electromagnetic wave phase/amplitude generation method, and electromagnetic wave phase/amplitude generation program | |
van Eekeren et al. | Performance evaluation of super-resolution reconstruction methods on real-world data | |
US9129185B1 (en) | System and method for reducing image clutter | |
CN114037609B (zh) | 一种基于学习太赫兹成像逆过程的太赫兹图像超分辨算法 | |
JP4405407B2 (ja) | 欠陥検査装置 | |
Malik et al. | An integrated computer vision based approach for driving assistance to enhance visibility in all weather conditions | |
Oh et al. | A modulation transfer function compensation for the Geostationary Ocean Color Imager (GOCI) based on the wiener filter | |
Han | Crack detection of UAV concrete surface images | |
Zamani et al. | Ellipse recovery from blurred binary images | |
Arbel et al. | Landsat TM satellite image restoration using Kalman filters | |
Yan et al. | Extending AMIRAL's blind deconvolution of adaptive optics corrected images with Markov chain Monte Carlo methods | |
CN110460756A (zh) | 一种场景实时自动去雨成像处理方法及装置 | |
Isono et al. | Robust spatiotemporal fusion of satellite images: A constrained convex optimization approach | |
Miao | Underwater image adaptive restoration and analysis by turbulence model | |
Turrisi et al. | Image deconvolution techniques for motion blur compensation in DIC measurements | |
KR102686707B1 (ko) | 고스트 이미지 획득 방법 및 이를 이용한 전자 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150924 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150924 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160818 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160830 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160927 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6016552 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |