JP2019502337A - オーディオ信号処理装置および方法 - Google Patents
オーディオ信号処理装置および方法 Download PDFInfo
- Publication number
- JP2019502337A JP2019502337A JP2018548270A JP2018548270A JP2019502337A JP 2019502337 A JP2019502337 A JP 2019502337A JP 2018548270 A JP2018548270 A JP 2018548270A JP 2018548270 A JP2018548270 A JP 2018548270A JP 2019502337 A JP2019502337 A JP 2019502337A
- Authority
- JP
- Japan
- Prior art keywords
- audio signal
- right ear
- transfer function
- ear transfer
- filter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
- H04S7/303—Tracking of listener position or orientation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S1/00—Two-channel systems
- H04S1/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
- H04S1/005—For headphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
- H04S2420/01—Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Stereophonic System (AREA)
Abstract
Description
τLは左耳伝達関数に適用される遅延を表し、τRは右耳伝達関数に適用される遅延を表し、τおよびΘは、以下の式:
τは秒単位の遅延を表し、cは音速を表し、aはリスナの頭部に関連するパラメータを表し、θは仮想目標位置の方位角を表し、φは仮想目標位置の仰角を表す。
f0=max(mf,min(Mf,af(φ−φp)2+fp))、
g0=max(mg,min(Mg,ag(φ−φp)2+gp))、
Δ0=max(mΔ,min(MΔ,aΔ(φ−φp)2+Δp))、
に基づいて決定され、Mf、Mg、MΔおよびmf、mg、mΔは、それぞれf、g、Δの最大値および最小値を表し、af、ag、aΔは、対応するフィルタ設計パラメータを変更する速度を制御する係数を表す。
τLは左耳伝達関数に適用される遅延を表し、τRは右耳伝達関数に適用される遅延を表し、τおよびΘは、以下の式:
τは秒単位の遅延を表し、cは音速を表し、aはリスナの頭部に関連するパラメータを表し、θは仮想目標位置の方位角を表し、φは仮想目標位置の仰角を表す。
f0=max(mf,min(Mf,af(φ−φp)2+fp))、
g0=max(mg,min(Mg,ag(φ−φp)2+gp))、
Δ0=max(mΔ,min(MΔ,aΔ(φ−φp)2+Δp))、
に基づいて決定され、Mf、Mg、MΔおよびmf、mg、mΔは、それぞれf、g、Δの最大値および最小値を表し、af、ag、aΔは、対応するフィルタ設計パラメータを変更する速度を制御する係数を表す。
本発明のさらなる実施形態が以下の図に関して記載される。
τLは左耳伝達関数に適用される遅延を表し、τRは右耳伝達関数に適用される遅延を表し、τおよびΘは、以下の式:
τは秒単位の遅延を表し、cは音速を表し(すなわち、c=340m/sec)、aはリスナの頭部に関連するパラメータを表し(たとえば、a=0.087m)、θは仮想目標位置の方位角を表し、φは仮想目標位置の仰角を表す。新しい入射角Θを決定するための上記の式は、水平面内の仮想目標位置の方位角θの一定の仰角面への投影に基づく。
f0=max(mf,min(Mf,af(φ−φp)2+fp))、
g0=max(mg,min(Mg,ag(φ−φp)2+gp))、
Δ0=max(mΔ,min(MΔ,aΔ(φ−φp)2+Δp))、
に基づいて決定され、Mf、Mg、MΔおよびmf、mg、mΔは、それぞれf、g、Δの最大値および最小値を表し、af、ag、aΔは、対応するフィルタ設計パラメータを変更する速度を制御する係数を表す。
101 入力オーディオ信号
103 メモリ
105 決定器、フィルタ
107 調整フィルタ
109 調整関数
109a 遅延ブロック、遅延
109b 周波数調整ブロック、周波数依存性
111a 左耳出力オーディオ信号
111b 右耳出力オーディオ信号
401a シェルビングフィルタ
403a ピーキングフィルタ
1000 オーディオ信号処理方法
Claims (16)
- リスナに対する方位角および仰角によって画定された仮想目標位置から来る入力オーディオ信号(101)を前記リスナが知覚するように、前記リスナに送信される前記入力オーディオ信号(101)を処理するためのオーディオ信号処理装置(100)であって、
前記リスナに対する複数の基準位置に対してあらかじめ定義された一組の所定の左耳および右耳の伝達関数のペアを記憶するように構成されたメモリ(103)であって、前記複数の基準位置が2次元平面内にある、メモリ(103)と、
前記仮想目標位置の前記方位角および前記仰角に対する前記一組の所定の左耳および右耳の伝達関数のペアに基づいて、左耳および右耳の伝達関数のペアを決定するように構成された決定器(105)と、
前記決定された左耳および右耳の伝達関数のペアと、左耳出力オーディオ信号(111a)および右耳出力オーディオ信号(111b)を取得するために、前記決定された左耳および右耳の伝達関数のペアの前記左耳伝達関数と前記右耳伝達関数との間の遅延、ならびに前記決定された左耳および右耳の伝達関数のペアの前記左耳伝達関数および前記右耳伝達関数の周波数依存性を、前記仮想目標位置の前記方位角および/または前記仰角の関数として調整するように構成された調整関数(109)とに基づいて、前記入力オーディオ信号(101)をフィルタリングするように構成された調整フィルタ(107)と
を備える、オーディオ信号処理装置(100)。 - 前記調整フィルタ(107)が、前記仮想目標位置と前記リスナの左耳との間の距離および前記仮想目標位置と前記リスナの右耳との間の距離に関連付けられた音の移動時間差を補償することにより、前記決定された左耳および右耳の伝達関数のペアの前記左耳伝達関数と前記右耳伝達関数との間の前記遅延を、前記仮想目標位置の前記方位角および/または前記仰角の関数として調整するように構成される、請求項1に記載のオーディオ信号処理装置(100)。
- 前記調整フィルタ(107)が、以下の式:
τLが前記左耳伝達関数に適用される遅延を表し、τRが前記右耳伝達関数に適用される遅延を表し、τおよびΘが、以下の式:
τが秒単位の遅延を表し、cが音速を表し、aがリスナの頭部に関連するパラメータを表し、θが前記仮想目標位置の前記方位角を表し、φが前記仮想目標位置の前記仰角を表す、
請求項1または2に記載のオーディオ信号処理装置(100)。 - 前記調整フィルタ(107)が、複数の無限インパルス応答フィルタ(401a、b、403a〜c)に基づいて、前記決定された左耳および右耳の伝達関数のペアの前記左耳伝達関数および前記右耳伝達関数の前記周波数依存性を、前記仮想目標位置の前記方位角および/または前記仰角の関数として調整するように構成され、前記複数の無限インパルス応答フィルタ(401a、b、403a〜c)が、測定された左耳および右耳の伝達関数の複数のペアの左耳伝達関数および右耳伝達関数の前記周波数依存性の少なくとも一部分を、前記仮想目標位置の前記方位角および/または前記仰角の関数として近似するように構成される、請求項1から3のいずれか一項に記載のオーディオ信号処理装置(100)。
- 各無限インパルス応答フィルタ(401a、b、403a〜c)の前記周波数依存性が、複数の所定のフィルタパラメータによって定義され、各無限インパルス応答フィルタ(401a、b、403a〜c)の前記周波数依存性が、測定された左耳および右耳の伝達関数の前記複数のペアの左耳伝達関数および右耳伝達関数の前記周波数依存性の少なくとも一部分を、前記仮想目標位置の前記方位角および/または前記仰角の関数として近似するように、前記複数の所定のフィルタパラメータが選択される、請求項4に記載のオーディオ信号処理装置(100)。
- 前記複数の無限インパルス応答フィルタ(401a、b、403a〜c)が、複数のバイカッドフィルタ(401a、b、403a〜c)であって、前記複数のバイカッドフィルタが、並列フィルタまたは直列フィルタとして実装することができる、複数のバイカッドフィルタ(401a、b、403a〜c)を備える、請求項5に記載のオーディオ信号処理装置(100)。
- 前記複数のバイカッドフィルタ(401a、b、403a〜c)が、少なくとも1つのシェルビングフィルタ(401a、b)であって、前記少なくとも1つのシェルビングフィルタ(401a、b)が、カットオフ周波数パラメータf0およびゲインパラメータg0によって定義される、シェルビングフィルタ(401a、b)、ならびに/または少なくとも1つのピーキングフィルタ(403a〜c)であって、前記少なくとも1つのピーキングフィルタ(403a〜c)が、カットオフ周波数パラメータf0、ゲインパラメータg0、および帯域幅パラメータΔ0によって定義される、ピーキングフィルタ(403a〜c)を備える、請求項6に記載のオーディオ信号処理装置(100)。
- 前記複数の無限応答フィルタの少なくとも1つの無限インパルス応答フィルタ(403a〜c)に対して、前記複数の所定のフィルタパラメータが、測定された左耳および右耳の伝達関数の前記複数のペアの左耳伝達関数または右耳伝達関数が最小または最大の大きさを有する周波数ならびに方位角および/または仰角を決定することによって、かつ前記少なくとも1つの無限インパルス応答フィルタ(403a〜c)の前記周波数依存性により、測定された左耳および右耳の伝達関数の前記複数のペアの前記左耳伝達関数または前記右耳伝達関数の前記周波数依存性を近似することによって選択される、請求項7に記載のオーディオ信号処理装置(100)。
- 前記カットオフ周波数パラメータf0、前記ゲインパラメータg0、および/または前記帯域幅パラメータΔ0が、以下の式:
f0=max(mf,min(Mf,af(φ−φp)2+fp))、
g0=max(mg,min(Mg,ag(φ−φp)2+gp))、
Δ0=max(mΔ,min(MΔ,aΔ(φ−φp)2+Δp))、
に基づいて決定され、Mf、Mg、MΔおよびmf、mg、mΔが、それぞれf、g、Δの最大値および最小値を表し、af、ag、aΔが、前記対応するフィルタパラメータを変更する速度を制御する係数を表す、請求項7または8に記載のオーディオ信号処理装置(100)。 - 前記調整フィルタ(107)が、前記左耳出力オーディオ信号(111a)を取得するために、前記調整関数(109)を前記左耳伝達関数と畳み込み、前記結果を前記入力オーディオ信号(101)と畳み込むことにより、かつ/または前記右耳出力オーディオ信号(111b)を取得するために、前記調整関数(109)を前記右耳伝達関数と畳み込み、前記結果を前記入力オーディオ信号(101)と畳み込むことにより、前記決定された左耳および右耳の伝達関数のペアならびに前記調整関数(109)に基づいて、前記入力オーディオ信号(101)をフィルタリングするように構成される、請求項1から9のいずれか一項に記載のオーディオ信号処理装置(100)。
- 前記調整フィルタ(107)が、前記左耳出力オーディオ信号(111a)を取得するために、前記左耳伝達関数を前記入力オーディオ信号(101)と畳み込み、前記結果を前記調整関数(109)と畳み込むことにより、かつ/または前記右耳出力オーディオ信号(111b)を取得するために、前記右耳伝達関数を前記入力オーディオ信号(101)と畳み込み、前記結果を前記調整関数(109)と畳み込むことにより、前記決定された左耳および右耳の伝達関数のペアならびに前記調整関数(109)に基づいて、前記入力オーディオ信号(101)をフィルタリングするように構成される、請求項1から10のいずれか一項に記載のオーディオ信号処理装置(100)。
- 前記オーディオ信号処理装置(100)が、前記左耳出力オーディオ信号(111a)および前記右耳出力オーディオ信号(111b)を出力するように構成された一対のトランスデューサ、特に、クロストーク除去を使用するヘッドホンまたはラウドスピーカをさらに備える、請求項1から11のいずれか一項に記載のオーディオ信号処理装置(100)。
- 前記所定の左耳および右耳の伝達関数のペアが、前記リスナに対して水平面内にある、前記リスナに対する複数の基準位置に対してあらかじめ定義される、請求項1から12のいずれか一項に記載のオーディオ信号処理装置(100)。
- 前記決定器(105)が、前記仮想目標位置の前記方位角および前記仰角に対する前記一組の所定の左耳および右耳の伝達関数のペアから左耳および右耳の伝達関数のペアを選択することにより、かつ/または前記仮想目標位置の前記方位角および前記仰角に対する前記一組の所定の左耳および右耳の伝達関数のペアに基づいて、左耳および右耳の伝達関数のペアを補間することにより、前記仮想目標位置の前記方位角および前記仰角に対する前記一組の所定の左耳および右耳の伝達関数のペアに基づいて、左耳および右耳の伝達関数の前記ペアを決定するように構成される、請求項1から13のいずれか一項に記載のオーディオ信号処理装置(100)。
- リスナに対する方位角および仰角によって画定された仮想目標位置から来る入力オーディオ信号(101)を前記リスナが知覚するように、前記リスナに送信される前記入力オーディオ信号(101)を処理するためのオーディオ信号処理方法(1000)であって、
前記仮想目標位置の前記方位角および前記仰角に対する一組の所定の左耳および右耳の伝達関数のペアに基づいて、左耳および右耳の伝達関数のペアを決定するステップ(1001)であって、前記所定の左耳および右耳の伝達関数のペアが、前記リスナに対する複数の基準位置に対してあらかじめ定義され、前記複数の基準位置が2次元平面内にある、ステップ(1001)と、
前記決定された左耳および右耳の伝達関数のペアと、左耳出力オーディオ信号(111a)および右耳出力オーディオ信号(111b)を取得するために、前記決定された左耳および右耳の伝達関数のペアの前記左耳伝達関数と前記右耳伝達関数との間の遅延、ならびに前記決定された左耳および右耳の伝達関数のペアの前記左耳伝達関数および前記右耳伝達関数の周波数依存性を、前記仮想目標位置の前記方位角および/または前記仰角の関数として調整するように構成された調整関数(109)とに基づいて、前記入力オーディオ信号(101)をフィルタリングするステップ(1003)と
を備える、オーディオ信号処理方法(1000)。 - コンピュータ上で実行されると請求項15の方法(1000)を実施するためのプログラムコードを備える、コンピュータプログラム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/EP2015/078805 WO2017097324A1 (en) | 2015-12-07 | 2015-12-07 | An audio signal processing apparatus and method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019502337A true JP2019502337A (ja) | 2019-01-24 |
JP6690008B2 JP6690008B2 (ja) | 2020-04-28 |
Family
ID=54782744
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018548270A Active JP6690008B2 (ja) | 2015-12-07 | 2015-12-07 | オーディオ信号処理装置および方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US10492017B2 (ja) |
EP (1) | EP3375207B1 (ja) |
JP (1) | JP6690008B2 (ja) |
KR (1) | KR102172051B1 (ja) |
CN (1) | CN108370485B (ja) |
WO (1) | WO2017097324A1 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20170325043A1 (en) * | 2016-05-06 | 2017-11-09 | Jean-Marc Jot | Immersive audio reproduction systems |
US10979844B2 (en) | 2017-03-08 | 2021-04-13 | Dts, Inc. | Distributed audio virtualization systems |
KR102119239B1 (ko) * | 2018-01-29 | 2020-06-04 | 구본희 | 바이노럴 스테레오 오디오 생성 방법 및 이를 위한 장치 |
CN114205730A (zh) | 2018-08-20 | 2022-03-18 | 华为技术有限公司 | 音频处理方法和装置 |
WO2020127836A1 (en) * | 2018-12-21 | 2020-06-25 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Sound reproduction/simulation system and method for simulating a sound reproduction |
US10932083B2 (en) * | 2019-04-18 | 2021-02-23 | Facebook Technologies, Llc | Individualization of head related transfer function templates for presentation of audio content |
US10976991B2 (en) * | 2019-06-05 | 2021-04-13 | Facebook Technologies, Llc | Audio profile for personalized audio enhancement |
CN113691927B (zh) * | 2021-08-31 | 2022-11-11 | 北京达佳互联信息技术有限公司 | 音频信号处理方法及装置 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5580913A (en) * | 1978-12-15 | 1980-06-18 | Toshiba Corp | Characteristic setting method for digital filter |
JPH06133399A (ja) * | 1992-10-14 | 1994-05-13 | Yamaha Corp | 音像定位制御装置 |
JPH10174200A (ja) * | 1996-12-12 | 1998-06-26 | Yamaha Corp | 音像定位方法及び装置 |
JP2002095096A (ja) * | 2000-09-14 | 2002-03-29 | Sony Corp | 車載用音響再生装置 |
JP2006203850A (ja) * | 2004-12-24 | 2006-08-03 | Matsushita Electric Ind Co Ltd | 音像定位装置 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5440639A (en) * | 1992-10-14 | 1995-08-08 | Yamaha Corporation | Sound localization control apparatus |
US6072877A (en) * | 1994-09-09 | 2000-06-06 | Aureal Semiconductor, Inc. | Three-dimensional virtual audio display employing reduced complexity imaging filters |
GB9726338D0 (en) * | 1997-12-13 | 1998-02-11 | Central Research Lab Ltd | A method of processing an audio signal |
JP3781902B2 (ja) * | 1998-07-01 | 2006-06-07 | 株式会社リコー | 音像定位制御装置および音像定位制御方式 |
US7680289B2 (en) * | 2003-11-04 | 2010-03-16 | Texas Instruments Incorporated | Binaural sound localization using a formant-type cascade of resonators and anti-resonators |
CN101116374B (zh) * | 2004-12-24 | 2010-08-18 | 松下电器产业株式会社 | 声像定位装置 |
EP2119306A4 (en) * | 2007-03-01 | 2012-04-25 | Jerry Mahabub | SOUND SPECIALIZATION AND ENVIRONMENT SIMULATION |
US9031242B2 (en) * | 2007-11-06 | 2015-05-12 | Starkey Laboratories, Inc. | Simulated surround sound hearing aid fitting system |
TWI517028B (zh) * | 2010-12-22 | 2016-01-11 | 傑奧笛爾公司 | 音訊空間定位和環境模擬 |
US9131305B2 (en) * | 2012-01-17 | 2015-09-08 | LI Creative Technologies, Inc. | Configurable three-dimensional sound system |
EP2675063B1 (en) * | 2012-06-13 | 2016-04-06 | Dialog Semiconductor GmbH | Agc circuit with optimized reference signal energy levels for an echo cancelling circuit |
EP2869599B1 (en) * | 2013-11-05 | 2020-10-21 | Oticon A/s | A binaural hearing assistance system comprising a database of head related transfer functions |
CN104853283A (zh) * | 2015-04-24 | 2015-08-19 | 华为技术有限公司 | 一种音频信号处理的方法和装置 |
WO2017075398A1 (en) * | 2015-10-28 | 2017-05-04 | Jean-Marc Jot | Spectral correction of audio signals |
-
2015
- 2015-12-07 CN CN201580084740.0A patent/CN108370485B/zh active Active
- 2015-12-07 KR KR1020187018740A patent/KR102172051B1/ko active IP Right Grant
- 2015-12-07 EP EP15804837.1A patent/EP3375207B1/en active Active
- 2015-12-07 WO PCT/EP2015/078805 patent/WO2017097324A1/en active Application Filing
- 2015-12-07 JP JP2018548270A patent/JP6690008B2/ja active Active
-
2018
- 2018-06-06 US US16/001,411 patent/US10492017B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5580913A (en) * | 1978-12-15 | 1980-06-18 | Toshiba Corp | Characteristic setting method for digital filter |
JPH06133399A (ja) * | 1992-10-14 | 1994-05-13 | Yamaha Corp | 音像定位制御装置 |
JPH10174200A (ja) * | 1996-12-12 | 1998-06-26 | Yamaha Corp | 音像定位方法及び装置 |
JP2002095096A (ja) * | 2000-09-14 | 2002-03-29 | Sony Corp | 車載用音響再生装置 |
JP2006203850A (ja) * | 2004-12-24 | 2006-08-03 | Matsushita Electric Ind Co Ltd | 音像定位装置 |
Also Published As
Publication number | Publication date |
---|---|
EP3375207B1 (en) | 2021-06-30 |
JP6690008B2 (ja) | 2020-04-28 |
US10492017B2 (en) | 2019-11-26 |
EP3375207A1 (en) | 2018-09-19 |
KR102172051B1 (ko) | 2020-11-02 |
CN108370485A (zh) | 2018-08-03 |
CN108370485B (zh) | 2020-08-25 |
WO2017097324A1 (en) | 2017-06-15 |
US20180324541A1 (en) | 2018-11-08 |
KR20180088721A (ko) | 2018-08-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6690008B2 (ja) | オーディオ信号処理装置および方法 | |
EP3509327B1 (en) | Method for generating customized spatial audio with head tracking | |
CN107852563B (zh) | 双耳音频再现 | |
US9961466B2 (en) | Audio signal processing apparatus and method for binaural rendering | |
JP6824155B2 (ja) | 音声再生システム及び方法 | |
KR20180135973A (ko) | 바이노럴 렌더링을 위한 오디오 신호 처리 방법 및 장치 | |
US10419871B2 (en) | Method and device for generating an elevated sound impression | |
WO2006067893A1 (ja) | 音像定位装置 | |
EP3225039B1 (en) | System and method for producing head-externalized 3d audio through headphones | |
EP1938655A1 (en) | Spatial audio simulation | |
Nowak et al. | 3D virtual audio with headphones: A literature review of the last ten years | |
US10999694B2 (en) | Transfer function dataset generation system and method | |
Koyama | Boundary integral approach to sound field transform and reproduction | |
DK180449B1 (en) | A method and system for real-time implementation of head-related transfer functions | |
WO2023026530A1 (ja) | 信号処理装置、信号処理方法、およびプログラム | |
Choi | Extension of perceived source width using sound field reproduction systems | |
CN114830694B (zh) | 用于生成三维声场的音频设备和方法 | |
Sunder | 7.1 BINAURAL AUDIO TECHNOLOGIES-AN | |
GB2620138A (en) | Method for generating a head-related transfer function | |
Simon Galvez et al. | Listener tracking stereo for object based audio reproduction | |
CN117156376A (zh) | 环绕音效的生成方法、计算机设备及计算机存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180806 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180806 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190924 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190930 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191220 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200309 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200408 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6690008 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |