JP6784362B2 - 歌曲メロディ情報処理方法、サーバ、および記憶媒体 - Google Patents
歌曲メロディ情報処理方法、サーバ、および記憶媒体 Download PDFInfo
- Publication number
- JP6784362B2 JP6784362B2 JP2018552111A JP2018552111A JP6784362B2 JP 6784362 B2 JP6784362 B2 JP 6784362B2 JP 2018552111 A JP2018552111 A JP 2018552111A JP 2018552111 A JP2018552111 A JP 2018552111A JP 6784362 B2 JP6784362 B2 JP 6784362B2
- Authority
- JP
- Japan
- Prior art keywords
- song
- user
- melody
- voice data
- singing voice
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 14
- 238000003672 processing method Methods 0.000 title claims description 14
- 239000011295 pitch Substances 0.000 claims description 103
- 238000000034 method Methods 0.000 claims description 31
- 238000001514 detection method Methods 0.000 claims description 22
- 230000006870 function Effects 0.000 claims description 18
- 238000001914 filtration Methods 0.000 claims description 7
- 238000000605 extraction Methods 0.000 description 25
- 239000000284 extract Substances 0.000 description 16
- 238000004422 calculation algorithm Methods 0.000 description 10
- 238000005311 autocorrelation function Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 238000013480 data collection Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000000737 periodic effect Effects 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 230000003595 spectral effect Effects 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000001174 ascending effect Effects 0.000 description 1
- 230000001186 cumulative effect Effects 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
- G06F16/63—Querying
- G06F16/632—Query formulation
- G06F16/634—Query by example, e.g. query by humming
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
- G06F16/61—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
- G06F16/68—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/683—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
- G06F16/68—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/686—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, title or artist information, time, location or usage information, user ratings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/90—Pitch determination of speech signals
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Library & Information Science (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Signal Processing (AREA)
- Acoustics & Sound (AREA)
- Computational Linguistics (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- General Health & Medical Sciences (AREA)
- Auxiliary Devices For Music (AREA)
Description
本出願は、参照によりその全体が組み込まれている、2016年3月18日に出願した、「SONG MELODY INFORMATION PROCESSING METHOD AND APPARATUS」と題する中国特許出願第2016101583497号に対する優先権を主張するものである。
MIDIファイルを収集するステップと、
MIDIファイルの歌曲識別子を取得し、MIDIファイルに従って第1のメロディ情報を生成し、それに応じて、第1のメロディ情報および歌曲識別子を歌曲メロディデータベース内に記憶するステップと、
ユーザ端末によってアップロードされたユーザ無伴奏歌唱音声データセット(user unaccompanied-singing audio data set)を取得するステップと、
ユーザ無伴奏歌唱音声データセットに従って、歌曲識別子に対応する第2のメロディ情報を抽出するステップと、
それに応じて、第2のメロディ情報および歌曲識別子を歌曲メロディデータベース内に記憶するステップと
を含む、方法が提供される。
dt(τ)=rt(0)+rt+τ(0)-2rt(τ) 式(3)
110a ユーザ端末
110b ユーザ端末
110c ユーザ端末
120 ハミング認識サーバ、サーバ
130 歌唱サーバ
140 歌曲サーバ
1100 サーバ
1101 第1のソースデータ収集モジュール
1102 第1のメロディ情報抽出モジュール
1103 第2のソースデータ取得モジュール
1104 第2のメロディ情報抽出モジュール
1105 第3のソースデータ取得モジュール
1106 第3のメロディ情報抽出モジュール
1107 フィルタ処理モジュール
1108 ハミング認識モジュール
Claims (8)
- 歌曲メロディ情報処理方法であって、
MIDIファイルを収集するステップと、
前記MIDIファイルの歌曲識別子を取得し、前記MIDIファイルに従って第1のメロディ情報を生成し、前記第1のメロディ情報と前記歌曲識別子を歌曲メロディデータベース内に対応して記憶するステップと、
ユーザ端末によってアップロードされた、ユーザ無伴奏歌唱音声データで構成されるユーザ無伴奏歌唱音声データセットを取得するステップであって、ユーザ無伴奏歌唱音声データセットにおけるユーザ無伴奏歌唱音声データは、ユーザが再生される歌曲伴奏に従って伴奏なしに歌唱されたものである、ステップと、
前記ユーザ無伴奏歌唱音声データセットに従って、前記歌曲識別子に対応する第2のメロディ情報を抽出するステップと、
前記第2のメロディ情報と前記歌曲識別子を前記歌曲メロディデータベース内に対応して記憶するステップと、
前記歌曲メロディデータベースに従って、認識されるべきハミング特徴データをハミング認識するステップと
を含み、
前記ユーザ無伴奏歌唱音声データセットに従って、前記歌曲識別子に対応する第2のメロディ情報を前記抽出するステップの前に、前記方法が、
以下のユーザ無伴奏歌唱音声データ、すなわち、
未完成のユーザ無伴奏歌唱音声データ、
ヘッドセットを装着せずに録音されたユーザ無伴奏歌唱音声データ、および
雑音または伴奏を含むと決定されたユーザ無伴奏歌唱音声データ
のうちの少なくとも1つを前記ユーザ無伴奏歌唱音声データセットからフィルタで除去するステップをさらに含む、方法。 - 前記ユーザ無伴奏歌唱音声データセットに従って、前記歌曲識別子に対応する第2のメロディ情報を前記抽出するステップが、
前記ユーザ無伴奏歌唱音声データセットをトラバースし、トラバースされたユーザ無伴奏歌唱音声データのピッチを抽出するステップと、
前記抽出されたピッチに対応するノート開始時間を取得するために、前記トラバースされたユーザ無伴奏歌唱音声データに関してノート開始検出を実行するステップと、
前記ピッチと前記対応するノート開始時間とを結合して、前記トラバースされたユーザ無伴奏歌唱音声データの歌曲識別子に対応する第2のメロディ情報にするステップと
を含む、請求項1に記載の方法。 - 前記抽出されたピッチに対応するノート開始時間を取得するために、前記トラバースされたユーザ無伴奏歌唱音声データに関してノート開始検出を前記実行するステップが、
フィルタを使用することによって、前記ユーザ無伴奏歌唱音声データを複数の周波数サブバンドに分割するステップと、
各周波数サブバンドから振幅輪郭を抽出し、一次相対差異関数を算出し、前記一次相対差異関数の局所最大値をノート開始成分として抽出し、前記ノート開始成分の時間および強度を推定するステップと、
最終的なノート開始時間を決定するために、異なる周波数サブバンドのノート開始成分の時間および強度を収束するステップと
を含む、請求項2に記載の方法。 - 歌曲メロディ情報処理方法であって、
MIDIファイルを収集するステップと、
前記MIDIファイルの歌曲識別子を取得し、前記MIDIファイルに従って第1のメロディ情報を生成し、前記第1のメロディ情報と前記歌曲識別子を歌曲メロディデータベース内に対応して記憶するステップと、
ユーザ端末によってアップロードされた、ユーザ無伴奏歌唱音声データで構成されるユーザ無伴奏歌唱音声データセットを取得するステップであって、ユーザ無伴奏歌唱音声データセットにおけるユーザ無伴奏歌唱音声データは、ユーザが再生される歌曲伴奏に従って伴奏なしに歌唱されたものである、ステップと、
前記ユーザ無伴奏歌唱音声データセットに従って、前記歌曲識別子に対応する第2のメロディ情報を抽出するステップと、
前記第2のメロディ情報と前記歌曲識別子を前記歌曲メロディデータベース内に対応して記憶するステップと、
前記歌曲メロディデータベースに従って、認識されるべきハミング特徴データをハミング認識するステップと
を含み、
前記ユーザ端末に歌曲サービスを提供するために使用される、歌曲音声データで構成される歌曲音声データセットを取得するステップと、
前記歌曲音声データセットに従って、前記歌曲識別子に対応する第3のメロディ情報を抽出するステップと、
前記第3のメロディ情報と前記歌曲識別子を前記歌曲メロディデータベース内に対応して記憶するステップと
をさらに含む方法。 - 前記歌曲音声データセットに従って、前記歌曲識別子に対応する第3のメロディ情報を前記抽出するステップが、
トラバースされた歌曲音声データのメインメロディピッチ輪郭を取得するために、前記歌曲音声データセットをトラバースするステップと、
融合されたピッチと対応するノート開始時間とを取得するために、固定時間長に従って前記メインメロディピッチ輪郭内のピッチを融合させるステップと、
前記融合されたピッチと前記対応するノート開始時間とを結合して、前記トラバースされた歌曲音声データの歌曲識別子に対応する第3のメロディ情報にするステップと
を含む、請求項4に記載の方法。 - 認識されるべきハミング特徴データを受信するステップと、
前記ハミング特徴データと前記歌曲メロディデータベース内のいくつかのメロディ情報との間の類似性を取得するステップと、
事前設定された類似性しきい値を超える類似性を前記取得された類似性から選出するステップと、
前記選出された類似性に対応する歌曲識別子を取得するステップと、
前記取得された歌曲識別子に従ってハミング認識結果を生成するステップと
をさらに含む、請求項1に記載の方法。 - メモリとプロセッサとを含むサーバであって、前記メモリがコンピュータ可読命令を記憶し、前記コンピュータ可読命令が、前記プロセッサによって実行されると、前記プロセッサに、請求項1から6のいずれか一項に記載の方法を実行させる、サーバ。
- コンピュータ可読命令を記憶した、1つまたは複数の不揮発性コンピュータ可読記憶媒体であって、前記コンピュータ可読命令が、1つまたは複数のプロセッサによって実行されると、前記1つまたは複数のプロセッサに、請求項1から6のいずれか一項に記載の方法を実行させる、不揮発性コンピュータ可読記憶媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610158349.7 | 2016-03-18 | ||
CN201610158349.7A CN107203571B (zh) | 2016-03-18 | 2016-03-18 | 歌曲旋律信息处理方法和装置 |
PCT/CN2017/074315 WO2017157142A1 (zh) | 2016-03-18 | 2017-02-21 | 歌曲旋律信息处理方法、服务器和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019507912A JP2019507912A (ja) | 2019-03-22 |
JP6784362B2 true JP6784362B2 (ja) | 2020-11-11 |
Family
ID=59850580
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018552111A Active JP6784362B2 (ja) | 2016-03-18 | 2017-02-21 | 歌曲メロディ情報処理方法、サーバ、および記憶媒体 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11288309B2 (ja) |
JP (1) | JP6784362B2 (ja) |
KR (1) | KR102167520B1 (ja) |
CN (1) | CN107203571B (ja) |
WO (1) | WO2017157142A1 (ja) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107203571B (zh) | 2016-03-18 | 2019-08-06 | 腾讯科技(深圳)有限公司 | 歌曲旋律信息处理方法和装置 |
KR101942814B1 (ko) * | 2017-08-10 | 2019-01-29 | 주식회사 쿨잼컴퍼니 | 사용자 허밍 멜로디 기반 반주 제공 방법 및 이를 위한 장치 |
CN108711415B (zh) * | 2018-06-11 | 2021-10-08 | 广州酷狗计算机科技有限公司 | 纠正伴奏和干音之间的时延的方法、装置及存储介质 |
CN109785820B (zh) * | 2019-03-01 | 2022-12-27 | 腾讯音乐娱乐科技(深圳)有限公司 | 一种处理方法、装置及设备 |
CN109920449B (zh) * | 2019-03-18 | 2022-03-04 | 广州市百果园网络科技有限公司 | 节拍分析方法、音频处理方法及装置、设备、介质 |
CN110267081B (zh) * | 2019-04-02 | 2021-01-22 | 北京达佳互联信息技术有限公司 | 直播流处理方法、装置、***、电子设备及存储介质 |
CN112420004A (zh) * | 2019-08-22 | 2021-02-26 | 北京峰趣互联网信息服务有限公司 | 生成歌曲的方法、装置、电子设备及计算机可读存储介质 |
CN112927713B (zh) * | 2019-12-06 | 2024-06-14 | 腾讯科技(深圳)有限公司 | 音频特征点的检测方法、装置和计算机存储介质 |
CN111309962B (zh) * | 2020-01-20 | 2023-05-16 | 抖音视界有限公司 | 提取音频片段的方法、装置以及电子设备 |
CN111223491B (zh) * | 2020-01-22 | 2022-11-15 | 深圳市倍轻松科技股份有限公司 | 一种提取音乐信号主旋律的方法、装置及终端设备 |
CN111309959B (zh) * | 2020-02-10 | 2023-08-18 | 清华大学 | 歌曲推荐方法和装置 |
CN111739493B (zh) * | 2020-06-23 | 2023-07-14 | 腾讯音乐娱乐科技(深圳)有限公司 | 音频处理方法、装置及存储介质 |
CN112596696B (zh) * | 2020-12-30 | 2024-06-21 | 北京达佳互联信息技术有限公司 | 歌曲录制方法、装置、终端及存储介质 |
CN113157968A (zh) * | 2021-04-07 | 2021-07-23 | 腾讯音乐娱乐科技(深圳)有限公司 | 获取同旋律音频组方法、终端及存储介质 |
CN113421589B (zh) * | 2021-06-30 | 2024-03-01 | 平安科技(深圳)有限公司 | 歌手识别方法、装置、设备及存储介质 |
CN113593609B (zh) * | 2021-08-03 | 2024-02-09 | 杭州网易云音乐科技有限公司 | 乐曲识别方法、装置、电子设备及计算机可读存储介质 |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1155201A (ja) * | 1997-07-29 | 1999-02-26 | Sony Corp | 情報処理装置および方法、情報処理システム、並びに伝送媒体 |
JP2001075985A (ja) * | 1999-09-03 | 2001-03-23 | Sony Corp | 音楽検索装置 |
JP3879323B2 (ja) * | 1999-09-06 | 2007-02-14 | ヤマハ株式会社 | 電話端末装置 |
JP2002091433A (ja) * | 2000-09-19 | 2002-03-27 | Fujitsu Ltd | メロディー情報の抽出方法その装置 |
CN1750117A (zh) * | 2004-09-16 | 2006-03-22 | 乐金电子(惠州)有限公司 | 伴唱机歌曲搜索***及其旋律数据库构成方法 |
DE102004049457B3 (de) * | 2004-10-11 | 2006-07-06 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Verfahren und Vorrichtung zur Extraktion einer einem Audiosignal zu Grunde liegenden Melodie |
CN100373382C (zh) * | 2005-09-08 | 2008-03-05 | 上海交通大学 | 基于内容的数字音乐检索旋律特征数据库及生成*** |
EP1785891A1 (en) * | 2005-11-09 | 2007-05-16 | Sony Deutschland GmbH | Music information retrieval using a 3D search algorithm |
US20080082507A1 (en) * | 2006-09-29 | 2008-04-03 | University Of Florida Research Foundation, Inc. | System and methods for providing content over a data communications network and compensating content owners and resource providers |
JP2009015535A (ja) * | 2007-07-03 | 2009-01-22 | Nippon Laboatec Kk | 類似音楽検索装置、類似音楽検索方法、類似音楽検索プログラム及びコンピュータで読み取り可能な記録媒体 |
JP5058728B2 (ja) * | 2007-09-07 | 2012-10-24 | 株式会社エクシング | デジタルコンテンツ情報配信システム、デジタルコンテンツ情報配信システムの制御方法、及びデジタルコンテンツ情報配信システムの制御プログラム、および記録媒体 |
JP4404130B2 (ja) * | 2007-10-22 | 2010-01-27 | ソニー株式会社 | 情報処理端末装置、情報処理装置、情報処理方法、プログラム |
US7979422B2 (en) * | 2008-07-30 | 2011-07-12 | Oracle International Corp. | Hybrid optimization strategies in automatic SQL tuning |
US9280598B2 (en) * | 2010-05-04 | 2016-03-08 | Soundhound, Inc. | Systems and methods for sound recognition |
CN102522083B (zh) * | 2011-11-29 | 2014-03-05 | 北京百纳威尔科技有限公司 | 一种应用移动终端搜索哼唱歌曲的方法及其移动终端 |
CN103440250A (zh) * | 2013-07-22 | 2013-12-11 | 北京承芯卓越科技有限公司 | 基于16位dsp平台应用的嵌入式哼唱检索方法及*** |
CN103559232B (zh) * | 2013-10-24 | 2017-01-04 | 中南大学 | 一种基于二分逼近动态时间归整匹配的音乐哼唱检索方法 |
CN107203571B (zh) | 2016-03-18 | 2019-08-06 | 腾讯科技(深圳)有限公司 | 歌曲旋律信息处理方法和装置 |
-
2016
- 2016-03-18 CN CN201610158349.7A patent/CN107203571B/zh active Active
-
2017
- 2017-02-21 KR KR1020187018692A patent/KR102167520B1/ko active IP Right Grant
- 2017-02-21 JP JP2018552111A patent/JP6784362B2/ja active Active
- 2017-02-21 WO PCT/CN2017/074315 patent/WO2017157142A1/zh active Application Filing
-
2018
- 2018-04-12 US US15/951,219 patent/US11288309B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
KR102167520B1 (ko) | 2020-10-19 |
WO2017157142A1 (zh) | 2017-09-21 |
KR20180088889A (ko) | 2018-08-07 |
CN107203571A (zh) | 2017-09-26 |
US11288309B2 (en) | 2022-03-29 |
JP2019507912A (ja) | 2019-03-22 |
CN107203571B (zh) | 2019-08-06 |
US20180232446A1 (en) | 2018-08-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6784362B2 (ja) | 歌曲メロディ情報処理方法、サーバ、および記憶媒体 | |
US20190348016A1 (en) | Audio Processing Techniques for Semantic Audio Recognition and Report Generation | |
US9640156B2 (en) | Audio matching with supplemental semantic audio recognition and report generation | |
Regnier et al. | Singing voice detection in music tracks using direct voice vibrato detection | |
Mauch et al. | Timbre and Melody Features for the Recognition of Vocal Activity and Instrumental Solos in Polyphonic Music. | |
US20050211071A1 (en) | Automatic music mood detection | |
CN104978962A (zh) | 哼唱检索方法及*** | |
CN102486920A (zh) | 音频事件检测方法和装置 | |
Lehner et al. | Towards Light-Weight, Real-Time-Capable Singing Voice Detection. | |
Nwe et al. | Singing voice detection in popular music | |
Rajan et al. | Music genre classification by fusion of modified group delay and melodic features | |
Foster et al. | Sequential complexity as a descriptor for musical similarity | |
Nagavi et al. | An extensive analysis of query by singing/humming system through query proportion | |
Rao | Audio signal processing | |
Waghmare et al. | Analyzing acoustics of indian music audio signal using timbre and pitch features for raga identification | |
Jun et al. | Music segmentation and summarization based on self-similarity matrix | |
Kharat et al. | A survey on query by singing/humming | |
Bohak et al. | Finding Repeating Stanzas in Folk Songs. | |
Deepsheka et al. | Recurrent neural network based music recognition using audio fingerprinting | |
Loni et al. | Singing voice identification using harmonic spectral envelope | |
Doungpaisan | Singer identification using time-frequency audio feature | |
Kumar et al. | Melody extraction from polyphonic music using deep neural network: A literature survey | |
Liang et al. | Melody extraction from polyphonic music based on the amplitude relation | |
Loni et al. | Extracting acoustic features of singing voice for various applications related to MIR: A review | |
Nagavi et al. | Perceptive analysis of query by singing system through query excerption |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180627 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180627 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190725 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190729 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191017 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20200309 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200709 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20200709 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20200717 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20200720 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200923 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201013 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6784362 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |