JP6841879B2 - Karaoke equipment - Google Patents
Karaoke equipment Download PDFInfo
- Publication number
- JP6841879B2 JP6841879B2 JP2019158282A JP2019158282A JP6841879B2 JP 6841879 B2 JP6841879 B2 JP 6841879B2 JP 2019158282 A JP2019158282 A JP 2019158282A JP 2019158282 A JP2019158282 A JP 2019158282A JP 6841879 B2 JP6841879 B2 JP 6841879B2
- Authority
- JP
- Japan
- Prior art keywords
- unit
- music
- user
- karaoke
- performance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 description 19
- 238000010586 diagram Methods 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- PCTMTFRHKVHKIS-BMFZQQSSSA-N (1s,3r,4e,6e,8e,10e,12e,14e,16e,18s,19r,20r,21s,25r,27r,30r,31r,33s,35r,37s,38r)-3-[(2r,3s,4s,5s,6r)-4-amino-3,5-dihydroxy-6-methyloxan-2-yl]oxy-19,25,27,30,31,33,35,37-octahydroxy-18,20,21-trimethyl-23-oxo-22,39-dioxabicyclo[33.3.1]nonatriaconta-4,6,8,10 Chemical compound C1C=C2C[C@@H](OS(O)(=O)=O)CC[C@]2(C)[C@@H]2[C@@H]1[C@@H]1CC[C@H]([C@H](C)CCCC(C)C)[C@@]1(C)CC2.O[C@H]1[C@@H](N)[C@H](O)[C@@H](C)O[C@H]1O[C@H]1/C=C/C=C/C=C/C=C/C=C/C=C/C=C/[C@H](C)[C@@H](O)[C@@H](C)[C@H](C)OC(=O)C[C@H](O)C[C@H](O)CC[C@@H](O)[C@H](O)C[C@H](O)C[C@](O)(C[C@H](O)[C@H]2C(O)=O)O[C@H]2C1 PCTMTFRHKVHKIS-BMFZQQSSSA-N 0.000 description 3
- 235000016496 Panda oleosa Nutrition 0.000 description 2
- 240000000220 Panda oleosa Species 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000010183 spectrum analysis Methods 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Landscapes
- Reverberation, Karaoke And Other Acoustics (AREA)
Description
本発明は、カラオケ装置に関する。 The present invention relates to a karaoke device.
利用者の音声信号から声紋を取得したり、音声認識したりすることにより、カラオケ装置の利便性が高められている。このようなカラオケ装置として、一の利用者のカラオケ歌唱中に他の利用者が音声入力によって楽曲を予約できるものが提案されている（例えば、特許文献１参照）。特許文献１に記載のカラオケ装置は、利用者の声紋を楽曲に対応付けて予約している。楽曲のカラオケ演奏中に音声入力された音声信号の声紋が、この楽曲を予約した利用者の声紋と一致するか否かに応じて、一の利用者によるカラオケ歌唱中の音声信号と他の利用者による次回の楽曲の予約の音声信号を識別している。 The convenience of the karaoke device is enhanced by acquiring the voiceprint from the user's voice signal and recognizing the voice. As such a karaoke device, one that allows another user to reserve a musical piece by voice input while one user is singing karaoke has been proposed (see, for example, Patent Document 1). The karaoke device described in Patent Document 1 reserves a user's voiceprint in association with a musical piece. Depending on whether the voiceprint of the voice signal input by voice during the karaoke performance of the song matches the voiceprint of the user who reserved this song, the voice signal during karaoke singing by one user and other uses Identifies the audio signal of the reservation of the next song by the person.
特許文献１に記載の技術を用いれば、音声入力によって楽曲を予約した利用者とカラオケ歌唱中の利用者を関連付けることで、利用者のカラオケ歌唱中に他の利用者の音声入力によって次回の楽曲を予約することができる。しかしながら、複数人でカラオケを利用する際に、音声入力によってカラオケ演奏を制御することまでは考慮されていない。 By using the technique described in Patent Document 1, by associating a user who has reserved a song by voice input with a user who is singing karaoke, the next song is input by another user's voice while the user is singing karaoke. Can be booked. However, when a plurality of people use karaoke, it is not considered to control the karaoke performance by voice input.
本発明の目的は、複数人でカラオケを利用する際に、音声入力によって楽曲を予約すると共に、この楽曲を予約した利用者自身の音声入力によってカラオケ演奏を制御することができるカラオケ装置を提供することである。 An object of the present invention is to provide a karaoke device capable of reserving a musical piece by voice input when a plurality of people use karaoke, and controlling the karaoke performance by the voice input of the user who reserved the musical piece. That is.
上記目的を達成するための主たる発明は、利用者の音声を集音する集音部と、楽曲のカラオケ演奏を行う演奏部と、を備え、楽曲の予約待ち行列への登録及び楽曲のカラオケ演奏開始の制御を音声信号に基づいて行うカラオケ装置であって、カラオケ演奏する楽曲の予約を登録した予約待ち行列を記憶する記憶部と、前記集音部から出力された利用者の音声信号に基づいて利用者識別情報を生成する生成部と、前記集音部から出力された利用者の音声信号を音声認識して楽曲情報を取得し、楽曲情報が示す楽曲と当該利用者の利用者識別情報を対応付けて予約待ち行列に登録する予約部と、前記集音部から出力された利用者の音声信号を音声認識して制御コマンドを取得し、制御コマンドと当該利用者の利用者識別情報を対応付ける取得部と、制御コマンドに基づいて前記演奏部を制御する制御部と、を備え、前記制御部は、前記取得部がカラオケ演奏開始の制御コマンドを取得した場合に、予約待ち行列に登録された楽曲であって当該制御コマンドと同じ利用者識別情報に対応付けられた楽曲のカラオケ演奏を開始するように前記演奏部を制御し、前記演奏部が楽曲のカラオケ演奏を終了した場合に、演奏済みの楽曲を予約待ち行列から削除するカラオケ装置である。 The main invention for achieving the above object includes a sound collecting unit that collects the user's sound and a performance unit that performs karaoke performance of the music, and registers the music in the reservation queue and karaoke performance of the music. A karaoke device that controls the start based on an audio signal, based on a storage unit that stores a reservation queue in which reservations for songs to be performed in karaoke are registered, and a user's audio signal output from the sound collecting unit. The generation unit that generates the user identification information and the user's voice signal output from the sound collecting unit are voice-recognized to acquire the music information, and the music indicated by the music information and the user identification information of the user. And the reservation unit that registers in the reservation queue in association with each other, and the user's voice signal output from the sound collecting unit is recognized by voice to acquire a control command, and the control command and the user identification information of the user are transmitted. It includes an acquisition unit to be associated and a control unit that controls the performance unit based on a control command, and the control unit is registered in the reservation queue when the acquisition unit acquires a control command for starting a karaoke performance. When the performance unit is controlled so as to start the karaoke performance of the music that is associated with the same user identification information as the control command, and the performance unit finishes the karaoke performance of the music, the performance is performed. This is a karaoke device that deletes completed songs from the reservation queue.
本発明によれば、利用者がカラオケ演奏の開始を音声入力すると、音声信号から利用者を識別して、利用者自身が予約した楽曲のカラオケ演奏が開始される。よって、音声入力によって予約した楽曲のカラオケ演奏を、この楽曲を予約した利用者の音声入力によって制御することができる。 According to the present invention, when the user inputs the start of the karaoke performance by voice, the user is identified from the voice signal, and the karaoke performance of the music reserved by the user is started. Therefore, the karaoke performance of the music reserved by the voice input can be controlled by the voice input of the user who reserved the music.
＜第１実施形態＞
添付の図面を参照して、第１実施形態に係るカラオケ装置１について説明する。図１は、第１実施形態に係るカラオケ装置１の概略図である。なお、カラオケ装置１が通常備えている構成については備えているものとし、説明は省略する。
<First Embodiment>
The karaoke device 1 according to the first embodiment will be described with reference to the attached drawings. FIG. 1 is a schematic view of the karaoke device 1 according to the first embodiment. It should be noted that the configuration normally provided in the karaoke device 1 is assumed to be provided, and the description thereof will be omitted.
図１に示すように、カラオケ装置１は、利用者が予約した楽曲のカラオケ演奏に合わせてカラオケ歌唱を楽しむための装置であり、カラオケ本体１１と、モニタ１２と、スピーカ１３と、マイクロホン１４と、リモートコントローラ１５とを備えている。モニタ１２は、カラオケ演奏に合わせて背景映像と共に歌詞テロップを表示する。スピーカ１３は、楽曲の演奏音と共に利用者の歌唱音声を放音する。マイクロホン１４は、利用者の歌唱音声をアナログの音声信号に変換してカラオケ本体１１に入力する。リモートコントローラ１５は、カラオケ本体１１と通信可能に接続され、利用者によるカラオケ装置１に対する各種操作を受け付けたり、様々なデータを送受信したりする。
As shown in FIG. 1, the karaoke device 1 is a device for enjoying karaoke singing along with a karaoke performance of a song reserved by a user, and includes a karaoke
カラオケ本体１１は、楽曲の演奏処理、歌詞や背景映像の表示処理、入力音声に対する音響処理等のカラオケ歌唱に関する各種処理を実施している。また、カラオケ本体１１には、演奏データ、歌詞テロップデータ、映像データ、リファレンスデータ等のカラオケ歌唱に関する各種データが記憶されている。演奏データの再生によってスピーカ１３から演奏音が放音される。歌詞テロップデータ及び映像データによって歌詞テロップ及び背景映像がモニタ１２に表示される。リファレンスデータによってマイクロホン１４から入力された歌唱音声信号が採点される。
The karaoke
カラオケ本体１１が演奏データを再生してカラオケ演奏を開始すると、演奏データの再生に同期して歌詞テロップデータ及び映像データに基づいて歌詞テロップと背景映像がモニタ１２に表示される。また、カラオケ本体１１ではカラオケ演奏の演奏音信号とマイクロホン１４から入力された歌唱音声信号がミキサによって適切な比率でミキシングされて、このミキシング信号がアンプによって増幅されてスピーカ１３から放音される。このように、利用者がカラオケ演奏に合わせて歌唱すると、スピーカ１３から演奏音と共に歌唱音声が放音される。
When the
本実施形態のカラオケ装置１は、リモートコントローラ１５の操作による楽曲の予約だけではなく、利用者の音声入力による楽曲の予約にも対応している。さらに、カラオケ装置１は、リモートコントローラ１５の操作によるカラオケ演奏の制御だけではなく、利用者の音声入力によるカラオケ演奏の制御にも対応している。このとき、カラオケ装置１は、音声入力された音声信号に基づいて利用者を識別しており、利用者の音声入力によって予約された楽曲のカラオケ演奏を、この楽曲を予約した利用者の音声入力によって制御している。
The karaoke device 1 of the present embodiment supports not only reservation of music by operating the
図２及び図３を参照して、カラオケ装置１の楽曲の予約及びカラオケ演奏の制御について説明する。図２は、第１実施形態に係るカラオケ装置１の制御ブロック図である。図３は、第１実施形態に係るコマンドテーブルの一例を示す図である。なお、図２の制御ブロック図には、説明の便宜上、楽曲の予約処理、カラオケ演奏の制御処理に関するブロックのみを図示している。 With reference to FIGS. 2 and 3, the reservation of music and the control of karaoke performance of the karaoke device 1 will be described. FIG. 2 is a control block diagram of the karaoke device 1 according to the first embodiment. FIG. 3 is a diagram showing an example of a command table according to the first embodiment. Note that the control block diagram of FIG. 2 shows only blocks related to music reservation processing and karaoke performance control processing for convenience of explanation.
図２に示すように、カラオケ装置１には、集音部２１と、記憶部２２と、生成部２３と、予約部２４と、取得部２５と、制御部２６と、演奏部２７とが設けられている。集音部２１は、利用者の音声を集音するものであり、カラオケ歌唱用のマイクロホン１４やリモートコントローラ１５に設けられたマイクロホン（不図示）によって構成されている。記憶部２２には、カラオケ演奏する楽曲の予約を登録する予約待ち行列が記憶されている。予約待ち行列は予約された楽曲の楽曲ＩＤが登録されたものであり、予約待ち行列には予約された楽曲が登録順に並べられている。
As shown in FIG. 2, the karaoke device 1 is provided with a
生成部２３は、集音部２１から出力された利用者の音声信号に基づいて利用者識別情報を生成する。利用者識別情報は声紋に基づく識別情報である。公知の技術によって利用者の音声信号が声紋分析されて、声紋の分析結果に基づいて利用者識別情報が生成される。例えば、利用者が楽曲の予約を登録する際やカラオケ演奏を制御する際に発声することで、利用者の音声信号が声紋分析されて利用者識別情報が生成される。したがって、利用者に声紋分析を意識させることなく、楽曲の予約登録中やカラオケ演奏の制御中に利用者識別情報を生成することができる。
The
予約部２４は、楽曲の予約を登録する際に、集音部２１から出力された利用者の音声信号を音声認識して楽曲情報を取得し、楽曲情報が示す楽曲と当該利用者の利用者識別情報を対応付けて予約待ち行列に登録する。この場合、利用者が「予約」という文言に楽曲名を続けて発声すると、音声信号が音声認識によってテキスト化される。テキストデータは、仮名文字又はローマ字によってテキスト化されている。テキストデータの「ヨヤク」の後に続く文字列が楽曲情報として抜き出され、テキスト化された楽曲情報が示す楽曲と利用者識別情報が対応付けられて予約待ち行列に登録される。
When registering a reservation for a musical piece, the
取得部２５は、カラオケ演奏を制御する際に、集音部２１から出力された利用者の音声信号を音声認識して制御コマンドを取得し、制御コマンドと当該利用者の利用者識別情報を対応付けする。この場合、利用者が「演奏スタート」等の制御フレーズを発声すると、音声信号が音声認識によってテキスト化される。テキストデータは、仮名文字又はローマ字によってテキスト化されている。コマンドテーブル（図３）を参照して、テキスト化された制御フレーズから制御コマンドが検索されて、制御コマンドと利用者識別情報が対応付けられる。
When controlling the karaoke performance, the
制御部２６は、制御コマンドに基づいて演奏部２７を制御する。例えば、制御部２６は、取得部２５がカラオケ演奏開始の制御コマンドを取得した場合に、制御コマンドに対応付けられた利用者識別情報を認識する。そして、制御部２６は、予約待ち行列に登録された楽曲であって、制御コマンドと同じ利用者識別情報に対応付けられた楽曲のうち最も早く予約待ち行列に登録された楽曲のカラオケ演奏を開始するように演奏部２７を制御する。また、制御部２６は、演奏部２７がカラオケ演奏を終了した場合に、演奏済みの楽曲を記憶部２２の予約待ち行列から削除する。
The
演奏部２７は、制御部２６に制御されて楽曲のカラオケ演奏を行う。図３に示すように、演奏部２７の制御コマンドはコマンドテーブルに登録されている。コマンドテーブルでは、テキスト化された制御フレーズと制御コマンドが関連付けられている。例えば、制御フレーズ「エンソウスタート」は制御コマンド「Ｃ０１」に関連付けられており、制御コマンド「Ｃ０１」によって演奏部２７がカラオケ演奏を開始する。制御フレーズ「エンソウストップ」は制御コマンド「Ｃ０２」に関連付けられており、制御コマンド「Ｃ０２」によって演奏部２７がカラオケ演奏を終了する。
The
制御フレーズ「テンポアゲテ」は制御コマンド「Ｃ０３」に関連付けられており、制御コマンド「Ｃ０３」によって演奏部２７がカラオケ演奏のテンポを５％上げる。制御フレーズ「テンポサゲテ」は制御コマンド「Ｃ０４」に関連付けられており、制御コマンド「Ｃ０４」によって演奏部２７がカラオケ演奏のテンポを５％下げる。制御フレーズ「キーアゲテ」は制御コマンド「Ｃ０５」に関連付けられており、制御コマンド「Ｃ０５」によって演奏部２７がカラオケ演奏のキーを１半音上げる。制御フレーズ「キーサゲテ」は制御コマンド「Ｃ０６」に関連付けられており、制御コマンド「Ｃ０６」によって演奏部２７がカラオケ演奏のキーを１半音下げる。
The control phrase "tempo agete" is associated with the control command "C03", and the
なお、本実施形態では、リモートコントローラ１５（図１参照）が集音部２１、生成部２３、予約部２４、取得部２５を備え、カラオケ本体１１（図１参照）が記憶部２２、制御部２６、演奏部２７を備えてもよい。また、本実施形態では、リモートコントローラ１５が演奏部２７以外の全ての制御ブロックを備えていてもよい。さらに、本実施形態では、歌唱用のマイクロホン１４（図１参照）を集音部２１とし、カラオケ本体１１が生成部２３、予約部２４、取得部２５、記憶部２２、制御部２６、演奏部２７を備えてもよい。予約部２４及び取得部２５の音声認識には、音声スペクトラムの分析、パターンマッチング等の公知の技術が使用される。
In the present embodiment, the remote controller 15 (see FIG. 1) includes a
このような構成により、複数人でカラオケ装置１を利用する際に利用者を識別しながら、音声入力によって楽曲の予約とカラオケ演奏の制御を実現することができる。以下、一例として利用者Ｘと利用者Ｙがカラオケ装置１を利用する際に、利用者Ｘが音声入力によって楽曲「Ｘ１」の予約を登録して、楽曲「Ｘ１」の演奏を開始する場合について説明する。利用者Ｘがリモートコントローラ１５（図１参照）を使用して音声入力モードをＯＮにすると、音声入力によって楽曲の予約とカラオケ演奏の開始／停止等の指示を行うことができる。 With such a configuration, when a plurality of people use the karaoke device 1, it is possible to realize reservation of music and control of karaoke performance by voice input while identifying the user. Hereinafter, as an example, when the user X and the user Y use the karaoke device 1, the user X registers the reservation of the music "X1" by voice input and starts playing the music "X1". explain. When the user X turns on the voice input mode by using the remote controller 15 (see FIG. 1), he / she can reserve a song and give an instruction such as starting / stopping a karaoke performance by voice input.
利用者Ｘが「予約、Ｘ１」と発声すると、集音部２１から出力された利用者Ｘの音声信号に基づいて生成部２３によって利用者識別情報「ＩＤ＊＊＊＊Ｘ」が生成される。また、利用者Ｘの音声信号が予約部２４の音声認識によってテキスト化される。「ヨヤク エックスワン」というテキストデータは、予約を指示していること、楽曲情報が「エックスワン」であることを示している。また、予約部２４によってテキストデータから楽曲情報が抜き出されて、カラオケ装置１がカラオケ演奏可能な楽曲のリストの中から楽曲情報「エックスワン」が示す楽曲「Ｘ１」が抽出され、抽出された楽曲「Ｘ１」と利用者識別情報「ＩＤ＊＊＊＊Ｘ」とが対応付けされて予約待ち行列に登録される。なお、利用者Ｘの音声信号は取得部２５にも出力されて音声認識によってテキスト化されるが、「ヨヤク エックスワン」というテキストデータは、コマンドテーブルを参照しても制御コマンドが検索されない。このため、取得部２５は、制御コマンドを取得せずに処理を終える。
When the user X utters "reservation, X1", the
同様に、利用者Ｘによって楽曲「Ｘ１」に続いて楽曲「Ｘ２、Ｘ３、Ｘ４、Ｘ５」が予約され、いずれも利用者Ｘの利用者識別情報「ＩＤ＊＊＊＊Ｘ」に対応付けられて予約待ち行列に順次登録される。並行して、利用者Ｘの同伴者である利用者Ｙによって楽曲「Ｙ１、Ｙ２、Ｙ３、Ｙ４、Ｙ５」が予約され、いずれも利用者Ｙの利用者識別情報「ＩＤ＊＊＊＊Ｙ」に対応付けられて予約待ち行列に順次登録される。楽曲の登録順序は「Ｘ１、Ｘ２、Ｙ１、Ｙ２、Ｘ３、Ｘ４、Ｙ３、Ｙ４、Ｙ５、Ｘ５」であり、楽曲「Ｘ１」が最も早く予約待ち行列に登録されている。 Similarly, the music "X2, X3, X4, X5" is reserved by the user X following the music "X1", and all of them are associated with the user identification information "ID *** X" of the user X. Are sequentially registered in the reservation queue. At the same time, the music "Y1, Y2, Y3, Y4, Y5" is reserved by the user Y who is the companion of the user X, and all of them are the user identification information "ID *** Y" of the user Y. It is associated with and is sequentially registered in the reservation queue. The registration order of the music is "X1, X2, Y1, Y2, X3, X4, Y3, Y4, Y5, X5", and the music "X1" is registered in the reservation queue earliest.
利用者Ｘが「演奏スタート」と発声すると、集音部２１から出力された利用者Ｘの音声信号に基づいて生成部２３によって利用者識別情報「ＩＤ＊＊＊＊Ｘ」が生成される。また、利用者Ｘの音声信号が取得部２５の音声認識によってテキスト化される。取得部２５によって「エンソウスタート」というテキストデータ（制御フレーズ）がコマンドテーブル（図３参照）に照らし合わされて制御コマンド「Ｃ０１」が取得され、制御コマンド「Ｃ０１」と利用者識別情報「ＩＤ＊＊＊＊Ｘ」とが対応付けされる。すなわち、取得部２５によってカラオケ演奏開始の制御コマンドが取得される。
When the user X utters "performance start", the user identification information "ID *** X" is generated by the
制御部２６によって演奏部２７が制御されて、予約待ち行列に登録された楽曲「Ｘ１、Ｘ２、Ｙ１、Ｙ２、Ｘ３、Ｘ４、Ｙ３、Ｙ４、Ｙ５、Ｘ５」であって、利用者識別情報「ＩＤ＊＊＊＊Ｘ」に対応付けられた楽曲「Ｘ１、Ｘ２、Ｘ３、Ｘ４、Ｘ５」のうち最も早く予約待ち行列に登録された楽曲「Ｘ１」のカラオケ演奏が開始される。利用者Ｘはカラオケ演奏に合わせて楽曲「Ｘ１」をカラオケ歌唱し、カラオケ演奏の終了後に制御部２６によって楽曲「Ｘ１」が予約待ち行列から削除される。このように、利用者Ｘと利用者Ｙを識別して楽曲の予約とカラオケ演奏の制御が実施される。
The
なお、本実施形態の制御部２６は、取得部２５がカラオケ演奏開始の制御コマンドを取得した場合に、制御コマンドと同じ利用者識別情報に対応付けられた楽曲のうち、最も早く予約待ち行列に登録された楽曲のカラオケ演奏を開始するように演奏部２７を制御する構成にしたが、この構成に限定されない。制御部２６は、取得部２５がカラオケ演奏開始の制御コマンドを取得した場合に、予約待ち行列に登録された楽曲であって制御コマンドと同じ利用者識別情報に対応付けられた楽曲のカラオケ演奏を開始するように演奏部２７を制御すればよい。
When the
例えば、制御部２６は、予約待ち行列に登録された楽曲であって、取得部２５が取得した制御コマンドと同じ利用者識別情報に対応付けられた楽曲のうち、ランダムに選択した楽曲のカラオケ演奏を開始するように演奏部２７を制御してもよい。また、制御部２６は、過去の歌唱履歴に基づいた順序で選択した楽曲のカラオケ演奏を開始するように演奏部２７を制御してもよい。また、予約部２４は、一の利用者が予約した楽曲のカラオケ演奏中に、他の利用者が次回の楽曲を予約待ち行列に登録してもよい。より具体的には、カラオケ装置１が楽曲「Ｘ１」のカラオケ演奏中に、利用者Ｙが楽曲「Ｙ１」を予約待ち行列に登録してもよい。
For example, the
また、予約部２４は、集音部２１から出力された利用者の音声信号を音声認識して楽曲を検索し、検索した楽曲を当該利用者の利用者識別情報と対応付けて予約待ち行列に登録してもよい。音声入力によって楽曲を検索する方法として、音声入力されたフリーワードに基づいて楽曲を検索する公知の技術を用いることができる。これにより、曲名やアーティスト名が分からないときに、音声入力によって利用者が楽曲を検索して予約することができる。より具体的には、利用者Ｘが「検索 ＡＢＣＤ」と発声すると、集音部２１から出力された利用者Ｘの発声信号に基づいて、生成部２３によって利用者識別情報「ＩＤ＊＊＊＊Ｘ」が生成され、利用者Ｘの音声信号が予約部２４の音声認識によってテキスト化される。「ケンサク エービーシーディ」というテキストデータは、楽曲検索を指示していること、検索ワードが「エービーシーディ」であることを示している。予約部２４は、例えば、検索結果が楽曲「Ｘ６」だった場合に、楽曲「Ｘ６」と利用者識別情報「ＩＤ＊＊＊＊Ｘ」とを対応付けて予約待ち行列に登録する。また、検索結果が複数ある場合には、予約部２４は、検索結果（例えば、楽曲「Ｘ７、Ｘ８、Ｘ９」）をリモートコントローラ１５のディスプレイあるいはカラオケ装置１のモニタ１２に表示して利用者Ｘに確認させてもよい。さらに、予約部２４は、集音部２１から出力された利用者の音声信号を音声認識して、予約待ち行列に登録された楽曲を削除してもよい。例えば、利用者が「削除 Ｘ１」と発声した場合には、予約待ち行列に登録された楽曲「Ｘ１」を削除する。
In addition, the
また、カラオケ装置１の各種処理は、プロセッサを用いてソフトウェアによって実現されてもよいし、集積回路等に形成された論理回路（ハードウェア）によって実現されてもよい。プロセッサを用いる場合には、プロセッサがメモリに記憶されているプログラムを読み出して実行することで各種処理が実施される。プロセッサとしては、例えば、ＣＰＵ（Central Processing Unit）が使用される。また、メモリは、用途に応じてＲＯＭ(Read Only Memory)、ＲＡＭ（Random Access Memory）等の一つ又は複数の記憶媒体によって構成されている。 Further, various processes of the karaoke device 1 may be realized by software using a processor, or may be realized by a logic circuit (hardware) formed in an integrated circuit or the like. When a processor is used, various processes are performed by the processor reading and executing a program stored in the memory. As the processor, for example, a CPU (Central Processing Unit) is used. Further, the memory is composed of one or a plurality of storage media such as ROM (Read Only Memory) and RAM (Random Access Memory) depending on the intended use.
続いて、図４及び図５を参照して、カラオケ装置１の処理動作について説明する。図４は、第１実施形態に係る楽曲の予約の登録動作を示すフローチャートである。図５は、第１の実施形態に係るカラオケ演奏の開始動作を示すフローチャートである。なお、図４及び図５に示すフローチャートは一例を示すものであり、カラオケ装置１の処理動作はこのフローチャートに限定されない。図４及び図５では、図２の符号を適宜使用して説明する。 Subsequently, the processing operation of the karaoke device 1 will be described with reference to FIGS. 4 and 5. FIG. 4 is a flowchart showing a music reservation registration operation according to the first embodiment. FIG. 5 is a flowchart showing the start operation of the karaoke performance according to the first embodiment. The flowcharts shown in FIGS. 4 and 5 show an example, and the processing operation of the karaoke device 1 is not limited to this flowchart. In FIGS. 4 and 5, the reference numerals of FIG. 2 will be appropriately used for description.
図４に示すように、楽曲の予約時に音声入力モードがＯＮに設定されていると、利用者の音声信号が入力されたか否かが判定される（ステップＳ０１）。利用者の音声信号が入力されるまで、ステップＳ０１の処理が繰り返される。利用者に音声信号が入力されると（ステップＳ０１でＹｅｓ）、生成部２３によって利用者の音声信号が声紋分析されて利用者識別情報が生成される（ステップＳ０２）。次に、予約部２４によって利用者の音声信号が音声認識によってテキスト化されて、テキストデータの文字列から楽曲情報が探し出される（ステップＳ０３）。
As shown in FIG. 4, when the voice input mode is set to ON when the music is reserved, it is determined whether or not the user's voice signal has been input (step S01). The process of step S01 is repeated until the voice signal of the user is input. When the voice signal is input to the user (Yes in step S01), the
テキストデータに楽曲情報が含まれない場合（ステップＳ０３でＮｏ）、ステップＳ０１に処理が移行する。一方、テキストデータに楽曲情報が含まれる場合（ステップＳ０３でＹｅｓ）、テキストデータから楽曲情報が取得される（ステップＳ０４）。例えば、「ヨヤク エックスワン」というテキストデータから「エックスワン」が楽曲情報として取り出される。そして、予約部２４によって楽曲情報が示す楽曲と利用者識別情報が対応付けられて予約待ち行列に登録される（ステップＳ０５）。上記の処理を繰り返すことで、予約待ち行列に複数の楽曲が利用者毎に登録される。
If the text data does not include music information (No in step S03), the process shifts to step S01. On the other hand, when the text data includes the music information (Yes in step S03), the music information is acquired from the text data (step S04). For example, "X1" is extracted as music information from the text data "Yoyaku X1". Then, the
図５に示すように、カラオケ演奏の待機中に音声入力モードがＯＮに設定されていると、利用者の音声信号が入力されたか否かが判定される（ステップＳ１１）。利用者の音声信号が入力されるまで、ステップＳ１１の処理が繰り返される。利用者に音声信号が入力されると（ステップＳ１１でＹｅｓ）、生成部２３によって利用者の音声信号が声紋分析されて利用者識別情報が生成される（ステップＳ１２）。次に、取得部２５によって利用者の音声信号が音声認識によってテキスト化されて、テキストデータの文字列から制御フレーズが探し出される（ステップＳ１３）。
As shown in FIG. 5, when the voice input mode is set to ON while waiting for the karaoke performance, it is determined whether or not the user's voice signal has been input (step S11). The process of step S11 is repeated until the user's voice signal is input. When the voice signal is input to the user (Yes in step S11), the
テキストデータに制御フレーズが含まれない場合（ステップＳ１３でＮｏ）、ステップＳ１１に処理が移行する。一方、テキストデータに制御フレーズが含まれる場合（ステップＳ１３でＹｅｓ）、コマンドテーブル（図３参照）を参照して制御フレーズのテキストデータから制御コマンドが取得される（ステップＳ１４）。次に、取得部２５によって制御コマンドと利用者識別情報が対応付けられる（ステップＳ１５）。次に、取得部２５によって取得された制御コマンドが、カラオケ演奏開始の制御コマンド「Ｃ０１」か否かが判定される（ステップＳ１６）。
When the text data does not include the control phrase (No in step S13), the process shifts to step S11. On the other hand, when the text data includes the control phrase (Yes in step S13), the control command is acquired from the text data of the control phrase by referring to the command table (see FIG. 3) (step S14). Next, the
取得部２５がカラオケ演奏開始の制御コマンド「Ｃ０１」を取得した場合（ステップＳ１６でＹｅｓ）、制御コマンドに基づいて制御部２６によって演奏部２７が制御されて、演奏部２７による楽曲の演奏が開始される（ステップＳ１７）。このとき、取得部２５によって取得された制御コマンドと同じ利用者識別情報に対応付けられた楽曲のうち、最も早く予約待ち行列に登録された楽曲のカラオケ演奏が開始される。演奏部２７による楽曲のカラオケ演奏が終了すると（ステップＳ１８でＹｅｓ）、制御部２６によって演奏済みの楽曲が予約待ち行列から削除される（ステップＳ１９）。
When the
以上、第１実施形態によれば、楽曲の予約が利用者識別情報に対応付けられて登録され、制御コマンドが利用者識別情報に対応付けられて制御部２６に認識される。利用者がカラオケ演奏の開始を音声入力すると、音声信号から利用者を識別して、利用者自身が最初に予約した楽曲のカラオケ演奏が開始される。よって、音声入力によって予約した楽曲のカラオケ演奏を、この楽曲を予約した利用者の音声入力によって制御することができる。このように、複数の利用者を識別して、音声入力によって楽曲を予約すると共に、この楽曲のカラオケ演奏を音声入力によって制御することができる。特に、カラオケ演奏の待機中には、複数の利用者が楽曲を予約した場合であっても、カラオケ演奏させる楽曲を指定することなく、カラオケ演奏の開始を音声入力した利用者自身が予約した楽曲のカラオケ演奏を開始させることができる。
As described above, according to the first embodiment, the reservation of the music is registered in association with the user identification information, and the control command is associated with the user identification information and recognized by the
＜第２実施形態＞
次に、第２実施形態に係るカラオケ装置１について説明する。第２実施形態の制御部２６は、制御コマンドに対応付けられた利用者識別情報と楽曲に対応付けられた利用者識別情報が一致する場合に制御コマンドによって演奏部２７を制御し、不一致の場合に制御コマンドを無視している。すなわち、第２の実施形態は、楽曲のカラオケ演奏中に、この楽曲を予約した利用者の音声入力によってのみカラオケ演奏を制御する点で第１実施形態と相違している。したがって、第２実施形態については第１実施形態と同様な構成については説明を省略し、第１実施形態と同一の名称には同一の符号を付して説明する。
<Second Embodiment>
Next, the karaoke device 1 according to the second embodiment will be described. The
ここでは、一例として利用者Ｘと利用者Ｙがカラオケ装置１を利用する際に、利用者Ｘが楽曲「Ｘ１」を歌唱している最中のカラオケ演奏の制御について説明する。上記したように、利用者Ｘの音声に入力によって楽曲「Ｘ１」が利用者識別情報「ＩＤ＊＊＊＊Ｘ」に対応付けられて予約待ち行列に登録され、演奏部２７によって楽曲「Ｘ１」の前奏部分がカラオケ演奏されている。利用者Ｘが「テンポ下げて」と発声すると、集音部２１から出力された利用者Ｘの音声信号に基づいて生成部２３によって利用者識別情報「ＩＤ＊＊＊＊Ｘ」が生成される。
Here, as an example, when the user X and the user Y use the karaoke device 1, the control of the karaoke performance while the user X is singing the music "X1" will be described. As described above, the music "X1" is associated with the user identification information "ID *** X" and registered in the reservation queue by inputting to the voice of the user X, and the music "X1" is registered by the
取得部２５によって「テンポサゲテ」というテキストデータがコマンドテーブル（図３参照）に照らし合わされて制御コマンド「Ｃ０４」が取得され、制御コマンド「Ｃ０４」と利用者識別情報「ＩＤ＊＊＊＊Ｘ」とが対応付けされる。制御コマンド「Ｃ０４」に対応付けられた利用者識別情報「ＩＤ＊＊＊＊Ｘ」は楽曲「Ｘ１」に対応付けられた利用者識別情報「ＩＤ＊＊＊＊Ｘ」に一致する。このため、制御部２６によって制御コマンド「Ｃ０４」に基づいて演奏部２７が制御される。これにより、演奏部２７によって楽曲のカラオケ演奏のテンポが５％下げられる。
The
次に、利用者Ｙが「演奏ストップ」と発声すると、集音部２１から出力された利用者Ｙの音声信号に基づいて生成部２３によって利用者識別情報「ＩＤ＊＊＊＊Ｙ」が生成される。取得部２５によって「エンソウストップ」というテキストデータがコマンドテーブル（図３参照）に照らし合わされて制御コマンド「Ｃ０２」が取得され、制御コマンド「Ｃ０２」と利用者識別情報「ＩＤ＊＊＊＊Ｙ」とが対応付けされる。制御コマンド「Ｃ０２」に対応付けられた利用者識別情報「ＩＤ＊＊＊＊Ｙ」は楽曲「Ｘ１」に対応付けられた利用者識別情報「ＩＤ＊＊＊＊Ｘ」に一致しない。このため、制御部２６に制御コマンド「Ｃ０２」が無視される。
Next, when the user Y utters "play stop", the user identification information "ID *** Y" is generated by the
続いて、図６を参照して、カラオケ装置１の処理動作について説明する。図６は、第２実施形態に係るカラオケ装置１の制御動作を示すフローチャートである。なお、図６に示すフローチャートは一例を示すものであり、カラオケ装置１の制御動作はこのフローチャートに限定されない。図６では、図２の符号を適宜使用して説明する。 Subsequently, the processing operation of the karaoke device 1 will be described with reference to FIG. FIG. 6 is a flowchart showing a control operation of the karaoke device 1 according to the second embodiment. The flowchart shown in FIG. 6 is an example, and the control operation of the karaoke device 1 is not limited to this flowchart. In FIG. 6, reference numerals of FIG. 2 will be appropriately used for description.
図６に示すように、楽曲のカラオケ演奏中に音声入力がＯＮに設定されていると、利用者の音声信号が入力された否かが判定される（ステップＳ２１）。利用者の音声信号が入力されるまで、ステップＳ２１の処理が繰り返される。利用者に音声信号が入力されると（ステップＳ２１でＹｅｓ）、生成部２３によって利用者の音声信号が声紋分析されて利用者識別情報が生成される（ステップＳ２２）。次に、取得部２５によって利用者の音声信号が音声認識によってテキスト化されて、テキストデータの文字列から制御フレーズが探し出される（ステップＳ２３）。
As shown in FIG. 6, when the voice input is set to ON during the karaoke performance of the music, it is determined whether or not the user's voice signal is input (step S21). The process of step S21 is repeated until the user's voice signal is input. When the voice signal is input to the user (Yes in step S21), the
テキストデータに制御フレーズが含まれない場合（ステップＳ２３でＮｏ）、ステップＳ２１に処理が移行する。一方、テキストデータに制御フレーズが含まれる場合（ステップＳ２３でＹｅｓ）、コマンドテーブル（図３参照）を参照して制御フレーズのテキストデータから制御コマンドが取得される（ステップＳ２４）。例えば、コマンドテーブルから「テンポサゲテ」という制御フレーズに関連付けられた「Ｃ０４」が制御コマンドとして取得される。次に、取得部２５によって制御コマンドと利用者識別情報が対応付けられる（ステップＳ２５）。
When the text data does not include the control phrase (No in step S23), the process shifts to step S21. On the other hand, when the text data includes the control phrase (Yes in step S23), the control command is acquired from the text data of the control phrase by referring to the command table (see FIG. 3) (step S24). For example, "C04" associated with the control phrase "tempo sagete" is acquired as a control command from the command table. Next, the
制御部２６によって、制御コマンドに対応付けられた利用者識別情報が、カラオケ演奏中の楽曲に対応付けられた利用者識別情報と一致するか否かが判定される（ステップＳ２６）。制御コマンドに対応付けられた利用者識別情報が、カラオケ演奏中の楽曲に対応付けられた利用者識別情報と一致しない場合（ステップＳ２６でＮｏ）、制御コマンドが無視されてステップＳ２１に処理が移行する。例えば、利用者Ｘが予約した楽曲「Ｘ１」のカラオケ演奏中に、利用者Ｙによって「演奏ストップ」と音声入力されても、制御コマンドが無視されて楽曲「Ｘ１」のカラオケ演奏が継続される。
The
一方、制御コマンドに対応付けられた利用者識別情報が、カラオケ演奏中の楽曲に対応付けられた利用者識別情報と一致する場合（ステップＳ２６でＹｅｓ）、制御コマンドに基づいて制御部２６によって演奏部２７が制御される（ステップＳ２７）。例えば、利用者Ｘが予約した楽曲「Ｘ１」のカラオケ演奏中に、利用者Ｘによって「テンポ下げて」と音声入力されると、楽曲「Ｘ１」のカラオケ演奏のテンポが５％下げられる。演奏部２７による楽曲のカラオケ演奏が終了すると（ステップＳ２８でＹｅｓ）、制御部２６によって演奏済みの楽曲が予約待ち行列から削除される（ステップＳ２９）。
On the other hand, when the user identification information associated with the control command matches the user identification information associated with the music being played in karaoke (Yes in step S26), the
以上、第２実施形態によれば、楽曲のカラオケ演奏中には、この楽曲を予約した利用者の音声入力によってのみカラオケ演奏が制御され、他者の音声入力によってカラオケ演奏が制御されることが防止される。 As described above, according to the second embodiment, during the karaoke performance of the music, the karaoke performance is controlled only by the voice input of the user who reserved the music, and the karaoke performance is controlled by the voice input of another person. Be prevented.
なお、カラオケ装置１に対して、カラオケ装置１の処理動作のプログラムをインストールすることによって、音声入力によって楽曲を予約する機能と音声入力によって楽曲のカラオケ演奏の制御する機能がカラオケ装置１に追加されてもよい。このプログラムは記憶媒体に記憶されている。記憶媒体は特に限定されないが、光ディスク、光磁気ディスク、フラッシュメモリ等の非一過性の記憶媒体であってもよい。 By installing a processing operation program of the karaoke device 1 on the karaoke device 1, a function of reserving a song by voice input and a function of controlling the karaoke performance of the song by voice input are added to the karaoke device 1. You may. This program is stored in a storage medium. The storage medium is not particularly limited, but may be a non-transient storage medium such as an optical disk, a magneto-optical disk, or a flash memory.
また、本実施形態を説明したが、他の実施形態として、上記実施形態及び変形例を全体的又は部分的に組み合わせたものでもよい。 Moreover, although this embodiment has been described, as another embodiment, the above-described embodiment and modifications may be combined in whole or in part.
また、本発明の技術は上記の実施形態に限定されるものではなく、技術的思想の趣旨を逸脱しない範囲において様々に変更、置換、変形されてもよい。さらには、技術の進歩又は派生する別技術によって、技術的思想を別の仕方によって実現することができれば、その方法を用いて実施されてもよい。したがって、特許請求の範囲は、技術的思想の範囲内に含まれ得る全ての実施態様をカバーしている。 Further, the technique of the present invention is not limited to the above-described embodiment, and may be variously modified, replaced, or modified without departing from the spirit of the technical idea. Furthermore, if the technical idea can be realized in another way by the advancement of the technology or another technology derived from it, it may be carried out by using that method. Therefore, the claims cover all embodiments that may be included within the scope of the technical idea.
１ ：カラオケ装置
２１ ：集音部
２２ ：記憶部
２３ ：生成部
２４ ：予約部
２５ ：取得部
２６ ：制御部
２７ ：演奏部
1: Karaoke device 21: Sound collecting unit 22: Storage unit 23: Generation unit 24: Reservation unit 25: Acquisition unit 26: Control unit 27: Performance unit
Claims (4)
カラオケ演奏する楽曲の予約を登録した予約待ち行列を記憶する記憶部と、
前記集音部から出力された利用者の音声信号に基づいて利用者識別情報を生成する生成部と、
前記集音部から出力された利用者の音声信号を音声認識して楽曲情報を取得し、楽曲情報が示す楽曲と当該利用者の利用者識別情報を対応付けて予約待ち行列に登録する予約部と、
前記集音部から出力された利用者の音声信号を音声認識して制御コマンドを取得し、制御コマンドと当該利用者の利用者識別情報を対応付ける取得部と、
制御コマンドに基づいて前記演奏部を制御する制御部と、を備え、
前記制御部は、前記取得部がカラオケ演奏開始の制御コマンドを取得した場合に、予約待ち行列に登録された楽曲であって当該制御コマンドと同じ利用者識別情報に対応付けられた楽曲のカラオケ演奏を開始するように前記演奏部を制御し、前記演奏部が楽曲のカラオケ演奏を終了した場合に、演奏済みの楽曲を予約待ち行列から削除することを特徴とするカラオケ装置。 Karaoke that has a sound collecting unit that collects the user's voice and a performance unit that performs karaoke performance of the music, and controls the registration of the music in the reservation queue and the start of the karaoke performance of the music based on the voice signal. It ’s a device,
A storage unit that stores the reservation queue for registering reservations for songs to be played in karaoke,
A generation unit that generates user identification information based on the user's voice signal output from the sound collection unit, and a generation unit.
A reservation unit that recognizes a user's voice signal output from the sound collecting unit, acquires music information, associates the music indicated by the music information with the user identification information of the user, and registers the music in the reservation queue. When,
An acquisition unit that recognizes a user's voice signal output from the sound collecting unit and acquires a control command, and associates the control command with the user identification information of the user.
A control unit that controls the performance unit based on a control command is provided.
When the acquisition unit acquires a control command for starting a karaoke performance, the control unit performs a karaoke performance of a music registered in the reservation queue and associated with the same user identification information as the control command. A karaoke apparatus characterized in that the performance unit is controlled so as to start a musical composition, and when the performance unit finishes karaoke performance of a musical piece, the played music is deleted from the reservation queue.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019158282A JP6841879B2 (en) | 2019-08-30 | 2019-08-30 | Karaoke equipment |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019158282A JP6841879B2 (en) | 2019-08-30 | 2019-08-30 | Karaoke equipment |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP6841879B2 true JP6841879B2 (en) | 2021-03-10 |
| JP2021039140A JP2021039140A (en) | 2021-03-11 |
Family
ID=74845271
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019158282A Active JP6841879B2 (en) | 2019-08-30 | 2019-08-30 | Karaoke equipment |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6841879B2 (en) |
Family Cites Families (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08221083A (en) * | 1995-02-15 | 1996-08-30 | Hitachi Ltd | Karaoke device |
| JP2005266714A (en) * | 2004-03-22 | 2005-09-29 | Daiichikosho Co Ltd | Karaoke machine featuring performance standby system |
| JP4547305B2 (en) * | 2005-05-31 | 2010-09-22 | 株式会社第一興商 | Karaoke device with reservation change function |
| JP4916005B2 (en) * | 2007-02-28 | 2012-04-11 | 株式会社第一興商 | Karaoke system |
| JP4872874B2 (en) * | 2007-09-28 | 2012-02-08 | ブラザー工業株式会社 | Karaoke system |
| JP5415866B2 (en) * | 2009-07-31 | 2014-02-12 | 株式会社第一興商 | Karaoke system with performance music advance function |
| JP2012032632A (en) * | 2010-07-30 | 2012-02-16 | Brother Ind Ltd | Karaoke system, portable information terminal, and program |
| JP2014130187A (en) * | 2012-12-28 | 2014-07-10 | Brother Ind Ltd | Karaoke device |
| JP6114634B2 (en) * | 2013-05-31 | 2017-04-12 | 株式会社第一興商 | User-specific singing history update system |
| JP6261129B2 (en) * | 2014-04-25 | 2018-01-17 | 株式会社第一興商 | Singing recommendation music information system |
| JP7041534B2 (en) * | 2018-01-31 | 2022-03-24 | 株式会社第一興商 | Karaoke equipment |
-
2019
- 2019-08-30 JP JP2019158282A patent/JP6841879B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2021039140A (en) | 2021-03-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2897659B2 (en) | Karaoke equipment | |
| JP2009244789A (en) | Karaoke system with guide vocal creation function | |
| JP2009210790A (en) | Music selection singer analysis and recommendation device, its method, and program | |
| JP6841879B2 (en) | Karaoke equipment | |
| JP7041534B2 (en) | Karaoke equipment | |
| JP6944365B2 (en) | Karaoke equipment | |
| JP6800199B2 (en) | Karaoke device, control method of karaoke device, and program | |
| JP4516944B2 (en) | Karaoke singing assistance system | |
| JP6252420B2 (en) | Speech synthesis apparatus and speech synthesis system | |
| JP5193654B2 (en) | Duet part singing system | |
| JP2006276560A (en) | Music playback device and music playback method | |
| JP2013210501A (en) | Synthesis unit registration device, voice synthesis device, and program | |
| JP6954780B2 (en) | Karaoke equipment | |
| JP6916580B1 (en) | Karaoke equipment | |
| JP4516943B2 (en) | Karaoke singing assistance system | |
| JP2009116107A (en) | Information processing device and method | |
| JP7240271B2 (en) | Karaoke input device | |
| JP6406182B2 (en) | Karaoke device and karaoke system | |
| JP2000268545A (en) | Voice reproducing device | |
| JP7335115B2 (en) | Karaoke input device | |
| JP6864571B2 (en) | Lyrics telop color change data creation device | |
| JP2010224013A (en) | Karaoke machine stopping performance with voice uttered by singer to microphone | |
| JP6944390B2 (en) | Karaoke equipment | |
| JP6365561B2 (en) | Karaoke system, karaoke device, and program | |
| JP2011017987A (en) | Data collection and delivery system and communication karaoke system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191113 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201215 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210107 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210216 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210218 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6841879 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |