JP6646817B2 - 翻訳装置および翻訳方法 - Google Patents
翻訳装置および翻訳方法 Download PDFInfo
- Publication number
- JP6646817B2 JP6646817B2 JP2018116278A JP2018116278A JP6646817B2 JP 6646817 B2 JP6646817 B2 JP 6646817B2 JP 2018116278 A JP2018116278 A JP 2018116278A JP 2018116278 A JP2018116278 A JP 2018116278A JP 6646817 B2 JP6646817 B2 JP 6646817B2
- Authority
- JP
- Japan
- Prior art keywords
- host
- translation
- guest
- voice
- control unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000013519 translation Methods 0.000 title claims description 356
- 238000000034 method Methods 0.000 title description 22
- 230000014616 translation Effects 0.000 description 347
- 238000011156 evaluation Methods 0.000 description 58
- 230000006870 function Effects 0.000 description 37
- 238000004891 communication Methods 0.000 description 25
- 230000005236 sound signal Effects 0.000 description 23
- 230000015572 biosynthetic process Effects 0.000 description 21
- 238000003786 synthesis reaction Methods 0.000 description 21
- 238000010586 diagram Methods 0.000 description 13
- 238000003860 storage Methods 0.000 description 12
- 238000012545 processing Methods 0.000 description 9
- 230000001629 suppression Effects 0.000 description 9
- 210000003128 head Anatomy 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 5
- 238000003825 pressing Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000007792 addition Methods 0.000 description 2
- 230000002457 bidirectional effect Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 210000003027 ear inner Anatomy 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/40—Processing or translation of natural language
- G06F40/51—Translation evaluation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/40—Processing or translation of natural language
- G06F40/58—Use of machine translation, e.g. for multi-lingual retrieval, for server-side translation for client devices or for real-time translation
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/005—Language recognition
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L13/00—Speech synthesis; Text to speech systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/221—Announcement of recognition results
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Quality & Reliability (AREA)
- Signal Processing (AREA)
- Machine Translation (AREA)
Description
以下、図1〜図5を用いて、実施の形態1を説明する。本実施の形態では、説明の便宜上、翻訳装置が、外国からのゲスト(旅行者)(第2のユーザ)を案内するホスト(案内者)(第1のユーザ)に装着されて使用されることを想定して説明する。
[1−1−1.翻訳装置の物理的な構成]
図1は、実施の形態1にかかる翻訳装置の外観を示す図である。図1に示すように、翻訳装置10は、ホストに装着されて使用されるウェアラブル装置であり、より具体的にはホストの頭部に装着されて使用される帽子型の装置である。この翻訳装置10は、帽子20と、帽子20に取り付けられたマイク11、21と、スピーカ12、22と、ディスプレイ13、23とを備える。マイク11、スピーカ12及びディスプレイ13はホスト用であり、マイク21、スピーカ22及びディスプレイ23はゲスト用である。
図2は、実施の形態1にかかる翻訳装置の電気的な構成を示すブロック図である。
以上のように構成された翻訳装置10について、その動作を以下に説明する。図3は、翻訳装置10の制御部33による翻訳動作を示すフローチャートである。
以上のように、本実施の形態において、翻訳装置10は、ホストに装着されて使用され、ホストとゲストとの会話を翻訳する翻訳装置であって、ホスト用のマイク11と、スピーカ12と、ゲスト用のマイク21と、スピーカ22とを備える。マイク11は、ホストの音声を受信し、ホストの音声に応じた第1の音声データを生成する。スピーカ12は、第2の音声データが翻訳されて生成された第2の翻訳データに応じた音声をホストに出力する。マイク21は、ゲストの音声を受信し、ゲストの音声に応じた第2の音声データを生成する。スピーカ22は、第1の音声データが翻訳されて生成された第1の翻訳データに応じた音声をゲストに出力する。
実施の形態1では、翻訳装置10にインターネット200を介して接続された翻訳サーバ100が翻訳を行った。実施の形態2では、翻訳装置10自体が翻訳処理を行う。
以下、図9〜図14を用いて、実施の形態3を説明する。本実施の形態では、実施の形態1または2と同様に、説明の便宜上、翻訳装置が、外国からのゲスト(旅行者)(第2のユーザ)を案内するホスト(案内者)(第1のユーザ)に装着されて使用されることを想定して説明する。
[2−1−1.翻訳装置の物理的な構成]
本実施の形態に係る翻訳装置の物理的な構成は以下の点を除いて実施の形態1または2に同じである。以下、実施の形態3の特徴点を説明してゆく。
本実施の形態に係る翻訳装置の電気的な構成は以下の点を除いて実施の形態1または2に同じである。以下、実施の形態3の特徴点を説明してゆく。
以上のように構成された翻訳装置10について、その動作を以下に説明する。
ホストモードでの基本動作が開始されると、制御部33はホスト用のマイク11に入力があるかどうかを判断する(S200)。制御部33は、ホスト用のマイク11に入力がなければ(S200のNO)、入力が生じるまで待機する。ホスト用のマイク11に入力があれば(S200のYES)、ホスト用のマイク11はホストの音声に応じた音声信号を取得する。制御部33は、ホスト用のマイク11で音声取得を開始する(S201)。
ここからはホストモード第2動作について、図13を用いて説明する。ホストモード第2動作とは、ゲストがホストモードに割り込み、ゲストの音声のみを取得したゲスト用のマイク21の発話音声を翻訳し、ゲストに伝える動作である。
ここからはホストモード第3動作について、図14を用いて説明する。ホストモード第3動作とは、ゲストがホストモードに割り込んで、ゲストの音声とホストの音声の両方を取得したゲスト用のマイク21の発話音声からホスト用のマイク11の発話音声を差し引いたものを翻訳し、ゲストに伝える動作である。
以下、図15および図16を用いて、実施の形態4を説明する。本実施の形態では、実施の形態1〜3と同様に、説明の便宜上、翻訳装置が、外国からのゲスト(旅行者)(第2のユーザ)を案内するホスト(案内者)(第1のユーザ)に装着されて使用されることを想定して説明する。
[3−1−1.翻訳装置の物理的な構成]
本実施の形態に係る翻訳装置の物理的な構成は以下の点を除いて実施の形態3に同じである。
本実施の形態に係る翻訳装置の電気的な構成は以下の点を除いて実施の形態3に同じである。以下、実施の形態4の特徴点を説明してゆく。
まず、制御部33は、ホストモードであるか、ゲストモードであるかを判断する。ホストモードであれば、制御部33はホストモードでの基本動作を開始する。ゲストモードであれば、制御部33はゲストモードでの基本動作を開始する。
以上のように、本出願において開示する技術の例示として、実施の形態1〜4を説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置換、付加、省略などを行った実施の形態にも適用可能である。また、上記実施の形態1〜4で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。そこで、以下、他の実施の形態を例示する。
11 マイク(第1の受信部)
12 スピーカ(第1の出力部)
13 ディスプレイ(第1の表示部)
14 支持部材
15 ヘッドセット
20 帽子
21 マイク(第2の受信部)
22 スピーカ(第2の出力部)
23 ディスプレイ(第2の表示部)
30 制御モジュール
31 通信部
32 記憶部
33 制御部
40 振動部(評価提示部)
50 操作モジュール
51,52 発話ボタン
53 言語選択ボタン
100 翻訳サーバ
200 インターネット
Claims (2)
- ホストとゲストとが共用する対面型の翻訳装置であって、
前記ホストの第1の音声を受信する第1の受信部と、
前記ゲストの第2の音声を受信する第2の受信部と、
前記ゲストの前記第2の音声に基づいた第2の音声データを翻訳することにより生成された第2の翻訳データに応じた第3の音声を出力する第1の出力部と、
前記ホストの前記第1の音声に基づいた第1の音声データを翻訳することにより生成された第1の翻訳データに応じた第4の音声を出力する第2の出力部と、
前記第1の受信部が前記ホストの前記第1の音声を受信している間に、前記第2の受信部が前記ゲストの前記第2の音声を受信した場合、
前記第2の出力部は、前記ホストの前記第4の音声を出力し、
前記第1の出力部は、前記ゲストの前記第3の音声を出力せず、
前記第2の出力部が前記ホストの前記第4の音声を出力している間に、前記第2の受信部が前記ゲストの前記第2の音声を受信した場合、
前記第2の出力部は、前記ホストの前記第4の音声を出力することを停止し、
前記第1の出力部は、前記ゲストの前記第3の音声を出力する制御部と、
を備える翻訳装置。 - 前記ホストが発話する時の第1のモードと、前記ゲストが発話する時の第2のモードとを選択する操作部をさらに備え、
前記制御部は、前記第1のモードにおいて、前記第2の出力部が前記ホストの前記第4の音声を出力している間に、前記第2の受信部が前記ゲストの前記第2の音声を受信した場合、前記第2のモードへ自動で切り替える
請求項1に記載の翻訳装置。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016136153 | 2016-07-08 | ||
JP2016136153 | 2016-07-08 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018508780A Division JP6364629B2 (ja) | 2016-07-08 | 2017-04-17 | 翻訳装置および翻訳方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018173652A JP2018173652A (ja) | 2018-11-08 |
JP6646817B2 true JP6646817B2 (ja) | 2020-02-14 |
Family
ID=60901700
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018508780A Active JP6364629B2 (ja) | 2016-07-08 | 2017-04-17 | 翻訳装置および翻訳方法 |
JP2018116278A Active JP6646817B2 (ja) | 2016-07-08 | 2018-06-19 | 翻訳装置および翻訳方法 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018508780A Active JP6364629B2 (ja) | 2016-07-08 | 2017-04-17 | 翻訳装置および翻訳方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10872605B2 (ja) |
JP (2) | JP6364629B2 (ja) |
WO (1) | WO2018008227A1 (ja) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6457706B1 (ja) * | 2018-03-26 | 2019-02-06 | 株式会社フォルテ | 翻訳システム、翻訳方法、及び翻訳装置 |
US11188721B2 (en) * | 2018-10-22 | 2021-11-30 | Andi D'oleo | Headphones for a real time natural language machine interpretation |
JP2020071547A (ja) * | 2018-10-29 | 2020-05-07 | 京セラ株式会社 | 電子機器、電子ペン、方法、及びプログラム |
KR102127209B1 (ko) * | 2018-11-14 | 2020-06-30 | 주식회사 오르페오사운드웍스 | 무선 이어셋 통신 처리 시스템 및 방법 |
JP7194900B2 (ja) * | 2018-11-30 | 2022-12-23 | パナソニックIpマネジメント株式会社 | 翻訳装置及び翻訳方法 |
KR102178415B1 (ko) * | 2018-12-06 | 2020-11-13 | 주식회사 이엠텍 | 양방향 통역 시스템 |
US11159597B2 (en) | 2019-02-01 | 2021-10-26 | Vidubly Ltd | Systems and methods for artificial dubbing |
US11202131B2 (en) | 2019-03-10 | 2021-12-14 | Vidubly Ltd | Maintaining original volume changes of a character in revoiced media stream |
JP2020170241A (ja) * | 2019-04-01 | 2020-10-15 | 株式会社Doke | 耳掛け式通訳システム |
CN111476040A (zh) * | 2020-03-27 | 2020-07-31 | 深圳光启超材料技术有限公司 | 语言输出方法、头戴设备、存储介质及电子设备 |
CN111696554B (zh) * | 2020-06-05 | 2022-04-26 | 北京搜狗科技发展有限公司 | 一种翻译方法、装置、耳机和耳机收纳装置 |
Family Cites Families (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US2584896A (en) * | 1949-01-19 | 1952-02-05 | Maffris Annabelle | Lady's hearing aid hat construction |
JPH09292971A (ja) * | 1996-04-26 | 1997-11-11 | Sony Corp | 翻訳装置 |
US20040204207A1 (en) * | 2002-05-06 | 2004-10-14 | Parker John A. | Hat for hands-free telephone operation |
JP3920812B2 (ja) * | 2003-05-27 | 2007-05-30 | 株式会社東芝 | コミュニケーション支援装置、支援方法、及び支援プログラム |
JP3936687B2 (ja) * | 2003-08-29 | 2007-06-27 | 株式会社国際電気通信基礎技術研究所 | 機械翻訳文の評価方法、および機械翻訳文の評価装置 |
JP2005222136A (ja) | 2004-02-03 | 2005-08-18 | Seiko Epson Corp | 会話型翻訳装置 |
JP2007272260A (ja) | 2004-06-23 | 2007-10-18 | Matsushita Electric Ind Co Ltd | 自動翻訳装置 |
JP2006301223A (ja) * | 2005-04-20 | 2006-11-02 | Ascii Solutions Inc | 音声認識システム及び音声認識プログラム |
JP4557919B2 (ja) * | 2006-03-29 | 2010-10-06 | 株式会社東芝 | 音声処理装置、音声処理方法および音声処理プログラム |
JP2007280164A (ja) | 2006-04-10 | 2007-10-25 | Nikon Corp | 電子辞書 |
JP2008077601A (ja) | 2006-09-25 | 2008-04-03 | Toshiba Corp | 機械翻訳装置、機械翻訳方法および機械翻訳プログラム |
JP4481972B2 (ja) * | 2006-09-28 | 2010-06-16 | 株式会社東芝 | 音声翻訳装置、音声翻訳方法及び音声翻訳プログラム |
US8121335B2 (en) * | 2008-08-07 | 2012-02-21 | Sharpe John F | Accentuated headwear |
JP5666219B2 (ja) | 2010-09-10 | 2015-02-12 | ソフトバンクモバイル株式会社 | 眼鏡型表示装置及び翻訳システム |
FR2965136B1 (fr) * | 2010-09-21 | 2012-09-21 | Joel Pedre | Traducteur verbal integre a ërception d'interlocuteur integree |
JP5461651B2 (ja) * | 2011-05-24 | 2014-04-02 | 株式会社Nttドコモ | サービスサーバ装置、サービス提供方法、サービス提供プログラム |
JP5243645B2 (ja) | 2011-05-24 | 2013-07-24 | 株式会社エヌ・ティ・ティ・ドコモ | サービスサーバ装置、サービス提供方法、サービス提供プログラム |
JP5677901B2 (ja) * | 2011-06-29 | 2015-02-25 | みずほ情報総研株式会社 | 議事録作成システム及び議事録作成方法 |
JP5750380B2 (ja) * | 2012-02-10 | 2015-07-22 | 株式会社東芝 | 音声翻訳装置、音声翻訳方法および音声翻訳プログラム |
WO2013163293A1 (en) | 2012-04-25 | 2013-10-31 | Kopin Corporation | Instant translation system |
JP5967569B2 (ja) * | 2012-07-09 | 2016-08-10 | 国立研究開発法人情報通信研究機構 | 音声処理システム |
JP2015014675A (ja) * | 2013-07-04 | 2015-01-22 | 株式会社日立システムズ | 音声認識装置、方法、プログラム、システム及び端末 |
US9788586B2 (en) * | 2013-07-11 | 2017-10-17 | Randall Jay Kendis | Apparatus for mounting an electronic device on a brim of a headpiece and method of manufacturing the apparatus |
JP2015060332A (ja) | 2013-09-18 | 2015-03-30 | 株式会社東芝 | 音声翻訳装置、音声翻訳方法およびプログラム |
KR20150145109A (ko) * | 2014-06-18 | 2015-12-29 | 삼성전자주식회사 | 자동 번역을 위한 장치 및 방법 |
JP2015118710A (ja) * | 2015-01-09 | 2015-06-25 | 株式会社東芝 | 対話装置、方法及びプログラム |
-
2017
- 2017-04-17 JP JP2018508780A patent/JP6364629B2/ja active Active
- 2017-04-17 WO PCT/JP2017/015409 patent/WO2018008227A1/ja active Application Filing
-
2018
- 2018-06-19 JP JP2018116278A patent/JP6646817B2/ja active Active
- 2018-07-10 US US16/031,536 patent/US10872605B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JPWO2018008227A1 (ja) | 2018-08-16 |
JP2018173652A (ja) | 2018-11-08 |
WO2018008227A1 (ja) | 2018-01-11 |
JP6364629B2 (ja) | 2018-08-01 |
US20180322875A1 (en) | 2018-11-08 |
US10872605B2 (en) | 2020-12-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6646817B2 (ja) | 翻訳装置および翻訳方法 | |
US10599785B2 (en) | Smart sound devices and language translation system | |
JP6289448B2 (ja) | 即時翻訳システム | |
WO2017134935A1 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
KR101834546B1 (ko) | 핸즈프리 자동 통역 서비스를 위한 단말 장치 및 핸즈프리 장치와, 핸즈프리 자동 통역 서비스 방법 | |
TWI383377B (zh) | 多重感測語音辨識系統及方法 | |
JP2015060332A (ja) | 音声翻訳装置、音声翻訳方法およびプログラム | |
JP2019534492A (ja) | 通訳装置及び方法(device and method of translating a language into another language) | |
JP2015060423A (ja) | 音声翻訳装置、音声翻訳方法およびプログラム | |
US20190138603A1 (en) | Coordinating Translation Request Metadata between Devices | |
CN109360549B (zh) | 一种数据处理方法、穿戴设备和用于数据处理的装置 | |
KR101619133B1 (ko) | 통역용 이어셋 | |
KR20190015081A (ko) | 자동통역 시스템, 디바이스 및 방법 | |
JP2021503094A (ja) | 音声翻訳方法及び翻訳装置 | |
WO2021244056A1 (zh) | 一种数据处理方法、装置和可读介质 | |
JP2009178783A (ja) | コミュニケーションロボット及びその制御方法 | |
CN112001189A (zh) | 实时外语沟通*** | |
WO2019186639A1 (ja) | 翻訳システム、翻訳方法、翻訳装置、及び音声入出力装置 | |
JPWO2019150996A1 (ja) | 言語提示装置、言語提示方法、及び言語提示プログラム | |
US11081136B2 (en) | Information processing apparatus, information processing system, and program | |
JP7400364B2 (ja) | 音声認識システム及び情報処理方法 | |
US20230238001A1 (en) | Eyeglass augmented reality speech to text device and method | |
WO2022113189A1 (ja) | 音声翻訳処理装置 | |
KR20200003529A (ko) | 음성 인식이 가능한 디지털 디바이스 및 그 제어 방법 | |
JP7293863B2 (ja) | 音声処理装置、音声処理方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180619 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20190123 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190411 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190416 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190610 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20191119 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191202 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6646817 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |