JP7278830B2 - 端末装置、端末装置の制御方法、およびプログラム - Google Patents
端末装置、端末装置の制御方法、およびプログラム Download PDFInfo
- Publication number
- JP7278830B2 JP7278830B2 JP2019059873A JP2019059873A JP7278830B2 JP 7278830 B2 JP7278830 B2 JP 7278830B2 JP 2019059873 A JP2019059873 A JP 2019059873A JP 2019059873 A JP2019059873 A JP 2019059873A JP 7278830 B2 JP7278830 B2 JP 7278830B2
- Authority
- JP
- Japan
- Prior art keywords
- preprocessing
- terminal device
- unit
- server
- units
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 17
- PWPJGUXAGUPAHP-UHFFFAOYSA-N lufenuron Chemical compound C1=C(Cl)C(OC(F)(F)C(C(F)(F)F)F)=CC(Cl)=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F PWPJGUXAGUPAHP-UHFFFAOYSA-N 0.000 title 1
- 238000007781 pre-processing Methods 0.000 claims description 82
- 238000004891 communication Methods 0.000 claims description 75
- 230000008569 process Effects 0.000 claims description 6
- 238000012545 processing Methods 0.000 description 31
- 230000006870 function Effects 0.000 description 17
- 238000010586 diagram Methods 0.000 description 11
- 239000008186 active pharmaceutical agent Substances 0.000 description 7
- 238000003058 natural language processing Methods 0.000 description 7
- 230000005236 sound signal Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000010365 information processing Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/162—Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/28—Constructional details of speech recognition systems
- G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Computational Linguistics (AREA)
- Theoretical Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Telephonic Communication Services (AREA)
Description
図1は、端末装置100を含むサービスシステム1の構成図である。サービスシステム1は、例えば、端末装置100と、複数のサーバ装置200-1、200-2、200-3、200-4…とを備える。符号の末尾のハイフン以下数字は、サービスを区別するための識別子であるものとする。いずれのサーバ装置であるかを区別しない場合、単にサーバ装置200と称する場合がある。図1では3つのサーバ装置200を示しているが、サーバ装置200の数は2つ以下であってもよいし、3つ以上であってもよい。それぞれのサーバ装置200は、互いに異なるサービスの提供者が運営するものである。従って、本発明におけるサービスは、互いに異なる提供者により実現されるものである。任意の主体(法人、団体、個人等)がサービスの提供者となり得る。
図2は、第1実施形態に係る端末装置100の構成と、車両Mに搭載された機器とを示す図である。車両Mには、例えば、一以上のマイク10と、表示・操作装置20と、スピーカユニット30と、車載通信装置60と、端末装置100とが搭載される。また、スマートフォンなどの汎用通信装置70が車室内に持ち込まれ、通信装置として使用される場合がある。これらの装置は、CAN(Controller Area Network)通信線等の多重通信線やシリアル通信線、無線通信網等によって互いに接続される。なお、図2に示す構成はあくまで一例であり、構成の一部が省略されてもよいし、更に別の構成が追加されてもよい。
図2に戻り、端末装置100は、例えば、第1管理部110と、第2管理部120と、通信制御部150-1~150-3と、ペアリングアプリ実行部152とを備える。第1管理部110は、前処理部112-1、112-2と、表示制御部116と、音声制御部118とを備える。第2管理部120は、前処理部122-3と、表示制御部126と、音声制御部128とを備える。いずれの通信制御部であるか区別しない場合、単に通信制御部150と称する。3つの通信制御部150を示しているのは、図1におけるサーバ装置200の数に対応させた一例に過ぎず、通信制御部150の数は、2つであってもよいし、4つ以上であってもよい。図2に示すソフトウェア配置は説明のために簡易に示しており、実際には、例えば、通信制御部150と車載通信装置60の間に管理部110が介在してもよいように、任意に改変することができる。
図5は、サーバ装置200の構成の一例を示す図である。ここでは、端末装置100からネットワークNWまでの物理的な通信についての説明を省略する。
以下、端末装置100において前処理部により実行される前処理について説明する。図6は、前処理部により実行される処理について説明するための図である。マイク10により収音された音声は、例えば、前処理部112-1と、少なくとも通信制御部150-3とに供給される。なお、図6に示す例はあくまで一例であり、マイク10により収音された音声は、各前処理部に並行して供給されてよい。
20 表示・操作装置
30 スピーカユニット
60 車載通信装置
70 汎用通信装置
100 端末装置
110 第1管理部
112-1、112-2、122-3 前処理部
116、126 表示制御部
118、128 音声制御部
120 第2管理部
150-1、150-2、150-3 通信制御部
152 ペアリングアプリ実行部
200-1、200-2、200-3 サーバ装置
Claims (8)
- 車両に搭載される端末装置であって、
マイクによって収音された車室内の音声に対して、音声認識機能を有する複数のサーバ装置のうち二以上のサーバ装置のそれぞれに応じた前処理を行う二以上の前処理部と、
前記二以上の前処理部のそれぞれにより前処理が行われた音声を、通信部を用いて、対応するサーバ装置に送信する通信制御部と、を備え、
前記通信制御部は、前記複数のサーバ装置のうち第1のサーバ装置に対しては、少なくとも、前記前処理部による前処理が行われなかった音声を送信し、
前記二以上の前処理部のうち、前記第1のサーバ装置以外のサーバ装置に応じた前処理を行う前処理部を実現する第1のOSと、前記前処理部による前処理が行われなかった音声を取り出すための第2のOSと、を搭載している、
端末装置。 - 車両に搭載される端末装置であって、
マイクによって収音された車室内の音声に対して、音声認識機能を有する複数のサーバ装置のうち二以上のサーバ装置のそれぞれに応じた前処理を行う二以上の前処理部と、
前記二以上の前処理部のそれぞれにより前処理が行われた音声を、通信部を用いて、対応するサーバ装置に送信する通信制御部と、を備え、
前記二以上の前処理部のうち一部または全部は、シーケンシャルに処理を行う、
端末装置。 - 前記通信制御部は、前記複数のサーバ装置のうち第1のサーバ装置に対しては、少なくとも、前記前処理部による前処理が行われなかった音声を送信する、
請求項2記載の端末装置。 - 前記複数のサーバ装置のそれぞれに対応した複数の前記通信制御部を備える、
請求項1から3のうちいずれか1項記載の端末装置。 - 車両に搭載される端末装置の制御方法であって、
前記端末装置が備える二以上の前処理部のそれぞれが、マイクによって収音された車室内の音声に対して、音声認識機能を有する複数のサーバ装置のうち二以上のサーバ装置のそれぞれに応じた前処理を行い、
前記二以上の前処理部のそれぞれにより前処理が行われた音声を、通信部を用いて、対応するサーバ装置に送信し、
前記複数のサーバ装置のうち第1のサーバ装置に対しては、少なくとも、前記前処理部による前処理が行われなかった音声を送信し、
前記二以上の前処理部のうち、前記第1のサーバ装置以外のサーバ装置に応じた前処理を行う前処理部を実現する第1のOSと、前記前処理部による前処理が行われなかった音声を取り出すための第2のOSと、を搭載している、
端末装置の制御方法。 - 車両に搭載される端末装置の制御方法であって、
前記端末装置が備える二以上の前処理部のそれぞれが、マイクによって収音された車室内の音声に対して、音声認識機能を有する複数のサーバ装置のうち二以上のサーバ装置のそれぞれに応じた前処理を行い、
前記二以上の前処理部のそれぞれにより前処理が行われた音声を、通信部を用いて、対応するサーバ装置に送信し、
前記二以上の前処理部のうち一部または全部は、シーケンシャルに処理を行う、
端末装置の制御方法。 - 車両に搭載される端末装置により実行されるプログラムであって、
前記端末装置に、
前記端末装置が備える二以上の前処理部のそれぞれを用いて、マイクによって収音された車室内の音声に対して、音声認識機能を有する複数のサーバ装置のうち二以上のサーバ装置のそれぞれに応じた前処理を行わせ、
前記二以上の前処理部のそれぞれにより前処理が行われた音声を、通信部を用いて、対応するサーバ装置に送信させ、
前記複数のサーバ装置のうち第1のサーバ装置に対しては、少なくとも、前記前処理部による前処理が行われなかった音声を送信させ、
前記二以上の前処理部のうち、前記第1のサーバ装置以外のサーバ装置に応じた前処理を行う前処理部を実現する第1のOSと、前記前処理部による前処理が行われなかった音声を取り出すための第2のOSと、を搭載している、
プログラム。 - 車両に搭載される端末装置により実行されるプログラムであって、
前記端末装置に、
前記端末装置が備える二以上の前処理部のそれぞれを用いて、マイクによって収音された車室内の音声に対して、音声認識機能を有する複数のサーバ装置のうち二以上のサーバ装置のそれぞれに応じた前処理を行わせ、
前記二以上の前処理部のうち一部または全部は、シーケンシャルに処理を行わせる、
プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019059873A JP7278830B2 (ja) | 2019-03-27 | 2019-03-27 | 端末装置、端末装置の制御方法、およびプログラム |
CN202010215503.6A CN111755007B (zh) | 2019-03-27 | 2020-03-24 | 终端装置、终端装置的控制方法及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019059873A JP7278830B2 (ja) | 2019-03-27 | 2019-03-27 | 端末装置、端末装置の制御方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020160281A JP2020160281A (ja) | 2020-10-01 |
JP7278830B2 true JP7278830B2 (ja) | 2023-05-22 |
Family
ID=72643185
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019059873A Active JP7278830B2 (ja) | 2019-03-27 | 2019-03-27 | 端末装置、端末装置の制御方法、およびプログラム |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7278830B2 (ja) |
CN (1) | CN111755007B (ja) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000148185A (ja) | 1998-11-13 | 2000-05-26 | Matsushita Electric Ind Co Ltd | 認識装置及び認識方法 |
JP2005003997A (ja) | 2003-06-12 | 2005-01-06 | Toyota Motor Corp | 音声認識装置および音声認識方法ならびに車両 |
JP2011232619A (ja) | 2010-04-28 | 2011-11-17 | Ntt Docomo Inc | 音声認識装置および音声認識方法 |
JP2013007764A (ja) | 2011-06-22 | 2013-01-10 | Clarion Co Ltd | 音声データ中継装置、端末装置、音声データ中継方法、および音声認識システム |
JP2016126330A (ja) | 2014-12-26 | 2016-07-11 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 音声認識装置及び音声認識方法 |
JP2016151608A (ja) | 2015-02-16 | 2016-08-22 | アルパイン株式会社 | 電子装置、情報端末システム、音声認識機能の起動プログラムおよび音声認識機能の起動方法 |
JP2019028160A (ja) | 2017-07-27 | 2019-02-21 | アルパイン株式会社 | 電子装置および情報端末システム |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001333265A (ja) * | 2000-05-19 | 2001-11-30 | Hideo Nakajima | 電子すかしを埋め込んだ電子くじと通信網を使用した電子くじの運用方法。 |
US9449602B2 (en) * | 2013-12-03 | 2016-09-20 | Google Inc. | Dual uplink pre-processing paths for machine and human listening |
JP6595324B2 (ja) * | 2015-12-04 | 2019-10-23 | クラリオン株式会社 | 車載装置、音声認識システム |
US20180075842A1 (en) * | 2016-09-14 | 2018-03-15 | GM Global Technology Operations LLC | Remote speech recognition at a vehicle |
US10304463B2 (en) * | 2016-10-03 | 2019-05-28 | Google Llc | Multi-user personalization at a voice interface device |
-
2019
- 2019-03-27 JP JP2019059873A patent/JP7278830B2/ja active Active
-
2020
- 2020-03-24 CN CN202010215503.6A patent/CN111755007B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000148185A (ja) | 1998-11-13 | 2000-05-26 | Matsushita Electric Ind Co Ltd | 認識装置及び認識方法 |
JP2005003997A (ja) | 2003-06-12 | 2005-01-06 | Toyota Motor Corp | 音声認識装置および音声認識方法ならびに車両 |
JP2011232619A (ja) | 2010-04-28 | 2011-11-17 | Ntt Docomo Inc | 音声認識装置および音声認識方法 |
JP2013007764A (ja) | 2011-06-22 | 2013-01-10 | Clarion Co Ltd | 音声データ中継装置、端末装置、音声データ中継方法、および音声認識システム |
JP2016126330A (ja) | 2014-12-26 | 2016-07-11 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 音声認識装置及び音声認識方法 |
JP2016151608A (ja) | 2015-02-16 | 2016-08-22 | アルパイン株式会社 | 電子装置、情報端末システム、音声認識機能の起動プログラムおよび音声認識機能の起動方法 |
JP2019028160A (ja) | 2017-07-27 | 2019-02-21 | アルパイン株式会社 | 電子装置および情報端末システム |
Also Published As
Publication number | Publication date |
---|---|
CN111755007A (zh) | 2020-10-09 |
CN111755007B (zh) | 2024-05-07 |
JP2020160281A (ja) | 2020-10-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109545219A (zh) | 车载语音交互方法、***、设备及计算机可读存储介质 | |
JP2009300537A (ja) | 音声作動システム、音声作動方法および車載装置 | |
JP7198122B2 (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
JP7274903B2 (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
CN111667824A (zh) | 智能体装置、智能体装置的控制方法及存储介质 | |
JP7278830B2 (ja) | 端末装置、端末装置の制御方法、およびプログラム | |
JP2020149106A (ja) | エージェント装置、エージェントシステム、サーバ装置、エージェント装置の制御方法、およびプログラム | |
US11518398B2 (en) | Agent system, agent server, method of controlling agent server, and storage medium | |
JP7239359B2 (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
JP7266418B2 (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
JP2021096717A (ja) | 情報提供装置、情報提供方法、およびプログラム | |
JP2020144264A (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
US11797261B2 (en) | On-vehicle device, method of controlling on-vehicle device, and storage medium | |
JP7175221B2 (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
JP7280066B2 (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
JP7239365B2 (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
JP7245695B2 (ja) | サーバ装置、情報提供システム、および情報提供方法 | |
JP7280074B2 (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
JP7169921B2 (ja) | エージェント装置、エージェントシステム、エージェント装置の制御方法、およびプログラム | |
JP2020160133A (ja) | エージェントシステム、エージェントシステムの制御方法、およびプログラム | |
JP2019212168A (ja) | 音声認識システムおよび情報処理装置 | |
JP7274901B2 (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
JP2020142758A (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
CN111559317B (zh) | 智能体装置、智能体装置的控制方法及存储介质 | |
CN111824174B (zh) | 智能体装置、智能体装置的控制方法及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211126 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20221011 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221018 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221219 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230418 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230510 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7278830 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |