JP7133029B2 - エージェント装置、エージェント制御方法、およびプログラム - Google Patents
エージェント装置、エージェント制御方法、およびプログラム Download PDFInfo
- Publication number
- JP7133029B2 JP7133029B2 JP2020551052A JP2020551052A JP7133029B2 JP 7133029 B2 JP7133029 B2 JP 7133029B2 JP 2020551052 A JP2020551052 A JP 2020551052A JP 2020551052 A JP2020551052 A JP 2020551052A JP 7133029 B2 JP7133029 B2 JP 7133029B2
- Authority
- JP
- Japan
- Prior art keywords
- agent
- voice
- function unit
- unit
- agent function
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 16
- 230000006870 function Effects 0.000 claims description 276
- 239000003795 chemical substances by application Substances 0.000 description 379
- 238000012545 processing Methods 0.000 description 27
- 238000010586 diagram Methods 0.000 description 26
- 238000004891 communication Methods 0.000 description 23
- 238000004458 analytical method Methods 0.000 description 14
- 230000004044 response Effects 0.000 description 12
- 230000008569 process Effects 0.000 description 8
- 230000008921 facial expression Effects 0.000 description 4
- 230000002452 interceptive effect Effects 0.000 description 4
- 230000000877 morphologic effect Effects 0.000 description 4
- 238000003058 natural language processing Methods 0.000 description 4
- 238000013473 artificial intelligence Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000005401 electroluminescence Methods 0.000 description 3
- 230000004913 activation Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 239000000470 constituent Substances 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 2
- 230000004807 localization Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000003213 activating effect Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000001404 mediated effect Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000036544 posture Effects 0.000 description 1
- 230000033764 rhythmic process Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/26—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
- B60K35/265—Voice
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/29—Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
- B60R11/02—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
- B60R11/0217—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for loud-speakers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
- B60R11/02—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
- B60R11/0247—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for microphones or earphones
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
- B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
- B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
- B60R16/0373—Voice control
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
- H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/148—Instrument input by voice
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/18—Information management
- B60K2360/182—Distributing information between displays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
- H04R1/403—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers loud-speakers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
- H04R2201/40—Details of arrangements for obtaining desired directional characteristic by combining a number of identical transducers covered by H04R1/40 but not provided for in any of its subgroups
- H04R2201/405—Non-uniform arrays of transducers or a plurality of uniform arrays with different transducer spacing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
- H04R2499/10—General applications
- H04R2499/13—Acoustic transducers and sound field adaptation in vehicles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/02—Spatial or constructional arrangements of loudspeakers
- H04R5/023—Spatial or constructional arrangements of loudspeakers in a chair, pillow
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field
Landscapes
- Engineering & Computer Science (AREA)
- Mechanical Engineering (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Transportation (AREA)
- Combustion & Propulsion (AREA)
- Chemical & Material Sciences (AREA)
- Acoustics & Sound (AREA)
- Otolaryngology (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Computational Linguistics (AREA)
- General Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Navigation (AREA)
Description
(1):この発明の一態様に係るエージェント装置は、車室内の音声を収集するマイクと、前記車室内に音声を出力するスピーカと、機能が異なる複数のエージェント機能部と、を備え、前記複数のエージェント機能部のそれぞれは、前記マイクにより収集された音声の意味に基づいて車両の乗員に対して話しかけるエージェント音声を生成し、生成したエージェント音声を前記スピーカに出力させ、前記マイクにより収集された音声の内容に基づいて、前記乗員と対話する主体となるエージェント機能部が切り替わる、エージェント装置である。
[全体構成]
図1は、第1の実施形態に係るエージェント装置を含むエージェントシステム1の構成図である。エージェントシステム1は、例えば、エージェント装置100と、サーバ装置200とを備える。エージェント装置100とサーバ装置200とは、例えば、インターネットやWAN(Wide Area Network)、LAN(Local Area Network)等のネットワークNWによりデータの送受信が可能な状態で接続されている。図1に示すサーバ装置200A~200Cは、例えば、後述するサブエージェント機能部154A~154Cに対応するものである。以下、サーバ装置200A~200Cのそれぞれを区別しない場合には「サーバ装置200」と称して説明する。他の名称についても同様とする。
エージェント制御装置150は、例えば、マスタエージェント機能部152と、複数のサブエージェント機能部(エージェント機能部の一例)154と、表示制御部156と、音声制御部158と、機器制御部160と、記憶部170とを備える。これらの構成要素は、例えば、CPU(Central Processing Unit)等のコンピュータプロセッサがプログラム(ソフトウェア)を実行することにより実現される。また、これらの構成要素のうち一部または全部は、LSI(Large Scale Integration)やASIC(Application Specific Integrated Circuit)、FPGA(Field-Programmable Gate Array)、GPU(Graphics Processing Unit)等のハードウェア(回路部;circuitryを含む)によって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。プログラムは、予め記憶部170に格納されていてもよいし、DVDやCD-ROM等の着脱可能な記憶媒体に格納されており、記憶媒体がドライブ装置に装着されることで記憶部170にインストールされてもよい。以下では、複数のサブエージェント機能部154の一例として、三つのサブエージェント機能部154A~154Cを用いるものとする。
マスタエージェント機能部152は、マイク124Aおよび124Bから音声を入力することができる音声入力インターフェース152aを備える。また、サブエージェント機能部154A~154Cは、それぞれマイク124Bから音声を入力することができる音声入力インターフェース154Aa~154Caを備える。つまり、マイク124Aは、音声入力インターフェース152aに割り当てられ、マイク124Bは、乗員の要求に対する処理状態に応じてマスタエージェント機能部152またはサブエージェント機能部154A~154Cのうち、何れか一つに切り替え可能に割り当てられる。マイク124Bよりも高性能であるマイク124Aをマスタエージェント機能部152に割り当てることで、マスタエージェント機能部152は、マイク124Bよりも音質のよい音声を入力することができる。
サブエージェント機能部154は、音声入力インターフェースから入力した音声を含む情報を、ネットワークNWを介してサーバ装置200に送信し、送信した音声に対応する対話情報や出力制御情報を取得する。また、サブエージェント機能部154は、入力した音声を含む情報をサーバ装置200に送信する場合に、車両Mの状態(例えば、車両Mの位置や周囲環境)に関する情報を送信してもよい。
次に、サーバ装置200の概略構成について図を用いて説明する。なお、図1に示すサーバ装置200A~200Cは、サブエージェント機能部154A~154Cごとに設けられているが、それぞれの概略構成については、後述する回答情報DBの内容を除いて略同様であるため、「サーバ装置200」として纏めて説明する。
次に、エージェント装置100により実行される処理の詳細について、異なる場面ごとに説明する。以下では、エージェント装置100により出力されるエージェント画像が、表示部132Aに表示されるものとして説明する。
図9は、第1の場面において、エージェント装置100により実行される処理について説明するための図である。第1の場面は、例えば、マスタエージェント機能部152により、乗員の音声から任意のエージェントを呼び出すワードが認識された場面である。なお、第1の場面においては、マイク124Aおよびマイク124Bのそれぞれで入力された音声が、マスタエージェント機能部152の音声入力インターフェース152aに入力されているものとする。
図10は、第2の場面において、エージェント装置100により実行される処理について説明するための図である。第2の場面は、例えば、乗員から「エアコンの起動」に対応するリクエストを含む音声が入力され、入力されたリクエストに対応する制御を実行した場面である。また、第2の場面は、上述した第1の場面以降の連続する場面であるものとする。
図11は、第3の場面において、エージェント装置100により実行される処理について説明するための図である。第3の場面は、例えば、エージェントAが実行できない機能制御について乗員からリクエストがあった場面である。
図12は、第4の場面において、エージェント装置100により実行される処理について説明するための図である。第4の場面は、例えば、第3の場面において、エージェントBによる乗員への支援が終了した場面である。
以下、第1の実施形態のエージェント装置100による一連の処理の流れを、フローチャートを用いて説明する。図13は、エージェント装置100による一連の処理の流れの一例を示すフローチャートである。なお、図13では、主にマスタエージェント機能部152による処理の流れについて説明するための図である。図13の処理は、所定のタイミングで繰り返し実行されてもよい。
次に、第2の実施形態に係るエージェント装置の構成について説明する。第2の実施形態では、第1の実施形態のエージェント装置100と比較して、エージェント制御装置150にマスタエージェント機能部と複数のサブエージェント機能部のうち一つとが一体に動作するマスタ/サブエージェント機能部を備える点で異なる。したがって、以下では、主にマスタ/サブエージェント機能部の構成を中心に説明する。
次に、第3の実施形態に係るエージェント装置の構成について説明する。第3の実施形態では、第1の実施形態のエージェントシステム1と比較して、サーバ装置200の機能をエージェント制御装置内に設ける点で異なる。したがって、以下では、主にエージェント制御装置の構成を中心に説明する。
Claims (9)
- 車室内の音声を収集するマイクと、
前記車室内に音声を出力するスピーカと、
機能が異なる複数のエージェント機能部と、
前記マイクにより収集された音声の意味に基づいて、前記車室内の乗員と対話する主体を切り替えるマスタエージェント機能部と、
前記複数のエージェント機能部のそれぞれが実行可能な機能に関する機能情報を記憶する記憶部と、を備え、
前記マスタエージェント機能部は、前記マイクにより収集された音声の意味に基づいて、前記機能情報を参照し、前記音声の意味に対応する機能を実現可能なエージェント機能部に切り替え、
前記複数のエージェント機能部のそれぞれは、前記マイクにより収集された音声の意味に基づいて前記乗員に対して話しかけるエージェント音声を生成し、生成したエージェント音声を前記スピーカに出力させ、前記マスタエージェント機能部による切り替え制御によって、前記乗員と対話する主体となるエージェント機能部が切り替わり、
前記マイクを前記車室内に複数備え、
前記複数のマイクからの入力のうちの一つは、前記マスタエージェント機能部に割り当てられ、
前記マスタエージェント機能部に割り当てられるマイクは、他のマイクよりも高性能であり、
前記マスタエージェント機能部は、割り当てられたマイクからの音声を常時入力して、前記乗員と前記エージェント機能部とが対話中であっても前記乗員と対話する主体を切り替える機能を継続させる、
エージェント装置。 - 前記複数のエージェント機能部のそれぞれは、前記生成したエージェント音声の音像が所定の位置に定位されるように、前記エージェント音声を前記スピーカに出力させる、
請求項1に記載のエージェント装置。 - 前記マスタエージェント機能部と、前記複数のエージェント機能部のうち一つが、一体に動作する、
請求項1または2に記載のエージェント装置。 - 車載機器に対する制御は、前記複数のエージェント機能部のうち、特定のエージェント機能部により実行される、
請求項1から3のうち何れか1項に記載のエージェント装置。 - 画像を表示する表示部を、更に備え、
前記複数のエージェント機能部は、前記乗員とのコミュニケーションを行う擬人化されたエージェント画像を生成し、
前記マスタエージェント機能部は、前記複数のエージェント機能部により生成されたエージェント画像を前記表示部に表示させるとともに、前記乗員と対話する主体が切り替わる場合に、前記エージェント画像の表示態様を変更させる、
請求項1から4のうち何れか1項に記載のエージェント装置。 - 前記複数のマイクは、前記車室内における所定距離以内の位置に設置される、
請求項1から5のうち何れか1項に記載のエージェント装置。 - 前記複数のマイクにより収集したそれぞれの音声は、前記マスタエージェント機能部の音声入力インターフェースに入力が可能である、
請求項6に記載のエージェント装置。 - コンピュータが、
機能が異なる複数のエージェント機能部のそれぞれに、車室内の音声を収集するマイクにより収集された音声の意味に基づいて前記車室内の乗員に対して話しかけるエージェント音声を生成させ、
生成したエージェント音声を、前記車室内に音声を出力するスピーカに出力させ、
マスタエージェント機能部によって、前記マイクにより収集された音声の内容に基づいて、前記乗員と対話する主体となるエージェント機能部が切り替わり、
前記マイクを前記車室内に複数備え、
前記複数のマイクからの入力のうちの一つは、前記マスタエージェント機能部に割り当てられ、
前記マスタエージェント機能部に割り当てられるマイクは、他のマイクよりも高性能であり、
前記マスタエージェント機能部に割り当てられたマイクからの音声を常時入力して、前記乗員と前記エージェント機能部とが対話中であっても前記乗員と対話する主体を切り替える機能を継続させる、
エージェント制御方法。 - コンピュータに、
機能が異なる複数のエージェント機能部のそれぞれに、車室内の音声を収集するマイクにより収集された音声の意味に基づいて前記車室内の乗員に対して話しかけるエージェント音声を生成させ、
生成したエージェント音声を、前記車室内に音声を出力するスピーカに出力させ、
マスタエージェント機能部によって、前記マイクにより収集された音声の内容に基づいて、前記乗員と対話する主体となるエージェント機能部が切り替えさせ、
前記マイクを前記車室内に複数備え、
前記複数のマイクからの入力のうちの一つは、前記マスタエージェント機能部に割り当てられ、
前記マスタエージェント機能部に割り当てられるマイクは、他のマイクよりも高性能であり、
前記マスタエージェント機能部に割り当てられたマイクからの音声を常時入力して、前記乗員と前記エージェント機能部とが対話中であっても前記乗員と対話する主体を切り替える機能を継続させる、
プログラム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2018/037392 WO2020070878A1 (ja) | 2018-10-05 | 2018-10-05 | エージェント装置、エージェント制御方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2020070878A1 JPWO2020070878A1 (ja) | 2021-09-02 |
JP7133029B2 true JP7133029B2 (ja) | 2022-09-07 |
Family
ID=70054619
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020551052A Active JP7133029B2 (ja) | 2018-10-05 | 2018-10-05 | エージェント装置、エージェント制御方法、およびプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US11798552B2 (ja) |
JP (1) | JP7133029B2 (ja) |
CN (1) | CN112805182B (ja) |
WO (1) | WO2020070878A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020154994A (ja) * | 2019-03-22 | 2020-09-24 | 本田技研工業株式会社 | エージェントシステム、エージェントサーバ、エージェントサーバの制御方法、およびプログラム |
JP7338493B2 (ja) * | 2020-01-29 | 2023-09-05 | トヨタ自動車株式会社 | エージェント装置、エージェントシステム及びプログラム |
JP2021123133A (ja) * | 2020-01-31 | 2021-08-30 | トヨタ自動車株式会社 | 情報処理装置、情報処理方法、及び情報処理プログラム |
JP7318587B2 (ja) * | 2020-05-18 | 2023-08-01 | トヨタ自動車株式会社 | エージェント制御装置 |
CN111816189B (zh) * | 2020-07-03 | 2023-12-26 | 斑马网络技术有限公司 | 一种车辆用多音区语音交互方法及电子设备 |
JP2022102306A (ja) * | 2020-12-25 | 2022-07-07 | トヨタ自動車株式会社 | エージェント表示方法、プログラム、及びエージェント表示システム |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000020888A (ja) | 1998-07-07 | 2000-01-21 | Aqueous Reserch:Kk | エージェント装置 |
JP2002163054A (ja) | 2000-11-29 | 2002-06-07 | Sanyo Electric Co Ltd | ユーザ支援方法、装置およびシステム |
JP2002199499A (ja) | 2000-12-22 | 2002-07-12 | Sony Corp | 車載装置、自動車及び情報処理方法 |
JP2006188098A (ja) | 2004-12-28 | 2006-07-20 | Pioneer Electronic Corp | 対話装置、対話方法、対話プログラムおよびコンピュータに読み取り可能な記録媒体 |
JP2006284454A (ja) | 2005-04-01 | 2006-10-19 | Fujitsu Ten Ltd | 車載用エージェントシステム |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4645310B2 (ja) | 2005-06-02 | 2011-03-09 | 株式会社デンソー | エージェントキャラクタ表示を利用した表示システム |
JP2009124540A (ja) | 2007-11-16 | 2009-06-04 | Toyota Motor Corp | 車両用通話装置、通話方法 |
US8344870B2 (en) * | 2008-10-07 | 2013-01-01 | Cisco Technology, Inc. | Virtual dashboard |
US20170235361A1 (en) * | 2016-01-20 | 2017-08-17 | Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America | Interaction based on capturing user intent via eye gaze |
CN107888653A (zh) * | 2016-09-30 | 2018-04-06 | 本田技研工业株式会社 | 发话装置、沟通装置和移动体 |
US10481858B2 (en) * | 2017-12-06 | 2019-11-19 | Harman International Industries, Incorporated | Generating personalized audio content based on mood |
WO2019112625A1 (en) * | 2017-12-08 | 2019-06-13 | Google Llc | Signal processing coordination among digital voice assistant computing devices |
US20190196779A1 (en) * | 2017-12-21 | 2019-06-27 | Harman International Industries, Incorporated | Intelligent personal assistant interface system |
US20190311713A1 (en) * | 2018-04-05 | 2019-10-10 | GM Global Technology Operations LLC | System and method to fulfill a speech request |
CN110710158B (zh) * | 2018-05-07 | 2022-08-09 | 谷歌有限责任公司 | 验证与数字助理应用交接的代理的操作状态 |
US10904306B2 (en) * | 2018-05-07 | 2021-01-26 | Spotify Ab | Personal media streaming appliance system |
US10198877B1 (en) * | 2018-05-23 | 2019-02-05 | Google Llc | Providing a communications channel between instances of automated assistants |
KR102523982B1 (ko) * | 2018-08-21 | 2023-04-20 | 구글 엘엘씨 | 자동화된 어시스턴트를 호출하기 위한 다이내믹 및/또는 컨텍스트-특정 핫 워드 |
KR20230145521A (ko) * | 2018-08-23 | 2023-10-17 | 구글 엘엘씨 | 멀티-어시스턴트 환경의 특성에 따른 어시스턴트 응답성 규정하기 |
-
2018
- 2018-10-05 JP JP2020551052A patent/JP7133029B2/ja active Active
- 2018-10-05 CN CN201880098254.8A patent/CN112805182B/zh active Active
- 2018-10-05 US US17/281,275 patent/US11798552B2/en active Active
- 2018-10-05 WO PCT/JP2018/037392 patent/WO2020070878A1/ja active Application Filing
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000020888A (ja) | 1998-07-07 | 2000-01-21 | Aqueous Reserch:Kk | エージェント装置 |
JP2002163054A (ja) | 2000-11-29 | 2002-06-07 | Sanyo Electric Co Ltd | ユーザ支援方法、装置およびシステム |
JP2002199499A (ja) | 2000-12-22 | 2002-07-12 | Sony Corp | 車載装置、自動車及び情報処理方法 |
JP2006188098A (ja) | 2004-12-28 | 2006-07-20 | Pioneer Electronic Corp | 対話装置、対話方法、対話プログラムおよびコンピュータに読み取り可能な記録媒体 |
JP2006284454A (ja) | 2005-04-01 | 2006-10-19 | Fujitsu Ten Ltd | 車載用エージェントシステム |
Also Published As
Publication number | Publication date |
---|---|
CN112805182A (zh) | 2021-05-14 |
US20220005470A1 (en) | 2022-01-06 |
JPWO2020070878A1 (ja) | 2021-09-02 |
US11798552B2 (en) | 2023-10-24 |
CN112805182B (zh) | 2024-01-12 |
WO2020070878A1 (ja) | 2020-04-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7133029B2 (ja) | エージェント装置、エージェント制御方法、およびプログラム | |
JP7068986B2 (ja) | エージェントシステム、エージェント制御方法、およびプログラム | |
US11176948B2 (en) | Agent device, agent presentation method, and storage medium | |
CN110968048B (zh) | 智能体装置、智能体控制方法以及存储介质 | |
CN111007968A (zh) | 智能体装置、智能体提示方法及存储介质 | |
JP2020060861A (ja) | エージェントシステム、エージェント方法、およびプログラム | |
JP7266418B2 (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
JP2020144264A (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
US11518398B2 (en) | Agent system, agent server, method of controlling agent server, and storage medium | |
CN111724778B (zh) | 车载装置、车载装置的控制方法及存储介质 | |
US20200320997A1 (en) | Agent apparatus, agent apparatus control method, and storage medium | |
JP7175221B2 (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
JP2020060623A (ja) | エージェントシステム、エージェント方法、およびプログラム | |
JP2020059401A (ja) | 車両制御装置、車両制御方法、プログラム | |
JP2020160848A (ja) | サーバ装置、情報提供システム、情報提供方法、およびプログラム | |
JP2020157853A (ja) | 車載エージェントシステム、車載エージェントシステムの制御方法、およびプログラム | |
JP2020142721A (ja) | エージェントシステム、車載機器の制御方法、及びプログラム | |
CN111559317B (zh) | 智能体装置、智能体装置的控制方法及存储介质 | |
US11518399B2 (en) | Agent device, agent system, method for controlling agent device, and storage medium | |
JP7297483B2 (ja) | エージェントシステム、サーバ装置、エージェントシステムの制御方法、およびプログラム | |
CN111824174A (zh) | 智能体装置、智能体装置的控制方法及存储介质 | |
JP2021026124A (ja) | 音声対話装置、音声対話方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A524 | Written submission of copy of amendment under article 19 pct |
Free format text: JAPANESE INTERMEDIATE CODE: A527 Effective date: 20201209 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201209 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220208 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220408 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220809 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220826 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7133029 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |