JP2019139354A - 情報提供装置及び情報提供方法 - Google Patents
情報提供装置及び情報提供方法 Download PDFInfo
- Publication number
- JP2019139354A JP2019139354A JP2018020056A JP2018020056A JP2019139354A JP 2019139354 A JP2019139354 A JP 2019139354A JP 2018020056 A JP2018020056 A JP 2018020056A JP 2018020056 A JP2018020056 A JP 2018020056A JP 2019139354 A JP2019139354 A JP 2019139354A
- Authority
- JP
- Japan
- Prior art keywords
- emotion
- vehicle
- information
- unit
- occupant
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 13
- 230000008451 emotion Effects 0.000 claims abstract description 239
- 238000001514 detection method Methods 0.000 claims abstract description 15
- 239000003795 chemical substances by application Substances 0.000 description 47
- 238000004891 communication Methods 0.000 description 24
- 238000012545 processing Methods 0.000 description 12
- 230000008921 facial expression Effects 0.000 description 9
- 230000008859 change Effects 0.000 description 8
- 238000013500 data storage Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 238000003384 imaging method Methods 0.000 description 7
- 239000000446 fuel Substances 0.000 description 6
- 238000010191 image analysis Methods 0.000 description 6
- 230000002996 emotional effect Effects 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 4
- 230000002889 sympathetic effect Effects 0.000 description 4
- 239000000470 constituent Substances 0.000 description 3
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 description 2
- 230000006399 behavior Effects 0.000 description 2
- 239000008280 blood Substances 0.000 description 2
- 210000004369 blood Anatomy 0.000 description 2
- 230000036772 blood pressure Effects 0.000 description 2
- 230000036760 body temperature Effects 0.000 description 2
- 229910052760 oxygen Inorganic materials 0.000 description 2
- 239000001301 oxygen Substances 0.000 description 2
- 102100034112 Alkyldihydroxyacetonephosphate synthase, peroxisomal Human genes 0.000 description 1
- 101000799143 Homo sapiens Alkyldihydroxyacetonephosphate synthase, peroxisomal Proteins 0.000 description 1
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 206010027940 Mood altered Diseases 0.000 description 1
- 238000000848 angular dependent Auger electron spectroscopy Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 239000002828 fuel tank Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000009967 tasteless effect Effects 0.000 description 1
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
- B60K35/22—Display screens
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/29—Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/85—Arrangements for transferring vehicle- or driver-related data
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
- G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/18—Information management
- B60K2360/186—Displaying information according to relevancy
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/18—Information management
- B60K2360/186—Displaying information according to relevancy
- B60K2360/1876—Displaying information according to relevancy according to vehicle situations
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/589—Wireless data transfers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/592—Data transfer involving external databases
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W2040/0872—Driver physiology
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/146—Display means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2540/00—Input parameters relating to occupants
- B60W2540/22—Psychological state; Stress level or workload
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2540/00—Input parameters relating to occupants
- B60W2540/221—Physiology, e.g. weight, heartbeat, health or special needs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/011—Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Automation & Control Theory (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Biomedical Technology (AREA)
- Dermatology (AREA)
- Neurosurgery (AREA)
- Neurology (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Mathematical Physics (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Navigation (AREA)
- User Interface Of Digital Computer (AREA)
- Traffic Control Systems (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
Description
乗員が車両に乗車した時から所定期間内に乗員の感情を推定する感情推定部と、
前記感情推定部により前記推定された乗員の感情に基づいて、前記車両の感情のベースとなるベース感情を設定するベース感情設定部と、
前記車両の状態を検出する車両状態検出部と、
前記ベース感情及び前記車両状態検出部により検出された前記車両の状態に応じて、前記車両の感情を生成する感情生成部と、
前記車両の感情に基づいて前記乗員に提供する情報を決定する情報決定部と、
前記情報を前記乗員に対して出力する情報出力部と、を備えることを特徴とする。
前記ベース感情設定部は、さらに、前回において推定された乗員の感情と、今回において推定された乗員の感情との差分に応じてベース感情を設定するように構成されていることが好ましい。
さらに、前記乗員のスケジュール情報を取得するスケジュール情報取得部を備え、
前記ベース感情設定部は、さらに、乗員のスケジュール情報を加味して前記ベース感情を設定するように構成されていることが好ましい。
図1に示されている基本システムは、対象車両X(移動体)に搭載されているエージェント装置1、乗員により対象車両Xの内部に持ち込み可能な携帯端末装置2(例えばスマートホン)およびサーバ3により構成されている。エージェント装置1、携帯端末装置2およびサーバ3は無線通信網(例えばインターネット)を通じて相互に無線通信する機能を備えている。エージェント装置1および携帯端末装置2は、同一の対象車両Xの空間内に共存するなど、物理的に近接している場合、近接無線方式(例えばBluetooth(登録商標))により相互に無線通信する機能を備えている。対象車両Xが、本発明の「
車両」に相当する。
エージェント装置1は、例えば図2に示されているように、制御部100、センサ部11(GPSセンサ111、車速センサ112、ジャイロセンサ113及び燃料センサ114を備えている。)、車両情報部12、記憶部13、無線部14(近接無線通信部141および無線通信網通信部142を備えている。)、表示部15、操作入力部16、オーディオ部17(音声出力部)、ナビゲーション部18、撮像部191(車内カメラ)および音声入力部192(マイク)を備えている。エージェント装置1が、本発明の「情報提供装置」の一例に相当する。表示部15及びオーディオ部17のそれぞれが、本発明の「情報出力部」の一例に相当する。操作入力部16及び音声入力部192のそれぞれが、本発明の「入力部」の一例に相当する。センサ部11が、本発明の「車両状態検出部」に相当する。制御部100が、後述する演算を実行することにより、ユーザ検出部101、日時情報認識部102、ユーザ状態認識部103、感情推定部104、ベース感情設定部105、感情生成部106及びスケジュール情報取得部107として機能する。なお、情報提供装置のすべての構成要素がエージェント装置1に含まれる必要はなく、エージェント装置1が通信を介して外部のサーバ等に必要な機能を実行させることにより、情報提供装置の構成要素として機能させてもよい。
System)衛星からの信号を基に現在位置を算出する。車速センサ112は回転軸からのパルス信号を基に対象車両Xの速度を算出する。ジャイロセンサ113は角速度を検出する。燃料センサ114は、対象車両Xの燃料タンクからの信号をもとに、対象車両Xの燃料残量を算出する。これらGPSセンサ、車速センサ、ジャイロセンサにより、対象車両Xの現在位置や向きを正確に算出することが可能となっている。また、GPSセンサ111は、GPS衛星から現在日時を示す情報を取得してもよい。
携帯端末装置2は、例えば図3に示されているように、制御部200、センサ部21(GPSセンサ211およびジャイロセンサ213を備えている。)、記憶部23(データ記憶部231およびアプリケーション記憶部232を備えている。)、無線部24(近接無線通信部241および無線通信網通信部242を備えている。)、表示部25、操作入力部26、音声出力部27、撮像部291(カメラ)および音声入力部292(マイク)を備えている。携帯端末装置2が、本発明の「情報提供装置」として機能してもよい。この場合、表示部25及び音声出力部27のそれぞれが、本発明の「情報出力部」の一例に相当する。制御部200が、ユーザ検出部201、日時情報認識部202、ユーザ状態認識部203、感情推定部204、ベース感情設定部205、感情生成部206及びスケジュール情報取得部207として機能する。
サーバ3は、一又は複数のコンピュータにより構成されている。サーバ3は、それぞれのエージェント装置1または携帯端末装置2から、データ及びリクエストを受信し、データをデータベース等の記憶部に記憶し、リクエストに応じた処理を実行し、処理結果をエージェント装置1または携帯端末装置2に送信するように構成されている。
次に、図5〜図8を参照して、情報出力処理を説明する。
当該構成のエージェント装置1(本発明の「情報提供装置」に相当する。)によれば、制御部100(本発明の「感情推定部」として機能する。)により、対象ユーザが対象車両Xに乗車した後に対象ユーザの感情が推定される(図6/STEP114)。
本実施形態では、対象ユーザが検出された後(図6/STEP104‥YES)に順次処理を行う段階で制御部100が、対象ユーザの感情を推定し、当該対象ユーザの感情を加味してベース感情を設定した(図6/STEP106〜STEP120)。
Claims (4)
- 乗員が車両に乗車した時から所定期間内に乗員の感情を推定する感情推定部と、
前記感情推定部により前記推定された乗員の感情に基づいて、前記車両の感情のベースとなるベース感情を設定するベース感情設定部と、
前記車両の状態を検出する車両状態検出部と、
前記ベース感情及び前記車両状態検出部により検出された前記車両の状態に応じて、前記車両の感情を生成する感情生成部と、
前記車両の感情に基づいて前記乗員に提供する情報を決定する情報決定部と、
前記情報を前記乗員に対して出力する情報出力部と、を備えることを特徴とする情報提供装置。 - 請求項1記載の情報提供装置において、
前記ベース感情設定部は、さらに、前回において推定された乗員の感情と、今回において推定された乗員の感情との差分に応じてベース感情を設定するように構成されていることを特徴とする情報提供装置。 - 請求項1又は2記載の情報提供装置において、
さらに、前記乗員のスケジュール情報を取得するスケジュール情報取得部を備え、
前記ベース感情設定部は、さらに、乗員のスケジュール情報を加味して前記ベース感情を設定するように構成されていることを特徴とする情報提供装置。 - 指定の情報を車両の乗員に対して出力する情報出力部と、前記車両の状態を検出する車両状態検出部と、を備える装置が実行する方法であって、
乗員が前記車両に乗車した時から所定期間内に乗員の感情を推定するステップと、
前記推定された乗員の感情に基づいて、前記車両の感情のベースとなるベース感情を設定するステップと、
前記ベース感情及び前記車両状態検出部により検出された前記車両の状態に応じて、前記車両の感情を生成するステップと、
前記車両の感情に基づいて前記乗員に提供する情報を決定するステップと、
前記決定された情報を前記情報出力部に出力させるステップと、を含むことを特徴とする情報提供方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018020056A JP6713490B2 (ja) | 2018-02-07 | 2018-02-07 | 情報提供装置及び情報提供方法 |
CN201811534268.8A CN110147160B (zh) | 2018-02-07 | 2018-12-14 | 信息提供装置和信息提供方法 |
US16/267,641 US11312389B2 (en) | 2018-02-07 | 2019-02-05 | Providing information to vehicle occupants based on emotions |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018020056A JP6713490B2 (ja) | 2018-02-07 | 2018-02-07 | 情報提供装置及び情報提供方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019139354A true JP2019139354A (ja) | 2019-08-22 |
JP6713490B2 JP6713490B2 (ja) | 2020-06-24 |
Family
ID=67475562
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018020056A Active JP6713490B2 (ja) | 2018-02-07 | 2018-02-07 | 情報提供装置及び情報提供方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US11312389B2 (ja) |
JP (1) | JP6713490B2 (ja) |
CN (1) | CN110147160B (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022239642A1 (ja) * | 2021-05-13 | 2022-11-17 | 株式会社デンソー | 車両用情報提供装置、車両用情報提供方法、及び車両用情報提供プログラム |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107092664B (zh) * | 2017-03-30 | 2020-04-28 | 华为技术有限公司 | 一种内容解释方法及装置 |
US11273836B2 (en) * | 2017-12-18 | 2022-03-15 | Plusai, Inc. | Method and system for human-like driving lane planning in autonomous driving vehicles |
KR102574937B1 (ko) * | 2018-05-18 | 2023-09-05 | 현대자동차주식회사 | 차량 및 그 제어 방법 |
JP7264079B2 (ja) * | 2020-02-05 | 2023-04-25 | トヨタ自動車株式会社 | 感情推定装置、方法、プログラムおよび車両 |
US11878714B2 (en) * | 2020-04-06 | 2024-01-23 | Harman International Industries, Incorporated | Techniques for customizing self-driving models |
US20230052474A1 (en) * | 2021-08-11 | 2023-02-16 | Rovi Guides, Inc. | Systems and methods for operating a vehicle based on physiological parameters of an occupant |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003072488A (ja) * | 2001-08-31 | 2003-03-12 | Sony Corp | 車載装置、車両及び車両情報の処理方法 |
JP2008070965A (ja) * | 2006-09-12 | 2008-03-27 | Fujitsu Ten Ltd | 車両制御装置および車両制御方法 |
JP2015110417A (ja) * | 2015-01-08 | 2015-06-18 | マツダ株式会社 | ドライバ感情に基づく運転支援装置 |
US20170030726A1 (en) * | 2015-07-31 | 2017-02-02 | International Business Machines Corporation | Selective human emotion metrics for navigation plans and maps |
JP2017181449A (ja) * | 2016-03-31 | 2017-10-05 | カシオ計算機株式会社 | 電子機器、経路検索方法及びプログラム |
JP2017201499A (ja) * | 2015-10-08 | 2017-11-09 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 情報提示装置の制御方法、及び、情報提示装置 |
US20170370736A1 (en) * | 2015-01-15 | 2017-12-28 | Pcms Holdings, Inc. | Systems and methods for providing navigation directions based on emotions and activities |
Family Cites Families (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6190314B1 (en) * | 1998-07-15 | 2001-02-20 | International Business Machines Corporation | Computer input device with biosensors for sensing user emotions |
JP3953024B2 (ja) * | 2003-11-20 | 2007-08-01 | ソニー株式会社 | 感情算出装置及び感情算出方法、並びに携帯型通信装置 |
JP2008241309A (ja) | 2007-03-26 | 2008-10-09 | Denso Corp | 車両用サービス提示装置 |
CN101669090A (zh) * | 2007-04-26 | 2010-03-10 | 福特全球技术公司 | 情绪提示***和方法 |
CN101428164B (zh) * | 2008-08-19 | 2012-07-04 | 李隆 | 基于互联网的电流及高压电场同步治疗仪 |
US9493130B2 (en) * | 2011-04-22 | 2016-11-15 | Angel A. Penilla | Methods and systems for communicating content to connected vehicle users based detected tone/mood in voice input |
JP2014528806A (ja) * | 2011-10-04 | 2014-10-30 | チルドレンズ メディカル センター コーポレーション | 感情制御方法および装置 |
JP5729345B2 (ja) * | 2012-04-10 | 2015-06-03 | 株式会社デンソー | 感情モニタリングシステム |
US10630647B2 (en) * | 2015-02-05 | 2020-04-21 | Apple Inc. | Secure wireless communication between controllers and accessories |
JP6610661B2 (ja) * | 2015-04-23 | 2019-11-27 | ソニー株式会社 | 情報処理装置、制御方法、およびプログラム |
US20170115124A1 (en) * | 2015-10-21 | 2017-04-27 | Ford Global Technologies, Llc | Driver Workload Prediction and Path Routing |
US10289381B2 (en) * | 2015-12-07 | 2019-05-14 | Motorola Mobility Llc | Methods and systems for controlling an electronic device in response to detected social cues |
JP6731718B2 (ja) * | 2015-12-17 | 2020-07-29 | 国立大学法人広島大学 | 乗員の感性向上システム |
US20180118218A1 (en) * | 2016-10-27 | 2018-05-03 | Ford Global Technologies, Llc | Method and apparatus for vehicular adaptation to driver state |
EP3525141B1 (en) * | 2016-11-16 | 2021-03-24 | Honda Motor Co., Ltd. | Emotion inference device and emotion inference system |
CN206287926U (zh) * | 2016-12-27 | 2017-06-30 | 广州市联奥信息科技有限公司 | 具备情绪表达能力的交互行车装置 |
US10170111B2 (en) * | 2017-01-19 | 2019-01-01 | Toyota Motor Engineering & Manufacturing North America, Inc. | Adaptive infotainment system based on vehicle surrounding and driver mood and/or behavior |
US10151594B1 (en) * | 2017-01-19 | 2018-12-11 | State Farm Mutual Automobile Insurance Company | Technology for generating alternate navigation directions for vehicles |
US10150351B2 (en) * | 2017-02-08 | 2018-12-11 | Lp-Research Inc. | Machine learning for olfactory mood alteration |
JP6613290B2 (ja) * | 2017-11-28 | 2019-11-27 | 株式会社Subaru | 運転アドバイス装置及び運転アドバイス方法 |
US11919531B2 (en) * | 2018-01-31 | 2024-03-05 | Direct Current Capital LLC | Method for customizing motion characteristics of an autonomous vehicle for a user |
-
2018
- 2018-02-07 JP JP2018020056A patent/JP6713490B2/ja active Active
- 2018-12-14 CN CN201811534268.8A patent/CN110147160B/zh active Active
-
2019
- 2019-02-05 US US16/267,641 patent/US11312389B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003072488A (ja) * | 2001-08-31 | 2003-03-12 | Sony Corp | 車載装置、車両及び車両情報の処理方法 |
JP2008070965A (ja) * | 2006-09-12 | 2008-03-27 | Fujitsu Ten Ltd | 車両制御装置および車両制御方法 |
JP2015110417A (ja) * | 2015-01-08 | 2015-06-18 | マツダ株式会社 | ドライバ感情に基づく運転支援装置 |
US20170370736A1 (en) * | 2015-01-15 | 2017-12-28 | Pcms Holdings, Inc. | Systems and methods for providing navigation directions based on emotions and activities |
US20170030726A1 (en) * | 2015-07-31 | 2017-02-02 | International Business Machines Corporation | Selective human emotion metrics for navigation plans and maps |
JP2017201499A (ja) * | 2015-10-08 | 2017-11-09 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 情報提示装置の制御方法、及び、情報提示装置 |
JP2017181449A (ja) * | 2016-03-31 | 2017-10-05 | カシオ計算機株式会社 | 電子機器、経路検索方法及びプログラム |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022239642A1 (ja) * | 2021-05-13 | 2022-11-17 | 株式会社デンソー | 車両用情報提供装置、車両用情報提供方法、及び車両用情報提供プログラム |
Also Published As
Publication number | Publication date |
---|---|
CN110147160A (zh) | 2019-08-20 |
US20190243459A1 (en) | 2019-08-08 |
US11312389B2 (en) | 2022-04-26 |
JP6713490B2 (ja) | 2020-06-24 |
CN110147160B (zh) | 2022-08-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10929652B2 (en) | Information providing device and information providing method | |
JP6713490B2 (ja) | 情報提供装置及び情報提供方法 | |
US20170349184A1 (en) | Speech-based group interactions in autonomous vehicles | |
US10053113B2 (en) | Dynamic output notification management for vehicle occupant | |
JP6382273B2 (ja) | 施設満足度算出装置 | |
JP7192222B2 (ja) | 発話システム | |
US20180093673A1 (en) | Utterance device and communication device | |
JP6552548B2 (ja) | 地点提案装置及び地点提案方法 | |
JP2018063486A (ja) | サービス提供装置、サービス提供方法およびサービス提供プログラム | |
JPWO2018061354A1 (ja) | 情報提供装置、及び移動体 | |
JP2000181500A (ja) | 音声認識装置及びエ―ジェント装置 | |
JP2024041746A (ja) | 情報処理装置 | |
JP2021149250A (ja) | 情報処理装置、プログラム、及び、情報処理方法 | |
JP6627810B2 (ja) | 運転モード切替制御装置、方法およびプログラム | |
JP6419134B2 (ja) | 車両感情表示装置、車両感情表示方法および車両感情表示プログラム | |
JP2019053785A (ja) | サービス提供装置 | |
JP6657048B2 (ja) | 処理結果異常検出装置、処理結果異常検出プログラム、処理結果異常検出方法及び移動体 | |
JP6816247B2 (ja) | 情報提供装置 | |
JP7151400B2 (ja) | 情報処理システム、プログラム、及び制御方法 | |
JP2023548675A (ja) | ナビゲーションセッション中の運転イベント音の検出と処理 | |
US20200172111A1 (en) | Information processing system, program, and control method | |
WO2023210171A1 (ja) | 音声対話装置及び音声対話方法 | |
US20240025416A1 (en) | In-vehicle soundscape and melody generation system and method using continuously interpreted spatial contextualized information | |
JP2021124687A (ja) | 車載装置及び提案出力方法 | |
JP6660863B2 (ja) | 移動体用出力生成装置、移動体用出力生成プログラム、移動体用出力生成方法及び移動体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180927 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190813 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190827 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20191028 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191223 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200602 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200603 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6713490 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |