JP6604151B2 - 音声認識制御システム - Google Patents
音声認識制御システム Download PDFInfo
- Publication number
- JP6604151B2 JP6604151B2 JP2015219116A JP2015219116A JP6604151B2 JP 6604151 B2 JP6604151 B2 JP 6604151B2 JP 2015219116 A JP2015219116 A JP 2015219116A JP 2015219116 A JP2015219116 A JP 2015219116A JP 6604151 B2 JP6604151 B2 JP 6604151B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- utterance
- facility
- voice
- gesture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Navigation (AREA)
- User Interface Of Digital Computer (AREA)
Description
(3)前記制御部は、前記発話位置が前記運転席以外である場合に前記施設の営業内容情報を出力することが好ましい。
(4)前記制御部が、前記音声が入力された時刻に応じた前記情報を出力することが好ましい。例えば、前記時刻が前記施設の営業時間外である場合に営業時間情報を出力することが好ましい。
本実施形態の音声認識制御システムは、図1に示す車両10に適用される。車両10の車室内には運転席14,助手席15が設けられ、車室前方側にはインパネ(インストルメントパネル,ダッシュボード)が配置される。インパネの車室側に面した部分のうち、運転席14の前方にはステアリング装置や計器類が配置され、助手席15の前方にはグローブボックスが配置される。また、インパネの車幅方向中央には、カーナビ機能やオーディオビジュアル機能などのユーザーインターフェースを集約して提供するマルチコミュニケーション型のディスプレイ装置16が設けられる。ディスプレイ装置16の位置は、運転席14に座る運転手の視点では左斜め前方であり、助手席15に座る乗員(助手)の視点では右斜め前方である。
音声認識制御装置1は、乗員の音声及びジェスチャに基づき、ジェスチャで指定される施設に関する情報を提供する機能を持つ。ここでいう施設とは、車両10の外部に存在する建造物や構造物を意味し、例えば建物,設備,工場,公園,競技場,駅などを含み、好ましくはナビゲーション装置11に内蔵された地図情報中に記録されているPOI(Point Of Interest)を含む。例えば、マイクアレイ21から何らかの音声が入力されると、まずその音声が発せられた発話位置が認識されるとともに、発話内容が認識される。また、室内カメラ22で撮影された画像に基づき、発話位置の人物によってなされたジェスチャが検出され、そのジェスチャが表す施設(ジェスチャによって指定される施設)が検出される。ジェスチャの具体例としては、その施設を指で指し示す仕草やその施設を見つめる仕草(視線を向ける仕草)が挙げられる。そして、発話内容が「案内の要求」である場合には、施設に関する情報が乗員に提供される。このとき、乗員に提供される情報の種類は、発話位置に応じて設定される。
車速検出部2は、車速センサ23が出力するパルス信号に基づき、車速を取得(検出,算出)するものである。ここで取得された車速の情報は、ジェスチャ検出部4及び制御部6に伝達される。
第一の機能は、制御対象を音声で制御する機能(ハンズフリー制御機能)である。制御部6は、音声認識部3で認識された発話内容が「制御の指令」を意味する音声コマンドを含む場合に、発話の対象の作動状態を制御する。なお、ハンズフリー制御機能の具体的手法は任意であり、公知の手法を採用することができる。
図5は、音声認識制御装置1で実施される制御内容を説明するためのフローチャート例である。まず、マイクアレイ21で検出された音声情報,室内カメラ22で撮影された画像情報,車速センサ23からのパルス情報が音声認識制御装置1に入力され(ステップA1)、音声が入力されたか否かが判定される(ステップA2)。ここで、何らかの音声が入力されていると、音声認識部3において、少なくともその音声に基づき、発話位置と発話内容とが認識される(ステップA3)。また、ジェスチャ検出部4では、室内カメラ22で撮影された画像に基づき、発話位置の人物のジェスチャが検出され(ステップA4)、そのジェスチャによって指定される発話の対象が特定される(ステップA5)。
(1)上記の音声認識制御装置1では、音声入力と視線入力とを併用した情報提供に際し、発話位置に応じて複数の情報の一部が選択的に出力される。このように、発話位置に応じて、乗員に提供される情報を選択することで、発話内容だけでなく発話位置に見合った情報を提供することができ、利便性を向上させることができる。
上述の実施形態では、図4に示すように、発話内容と発話位置とに基づいて情報の種類が選択されているが、発話時刻も考慮して情報の種類を選択する構成としてもよい。例えば、発話時刻が施設の営業時間内である場合には施設の営業内容情報を提供し、発話時刻が施設の営業時間外である場合にはその営業時間情報のみを提供することが考えられる。このように、時間帯に応じて情報の種類を変更することで、乗員にとってより適切な情報を提供することができ、利便性をさらに向上させることができる。
2 車速検出部
3 音声認識部
4 ジェスチャ検出部
5 データベース
6 制御部
10 車両
11 ナビゲーション装置
12 エアコン装置
13 カーオーディオ装置
14 運転席
15 助手席
16 ディスプレイ装置
21 マイクアレイ
22 室内カメラ
23 車速センサ
Claims (4)
- 車両乗員の音声を入力信号として車載装置を制御する音声認識制御システムにおいて、
少なくとも前記音声に基づき、発話位置及び発話内容を認識する音声認識部と、
室内カメラで撮影された車室内の画像に基づき、前記発話位置の人物のジェスチャを検出するジェスチャ検出部と、
前記ジェスチャで指定される施設に関する複数の情報を記憶するデータベースと、
前記発話内容と前記発話位置とに基づき、前記複数の情報の一部を選択して出力する制御部と、
を備えたことを特徴とする、音声認識制御システム。 - 前記制御部は、前記発話位置が運転席である場合に前記施設の駐停車設備情報を出力する
ことを特徴とする、請求項1記載の音声認識制御システム。 - 前記制御部は、前記発話位置が前記運転席以外である場合に前記施設の営業内容情報を出力する
ことを特徴とする、請求項1又は2記載の音声認識制御システム。 - 前記制御部が、前記音声が入力された時刻に応じた前記情報を出力する
ことを特徴とする、請求項1〜3のいずれか1項に記載の音声認識制御システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015219116A JP6604151B2 (ja) | 2015-11-09 | 2015-11-09 | 音声認識制御システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015219116A JP6604151B2 (ja) | 2015-11-09 | 2015-11-09 | 音声認識制御システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017090615A JP2017090615A (ja) | 2017-05-25 |
JP6604151B2 true JP6604151B2 (ja) | 2019-11-13 |
Family
ID=58768048
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015219116A Active JP6604151B2 (ja) | 2015-11-09 | 2015-11-09 | 音声認識制御システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6604151B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20220037187A (ko) * | 2020-09-17 | 2022-03-24 | 주식회사 인텔로이드 | 차량용 음성 인식 장치, 이를 이용한 차량 문제상황 처리 방법 및 컴퓨터 프로그램 |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019079085A (ja) * | 2017-10-19 | 2019-05-23 | アイシン精機株式会社 | 運転支援装置 |
US10853674B2 (en) | 2018-01-23 | 2020-12-01 | Toyota Research Institute, Inc. | Vehicle systems and methods for determining a gaze target based on a virtual eye position |
US10706300B2 (en) | 2018-01-23 | 2020-07-07 | Toyota Research Institute, Inc. | Vehicle systems and methods for determining a target based on a virtual eye position and a pointing direction |
US10817068B2 (en) | 2018-01-23 | 2020-10-27 | Toyota Research Institute, Inc. | Vehicle systems and methods for determining target based on selecting a virtual eye position or a pointing direction |
CN109109857A (zh) * | 2018-09-05 | 2019-01-01 | 深圳普思英察科技有限公司 | 一种无人驾驶售货车及其停车方法与装置 |
JP2020052875A (ja) * | 2018-09-28 | 2020-04-02 | 株式会社デンソー | ジェスチャ入力装置 |
CN112109729B (zh) * | 2019-06-19 | 2023-06-06 | 宝马股份公司 | 用于车载***的人机交互方法、装置和*** |
JP2021025884A (ja) * | 2019-08-06 | 2021-02-22 | 清水建設株式会社 | 対象案内制御装置、対象案内制御方法、およびプログラム |
US11907434B2 (en) | 2020-01-29 | 2024-02-20 | Sony Group Corporation | Information processing apparatus, information processing system, and information processing method |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004206471A (ja) * | 2002-12-25 | 2004-07-22 | Toyota Industries Corp | 車両用情報表示システム |
JP4436717B2 (ja) * | 2003-06-30 | 2010-03-24 | パナソニック株式会社 | ナビゲーション装置およびナビゲーション表示方法 |
JP4556586B2 (ja) * | 2004-09-22 | 2010-10-06 | トヨタ自動車株式会社 | 運転支援装置 |
JP2007024866A (ja) * | 2004-12-14 | 2007-02-01 | Fujitsu Ten Ltd | ナビゲーション装置 |
JP2007298592A (ja) * | 2006-04-28 | 2007-11-15 | Fujitsu Ten Ltd | 音声処理装置 |
JP2008020274A (ja) * | 2006-07-12 | 2008-01-31 | Pioneer Electronic Corp | 表示制御装置、表示制御方法、表示制御プログラムおよびコンピュータに読み取り可能な記録媒体 |
-
2015
- 2015-11-09 JP JP2015219116A patent/JP6604151B2/ja active Active
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20220037187A (ko) * | 2020-09-17 | 2022-03-24 | 주식회사 인텔로이드 | 차량용 음성 인식 장치, 이를 이용한 차량 문제상황 처리 방법 및 컴퓨터 프로그램 |
KR102491119B1 (ko) | 2020-09-17 | 2023-01-25 | 주식회사 인텔로이드 | 차량용 음성 인식 장치, 이를 이용한 차량 문제상황 처리 방법 및 컴퓨터 프로그램 |
Also Published As
Publication number | Publication date |
---|---|
JP2017090615A (ja) | 2017-05-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6604151B2 (ja) | 音声認識制御システム | |
WO2017081960A1 (ja) | 音声認識制御システム | |
JP2017090613A (ja) | 音声認識制御システム | |
US10949886B2 (en) | System and method for providing content to a user based on a predicted route identified from audio or images | |
US10160413B2 (en) | Vehicle and control method thereof | |
US11176948B2 (en) | Agent device, agent presentation method, and storage medium | |
JP2017090612A (ja) | 音声認識制御システム | |
CN113302664A (zh) | 运载工具的多模态用户接口 | |
CN106469556B (zh) | 语音识别装置、具有语音识别装置的车辆、控制车辆方法 | |
JP2017090614A (ja) | 音声認識制御システム | |
US11450316B2 (en) | Agent device, agent presenting method, and storage medium | |
JP2010156825A (ja) | 音声出力装置 | |
WO2019244239A1 (ja) | 走行情報処理装置及び処理方法 | |
CN109976515B (zh) | 一种信息处理方法、装置、车辆及计算机可读存储介质 | |
JP2020060861A (ja) | エージェントシステム、エージェント方法、およびプログラム | |
WO2007145331A1 (ja) | カメラ制御装置、カメラ制御方法、カメラ制御プログラムおよび記録媒体 | |
JP2020144264A (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
JP2009098217A (ja) | 音声認識装置、音声認識装置を備えたナビゲーション装置、音声認識方法、音声認識プログラム、および記録媒体 | |
JP2007057805A (ja) | 車両用情報処理装置 | |
JP6717537B2 (ja) | 操作制限制御装置及び操作制限制御方法 | |
JP2008003371A (ja) | 車載用音声認識装置及び音声コマンド登録方法 | |
WO2023062816A1 (ja) | コンテンツ出力装置、コンテンツ出力方法、プログラム及び記憶媒体 | |
JP2020060623A (ja) | エージェントシステム、エージェント方法、およびプログラム | |
JP2009086132A (ja) | 音声認識装置、音声認識装置を備えたナビゲーション装置、音声認識装置を備えた電子機器、音声認識方法、音声認識プログラム、および記録媒体 | |
JP7407665B2 (ja) | 音声出力制御装置および音声出力制御プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181026 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190906 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190917 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190930 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6604151 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |