JP4364251B2 - 対話を検出する装置、方法およびプログラム - Google Patents
対話を検出する装置、方法およびプログラム Download PDFInfo
- Publication number
- JP4364251B2 JP4364251B2 JP2007085983A JP2007085983A JP4364251B2 JP 4364251 B2 JP4364251 B2 JP 4364251B2 JP 2007085983 A JP2007085983 A JP 2007085983A JP 2007085983 A JP2007085983 A JP 2007085983A JP 4364251 B2 JP4364251 B2 JP 4364251B2
- Authority
- JP
- Japan
- Prior art keywords
- terminal
- dialogue
- voice
- received
- dialog
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 55
- 238000001514 detection method Methods 0.000 claims description 94
- 239000000463 material Substances 0.000 claims description 16
- 230000009471 action Effects 0.000 claims description 4
- 230000008569 process Effects 0.000 description 28
- 238000010586 diagram Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 11
- 238000004364 calculation method Methods 0.000 description 4
- 230000000875 corresponding effect Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000003993 interaction Effects 0.000 description 3
- 239000012925 reference material Substances 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 230000004913 activation Effects 0.000 description 1
- 230000002238 attenuated effect Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
Landscapes
- Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Telephonic Communication Services (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
第1の実施の形態にかかる対話検出装置は、各ユーザが利用する端末それぞれで取得された音声を入力し、入力した音声間の関係を解析することにより、ユーザ間の対話を検出するものである。
第1の実施の形態では、サーバ装置である対話検出装置内で対話検出処理に関するすべての処理を実行していた。これに対し、第2の実施の形態にかかる対話検出装置は、各端末内に対話検出機能を備え、端末間で送受信した音声情報を元に各端末内で個別に対話検出処理を実行可能とするものである。
52 ROM
53 RAM
54 通信I/F
61 バス
100 対話検出装置
101 スケジュール受付部
102 操作受付部
103 音声受付部
104 近接判定部
105 対話検出部
121 通信部
131 スケジュール記憶部
132 音声記憶部
133 対話記憶部
200a、200b 端末
300 ネットワーク
601、602 音声
801 ユーザ名
802 状況
803 検索ボタン
1000 対話検出装置
1003 音声受付部
1006 ユーザ情報受付部
1022 マイク
Claims (11)
- ユーザの音声を取得可能な複数の端末に接続され、前記端末を利用するユーザ間の対話に関する対話情報を検出する対話検出装置であって、
前記端末を識別する端末IDと、前記端末で取得された音声および前記音声の発話期間とを複数の前記端末から受付ける音声受付部と、
複数の前記端末から受付けた音声間の相関関係を表す相関値を算出して予め定められた第1閾値と比較し、前記相関値が前記第1閾値より大きい場合に、前記相関値を算出した複数の音声を受付けた複数の前記端末が互いに近接すると判定する近接判定部と、
対話の検出対象とする任意の対象期間内における、近接すると判定された複数の前記端末から受付けた発話期間の関係が、予め定められた規則に適合するか否かを判定し、前記規則に適合すると判定されたときの前記対象期間と、近接すると判定された複数の前記端末から受付けた前記端末IDとを含む前記対話情報を検出する対話検出部と、
を備えたことを特徴とする対話検出装置。 - 前記対話検出部は、複数の前記端末から受付けた発話期間が重複する重複期間の前記対象期間に対する割合が予め定められた第2閾値より小さいことを表す前記規則に適合するか否かを判定すること、
を特徴とする請求項1に記載の対話検出装置。 - 前記対話検出部は、前記重複期間の前記対象期間に対する割合が前記第2閾値より小さく、かつ、前記対象期間内で前記発話期間が存在しない無発話期間の前記対象期間に対する割合が予め定められた第3閾値より小さいことを表す前記規則に適合するか否かを判定すること、
を特徴とする請求項2に記載の対話検出装置。 - ユーザの行動の予定と、前記行動に関連するユーザが利用する前記端末の前記端末IDとを含むスケジュール情報の入力を受付けるスケジュール受付部をさらに備え、
前記近接判定部は、複数の前記端末から受付けた音声のうち、受付けた前記スケジュール情報に含まれる前記端末IDに対応する音声間の前記相関値を算出すること、
を特徴とする請求項1に記載の対話検出装置。 - 受付けた前記端末ID、前記音声、および前記発話期間を対応づけて記憶する音声記憶部をさらに備え、
前記近接判定部は、前記音声記憶部に記憶された前記音声間の相関値を算出して前記第1閾値と比較し、前記相関値が前記第1閾値より大きい場合に、前記相関値を算出した音声を受付けた複数の前記端末が互いに近接すると判定し、
前記対話検出部は、近接すると判定された複数の前記端末から受付けた発話期間を前記音声記憶部から取得し、前記対象期間内における取得した前記発話期間の関係が前記規則に適合するか否かを判定すること、
を特徴とする請求項1に記載の対話検出装置。 - 検出された前記対話情報を記憶する対話記憶部をさらに備えたこと、
を特徴とする請求項1に記載の対話検出装置。 - 前記端末に対する操作内容と操作日時とを対応づけた操作情報を受付ける操作受付部をさらに備え、
前記対話記憶部は、受付けた前記操作情報の前記操作日時を含む前記対話期間の前記対話情報に、受付けた前記操作情報の前記操作内容をさらに対応づけて記憶すること、
を特徴とする請求項6に記載の対話検出装置。 - 前記操作受付部は、前記操作内容として前記端末で利用された資料を識別する資料IDを対応づけた前記操作情報を受付け、
前記対話記憶部は、受付けた前記操作情報の前記操作日時を含む前記対話期間の前記対話情報に、受付けた前記操作情報の前記資料IDをさらに対応づけて記憶すること、
を特徴とする請求項7に記載の対話検出装置。 - ユーザの音声を入力する音声受付部と、
前記端末IDを受付けるユーザ情報受付部と、をさらに備え、
前記近接判定部は、さらに、前記音声受付部から入力された音声と、前記端末から受付けた音声との間の前記相関値を算出して前記第1閾値と比較し、前記相関値が前記第1閾値より大きい場合に、前記相関値を算出した音声を受付けた前記端末と前記対話検出装置とが互いに近接すると判定し、
前記対話検出部は、さらに、近接すると判定された前記端末から受付けた発話期間と前記音声受付部から入力された音声の発話期間との間の前記対象期間内での関係が前記規則に適合するか否かを判定し、前記規則に適合すると判定されたときの前記対象期間と、近接すると判定された前記端末から受付けた端末IDと、前記ユーザ情報受付部によって受付けられた端末IDとを含む前記対話情報を検出すること、
を特徴とする請求項1に記載の対話検出装置。 - ユーザの音声を取得可能な複数の端末に接続され、前記端末を利用するユーザ間の対話に関する対話情報を検出する対話検出装置における対話検出方法であって、
音声受付部によって、前記端末を識別する端末IDと、前記端末で取得された音声および前記音声の発話期間とを複数の前記端末から受付ける音声受付ステップと、
近接判定部によって、複数の前記端末から受付けた音声間の相関関係を表す相関値を算出して予め定められた第1閾値と比較し、前記相関値が前記第1閾値より大きい場合に、前記相関値を算出した複数の音声を受付けた複数の前記端末が互いに近接すると判定する近接判定ステップと、
対話検出部によって、対話の検出対象とする任意の対象期間内における、近接すると判定された複数の前記端末から受付けた発話期間の関係が、予め定められた規則に適合するか否かを判定し、前記規則に適合すると判定されたときの前記対象期間と、近接すると判定された複数の前記端末から受付けた前記端末IDとを含む前記対話情報を検出する対話検出ステップと、
を備えたことを特徴とする対話検出方法。 - ユーザの音声を取得可能な複数の端末に接続され、前記端末を利用するユーザ間の対話に関する対話情報を検出する対話検出装置における対話検出プログラムであって、
前記端末を識別する端末IDと、前記端末で取得された音声および前記音声の発話期間とを複数の前記端末から受付ける音声受付手順と、
複数の前記端末から受付けた音声間の相関関係を表す相関値を算出して予め定められた第1閾値と比較し、前記相関値が前記第1閾値より大きい場合に、前記相関値を算出した複数の音声を受付けた複数の前記端末が互いに近接すると判定する近接判定手順と、
対話の検出対象とする任意の対象期間内における、近接すると判定された複数の前記端末から受付けた発話期間の関係が、予め定められた規則に適合するか否かを判定し、前記規則に適合すると判定されたときの前記対象期間と、近接すると判定された複数の前記端末から受付けた前記端末IDとを含む前記対話情報を検出する対話検出手順と、
をコンピュータに実行させる対話検出プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007085983A JP4364251B2 (ja) | 2007-03-28 | 2007-03-28 | 対話を検出する装置、方法およびプログラム |
US12/046,021 US8306823B2 (en) | 2007-03-28 | 2008-03-11 | Dialog detecting apparatus, dialog detecting method, and computer program product |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007085983A JP4364251B2 (ja) | 2007-03-28 | 2007-03-28 | 対話を検出する装置、方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008242318A JP2008242318A (ja) | 2008-10-09 |
JP4364251B2 true JP4364251B2 (ja) | 2009-11-11 |
Family
ID=39795842
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007085983A Expired - Fee Related JP4364251B2 (ja) | 2007-03-28 | 2007-03-28 | 対話を検出する装置、方法およびプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US8306823B2 (ja) |
JP (1) | JP4364251B2 (ja) |
Families Citing this family (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5197276B2 (ja) * | 2008-02-26 | 2013-05-15 | 株式会社東芝 | 情報提示装置および情報提示方法 |
JP5267995B2 (ja) * | 2009-05-15 | 2013-08-21 | 独立行政法人情報通信研究機構 | 会話グループ把握装置、会話グループ把握方法、及びプログラム |
JP5607627B2 (ja) * | 2010-02-25 | 2014-10-15 | パナソニック株式会社 | 信号処理装置及び信号処理方法 |
CN102474681B (zh) * | 2010-06-30 | 2014-12-10 | 松下电器产业株式会社 | 交谈检测装置、助听器和交谈检测方法 |
JP5740575B2 (ja) * | 2010-09-28 | 2015-06-24 | パナソニックIpマネジメント株式会社 | 音声処理装置および音声処理方法 |
JP2012205147A (ja) * | 2011-03-25 | 2012-10-22 | Kyocera Corp | 携帯電子機器および音声制御システム |
JP5699749B2 (ja) | 2011-03-31 | 2015-04-15 | 富士通株式会社 | 携帯端末装置の位置判定システムおよび携帯端末装置 |
JP5762168B2 (ja) * | 2011-06-22 | 2015-08-12 | キヤノン株式会社 | 撮像装置及び再生装置 |
JP5639546B2 (ja) * | 2011-08-05 | 2014-12-10 | 株式会社東芝 | 情報処理装置及び情報処理方法 |
JP6031750B2 (ja) * | 2011-11-25 | 2016-11-24 | 株式会社リコー | 表示制御装置、画像表示システム、表示制御方法およびプログラム |
JP5749213B2 (ja) * | 2012-04-20 | 2015-07-15 | 日本電信電話株式会社 | 音声データ分析装置、音声データ分析方法および音声データ分析プログラム |
JP5749212B2 (ja) * | 2012-04-20 | 2015-07-15 | 日本電信電話株式会社 | データ分析装置、データ分析方法およびデータ分析プログラム |
US20140081637A1 (en) * | 2012-09-14 | 2014-03-20 | Google Inc. | Turn-Taking Patterns for Conversation Identification |
GB201301452D0 (en) * | 2013-01-28 | 2013-03-13 | Microsoft Corp | Providing notifications of call-related services |
JP6580362B2 (ja) * | 2014-04-24 | 2019-09-25 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 会議決定方法およびサーバ装置 |
WO2016157642A1 (ja) * | 2015-03-27 | 2016-10-06 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
JP6641832B2 (ja) | 2015-09-24 | 2020-02-05 | 富士通株式会社 | 音声処理装置、音声処理方法および音声処理プログラム |
CN110289013B (zh) * | 2019-07-24 | 2023-12-19 | 腾讯科技(深圳)有限公司 | 多音频采集源检测方法、装置、存储介质和计算机设备 |
CN110706702B (zh) * | 2019-10-15 | 2021-11-09 | 芜湖盟博科技有限公司 | 一种语音识别无限级多轮对话方法 |
CN112269897B (zh) * | 2020-10-20 | 2024-04-05 | 上海明略人工智能(集团)有限公司 | 语音采集设备的确定方法及装置 |
WO2022230136A1 (ja) * | 2021-04-28 | 2022-11-03 | 株式会社I’mbesideyou | 動画像分析システム |
Family Cites Families (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6263049B1 (en) * | 1996-10-10 | 2001-07-17 | Envision Telephony, Inc. | Non-random call center supervisory method and apparatus |
US20020036694A1 (en) * | 1998-05-07 | 2002-03-28 | Merril Jonathan R. | Method and system for the storage and retrieval of web-based educational materials |
JP4168539B2 (ja) | 1999-08-03 | 2008-10-22 | 富士ゼロックス株式会社 | 対話情報配信システムおよび対話情報配信装置 |
US20060067500A1 (en) * | 2000-05-15 | 2006-03-30 | Christofferson Frank C | Teleconferencing bridge with edgepoint mixing |
WO2002048837A2 (en) * | 2000-12-15 | 2002-06-20 | Polycom, Inc. | System and method for device co-location discrimination |
JP2004030293A (ja) | 2002-06-26 | 2004-01-29 | Ricoh Co Ltd | 監視システム |
US6882971B2 (en) * | 2002-07-18 | 2005-04-19 | General Instrument Corporation | Method and apparatus for improving listener differentiation of talkers during a conference call |
JP4005470B2 (ja) * | 2002-10-09 | 2007-11-07 | オリンパス株式会社 | 情報処理装置及び情報処理プログラム |
US7617094B2 (en) * | 2003-02-28 | 2009-11-10 | Palo Alto Research Center Incorporated | Methods, apparatus, and products for identifying a conversation |
US7933226B2 (en) * | 2003-10-22 | 2011-04-26 | Palo Alto Research Center Incorporated | System and method for providing communication channels that each comprise at least one property dynamically changeable during social interactions |
US7190775B2 (en) * | 2003-10-29 | 2007-03-13 | Broadcom Corporation | High quality audio conferencing with adaptive beamforming |
JP4116600B2 (ja) | 2004-08-24 | 2008-07-09 | 日本電信電話株式会社 | 収音方法、収音装置、収音プログラム、およびこれを記録した記録媒体 |
US9300790B2 (en) * | 2005-06-24 | 2016-03-29 | Securus Technologies, Inc. | Multi-party conversation analyzer and logger |
US8000466B2 (en) * | 2005-09-01 | 2011-08-16 | Siemens Enterprise Communications, Inc. | Method and apparatus for multiparty collaboration enhancement |
JP4439462B2 (ja) | 2005-11-29 | 2010-03-24 | 株式会社東芝 | 情報提示方法、情報提示装置及び情報提示プログラム |
US7876890B2 (en) * | 2006-06-15 | 2011-01-25 | Avaya Inc. | Method for coordinating co-resident teleconferencing endpoints to avoid feedback |
US20080037446A1 (en) * | 2006-08-08 | 2008-02-14 | Cisco Technology, Inc. | Facilitating connection to a conference call |
JP4215792B2 (ja) * | 2006-09-22 | 2009-01-28 | 株式会社東芝 | 会議支援装置、会議支援方法および会議支援プログラム |
JP2008084110A (ja) | 2006-09-28 | 2008-04-10 | Toshiba Corp | 情報表示装置、情報表示方法及び情報表示プログラム |
US7848738B2 (en) * | 2007-03-19 | 2010-12-07 | Avaya Inc. | Teleconferencing system with multiple channels at each location |
JP4469867B2 (ja) | 2007-03-27 | 2010-06-02 | 株式会社東芝 | コミュニケーションの状況を管理する装置、方法およびプログラム |
-
2007
- 2007-03-28 JP JP2007085983A patent/JP4364251B2/ja not_active Expired - Fee Related
-
2008
- 2008-03-11 US US12/046,021 patent/US8306823B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US20080243494A1 (en) | 2008-10-02 |
JP2008242318A (ja) | 2008-10-09 |
US8306823B2 (en) | 2012-11-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4364251B2 (ja) | 対話を検出する装置、方法およびプログラム | |
KR101726945B1 (ko) | 수동 시작/종료 포인팅 및 트리거 구문들에 대한 필요성의 저감 | |
US9293133B2 (en) | Improving voice communication over a network | |
US11335322B2 (en) | Learning device, learning method, voice synthesis device, and voice synthesis method | |
US8811638B2 (en) | Audible assistance | |
JP5533854B2 (ja) | 音声認識処理システム、および音声認識処理方法 | |
US20130211826A1 (en) | Audio Signals as Buffered Streams of Audio Signals and Metadata | |
US20140172953A1 (en) | Response Endpoint Selection | |
US20150006568A1 (en) | Identifying a contact based on a voice communication session | |
WO2014099872A1 (en) | Multi-purpose stylus for a computing device | |
JP5731998B2 (ja) | 対話支援装置、対話支援方法および対話支援プログラム | |
KR101559364B1 (ko) | 페이스 투 페이스 인터랙션 모니터링을 수행하는 모바일 장치, 이를 이용하는 인터랙션 모니터링 방법, 이를 포함하는 인터랙션 모니터링 시스템 및 이에 의해 수행되는 인터랙션 모니터링 모바일 애플리케이션 | |
JP4469867B2 (ja) | コミュニケーションの状況を管理する装置、方法およびプログラム | |
US20190171760A1 (en) | System, summarization apparatus, summarization system, and method of controlling summarization apparatus, for acquiring summary information | |
JP2024507916A (ja) | オーディオ信号の処理方法、装置、電子機器、及びコンピュータプログラム | |
JP2018171683A (ja) | ロボットの制御プログラム、ロボット装置、及びロボットの制御方法 | |
JP2006201496A (ja) | フィルタリング装置 | |
WO2016157993A1 (ja) | 情報処理装置、情報処理方法およびプログラム | |
JP2019015837A (ja) | 猫の性格を持つ会話型ロボット及び猫の性格を発現させる対話管理プログラム | |
JP2020052511A (ja) | 要約生成装置、要約生成方法、及びプログラム | |
US20220013128A1 (en) | Conversation support system, conversation support method and computer readable storage medium | |
JP2010103704A (ja) | 音声変換装置 | |
JP2007259427A (ja) | 携帯端末装置 | |
JP2008124597A (ja) | 音声会議システム | |
KR101562901B1 (ko) | 대화 지원 서비스 제공 시스템 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090326 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090728 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090818 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120828 Year of fee payment: 3 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 4364251 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120828 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130828 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |