JP2008076904A - 感情の判別方法、感情判別装置、雰囲気情報通信端末 - Google Patents
感情の判別方法、感情判別装置、雰囲気情報通信端末 Download PDFInfo
- Publication number
- JP2008076904A JP2008076904A JP2006257983A JP2006257983A JP2008076904A JP 2008076904 A JP2008076904 A JP 2008076904A JP 2006257983 A JP2006257983 A JP 2006257983A JP 2006257983 A JP2006257983 A JP 2006257983A JP 2008076904 A JP2008076904 A JP 2008076904A
- Authority
- JP
- Japan
- Prior art keywords
- data
- emotion
- voice
- speaker
- determined
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
【解決手段】本感情判別装置は、過去の音声データの平均と、前記サンプル音声のデータの平均とを比較して補正値を決定し、判定対象となる音声データの座標Pを、補正値L分だけシフトさせ、その上で、感情の判定を行っている。このように、話者が元から持つ音声の特徴を予め見込んで音声データの座標を補正しておけば、話者が元から持つ音声の特徴の影響を排除した状態でマハラノビスの距離が算出され、正しい判別結果を得ることが可能となる。
【選択図】図15
Description
本発明は上記のような事情に基づいて完成されたものであって、判定率が高く、信頼性ある感情判別装置等を提供することを目的とする。
尚、話者が元から持つというのは、話者が生まれつき持つ、或いは日常的に持つという意味である。
尚、ここでいう、雰囲気情報というのは、メディアコミュニケーションで用いる言語や映像などによるメッセージ以外のものであって、室内の環境に関する情報や、人が無意識に発する情報などである。
請求項1の発明によれば、話者が元から持つ音声の特徴に応じた補正値で音声データを補正した上で、感情データに参照させている。このような構成であれば、音声の個体差に起因するカテゴリの誤判定を少なく出来るので、判別率が高まる。また、補正値を音声データの平均に基づいて算出している。平均であれば、演算が比較的簡単に出来るので、データ補正手段の処理負担が少なくて済む。
請求項2の発明によれば、所定時間経過するごとに、補正値を更新することとした。このような構成であれば、新しく検出された音声が、データの補正に反映されるから、判定率の向上が期待できる。また、使用状況によっては、話者が途中で変わってしまうことがあるが、本構成であれば、話者の変更にも対応できる。
請求項3の発明によれば、データ補正手段による補正処理、並びにこれに続くカテゴリの判定処理が、音声取得手段が話者の音声を取得する処理と並行して行われるようにした。このような構成であれば、高い判定率を維持しつつ、リアルタイムで感情を判別出来るので、商品性が高まる。
請求項5の発明によれば、雰囲気情報通信システムによって、雰囲気情報を授受させているが、これに感情情報を含ませることとした。感情情報は、相手の様子を最も表す情報のうちの一つであるので、これを、授受させることで、利用者間によるコミニュケーションの増進が期待できる。
1.雰囲気情報通信端末の構成
図1は、雰囲気情報通信端末S1、S2の分解斜視図である。雰囲気情報通信端末S1、S2は端末本体20と、筒状の外部ケーシング40とから構成されている。端末本体20は円盤状をなすベース部21上にLED基板31を縦向きに固定したものである。係る雰囲気情報通信端末S1、S2は、図2に示すように、2つの住居1、2にそれぞれ設置され、ネットワークNWを介して通信可能に接続されている。
図6は、感情判別装置の電気的構成を示すブロック図である。
感情判別装置はマイクロフォン65、A/D変換器91、フレームメモリ93、音声信号解析部100、感情データベースDB、データ格納部101並びに出力回路103などから構成されている。
また、X(n)は、n番目のデータの数値である。
以上述べたように、本実施形態のものは、話者が元から持つ音声の特徴を排除する処理を行った上で、感情のカテゴリを判定しているので、感情のカテゴリを正確に判定できる。また、話者が元から持つ音声の特徴を排除する処理は、中心間距離Lの算出と、音声データの座標をシフトする処理によって実現されている。中心間距離Lの算出、並びに座標のシフトは比較的簡単な処理であり、音声信号解析部100の処理負担が少ないので高速処理が可能となる。また、本実施形態のものは、音声を検出する処理と、カテゴリを判定する処理を並行して行っているので、リアルタイムで感情の判定をすることが可能で、商品性に優れるものとなっている。
本発明は上記記述及び図面によって説明した実施形態に限定されるものではなく、例えば次のような実施形態も本発明の技術的範囲に含まれ、更に、下記以外にも要旨を逸脱しない範囲内で種々変更して実施することができる。
93…フレームメモリ
100…音声信号解析部(本発明の「特徴検出手段」、「データ補正手段」に相当)
101…データ格納部(本発明の「記憶手段」に相当)
S1、S2…雰囲気情報通信端末
DB…感情データベース(本発明の「感情データ」に相当)
Claims (5)
- 話者の音声を取得する音声取得手段と、
取得された音声から特徴を抽出する特徴抽出手段と、を備え、得られた特徴を要素とする音声データを、複数人のサンプル音声からなる感情データに参照させて話者の感情のカテゴリを判定する感情判別装置であって、
判定された過去の音声データの平均と前記サンプル音声のデータの平均と、に基づいて話者が元から持つ音声の特徴に応じた補正値を決定し、以降に判定される話者の音声データを前記補正値で補正するデータ補正手段を備え、
前記補正後の音声データを、前記感情データに参照させて感情のカテゴリを判定することを特徴とする感情判別装置。 - 記憶手段を備えて、判定された過去の音声データを累積的に記憶させる構成であるとともに、
前記データ補正手段は、所定時間経過ごとに前記記憶手段から前記音声データを読み出して音声データの平均を改めて算出し、前記補正値を更新することを特徴とする請求項1に記載の感情判別装置。 - 前記データ補正手段による前記補正処理、並びにこれに続くカテゴリの判定処理が、前記音声取得手段が話者の音声を取得する処理と並行して行われることを特徴とする請求項1又は請求項2に記載の感情判別装置。
- 話者から取得された音声から特徴を抽出し、得られた特徴を要素とする音声データを、複数人のサンプル音声からなる感情データに参照させて話者の感情のカテゴリを判定する感情の判別方法であって、
判定された過去の音声データの平均と前記サンプル音声のデータの平均と、に基づいて話者が元から持つ音声の特徴に応じた補正値を決定し、以降に判定される話者の音声データを前記補正値で補正した上で、前記感情データに参照させて前記感情のカテゴリを判定することを特徴とする感情の判別方法。 - 互いに離間した室内間をネットワークを通じて通信可能に接続し、室内の雰囲気情報を前記ネットワークを通じて一方側から他方側へ送信して他方側の室内において表示させる雰囲気情報通信システムに用いられる雰囲気情報通信端末であって、
請求項1ないし請求項3のいずれかに記載された感情判別装置と、
前記感情判別装置で判別された、前記雰囲気情報としての感情情報を前記ネットワークを通じて相手側に送信する送信部と、を有する雰囲気情報通信端末。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006257983A JP4941966B2 (ja) | 2006-09-22 | 2006-09-22 | 感情の判別方法、感情判別装置、雰囲気情報通信端末 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006257983A JP4941966B2 (ja) | 2006-09-22 | 2006-09-22 | 感情の判別方法、感情判別装置、雰囲気情報通信端末 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008076904A true JP2008076904A (ja) | 2008-04-03 |
JP4941966B2 JP4941966B2 (ja) | 2012-05-30 |
Family
ID=39349001
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006257983A Expired - Fee Related JP4941966B2 (ja) | 2006-09-22 | 2006-09-22 | 感情の判別方法、感情判別装置、雰囲気情報通信端末 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4941966B2 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101330268B1 (ko) | 2012-09-12 | 2013-11-15 | 가천대학교 산학협력단 | 가중 퍼지 소속 함수 기반 뉴로 퍼지 네트워크를 이용한 음성 감정 인식 모델 생성 방법 |
JP2015156229A (ja) * | 2009-10-29 | 2015-08-27 | イマージョン コーポレーションImmersion Corporation | 音声−テキスト変換の触覚増強のためのシステム及び方法 |
CN104939810A (zh) * | 2014-03-25 | 2015-09-30 | 上海斐讯数据通信技术有限公司 | 一种控制情绪的方法及装置 |
WO2017187712A1 (ja) * | 2016-04-26 | 2017-11-02 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置 |
JP2020201334A (ja) * | 2019-06-07 | 2020-12-17 | 株式会社Nttドコモ | 感情推定装置、及び、感情推定システム |
Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63118797A (ja) * | 1986-11-07 | 1988-05-23 | 日本電気株式会社 | 音声認識装置 |
JPH01107240U (ja) * | 1988-01-08 | 1989-07-19 | ||
JPH01200294A (ja) * | 1988-02-04 | 1989-08-11 | Sony Corp | 音声認識装置 |
JPH075895A (ja) * | 1993-04-20 | 1995-01-10 | Clarion Co Ltd | 音声認識装置及び騒音環境での音声認識方法 |
JP2001083984A (ja) * | 1999-09-09 | 2001-03-30 | Alpine Electronics Inc | インタフェース装置 |
JP2002034936A (ja) * | 2000-07-24 | 2002-02-05 | Sharp Corp | 通信装置および通信方法 |
JP2002091482A (ja) * | 2000-09-13 | 2002-03-27 | Agi:Kk | 感情検出方法及び感情検出装置ならびに記録媒体 |
JP2003066991A (ja) * | 2001-08-22 | 2003-03-05 | Seiko Epson Corp | 音声認識結果出力方法および音声認識結果出力装置ならびに音声認識結果出力処理プログラムを記録した記録媒体 |
JP2003162294A (ja) * | 2001-10-05 | 2003-06-06 | Sony Internatl Europ Gmbh | 感情検出方法及び感情検出装置 |
JP2003330490A (ja) * | 2002-05-15 | 2003-11-19 | Fujitsu Ltd | 音声対話装置 |
JP2004317822A (ja) * | 2003-04-17 | 2004-11-11 | Agi:Kk | 感情分析・表示装置 |
JP2005152054A (ja) * | 2003-11-20 | 2005-06-16 | Sony Corp | 感情算出装置及び感情算出方法、並びに携帯型通信装置 |
JP2005348872A (ja) * | 2004-06-09 | 2005-12-22 | Nippon Hoso Kyokai <Nhk> | 感情推定装置及び感情推定プログラム |
JP2006259641A (ja) * | 2005-03-18 | 2006-09-28 | Univ Waseda | 音声認識装置及び音声認識用プログラム |
JP2006267464A (ja) * | 2005-03-23 | 2006-10-05 | Tokyo Electric Power Co Inc:The | 感情解析装置、感情解析プログラム、プログラム格納媒体 |
-
2006
- 2006-09-22 JP JP2006257983A patent/JP4941966B2/ja not_active Expired - Fee Related
Patent Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63118797A (ja) * | 1986-11-07 | 1988-05-23 | 日本電気株式会社 | 音声認識装置 |
JPH01107240U (ja) * | 1988-01-08 | 1989-07-19 | ||
JPH01200294A (ja) * | 1988-02-04 | 1989-08-11 | Sony Corp | 音声認識装置 |
JPH075895A (ja) * | 1993-04-20 | 1995-01-10 | Clarion Co Ltd | 音声認識装置及び騒音環境での音声認識方法 |
JP2001083984A (ja) * | 1999-09-09 | 2001-03-30 | Alpine Electronics Inc | インタフェース装置 |
JP2002034936A (ja) * | 2000-07-24 | 2002-02-05 | Sharp Corp | 通信装置および通信方法 |
JP2002091482A (ja) * | 2000-09-13 | 2002-03-27 | Agi:Kk | 感情検出方法及び感情検出装置ならびに記録媒体 |
JP2003066991A (ja) * | 2001-08-22 | 2003-03-05 | Seiko Epson Corp | 音声認識結果出力方法および音声認識結果出力装置ならびに音声認識結果出力処理プログラムを記録した記録媒体 |
JP2003162294A (ja) * | 2001-10-05 | 2003-06-06 | Sony Internatl Europ Gmbh | 感情検出方法及び感情検出装置 |
JP2003330490A (ja) * | 2002-05-15 | 2003-11-19 | Fujitsu Ltd | 音声対話装置 |
JP2004317822A (ja) * | 2003-04-17 | 2004-11-11 | Agi:Kk | 感情分析・表示装置 |
JP2005152054A (ja) * | 2003-11-20 | 2005-06-16 | Sony Corp | 感情算出装置及び感情算出方法、並びに携帯型通信装置 |
JP2005348872A (ja) * | 2004-06-09 | 2005-12-22 | Nippon Hoso Kyokai <Nhk> | 感情推定装置及び感情推定プログラム |
JP2006259641A (ja) * | 2005-03-18 | 2006-09-28 | Univ Waseda | 音声認識装置及び音声認識用プログラム |
JP2006267464A (ja) * | 2005-03-23 | 2006-10-05 | Tokyo Electric Power Co Inc:The | 感情解析装置、感情解析プログラム、プログラム格納媒体 |
Non-Patent Citations (1)
Title |
---|
大久保 崇 TAKASHI OKUBO: "韻律情報を利用した文章入力システムのための韻律制御モデル Prosody Control Model for Dictation System", 日本音響学会2004年秋季研究発表会講演論文集−I− THE 2004 AUTUMN MEETING OF THE ACOUSTICAL SOCI, JPN6011028001, September 2004 (2004-09-01), JP, pages 133 - 134, ISSN: 0002011643 * |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015156229A (ja) * | 2009-10-29 | 2015-08-27 | イマージョン コーポレーションImmersion Corporation | 音声−テキスト変換の触覚増強のためのシステム及び方法 |
KR101330268B1 (ko) | 2012-09-12 | 2013-11-15 | 가천대학교 산학협력단 | 가중 퍼지 소속 함수 기반 뉴로 퍼지 네트워크를 이용한 음성 감정 인식 모델 생성 방법 |
CN104939810A (zh) * | 2014-03-25 | 2015-09-30 | 上海斐讯数据通信技术有限公司 | 一种控制情绪的方法及装置 |
WO2017187712A1 (ja) * | 2016-04-26 | 2017-11-02 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置 |
JPWO2017187712A1 (ja) * | 2016-04-26 | 2018-11-01 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置 |
US11455985B2 (en) | 2016-04-26 | 2022-09-27 | Sony Interactive Entertainment Inc. | Information processing apparatus |
JP2020201334A (ja) * | 2019-06-07 | 2020-12-17 | 株式会社Nttドコモ | 感情推定装置、及び、感情推定システム |
JP7279287B2 (ja) | 2019-06-07 | 2023-05-23 | 株式会社Nttドコモ | 感情推定装置、及び、感情推定システム |
Also Published As
Publication number | Publication date |
---|---|
JP4941966B2 (ja) | 2012-05-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10579912B2 (en) | User registration for intelligent assistant computer | |
US11335322B2 (en) | Learning device, learning method, voice synthesis device, and voice synthesis method | |
JP6502249B2 (ja) | 音声認識方法及び音声認識装置 | |
JP6524049B2 (ja) | 感情推定装置、感情推定方法、感情推定プログラム、および感情カウントシステム | |
JP5075664B2 (ja) | 音声対話装置及び支援方法 | |
US8036898B2 (en) | Conversational speech analysis method, and conversational speech analyzer | |
CN108806720B (zh) | 话筒、数据处理器、监测***及监测方法 | |
JP4941966B2 (ja) | 感情の判別方法、感情判別装置、雰囲気情報通信端末 | |
JP2018036653A (ja) | 音声応答装置 | |
JP7389421B2 (ja) | 精神・神経系疾患を推定する装置 | |
CN110914897B (zh) | 语音识别***和语音识别装置 | |
JP2020095210A (ja) | 議事録出力装置および議事録出力装置の制御プログラム | |
JP2019068153A (ja) | 情報処理方法、情報処理装置及び情報処理プログラム | |
JP6239826B2 (ja) | 話者認識装置、話者認識方法及び話者認識プログラム | |
JP2006230548A (ja) | 体調判定装置およびそのプログラム | |
JP7021488B2 (ja) | 情報処理装置、及びプログラム | |
JP2008076905A (ja) | 感情判別方法 | |
CN113764099A (zh) | 基于人工智能的心理状态分析方法、装置、设备及介质 | |
JP2019113696A (ja) | 発話タイミング判定装置、ロボット、発話タイミング判定方法及びプログラム | |
Pittman et al. | Detecting and learning new words: The impact of advancing age and hearing loss | |
JP2019128531A (ja) | 音声分析装置および音声分析方法 | |
JP6392578B2 (ja) | 音声処理装置、音声処理方法、及び音声処理プログラム | |
KR20170052082A (ko) | 적외선 검출 기반 음성인식 방법 및 장치 | |
JP2022157372A (ja) | 情報処理システム、音声識別方法及びプログラム | |
FR3111044A1 (fr) | Prédiction de situations émotionnelles négatives dans un habitat connecté pour promouvoir des services invoquant des émotions positives |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090910 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20100507 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20100709 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20100916 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20101026 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20110401 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110525 |
|
A072 | Dismissal of procedure [no reply to invitation to correct request for examination] |
Free format text: JAPANESE INTERMEDIATE CODE: A073 Effective date: 20110607 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110906 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20111028 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120124 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120222 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150309 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |