KR101171310B1 - 감정 인식에 의한 데이터 처리 기능을 갖는이동통신단말기, 기지국 서버 및 이를 이용한 방법 - Google Patents

감정 인식에 의한 데이터 처리 기능을 갖는이동통신단말기, 기지국 서버 및 이를 이용한 방법 Download PDF

Info

Publication number
KR101171310B1
KR101171310B1 KR1020050084824A KR20050084824A KR101171310B1 KR 101171310 B1 KR101171310 B1 KR 101171310B1 KR 1020050084824 A KR1020050084824 A KR 1020050084824A KR 20050084824 A KR20050084824 A KR 20050084824A KR 101171310 B1 KR101171310 B1 KR 101171310B1
Authority
KR
South Korea
Prior art keywords
data
voice
emotional state
voice characteristic
characteristic
Prior art date
Application number
KR1020050084824A
Other languages
English (en)
Other versions
KR20070030061A (ko
Inventor
안인회
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020050084824A priority Critical patent/KR101171310B1/ko
Publication of KR20070030061A publication Critical patent/KR20070030061A/ko
Application granted granted Critical
Publication of KR101171310B1 publication Critical patent/KR101171310B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/63—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for estimating an emotional state

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Tourism & Hospitality (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Marketing (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • Psychiatry (AREA)
  • Hospice & Palliative Care (AREA)
  • Child & Adolescent Psychology (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Telephonic Communication Services (AREA)

Abstract

본 발명은 감정 인식에 의한 데이터 처리 기능을 갖는 이동통신단말기, 기지국 서버 및 이를 이용한 방법에 관한 것이다.
본 발명은, 감정 상태에 따른 음성 특성을 저장하는 제 1 저장부와, 사용자의 통화 음성으로부터 음성 특성을 추출하는 음성 분석부와, 상기 저장된 음성 특성 중에서 상기 추출한 음성 특성과 일치하는 음성 특성이 존재하는지 여부를 판단하는 제어부와, 상기 제어부의 제어 신호에 따라 상기 추출한 음성 특성에 해당하는 감정 상태 데이터를 생성하는 데이터 생성부와, 상기 생성된 감정 상태 데이터를 기지국 서버에 송신하는 송신부 및 상기 기지국 서버로부터 상기 감정 상태 데이터에 따른 컨텐츠 데이터를 제공받는 수신부를 포함하여 이루어지는 감정 인식에 의한 데이터 처리 기능을 갖는 이동통신단말기를 제공한다.
따라서, 본 발명에 의하면, 사용자의 감정 상태에 따른 컨텐츠 데이터를 제공받을 수 있다.
음성 분석부, 데이터 생성부, 음성특성 수정부, 감정 상태 데이터

Description

감정 인식에 의한 데이터 처리 기능을 갖는 이동통신단말기, 기지국 서버 및 이를 이용한 방법{Mobile Telecommunication Device and Base Station Server Having Function for Managing Data by Feeling Recognition and Method thereby}
도 1은 본 발명에 따른 감정 인식에 의한 데이터 처리 기능을 갖는 이동통신단말기의 제 1 실시예 구성도.
도 2는 본 발명에 따른 감정 인식에 의한 데이터 처리 기능을 갖는 이동통신단말기의 제 2 실시예 구성도.
도 3은 본 발명에 따른 감정 인식에 의한 데이터 처리 기능을 갖는 이동통신단말기의 제 3 실시예 구성도.
도 4는 본 발명에 따른 감정 인식에 의한 데이터 처리 기능을 갖는 기지국 서버의 일실시예 구성도.
도 5는 본 발명에 따른 이동통신단말기를 이용한 감정 인식에 의한 데이터 처리 방법의 제 1 실시예 흐름도.
도 6은 본 발명에 따른 이동통신단말기를 이용한 감정 인식에 의한 데이터 처리 방법의 제 2 실시예 흐름도.
본 발명은 이동통신단말기에 관한 것으로써, 보다 상세하게는 감정 인식에 의한 데이터 처리 기능을 갖는 이동통신단말기, 기지국 서버 및 이를 이용한 방법에 관한 것이다.
음성 인식에 기반을 둔 종래 기술을 설명하면 다음과 같다.
음성 인식은, 사람마다 억양과 음의 높낮이가 다를 뿐만 아니라 동일한 사람이라도 감정 상태에 따라 억양과 음의 높낮이가 다르다는 특성에 기인하여, 음성의 음소, 음절, 단어 등의 진동을 분석하여 수치화하는 것을 의미한다.
인간의 감정 상태를 판별하는 감정 분석 기술은, 판별된 감정 상태에 따라 각각 다른 신호를 발생시킴으로써, 인간과 기계가 마치 대화를 하는 것과 같은 인터페이스가 이루어지도록 하는 기술이다.
음성 인식에 기반을 둔 감정 분석의 일 형태로서 거짓말 탐지기를 들 수 있다. 이는 폴리그래프의 일종으로서, 폴리그래프란, 사람의 흥분, 긴장 또는 감정적인 갈등의 상태를 미리 정의해 놓은 기준에 의하여 감지하는 시스템을 의미한다.
일반적으로 사람이 거짓말을 할 때는, 정신적인 긴장으로 인하여 성대의 혈액량이 저하되고, 부득이한 신경 작용으로 인하여 성대에서 일그러진 음파가 나오게 된다. 따라서, 상기 거짓말 탐지기는, 상기에서 설명한 변화를 감지하여, 화자의 거짓말 여부를 판단할 수 있다. 최근에는 상대방의 음성을 인식하여 거짓임을 판독할 수 있는 거짓말 탐지 기능을 갖는 이동통신단말기 및 이를 이용한 방법에 관한 발명이 출원된 바 있다.
그러나, 상술한 종래 발명에 의하면, 사용자의 음성을 분석하여 사용자의 감정 상태를 판단할 수 없다.
또한, 상술한 종래 발명에 의하면, 기지국 서버로부터 사용자의 감정 상태를 고려한 컨텐츠 데이터를 제공받을 수 없다.
본 발명은 상기와 같은 문제점을 해결하기 위한 것으로서, 사용자의 통화 음성으로부터 사용자의 감정 상태를 판단할 수 있는 이동통신단말기 및 이를 이용한 방법을 제공하는데 그 목적이 있다.
또한, 본 발명은 상기와 같은 문제점을 해결하기 위한 것으로서, 사용자의 감정 상태를 인식함에 따라, 감정 인식에 의한 데이터 처리 기능을 갖는 이동통신단말기, 기지국 서버 및 이를 이용한 방법을 제공하는데 다른 목적이 있다.
또한, 본 발명은 상기와 같은 문제점을 해결하기 위한 것으로서, 사용자의 감정 상태에 따른 컨텐츠 데이터를 제공할 수 있는 기지국 서버를 제공하는데 또 다른 목적이 있다.
상기의 목적을 달성하기 위하여, 본 발명에 따른 감정 인식에 의한 데이터 처리 기능을 갖는 이동통신단말기는, 감정 상태에 따른 음성 특성을 저장하는 제 1 저장부와, 사용자의 통화 음성으로부터 음성 특성을 추출하는 음성 분석부와, 상기 저장된 음성 특성 중에서 상기 추출한 음성 특성과 일치하는 음성 특성이 존재하는지 여부를 판단하는 제어부와, 상기 제어부의 제어 신호에 따라 상기 추출한 음성 특성에 해당하는 감정 상태 데이터를 생성하는 데이터 생성부와, 상기 생성된 감정 상태 데이터를 기지국 서버에 송신하는 송신부 및 상기 기지국 서버로부터 상기 감정 상태 데이터에 따른 컨텐츠 데이터를 제공받는 수신부를 포함하여 이루어진다.
또한, 상기의 목적을 달성하기 위하여, 본 발명에 따른 감정 인식에 의한 데이터 처리 기능을 갖는 기지국 서버는, 감정 상태를 나타내는 데이터를 컨텐츠 데이터에 부가하는 데이터 생성부와, 상기 데이터 생성부로부터 입력받은 컨텐츠 데이터를 저장하는 컨텐츠 저장부와, 이동통신단말기로부터 감정 상태 데이터를 수신하는 수신부와, 상기 수신한 감정 상태 데이터에 따라 상기 컨텐츠 저장부로부터 컨텐츠 데이터를 선택하는 제어부 및 상기 선택된 컨텐츠 데이터를 상기 이동통신단말기로 송신하는 송신부를 포함하여 이루어진다.
또한, 상기의 목적을 달성하기 위하여, 본 발명에 따른 이동통신단말기를 이용한 감정 인식에 의한 데이터 처리 방법은, 사용자의 통화 음성으로부터 음성 특성을 추출하는 단계와, 이동통신단말기에 저장된 감정 상태에 따른 음성 특성 중에서 상기 추출한 음성 특성과 일치하는 음성 특성이 존재하는지 여부를 판단하는 단계와, 상기 판단 결과 존재한다고 판단되는 경우에 상기 음성 특성에 해당하는 감정 상태 데이터를 생성하는 단계와, 상기 생성된 감정 상태 데이터를 기지국 서버에 송신하는 단계 및 상기 기지국 서버로부터 상기 감정 상태 데이터에 따른 컨텐츠 데이터를 수신하는 단계를 포함하여 이루어진다.
상술한 목적, 특징들 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이다. 이하 첨부된 도면을 참조하여 본 발명에 따른 바람 직한 일 실시예를 상세히 설명한다.
도 1, 도 2 및 도 3을 참조하여, 본 발명에 따른 감정 인식에 의한 데이터 처리 기능을 갖는 이동통신단말기의 다양한 실시예를 설명하면 다음과 같다.
도 1, 도 2 및 도 3에서, 동일한 도면 부호를 갖는 구성 요소는, 본 발명에 에서 동일한 동작 및 기능을 수행한다.
제 1 저장부(110)는, 감정 상태에 따른 음성 특성을 저장한다.
예를 들어, 상기 제 1 저장부(110)는, 사람의 다양한 감정 상태 별로 적어도 하나 이상의 음성 특성을 저장할 수 있다. 상기 감정 상태는, 슬픔, 기쁨, 화남, 우울함, 즐거움, 놀람 등이 있을 수 있다. 그리고, 상기 음성 특성은, 상기 감정 상태 별로 특징이 될 수 있는 음성의 성질을 의미할 수 있다.
또한, 예를 들어, 상기 음성 특성은, 음성의 세기, 음성의 고저, 음성의 빠르기, 음성의 떨림 중에서 적어도 하나를 포함할 수 있다.
또한, 상기 음성 특성은 상기 음성의 주파수 특성을 포함할 수 있다. 상기 주파수 특성은, 상기 음성의 진동수, 음성의 세기 등을 의미할 수 있다. 따라서, 상기 감정 상태에 따른 음성 특성은, 감정 상태 별 음성 주파수의 범위일 수 있다.
또한, 예를 들어, 상기 제 1 저장부(110)는, 감정 상태 별로 디폴트 설정된 음성 특성을 저장할 뿐만 아니라 사용자의 통화 음성을 고려하여 수정된 감정 상태에 따른 음성 특성을 저장할 수 있다.
소리 입력부(120)는, 사용자의 통화 음성을 입력 받는다.
예를 들어, 상기 소리 입력부(120)는, 상기 이동통신단말기에 구비된 마이크 일 수 있다.
또한, 상기 소리 입력부(120)는, 상기 입력 받은 사용자의 통화 음성을 디지털 음성 신호로 변환하여, 음성 분석부(130)로 출력할 수 있다.
음성 분석부(130)는, 상기 소리 입력부(120)로부터 입력 받은 사용자의 통화 음성으로부터 음성 특성을 추출한다.
예를 들어, 상기 음성 분석부(130)는, 상기 사용자의 통화 음성으로부터, 음성의 고저, 음성의 빠르기, 음성의 세기, 음성의 떨림 등의 음성 특성을 추출할 수 있다. 또는, 상기 음성 분석부(130)는, 상기 사용자의 통화 음성으로부터, 상기 음성 주파수의 특성을 추출할 수 있다.
또한, 예를 들어, 상기 음성 분석부(130)는, 상기 제 1 저장부(110)에 저장된 감정 상태에 따른 음성 특성의 종류와 일치하는 음성 특성을 상기 사용자의 통화 음성으로부터 추출할 수 있다.
제어부(140)는, 상기 저장된 음성 특성 중에서, 상기 추출한 음성 특성과 일치하는 음성 특성이 존재하는지 여부를 판단한다.
예를 들어, 상기 저장된 음성 특성이 감정 상태에 따른 음성 주파수인 경우에, 상기 제 1 저장부(110)는, '화남'이라는 감정 상태에 따른 음성 주파수 '100Hz~200Hz'를 저장할 수 있다. 그리고, 상기 제어부(140)는, 상기 추출한 음성 특성이 '150Hz'인 경우에, 상기 저장된 음성 특성과 상기 추출한 음성 특성이 일치한다고 판단할 수 있다. 한편, 상기 제어부(140)는, 상기 추출한 음성 주파수가 상기 저장된 감정 상태에 따른 음성 주파수 범위 중에서 어디에도 속하지 않는 경우 에는, 상기 추출한 음성 특성과 일치하지 않는다고 판단할 수 있다.
데이터 생성부(150)는, 상기 제어부(140)의 제어 신호에 따라, 상기 추출한 음성 특성에 해당하는 감정 상태 데이터를 생성한다.
예를 들어, '화남'이라는 감정 상태에 따른 음성 주파수와 상기 추출한 음성 주파수가 일치한다고 판단한 제어부(140)의 제어 신호에 따라, 상기 추출한 음성 특성에 해당하는 '화남'이라는 감정 상태 데이터를 생성할 수 있다.
또한, 상기 추출한 음성 주파수가 일치하지 않는다고 판단한 경우라도, 사용자에 의해 입력된 감정 상태에 따라, 상기 감정 상태 데이터를 생성할 수 있다.
또한, 예를 들어, 상기 감정 상태 데이터는, 1byte의 데이터열을 형성할 수 있고, 상기 데이터열의 처음 1bit는 상기 데이터가 감정 상태를 나타내는 데이터라는 것을 표시하고, 다음 3bit는 기지국으로부터 제공받고자 하는 컨텐츠 데이터의 종류를 표시하고, 다음 4bit는 상기 음성 특성에 의해 판단한 사용자의 감정 상태를 표시할 수 있다. 또는, 상기 감정 상태 데이터는, 1byte 이상의 데이터일 수 있다.
송신부(160)는, 상기 생성된 감정 상태 데이터를 기지국 서버에 송신한다.
예를 들어, 상기 기지국 서버는, 상기 이동통신단말기에 다양한 컨텐츠를 제공하는 서버일 수 있다.
수신부(170)는, 상기 기지국 서버로부터 상기 감정 상태 데이터에 따른 컨텐츠 데이터를 제공받는다.
예를 들어, 상기 컨텐츠 데이터는, MP3 음원 데이터, 컬러링 음원 데이터, 벨소리 음원 데이터 중에서 적어도 하나를 포함할 수 있다. 또는, 상기 컨텐츠 데이터는, 상기 컨텐츠 데이터에 의해 유발되는 감정 상태를 나타내는 데이터를 포함할 수 있다. 또한, 상기 컨텐츠 데이터는, 사용자의 선택에 의해 감정 상태별로 설정된 컨텐츠 데이터일 수 있다. 즉, 상기 사용자는, 상기 기지국 서버에 저장된 컨텐츠 데이터를 감정 상태 별로 미리 설정해 두고, 상기 수신부(170)는, 상기 송신된 감정 상태 데이터에 따라, 상기 미리 설정된 감정 상태 별 컨텐츠 데이터 중에서 선택된 컨텐츠 데이터를 제공받을 수 있다.
음성특성 수정부(210)는, 상기 제어부(140)의 제어 신호에 따라, 상기 추출한 음성 특성을 고려하여 상기 저장된 음성 특성을 수정한다.
예를 들어, 상기 음성특성 수정부(210)는, 상기 저장된 음성 특성 중에서, 상기 추출한 음성 특성과 일치하는 음성 특성이 존재하지 않는다고 판단한 제어 신호에 따라, 상기 추출한 음성 특성을 고려하여 상기 저장된 음성 특성을 수정할 수 있다.
또한, 상기 저장된 음성 특성과 추출한 음성 특성이 일치하지 않는 경우에, 상기 이동통신단말기는, 상기 사용자에 의해 선택된 감정 상태를 입력받는다. 그리고, 상기 음성특성 수정부(210)는, 상기 입력받은 감정 상태 및 상기 감정 상태에 해당하는 음성 특성을 상기 제 1 저장부로부터 검색한다. 그리고, 상기 음성특성 수정부(210)는, 상기 추출한 음성 특성 및 검색한 감정 상태를 고려하여, 상기 검색한 감정 상태에 해당하는 음성 특성을 수정할 수 있다.
제 2 저장부(310)는, 상기 컨텐츠 데이터를 감정 상태에 따라 분류하여 저장 한다.
예를 들어, 상기 컨텐츠 데이터는, 표시창 배경 화면 데이터, 배경 화면 바탕 색 데이터, MP3 음원 데이터, 벨소리 음원 데이터, 컬러링 음원 데이터 중에서 적어도 하나를 포함할 수 있다. 또한, 상기 컨텐츠 데이터는, 상기 컨텐츠 데이터에 의해 유발되는 감정 상태를 나타내는 데이터를 포함할 수 있다.
데이터 제공부(320)는, 상기 생성된 감정 상태 데이터에 따라, 상기 제 2 저장부(310)에 저장된 컨텐츠 데이터 중에서 적어도 하나를 제공한다.
예를 들어, 상기 생성된 감정 상태 데이터가 '기쁨'을 나타내는 데이터인 경우에, 상기 데이터 제공부(320)는, 상기 제 2 저장부(310)에 저장된 컨텐츠 데이터 중에서 유발되는 감정 상태가 '기쁨'인 컨텐츠 데이터를 제공할 수 있다.
도 4를 참조하여, 본 발명에 따른 감정 인식에 의한 데이터 처리 기능을 갖는 기지국 서버의 일실시예를 설명하면 다음과 같다.
데이터 생성부(410)는, 감정 상태를 나타내는 데이터를 컨텐츠 데이터에 부가한다.
예를 들어, 상기 컨텐츠 데이터는, MP3 음원 데이터, 컬러링 음원 데이터, 벨소리 음원 데이터 중에서 적어도 하나를 포함할 수 있다. 또한, 상기 컨텐츠 데이터는, 상기 컨텐츠 데이터에 의해 유발되는 감정 상태를 나타내는 데이터를 포함할 수 있다.
또한, 상기 감정 상태를 나타내는 데이터는, 사용자의 선택에 의해 부가될 수 있다. 상기 데이터 생성부(410)는, 상기 사용자에 의해 '슬픔'이라는 감정 상태 가 설정된 컨텐츠 데이터에 '슬픔'을 나타내는 감정 상태 데이터를 부가할 수 있다.
컨텐츠 저장부(420)는, 상기 데이터 생성부(410)로부터 입력받은 컨텐츠 데이터를 저장한다.
예를 들어, 상기 컨텐츠 저장부(420)는, 상기 컨텐츠 데이터를 감정 상태 별로 분류하여 저장할 수 있다.
수신부(440)는, 상기 이동통신단말기로부터 감정 상태 데이터를 수신한다.
제어부(430)는, 상기 수신한 감정 상태 데이터에 따라, 상기 컨텐츠 저장부(420)로부터 컨텐츠 데이터를 선택한다.
예를 들어, 상기 수신한 감정 상태 데이터가 '화남'을 나타내는 감정 상태 데이터인 경우에, 상기 제어부(430)는, '화남'이라는 감정 상태를 나타내는 컨텐츠 데이터를 선택할 수 있다.
송신부(450)는, 상기 선택된 컨텐츠 데이터를 상기 이동통신단말기로 송신한다.
도 5를 참조하여, 본 발명에 따른 이동통신단말기를 이용한 감정 인식에 의한 데이터 처리 방법의 제 1 실시예를 설명하면 다음과 같다.
사용자의 통화 음성으로부터 음성 특성을 추출한다(S510).
예를 들어, 상기 사용자의 통화 음성은, 상기 이동통신단말기에 구비된 마이크를 통하여 입력될 수 있다. 또한, 상기 사용자의 통화 음성은, 디지털 음성 신호로 변환될 수 있다.
또한, 예를 들어, 상기 추출 단계는, 상기 사용자의 통화 음성으로부터, 음성의 고저, 음성의 빠르기, 음성의 세기, 음성의 떨림 등의 음성 특성을 추출할 수 있다. 또는, 상기 추출 단계는, 상기 사용자의 통화 음성으로부터, 상기 통화 음성 의 주파수 특성을 추출할 수 있다.
또한, 예를 들어, 상기 추출 단계는, 상기 이동통신단말기에 저장된 감정 상태에 따른 음성 특성의 종류와 일치하는 음성 특성을 상기 사용자의 통화 음성으로부터 추출할 수 있다.
상기 이동통신단말기에 저장된 감정 상태에 따른 음성 특성 중에서, 상기 추출한 음성 특성과 일치하는 음성 특성이 존재하는지 여부를 판단한다(S520).
예를 들어, 상기 이동통신단말기는, 감정 상태에 따른 음성 특성을 저장한다. 또한, 상기 이동통신단말기는, 사람의 다양한 감정 상태별로 적어도 하나 이상의 음성 특성을 저장할 수 있다. 상기 감정 상태는, 슬픔, 기쁨, 화남, 우울함, 즐거움, 놀람 등이 있을 수 있다. 그리고, 상기 음성 특성은, 상기 감정 상태 별로 특징이 될 수 있는 음성의 성질을 의미할 수 있다. 또한, 상기 통화 음성의 주파수 특성이 상기 음성 특성인 경우에, 상기 감정 상태에 따른 음성 특성은, 감정 상태 별 음성의 주파수 범위일 수 있다.
또한, 예를 들어, 상기 이동통신단말기는, 상기 저장된 음성 특성이 감정 상태에 따른 음성 주파수인 경우에, '화남'이라는 감정 상태에 따른 음성 주파수 '100Hz~200Hz'를 저장할 수 있다. 상기 판단 단계는, 상기 추출한 음성 특성이 '150Hz'인 경우에, 상기 저장된 음성 특성과 상기 추출한 음성 특성이 일치한다고 판단할 수 있다. 한편, 상기 판단 단계는, 상기 추출한 음성 주파수가 상기 저장된 감정 상태에 따른 음성 주파수 범위의 어디에도 속하지 않는 경우에는, 상기 추출한 음성 특성과 일치하지 않는다고 판단할 수 있다.
상기 판단 결과 존재하지 않는다고 판단되는 경우에, 사용자의 선택에 의한 감정 상태를 입력받는다(S530).
상기 판단 결과 존재한다고 판단되는 경우에, 상기 음성 특성에 해당하는 감정 상태 데이터를 생성하거나, 상기 판단 결과 존재하지 않는다고 판단되는 경우에는, 사용자에 의해 입력된 감정 상태에 따라 감정 상태 데이터를 생성한다(S540).
예를 들어, 상기 생성 단계는, 1byte의 상기 감정 상태 데이터를 생성할 수 있고, 상기 데이터열의 처음 1bit는 상기 데이터가 감정 상태를 나타내는 데이터라는 것을 표시하고, 다음 3bit는 기지국으로부터 제공받고자 하는 컨텐츠 데이터의 종류를 표시하고, 다음 4bit는 상기 음성 특성에 의해 판단한 사용자의 감정 상태를 표시하도록 할 수 있다. 또는, 상기 생성 단계는, 1byte 이상의 감정 상태 데이터를 생성할 수 있다.
상기 생성된 감정 상태 데이터를 저장한다(S550).
상기 생성된 감정 상태 데이터를 기지국 서버에 송신한다(560).
예를 들어, 상기 기지국 서버는, 상기 이동통신단말기에 다양한 컨텐츠 데이터를 제공하는 서버일 수 있다.
상기 기지국 서버로부터 상기 송신한 감정 상태 데이터에 따른 컨텐츠 데이터를 수신한다(S570).
예를 들어, 상기 수신 단계는, MP3 음원 데이터, 컬러링 음원 데이터, 벨소리 음원 데이터 중에서 적어도 하나를 포함하는 컨텐츠 데이터를 수신할 수 있다. 또한, 상기 컨텐츠 데이터는, 상기 컨텐츠 데이터에 의해 유발되는 감정 상태를 나타내는 데이터를 포함할 수 있다. 또한, 상기 컨텐츠 데이터가 사용자에 의해 감정 상태가 설정된 컨텐츠 데이터인 경우에, 상기 수신 단계는, 상기 송신된 감정 상태 데이터에 따라, 상기 미리 설정된 감정 상태별 컨텐츠 데이터 중에서 선택된 컨텐츠 데이터를 수신할 수 있다.
상기 저장된 감정 상태 데이터에 따라, 상기 이동통신단말기에 저장된 컨텐츠 데이터 중에서 적어도 하나를 제공하는 단계를 더 포함할 수 있다.
예를 들어, 상기 제공 단계는, 표시창 배경 화면 데이터, 배경 화면 바탕 색 데이터, MP3 음원 데이터, 벨소리 음원 데이터, 컬러링 음원 데이터 중에서 적어도 하나를 포함하는 컨텐츠 데이터를 제공할 수 있다. 또한, 상기 컨텐츠 데이터는, 상기 컨텐츠 데이터에 의해 유발되는 감정 상태를 나타내는 데이터를 포함할 수 있다.
또한, 예를 들어, 상기 제공 단계는, 상기 생성된 감정 상태 데이터가 '기쁨'을 나타내는 데이터인 경우에, 상기 저장된 컨텐츠 데이터 중에서 유발되는 감정 상태가 '기쁨'인 컨텐츠 데이터를 제공할 수 있다.
도 6을 참조하여, 본 발명에 따른 이동통신단말기를 이용한 감정 인식에 의한 데이터 처리 방법의 제 2 실시예를 설명하면 다음과 같다.
사용자의 통화 음성으로부터 음성 특성을 추출한다(S610).
상기 이동통신단말기에 저장된 감정 상태에 따른 음성 특성 중에서, 상기 추출한 음성 특성과 일치하는 음성 특성이 존재하는지 여부를 판단한다(S620).
상기 판단 결과 존재하지 않는다고 판단되는 경우에, 사용자의 선택에 의한 감정 상태를 입력받는다(S630).
상기 추출한 음성 특성과 상기 입력된 감정 상태를 고려하여, 상기 저장된 감정 상태에 따른 음성 특성을 수정한다(S640)
예를 들어, 상기 수정 단계는, 상기 입력받은 감정 상태 및 상기 감정 상태에 해당하는 음성 특성을 상기 이동통신단말기로부터 검색하고, 상기 추출한 음성 특성을 고려하여 상기 검색한 감정 상태에 해당하는 음성 특성을 수정할 수 있다.
상기 수정된 감정 상태에 따른 음성 특성을 저장한다(S650).
이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.
상기에서 설명한 본 발명에 의하면, 사용자의 통화 음성을 분석함으로써, 사용자의 감정 상태를 인식할 수 있다.
또한, 사용자의 감정 상태를 나타내는 감정 상태 데이터를 기지국 서버로 송신함에 따라, 상기 기지국 서버로부터 사용자의 감정 상태에 따른 컨텐츠 데이터를 제공받을 수 있다.
또한, 사용자의 감정 상태에 따라, 상기 이동통신단말기에 저장된 다양한 컨텐츠 데이터를 제공받을 수 있다.

Claims (16)

  1. 감정 상태에 따른 음성 특성을 저장하는 제 1 저장부;
    사용자의 통화 음성으로부터 음성 특성을 추출하는 음성 분석부;
    상기 저장된 음성 특성 중에서, 상기 추출된 음성 특성과 일치하는 음성 특성이 존재하는지 여부를 판단하는 제어부;
    상기 제어부의 판단 결과, 상기 저장된 음성 특성 중에서 상기 추출된 음성 특성과 일치하는 음성 특성이 존재하면, 상기 추출된 음성 특성에 해당하는 감정 상태 데이터를 생성하는 데이터 생성부;
    상기 제어부의 판단 결과, 상기 저장된 음성 특성 중에서 상기 추출된 음성 특성과 일치하는 음성 특성이 존재하지 않으면, 사용자의 선택에 의한 감정 상태를 입력받고, 상기 추출된 음성 특성과 상기 입력된 감정 상태를 고려하여, 상기 저장된 감정 상태에 따른 음성 특성을 수정하는 음성특성 수정부;
    상기 데이터 생성부에 의해 생성된 감정 상태 데이터를 기지국 서버에 송신하는 송신부; 및
    상기 기지국 서버로부터 상기 송신한 감정 상태 데이터에 따른 컨텐츠 데이터를 제공받는 수신부;를 포함하여 이루어지는 감정 인식에 의한 데이터 처리 기능을 갖는 이동통신단말기.
  2. 제 1 항에 있어서, 상기 음성 특성은,
    음성의 세기, 음성의 고저, 음성의 빠르기, 음성의 떨림 중에서 적어도 하나를 포함하는 것을 특징으로 하는 감정 인식에 의한 데이터 처리 기능을 갖는 이동통신단말기.
  3. 제 1 항에 있어서, 상기 음성 특성은,
    상기 음성의 주파수 특성을 포함하는 것을 특징으로 하는 감정 인식에 의한 데이터 처리 기능을 갖는 이동통신단말기.
  4. 제 1 항에 있어서, 상기 컨텐츠 데이터는,
    MP3 음원 데이터, 컬러링 음원 데이터, 벨소리 음원 데이터 중에서 적어도 하나를 포함하는 것을 특징으로 하는 감정 인식에 의한 데이터 처리 기능을 갖는 이동통신단말기.
  5. 제 1 항에 있어서, 상기 컨텐츠 데이터는,
    상기 컨텐츠 데이터에 의해 유발되는 감정 상태를 나타내는 데이터를 포함하는 것을 특징으로 하는 감정 인식에 의한 데이터 처리 기능을 갖는 이동통신단말기.
  6. 삭제
  7. 제 1 항에 있어서,
    컨텐츠 데이터를 감정 상태에 따라 분류하여 저장하는 제 2 저장부를 더 포함하는 것을 특징으로 하는 감정 인식에 의한 데이터 처리 기능을 갖는 이동통신단 말기.
  8. 제 7 항에 있어서, 상기 컨텐츠 데이터는,
    표시창 배경 화면 데이터, 배경 화면 바탕 색 데이터, MP3 음원 데이터, 벨소리 음원 데이터, 컬러링 음원 데이터 중에서 적어도 하나를 포함하는 것을 특징으로 하는 감정 인식에 의한 데이터 처리 기능을 갖는 이동통신단말기.
  9. 제 7 항에 있어서,
    상기 생성된 감정 상태 데이터에 따라, 상기 제 2 저장부에 저장된 컨텐츠 데이터 중에서 적어도 하나를 제공하는 데이터 제공부를 더 포함하는 것을 특징으로 하는 감정 인식에 의한 데이터 처리 기능을 갖는 이동통신단말기.
  10. 삭제
  11. 삭제
  12. 사용자의 통화 음성으로부터 음성 특성을 추출하는 단계;
    이동통신단말기에 저장된 감정 상태에 따른 음성 특성 중에서, 상기 추출된 음성 특성과 일치하는 음성 특성이 존재하는지 여부를 판단하는 단계;
    상기 판단 결과 존재하면, 상기 음성 특성에 해당하는 감정 상태 데이터를 생성하는 단계;
    상기 생성된 감정 상태 데이터를 기지국 서버에 송신하는 단계;
    상기 기지국 서버로부터 상기 감정 상태 데이터에 따른 컨텐츠 데이터를 수신하는 단계;
    상기 판단 결과 존재하지 않으면, 사용자의 선택에 의한 감정 상태를 입력받는 단계; 및
    상기 추출된 음성 특성과 상기 입력된 감정 상태를 고려하여, 상기 저장된 감정 상태에 따른 음성 특성을 수정하는 단계;를 포함하여 이루어지는 이동통신단말기를 이용한 감정 인식에 의한 데이터 처리 방법.
  13. 제 12 항에 있어서,
    상기 판단 결과 존재하지 않는다고 판단되는 경우에, 사용자의 선택에 의한 감정 상태를 입력받는 단계; 및
    상기 입력된 감정 상태를 기준으로, 상기 감정 상태 데이터를 생성하는 단계 를 더 포함하는 것을 특징으로 하는 이동통신단말기를 이용한 감정 인식에 의한 데이터 처리 방법.
  14. 삭제
  15. 제 12 항에 있어서,
    상기 생성된 감정 상태 데이터를 저장하는 단계; 및
    상기 저장된 감정 상태 데이터에 따라, 상기 이동통신단말기에 저장된 컨텐츠 데이터 중에서 적어도 하나를 제공하는 단계를 더 포함하는 것을 특징으로 하는 이동통신단말기를 이용한 감정 인식에 의한 데이터 처리 방법.
  16. 제 15 항에 있어서, 상기 제공 단계는,
    표시창 배경 화면 데이터, 배경 화면 바탕 색 데이터, MP3 음원 데이터, 벨소리 음원 데이터, 컬러링 음원 데이터 중에서 적어도 하나를 제공하는 것을 특징 으로 하는 이동통신단말기를 이용한 감정 인식에 의한 데이터 처리 방법.
KR1020050084824A 2005-09-12 2005-09-12 감정 인식에 의한 데이터 처리 기능을 갖는이동통신단말기, 기지국 서버 및 이를 이용한 방법 KR101171310B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020050084824A KR101171310B1 (ko) 2005-09-12 2005-09-12 감정 인식에 의한 데이터 처리 기능을 갖는이동통신단말기, 기지국 서버 및 이를 이용한 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050084824A KR101171310B1 (ko) 2005-09-12 2005-09-12 감정 인식에 의한 데이터 처리 기능을 갖는이동통신단말기, 기지국 서버 및 이를 이용한 방법

Publications (2)

Publication Number Publication Date
KR20070030061A KR20070030061A (ko) 2007-03-15
KR101171310B1 true KR101171310B1 (ko) 2012-08-07

Family

ID=38101951

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050084824A KR101171310B1 (ko) 2005-09-12 2005-09-12 감정 인식에 의한 데이터 처리 기능을 갖는이동통신단말기, 기지국 서버 및 이를 이용한 방법

Country Status (1)

Country Link
KR (1) KR101171310B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105096943A (zh) * 2014-04-24 2015-11-25 杭州华为企业通信技术有限公司 信号处理的方法与装置

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100792990B1 (ko) * 2006-08-25 2008-01-08 (주) 엘지텔레콤 이동통신망에서의 통화중 감정분석 서비스장치 및 방법
KR100877476B1 (ko) * 2007-06-26 2009-01-07 주식회사 케이티 전화망을 이용한 지능형 로봇 서비스 장치 및 그 방법
KR101020843B1 (ko) * 2008-01-30 2011-03-09 단국대학교 산학협력단 소비자 감성에 따른 콘텐츠 및/또는 채널 추천 방법 및 그시스템
JP2020529680A (ja) * 2017-08-08 2020-10-08 Ｌｉｎｅ株式会社 通話中の感情を認識し、認識された感情を活用する方法およびシステム
CN108766467B (zh) * 2018-05-31 2021-04-23 广州粤创富科技有限公司 一种宠物情绪识别的方法和终端

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010109826A (ko) * 2000-06-02 2001-12-12 김연환 이동 통신 단말기 사용자의 감성 상태에 따른 메시지 전송장치 및 방법
KR20040014089A (ko) * 2002-08-09 2004-02-14 이성진 모바일을 이용한 벨소리음악선곡 시스템 및 그 방법
KR20040052973A (ko) * 2004-05-19 2004-06-23 최철 감성전화기
KR20040103844A (ko) * 2004-11-08 2004-12-09 한밭대학교 산학협력단 노인의 감성을 아바타로 표시하는 무선 이동 단말기 및 그 무선 이동 단말기를 이용한 서비스 방법
KR20050027361A (ko) * 2003-09-15 2005-03-21 주식회사 팬택앤큐리텔 통화자 심리 상태 모니터링 기능을 가지는 통신 단말기 및 그 운용 방법
KR20050040291A (ko) * 2003-10-28 2005-05-03 주식회사 팬택 이동 통신 단말기의 사용자 감정 상태 알림 장치 및 방법

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010109826A (ko) * 2000-06-02 2001-12-12 김연환 이동 통신 단말기 사용자의 감성 상태에 따른 메시지 전송장치 및 방법
KR20040014089A (ko) * 2002-08-09 2004-02-14 이성진 모바일을 이용한 벨소리음악선곡 시스템 및 그 방법
KR20050027361A (ko) * 2003-09-15 2005-03-21 주식회사 팬택앤큐리텔 통화자 심리 상태 모니터링 기능을 가지는 통신 단말기 및 그 운용 방법
KR20050040291A (ko) * 2003-10-28 2005-05-03 주식회사 팬택 이동 통신 단말기의 사용자 감정 상태 알림 장치 및 방법
KR20040052973A (ko) * 2004-05-19 2004-06-23 최철 감성전화기
KR20040103844A (ko) * 2004-11-08 2004-12-09 한밭대학교 산학협력단 노인의 감성을 아바타로 표시하는 무선 이동 단말기 및 그 무선 이동 단말기를 이용한 서비스 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105096943A (zh) * 2014-04-24 2015-11-25 杭州华为企业通信技术有限公司 信号处理的方法与装置
CN105096943B (zh) * 2014-04-24 2019-04-19 杭州华为企业通信技术有限公司 信号处理的方法与装置

Also Published As

Publication number Publication date
KR20070030061A (ko) 2007-03-15

Similar Documents

Publication Publication Date Title
US7974392B2 (en) System and method for personalized text-to-voice synthesis
KR101171310B1 (ko) 감정 인식에 의한 데이터 처리 기능을 갖는이동통신단말기, 기지국 서버 및 이를 이용한 방법
US20160006849A1 (en) Bluetooth headset and voice interaction control thereof
KR20140105673A (ko) 번역 기반 통신 서비스 지원 방법 및 시스템과, 이를 지원하는 단말기
JP2004349851A (ja) 携帯端末、画像通信プログラム、及び画像通信方法
JP3806030B2 (ja) 情報処理装置及び方法
CN113438640B (zh) 设备配对连接方法、装置、***及存储介质
KR20190029237A (ko) 통역장치 및 그 방법
EP1804237A1 (en) System and method for personalized text to voice synthesis
CN110225195B (zh) 一种语音通话方法及终端
JP2008085421A (ja) テレビ電話機、通話方法、プログラム、声質変換・画像編集サービス提供システム、および、サーバ
TW201903755A (zh) 可調整輸出聲音之電子裝置及調整輸出聲音之方法
KR20090097292A (ko) 사용자 영상을 이용한 음성인식 시스템 및 방법
KR101517975B1 (ko) 동시 통/번역 기능을 가지는 이어폰 장치
KR20100081022A (ko) 전화번호부 업데이트 방법 및 이를 이용한 휴대 단말기
US9286913B2 (en) Atmosphere expression word selection system, atmosphere expression word selection method, and program
JP2000349865A (ja) 音声通信装置
KR20070005413A (ko) 모스 신호 분석 및 변환 기능을 갖는 이동통신단말기 및방법
WO2020118560A1 (zh) 一种录音方法、装置、电子设备和计算机可读存储介质
JP2002207671A (ja) 携帯電話機及び電子メール文章送信／再生方法
JP2008040431A (ja) 音声加工装置
KR102000282B1 (ko) 청각 기능 보조용 대화 지원 장치
KR20110050483A (ko) 통신 방법, 통신 관련 시스템 및 관련 변환부
KR20050093543A (ko) 음성/텍스트 변환의 텍스트 표현 방법
CN113573143B (zh) 音频播放方法和电子设备

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150624

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160628

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20170623

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20190624

Year of fee payment: 8