KR101710695B1 - 차량용 음성 인식을 위한 마이크로폰 제어 시스템 및 그 제어 방법 - Google Patents
차량용 음성 인식을 위한 마이크로폰 제어 시스템 및 그 제어 방법 Download PDFInfo
- Publication number
- KR101710695B1 KR101710695B1 KR1020150132085A KR20150132085A KR101710695B1 KR 101710695 B1 KR101710695 B1 KR 101710695B1 KR 1020150132085 A KR1020150132085 A KR 1020150132085A KR 20150132085 A KR20150132085 A KR 20150132085A KR 101710695 B1 KR101710695 B1 KR 101710695B1
- Authority
- KR
- South Korea
- Prior art keywords
- microphone
- noise
- delete delete
- vehicle
- subject
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
- B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
- B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
- B60R16/0373—Voice control
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/40—Bus networks
- H04L2012/40208—Bus networks characterized by the use of a particular bus standard
- H04L2012/40215—Controller Area Network CAN
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/40—Bus networks
- H04L2012/40267—Bus for use in transportation systems
- H04L2012/40273—Bus for use in transportation systems the transportation system being a vehicle
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Mechanical Engineering (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
차량용 음성 인식을 위한 마이크로폰 제어 시스템은, 음성 인식용 소리를 입력받는 제 1 마이크로폰; 잡음 측정을 위한 제 2 마이크로폰; 및 상기 제 1 마이크로폰 또는 상기 제 2 마이크로폰의 동작을 제어하는 제어부;를 포함하되, 상기 제어부는, CAN(Controller Area Network) 통신에 의한 차량의 상태 정보 및 상기 제 2 마이크로폰으로부터 입력된 잡음 정보를 이용하여, 상기 제 1 마이크로폰의 동작을 제어한다.
Description
본 발명은 차량용 음성 인식을 위한 마이크로폰 제어 시스템 및 그 제어 방법에 관한 것으로, 더욱 상세하게는 CAN(Controller Area Network) 통신에 의한 차량의 상태 정보 및 잡음용 마이크로폰으로 입력되는 잡음 정보를 이용하여 음성 인식용 마이크로폰의 증폭 이득 및 지향 방향을 제어하는 것에 의해 더욱 효율적인 음성 인식을 가능하게 하는 차량용 음성 인식을 위한 마이크로폰 제어 시스템 및 그 제어 방법에 관한 것이다.
음성 인식은 마이크로폰 등의 입력 도구를 통해 시스템으로 전달된 사람의 음성 신호로부터 특징의 추출과 분석의 과정을 수행한 후, 미리 입력된 인식 데이터베이스에서 가장 근접한 결과를 찾아내는 기술이다.
이러한 음성 인식 기술은 다양한 분야에 적용되어, 사용자의 편의를 제공하고 있다. 다만, 차량의 경우, 잡음의 영향도 크고, 차량의 운전에 따른 이동과 같은 환경적 요인도 커서 음성 인식에 있어 어려움이 있다.
국내공개특허공보 제10-2010-0029591호(다중 마이크를 이용한 차량 내 음성인식 시스템, 2010년 3월 17일)에는 음성인식률을 향상시킬 수 있는 다중 마이크를 이용한 차량 내 음성인식 시스템이 개시되어 있다. 그런데 국내공개특허공보 제10-2010-0029591호에는 다중 마이크로부터 검출된 소음 등을 어떻게 음성 인식에 활용할 것인가에 대해서는 구체적으로 개시되어 있지 않다.
본 발명은 전술한 바와 같은 기술적 과제를 해결하는 데 목적이 있는 발명으로서, CAN(Controller Area Network) 통신에 의한 차량의 상태 정보 및 잡음용 마이크로폰으로 입력되는 잡음 정보를 이용하여 음성 인식용 마이크로폰의 증폭 이득 및 지향 방향을 제어하는 것에 의해 더욱 효율적인 음성 인식을 가능하게 하는 차량용 음성 인식을 위한 마이크로폰 제어 시스템 및 그 제어 방법을 제공하는 것에 그 목적이 있다.
본 발명의 차량용 음성 인식을 위한 마이크로폰 제어 시스템은, 음성 인식용 소리를 입력받는 제 1 마이크로폰; 잡음 측정을 위한 제 2 마이크로폰; 및 상기 제 1 마이크로폰 또는 상기 제 2 마이크로폰의 동작을 제어하는 제어부;를 포함한다.
상기 제어부는, CAN(Controller Area Network) 통신에 의한 차량의 상태 정보 및 상기 제 2 마이크로폰으로부터 입력된 잡음 정보를 이용하여, 상기 제 1 마이크로폰의 동작을 제어하는 것을 특징으로 한다. 즉, 상기 제어부는, CAN 통신에 의한 차량의 상태 정보를 이용하여, 상기 제 1 마이크로폰의 증폭 이득을 제어하는 것이 바람직하다.
아울러, 상기 제 2 마이크로폰으로부터 입력된 잡음 정보를 이용하여 상기 제 1 마이크로폰의 지향 방향을 제어하는 것을 특징으로 한다. 또한, 상기 제어부는, 상기 제 2 마이크로폰으로부터 입력된 잡음 정보를 이용하여 상기 제 1 마이크로폰의 지향 방향을 제어한 후, 상기 제 1 마이크로폰의 증폭 이득을 제어하는 것을 특징으로 한다.
본 발명의 차량용 음성 인식을 위한 마이크로폰 제어 시스템은, 카메라를 이용하여 획득된 음성 인식 대상자의 얼굴 영상을 이용하여 해당 대상자가 말을 하고 있는지를 판단하는 영상 판단부;를 더 포함하는 것이 바람직하다. 또한, 상기 제어부는, 상기 영상 판단부가 해당 대상자가 말을 하고 있지 않은 것으로 판단한 경우, 음성 인식이 수행되지 않도록 제어 신호를 생성한다.
아울러, 상기 영상 판단부는, 해당 대상자의 얼굴 방향도 판단할 수 있다. 이때 상기 제어부는, 상기 영상 판단부의 판단 결과에 따른 얼굴 방향에 따라, 상기 제 1 마이크로폰의 지향 방향을 제어하는 것을 특징으로 한다.
본 발명의 차량용 음성 인식을 위한 마이크로폰 제어 방법은, (a) CAN(Controller Area Network) 통신에 의한 차량의 상태 정보를 입력받는 단계; 및 (b) 상기 (a) 단계의 차량의 상태 정보를 이용하여, 제 1 마이크로폰의 동작을 제어하는 단계;를 포함한다. 상기 (b) 단계는, CAN 통신에 의한 차량의 상태 정보를 이용하여, 상기 제 1 마이크로폰의 증폭 이득을 제어하는 것을 특징으로 한다.
아울러, 본 발명의 차량용 음성 인식을 위한 마이크로폰 제어 방법은, (c) 제 2 마이크로폰으로부터 잡음 정보를 입력받는 단계; 및 (d) 상기 (c) 단계의 차량의 상태 정보를 이용하여, 제 1 마이크로폰의 동작을 제어하는 단계;를 더 포함하는 것이 바람직하다.
바람직하게는 상기 (d) 단계는, (d-1) 상기 제 2 마이크로폰으로부터 입력된 잡음 정보를 이용하여, 상기 제 1 마이크로폰의 지향 방향을 제어하는 단계; 및 (d-2) 상기 (d-1) 단계의 완료 후, 상기 제 1 마이크로폰의 증폭 이득을 제어하는 단계;를 포함하는 것을 특징으로 한다.
또한, 본 발명의 차량용 음성 인식을 위한 마이크로폰 제어 방법은, (e) 카메라를 이용하여 획득된 음성 인식 대상자의 얼굴 영상을 이용하여 해당 대상자가 말을 하고 있는지를 판단하는 단계; (f) 상기 (e) 단계에서 해당 대상자가 말을 하고 있지 않은 것으로 판단한 경우, 음성 인식이 수행되지 않도록 제어 신호를 생성하는 단계; (g) 카메라를 이용하여 획득된 음성 인식 대상자의 얼굴 영상을 이용하여 해당 대상자의 얼굴 방향을 판단하는 단계; 및 (h) 상기 (g) 단계의 판단 결과에 따른 얼굴 방향에 따라, 상기 제 1 마이크로폰의 지향 방향을 제어하는 단계;를 더 포함하는 것을 특징으로 한다.
본 발명의 차량용 음성 인식을 위한 마이크로폰 제어 시스템 및 그 제어 방법에 따르면, CAN(Controller Area Network) 통신에 의한 차량의 상태 정보 및 잡음용 마이크로폰으로 입력되는 잡음 정보를 이용하여 음성 인식용 마이크로폰의 증폭 이득 및 지향 방향을 제어하는 것에 의해 더욱 효율적인 음성 인식을 가능하다.
도 1은 본 발명의 바람직한 일실시예에 따른 차량용 음성 인식을 위한 마이크로폰 제어 시스템의 구성도.
도 2는 본 발명의 바람직한 일실시예에 따른 차량용 음성 인식을 위한 마이크로폰 제어 방법의 흐름도.
도 2는 본 발명의 바람직한 일실시예에 따른 차량용 음성 인식을 위한 마이크로폰 제어 방법의 흐름도.
이하, 첨부된 도면을 참조하면서 본 발명의 실시예에 따른 차량용 음성 인식을 위한 마이크로폰 제어 시스템 및 그 제어 방법에 대해 상세히 설명하기로 한다.
본 발명의 하기의 실시예는 본 발명을 구체화하기 위한 것일 뿐 본 발명의 권리 범위를 제한하거나 한정하는 것이 아님은 물론이다. 본 발명의 상세한 설명 및 실시예로부터 본 발명이 속하는 기술 분야의 전문가가 용이하게 유추할 수 있는 것은 본 발명의 권리 범위에 속하는 것으로 해석된다.
먼저, 도 1은 본 발명의 바람직한 일실시예에 따른 차량용 음성 인식을 위한 마이크로폰 제어 시스템(100)의 구성도를 나타낸다.
도 1로부터 알 수 있는 바와 같이 본 발명의 바람직한 일실시예에 따른 차량용 음성 인식을 위한 마이크로폰 제어 시스템(100)은, 제 1 마이크로폰(110), 제 2 마이크로폰(120), 영상 판단부(130) 및 제어부(140)를 포함한다.
제 1 마이크로폰(110)은 음성 인식용 소리를 입력받기 위한 마이크로폰이다. 아울러, 제 2 마이크로폰(120)은 차량 내의 잡음을 입력받는 잡음 측정을 위한 마이크로폰이다.
영상 판단부(130)는 카메라를 이용하여 획득된 음성 인식 대상자의 얼굴 영상을 이용하여 해당 대상자가 말을 하고 있는지를 판단하는 역할을 한다. 제어부(140)는 제 1 마이크로폰(110) 및 제 2 마이크로폰(120)의 동작을 제어하는 역할을 한다.
제 1 마이크로폰(110) 및 제 2 마이크로폰(120)의 위치는 운전석과 보조석 바로 위에 위치하는 것이 바람직할 것이다. 아울러, 본 발명의 바람직한 일실시예에 따른 차량용 음성 인식을 위한 마이크로폰 제어 시스템(100)은 얼굴 인식과 음성 인식 시스템을 제어하는 통합 시스템으로 구성될 수 있다. 얼굴 인식과 음성 인식 모듈은 제어부(140)와 CAN 통신으로 연결되어 있다.
본 발명의 제어부(140)는, 크게 3가지 정보에 의해 제 1 마이크로폰(110) 또는 제 2 마이크로폰(120)의 동작을 제어한다.
제 1 정보는 CAN(Controller Area Network) 통신에 의한 차량의 상태 정보이고, 제 2 정보는 제 2 마이크로폰(120)으로부터 입력된 잡음 정보이고, 제 3 정보는 영상 판단부(130)에 의해 판단된 음성 인식 대상자의 얼굴 영상 정보이다.
하기에 본 발명의 제어부(140)에 의한 3가지 정보를 이용한 제어 방법에 대해 구체적으로 설명하기로 한다.
제어부(140)는, CAN 통신에 의한 차량의 상태 정보를 이용하여, 제 1 마이크로폰(110)의 증폭 이득을 제어한다. 아울러, 제어부(140)는, 제 2 마이크로폰(120)으로부터 입력된 잡음 정보를 이용하여, 제 1 마이크로폰(110)의 지향 방향을 제어하는 것이 바람직하다. 또한, 제어부(140)는, 제 2 마이크로폰(120)으로부터 입력된 잡음 정보를 이용하여, 제 1 마이크로폰(110)의 지향 방향을 제어한 후, 제 1 마이크로폰(110)의 증폭 이득을 제어하는 것을 특징으로 한다.
예를 들어 설명하자면, 차량이 고속 주행하고 있는 경우 클러스터로부터 현재 차량의 속도를 CAN 통신에 의해 제어부(140)로 전송한다. 차량의 속도 데이터에 의해 제어부(140)는 제 1 마이크로폰(110)으로 입력되는 소리의 증폭 이득을 제어한다. 차량의 속도가 빠르면 빠를수록 차량의 잡음은 커질 것이고 그에 따라 제 1 마이크로폰(110)으로 입력되는 소리의 증폭 이득을 높일 필요가 있을 것이다.
그리고 차량 주행 중에 창문을 열었을 때도 마찬가지이다. 창문을 열었을 때 안으로 들어오는 바람은 음성 인식 동작에 치명적이다. 그래서 창문을 연 정도와 차량의 속도를 연관해서 제어부(140)로 데이터를 전송하고, 제어부(140)는 차량의 속도가 점점 높아지고 창문을 연 정도와 관련하여 1차적으로 제 1 마이크로폰(110)으로 들어오는 소리의 증폭 이득을 제어한다. 다만, 이 경우, 제 2 마이크로폰(120)으로 입력되는 잡음 레벨이 증가할 것이므로, 소리의 증폭 이득만 가지고 음성 인식을 정상적으로 동작시킬 수 없을 가능성이 있어, 제 1 마이크로폰(110)의 위치를 최대한 바람에 영향을 받지 않도록 움직이게 제어할 수 있다. 즉, 제 1 마이크로폰(110)이 지향하는 방향을 2차적으로 제어한다. 또한, 변경된 제 1 마이크로폰(110)의 방향에서, 3차적으로 다시 제 1 마이크로폰(110)의 증폭 이득을 제어하게 된다.
차량의 오디오 동작의 경우, 역시 음성 인식에 치명적이라고 할 수 있다. 보통 요즘 차량은 오디오가 나오는 도중에 음성 인식 버튼을 누르면 오디오가 종료가 되고 음성 인식이 시작된다. 그러나, 본 발명의 차량용 음성 인식을 위한 마이크로폰 제어 시스템(100)의 제어부(140)는, 오디오의 볼륨 정보를 CAN 통신에 의해 전송받아 1차적으로 제 1 마이크로폰(110)으로 들어오는 소리의 증폭 이득을 제어하고, 제 2 마이크로폰(120)으로 입력되는 오디오의 잡음이 사람의 목소리를 넘어서면 제 1 마이크로폰(110)을 스피커가 나오는 방향으로부터 최대한 피해서 위치를 하도록 2차적으로 제어하게 된다. 아울러, 변경된 제 1 마이크로폰(110)의 방향에서, 3차적으로 다시 제 1 마이크로폰(110)의 증폭 이득을 제어하게 된다.
마찬가지로 잡음을 일으킬 수 있는 공조 장치나 와이퍼 작동시 발생하는 잡음 같은 경우에도 CAN 통신에 의해 전송받아 1차적으로 제 1 마이크로폰(110)으로 들어오는 소리의 증폭 이득을 제어하고, 그 이후에 제 2 마이크로폰(120)으로 입력되는 오디오의 잡음이 더 커진다면 공조 장치나 와이퍼 작동 소음을 최대한 피하도록 제 1 마이크로폰(110)을 움직여 음성 인식의 성공률을 높일 수 있도록 2차적으로 제어한다. 아울러, 변경된 제 1 마이크로폰(110)의 방향에서, 3차적으로 다시 제 1 마이크로폰(110)의 증폭 이득을 제어하게 된다.
아울러, 제어부(140)가 CAN 통신에 의해 별도의 정보를 전송받지 못한 경우에도, 차량의 주변 환경에 의해 잡음이 증가하는 경우가 발생할 수 있다. 이 경우에는, 제어부(140)는, 제 2 마이크로폰(120)으로부터 입력된 잡음 정보를 이용하여, 제 1 마이크로폰(110)의 지향 방향을 제어한다. 또한, 제어부(140)는, 제 1 마이크로폰(110)의 지향 방향을 제어한 후, 제 1 마이크로폰(110)의 증폭 이득을 제어하여 제 1 마이크로폰(110)의 증폭 이득 및 지향 방향을 최적화하게 된다.
구체적으로 제 1 마이크로폰(110)의 지향 방향의 제어는 다음과 같이 이루어질 수 있다.
제 2 마이크로폰(120)에 의해 잡음을 측정할 경우, 제어부(140)는 제 2 마이크로폰(120)의 지향 방향을 제어하여 가장 잡음이 크게 입력되는 방향을 파악한 후, 제 1 마이크로폰(110)의 지향 방향을 가장 잡음이 크게 입력되는 방향과 반대되는 방향으로 움직이게 된다.
영상 판단부(130)는, 카메라를 이용하여 획득된 음성 인식 대상자의 얼굴 영상을 이용하여 해당 대상자가 말을 하고 있는지를 판단하는 역할을 한다. 영상 판단부(130)가 해당 대상자가 말을 하고 있지 않은 것으로 판단한 경우, 제어부(140)는 음성 인식이 수행되지 않도록 제어 신호를 생성하게 된다. 예를 들어, 운전자의 입모양을 검출해서 운전자가 말을 하고 있는지 알 수가 있다. 이런 경우 음성 인식을 수행하지 않는 것에 의해 잡음에 기인한 음성의 오인식을 방지할 수 있다.
제어부(140)가 음성 인식이 수행되지 않도록 제어 신호를 생성하는 방법은, 제 1 마이크로폰(110)으로부터 입력되는 소리 신호 자체를 입력받지 않도록 제 1 마이크로폰(110)을 오프(Off)시키는 제어 신호를 생성하거나, 제 1 마이크로폰(110)으로부터 입력되는 소리 신호는 받더라도 음성 인식 부분에서 음성 인식을 수행하지 않도록 제어 신호를 생성하는 방법이 있을 수 있다.
아울러, 영상 판단부(130)는, 해당 대상자의 얼굴 방향을 판단할 수도 있다. 영상 판단부(130)의 판단 결과에 따른 얼굴 방향에 따라, 제어부(140)가 제 1 마이크로폰(110)의 지향 방향을 제어할 수 있다. 즉, 영상 판단부(130)는 운전자의 얼굴을 인식하여 운전자의 얼굴 방향을 제어부(140)로 CAN 통신에 의해 전송한다. 제어부(140)는 전송받은 운전자의 얼굴 방향으로 제 1 마이크로폰(110)의 지향 방향을 제어하게 된다.
도 2는 본 발명의 바람직한 일실시예에 따른 차량용 음성 인식을 위한 마이크로폰 제어 방법의 흐름도를 나타낸다.
도 2의 차량용 음성 인식을 위한 마이크로폰 제어 방법은, 차량용 음성 인식을 위한 마이크로폰 제어 시스템(100)을 사용하는 까닭에 차량용 음성 인식을 위한 마이크로폰 제어 시스템(100)의 특징을 모두 포함하고 있음은 물론이다.
도 2로부터 알 수 있는 바와 같이, 본 발명의 바람직한 일실시예에 따른 차량용 음성 인식을 위한 마이크로폰 제어 방법은, CAN(Controller Area Network) 통신에 의한 차량의 상태 정보를 입력받는 단계(S10), S10 단계의 차량의 상태 정보를 이용하여, 제 1 마이크로폰(110)의 동작을 제어하는 단계(S20), 제 2 마이크로폰(120)으로부터 잡음 정보를 입력받는 단계(S30) 및 S30 단계의 차량의 상태 정보를 이용하여, 제 1 마이크로폰(110)의 동작을 제어하는 단계(S40)을 포함한다.
구체적으로 S20 단계는, CAN 통신에 의한 차량의 상태 정보를 이용하여, 제 1 마이크로폰(110)의 증폭 이득을 제어하는 것을 특징으로 한다.
아울러, S40 단계는, 제 2 마이크로폰(120)으로부터 입력된 잡음 정보를 이용하여, 제 1 마이크로폰(110)의 지향 방향을 제어하는 단계(S41) 및 S41 단계의 완료 후, 제 1 마이크로폰(110)의 증폭 이득을 제어하는 단계(S42)를 포함하는 것이 바람직하다.
또한, 본 발명의 바람직한 일실시예에 따른 차량용 음성 인식을 위한 마이크로폰 제어 방법은, 카메라를 이용하여 획득된 음성 인식 대상자의 얼굴 영상을 이용하여 해당 대상자가 말을 하고 있는지를 판단하는 단계(S50), S50 단계에서 해당 대상자가 말을 하고 있지 않은 것으로 판단한 경우, 음성 인식이 수행되지 않도록 제어 신호를 생성하는 단계(S60), 카메라를 이용하여 획득된 음성 인식 대상자의 얼굴 영상을 이용하여 해당 대상자의 얼굴 방향을 판단하는 단계(S70) 및 S70 단계의 판단 결과에 따른 얼굴 방향에 따라, 제 1 마이크로폰(110)의 지향 방향을 제어하는 단계(S80)를 더 포함하는 것이 바람직하다.
상술한 바와 같이 본 발명의 차량용 음성 인식을 위한 마이크로폰 제어 시스템(100) 및 그 제어 방법에 따르면, CAN(Controller Area Network) 통신에 의한 차량의 상태 정보 및 잡음용 마이크로폰으로 입력되는 잡음 정보를 이용하여 음성 인식용 마이크로폰의 증폭 이득 및 지향 방향을 제어하는 것에 의해 더욱 효율적인 음성 인식을 가능함을 알 수 있다.
100 : 차량용 음성 인식을 위한 마이크로폰 제어 시스템
110 : 제 1 마이크로폰 120 : 제 2 마이크로폰
130 : 영상 판단부 140 : 제어부
110 : 제 1 마이크로폰 120 : 제 2 마이크로폰
130 : 영상 판단부 140 : 제어부
Claims (17)
- 음성 인식용 소리를 입력받는 제 1 마이크로폰;
잡음 측정을 위한 제 2 마이크로폰;
상기 제 1 마이크로폰 또는 상기 제 2 마이크로폰의 동작을 제어하는 제어부; 및
카메라를 이용하여 획득된 음성 인식 대상자의 얼굴 영상을 이용하여 해당 대상자가 말을 하고 있는지를 판단하는 영상 판단부;를 포함하되,
상기 제어부는, CAN(Controller Area Network) 통신에 의한 차량의 상태 정보를 이용하여 상기 제 1 마이크로폰의 증폭 이득을 제어하고, 상기 제 2 마이크로폰으로부터 입력된 잡음 정보를 이용하여 상기 제 1 마이크로폰의 지향 방향을 제어한 후, 상기 제 1 마이크로폰의 증폭 이득을 제어하고,
상기 제어부는, 상기 제 2 마이크로폰의 지향 방향을 제어하여 가장 잡음이 크게 입력되는 방향을 파악한 후, 상기 제 1 마이크로폰의 지향 방향을 가장 잡음이 크게 입력되는 방향과 반대되는 방향으로 움직이도록 하고,
상기 제어부는, 상기 영상 판단부가 해당 대상자가 말을 하고 있지 않은 것으로 판단한 경우, 음성 인식이 수행되지 않도록 제어 신호를 생성하고,
상기 영상 판단부는, 해당 대상자의 얼굴 방향도 판단할 수 있고,
상기 제어부는, 상기 영상 판단부의 판단 결과에 따른 얼굴 방향에 따라, 상기 제 1 마이크로폰의 지향 방향을 제어하는 것을 특징으로 하는 차량용 음성 인식을 위한 마이크로폰 제어 시스템. - 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- (a) CAN(Controller Area Network) 통신에 의한 차량의 상태 정보를 입력받는 단계;
(b) 상기 (a) 단계의 차량의 상태 정보를 이용하여, 제 1 마이크로폰의 동작을 제어하는 단계;
(c) 제 2 마이크로폰으로부터 잡음 정보를 입력받는 단계;
(d) 상기 (c) 단계의 정보를 이용하여, 상기 제 1 마이크로폰의 동작을 제어하는 단계;
(e) 카메라를 이용하여 획득된 음성 인식 대상자의 얼굴 영상을 이용하여 해당 대상자가 말을 하고 있는지를 판단하는 단계;
(f) 상기 (e) 단계에서 해당 대상자가 말을 하고 있지 않은 것으로 판단한 경우, 음성 인식이 수행되지 않도록 제어 신호를 생성하는 단계;
(g) 카메라를 이용하여 획득된 음성 인식 대상자의 얼굴 영상을 이용하여 해당 대상자의 얼굴 방향을 판단하는 단계; 및
(h) 상기 (g) 단계의 판단 결과에 따른 얼굴 방향에 따라, 상기 제 1 마이크로폰의 지향 방향을 제어하는 단계;를 포함하되,
상기 (b) 단계는,
CAN 통신에 의한 차량의 상태 정보를 이용하여 상기 제 1 마이크로폰의 증폭 이득을 제어하고,
상기 (d) 단계는,
(d-1) 상기 제 2 마이크로폰으로부터 입력된 잡음 정보를 이용하여, 상기 제 1 마이크로폰의 지향 방향을 제어하는 단계; 및
(d-2) 상기 (d-1) 단계의 완료 후, 상기 제 1 마이크로폰의 증폭 이득을 제어하는 단계;를 포함하되,
상기 (d-1) 단계는
상기 제 2 마이크로폰의 지향 방향을 제어하여 가장 잡음이 크게 입력되는 방향을 파악한 후, 상기 제 1 마이크로폰의 지향 방향을 가장 잡음이 크게 입력되는 방향과 반대되는 방향으로 움직이도록 하는 것을 특징으로 하는 차량용 음성 인식을 위한 마이크로폰 제어 방법. - 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020150132085A KR101710695B1 (ko) | 2015-09-18 | 2015-09-18 | 차량용 음성 인식을 위한 마이크로폰 제어 시스템 및 그 제어 방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020150132085A KR101710695B1 (ko) | 2015-09-18 | 2015-09-18 | 차량용 음성 인식을 위한 마이크로폰 제어 시스템 및 그 제어 방법 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR101710695B1 true KR101710695B1 (ko) | 2017-02-27 |
Family
ID=58315798
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020150132085A KR101710695B1 (ko) | 2015-09-18 | 2015-09-18 | 차량용 음성 인식을 위한 마이크로폰 제어 시스템 및 그 제어 방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101710695B1 (ko) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112918381A (zh) * | 2019-12-06 | 2021-06-08 | 广州汽车集团股份有限公司 | 一种车载机器人迎送宾方法、装置及*** |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010283506A (ja) * | 2009-06-03 | 2010-12-16 | Mitsubishi Electric Corp | 車載用音響処理装置 |
KR20140051651A (ko) * | 2012-10-23 | 2014-05-02 | 엘지전자 주식회사 | 휴대 단말기 및 그 제어 방법 |
KR20150054306A (ko) * | 2013-11-11 | 2015-05-20 | 현대모비스 주식회사 | 차량의 경고음 출력 제어 장치 및 그 방법 |
-
2015
- 2015-09-18 KR KR1020150132085A patent/KR101710695B1/ko active IP Right Grant
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010283506A (ja) * | 2009-06-03 | 2010-12-16 | Mitsubishi Electric Corp | 車載用音響処理装置 |
KR20140051651A (ko) * | 2012-10-23 | 2014-05-02 | 엘지전자 주식회사 | 휴대 단말기 및 그 제어 방법 |
KR20150054306A (ko) * | 2013-11-11 | 2015-05-20 | 현대모비스 주식회사 | 차량의 경고음 출력 제어 장치 및 그 방법 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112918381A (zh) * | 2019-12-06 | 2021-06-08 | 广州汽车集团股份有限公司 | 一种车载机器人迎送宾方法、装置及*** |
CN112918381B (zh) * | 2019-12-06 | 2023-10-27 | 广州汽车集团股份有限公司 | 一种车载机器人迎送宾方法、装置及*** |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11437020B2 (en) | Techniques for spatially selective wake-up word recognition and related systems and methods | |
WO2017081960A1 (ja) | 音声認識制御システム | |
JP6604151B2 (ja) | 音声認識制御システム | |
JP6977004B2 (ja) | 車載装置、発声を処理する方法およびプログラム | |
CN110770693A (zh) | 手势操作装置及手势操作方法 | |
CN112397065A (zh) | 语音交互方法、装置、计算机可读存储介质及电子设备 | |
JP2017090614A (ja) | 音声認識制御システム | |
CN114678021A (zh) | 音频信号的处理方法、装置、存储介质及车辆 | |
KR20130046759A (ko) | 차량에서 운전자 명령 인지장치 및 방법 | |
JP6459330B2 (ja) | 音声認識装置、音声認識方法、及び音声認識プログラム | |
JP4910563B2 (ja) | 音声認識装置 | |
KR101710695B1 (ko) | 차량용 음성 인식을 위한 마이크로폰 제어 시스템 및 그 제어 방법 | |
JP2008250236A (ja) | 音声認識装置および音声認識方法 | |
KR20220073513A (ko) | 대화 시스템, 차량 및 대화 시스템의 제어 방법 | |
US10759447B2 (en) | Driving support method, vehicle, and driving support system | |
JPH11352987A (ja) | 音声認識装置 | |
JP2005354223A (ja) | 音源情報処理装置、音源情報処理方法、音源情報処理プログラム | |
JP2004301875A (ja) | 音声認識装置 | |
JP2020144264A (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
JP4026198B2 (ja) | 音声認識装置 | |
US20220415318A1 (en) | Voice assistant activation system with context determination based on multimodal data | |
JPWO2020016927A1 (ja) | 音場制御装置および音場制御方法 | |
JP7239365B2 (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
WO2019175960A1 (ja) | 音声処理装置および音声処理方法 | |
WO2020240789A1 (ja) | 音声対話制御装置及び音声対話制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
AMND | Amendment | ||
E601 | Decision to refuse application | ||
X091 | Application refused [patent] | ||
AMND | Amendment | ||
GRNT | Written decision to grant | ||
X701 | Decision to grant (after re-examination) | ||
FPAY | Annual fee payment |
Payment date: 20200210 Year of fee payment: 4 |