KR20160097821A - Method and apparatus for recognizing gesture - Google Patents

Method and apparatus for recognizing gesture Download PDF

Info

Publication number
KR20160097821A
KR20160097821A KR1020150020157A KR20150020157A KR20160097821A KR 20160097821 A KR20160097821 A KR 20160097821A KR 1020150020157 A KR1020150020157 A KR 1020150020157A KR 20150020157 A KR20150020157 A KR 20150020157A KR 20160097821 A KR20160097821 A KR 20160097821A
Authority
KR
South Korea
Prior art keywords
gesture recognition
signal
gesture
audio signal
recognition apparatus
Prior art date
Application number
KR1020150020157A
Other languages
Korean (ko)
Inventor
임우택
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020150020157A priority Critical patent/KR20160097821A/en
Publication of KR20160097821A publication Critical patent/KR20160097821A/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/107Static hand or arm
    • G06K9/00375
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

The present invention relates to a method and an apparatus for recognizing a gesture. According to the present invention, the method for recognizing a gesture comprises the following steps: outputting an audio signal; allowing the output audio signal to obtain an audio signal changed by a gesture of a user; analyzing the obtained audio signal; and recognizing the gesture of the user according to the analyzed result of the audio signal. According to the present invention, the user can control a device by recognizing the gesture of the user without wearing an additional device.

Description

제스처 인식 방법 및 장치{METHOD AND APPARATUS FOR RECOGNIZING GESTURE}[0001] METHOD AND APPARATUS FOR RECOGNIZING GESTURE [0002]

본 발명은, 제스처 인식 방법 및 장치에 관한 것이다.The present invention relates to a gesture recognition method and apparatus.

현대 사회에서 노트북이나 태블릿, 스마트 폰 등의 다양한 전자 기기들이 널리 사용되고 있다. 이러한 기기들은 마우스, 키보드, 터치 스크린 등을 통해 입력을 받고 제어되게 되는데 이러한 방법들은 부가적인 장치를 필요로 하거나 일부 상황에 있어서 사용자의 기기의 제어 자유도를 제한하게 된다. Various electronic devices such as notebook computers, tablets and smart phones are widely used in the modern society. These devices receive and control inputs through a mouse, keyboard, touch screen, etc. These methods require additional devices or, in some situations, limit the control freedom of the user's device.

기존의 사용자의 제어 동작을 인식하는 방법은 부가적인 장치를 필요로 하기 때문에 새로운 장치를 구비해야 하고 이로 인하여 제한적인 상황에서만 사용이 가능하다는 문제점이 존재한다.There is a problem that a method of recognizing the control operation of the existing user requires a new device because it requires an additional device and can be used only in a limited situation.

이에, 사용자의 기기의 제어 자유도를 제한하지 않고, 사용자의 제어 동작을 인식할 수 있는 기술을 제안하고자 한다.Accordingly, a technique capable of recognizing a user's control operation without limiting the degree of control of the user's apparatus is proposed.

본 발명은 상술한 문제점을 모두 해결하는 것을 목적으로 한다.The present invention aims at solving all of the above problems.

본 발명은, 제어하고자 하는 디바이스의 스피커 어레이 및 마이크를 이용하여 음향 신호의 변화를 감지하고, 이를 통해 사용자의 제스처를 인식하여 기기를 제어하는 것을 다른 목적으로 한다.Another object of the present invention is to detect a change in a sound signal using a speaker array and a microphone of a device to be controlled, and to recognize the gesture of the user through the speaker array and the microphone, thereby controlling the device.

상기한 바와 같은 본 발명의 목적을 달성하고, 후술하는 본 발명의 특징적인 효과를 실현하기 위한, 본 발명의 특징적인 구성은 하기와 같다.In order to accomplish the objects of the present invention as described above and achieve the characteristic effects of the present invention described below, the characteristic structure of the present invention is as follows.

일실시예에 따른, 제스처 인식 장치가 수행하는 제스처 인식 방법에 있어서, 제스처 인식 방법은, 오디오 신호를 출력하는 단계; 상기 출력된 오디오 신호가 사용자의 제스처에 의하여 변화된 오디오 신호를 획득하는 단계; 상기 획득한 오디오 신호를 분석하는 단계; 및 상기 오디오 신호의 분석 결과에 따라 상기 사용자의 제스처를 인식하는 단계;를 포함할 수 있다.According to an embodiment, there is provided a gesture recognition method performed by a gesture recognition apparatus, comprising: outputting an audio signal; The output audio signal obtaining an audio signal changed by a user's gesture; Analyzing the obtained audio signal; And recognizing the gesture of the user according to an analysis result of the audio signal.

다른 실시예에 따른, 제스처 인식 장치가 수행하는 제스처 인식 방법에 있어서, 제스처 인식 방법은, 스피커 어레이를 구성하는 복수의 스피커들 각각에 대해 서로 다른 주파수를 나타내는 오디오 신호를 제공하는 단계;를 더 포함할 수 있다.According to another embodiment, there is provided a gesture recognition method performed by a gesture recognition device, the method further comprising: providing an audio signal representing a different frequency for each of a plurality of speakers constituting the speaker array can do.

또 다른 실시예에 따른, 제스처 인식 장치가 수행하는 제스처 인식 방법에 있어서, 상기 오디오 신호는, 비 가청 대역의 순음 신호인 것을 포함할 수 있다.According to still another embodiment of the present invention, a gesture recognition method performed by a gesture recognition apparatus may include a gesture recognition method, wherein the audio signal is a pure tone signal of an un-audible band.

또 다른 실시예에 따른, 제스처 인식 장치가 수행하는 제스처 인식 방법에 있어서, 상기 신호를 분석하는 단계는, 상기 오디오 신호의 주파수의 변화를 분석하는 것을 포함할 수 있다.In a gesture recognition method performed by a gesture recognition apparatus according to another embodiment, the step of analyzing the signal may include analyzing a change in the frequency of the audio signal.

또 다른 실시예에 따른, 제스처 인식 장치가 수행하는 제스처 인식 방법에 있어서, 상기 신호를 분석하는 단계는, 상기 오디오 신호를 대역 통과 필터를 이용하여 복수의 순음 신호로 분리하여 분석하는 것을 포함할 수 있다.According to yet another embodiment, the gesture recognition method performed by the gesture recognition device may include analyzing the signal by separating the audio signal into a plurality of pure sound signals using a bandpass filter have.

일실시예에 따른, 제스처 인식 장치에 있어서, 제스처 인식 장치는, 오디오 신호를 출력하는 스피커 어레이; 상기 출력된 오디오 신호가 사용자의 제스처에 의하여 변화된 오디오 신호를 획득하는 마이크; 상기 획득한 오디오 신호를 분석하는 오디오 신호 분석부; 및 상기 오디오 신호의 분석 결과에 따라 상기 사용자의 제스처를 인식하는 제스처 인식부;를 포함할 수 있다.According to an embodiment, there is provided a gesture recognition apparatus comprising: a speaker array for outputting an audio signal; A microphone for outputting the audio signal obtained by the user's gesture; An audio signal analyzer for analyzing the obtained audio signal; And a gesture recognition unit for recognizing the gesture of the user according to an analysis result of the audio signal.

다른 실시예에 따른, 제스처 인식 장치에 있어서, 제스처 인식 장치는, 상기 스피커 어레이를 구성하는 복수의 스피커들 각각에 대해 서로 다른 주파수를 나타내는 오디오 신호를 제공하는 스피커 제어부를 더 포함할 수 있다.According to another embodiment, in the gesture recognition apparatus, the gesture recognition apparatus may further include a speaker control unit for providing an audio signal indicating a different frequency to each of a plurality of speakers constituting the speaker array.

또 다른 실시예에 따른, 제스처 인식 장치에 있어서, 상기 오디오 신호는, 비 가청 대역의 순음 신호인 것을 포함할 수 있다.In a gesture recognition apparatus according to another embodiment, the audio signal may include a non-audible band pure tone signal.

또 다른 실시예에 따른, 제스처 인식 장치에 있어서, 상기 오디오 신호 분석부는, 상기 오디오 신호의 주파수의 변화를 분석하는 것을 포함할 수 있다.In yet another embodiment, the gestural recognition apparatus may include analyzing a change in the frequency of the audio signal.

또 다른 실시예에 따른, 제스처 인식 장치에 있어서, 상기 오디오 신호 분석부는, 상기 오디오 신호를 대역 통과 필터를 이용하여 복수의 순음 신호로 분리하여 분석하는 것을 포함할 수 있다.According to another embodiment, the gestural recognition apparatus may include analyzing the audio signal by separating the audio signal into a plurality of pure sound signals using a band pass filter.

본 발명은, 제어하고자 하는 디바이스의 스피커 어레이 및 마이크를 이용하여 음향 신호의 변화를 감지하고, 이를 통해 사용자의 제스처를 인식하여 기기를 제어할 수 있는 효과가 있다.The present invention has an effect of detecting a change of a sound signal by using a speaker array and a microphone of a device to be controlled, and by recognizing the gesture of the user through the speaker array and the microphone, the device can be controlled.

본 발명은, 사용자의 디바이스 제어를 위하여 사용자가 별도의 디바이스를 착용하지 않고도 사용자의 제스처를 인식하여 기기를 제어할 수 있는 효과가 있다.The present invention has an effect that a user can control a device by recognizing a gesture of a user without wearing a separate device for controlling the device of the user.

도 1은 일실시예에 따른 제스처 인식 장치가 수행하는 제스처 인식 방법으로서, 제스처 인식 방법을 나타내는 흐름도이다.
도 2는 일실시예에 따른 제스처 인식 장치가 수행하는 제스처 인식 방법을 나타내는 개념도이다.
도 3은 일실시예에 따른 제스처 인식 장치가 수행하는 제스처 인식 방법의 흐름을 나타내는 것이다.
도 4는 일실시예에 따른 제스처 인식 장치를 나타내는 것이다.
도 5는 일실시예에 따른 제스처 인식 방법을 수행하는 제스처 인식 장치를 나타내는 것이다.
도 6은 일실시예에 따른 제스처 인식 장치로서, 제스처 인식 장치를 나타내는 블록도이다.
1 is a flowchart illustrating a gesture recognition method performed by a gesture recognition apparatus according to an exemplary embodiment.
2 is a conceptual diagram illustrating a gesture recognition method performed by the gesture recognition apparatus according to an exemplary embodiment.
3 is a flowchart of a gesture recognition method performed by the gesture recognition apparatus according to an exemplary embodiment of the present invention.
4 shows a gesture recognition apparatus according to an embodiment.
FIG. 5 illustrates a gesture recognition apparatus that performs a gesture recognition method according to an embodiment.
6 is a block diagram illustrating a gesture recognition apparatus according to an embodiment.

이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다. DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 일실시예에 따른 제스처 인식 장치가 수행하는 제스처 인식 방법으로서, 제스처 인식 방법을 나타내는 흐름도이다.1 is a flowchart illustrating a gesture recognition method performed by a gesture recognition apparatus according to an exemplary embodiment.

제스처 인식 장치는, 인클로저(enclosure), 진동판, 센서, 전자 회로, 전기 회로, 집적 회로, 전자 소자, 자기 소자 중 적어도 하나를 포함하여 구성될 수도 있다. 또한, 경우에 따라서, 제스처 인식 장치는, 프로세서, 메모리, 데이터 송수신기 중 적어도 하나를 포함할 수도 있으나, 이에 한정되지는 않는다.The gesture recognition device may be configured to include at least one of an enclosure, a diaphragm, a sensor, an electronic circuit, an electrical circuit, an integrated circuit, an electronic device, and a magnetic device. Also, as the case may be, the gesture recognition device may include at least one of a processor, a memory, and a data transceiver, but is not limited thereto.

제스처 인식 장치가 수행하는 제스처 인식 방법은 하기와 같은 단계를 포함하여 구성될 수도 있다.The gesture recognition method performed by the gesture recognition device may include the following steps.

단계(S101)에서, 제스처 인식 장치는, 스피커 어레이를 구성하는 복수의 스피커들 각각에 대해 서로 다른 주파수를 나타내는 오디오 신호를 제공할 수 있다. 이때, 오디오 신호는, 비 가청 대역의 순음 신호일 수 있다.In step S101, the gesture recognition device may provide an audio signal indicating a different frequency to each of a plurality of speakers constituting the speaker array. At this time, the audio signal may be a pure tone signal in the non-audible band.

단계(S102)에서, 제스처 인식 장치는, 오디오 신호를 출력할 수 있다. 이때, 오디오 신호도, 비 가청 대역의 순음 신호일 수도 있다.In step S102, the gesture recognition apparatus can output an audio signal. At this time, the audio signal may be a pure tone signal of a non-audible band.

단계(S103)에서, 제스처 인식 장치는, 출력된 오디오 신호가 사용자의 제스처에 의하여 변화된 오디오 신호를 획득할 수 있다.In step S103, the gesture recognition apparatus can obtain the audio signal whose output audio signal has been changed by the user's gesture.

단계(S104)에서, 제스처 인식 장치는, 획득한 오디오 신호를 분석할 수 있다.In step S104, the gesture recognition apparatus can analyze the obtained audio signal.

구체적으로, 제스처 인식 장치는, 오디오 신호의 주파수의 변화를 분석 할 수 있다.Specifically, the gesture recognition apparatus can analyze a change in frequency of an audio signal.

또한, 제스처 인식 장치는, 오디오 신호를 대역 통과 필터를 이용하여 복수의 순음 신호로 분리하여 분석할 수도 있다.Further, the gesture recognition apparatus may separate the audio signal into a plurality of pure sound signals by using a band pass filter.

단계(S105)에서, 제스처 인식 장치는, 오디오 신호의 분석 결과에 따라 사용자의 제스처를 인식할 수 있다.In step S105, the gesture recognition device can recognize the gesture of the user according to the analysis result of the audio signal.

도 2는 일실시예에 따른 제스처 인식 장치가 수행하는 제스처 인식 방법을 나타내는 개념도이다.2 is a conceptual diagram illustrating a gesture recognition method performed by the gesture recognition apparatus according to an exemplary embodiment.

먼저, 도 2를 참조하면, 제스처 인식 장치는, 스피커 어레이(211, 212) 및 마이크(220)를 포함하여 구성될 수 있는 것을 알 수 있다.2, the gesture recognition apparatus can be configured to include speaker arrays 211 and 212 and a microphone 220. As shown in FIG.

제스처 인식 장치는, 노트북 또는 태블릿, 스마트 폰과 같은 단말의 스피커 어레이 및 마이크를 이용하여, 스피커 어레이(211, 212)에서 출력되고 마이크(220)로 입력 되는 음향 신호의 입력 변화를 감지할 수 있다. 이때, 경우에 따라서, 제스처 인식 장치는, 음향 신호의 변화를 사용자의 제어 제스쳐와 맵핑시켜 디바이스를 제어할 수도 있다.The gesture recognition apparatus can detect an input change of an acoustic signal output from the speaker arrays 211 and 212 and input to the microphone 220 using a speaker array and a microphone of a terminal such as a notebook or a tablet or a smart phone . At this time, the gesture recognition device may control the device by mapping the change of the sound signal with the user's control gesture, as the case may be.

예를 들어, 사용자가 제어 하고자 하는 디바이스가 노트북이며, 노트북은 1개 이상의 스피커 어레이를 보유하고 있고, 1개 이상의 소리를 수신할 수 있는 마이크로 구성될 수도 있다.For example, a device that a user desires to control is a notebook, and a notebook may have one or more speaker arrays and may be micro-configurable to receive one or more sounds.

이때, 제스처 인식 장치는, 스피커 어레이(211, 212)와 마이크(220)는 노트북의 구성 그대로를 포함하여 구성될 수도 있으며, 경우에 따라서 스피커 어레이(211, 212)와 마이크(220)를 추가로 장치에 부착하여 구성될 수도 있다.At this time, the gesture recognition device may include the speaker arrays 211 and 212 and the microphone 220 as they are, and may further include speaker arrays 211 and 212 and a microphone 220, Or may be attached to the apparatus.

제스처 인식 장치는, 스피커 어레이(211, 212)에서 출력되어 마이크(220)로 입력되는 오디오 신호를 분석하여 사용자의 제스처를 인식할 수 있다.The gesture recognition apparatus can recognize a gesture of a user by analyzing an audio signal output from the speaker arrays 211 and 212 and input to the microphone 220. [

도 3은 일실시예에 따른 제스처 인식 장치가 수행하는 제스처 인식 방법의 흐름을 나타내는 것이다.3 is a flowchart of a gesture recognition method performed by the gesture recognition apparatus according to an exemplary embodiment of the present invention.

제스처 인식 방법은 경우에 따라서, 하기와 같은 단계를 포함하여 구성될 수도 있다.The gesture recognition method may be configured to include the following steps as occasion demands.

단계(S301)에서, 제스처 인식 장치는, 스피커 어레이를 통해 각각 주어진 주파수의 소리를 발생시킬 수 있다. 구체적으로, 제스처 인식 장치는, 스피커 어레이에서 서로 다른 대역의 비 가청 순음 신호를 방출할 수 있다.In step S301, the gesture recognition apparatus can generate sound of a given frequency through the speaker array, respectively. Specifically, the gesture recognition apparatus can emit different non-audible pure tone signals in the speaker array.

제스처 인식 장치는, 모듈을 통해 오디오 신호를 생성할 수 있다. 이때, 생성되는 오디오 신호는 비 가청 대역의 순음 신호일 수 있다. 일반적인 사람의 가청 주파수는 20Hz ~ 20000Hz로서, 비 가청 대역의 순음 신호는 20Hz보다 미만 또는 20kHz보다 초과인 대역의 주파수일 수 있다. 또한, 경우에 따라서, 제스처 인식 장치는, 보통의 사용자가 잘 듣지 못하는, 60Hz, 18kHz, 22kHz 등의 순음 신호를 생성할 수도 있다. 비 가청대역의 순음 신호는 사람에게 들리지 않아 인지할 수 없지만 스피커로 생성하고 마이크로 취득이 가능한 오디오 신호이다.The gesture recognition device can generate an audio signal through the module. At this time, the generated audio signal may be a pure tone signal of the non-audible band. The audible frequency of a typical person is 20 Hz to 20000 Hz, and the pure sound signal in the non-audible band may be a frequency in a band of less than 20 Hz or more than 20 kHz. In some cases, the gesture recognition device may generate a pure tone signal such as 60 Hz, 18 kHz, 22 kHz, etc., which the normal user does not hear well. A pure-tone signal in the non-audible band is an audio signal that can not be perceived by humans but can not be recognized, but is generated by a speaker and micro-acquired.

물론, 경우에 따라서, 제스처 인식 장치는, 가청 주파수인 20Hz ~ 20000Hz의 오디오 신호를 생성할 수도 있다.As a matter of course, the gesture recognition apparatus may generate an audio signal of 20 Hz to 20000 Hz which is an audio frequency.

단계(S302)에서, 제스처 인식 장치는, 발생 된 신호를 마이크를 통해 취득할 수 있다. 구체적으로, 제스처 인식 장치는, 사용자가 제어하고자하는 기기의 마이크에서 음향 신호로서 오디오 신호를 획득할 수 있다.In step S302, the gesture recognition apparatus can acquire the generated signal through the microphone. Specifically, the gesture recognition apparatus can acquire an audio signal as a sound signal from a microphone of a device to be controlled by the user.

제스처 인식 장치에 의하여 생성되어 방출된 순음 오디오 신호는 제스처 인식 장치에 의하여 취득될 수 있으며, 제스처 인식 장치는, 취득된 신호와 방출된 신호의 차이를 얻기 위하여 취득된 신호와 방출된 신호를 비교할 수 있다. 이때, 신호의 차이는 사용자의 제스처로 인한 변화에 의해 발생할 수 있다. 예를 들어, 사용자의 제스처로 인한 변화는, 손의 움직임에 따른 도플러 시프트 효과 등이 될 수도 있다.The gentle audio signal generated and emitted by the gesture recognition device can be acquired by the gesture recognition device and the gesture recognition device can compare the acquired signal with the emitted signal to obtain the difference between the acquired signal and the emitted signal have. At this time, the difference of the signals may be caused by a change due to the user's gesture. For example, a change due to a user's gesture may be a Doppler shift effect depending on the movement of the hand.

단계(S303)에서, 제스처 인식 장치는, 취득된 신호를 필터링하고 도플러 효과 시프트를 검출하여 분석할 수 있다. 구체적으로, 제스처 인식 장치는, 마이크로 취득된 음향 신호로서 오디오 신호의 도플러 시프트 변화를 분석할 수 있다.In step S303, the gesture recognition device can filter the acquired signal and detect and analyze the Doppler effect shift. Specifically, the gesture recognition apparatus can analyze a Doppler shift change of an audio signal as a micro-acquired sound signal.

또한, 제스처 인식 장치는, 취득된 순음 오디오 신호를 분석할 수 있다. 예를 들어, 제스처 인식 장치는, 아무런 제스처가 없을 때 스피커에서 출력되는 순음 신호와 이를 입력 받은 마이크에서 입력되어 취득된 순음 오디오 신호는 정적이므로, 오디오 신호에는 변화가 거의 없다.Further, the gesture recognition apparatus can analyze the acquired pure-tone audio signal. For example, in the gesture recognition apparatus, a pure tone signal output from a speaker when there is no gesture and a pure tone audio signal obtained by inputting a microphone input thereto are static, so that there is almost no change in the audio signal.

또한, 제스처 인식 장치는, 사용자가 특정 동작을 수행했을 때 마이크로 입력되는 오디오 신호에서 발생되는 변화를 검출하여 분석할 수 있다. 예를 들어, 사용자가 손을 오른쪽에서 왼쪽으로 움직이거나 화면과 가까워졌다가 멀어졌다 하는 행동을 취하게 되면, 제스처 인식 장치는, 마이크로 입력되는 오디오 신호의 주파수의 변화를 분석할 수 있다. In addition, the gesture recognition apparatus can detect and analyze a change occurring in an audio signal micro-input when a user performs a specific operation. For example, if the user moves his / her hand from right to left or approaches / moves away from the screen, the gesture recognition device can analyze the change in the frequency of the micro input audio signal.

제스처 인식 장치는, 음파의 진행 방향과 음파를 발생 시키는 물체의 방향에 따라 주파수가 변화하는 도플러 효과를 이용하여 두 개 이상의 다른 스피커에서 발생되는 다른 주파수의 순음 신호를 기초로 하여 변화된 신호를 분석할 수 있다. 예를 들어, 제스처 인식 장치는, 변화된 신호를 분석하여, 사용자가 손을 좌우로 흔들었는지, 어느 방향으로 움직였는지, 혹은 가까이 다가가거나 멀어지는 것 등을 구분할 수도 있다.The gesture recognition apparatus analyzes a changed signal based on pure tone signals of different frequencies generated from two or more different speakers by using a Doppler effect whose frequency changes according to the traveling direction of a sound wave and the direction of an object generating a sound wave . For example, the gesture recognition apparatus may analyze the changed signal to distinguish whether the user has shaken his or her hand to the left or right, in which direction it was moved, or whether the user has moved closer or further away.

또한, 제스처 인식 장치로 입력되는 변화된 순음 신호로서 오디오 신호는 2개 이상이 함께 들어오기 때문에 이를 구분하기 위하여 제스처 인식 장치는, 2개의 순음 신호를 분리할 수 있는 대역 통과 필터를 포함하여 구성될 수도 있다. 또한, 제스처 인식 장치는, 대역 통과된 2개의 순음 신호의 도플러 효과를 분석하여 제스처를 인식할 수 있다.In addition, since two or more audio signals are input as a changed pure tone signal input to the gesture recognition apparatus, the gesture recognition apparatus may include a band pass filter capable of separating two pure tone signals have. Further, the gesture recognition apparatus can recognize the gesture by analyzing the Doppler effect of two band-pass pure-tone signals.

단계(S304)에서, 제스처 인식 장치는, 분석된 신호를 바탕으로 사용자의 제스처를 인식할 수 있다.In step S304, the gesture recognition device can recognize the gesture of the user based on the analyzed signal.

제스처 인식 장치는, 최종적으로 분석된 결과를 기초로 어떠한 제어를 위한 동작인지 인식하고 판단할 수도 잇다.The gesture recognition device may recognize and determine which operation is the control based on the finally analyzed result.

단계(S305)에서, 제스처 인식 장치는, 인식된 제스처를 디바이스의 제어 기능에 맵핑할 수 있다.In step S305, the gesture recognition device may map the recognized gesture to the control function of the device.

구체적으로 제스처 인식 장치는, 동작으로서 인식된 제스처를 사용자가 제어하고자하는 디바이스의 제어 신호로 맵핑할 수도 있다.Specifically, the gesture recognition apparatus may map a gesture recognized as an operation to a control signal of a device that the user wants to control.

단계(S306)에서, 제스처 인식 장치는, 경우에 따라서, 사용자가 제어하고자하는 기기를 제어할 수도 있다.In step S306, the gesture recognition device may control a device to be controlled by the user, as the case may be.

예를 들면, 제스처 인식 장치는, 제스처 인식 장치가 동작으로서 인식한 제스처를 디바이스 제어 신호로 맵핑하여 사용자가 제어하고자하는 기기를 제어할 수 있다.For example, the gesture recognition apparatus can control a device to be controlled by a user by mapping a gesture recognized by the gesture recognition apparatus as an operation to a device control signal.

예를 들어, 제스처 인식 장치는, 맵핑되는 동작을 기초로 하여 웹 페이지 스크롤, 화면 전환, 동영상 및 음악 제어, 이미지 넘기기, TV제어 등의 제어를 다양하게 활용할 수 있다.For example, the gesture recognition apparatus can utilize various controls such as web page scrolling, screen switching, video and music control, image flipping, and TV control based on the mapped operation.

도 4는 일실시예에 따른 제스처 인식 장치를 나타내는 것이다.4 shows a gesture recognition apparatus according to an embodiment.

도 4를 참조하면, 제스처 인식 장치는, 스피커 어레이(411, 412)와 마이크(420)는 태블릿의 구성 그대로를 포함하여 구성될 수 있다.Referring to FIG. 4, the gesture recognition apparatus may include speaker arrays 411 and 412 and a microphone 420 including a configuration of a tablet.

일실시예에 따르면, 제스처 인식 장치의 스피커(411)에서 제1 대역의 비 가청 순음 신호를 방출할 수 있다. 또한, 제스처 인식 장치의 스피커(412)에서 제2 대역의 비 가청 순음 신호를 방출할 수 있다. 이때, 제스처 인식 장치의 마이크(420)는 제1 대역의 비 가청 순음 신호를 획득할 수 있다. 또한, 제스처 인식 장치의 마이크(420)는 제2 대역의 비 가청 순음 신호를 획득할 수 있다.According to one embodiment, the non-audible pure tone signal of the first band may be emitted at the speaker 411 of the gesture recognition apparatus. Also, the non-audible pure tone signal of the second band can be emitted from the speaker 412 of the gesture recognition apparatus. At this time, the microphone 420 of the gesture recognition apparatus can acquire the non-audible pure tone signal of the first band. In addition, the microphone 420 of the gesture recognition apparatus can acquire the non-audible pure tone signal of the second band.

예를 들어, 제스처 인식 장치는, 스피커(411)에서 제1 대역의 비 가청 순음 신호로서 22kHz의 주파수 신호를 출력할 수 있다. 또한, 제스처 인식 장치는, 스피커(412)에서 제2 대역의 비 가청 순음 신호로서 18kHz의 주파수 신호를 출력할 수 있다. 이때, 제스처 인식 장치의 마이크(420)는, 22kHz의 주파수 신호를 입력 신호로서 획득할 수 있다. 또한, 제스처 인식 장치의 마이크(420)는, 18kHz의 주파수 신호를 입력 신호로서 획득할 수 있다. 가령, 제스처 인식 장치는, 스피커 어레이(411, 412)에서 출력된 오디오 신호와 마이크(420)에서 획득된 오디오 신호의 주파수가 동일하다고 분석될 경우, 사용자의 제스처가 없다고 인식할 수 있다.For example, the gesture recognition apparatus can output a frequency signal of 22 kHz as the non-audible pure tone signal of the first band in the speaker 411. Further, the gesture recognition apparatus can output a frequency signal of 18 kHz as a non-audible pure tone signal of the second band by the speaker 412. At this time, the microphone 420 of the gesture recognition apparatus can acquire a frequency signal of 22 kHz as an input signal. Further, the microphone 420 of the gesture recognition apparatus can acquire a frequency signal of 18 kHz as an input signal. For example, when the frequencies of the audio signal output from the speaker arrays 411 and 412 and the audio signal obtained from the microphone 420 are analyzed to be the same, the gesture recognition apparatus can recognize that there is no gesture of the user.

또한, 예를 들어, 제스처 인식 장치는, 스피커(411)에서 제1 대역의 비 가청 순음 신호로서 22kHz의 주파수 신호를 출력하고, 스피커(412)에서 제2 대역의 비 가청 순음 신호로서 18kHz의 주파수 신호를 출력하였다고 가정하자. 이때, 제스처 인식 장치의 마이크(420)는, 22kHz의 주파수 신호를 입력 신호로서 획득하고, 19kHz의 주파수 신호를 입력 신호로서 획득하였다고 가정하자. For example, the gesture recognition apparatus outputs a frequency signal of 22 kHz as a non-audible pure tone signal of the first band in the speaker 411 and a frequency signal of 18 kHz as a non-audible pure tone signal of the second band in the speaker 412 Signal. Here, it is assumed that the microphone 420 of the gesture recognition apparatus obtains a frequency signal of 22 kHz as an input signal and a frequency signal of 19 kHz as an input signal.

가령, 제스처 인식 장치는, 스피커(411)에서 출력된 오디오 신호와 마이크(420)에서 획득된 오디오 신호의 주파수가 동일하다고 분석될 경우, 스피커(411)로부터 마이크(420) 사이에 위치에서 사용자의 제스처가 없다고 인식할 수 있다. For example, when the frequency of the audio signal output from the speaker 411 and that of the audio signal obtained from the microphone 420 are analyzed to be the same, I can recognize that there is no gesture.

또한, 제스처 인식 장치는, 스피커(412)에서 출력된 오디오 신호와 마이크(420)에서 획득된 오디오 신호의 주파수가 다르다고 분석될 경우, 스피커(412)로부터 마이크(420) 사이에 위치에서 사용자의 제스처가 있다고 인식할 수 있다. 이때, 제스처 인식 장치는, 사용자의 제스처가 오른쪽 화면에서 있다고 인식할 수 있다. 또한, 경우에 따라서, 제스처 인식 장치는, 사용자의 제스처가 오른쪽 화면에서 있다고 인식한 동작을 디스플레이 장치의 제어와 맵핑하여 디스플레이되는 화면의 오른쪽 화면으로 화면 이동을 제어하여 디스플레이 장치를 제어할 수도 있다.The gesture recognition apparatus may further include a gesture recognizing unit 420 for receiving a gesture of a user in a position between the speaker 412 and the microphone 420 when the frequency of the audio signal output from the speaker 412 and the audio signal obtained from the microphone 420 are analyzed to be different. . At this time, the gesture recognition apparatus can recognize that the gesture of the user is on the right screen. In some cases, the gesture recognition device may control the display device by mapping the operation recognized by the user that the gesture is on the right screen to the control of the display device, and controlling the screen movement to the right screen of the displayed screen.

도 5는 일실시예에 따른 제스처 인식 방법을 수행하는 제스처 인식 장치를 나타내는 것이다.FIG. 5 illustrates a gesture recognition apparatus that performs a gesture recognition method according to an embodiment.

도 5를 참조하면, 제스처 인식 장치는, 스피커 어레이(511, 512, 513, 514)와 마이크(520)는 오디오 시스템의 구성 그대로를 포함하여 구성될 수 있다.5, the gesture recognition apparatus may include speaker arrays 511, 512, 513, and 514 and a microphone 520 including a configuration of an audio system.

일실시예에 따르면, 제스처 인식 장치의 스피커(511)에서 제1 대역의 비 가청 순음 신호를 방출할 수 있다. 또한, 제스처 인식 장치의 스피커(512)에서 제2 대역의 비 가청 순음 신호를 방출할 수 있다. 또한, 제스처 인식 장치의 스피커(513)에서 제3 대역의 비 가청 순음 신호를 방출할 수 있다. 또한, 제스처 인식 장치의 스피커(514)에서 제4 대역의 비 가청 순음 신호를 방출할 수 있다. According to one embodiment, the non-audible pure tone signal of the first band may be emitted at the speaker 511 of the gesture recognition apparatus. Also, the non-audible pure tone signal of the second band can be emitted from the speaker 512 of the gesture recognition apparatus. Also, the non-audible pure tone signal of the third band can be emitted from the speaker 513 of the gesture recognition apparatus. It is also possible to emit a non-audible pure tone signal of the fourth band at the speaker 514 of the gesture recognition apparatus.

이때, 제스처 인식 장치의 마이크(520)는 제1 대역의 비 가청 순음 신호를 획득할 수 있다. 또한, 제스처 인식 장치의 마이크(520)는 제2 대역의 비 가청 순음 신호를 획득할 수 있다. 또한, 제스처 인식 장치의 마이크(520)는 제3 대역의 비 가청 순음 신호를 획득할 수 있다. 또한, 제스처 인식 장치의 마이크(520)는 제4 대역의 비 가청 순음 신호를 획득할 수 있다.At this time, the microphone 520 of the gesture recognition apparatus can acquire the non-audible pure tone signal of the first band. In addition, the microphone 520 of the gesture recognition apparatus can acquire the non-audible pure tone signal of the second band. In addition, the microphone 520 of the gesture recognition apparatus can acquire the non-audible pure tone signal of the third band. In addition, the microphone 520 of the gesture recognition apparatus can acquire the non-audible pure tone signal of the fourth band.

예를 들어, 제스처 인식 장치는, 스피커(511)에서 제1 대역의 비 가청 순음 신호로서 21kHz의 주파수 신호를 출력할 수 있다. 또한, 제스처 인식 장치는, 스피커(512)에서 제2 대역의 비 가청 순음 신호로서 22kHz의 주파수 신호를 출력할 수 있다. 또한, 제스처 인식 장치는, 스피커(513)에서 제3 대역의 비 가청 순음 신호로서 15Hz의 주파수 신호를 출력할 수 있다. 또한, 제스처 인식 장치는, 스피커(514)에서 제4 대역의 비 가청 순음 신호로서 5Hz의 주파수 신호를 출력할 수 있다. For example, the gesture recognition apparatus can output a frequency signal of 21 kHz as a non-audible pure tone signal of the first band in the speaker 511. [ Also, the gesture recognition apparatus can output a frequency signal of 22 kHz as the non-audible pure tone signal of the second band by the speaker 512. Also, the gesture recognition apparatus can output a frequency signal of 15 Hz as a non-audible pure tone signal of the third band by the speaker 513. [ Further, the gesture recognition apparatus can output a frequency signal of 5 Hz as a non-audible pure tone signal of the fourth band by the speaker 514.

이때, 제스처 인식 장치의 마이크(520)는, 21kHz의 주파수 신호를 입력 신호로서 획득할 수 있다. 또한, 제스처 인식 장치의 마이크(520)는, 22kHz의 주파수 신호를 입력 신호로서 획득할 수 있다. 또한, 제스처 인식 장치의 마이크(520)는, 15Hz의 주파수 신호를 입력 신호로서 획득할 수 있다. 또한, 제스처 인식 장치의 마이크(520)는, 5Hz의 주파수 신호를 입력 신호로서 획득할 수 있다. 가령, 제스처 인식 장치는, 스피커 어레이(511, 512, 513, 514)에서 출력된 오디오 신호와 마이크(520)에서 획득된 오디오 신호의 주파수가 동일하다고 분석될 경우, 사용자의 제스처가 없다고 인식할 수 있다.At this time, the microphone 520 of the gesture recognition apparatus can acquire a frequency signal of 21 kHz as an input signal. In addition, the microphone 520 of the gesture recognition apparatus can acquire a frequency signal of 22 kHz as an input signal. Further, the microphone 520 of the gesture recognition apparatus can acquire a frequency signal of 15 Hz as an input signal. Further, the microphone 520 of the gesture recognition apparatus can acquire a frequency signal of 5 Hz as an input signal. For example, when the frequencies of the audio signal output from the speaker arrays 511, 512, 513, and 514 and the audio signal obtained from the microphone 520 are analyzed to be equal, the gesture recognition apparatus can recognize that there is no gesture of the user have.

또한, 예를 들어, 제스처 인식 장치는, 스피커(511)에서 제1 대역의 비 가청 순음 신호로서 21kHz의 주파수 신호를 출력하고, 스피커(512)에서 제2 대역의 비 가청 순음 신호로서 22kHz의 주파수 신호를 출력하였다고 가정하자. 또한, 제스처 인식 장치는, 스피커(513)에서 제3 대역의 비 가청 순음 신호로서 15Hz의 주파수 신호를 출력하고, 스피커(514)에서 제4 대역의 비 가청 순음 신호로서 5Hz의 주파수 신호를 출력하였다고 가정하자. For example, the gesture recognition apparatus outputs a frequency signal of 21 kHz as a non-audible pure tone signal of the first band at the speaker 511 and a frequency signal of 22 kHz as a non- audible pure tone signal of the second band at the speaker 512 Signal. The gesture recognition apparatus outputs a frequency signal of 15 Hz as the non-audible pure tone signal of the third band by the speaker 513 and outputs a frequency signal of 5 Hz as the non-audible pure tone signal of the fourth band by the speaker 514 Let's assume.

이때, 제스처 인식 장치의 마이크(520)는, 20998Hz의 주파수 신호를 입력 신호로서 획득하고, 22kHz의 주파수 신호를 입력 신호로서 획득하였다고 가정하자. 또한, 제스처 인식 장치의 마이크(520)는, 15Hz의 주파수 신호를 입력 신호로서 획득하고, 5Hz의 주파수 신호를 입력 신호로서 획득하였다고 가정하자. Here, it is assumed that the microphone 520 of the gesture recognition apparatus obtains a frequency signal of 20998 Hz as an input signal and a frequency signal of 22 kHz as an input signal. It is also assumed that the microphone 520 of the gesture recognition apparatus obtains a frequency signal of 15 Hz as an input signal and a frequency signal of 5 Hz as an input signal.

가령, 제스처 인식 장치는, 스피커(512, 513, 514)에서 출력된 오디오 신호와 마이크(520)에서 획득된 오디오 신호의 주파수가 동일하다고 분석될 경우, 스피커(512, 513, 514)로부터 마이크(520) 사이에 위치에서 사용자의 제스처가 없다고 인식할 수 있다. 또한, 제스처 인식 장치는, 스피커(511)에서 출력된 오디오 신호와 마이크(520)에서 획득된 오디오 신호의 주파수가 다르다고 분석될 경우, 스피커(511)로부터 마이크(520) 사이에 위치에서 사용자의 제스처가 있다고 인식할 수 있다. The gesture recognition apparatus may be configured such that the gesture recognition apparatus receives a sound signal from the speaker 512, 513, 514 when the frequency of the audio signal output from the speaker 512, 513, 520, that there is no gesture of the user. When the frequency of the audio signal output from the speaker 511 and that of the audio signal obtained from the microphone 520 are analyzed to be different from each other, the gesture recognition apparatus determines that the user's gesture .

이때, 제스처 인식 장치는, 사용자의 제스처가 왼쪽 화면으로 가까운 곳에서 있다고 인식할 수 있다. 또한, 경우에 따라서, 제스처 인식 장치는, 사용자의 제스처가 왼쪽 화면으로 가까운 곳에서 있다고 인식한 동작을 디스플레이 장치의 제어와 맵핑하여 디스플레이되는 화면의 왼쪽 화면과 상위 화면으로 화면 이동을 제어하여 디스플레이 장치를 제어할 수도 있다.At this time, the gesture recognition apparatus can recognize that the gesture of the user is close to the left screen. In some cases, the gesture recognition device may map a gesture of the user to a control of the display device, mapping the gesture recognized by the user to a gesture close to the left screen, to control the screen movement to the left screen and the upper screen, .

도 6은 일실시예에 따른 제스처 인식 장치로서, 제스처 인식 장치를 나타내는 블록도이다.6 is a block diagram illustrating a gesture recognition apparatus according to an embodiment.

먼저, 도 6을 참조하면, 제스처 인식 장치는 스피커 어레이(610), 마이크(620), 오디오 신호 분석부(630), 제스처 인식부(640), 스피커 제어부(650)를 포함하여 구성될 수 있다. 경우에 따라서, 제스처 인식 장치는 스피커 어레이(610), 마이크(620), 오디오 신호 분석부(630), 제스처 인식부(640)를 포함하여 구성될 수도 있다. 스피커 어레이(610), 마이크(620), 오디오 신호 분석부(630), 제스처 인식부(640), 스피커 제어부(650)는, 인클로저(enclosure), 진동판, 센서, 전자 회로, 전기 회로, 집적 회로, 전자 소자, 자기 소자 중 적어도 하나를 포함하여 구성될 수도 있다. 또한, 경우에 따라서, 스피커 어레이(610), 마이크(620), 오디오 신호 분석부(630), 제스처 인식부(640), 스피커 제어부(650)는, 인클로저(enclosure), 프로세서, 메모리, 데이터 송수신기 중 적어도 하나를 포함할 수도 있으나, 이에 한정되지는 않는다. 6, the gesture recognition apparatus may include a speaker array 610, a microphone 620, an audio signal analysis unit 630, a gesture recognition unit 640, and a speaker control unit 650 . The gesture recognition apparatus may include a speaker array 610, a microphone 620, an audio signal analyzing unit 630, and a gesture recognizing unit 640. The speaker array 610, the microphone 620, the audio signal analysis unit 630, the gesture recognition unit 640 and the speaker control unit 650 may be used as an enclosure, a diaphragm, a sensor, an electronic circuit, an electric circuit, , An electronic device, and a magnetic device. In some cases, the speaker array 610, the microphone 620, the audio signal analysis unit 630, the gesture recognition unit 640, and the speaker control unit 650 may be implemented as an enclosure, a processor, a memory, a data transceiver But the present invention is not limited thereto.

스피커 어레이(610)는, 오디오 신호를 출력할 수 있다. 이때, 오디오 신호는, 비 가청 대역의 순음 신호일 수 있다.The speaker array 610 can output an audio signal. At this time, the audio signal may be a pure tone signal in the non-audible band.

마이크(620)는, 출력된 오디오 신호가 사용자의 제스처에 의하여 변화된 오디오 신호를 획득할 수 있다.The microphone 620 can obtain the audio signal whose output audio signal has been changed by the user's gesture.

오디오 신호 분석부(630)는, 획득한 오디오 신호를 분석할 수 있다. 구체적으로, 오디오 신호 분석부(630)는, 오디오 신호의 주파수의 변화를 분석할 수 있다. 또한, 오디오 신호 분석부(630)는, 오디오 신호를 대역 통과 필터를 이용하여 복수의 순음 신호로 분리하여 분석할 수도 있다.The audio signal analyzing unit 630 can analyze the obtained audio signal. Specifically, the audio signal analyzing unit 630 can analyze a change in the frequency of the audio signal. In addition, the audio signal analyzing unit 630 may separate the audio signal into a plurality of pure sound signals by using a band pass filter.

제스처 인식부(640)는, 오디오 신호의 분석 결과에 따라 사용자의 제스처를 인식할 수 있다.The gesture recognition unit 640 can recognize the gesture of the user according to the analysis result of the audio signal.

스피커 제어부(650)는, 스피커 어레이를 구성하는 복수의 스피커들 각각에 대해 서로 다른 주파수를 나타내는 오디오 신호를 제공할 수 있다. 또한, 경우에 따라서, 스피커 제어부(650)는, 스피커 어레이를 구성하는 복수의 스피커들 각각에 대해 서로 다른 파장 또는 진동수를 나타내는 오디오 신호를 제공할 수도 있다.The speaker control unit 650 may provide an audio signal indicating a different frequency to each of a plurality of speakers constituting the speaker array. In some cases, the speaker control unit 650 may provide an audio signal indicating a different wavelength or frequency to each of the plurality of speakers constituting the speaker array.

상기에서 설명한 바와 같이, 제스처 인식 장치는, 사용자의 제스처 인식 및 사용자의 디바이스 제어를 위하여, 제어하고자 하는 디바이스의 스피커 어레이(610)를 통해 비 가청 대역의 순음 신호를 발생 시키고, 마이크(620)를 통해 상기 음향 신호를 취득할 수 있다. 물론, 이때, 제어하고자하는 디바이스는 노트북, 태블릿, 스마트폰 등이 될 수도 있다. 제스처 인식 장치는, 취득 된 신호를 분석하여, 사용자가 별도의 디바이스를 착용하지 않고도 사용자의 제스처를 인식하여 기기를 제어할 수도 있다.As described above, the gesture recognition device generates a pure tone signal of a non-audible band through a speaker array 610 of a device to be controlled and controls the microphone 620 The sound signal can be obtained through the above-described method. Of course, at this time, the device to be controlled may be a notebook, a tablet, a smart phone, or the like. The gesture recognition device may analyze the acquired signal and may control the device by recognizing the user's gesture without wearing a separate device.

이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPA(field programmable array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.The apparatus described above may be implemented as a hardware component, a software component, and / or a combination of hardware components and software components. For example, the apparatus and components described in the embodiments may be implemented within a computer system, such as, for example, a processor, a controller, an arithmetic logic unit (ALU), a digital signal processor, a microcomputer, a field programmable array (FPA) A programmable logic unit (PLU), a microprocessor, or any other device capable of executing and responding to instructions. The processing device may execute an operating system (OS) and one or more software applications running on the operating system. The processing device may also access, store, manipulate, process, and generate data in response to execution of the software. For ease of understanding, the processing apparatus may be described as being used singly, but those skilled in the art will recognize that the processing apparatus may have a plurality of processing elements and / As shown in FIG. For example, the processing unit may comprise a plurality of processors or one processor and one controller. Other processing configurations are also possible, such as a parallel processor.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.The software may include a computer program, code, instructions, or a combination of one or more of the foregoing, and may be configured to configure the processing device to operate as desired or to process it collectively or collectively Device can be commanded. The software and / or data may be in the form of any type of machine, component, physical device, virtual equipment, computer storage media, or device , Or may be permanently or temporarily embodied in a transmitted signal wave. The software may be distributed over a networked computer system and stored or executed in a distributed manner. The software and data may be stored on one or more computer readable recording media.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to an embodiment may be implemented in the form of a program command that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like, alone or in combination. The program instructions to be recorded on the medium may be those specially designed and configured for the embodiments or may be available to those skilled in the art of computer software. Examples of computer-readable media include magnetic media such as hard disks, floppy disks and magnetic tape; optical media such as CD-ROMs and DVDs; magnetic media such as floppy disks; Magneto-optical media, and hardware devices specifically configured to store and execute program instructions such as ROM, RAM, flash memory, and the like. Examples of program instructions include machine language code such as those produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다. 그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments. For example, it is to be understood that the techniques described may be performed in a different order than the described methods, and / or that components of the described systems, structures, devices, circuits, Lt; / RTI > or equivalents, even if it is replaced or replaced. Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.

Claims (1)

제스처 인식 장치가 수행하는 제스처 인식 방법에 있어서,
오디오 신호를 출력하는 단계;
상기 출력된 오디오 신호가 사용자의 제스처에 의하여 변화된 오디오 신호를 획득하는 단계;
상기 획득한 오디오 신호를 분석하는 단계; 및
상기 오디오 신호의 분석 결과에 따라 상기 사용자의 제스처를 인식하는 단계;
를 포함하는 제스처 인식 방법.
A gesture recognition method performed by a gesture recognition device,
Outputting an audio signal;
The output audio signal obtaining an audio signal changed by a user's gesture;
Analyzing the obtained audio signal; And
Recognizing a gesture of the user according to an analysis result of the audio signal;
And a gesture recognition method.
KR1020150020157A 2015-02-10 2015-02-10 Method and apparatus for recognizing gesture KR20160097821A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150020157A KR20160097821A (en) 2015-02-10 2015-02-10 Method and apparatus for recognizing gesture

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150020157A KR20160097821A (en) 2015-02-10 2015-02-10 Method and apparatus for recognizing gesture

Publications (1)

Publication Number Publication Date
KR20160097821A true KR20160097821A (en) 2016-08-18

Family

ID=56874297

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150020157A KR20160097821A (en) 2015-02-10 2015-02-10 Method and apparatus for recognizing gesture

Country Status (1)

Country Link
KR (1) KR20160097821A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023216922A1 (en) * 2022-05-07 2023-11-16 华为技术有限公司 Target device selection identification method, terminal device, system and storage medium

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023216922A1 (en) * 2022-05-07 2023-11-16 华为技术有限公司 Target device selection identification method, terminal device, system and storage medium

Similar Documents

Publication Publication Date Title
EP2891955B1 (en) In-vehicle gesture interactive spatial audio system
CN109716780B (en) Electronic device and control method thereof
US10200805B2 (en) Changing spatial audio fields
EP3535754B1 (en) Improved reception of audio commands
US20130163794A1 (en) Dynamic control of audio on a mobile device with respect to orientation of the mobile device
US9766852B2 (en) Non-audio notification of audible events
WO2014024009A1 (en) Spatial audio user interface apparatus
KR20200006002A (en) Systems and methods for providing automatic haptic generation for video content
US11138987B2 (en) System and method to distinguish sources in a multiple audio source environment
CN110234043B (en) Sound signal processing method, device and equipment based on microphone array
CN114728204A (en) Visual extension of sound data for applications/services including gaming applications/services
KR20140089858A (en) Electronic apparatus and Method for controlling electronic apparatus thereof
KR102623998B1 (en) Electronic device for speech recognition and method thereof
CN107562402B (en) Controlling audio signal parameters
KR20160097821A (en) Method and apparatus for recognizing gesture
JP5100532B2 (en) Information processing apparatus, control method thereof, and program
US20220212108A1 (en) Audio frequency signal processing method and apparatus, terminal and storage medium
US9666041B2 (en) Haptic microphone
US10665203B2 (en) User interface apparatus and user interface method
US9445210B1 (en) Waveform display control of visual characteristics
US20140059549A1 (en) Application recognition system and method
US12022162B2 (en) Voice processing method and apparatus, electronic device, and computer readable storage medium
EP3343338A1 (en) Information processing device, information processing method, and program
KR20110067755A (en) Method and apparatus for outputting audio signal in portable terminal
KR20090128187A (en) Apparatus and method for controlling function of image out using sound signal

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid