KR20160097821A - Method and apparatus for recognizing gesture - Google Patents
Method and apparatus for recognizing gesture Download PDFInfo
- Publication number
- KR20160097821A KR20160097821A KR1020150020157A KR20150020157A KR20160097821A KR 20160097821 A KR20160097821 A KR 20160097821A KR 1020150020157 A KR1020150020157 A KR 1020150020157A KR 20150020157 A KR20150020157 A KR 20150020157A KR 20160097821 A KR20160097821 A KR 20160097821A
- Authority
- KR
- South Korea
- Prior art keywords
- gesture recognition
- signal
- gesture
- audio signal
- recognition apparatus
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/107—Static hand or arm
-
- G06K9/00375—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
본 발명은, 제스처 인식 방법 및 장치에 관한 것이다.The present invention relates to a gesture recognition method and apparatus.
현대 사회에서 노트북이나 태블릿, 스마트 폰 등의 다양한 전자 기기들이 널리 사용되고 있다. 이러한 기기들은 마우스, 키보드, 터치 스크린 등을 통해 입력을 받고 제어되게 되는데 이러한 방법들은 부가적인 장치를 필요로 하거나 일부 상황에 있어서 사용자의 기기의 제어 자유도를 제한하게 된다. Various electronic devices such as notebook computers, tablets and smart phones are widely used in the modern society. These devices receive and control inputs through a mouse, keyboard, touch screen, etc. These methods require additional devices or, in some situations, limit the control freedom of the user's device.
기존의 사용자의 제어 동작을 인식하는 방법은 부가적인 장치를 필요로 하기 때문에 새로운 장치를 구비해야 하고 이로 인하여 제한적인 상황에서만 사용이 가능하다는 문제점이 존재한다.There is a problem that a method of recognizing the control operation of the existing user requires a new device because it requires an additional device and can be used only in a limited situation.
이에, 사용자의 기기의 제어 자유도를 제한하지 않고, 사용자의 제어 동작을 인식할 수 있는 기술을 제안하고자 한다.Accordingly, a technique capable of recognizing a user's control operation without limiting the degree of control of the user's apparatus is proposed.
본 발명은 상술한 문제점을 모두 해결하는 것을 목적으로 한다.The present invention aims at solving all of the above problems.
본 발명은, 제어하고자 하는 디바이스의 스피커 어레이 및 마이크를 이용하여 음향 신호의 변화를 감지하고, 이를 통해 사용자의 제스처를 인식하여 기기를 제어하는 것을 다른 목적으로 한다.Another object of the present invention is to detect a change in a sound signal using a speaker array and a microphone of a device to be controlled, and to recognize the gesture of the user through the speaker array and the microphone, thereby controlling the device.
상기한 바와 같은 본 발명의 목적을 달성하고, 후술하는 본 발명의 특징적인 효과를 실현하기 위한, 본 발명의 특징적인 구성은 하기와 같다.In order to accomplish the objects of the present invention as described above and achieve the characteristic effects of the present invention described below, the characteristic structure of the present invention is as follows.
일실시예에 따른, 제스처 인식 장치가 수행하는 제스처 인식 방법에 있어서, 제스처 인식 방법은, 오디오 신호를 출력하는 단계; 상기 출력된 오디오 신호가 사용자의 제스처에 의하여 변화된 오디오 신호를 획득하는 단계; 상기 획득한 오디오 신호를 분석하는 단계; 및 상기 오디오 신호의 분석 결과에 따라 상기 사용자의 제스처를 인식하는 단계;를 포함할 수 있다.According to an embodiment, there is provided a gesture recognition method performed by a gesture recognition apparatus, comprising: outputting an audio signal; The output audio signal obtaining an audio signal changed by a user's gesture; Analyzing the obtained audio signal; And recognizing the gesture of the user according to an analysis result of the audio signal.
다른 실시예에 따른, 제스처 인식 장치가 수행하는 제스처 인식 방법에 있어서, 제스처 인식 방법은, 스피커 어레이를 구성하는 복수의 스피커들 각각에 대해 서로 다른 주파수를 나타내는 오디오 신호를 제공하는 단계;를 더 포함할 수 있다.According to another embodiment, there is provided a gesture recognition method performed by a gesture recognition device, the method further comprising: providing an audio signal representing a different frequency for each of a plurality of speakers constituting the speaker array can do.
또 다른 실시예에 따른, 제스처 인식 장치가 수행하는 제스처 인식 방법에 있어서, 상기 오디오 신호는, 비 가청 대역의 순음 신호인 것을 포함할 수 있다.According to still another embodiment of the present invention, a gesture recognition method performed by a gesture recognition apparatus may include a gesture recognition method, wherein the audio signal is a pure tone signal of an un-audible band.
또 다른 실시예에 따른, 제스처 인식 장치가 수행하는 제스처 인식 방법에 있어서, 상기 신호를 분석하는 단계는, 상기 오디오 신호의 주파수의 변화를 분석하는 것을 포함할 수 있다.In a gesture recognition method performed by a gesture recognition apparatus according to another embodiment, the step of analyzing the signal may include analyzing a change in the frequency of the audio signal.
또 다른 실시예에 따른, 제스처 인식 장치가 수행하는 제스처 인식 방법에 있어서, 상기 신호를 분석하는 단계는, 상기 오디오 신호를 대역 통과 필터를 이용하여 복수의 순음 신호로 분리하여 분석하는 것을 포함할 수 있다.According to yet another embodiment, the gesture recognition method performed by the gesture recognition device may include analyzing the signal by separating the audio signal into a plurality of pure sound signals using a bandpass filter have.
일실시예에 따른, 제스처 인식 장치에 있어서, 제스처 인식 장치는, 오디오 신호를 출력하는 스피커 어레이; 상기 출력된 오디오 신호가 사용자의 제스처에 의하여 변화된 오디오 신호를 획득하는 마이크; 상기 획득한 오디오 신호를 분석하는 오디오 신호 분석부; 및 상기 오디오 신호의 분석 결과에 따라 상기 사용자의 제스처를 인식하는 제스처 인식부;를 포함할 수 있다.According to an embodiment, there is provided a gesture recognition apparatus comprising: a speaker array for outputting an audio signal; A microphone for outputting the audio signal obtained by the user's gesture; An audio signal analyzer for analyzing the obtained audio signal; And a gesture recognition unit for recognizing the gesture of the user according to an analysis result of the audio signal.
다른 실시예에 따른, 제스처 인식 장치에 있어서, 제스처 인식 장치는, 상기 스피커 어레이를 구성하는 복수의 스피커들 각각에 대해 서로 다른 주파수를 나타내는 오디오 신호를 제공하는 스피커 제어부를 더 포함할 수 있다.According to another embodiment, in the gesture recognition apparatus, the gesture recognition apparatus may further include a speaker control unit for providing an audio signal indicating a different frequency to each of a plurality of speakers constituting the speaker array.
또 다른 실시예에 따른, 제스처 인식 장치에 있어서, 상기 오디오 신호는, 비 가청 대역의 순음 신호인 것을 포함할 수 있다.In a gesture recognition apparatus according to another embodiment, the audio signal may include a non-audible band pure tone signal.
또 다른 실시예에 따른, 제스처 인식 장치에 있어서, 상기 오디오 신호 분석부는, 상기 오디오 신호의 주파수의 변화를 분석하는 것을 포함할 수 있다.In yet another embodiment, the gestural recognition apparatus may include analyzing a change in the frequency of the audio signal.
또 다른 실시예에 따른, 제스처 인식 장치에 있어서, 상기 오디오 신호 분석부는, 상기 오디오 신호를 대역 통과 필터를 이용하여 복수의 순음 신호로 분리하여 분석하는 것을 포함할 수 있다.According to another embodiment, the gestural recognition apparatus may include analyzing the audio signal by separating the audio signal into a plurality of pure sound signals using a band pass filter.
본 발명은, 제어하고자 하는 디바이스의 스피커 어레이 및 마이크를 이용하여 음향 신호의 변화를 감지하고, 이를 통해 사용자의 제스처를 인식하여 기기를 제어할 수 있는 효과가 있다.The present invention has an effect of detecting a change of a sound signal by using a speaker array and a microphone of a device to be controlled, and by recognizing the gesture of the user through the speaker array and the microphone, the device can be controlled.
본 발명은, 사용자의 디바이스 제어를 위하여 사용자가 별도의 디바이스를 착용하지 않고도 사용자의 제스처를 인식하여 기기를 제어할 수 있는 효과가 있다.The present invention has an effect that a user can control a device by recognizing a gesture of a user without wearing a separate device for controlling the device of the user.
도 1은 일실시예에 따른 제스처 인식 장치가 수행하는 제스처 인식 방법으로서, 제스처 인식 방법을 나타내는 흐름도이다.
도 2는 일실시예에 따른 제스처 인식 장치가 수행하는 제스처 인식 방법을 나타내는 개념도이다.
도 3은 일실시예에 따른 제스처 인식 장치가 수행하는 제스처 인식 방법의 흐름을 나타내는 것이다.
도 4는 일실시예에 따른 제스처 인식 장치를 나타내는 것이다.
도 5는 일실시예에 따른 제스처 인식 방법을 수행하는 제스처 인식 장치를 나타내는 것이다.
도 6은 일실시예에 따른 제스처 인식 장치로서, 제스처 인식 장치를 나타내는 블록도이다.1 is a flowchart illustrating a gesture recognition method performed by a gesture recognition apparatus according to an exemplary embodiment.
2 is a conceptual diagram illustrating a gesture recognition method performed by the gesture recognition apparatus according to an exemplary embodiment.
3 is a flowchart of a gesture recognition method performed by the gesture recognition apparatus according to an exemplary embodiment of the present invention.
4 shows a gesture recognition apparatus according to an embodiment.
FIG. 5 illustrates a gesture recognition apparatus that performs a gesture recognition method according to an embodiment.
6 is a block diagram illustrating a gesture recognition apparatus according to an embodiment.
이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다. DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.
도 1은 일실시예에 따른 제스처 인식 장치가 수행하는 제스처 인식 방법으로서, 제스처 인식 방법을 나타내는 흐름도이다.1 is a flowchart illustrating a gesture recognition method performed by a gesture recognition apparatus according to an exemplary embodiment.
제스처 인식 장치는, 인클로저(enclosure), 진동판, 센서, 전자 회로, 전기 회로, 집적 회로, 전자 소자, 자기 소자 중 적어도 하나를 포함하여 구성될 수도 있다. 또한, 경우에 따라서, 제스처 인식 장치는, 프로세서, 메모리, 데이터 송수신기 중 적어도 하나를 포함할 수도 있으나, 이에 한정되지는 않는다.The gesture recognition device may be configured to include at least one of an enclosure, a diaphragm, a sensor, an electronic circuit, an electrical circuit, an integrated circuit, an electronic device, and a magnetic device. Also, as the case may be, the gesture recognition device may include at least one of a processor, a memory, and a data transceiver, but is not limited thereto.
제스처 인식 장치가 수행하는 제스처 인식 방법은 하기와 같은 단계를 포함하여 구성될 수도 있다.The gesture recognition method performed by the gesture recognition device may include the following steps.
단계(S101)에서, 제스처 인식 장치는, 스피커 어레이를 구성하는 복수의 스피커들 각각에 대해 서로 다른 주파수를 나타내는 오디오 신호를 제공할 수 있다. 이때, 오디오 신호는, 비 가청 대역의 순음 신호일 수 있다.In step S101, the gesture recognition device may provide an audio signal indicating a different frequency to each of a plurality of speakers constituting the speaker array. At this time, the audio signal may be a pure tone signal in the non-audible band.
단계(S102)에서, 제스처 인식 장치는, 오디오 신호를 출력할 수 있다. 이때, 오디오 신호도, 비 가청 대역의 순음 신호일 수도 있다.In step S102, the gesture recognition apparatus can output an audio signal. At this time, the audio signal may be a pure tone signal of a non-audible band.
단계(S103)에서, 제스처 인식 장치는, 출력된 오디오 신호가 사용자의 제스처에 의하여 변화된 오디오 신호를 획득할 수 있다.In step S103, the gesture recognition apparatus can obtain the audio signal whose output audio signal has been changed by the user's gesture.
단계(S104)에서, 제스처 인식 장치는, 획득한 오디오 신호를 분석할 수 있다.In step S104, the gesture recognition apparatus can analyze the obtained audio signal.
구체적으로, 제스처 인식 장치는, 오디오 신호의 주파수의 변화를 분석 할 수 있다.Specifically, the gesture recognition apparatus can analyze a change in frequency of an audio signal.
또한, 제스처 인식 장치는, 오디오 신호를 대역 통과 필터를 이용하여 복수의 순음 신호로 분리하여 분석할 수도 있다.Further, the gesture recognition apparatus may separate the audio signal into a plurality of pure sound signals by using a band pass filter.
단계(S105)에서, 제스처 인식 장치는, 오디오 신호의 분석 결과에 따라 사용자의 제스처를 인식할 수 있다.In step S105, the gesture recognition device can recognize the gesture of the user according to the analysis result of the audio signal.
도 2는 일실시예에 따른 제스처 인식 장치가 수행하는 제스처 인식 방법을 나타내는 개념도이다.2 is a conceptual diagram illustrating a gesture recognition method performed by the gesture recognition apparatus according to an exemplary embodiment.
먼저, 도 2를 참조하면, 제스처 인식 장치는, 스피커 어레이(211, 212) 및 마이크(220)를 포함하여 구성될 수 있는 것을 알 수 있다.2, the gesture recognition apparatus can be configured to include
제스처 인식 장치는, 노트북 또는 태블릿, 스마트 폰과 같은 단말의 스피커 어레이 및 마이크를 이용하여, 스피커 어레이(211, 212)에서 출력되고 마이크(220)로 입력 되는 음향 신호의 입력 변화를 감지할 수 있다. 이때, 경우에 따라서, 제스처 인식 장치는, 음향 신호의 변화를 사용자의 제어 제스쳐와 맵핑시켜 디바이스를 제어할 수도 있다.The gesture recognition apparatus can detect an input change of an acoustic signal output from the
예를 들어, 사용자가 제어 하고자 하는 디바이스가 노트북이며, 노트북은 1개 이상의 스피커 어레이를 보유하고 있고, 1개 이상의 소리를 수신할 수 있는 마이크로 구성될 수도 있다.For example, a device that a user desires to control is a notebook, and a notebook may have one or more speaker arrays and may be micro-configurable to receive one or more sounds.
이때, 제스처 인식 장치는, 스피커 어레이(211, 212)와 마이크(220)는 노트북의 구성 그대로를 포함하여 구성될 수도 있으며, 경우에 따라서 스피커 어레이(211, 212)와 마이크(220)를 추가로 장치에 부착하여 구성될 수도 있다.At this time, the gesture recognition device may include the
제스처 인식 장치는, 스피커 어레이(211, 212)에서 출력되어 마이크(220)로 입력되는 오디오 신호를 분석하여 사용자의 제스처를 인식할 수 있다.The gesture recognition apparatus can recognize a gesture of a user by analyzing an audio signal output from the
도 3은 일실시예에 따른 제스처 인식 장치가 수행하는 제스처 인식 방법의 흐름을 나타내는 것이다.3 is a flowchart of a gesture recognition method performed by the gesture recognition apparatus according to an exemplary embodiment of the present invention.
제스처 인식 방법은 경우에 따라서, 하기와 같은 단계를 포함하여 구성될 수도 있다.The gesture recognition method may be configured to include the following steps as occasion demands.
단계(S301)에서, 제스처 인식 장치는, 스피커 어레이를 통해 각각 주어진 주파수의 소리를 발생시킬 수 있다. 구체적으로, 제스처 인식 장치는, 스피커 어레이에서 서로 다른 대역의 비 가청 순음 신호를 방출할 수 있다.In step S301, the gesture recognition apparatus can generate sound of a given frequency through the speaker array, respectively. Specifically, the gesture recognition apparatus can emit different non-audible pure tone signals in the speaker array.
제스처 인식 장치는, 모듈을 통해 오디오 신호를 생성할 수 있다. 이때, 생성되는 오디오 신호는 비 가청 대역의 순음 신호일 수 있다. 일반적인 사람의 가청 주파수는 20Hz ~ 20000Hz로서, 비 가청 대역의 순음 신호는 20Hz보다 미만 또는 20kHz보다 초과인 대역의 주파수일 수 있다. 또한, 경우에 따라서, 제스처 인식 장치는, 보통의 사용자가 잘 듣지 못하는, 60Hz, 18kHz, 22kHz 등의 순음 신호를 생성할 수도 있다. 비 가청대역의 순음 신호는 사람에게 들리지 않아 인지할 수 없지만 스피커로 생성하고 마이크로 취득이 가능한 오디오 신호이다.The gesture recognition device can generate an audio signal through the module. At this time, the generated audio signal may be a pure tone signal of the non-audible band. The audible frequency of a typical person is 20 Hz to 20000 Hz, and the pure sound signal in the non-audible band may be a frequency in a band of less than 20 Hz or more than 20 kHz. In some cases, the gesture recognition device may generate a pure tone signal such as 60 Hz, 18 kHz, 22 kHz, etc., which the normal user does not hear well. A pure-tone signal in the non-audible band is an audio signal that can not be perceived by humans but can not be recognized, but is generated by a speaker and micro-acquired.
물론, 경우에 따라서, 제스처 인식 장치는, 가청 주파수인 20Hz ~ 20000Hz의 오디오 신호를 생성할 수도 있다.As a matter of course, the gesture recognition apparatus may generate an audio signal of 20 Hz to 20000 Hz which is an audio frequency.
단계(S302)에서, 제스처 인식 장치는, 발생 된 신호를 마이크를 통해 취득할 수 있다. 구체적으로, 제스처 인식 장치는, 사용자가 제어하고자하는 기기의 마이크에서 음향 신호로서 오디오 신호를 획득할 수 있다.In step S302, the gesture recognition apparatus can acquire the generated signal through the microphone. Specifically, the gesture recognition apparatus can acquire an audio signal as a sound signal from a microphone of a device to be controlled by the user.
제스처 인식 장치에 의하여 생성되어 방출된 순음 오디오 신호는 제스처 인식 장치에 의하여 취득될 수 있으며, 제스처 인식 장치는, 취득된 신호와 방출된 신호의 차이를 얻기 위하여 취득된 신호와 방출된 신호를 비교할 수 있다. 이때, 신호의 차이는 사용자의 제스처로 인한 변화에 의해 발생할 수 있다. 예를 들어, 사용자의 제스처로 인한 변화는, 손의 움직임에 따른 도플러 시프트 효과 등이 될 수도 있다.The gentle audio signal generated and emitted by the gesture recognition device can be acquired by the gesture recognition device and the gesture recognition device can compare the acquired signal with the emitted signal to obtain the difference between the acquired signal and the emitted signal have. At this time, the difference of the signals may be caused by a change due to the user's gesture. For example, a change due to a user's gesture may be a Doppler shift effect depending on the movement of the hand.
단계(S303)에서, 제스처 인식 장치는, 취득된 신호를 필터링하고 도플러 효과 시프트를 검출하여 분석할 수 있다. 구체적으로, 제스처 인식 장치는, 마이크로 취득된 음향 신호로서 오디오 신호의 도플러 시프트 변화를 분석할 수 있다.In step S303, the gesture recognition device can filter the acquired signal and detect and analyze the Doppler effect shift. Specifically, the gesture recognition apparatus can analyze a Doppler shift change of an audio signal as a micro-acquired sound signal.
또한, 제스처 인식 장치는, 취득된 순음 오디오 신호를 분석할 수 있다. 예를 들어, 제스처 인식 장치는, 아무런 제스처가 없을 때 스피커에서 출력되는 순음 신호와 이를 입력 받은 마이크에서 입력되어 취득된 순음 오디오 신호는 정적이므로, 오디오 신호에는 변화가 거의 없다.Further, the gesture recognition apparatus can analyze the acquired pure-tone audio signal. For example, in the gesture recognition apparatus, a pure tone signal output from a speaker when there is no gesture and a pure tone audio signal obtained by inputting a microphone input thereto are static, so that there is almost no change in the audio signal.
또한, 제스처 인식 장치는, 사용자가 특정 동작을 수행했을 때 마이크로 입력되는 오디오 신호에서 발생되는 변화를 검출하여 분석할 수 있다. 예를 들어, 사용자가 손을 오른쪽에서 왼쪽으로 움직이거나 화면과 가까워졌다가 멀어졌다 하는 행동을 취하게 되면, 제스처 인식 장치는, 마이크로 입력되는 오디오 신호의 주파수의 변화를 분석할 수 있다. In addition, the gesture recognition apparatus can detect and analyze a change occurring in an audio signal micro-input when a user performs a specific operation. For example, if the user moves his / her hand from right to left or approaches / moves away from the screen, the gesture recognition device can analyze the change in the frequency of the micro input audio signal.
제스처 인식 장치는, 음파의 진행 방향과 음파를 발생 시키는 물체의 방향에 따라 주파수가 변화하는 도플러 효과를 이용하여 두 개 이상의 다른 스피커에서 발생되는 다른 주파수의 순음 신호를 기초로 하여 변화된 신호를 분석할 수 있다. 예를 들어, 제스처 인식 장치는, 변화된 신호를 분석하여, 사용자가 손을 좌우로 흔들었는지, 어느 방향으로 움직였는지, 혹은 가까이 다가가거나 멀어지는 것 등을 구분할 수도 있다.The gesture recognition apparatus analyzes a changed signal based on pure tone signals of different frequencies generated from two or more different speakers by using a Doppler effect whose frequency changes according to the traveling direction of a sound wave and the direction of an object generating a sound wave . For example, the gesture recognition apparatus may analyze the changed signal to distinguish whether the user has shaken his or her hand to the left or right, in which direction it was moved, or whether the user has moved closer or further away.
또한, 제스처 인식 장치로 입력되는 변화된 순음 신호로서 오디오 신호는 2개 이상이 함께 들어오기 때문에 이를 구분하기 위하여 제스처 인식 장치는, 2개의 순음 신호를 분리할 수 있는 대역 통과 필터를 포함하여 구성될 수도 있다. 또한, 제스처 인식 장치는, 대역 통과된 2개의 순음 신호의 도플러 효과를 분석하여 제스처를 인식할 수 있다.In addition, since two or more audio signals are input as a changed pure tone signal input to the gesture recognition apparatus, the gesture recognition apparatus may include a band pass filter capable of separating two pure tone signals have. Further, the gesture recognition apparatus can recognize the gesture by analyzing the Doppler effect of two band-pass pure-tone signals.
단계(S304)에서, 제스처 인식 장치는, 분석된 신호를 바탕으로 사용자의 제스처를 인식할 수 있다.In step S304, the gesture recognition device can recognize the gesture of the user based on the analyzed signal.
제스처 인식 장치는, 최종적으로 분석된 결과를 기초로 어떠한 제어를 위한 동작인지 인식하고 판단할 수도 잇다.The gesture recognition device may recognize and determine which operation is the control based on the finally analyzed result.
단계(S305)에서, 제스처 인식 장치는, 인식된 제스처를 디바이스의 제어 기능에 맵핑할 수 있다.In step S305, the gesture recognition device may map the recognized gesture to the control function of the device.
구체적으로 제스처 인식 장치는, 동작으로서 인식된 제스처를 사용자가 제어하고자하는 디바이스의 제어 신호로 맵핑할 수도 있다.Specifically, the gesture recognition apparatus may map a gesture recognized as an operation to a control signal of a device that the user wants to control.
단계(S306)에서, 제스처 인식 장치는, 경우에 따라서, 사용자가 제어하고자하는 기기를 제어할 수도 있다.In step S306, the gesture recognition device may control a device to be controlled by the user, as the case may be.
예를 들면, 제스처 인식 장치는, 제스처 인식 장치가 동작으로서 인식한 제스처를 디바이스 제어 신호로 맵핑하여 사용자가 제어하고자하는 기기를 제어할 수 있다.For example, the gesture recognition apparatus can control a device to be controlled by a user by mapping a gesture recognized by the gesture recognition apparatus as an operation to a device control signal.
예를 들어, 제스처 인식 장치는, 맵핑되는 동작을 기초로 하여 웹 페이지 스크롤, 화면 전환, 동영상 및 음악 제어, 이미지 넘기기, TV제어 등의 제어를 다양하게 활용할 수 있다.For example, the gesture recognition apparatus can utilize various controls such as web page scrolling, screen switching, video and music control, image flipping, and TV control based on the mapped operation.
도 4는 일실시예에 따른 제스처 인식 장치를 나타내는 것이다.4 shows a gesture recognition apparatus according to an embodiment.
도 4를 참조하면, 제스처 인식 장치는, 스피커 어레이(411, 412)와 마이크(420)는 태블릿의 구성 그대로를 포함하여 구성될 수 있다.Referring to FIG. 4, the gesture recognition apparatus may include
일실시예에 따르면, 제스처 인식 장치의 스피커(411)에서 제1 대역의 비 가청 순음 신호를 방출할 수 있다. 또한, 제스처 인식 장치의 스피커(412)에서 제2 대역의 비 가청 순음 신호를 방출할 수 있다. 이때, 제스처 인식 장치의 마이크(420)는 제1 대역의 비 가청 순음 신호를 획득할 수 있다. 또한, 제스처 인식 장치의 마이크(420)는 제2 대역의 비 가청 순음 신호를 획득할 수 있다.According to one embodiment, the non-audible pure tone signal of the first band may be emitted at the
예를 들어, 제스처 인식 장치는, 스피커(411)에서 제1 대역의 비 가청 순음 신호로서 22kHz의 주파수 신호를 출력할 수 있다. 또한, 제스처 인식 장치는, 스피커(412)에서 제2 대역의 비 가청 순음 신호로서 18kHz의 주파수 신호를 출력할 수 있다. 이때, 제스처 인식 장치의 마이크(420)는, 22kHz의 주파수 신호를 입력 신호로서 획득할 수 있다. 또한, 제스처 인식 장치의 마이크(420)는, 18kHz의 주파수 신호를 입력 신호로서 획득할 수 있다. 가령, 제스처 인식 장치는, 스피커 어레이(411, 412)에서 출력된 오디오 신호와 마이크(420)에서 획득된 오디오 신호의 주파수가 동일하다고 분석될 경우, 사용자의 제스처가 없다고 인식할 수 있다.For example, the gesture recognition apparatus can output a frequency signal of 22 kHz as the non-audible pure tone signal of the first band in the
또한, 예를 들어, 제스처 인식 장치는, 스피커(411)에서 제1 대역의 비 가청 순음 신호로서 22kHz의 주파수 신호를 출력하고, 스피커(412)에서 제2 대역의 비 가청 순음 신호로서 18kHz의 주파수 신호를 출력하였다고 가정하자. 이때, 제스처 인식 장치의 마이크(420)는, 22kHz의 주파수 신호를 입력 신호로서 획득하고, 19kHz의 주파수 신호를 입력 신호로서 획득하였다고 가정하자. For example, the gesture recognition apparatus outputs a frequency signal of 22 kHz as a non-audible pure tone signal of the first band in the
가령, 제스처 인식 장치는, 스피커(411)에서 출력된 오디오 신호와 마이크(420)에서 획득된 오디오 신호의 주파수가 동일하다고 분석될 경우, 스피커(411)로부터 마이크(420) 사이에 위치에서 사용자의 제스처가 없다고 인식할 수 있다. For example, when the frequency of the audio signal output from the
또한, 제스처 인식 장치는, 스피커(412)에서 출력된 오디오 신호와 마이크(420)에서 획득된 오디오 신호의 주파수가 다르다고 분석될 경우, 스피커(412)로부터 마이크(420) 사이에 위치에서 사용자의 제스처가 있다고 인식할 수 있다. 이때, 제스처 인식 장치는, 사용자의 제스처가 오른쪽 화면에서 있다고 인식할 수 있다. 또한, 경우에 따라서, 제스처 인식 장치는, 사용자의 제스처가 오른쪽 화면에서 있다고 인식한 동작을 디스플레이 장치의 제어와 맵핑하여 디스플레이되는 화면의 오른쪽 화면으로 화면 이동을 제어하여 디스플레이 장치를 제어할 수도 있다.The gesture recognition apparatus may further include a
도 5는 일실시예에 따른 제스처 인식 방법을 수행하는 제스처 인식 장치를 나타내는 것이다.FIG. 5 illustrates a gesture recognition apparatus that performs a gesture recognition method according to an embodiment.
도 5를 참조하면, 제스처 인식 장치는, 스피커 어레이(511, 512, 513, 514)와 마이크(520)는 오디오 시스템의 구성 그대로를 포함하여 구성될 수 있다.5, the gesture recognition apparatus may include
일실시예에 따르면, 제스처 인식 장치의 스피커(511)에서 제1 대역의 비 가청 순음 신호를 방출할 수 있다. 또한, 제스처 인식 장치의 스피커(512)에서 제2 대역의 비 가청 순음 신호를 방출할 수 있다. 또한, 제스처 인식 장치의 스피커(513)에서 제3 대역의 비 가청 순음 신호를 방출할 수 있다. 또한, 제스처 인식 장치의 스피커(514)에서 제4 대역의 비 가청 순음 신호를 방출할 수 있다. According to one embodiment, the non-audible pure tone signal of the first band may be emitted at the
이때, 제스처 인식 장치의 마이크(520)는 제1 대역의 비 가청 순음 신호를 획득할 수 있다. 또한, 제스처 인식 장치의 마이크(520)는 제2 대역의 비 가청 순음 신호를 획득할 수 있다. 또한, 제스처 인식 장치의 마이크(520)는 제3 대역의 비 가청 순음 신호를 획득할 수 있다. 또한, 제스처 인식 장치의 마이크(520)는 제4 대역의 비 가청 순음 신호를 획득할 수 있다.At this time, the
예를 들어, 제스처 인식 장치는, 스피커(511)에서 제1 대역의 비 가청 순음 신호로서 21kHz의 주파수 신호를 출력할 수 있다. 또한, 제스처 인식 장치는, 스피커(512)에서 제2 대역의 비 가청 순음 신호로서 22kHz의 주파수 신호를 출력할 수 있다. 또한, 제스처 인식 장치는, 스피커(513)에서 제3 대역의 비 가청 순음 신호로서 15Hz의 주파수 신호를 출력할 수 있다. 또한, 제스처 인식 장치는, 스피커(514)에서 제4 대역의 비 가청 순음 신호로서 5Hz의 주파수 신호를 출력할 수 있다. For example, the gesture recognition apparatus can output a frequency signal of 21 kHz as a non-audible pure tone signal of the first band in the
이때, 제스처 인식 장치의 마이크(520)는, 21kHz의 주파수 신호를 입력 신호로서 획득할 수 있다. 또한, 제스처 인식 장치의 마이크(520)는, 22kHz의 주파수 신호를 입력 신호로서 획득할 수 있다. 또한, 제스처 인식 장치의 마이크(520)는, 15Hz의 주파수 신호를 입력 신호로서 획득할 수 있다. 또한, 제스처 인식 장치의 마이크(520)는, 5Hz의 주파수 신호를 입력 신호로서 획득할 수 있다. 가령, 제스처 인식 장치는, 스피커 어레이(511, 512, 513, 514)에서 출력된 오디오 신호와 마이크(520)에서 획득된 오디오 신호의 주파수가 동일하다고 분석될 경우, 사용자의 제스처가 없다고 인식할 수 있다.At this time, the
또한, 예를 들어, 제스처 인식 장치는, 스피커(511)에서 제1 대역의 비 가청 순음 신호로서 21kHz의 주파수 신호를 출력하고, 스피커(512)에서 제2 대역의 비 가청 순음 신호로서 22kHz의 주파수 신호를 출력하였다고 가정하자. 또한, 제스처 인식 장치는, 스피커(513)에서 제3 대역의 비 가청 순음 신호로서 15Hz의 주파수 신호를 출력하고, 스피커(514)에서 제4 대역의 비 가청 순음 신호로서 5Hz의 주파수 신호를 출력하였다고 가정하자. For example, the gesture recognition apparatus outputs a frequency signal of 21 kHz as a non-audible pure tone signal of the first band at the
이때, 제스처 인식 장치의 마이크(520)는, 20998Hz의 주파수 신호를 입력 신호로서 획득하고, 22kHz의 주파수 신호를 입력 신호로서 획득하였다고 가정하자. 또한, 제스처 인식 장치의 마이크(520)는, 15Hz의 주파수 신호를 입력 신호로서 획득하고, 5Hz의 주파수 신호를 입력 신호로서 획득하였다고 가정하자. Here, it is assumed that the
가령, 제스처 인식 장치는, 스피커(512, 513, 514)에서 출력된 오디오 신호와 마이크(520)에서 획득된 오디오 신호의 주파수가 동일하다고 분석될 경우, 스피커(512, 513, 514)로부터 마이크(520) 사이에 위치에서 사용자의 제스처가 없다고 인식할 수 있다. 또한, 제스처 인식 장치는, 스피커(511)에서 출력된 오디오 신호와 마이크(520)에서 획득된 오디오 신호의 주파수가 다르다고 분석될 경우, 스피커(511)로부터 마이크(520) 사이에 위치에서 사용자의 제스처가 있다고 인식할 수 있다. The gesture recognition apparatus may be configured such that the gesture recognition apparatus receives a sound signal from the
이때, 제스처 인식 장치는, 사용자의 제스처가 왼쪽 화면으로 가까운 곳에서 있다고 인식할 수 있다. 또한, 경우에 따라서, 제스처 인식 장치는, 사용자의 제스처가 왼쪽 화면으로 가까운 곳에서 있다고 인식한 동작을 디스플레이 장치의 제어와 맵핑하여 디스플레이되는 화면의 왼쪽 화면과 상위 화면으로 화면 이동을 제어하여 디스플레이 장치를 제어할 수도 있다.At this time, the gesture recognition apparatus can recognize that the gesture of the user is close to the left screen. In some cases, the gesture recognition device may map a gesture of the user to a control of the display device, mapping the gesture recognized by the user to a gesture close to the left screen, to control the screen movement to the left screen and the upper screen, .
도 6은 일실시예에 따른 제스처 인식 장치로서, 제스처 인식 장치를 나타내는 블록도이다.6 is a block diagram illustrating a gesture recognition apparatus according to an embodiment.
먼저, 도 6을 참조하면, 제스처 인식 장치는 스피커 어레이(610), 마이크(620), 오디오 신호 분석부(630), 제스처 인식부(640), 스피커 제어부(650)를 포함하여 구성될 수 있다. 경우에 따라서, 제스처 인식 장치는 스피커 어레이(610), 마이크(620), 오디오 신호 분석부(630), 제스처 인식부(640)를 포함하여 구성될 수도 있다. 스피커 어레이(610), 마이크(620), 오디오 신호 분석부(630), 제스처 인식부(640), 스피커 제어부(650)는, 인클로저(enclosure), 진동판, 센서, 전자 회로, 전기 회로, 집적 회로, 전자 소자, 자기 소자 중 적어도 하나를 포함하여 구성될 수도 있다. 또한, 경우에 따라서, 스피커 어레이(610), 마이크(620), 오디오 신호 분석부(630), 제스처 인식부(640), 스피커 제어부(650)는, 인클로저(enclosure), 프로세서, 메모리, 데이터 송수신기 중 적어도 하나를 포함할 수도 있으나, 이에 한정되지는 않는다. 6, the gesture recognition apparatus may include a
스피커 어레이(610)는, 오디오 신호를 출력할 수 있다. 이때, 오디오 신호는, 비 가청 대역의 순음 신호일 수 있다.The
마이크(620)는, 출력된 오디오 신호가 사용자의 제스처에 의하여 변화된 오디오 신호를 획득할 수 있다.The
오디오 신호 분석부(630)는, 획득한 오디오 신호를 분석할 수 있다. 구체적으로, 오디오 신호 분석부(630)는, 오디오 신호의 주파수의 변화를 분석할 수 있다. 또한, 오디오 신호 분석부(630)는, 오디오 신호를 대역 통과 필터를 이용하여 복수의 순음 신호로 분리하여 분석할 수도 있다.The audio
제스처 인식부(640)는, 오디오 신호의 분석 결과에 따라 사용자의 제스처를 인식할 수 있다.The
스피커 제어부(650)는, 스피커 어레이를 구성하는 복수의 스피커들 각각에 대해 서로 다른 주파수를 나타내는 오디오 신호를 제공할 수 있다. 또한, 경우에 따라서, 스피커 제어부(650)는, 스피커 어레이를 구성하는 복수의 스피커들 각각에 대해 서로 다른 파장 또는 진동수를 나타내는 오디오 신호를 제공할 수도 있다.The
상기에서 설명한 바와 같이, 제스처 인식 장치는, 사용자의 제스처 인식 및 사용자의 디바이스 제어를 위하여, 제어하고자 하는 디바이스의 스피커 어레이(610)를 통해 비 가청 대역의 순음 신호를 발생 시키고, 마이크(620)를 통해 상기 음향 신호를 취득할 수 있다. 물론, 이때, 제어하고자하는 디바이스는 노트북, 태블릿, 스마트폰 등이 될 수도 있다. 제스처 인식 장치는, 취득 된 신호를 분석하여, 사용자가 별도의 디바이스를 착용하지 않고도 사용자의 제스처를 인식하여 기기를 제어할 수도 있다.As described above, the gesture recognition device generates a pure tone signal of a non-audible band through a
이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPA(field programmable array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.The apparatus described above may be implemented as a hardware component, a software component, and / or a combination of hardware components and software components. For example, the apparatus and components described in the embodiments may be implemented within a computer system, such as, for example, a processor, a controller, an arithmetic logic unit (ALU), a digital signal processor, a microcomputer, a field programmable array (FPA) A programmable logic unit (PLU), a microprocessor, or any other device capable of executing and responding to instructions. The processing device may execute an operating system (OS) and one or more software applications running on the operating system. The processing device may also access, store, manipulate, process, and generate data in response to execution of the software. For ease of understanding, the processing apparatus may be described as being used singly, but those skilled in the art will recognize that the processing apparatus may have a plurality of processing elements and / As shown in FIG. For example, the processing unit may comprise a plurality of processors or one processor and one controller. Other processing configurations are also possible, such as a parallel processor.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.The software may include a computer program, code, instructions, or a combination of one or more of the foregoing, and may be configured to configure the processing device to operate as desired or to process it collectively or collectively Device can be commanded. The software and / or data may be in the form of any type of machine, component, physical device, virtual equipment, computer storage media, or device , Or may be permanently or temporarily embodied in a transmitted signal wave. The software may be distributed over a networked computer system and stored or executed in a distributed manner. The software and data may be stored on one or more computer readable recording media.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to an embodiment may be implemented in the form of a program command that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like, alone or in combination. The program instructions to be recorded on the medium may be those specially designed and configured for the embodiments or may be available to those skilled in the art of computer software. Examples of computer-readable media include magnetic media such as hard disks, floppy disks and magnetic tape; optical media such as CD-ROMs and DVDs; magnetic media such as floppy disks; Magneto-optical media, and hardware devices specifically configured to store and execute program instructions such as ROM, RAM, flash memory, and the like. Examples of program instructions include machine language code such as those produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다. 그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments. For example, it is to be understood that the techniques described may be performed in a different order than the described methods, and / or that components of the described systems, structures, devices, circuits, Lt; / RTI > or equivalents, even if it is replaced or replaced. Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.
Claims (1)
오디오 신호를 출력하는 단계;
상기 출력된 오디오 신호가 사용자의 제스처에 의하여 변화된 오디오 신호를 획득하는 단계;
상기 획득한 오디오 신호를 분석하는 단계; 및
상기 오디오 신호의 분석 결과에 따라 상기 사용자의 제스처를 인식하는 단계;
를 포함하는 제스처 인식 방법.A gesture recognition method performed by a gesture recognition device,
Outputting an audio signal;
The output audio signal obtaining an audio signal changed by a user's gesture;
Analyzing the obtained audio signal; And
Recognizing a gesture of the user according to an analysis result of the audio signal;
And a gesture recognition method.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020150020157A KR20160097821A (en) | 2015-02-10 | 2015-02-10 | Method and apparatus for recognizing gesture |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020150020157A KR20160097821A (en) | 2015-02-10 | 2015-02-10 | Method and apparatus for recognizing gesture |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20160097821A true KR20160097821A (en) | 2016-08-18 |
Family
ID=56874297
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020150020157A KR20160097821A (en) | 2015-02-10 | 2015-02-10 | Method and apparatus for recognizing gesture |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR20160097821A (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023216922A1 (en) * | 2022-05-07 | 2023-11-16 | 华为技术有限公司 | Target device selection identification method, terminal device, system and storage medium |
-
2015
- 2015-02-10 KR KR1020150020157A patent/KR20160097821A/en not_active Application Discontinuation
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023216922A1 (en) * | 2022-05-07 | 2023-11-16 | 华为技术有限公司 | Target device selection identification method, terminal device, system and storage medium |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2891955B1 (en) | In-vehicle gesture interactive spatial audio system | |
CN109716780B (en) | Electronic device and control method thereof | |
US10200805B2 (en) | Changing spatial audio fields | |
EP3535754B1 (en) | Improved reception of audio commands | |
US20130163794A1 (en) | Dynamic control of audio on a mobile device with respect to orientation of the mobile device | |
US9766852B2 (en) | Non-audio notification of audible events | |
WO2014024009A1 (en) | Spatial audio user interface apparatus | |
KR20200006002A (en) | Systems and methods for providing automatic haptic generation for video content | |
US11138987B2 (en) | System and method to distinguish sources in a multiple audio source environment | |
CN110234043B (en) | Sound signal processing method, device and equipment based on microphone array | |
CN114728204A (en) | Visual extension of sound data for applications/services including gaming applications/services | |
KR20140089858A (en) | Electronic apparatus and Method for controlling electronic apparatus thereof | |
KR102623998B1 (en) | Electronic device for speech recognition and method thereof | |
CN107562402B (en) | Controlling audio signal parameters | |
KR20160097821A (en) | Method and apparatus for recognizing gesture | |
JP5100532B2 (en) | Information processing apparatus, control method thereof, and program | |
US20220212108A1 (en) | Audio frequency signal processing method and apparatus, terminal and storage medium | |
US9666041B2 (en) | Haptic microphone | |
US10665203B2 (en) | User interface apparatus and user interface method | |
US9445210B1 (en) | Waveform display control of visual characteristics | |
US20140059549A1 (en) | Application recognition system and method | |
US12022162B2 (en) | Voice processing method and apparatus, electronic device, and computer readable storage medium | |
EP3343338A1 (en) | Information processing device, information processing method, and program | |
KR20110067755A (en) | Method and apparatus for outputting audio signal in portable terminal | |
KR20090128187A (en) | Apparatus and method for controlling function of image out using sound signal |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
WITN | Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid |