KR20160016341A - Multimedia deivice and method for controlling the same - Google Patents
Multimedia deivice and method for controlling the same Download PDFInfo
- Publication number
- KR20160016341A KR20160016341A KR1020140100275A KR20140100275A KR20160016341A KR 20160016341 A KR20160016341 A KR 20160016341A KR 1020140100275 A KR1020140100275 A KR 1020140100275A KR 20140100275 A KR20140100275 A KR 20140100275A KR 20160016341 A KR20160016341 A KR 20160016341A
- Authority
- KR
- South Korea
- Prior art keywords
- audio data
- user
- unit
- specific
- remote controller
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/4227—Providing Remote input by a user located remotely from the client device, e.g. at work
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/4223—Cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/441—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card
- H04N21/4415—Acquiring end-user identification, e.g. using personal code sent by the remote control or by inserting a card using biometric characteristics of the user, e.g. by voice recognition or fingerprint scanning
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
Abstract
Description
본 발명은 멀티미디어 디바이스 및 이의 제어 방법에 관한 것이다.The present invention relates to a multimedia device and a control method thereof.
최근, TV는 방송수신기능을 넘어서 인터넷 기능, 스마트 기능 등이 추가된 멀티미디어 디바이스의 역할을 수행하고 있다. 이에 따라, TV에 음성 인식 기능이 구현되어 사용자는 음성으로 명령어를 발화하여 TV의 각 기능을 제어할 수도 있으며, TV에 얼굴 인식 기능이 구현되어 특정 사용자를 인식하고 특정 사용자에 맞춤화된 사용자 환경을 제공하는 것도 가능하다. 또한, TV에 음성 인식 기능이 구현되어 있는 경우, 음성 인식률을 높이고 사용자 편의성을 강조하기 위하여 TV를 제어하기 위한 리모트 컨트롤러에도 마이크가 내장되어 있는 것이 대부분이다. 따라서, TV에 내장된 마이크를 통해 획득된 오디오 데이터의 값과 리모트 컨트롤러에 내장된 마이크를 통해 획득된 오디오 데이터의 값이 다른 경우 어떤 값에 기초하여 TV의 기능을 제어할 것인지가 문제된다.In recent years, TV has been playing a role of a multimedia device that has added Internet functions and smart functions beyond a broadcast receiving function. As a result, the voice recognition function is implemented on the TV so that the user can control each function of the TV by uttering a command by voice, and the face recognition function is implemented on the TV to recognize a specific user, It is also possible to provide. In addition, when a voice recognition function is implemented on a TV, a remote controller for controlling the TV is often equipped with a microphone to enhance the voice recognition rate and emphasize user convenience. Therefore, when the value of the audio data obtained through the microphone built in the TV and the value of the audio data obtained through the built-in microphone of the remote controller are different, it is a problem to control the function of the TV based on a certain value.
한편, TV는 그 특성상 여러 사용자가 함께 사용하게 되는데, 이때 어느 사용자에게 우선권을 줄 것인지, 어떠한 방식으로 다수의 사용자의 의도에 맞게 TV의 기능을 제어할 것인지 등이 문제된다.On the other hand, TVs are used by a plurality of users because of their characteristics. In this case, there is a problem such as which user is given priority and how to control the functions of the TV according to the intention of a plurality of users.
본 발명은 전술한 문제 및 다른 문제를 해결하는 것을 목적으로 한다.The present invention is directed to solving the above-mentioned problems and other problems.
또한, 본 발명의 일 실시예는, 멀티미디어 디바이스에 내장된 마이크를 통해 획득된 오디오 데이터의 값과 리모트 컨트롤러에 내장된 마이크를 통해 획득된 오디오 데이터의 값이 다른 경우 어떤 값에 기초하여 멀티미디어 디바이스의 기능을 제어할 것인지에 대한 솔루션을 제공하는 것을 목적으로 한다.According to another aspect of the present invention, there is provided a method of controlling a multimedia device, the method comprising the steps of: receiving a multimedia signal from a multimedia device, the audio signal being obtained through a microphone built in the multimedia device; And to provide a solution for whether to control the function.
또한, 본 발명의 일 실시예는, 멀티미디어 디바이스를 여러 사용자가 사용하는 경우 어떠한 사용자에게 우선권을 줄 것인지 및 어떠한 방식으로 다수의 사용자의 의도에 맞게 멀티미디어 디바이스의 기능을 제어할 것인지에 대한 솔루션을 제공하는 것을 목적으로 한다.In addition, one embodiment of the present invention provides a solution for how to give priority to a user when a multimedia device is used by a plurality of users and how to control the function of the multimedia device according to the intention of a plurality of users .
본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.It is to be understood that both the foregoing general description and the following detailed description are exemplary and explanatory and are not restrictive of the invention, unless further departing from the spirit and scope of the invention as defined by the appended claims. It will be possible.
상기 또는 다른 목적을 달성하기 위해 본 발명의 일 측면에 따르면, 멀티미디어 디바이스는, 제1 마이크와, 제2 마이크를 포함하는 리모트 컨트롤러와 무선으로 연결된 무선 통신부와, 특정 컨텐트의 비디오 데이터를 출력하는 디스플레이부와, 상기 특정 컨텐트의 오디오 데이터를 출력하는 오디오 출력부와, 카메라와, 제어부를 포함하고, 상기 제어부는, 외부의 음향 신호를 수신하여 전기적인 제1 오디오 데이터로 변환하도록 상기 제1 마이크를 제어하고, 상기 리모트 컨트롤러로부터 외부의 음향 신호에 대응하는 제2 오디오 데이터를 수신하도록 상기 무선 통신부를 제어하고, 이미지를 획득하도록 상기 카메라를 제어하고, 상기 제1 오디오 데이터의 값과 상기 제2 오디오 데이터의 값이 다른 경우, 상기 획득된 이미지에 기초하여 기 설정된 특정 기능을 제어한다.According to an aspect of the present invention, there is provided a multimedia device including a first microphone, a wireless communication unit wirelessly connected to a remote controller including a second microphone, a display for outputting video data of a specific content, An audio output unit for outputting audio data of the specific content; a camera; and a control unit, wherein the control unit controls the first microphone so as to receive an external sound signal and convert it into electrical first audio data, And controls the wireless communication unit to receive second audio data corresponding to an external sound signal from the remote controller, and controls the camera to acquire an image, and the value of the first audio data and the audio of the second audio If the value of the data is different, Control the power.
상기 또는 다른 목적을 달성하기 위해 본 발명의 일 측면에 따르면, 멀티미디어 디바이스의 제어 방법은, 특정 컨텐트의 비디오 데이터 및 오디오 데이터를 출력하는 단계와, 외부의 음향 신호를 수신하여 전기적인 제1 오디오 데이터로 변환하는 단계와, 리모트 컨트롤러로부터 외부의 음향 신호에 대응하는 제2 오디오 데이터를 수신하는 단계와, 카메라로부터 이미지를 획득하는 단계와, 상기 제1 오디오 데이터의 값과 상기 제2 오디오 데이터의 값의 크기가 다른 경우, 상기 획득된 이미지에 기초하여, 상기 출력되는 특정 컨텐트의 오디오 데이터의 볼륨을 조절하는 단계를 포함한다.According to an aspect of the present invention, there is provided a method of controlling a multimedia device, the method comprising: outputting video data and audio data of a specific content; receiving an external audio signal, Receiving second audio data corresponding to an external acoustic signal from the remote controller, acquiring an image from the camera, and converting the value of the first audio data and the value of the second audio data And adjusting the volume of audio data of the specific content to be output based on the obtained image when the size of the specific content is different.
본 발명에 따른 멀티미디어 디바이스 및 이의 제어 방법의 효과에 대해 설명하면 다음과 같다.Effects of the multimedia device and the control method according to the present invention will be described as follows.
본 발명의 실시예들 중 적어도 하나에 의하면, 멀티미디어 디바이스에 내장된 마이크를 통해 획득된 오디오 데이터의 값과 리모트 컨트롤러에 내장된 마이크를 통해 획득된 오디오 데이터의 값이 다른 경우 어떤 값에 기초하여 멀티미디어 디바이스의 기능을 제어할 것인지에 대한 솔루션을 제공할 수 있다.According to at least one embodiment of the present invention, when the value of the audio data acquired through the microphone built in the multimedia device is different from the value of the audio data acquired through the microphone built in the remote controller, It is possible to provide a solution as to whether to control the function of the device.
또한, 본 발명의 실시예들 중 적어도 하나에 의하면, 멀티미디어 디바이스를 여러 사용자가 사용하는 경우 어떠한 사용자에게 우선권을 줄 것인지 및 어떠한 방식으로 다수의 사용자의 의도에 맞게 멀티미디어 디바이스의 기능을 제어할 것인지에 대한 솔루션을 제공할 수 있다.In addition, according to at least one embodiment of the present invention, when a multimedia device is used by a plurality of users, it is possible to determine which user is given priority and how to control the function of the multimedia device according to the intention of a plurality of users Solution.
본 발명의 적용 가능성의 추가적인 범위는 이하의 상세한 설명으로부터 명백해질 것이다. 그러나 본 발명의 사상 및 범위 내에서 다양한 변경 및 수정은 당업자에게 명확하게 이해될 수 있으므로, 상세한 설명 및 본 발명의 바람직한 실시 예와 같은 특정 실시 예는 단지 예시로 주어진 것으로 이해되어야 한다. Further scope of applicability of the present invention will become apparent from the following detailed description. It should be understood, however, that the detailed description and specific examples, such as the preferred embodiments of the invention, are given by way of illustration only, since various changes and modifications within the spirit and scope of the invention will become apparent to those skilled in the art.
도 1은 본 발명의 일 실시예에 의한 멀티미디어 디바이스의 일례를 설명하기 위한 블록도이다.
도 2는 본 발명의 일 실시예에 따라 도 1의 제어부의 상세 구성을 설명하기 위한 블록도이다.
도 3은 본 발명의 일 실시예에 의한 멀티미디어 디바이스를 제어하기 위한 리모트 컨트롤러의 예시들을 도시한 도면이다.
도 4는 본 발명의 일 실시예에 따른 리모트 컨트롤러의 구성 모듈들을 도시한 블록도이다.
도 5는 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 도시한 흐름도이다.
도 6은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다.
도 7은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 다른 일례를 설명하기 위한 도면이다.
도 8은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 또 다른 일례를 설명하기 위한 도면이다.
도 9는 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다.
도 10은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다.
도 11은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다.
도 12는 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다.
도 13은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다.
도 14는 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다.
도 15는 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다.
도 16은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다.
도 17은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다.
도 18은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 다른 일례를 설명하기 위한 도면이다.
도 19는 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 또 다른 일례를 설명하기 위한 도면이다.
도 20은 본 발명의 일 실시예에 의한 멀티미디어 디바이스에서 사용자를 등록하는 과정을 설명하기 위한 도면이다.
도 21은 본 발명의 일 실시예에 의한 멀티미디어 디바이스에서 마스터 사용자가 다른 사용자를 등록하는 과정을 설명하기 위한 도면이다.
도 22는 본 발명의 일 실시예에 따라 멀티미디어 디바이스에 등록된 사용자와 미등록된 사용자의 권한의 차이를 설명하기 위한 도면이다.
도 23은 본 발명의 일 실시예에 의한 멀티미디어 디바이스에서 마스터 사용자가 다른 사용자를 등록하는 과정을 설명하기 위한 도면이다.
도 24는 본 발명의 일 실시예에 따른 멀티미디어 디바이스에서 특정 사용자를 위한 자동 볼륨 조절 기능 및 자동 밝기 조절 기능이 설정된 경우의 일례를 설명하기 위한 도면이다.1 is a block diagram illustrating an example of a multimedia device according to an embodiment of the present invention.
FIG. 2 is a block diagram illustrating a detailed configuration of the controller of FIG. 1 according to an embodiment of the present invention.
3 is a diagram illustrating examples of a remote controller for controlling a multimedia device according to an exemplary embodiment of the present invention.
4 is a block diagram illustrating the configuration modules of a remote controller according to an embodiment of the present invention.
5 is a flowchart illustrating an example of a method of controlling a multimedia device according to an embodiment of the present invention.
6 is a diagram for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
7 is a view for explaining another example of a method of controlling a multimedia device according to an embodiment of the present invention.
8 is a diagram for explaining another example of a method of controlling a multimedia device according to an embodiment of the present invention.
9 is a diagram for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
10 is a diagram for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
11 is a view for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
12 is a diagram for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
13 is a diagram for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
FIG. 14 is a diagram for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
15 is a diagram for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
16 is a diagram for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
17 is a view for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
18 is a view for explaining another example of a method of controlling a multimedia device according to an embodiment of the present invention.
19 is a view for explaining another example of a method of controlling a multimedia device according to an embodiment of the present invention.
20 is a diagram for explaining a process of registering a user in a multimedia device according to an embodiment of the present invention.
FIG. 21 is a diagram for explaining a process in which a master user registers another user in a multimedia device according to an embodiment of the present invention.
22 is a diagram for explaining a difference in authority between a user registered in a multimedia device and an unregistered user according to an embodiment of the present invention.
23 is a diagram for explaining a process in which a master user registers another user in a multimedia device according to an embodiment of the present invention.
24 is a view for explaining an example in which an automatic volume control function and an automatic brightness control function for a specific user are set in a multimedia device according to an embodiment of the present invention.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. 또한, 본 명세서에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings, wherein like reference numerals are used to designate identical or similar elements, and redundant description thereof will be omitted. The suffix "module" and " part "for the components used in the following description are given or mixed in consideration of ease of specification, and do not have their own meaning or role. In the following description of the embodiments of the present invention, a detailed description of related arts will be omitted when it is determined that the gist of the embodiments disclosed herein may be blurred. It is to be understood that both the foregoing general description and the following detailed description are exemplary and explanatory and are intended to provide further explanation of the invention as claimed. , ≪ / RTI > equivalents, and alternatives.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.Terms including ordinals, such as first, second, etc., may be used to describe various elements, but the elements are not limited to these terms. The terms are used only for the purpose of distinguishing one component from another.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.It is to be understood that when an element is referred to as being "connected" or "connected" to another element, it may be directly connected or connected to the other element, . On the other hand, when an element is referred to as being "directly connected" or "directly connected" to another element, it should be understood that there are no other elements in between.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. The singular expressions include plural expressions unless the context clearly dictates otherwise.
본 출원에서, "포함한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.In the present application, the terms "comprises", "having", and the like are used to specify that a feature, a number, a step, an operation, an element, a component, But do not preclude the presence or addition of one or more other features, integers, steps, operations, elements, components, or combinations thereof.
도 1은 본 발명의 일 실시예에 의한 멀티미디어 디바이스의 일례를 설명하기 위한 블록도이다.1 is a block diagram illustrating an example of a multimedia device according to an embodiment of the present invention.
본 발명의 일 실시예에 의한 멀티미디어 디바이스(100)는, 예컨대 방송 수신 기능에 컴퓨터 지원 기능을 추가한 지능형 네트워크 TV로서, 방송 수신 기능에 충실하면서도 인터넷 기능 등이 추가된 장치이다. 예를 들어, 멀티미디어 디바이스(100)는 네트워크 TV, 스마트 TV, HBBTV(Hybrid Brodacast Broadband Television), 인터넷 TV, 웹 TV, IPTV(Internet Protocol Television) 등에 해당할 수 있다.The
멀티미디어 디바이스(100)는, 수신부(110), 외부장치 인터페이스부(120), 입력부(130), 메모리(140), 제어부(150), 사용자 인터페이스부(160), 디스플레이부(170), 오디오 출력부(180), 전원 공급부(190) 등을 포함할 수 있다.The
수신부(110)는, 적어도 하나의 튜너(111), 복조부(112) 및 네트워크 인터페이스부(113)를 포함할 수 있다. 다만, 경우에 따라, 수신부(110)는 튜너(111)와 복조부(112)는 구비하나 네트워크 인터페이스부(113)는 포함하지 않을 수 있으며 그 반대의 경우일 수도 있다. 또한, 수신부(110)는 도시되진 않았으나, 다중화부(multiplexer)를 구비하여 상기 튜너(111)를 거쳐 복조부(112)에서 복조된 신호와 상기 네트워크 인터페이스부(113)를 거쳐 수신된 신호를 다중화할 수도 있다. 그 밖에 수신부(110)는 역시 도시되진 않았으나, 역다중화부(demultiplexer)를 구비하여 상기 다중화된 신호를 역다중화하거나 상기 복조된 신호 또는 상기 네트워크 인터페이스부(113)를 거친 신호를 역다중화할 수 있다.The
튜너(111)는, 안테나를 통해 수신되는 RF(Radio Frequency) 방송 신호 중 사용자에 의해 선택된 채널 또는 기 저장된 모든 채널을 튜닝하여 RF 방송 신호를 수신한다. 또한, 튜너(111)는, 수신된 RF 방송 신호를 중간 주파수(Intermediate Frequency; IF) 신호 혹은 베이스밴드(baseband) 신호로 변환한다.The
예를 들어, 수신된 RF 방송 신호가 디지털 방송 신호이면 디지털 IF 신호(DIF)로 변환하고, 아날로그 방송 신호이면 아날로그 베이스밴드 영상 또는 음성 신호(CVBS/SIF)로 변환한다. 즉, 튜너(111)는 디지털 방송 신호 또는 아날로그 방송 신호를 모두 처리할 수 있다. 튜너(111)에서 출력되는 아날로그 베이스 밴드 영상 또는 음성 신호(CVBS/SIF)는 제어부(150)로 직접 입력될 수 있다.For example, if the received RF broadcast signal is a digital broadcast signal, the signal is converted into a digital IF signal (DIF). If the received RF broadcast signal is an analog broadcast signal, the signal is converted into an analog baseband image or a voice signal (CVBS / SIF). That is, the
또한, 튜너(111)는, 싱글 캐리어(single carrier) 또는 멀티플 캐리어(multiple carrier)의 RF 방송 신호를 수신할 수 있다. 한편, 튜너(111)는, 안테나를 통해 수신되는 RF 방송 신호 중 채널 기억 기능을 통하여 저장된 모든 방송 채널의 RF 방송 신호를 순차로 튜닝 및 수신하여 이를 중간 주파수 신호 혹은 베이스 밴드 신호(DIF: Digital Intermediate Frequency or baseband signal)로 변환할 수 있다.Also, the
복조부(112)는, 튜너(111)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조하고, 채널 복호화 등을 수행할 수도 있다. 이를 위해 복조부(112)는 트렐리스 디코더(Trellis Decoder), 디인터리버(De-interleaver), 리드 솔로먼 디코더(Reed-Solomon Decoder) 등을 구비하거나 컨벌루션 디코더(convolution decoder), 디인터리버 및 리드-솔로먼 디코더 등을 구비할 수 있다.The
복조부(112)는, 복조 및 채널 복호화를 수행한 후 스트림 신호(TS)를 출력할 수 있다. 이때, 스트림 신호는 영상 신호, 음성 신호 또는 데이터 신호가 다중화된 신호일 수 있다. 일 예로, 스트림 신호는 MPEG-2 규격의 영상 신호, 돌비(Dolby) AC-3 규격의 음성 신호 등이 다중화된 MPEG-2 TS(Transport Stream)일 수 있다.The
복조부(112)에서 출력한 스트림 신호는 제어부(150)로 입력될 수 있다. 제어부(150)는 역다중화, 영상/음성 신호 처리 등을 제어하고, 디스플레이부(170)를 통해 영상을, 오디오 출력부(180)를 통해 음성의 출력을 제어할 수 있다.The stream signal output from the
외부장치 인터페이스부(120)는 멀티미디어 디바이스(100)와 다양한 외부 디바이스 사이의 인터페이싱 환경을 제공한다. 이를 위해, 외부장치 인터페이스부(120)는, A/V 입/출력부(미도시) 또는 무선 통신부(미도시)를 포함할 수 있다.The external
외부장치 인터페이스부(120)는, DVD(Digital Versatile Disk), 블루-레이(Blu-ray), 게임 디바이스, 카메라, 캠코더(Camcorder), 컴퓨터(노트북), 태블릿 PC, 스마트 폰, 블루투스 디바이스(Bluetooth device), 클라우드(Cloud) 등과 같은 외부 디바이스 등과 유/무선으로 접속될 수 있다. 외부장치 인터페이스부(120)는 연결된 외부 디바이스를 통하여 입력되는 이미지, 영상, 음성 등 데이터를 포함한 신호를 멀티미디어 디바이스(100)의 제어부(150)로 전달한다. 제어부(150)는 처리된 이미지, 영상, 음성 등을 데이터 신호를 연결된 외부 디바이스로 출력되도록 제어할 수 있다. 이를 위해, 외부장치 인터페이스부(120)는, A/V 입/출력부(미도시) 또는 무선 통신부(미도시)를 더 포함할 수 있다.The external
A/V 입/출력부는, 외부 디바이스의 영상 및 음성 신호를 멀티미디어 디바이스(100)로 입력할 수 있도록, USB 단자, CVBS(Composite Video Banking Sync) 단자, 컴포넌트 단자, S-비디오 단자(아날로그), DVI(Digital Visual Interface) 단자, HDMI(High Definition Multimedia Interface) 단자, RGB 단자, D-SUB 단자 등을 포함할 수 있다.The A / V input / output unit includes a USB terminal, a Composite Video Banking Sync (CVBS) terminal, a component terminal, an S-video terminal (analog) terminal, A DVI (Digital Visual Interface) terminal, an HDMI (High Definition Multimedia Interface) terminal, an RGB terminal, a D-SUB terminal, and the like.
무선 통신부는, 다른 디지털 디바이스와 무선 통신을 수행할 수 있다. 멀티미디어 디바이스(100)는 예를 들어, WLAN(Wireless LAN), Wi-Fi(Wireless-Fidelity), Wi-Fi(Wireless Fidelity) Direct, 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(ZigBee), DLNA(Digital Living Network Alliance) 등의 통신 프로토콜에 따라 다른 디지털 디바이스와 네트워크 연결될 수 있다.The wireless communication unit can perform wireless communication with another digital device. The
또한, 외부장치 인터페이스부(120)는, 셋톱-박스(STB)와 상술한 각종 단자 중 적어도 하나를 통해 접속되어, 셋톱-박스(STB)와 입력/출력 동작을 수행할 수도 있다.Also, the external
한편, 외부장치 인터페이스부(120)는, 인접하는 외부 디바이스 내의 애플리케이션 또는 애플리케이션 목록(application list)을 수신하여, 제어부(150) 또는 메모리(140)로 전달할 수 있다.Meanwhile, the external
네트워크 인터페이스부(113)는, 멀티미디어 디바이스(100)를 인터넷 망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공한다. 네트워크 인터페이스부(113)는, 유선 네트워크와의 접속을 위해 예를 들어, 이더넷(Ethernet) 단자 등을 구비할 수 있으며, 무선 네트워크와의 접속을 위해 예를 들어, WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 통신 규격 등을 이용할 수 있다.The
네트워크 인터페이스부(113)는, 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 다른 사용자 또는 다른 디지털 디바이스와 데이터를 송신 또는 수신할 수 있다. 특히, 멀티미디어 디바이스(100)에 미리 등록된 다른 사용자 또는 다른 디지털 디바이스 중 선택된 사용자 또는 선택된 디지털 디바이스에, 상기 멀티미디어 디바이스(100)에 저장된 일부의 컨텐트 데이터를 송신할 수 있다.The
한편, 네트워크 인터페이스부(113)는, 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 소정 웹 페이지에 접속할 수 있다. 즉, 네트워크를 통해 소정 웹 페이지에 접속하여, 해당 서버와 데이터를 송신 또는 수신할 수 있다. 그 외, 컨텐트 제공자 또는 네트워크 운영자가 제공하는 컨텐트 또는 데이터들을 수신할 수 있다. 즉, 네트워크를 통하여 컨텐트 제공자 또는 네트워크 제공자로부터 제공되는 영화, 광고, 게임, VOD, 방송 신호 등의 컨텐트 및 그와 관련된 정보를 수신할 수 있다. 또한, 네트워크 운영자가 제공하는 펌웨어(firmware)의 업데이트 정보 및 업데이트 파일을 수신할 수 있다. 또한, 인터넷 또는 컨텐트 제공자 또는 네트워크 운영자에게 데이터들을 송신할 수 있다.On the other hand, the
또한, 네트워크 인터페이스부(113)는, 네트워크를 통해 공개(open)된 애플리케이션들 중 원하는 애플리케이션을 선택하여 수신할 수 있다.In addition, the
입력부(130)는, 영상 정보(또는 신호), 오디오 정보(또는 신호), 데이터 등의 입력을 위한 것으로서, 영상 신호 입력을 위한 카메라(131) 및 오디오 신호 입력을 위한 마이크(microphone, 132)를 포함할 수 있다.The
카메라(131)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 처리된 화상 프레임은 디스플레이부(170)에 표시되거나 메모리(140)에 저장될 수 있다.The
마이크(132)는 외부의 음향 신호를 전기적인 음성 데이터로 처리한다. 처리된 음성 데이터는 이동 단말기(100)에서 수행 중인 기능(또는 수행 중인 응용 프로그램)에 따라 다양하게 활용될 수 있다. 한편, 마이크(132)에는 외부의 음향 신호를 입력 받는 과정에서 발생되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.The
메모리(140)는, 제어부(150) 내의 각 신호 처리 및 제어를 위한 프로그램을 저장할 수도 있고, 신호 처리된 영상, 음성 또는 데이터 신호를 저장할 수도 있다.The
또한, 메모리(140)는 외부장치 인터페이스부(120) 또는 네트워크 인터페이스부(113)로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있다. 메모리(140)는, 채널 기억 기능을 통하여 소정 방송 채널에 관한 정보를 저장할 수 있다.The
메모리(140)는, 외부장치 인터페이스부(120) 또는 네트워크 인터페이스부(113)로부터 입력되는 애플리케이션 또는 애플리케이션 목록을 저장할 수 있다.The
또한, 메모리(140)는, 후술하여 설명하는 다양한 플랫폼(platform)을 저장할 수도 있다.In addition, the
메모리(140)는, 예를 들어 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(RAM), 롬(EEPROM 등) 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 멀티미디어 디바이스(100)는, 메모리(140) 내에 저장되어 있는 컨텐트 파일(동영상 파일, 정지영상 파일, 음악 파일, 문서 파일, 애플리케이션 파일 등)을 재생하여 사용자에게 제공할 수 있다. 실시예에 따라, 메모리(140)는 제어부(150) 내에 포함되어 구현될 수도 있다.The
사용자 인터페이스부(160)는, 사용자가 입력한 신호를 제어부(150)로 전달하거나 제어부(150)의 신호를 사용자에게 전달한다.The
예를 들어, 사용자 인터페이스부(160)는, RF 통신 방식, 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 리모트 컨트롤러(200)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 제어 신호를 수신하여 처리하거나, 제어부(150)의 제어 신호를 리모트 컨트롤러(200)로 송신하도록 처리할 수 있다.For example, the
또한, 사용자 인터페이스부(160)는, 전원 키, 채널 키, 볼륨 키, 설정치 등의 로컬 키(미도시)에서 입력되는 제어 신호를 제어부(150)에 전달할 수 있다.The
사용자 인터페이스부(160)는, 사용자의 제스처(gesture)를 센싱(sensing)하는 센싱부(미도시)로부터 입력되는 제어 신호를 제어부(150)에 전달하거나, 제어부(150)의 신호를 센싱부(미도시)로 송신할 수 있다. 여기서, 센싱부(미도시)는, 터치 센서, 음성 센서, 위치 센서, 동작 센서 등을 포함할 수 있다.The
제어부(150)는, 튜너(111), 복조부(112) 또는 외부장치 인터페이스부(120)를 통하여 입력되는 스트림을 역다중화하거나 역다중화된 신호들을 처리하여, 영상 또는 음성 출력을 위한 신호를 생성 및 출력할 수 있다.The
제어부(150)에서 처리된 영상 신호는, 디스플레이부(170)로 입력되어 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 제어부(150)에서 영상 처리된 영상 신호는 외부장치 인터페이스부(120)를 통하여 외부 출력디바이스로 입력될 수 있다. The video signal processed by the
제어부(150)는 역다중화부, 영상 처리부 등을 포함할 수 있다.The
제어부(150)는, 멀티미디어 디바이스(100)의 전반적인 동작을 제어할 수 있다. 예를 들어, 제어부(150)는, 튜너(111)를 제어하여, 사용자가 선택한 채널 또는 기 저장된 채널에 해당하는 RF 방송을 튜닝(tuning)하도록 제어할 수 있다.The
제어부(150)는, 사용자 인터페이스부(160)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 멀티미디어 디바이스(100)를 제어할 수 있다. 특히, 네트워크에 접속하여 사용자가 원하는 애플리케이션 또는 애플리케이션 목록을 멀티미디어 디바이스(100) 내로 다운로드 받을 수 있도록 할 수 있다.The
예를 들어, 제어부(150)는, 사용자 인터페이스부(160)를 통하여 수신한 소정 채널 선택 명령에 따라 선택한 채널의 신호가 입력되도록 튜너(111)를 제어한다. 그리고 선택한 채널의 영상, 음성 또는 데이터 신호를 처리한다. 제어부(150)는, 사용자가 선택한 채널 정보 등이 처리한 영상 또는 음성신호와 함께 디스플레이부(170) 또는 오디오 출력부(180)를 통하여 출력될 수 있도록 한다.For example, the
다른 예로, 제어부(150)는, 사용자 인터페이스부(160)를 통하여 수신한 외부 디바이스 영상 재생 명령에 따라, 외부장치 인터페이스부(120)를 통하여 입력되는 외부 디바이스, 예를 들어, 카메라 또는 캠코더로부터의, 영상 신호 또는 음성 신호가 디스플레이부(170) 또는 오디오 출력부(180)를 통해 출력될 수 있도록 한다.For example, the
한편, 제어부(150)는, 영상을 표시하도록 디스플레이부(170)를 제어할 수 있다. 예를 들어, 튜너(111)를 통해 입력되는 방송 영상, 또는 외부장치 인터페이스부(120)를 통해 입력되는 외부 입력 영상, 또는 네트워크 인터페이스부(113)를 통해 입력되는 영상, 또는 메모리(140)에 저장된 영상을, 디스플레이부(170)에 표시하도록 제어할 수 있다. 이때, 디스플레이부(170)에 표시되는 영상은, 정지영상 또는 동영상일 수 있으며, 2D 영상 또는 3D 영상일 수 있다.Meanwhile, the
또한, 제어부(150)는, 컨텐트를 재생하도록 제어할 수 있다. 이때의 컨텐트는, 멀티미디어 디바이스(100) 내에 저장된 컨텐트, 또는 수신된 방송 컨텐트, 외부로부터 입력되는 외부 입력 컨텐트일 수 있다. 컨텐트는, 방송 영상, 외부 입력 영상, 오디오 파일, 정지 영상, 접속된 웹 화면, 및 문서 파일 중 적어도 하나일 수 있다.Also, the
한편, 제어부(150)는, 애플리케이션 보기 항목에 진입하는 경우, 멀티미디어 디바이스(100) 내 또는 외부 네트워크로부터 다운로드 가능한 애플리케이션 또는 애플리케이션 목록을 표시하도록 제어할 수 있다. On the other hand, when entering the application view item, the
제어부(150)는, 다양한 사용자 인터페이스와 더불어, 외부 네트워크로부터 다운로드 되는 애플리케이션을 설치 및 구동하도록 제어할 수 있다. 또한, 사용자의 선택에 의해, 실행되는 애플리케이션에 관련된 영상이 디스플레이부(170)에 표시 되도록 제어할 수 있다.In addition to various user interfaces, the
한편, 도면에 도시하지 않았지만, 채널 신호 또는 외부 입력 신호에 대응하는 썸네일 이미지를 생성하는 채널 브라우징 처리부가 더 구비되는 것도 가능하다.Although not shown in the drawing, a channel browsing processing unit for generating a channel signal or a thumbnail image corresponding to an external input signal may be further provided.
채널 브라우징 처리부는, 복조부(112)에서 출력한 스트림 신호(TS) 또는 외부장치 인터페이스부(120)에서 출력한 스트림 신호 등을 입력받아, 입력되는 스트림 신호로부터 영상을 추출하여 썸네일 영상을 생성할 수 있다. 생성된 썸네일 영상은 그대로 또는 부호화되어 제어부(150)로 입력될 수 있다. 또한, 생성된 썸네일 영상은 스트림 형태로 부호화되어 제어부(150)로 입력되는 것도 가능하다. 제어부(150)는 입력된 썸네일 영상을 이용하여 복수의 썸네일 영상을 구비하는 썸네일 리스트를 디스플레이부(170)에 표시할 수 있다. 한편, 이러한 썸네일 리스트 내의 썸네일 영상들은 차례로 또는 동시에 업데이트 될 수 있다. 이에 따라 사용자는 복수의 방송 채널의 내용을 간편하게 파악할 수 있게 된다. The channel browsing processing unit receives a stream signal TS output from the
한편, 제어부(150)는 음성 인식부(151) 및 얼굴 인식부(152)를 포함한다.Meanwhile, the
음성 인식부(151)는, 마이크(132)에서 외부의 음향 신호를 수신하여 전기적인 데이터로 처리한 오디오 데이터를 분석하여 소정의 명령어로 변환할 수 있다. 예를 들어, 음성 인식부(151)는 사용자가 발화한 명령어에 대응하는 오디오 데이터를 마이크(132)로부터 전달받고, 메모리(140)에 저장된 음성 인식 알고리즘을 이용하여 STT(Speech to Text) 작업을 수행할 수 있다. 그리고, 제어부(180)는, 상기 STT 작업에 의해 변환된 소정의 명령어에 대응하는 제어 신호를 생성하고, 상기 생성된 제어 신호에 따라 멀티미디어 디바이스(100)의 각 기능을 제어할 수 있다. 메모리(140)에는, 특정 명령어와 멀티미디어 디바이스(100)의 각 기능에 대한 맵핑 데이터를 저장하고 있을 수 있다. 또한, 음성 인식부(151)는, 각 사용자의 목소리를 인식하여 구별해낼 수 있다. 메모리(140)는 등록된 각 사용자에 대응하는 오디오 데이터를 저장하고 있으며, 목소리 구별에 필요한 알고리즘을 미리 저장하고 있을 수 있다. 음성 인식부(151)는, 마이크(122)로부터 전달 받은 오디오 데이터를 분석하여, 상기 오디오 데이터에 여러 사용자의 목소리에 대응하는 오디오 데이터가 포함되어 있는지 여부, 상기 오디오 데이터에 메모리(140)에 저장된 등록 사용자의 목소리에 대응하는 오디오 데이터가 포함되어 있는지 여부 등을 인식할 수 있다.The
얼굴 인식부(152)는, 카메라(131)에 의해 획득된 이미지에 포함된 얼굴을 인식할 수 있다. 메모리(140)는, 등록된 각 사용자의 얼굴에 대응하는 이미지 데이터를 저장하고 있으며, 얼굴 인식에 필요한 알고리즘을 미리 저장하고 있을 수 있다. 얼굴 인식부(152)는, 카메라(131)에 의해 획득된 이미지에 메모리(140)에 저장된 등록 사용자의 얼굴이 포함되어 있는지 여부를 인식할 수 있다.The
디스플레이부(170)는, 제어부(150)에서 처리된 영상 신호, 데이터 신호, OSD 신호 또는 외부장치 인터페이스부(120)에서 수신되는 영상 신호, 데이터 신호 등을 각각 R, G, B 신호로 변환하여 구동 신호를 생성한다.The
디스플레이부(170)는 PDP, LCD, OLED, 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 등이 가능할 수 있다.The
한편, 디스플레이부(170)는, 터치 스크린으로 구성되어 출력 디바이스 이외에 입력 디바이스로 사용되는 것도 가능하다.Meanwhile, the
오디오 출력부(180)는, 제어부(150)에서 음성 처리된 신호, 예를 들어, 스테레오 신호, 3.1 채널 신호 또는 5.1 채널 신호를 입력 받아 음성으로 출력한다. 오디오 출력부(180)는 다양한 형태의 스피커로 구현될 수 있다.The
한편, 사용자의 제스처를 감지하기 위해, 상술한 바와 같이, 터치 센서, 음성 센서, 위치 센서, 동작 센서 중 적어도 하나를 구비하는 센싱부(미도시)가 멀티미디어 디바이스(100)에 더 구비될 수 있다. 센싱부(미도시)에서 감지된 신호는 사용자 인터페이스부(160)를 통해 제어부(150)로 전달될 수 있다.In order to detect a user's gesture, a sensing unit (not shown) having at least one of a touch sensor, an audio sensor, a position sensor, and an operation sensor may be further included in the
한편, 사용자를 촬영하는 촬영부(미도시)가 더 구비될 수 있다. 촬영부(미도시)에서 촬영된 영상 정보는 제어부(150)에 입력될 수 있다.On the other hand, a photographing unit (not shown) for photographing a user may be further provided. The image information photographed in the photographing unit (not shown) may be input to the
제어부(150)는, 촬영부(미도시)로부터 촬영된 영상, 또는 센싱부(미도시)로부터의 감지된 신호를 각각 또는 조합하여 사용자의 제스처를 감지할 수도 있다. The
전원 공급부(190)는, 멀티미디어 디바이스(100) 전반에 걸쳐 해당 전원을 공급한다.The
특히, 시스템 온 칩(System on Chip; SoC)의 형태로 구현될 수 있는 제어부(150)와, 영상 표시를 위한 디스플레이부(170), 및 오디오 출력을 위한 오디오 출력부(180)에 전원을 공급할 수 있다.Particularly, it is possible to supply power to a
이를 위해, 전원 공급부(190)는, 교류 전원을 직류 전원으로 변환하는 컨버터(미도시)를 구비할 수 있다. 한편, 예를 들어, 디스플레이부(170)가 다수의 백라이트 램프(backlight lamp)를 구비하는 액정 패널로서 구현되는 경우, 휘도 가변 또는 디밍(dimming) 구동을 위해, PWM(Pulse Width Modulation) 동작 가능한 인버터(inverter)(미도시)를 더 구비할 수도 있다.To this end, the
리모트 컨트롤러(200)는, 사용자 입력을 사용자 인터페이스부(160)로 송신한다. 이를 위해, 리모트 컨트롤러(200)는, 블루투스(Bluetooth), RF(Radio Frequency) 통신, 적외선(IR) 통신, UWB(Ultra Wideband), 지그비(ZigBee) 방식 등을 사용할 수 있다. The
또한, 리모트 컨트롤러(200)는, 사용자 인터페이스부(160)에서 출력한 영상, 음성 또는 데이터 신호 등을 수신하여, 이를 리모트 컨트롤러(200)에서 표시하거나 음성 또는 진동을 출력할 수 있다.Also, the
상술한 멀티미디어 디바이스(100)는, 고정형 또는 이동형의 ATSC 방식 또는 DVB 방식의 디지털 방송 신호의 처리가 가능한 디지털 방송 수신기일 수 있다. The
그 밖에 본 발명에 따른 디스플레이 디바이스는 도시된 구성 중 필요에 따라 일부 구성을 생략하거나 반대로 도시되진 않은 구성을 더 포함할 수도 있다. 한편, 디스플레이 디바이스는 상술한 바와 달리, 튜너와 복조부를 구비하지 않고, 네트워크 인터페이스부 또는 외부장치 인터페이스부를 통해서 컨텐트를 수신하여 재생할 수도 있다.In addition, the display device according to the present invention may further include a configuration that omits some of the configuration shown in FIG. On the other hand, the display device may not receive the tuner and the demodulator, and may receive and reproduce the content through the network interface unit or the external device interface unit, unlike the above.
도 2는 본 발명의 일 실시예에 따라 도 1의 제어부의 상세 구성을 설명하기 위한 블록도이다.FIG. 2 is a block diagram illustrating a detailed configuration of the controller of FIG. 1 according to an embodiment of the present invention.
본 발명의 일 실시예에 의한 멀티미디어 디바이스(100)의 제어부(150)는, 역다중화부(153), 영상 처리부(154), OSD 생성부(155), 믹서(mixer)(156), 프레임 레이트 변환부(FRC: Frame Rate Converter)(157), 및 포맷터(formatter)(158)를 포함할 수 있다. 그 외, 도시하지 않았으나, 상기 제어부(150)는 음성 처리부와 데이터 처리부를 더 포함할 수 있다.The
역다중화부(153)는, 입력되는 스트림을 역다중화한다. 예를 들어, 역다중화부(153)는 입력되는 MPEG-2 TS 영상, 음성 및 데이터 신호로 역다중화할 수 있다. 여기서, 역다중화부(153)에 입력되는 스트림 신호는, 튜너 또는 복조부 또는 외부장치 인터페이스부에서 출력되는 스트림 신호일 수 있다.The
영상 처리부(154)는, 역다중화된 영상 신호의 영상 처리를 수행한다. 이를 위해, 영상 처리부(154)는, 영상 디코더(154a) 및 스케일러(154b)를 구비할 수 있다.The
영상 디코더(154a)는 역다중화된 영상 신호를 복호하며, 스케일러(272b)는 복호된 영상 신호의 해상도를 디스플레이부에서 출력 가능하도록 스케일링(scaling)한다.The
영상 디코더(154a)는 다양한 규격을 지원할 수 있다. 예를 들어, 영상 디코더(154a)는 영상 신호가 MPEG-2 규격으로 부호화된 경우에는 MPEG-2 디코더의 기능을 수행하고, 영상 신호가 DMB(Digital Multimedia Broadcasting) 방식 또는 H.264 규격으로 부호화된 경우에는 H.264 디코더의 기능을 수행할 수 있다.The
한편, 영상 처리부(154)에서 복호된 영상 신호는, 믹서(156)로 입력된다.On the other hand, the video signal decoded by the
OSD 생성부(155)는, 사용자 입력에 따라 또는 자체적으로 OSD 데이터를 생성한다. 예를 들어, OSD 생성부(155)는 사용자 인터페이스부(160)의 제어 신호에 기초하여 디스플레이부(170)의 화면에 각종 데이터를 그래픽(Graphic)이나 텍스트(Text) 형태로 표시하기 위한 데이터를 생성한다. 생성되는 OSD 데이터는, 멀티미디어 디바이스(100)의 사용자 인터페이스 화면(예를 들어, GUI), 다양한 메뉴 화면, 위젯(widget), 아이콘(icon), 시청률 정보(viewing rate information) 등의 다양한 데이터를 포함한다. OSD 생성부(155)는, 방송 영상의 자막 또는 EPG에 기반한 방송 정보를 표시하기 위한 데이터를 생성할 수도 있다.The
믹서(156)는, OSD 생성부(155)에서 생성된 OSD 데이터와 영상 처리부에서 영상 처리된 영상 신호를 믹싱(mixing)하여 포맷터(158)로 제공한다. 복호된 영상 신호와 OSD 데이터가 믹싱됨으로 인하여, 방송 영상 또는 외부 입력 영상 상에 OSD가 오버레이(overlay) 되어 표시된다.The
프레임 레이트 변환부(FRC)(157)는, 입력되는 영상의 프레임 레이트(frame rate)를 변환한다. 예를 들어, 프레임 레이트 변환부(157)는 입력되는 60Hz 영상의 프레임 레이트를 디스플레이부의 출력 주파수에 따라 예를 들어, 120Hz 또는 240Hz의 프레임 레이트를 가지도록 변환할 수 있다. 상기와 같이, 프레임 레이트를 변환하는 방법에는 다양한 방법이 존재할 수 있다. 일 예로, 프레임 레이트 변환부(157)는 프레임 레이트를 60Hz에서 120Hz로 변환하는 경우, 제1 프레임과 제2 프레임 사이에 동일한 제1 프레임을 삽입하거나, 제1 프레임과 제2 프레임으로부터 예측된 제3 프레임을 삽입함으로써 변환할 수 있다. 다른 예로, 프레임 레이트 변환부(157)는 프레임 레이트를 60Hz에서 240Hz로 변환하는 경우, 기존 프레임 사이에 동일한 프레임 또는 예측된 프레임을 3개 더 삽입하여 변환할 수 있다. 한편, 별도의 프레임 변환을 수행하지 않는 경우에는 프레임 레이트 변환부(157)를 바이패스(bypass) 할 수도 있다.A frame rate conversion unit (FRC) 157 converts the frame rate of an input image. For example, the frame
포맷터(158)는, 입력되는 프레임 레이트 변환부(157)의 출력을 디스플레이부의 출력 포맷에 맞게 변경한다. 예를 들어, 포맷터(158)는 R, G, B 데이터 신호를 출력할 수 있으며, 이러한 R, G, B 데이터 신호는, 낮은 전압 차분 신호(LVDS: Low voltage differential signal) 또는 mini-LVDS로 출력될 수 있다. 또한, 포맷터(158)는 입력되는 프레임 레이트 변환부(157)의 출력이 3D 영상 신호인 경우에는 디스플레이부의 출력 포맷에 맞게 3D 형태로 구성하여 출력함으로써, 상기 디스플레이부(170)를 통해 3D 서비스를 지원할 수도 있다.The
한편, 제어부(150) 내 음성 처리부(미도시)는, 역다중화된 음성 신호의 음성 처리를 수행할 수 있다. 이러한 음성 처리부(미도시)는 다양한 오디오 포맷을 처리하도록 지원할 수 있다. 일 예로, 음성 신호가 MPEG-2, MPEG-4, AAC, HE-AAC, AC-3, BSAC 등의 포맷으로 부호화된 경우에도 이에 대응되는 디코더를 구비하여 처리할 수 있다.Meanwhile, the voice processing unit (not shown) in the
또한, 제어부(150) 내 음성 처리부(미도시)는, 베이스(Base), 트레블(Treble), 음량 조절 등을 처리할 수 있다.In addition, the voice processing unit (not shown) in the
제어부(150) 내 데이터 처리부(미도시)는, 역다중화된 데이터 신호의 데이터 처리를 수행할 수 있다. 예를 들어, 데이터 처리부는 역다중화된 데이터 신호가 부호화된 경우에도 이를 복호할 수 있다. 여기서, 부호화된 데이터 신호로는, 각 채널에서 방영되는 방송 프로그램의 시작시각, 종료시각 등의 방송 정보가 포함된 EPG 정보일 수 있다. A data processing unit (not shown) in the
한편, 상술한 멀티미디어 디바이스(100)는 본 발명에 따른 예시로서, 각 구성요소는 실제 구현되는 디스플레이 디바이스의 사양에 따라 통합, 추가, 또는 생략될 수 있다. 즉, 필요에 따라, 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나 하나의 구성요소가 2 이상의 구성요소로 세분화될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시 예를 설명하기 위한 것이며, 그 구체적인 동작이나 디바이스는 본 발명의 권리범위를 제한하지 아니한다.Meanwhile, the above-described
도 3은 본 발명의 일 실시예에 의한 멀티미디어 디바이스를 제어하기 위한 리모트 컨트롤러의 예시들을 도시한 도면이다.3 is a diagram illustrating examples of a remote controller for controlling a multimedia device according to an exemplary embodiment of the present invention.
멀티미디어 디바이스(100)를 제어하기 위하여, 멀티미디어 디바이스(100) 상에 구비된 프론트 패널(front panel)(미도시)을 이용하거나 리모트 컨트롤러(200)를 이용할 수 있다.In order to control the
리모트 컨트롤러(200)는 유, 무선 통신 가능한 사용자 인터페이스 디바이스(UID; User Interface Device)로써, 주로 멀티미디어 디바이스(100)의 제어 목적으로 구현된 리모컨(203), 키보드(202), 포인팅 디바이스(201), 터치패드(touch-pad) 등이 포함될 수 있다. 그 밖에, 멀티미디어 디바이스(100)의 제어 목적은 아니나 모드 전환 등을 통해 멀티미디어 디바이스(100)를 제어할 수 있는 스마트 폰, 태블릿 PC 등 모바일 디바이스 등도 리모트 컨트롤러(200)에 포함될 수 있다. The
리모트 컨트롤러(200)는, 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(ZigBee), DLNA(Digital Living Network Alliance), RS 등의 통신 프로토콜을 필요에 따라 적어도 하나 이상 채용하여 멀티미디어 디바이스(100)와 통신 가능하다.The
리모컨(203)은, 멀티미디어 디바이스(100)의 제어를 위해 필요한 다양한 키 버튼들이 구비된 통상의 입력 수단을 말한다.The
포인팅 디바이스(201)는, 자이로 센서(Gyro Sensor) 등을 탑재하여 사용자의 움직임, 압력, 회전 등에 기초하여 멀티미디어 디바이스(100)의 화면상에 대응되는 포인터(pointer)를 구현하여, 멀티미디어 디바이스(100)에 소정 제어 명령을 전달한다. 이러한 포인팅 디바이스(203)는, 매직 리모컨, 매직 컨트롤러 등 다양한 이름으로 명명될 수 있다.The
키보드(202)는, 멀티미디어 디바이스(100)가 종래 방송만을 제공하던 것을 넘어 지능형 통합 디지털 디바이스로서 웹 브라우저, 애플리케이션, SNS(Social Network Service) 등 다양한 서비스를 제공함에 따라 종래 리모컨(203)만으로는 제어가 쉽지 않아 이를 보완하여 PC의 키보드와 유사하게 구현하여 텍스트 등의 입력 편의를 도모하기 위해 구현되었다.The
한편, 리모컨(203), 포인팅 디바이스(201), 키보드(202) 등의 리모트 컨트롤러(200)는, 필요에 따라 터치패드를 구비함으로써 텍스트 입력, 포인터 이동, 사진 내지 동영상의 확대/축소 등 더욱 편리하고 다양한 제어 목적에 이용할 수 있다. On the other hand, the
도 4는 본 발명의 일 실시예에 따른 리모트 컨트롤러의 구성 모듈들을 도시한 블록도이다. 다만, 도 4는 설명의 편의를 위한 실시예이며, 도 4에 도시된 구성모듈들 이외에 다른 구성 모듈을 포함하거나, 일부의 구성 모듈이 생략되는 형태도 본 발명의 권리범위에 속한다.4 is a block diagram illustrating the configuration modules of a remote controller according to an embodiment of the present invention. However, FIG. 4 is an embodiment for convenience of explanation, and a configuration in which a configuration module other than the configuration modules shown in FIG. 4 is included, or a configuration module is omitted is also within the scope of the present invention.
도 4에 도시된 바와 같이, 본 발명의 일 실시예에 따른 리모트 컨트롤러(200)는 전원 공급부(211), 메모리(212), 제어부(213), 무선 통신부(214), 사용자 입력부(215), 출력부(216), 센서부(217) 및 마이크(218) 등을 포함할 수 있다.4, the
무선 통신부(214)는 임의의 외부 디바이스와 통신 가능하도록 설계된다.The wireless communication unit 214 is designed to be capable of communicating with any external device.
무선 통신부(214)는, RF 통신규격에 따라 멀티미디어 디바이스(100)와 신호를 송수신할 수 있는 RF 모듈(214a) 및 IR 통신규격에 따라 멀티미디어 디바이스(100)와 신호를 송수신할 수 있는 IR 모듈(214b)을 구비할 수 있다.The wireless communication unit 214 includes an RF module 214a capable of transmitting and receiving signals with the
리모트 컨트롤러(200)는 멀티미디어 디바이스(100)로 리모트 컨트롤러(200)의 움직임 등에 관한 정보가 담긴 신호를 RF 모듈(211)을 통하여 전송할 수 있다. 또한, 리모트 컨트롤러(200)는 멀티미디어 디바이스(100)가 전송한 신호를 RF 모듈(211)을 통하여 수신할 수 있다.The
또한, 리모트 컨트롤러(200)는 필요에 따라 IR 모듈(214b)을 통하여 멀티미디어 디바이스(100)로 전원 온/오프, 채널 변경, 볼륨 변경 등에 관한 명령을 전송할 수 있다. In addition, the
사용자 입력부(215)는 키패드, 버튼, 터치 패드, 또는 터치 스크린 등으로 구성될 수 있다. 사용자는 사용자 입력부(215)를 조작하여 멀티미디어 디바이스(100)와 관련된 명령을 입력할 수 있다. The user input unit 215 may include a keypad, a button, a touchpad, or a touch screen. The user can operate the user input unit 215 to input a command related to the
센서부(217)는 자이로 센서(217a) 및 가속도 센서(217b)를 포함할 수 있다.The sensor unit 217 may include a gyro sensor 217a and an acceleration sensor 217b.
일례로, 자이로 센서(217a)는 리모트 컨트롤러(200)의 동작에 관한 정보를 x, y, z 축을 기준으로 센싱할 수 있다. 가속도 센서(217b)는 리모트 컨트롤러(200)의 이동속도 등에 관한 정보를 센싱할 수 있다. 한편, 거리측정센서를 더 구비할 수 있으며, 이에 의해, 멀티미디어 디바이스(100)와의 거리를 센싱할 수 있다. For example, the gyro sensor 217a can sense information on the operation of the
출력부(216)는 사용자 입력부(215)의 조작에 대응하거나 멀티미디어 디바이스(100)에서 전송한 신호에 대응하는 영상 또는 음성 신호를 출력할 수 있다. 출력부(216)를 통하여 사용자는 사용자 입력부(215)의 조작 여부 또는 멀티미디어 디바이스(100)의 제어 여부를 인지할 수 있다. The output unit 216 may output an image or voice signal corresponding to the operation of the user input unit 215 or corresponding to the signal transmitted from the
일례로, 출력부(216)는 사용자 입력부(215)가 조작되거나 무선 통신부(214)를 통하여 멀티미디어 디바이스(100)와 신호가 송수신 되면 점등되는 LED 모듈(216a), 진동을 발생하는 진동 모듈(216b), 음향을 출력하는 음향 출력 모듈(216c), 또는 영상을 출력하는 디스플레이 모듈(216d) 등을 구비할 수 있다. For example, the output unit 216 may include an LED module 216a that is turned on when the user input unit 215 is operated or a signal is transmitted to or received from the
전원 공급부(211)는 리모트 컨트롤러(200)로 전원을 공급한다. 전원 공급부(211)는 리모트 컨트롤러(200)가 소정 시간 동안 움직이지 않은 경우 전원 공급을 중단함으로써 전원 낭비를 줄일 수 있다. 전원 공급부(211)는 리모트 컨트롤러(200)에 구비된 소정 키가 조작된 경우에 전원 공급을 재개할 수 있다.The power supply unit 211 supplies power to the
메모리(212)는 리모트 컨트롤러(200)의 제어 또는 동작에 필요한 여러 종류의 프로그램, 어플리케이션 데이터 등이 저장될 수 있다. The memory 212 may store various types of programs, application data, and the like necessary for the control or operation of the
제어부(213)는 리모트 컨트롤러(200)의 제어에 관련된 제반 사항을 제어한다. 제어부(213)는 사용자 입력부(215)의 소정 키 조작에 대응하는 신호 또는 센서부(217)에서 센싱한 리모트 컨트롤러(200)의 움직임에 대응하는 신호를 무선 통신부(214)를 통하여 멀티미디어 디바이스(100)로 전송할 수 있다.The control unit 213 controls various matters related to the control of the
리모트 컨트롤러(200)는 마이크(microphone, 218)를 포함할 수 있다. 마이크(218)는 외부의 음향 신호를 전기적인 음성 데이터로 처리한다. 실시예에 따라, 마이크(218)는 언제나 활성화 상태로 유지될 수도 있고, 사용자 입력부(215) 내 특정 버튼이 선택된 경우에만 활성화될 수도 있다. 제어부(213)는, 마이크(218)로부터 전달 받은 오디오 데이터를 무선 통신부(214)를 통해 멀티미디어 디바이스(100)로 전송할 수 있다.The
이하에서는, 도 5 내지 도 24를 참조하여, 본 발명의 실시예들을 구체적으로 설명하기로 한다.Hereinafter, embodiments of the present invention will be described in detail with reference to FIGS. 5 to 24. FIG.
도 5는 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 도시한 흐름도이다.5 is a flowchart illustrating an example of a method of controlling a multimedia device according to an embodiment of the present invention.
멀티미디어 디바이스(100)의 제어부(150)는, 특정 컨텐트의 비디오 데이터를 출력하도록 디스플레이부(170)를 제어하고 상기 특정 컨텐트의 오디오 데이터를 출력하도록 오디오 출력부(180)를 제어한다. 상기 특정 컨텐트는, 튜너(111)를 통해 수신된 라이브 방송 신호에 포함된 것일 수도 있고, 네트워크 인터페이스부(113)를 통해 외부 서버로부터 수신되거나 외부장치 인터페이스부(120)를 통해 외부 디바이스로부터 수신된 컨텐트일 수도 있다.The
제어부(150)는, 외부의 음향 신호를 수신하여 전기적인 제1 오디오 데이터로 변환하도록 마이크(132)를 제어한다(S302). 후술하는 리모트 컨트롤러(200) 내 마이크(218)와의 구별을 용이하게 하기 위하여, 마이크(132)를 제1 마이크(132)라 칭하고 마이크(218)를 제2 마이크(218)라 칭할 수도 있다. 실시예에 따라, 제1 마이크(132)는 항상 활성화된 상태로 유지될 수도 있고, 기 설정된 시간 간격 마다 소정 시간 활성화될 수도 있고, 카메라(131)에 의해 획득된 이미지를 통해 다수의 얼굴이 인식된 경우 활성화될 수도 있다.The
제어부(150)는, 리모트 컨트롤러(200)로부터, 외부의 음향 신호에 대응하는 제2 오디오 데이터를 수신하도록 무선 통신부를 제어한다(S303). 상기 제2 오디오 데이터는, 리모트 컨트롤러(200) 내 제2 마이크(218)를 통해 수신된 외부의 음향 신호가 전기적인 데이터로 변환된 것이다. 실시예에 따라, 상기 무선 통신부는 사용자 인터페이스부(160) 내에 구현되거나 외부장치 인터페이스부(120) 내에 구현될 수 있다. 상기 제2 오디오 데이터는 RF 통신규격에 따라 리모트 컨트롤러(200)로부터 수신될 수 있다.The
제어부(150)는, 이미지를 획득하도록 카메라(131)를 제어한다(S304). 실시예에 따라, 상기 단계(S304)는, 상술한 단계들(S301~S303) 중 적어도 일부와 시간적으로 중첩되어 수행될 수도 있다.The
제어부(150)는, 제1 오디오 데이터의 값과 제2 오디오 데이터의 값이 서로 다른 경우, 상기 획득된 이미지에 기초하여 기 설정된 특정 기능을 제어한다(S305). 기 설정된 특정 기능이란, 오디오 출력부(180)를 통해 출력되는 오디오 데이터의 볼륨 조절 기능, 상기 특정 컨텐트의 재생 관련 기능 등일 수 있다. 여기서, 제1 오디오 데이터의 값이란, 실시예에 따라, 제1 마이크(132)를 통해 획득된 오디오 데이터에 대응하는 신호의 세기, 제1 마이크(132)를 통해 획득된 오디오 데이터에서 오디오 출력부(180)를 통해 출력되는 오디오 데이터를 제외한 잡음 신호의 세기, 제1 마이크(132)를 통해 획득된 오디오 데이터에서 오디오 출력부(180)를 통해 출력되는 오디오 데이터를 추출하고 상기 추출된 오디오 데이터에 대응하는 신호의 세기 중 어느 하나일 수 있다. 제2 오디오 데이터의 값 역시 마찬가지이다.If the value of the first audio data is different from the value of the second audio data, the
제어부(150)는, 기 설정된 특정 기능을 제어하기 위하여 상기 획득된 이미지를 참고할 수 있다. 이때, 제어부(150)는, 상기 획득된 이미지를 통하여, 사용자, 사용자의 시선, 사용자와의 거리, 사용자의 위치, 리모트 컨트롤러(200)의 위치, 사용자의 리모트 컨트롤러(200)의 홀딩 여부 및 사용자의 입의 움직임 중 적어도 하나를 디텍팅할 수 있다. 예를 들어, 제어부(150)는, 얼굴 인식부(151)를 통하여 상기 획득된 이미지에 포함된 사용자들의 얼굴을 인식할 수 있고, 상기 인식된 얼굴들 중 메모리(140)에 저장된 등록 사용자가 있는지 여부도 디텍팅할 수 있다. 또한, 제어부(150)는, 상기 인식된 얼굴이 향하고 있는 방향 및 상기 인식된 얼굴에 포함된 이목구비 등에 기초하여 사용자의 시선을 디텍팅할 수 있다. 또한, 제어부(150)는, 상기 획득된 이미지에 포함된 사용자의 크기와 메모리(140)에 저장된 사람의 기준 크기를 비교하여 멀티미디어 디바이스(100)와 사용자와의 거리를 디텍팅할 수 있다. 또한, 제어부(150)는, 상기 획득된 이미지에 포함된 사용자들의 위치를 디텍팅할 수 있다. 또한, 제어부(150)는, 상기 획득된 이미지에 리모트 컨트롤러(200)가 포함되어 있는지 및 리모트 컨트롤러(200)의 크기에 기초하여 리모트 컨트롤러(200)의 위치를 디텍팅할 수 있다. 또한, 제어부(150)는, 상기 획득된 이미지에 포함된 사용자가 리모트 컨트롤러(200)를 홀딩하고 있는지 여부 및 상기 획득된 이미지에 포함된 사용자들 중 어느 사용자가 리모트 컨트롤러(200)에 인접한지 여부를 디텍팅할 수 있다. 또한, 제어부(150)는, 상기 인식된 얼굴의 이목구비에 기초하여 사용자의 입의 움직임 유무 등을 디텍팅할 수 있다.The
도 6은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다.6 is a diagram for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
도 6에서는, 멀티미디어 디바이스(100)가 턴 온(turn on)되어 있고 여러 사용자가 멀티미디어 디바이스(100)의 주변에 있으나, 아무도 멀티미디어 디바이스(100)를 시청하고 있지 않거나 소수의 사용자만이 멀티미디어 디바이스(100)를 시청하고 있는 상황을 가정한다. 또한, 리모트 컨트롤러(200)는 멀티미디어 디바이스(200)보다는 사용자들에 인접하여 위치하고 있는 것으로 가정한다.6, when the
제어부(150)는, 특정 컨텐트의 비디오 데이터를 출력하도록 디스플레이부(170)를 제어하고 상기 특정 컨텐트의 오디오 데이터를 출력하도록 오디오 출력부(180)를 제어한다.The
제어부(150)는, 외부의 음향 신호를 수신하여 전기적인 제1 오디오 데이터로 변환하도록 제1 마이크(132)를 제어하고, 리모트 컨트롤러(200)로부터, 외부의 음향 신호에 대응하는 제2 오디오 데이터를 수신하도록 무선 통신부를 제어한다.The
제어부(150)는, 제1 오디오 데이터의 값과 제2 오디오 데이터의 값을 비교한다. 여기서, 제1 오디오 데이터의 값이란 제1 마이크(132)를 통해 획득된 오디오 데이터에 대응하는 신호의 세기 또는 제1 마이크(132)를 통해 획득된 오디오 데이터에서 오디오 출력부(180)를 통해 출력되는 오디오 데이터를 제외한 잡음 신호의 세기일 수 있다. 또한, 제2 오디오 데이터의 값이란, 상기 제1 오디오 데이터의 값이 제1 마이크(132)를 통해 획득된 오디오 데이터에 대응하는 신호의 세기인 경우에는, 리모트 컨트롤러(200)로부터 수신된 제2 오디오 데이터에 대응하는 신호의 세기일 수 있고, 상기 제1 오디오 데이터의 값이 제1 마이크(132)를 통해 획득된 오디오 데이터에서 오디오 출력부(180)를 통해 출력되는 오디오 데이터를 제외한 잡음 신호의 세기인 경우에는, 리모트 컨트롤러(200)로부터 수신된 제2 오디오 데이터에서 오디오 출력부(180)를 통해 출력되는 오디오 데이터를 제외한 잡음 신호의 세기일 수 있다.The
제어부(150)는, 제1 오디오 데이터의 값과 제2 오디오 데이터의 값이 다른 경우, 카메라(131)에 의해 획득된 이미지에 기초하여 멀티미디어 디바이스(100)의 특정 기능을 제어할 수 있다. 제어부(150)는, 기 설정된 시간 간격마다 이미지를 획득하도록 카메라(131)를 제어할 수 있고 제1 오디오 데이터의 값과 제2 오디오 데이터의 값이 다른 경우 카메라(131)에 의해 기 획득된 이미지를 이용할 수도 있고, 제1 오디오 데이터의 값과 제2 오디오 데이터의 값이 다른 경우 이미지를 획득하도록 카메라(131)를 제어할 수 있고 상기 획득된 이미지를 이용할 수도 있다. The
제어부(150)는, 상기 획득된 이미지를 통하여, 사용자, 사용자의 시선, 사용자와의 거리, 사용자의 위치, 리모트 컨트롤러(200)의 위치, 사용자의 리모트 컨트롤러(200)의 홀딩 여부 및 사용자의 입의 움직임 중 적어도 하나를 디텍팅할 수 있다. The
제어부(150)는, 상기 제1 오디오 데이터의 값보다 상기 제2 오디오 데이터의 값이 더 크고, 상기 디텍팅된 사용자의 시선에 기초하여 시선이 디스플레이부(170)를 향하고 있는 사용자보다 디스플레이부(170)를 향하고 있지 않은 사용자가 더 많은 경우, 오디오 출력부(180)를 통해 출력되는 오디오 데이터의 볼륨을 기 설정된 정도만큼 감소시킬 수 있다. 멀티미디어 디바이스(100) 앞에 여러 사용자가 있으나 아무도 멀티미디어 디바이스(100)를 시청하고 있지 않거나 소수의 사용자만이 멀티미디어 디바이스(100)를 시청하고 있는 상황인 경우, 볼륨을 줄이는 것이 다수의 사용자의 의도에 부합할 수 있기 때문이다. 실시예에 따라, 제어부(150)는, 상기 제1 오디오 데이터의 값보다 상기 제2 오디오 데이터의 값이 더 크고, 상기 디텍팅된 사용자의 시선에 기초하여 시선이 디스플레이부(170)를 향하고 있는 사용자보다 디스플레이부(170)를 향하고 있지 않은 사용자가 더 많고, 상기 획득된 이미지에 포함된 사용자들이 리모트 컨트롤러(200)를 홀딩하고 있지 않은 경우, 오디오 출력부(180)를 통해 출력되는 오디오 데이터의 볼륨을 기 설정된 정도만큼 감소시킬 수도 있다.The
실시예에 따라, 제어부(150)는, 상기 제1 오디오 데이터의 값보다 상기 제2 오디오 데이터의 값이 더 크고, 상기 디텍팅된 사용자의 시선에 기초하여 시선이 디스플레이부(170)를 향하고 있는 사용자가 없는 경우, 상기 특정 컨텐트의 재생을 중지하거나 일시 정지할 수도 있다. 여기서, 상기 특정 컨텐트가 라이브 방송 신호인 경우에는 재생이 일시 정지되고 타임-시프트 기능이 활성화될 수도 있다.According to the embodiment, when the value of the second audio data is larger than the value of the first audio data and the line of sight is directed to the
도 7은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 다른 일례를 설명하기 위한 도면이다.7 is a view for explaining another example of a method of controlling a multimedia device according to an embodiment of the present invention.
도 7에서는, 멀티미디어 디바이스(100)가 턴 온(turn on)되어 있고 여러 사용자가 멀티미디어 디바이스(100)의 주변에 있으나, 아무도 멀티미디어 디바이스(100)를 시청하고 있지 않거나 소수의 사용자만이 멀티미디어 디바이스(100)를 시청하고 있는 상황을 가정한다. 또한, 리모트 컨트롤러(200)는 멀티미디어 디바이스(200)보다는 사용자들에 인접하여 위치하고 있는 것으로 가정한다.7, when the
제어부(150)는, 특정 컨텐트의 비디오 데이터를 출력하도록 디스플레이부(170)를 제어하고 상기 특정 컨텐트의 오디오 데이터를 출력하도록 오디오 출력부(180)를 제어한다.The
제어부(150)는, 외부의 음향 신호를 수신하여 전기적인 제1 오디오 데이터로 변환하도록 제1 마이크(132)를 제어하고, 리모트 컨트롤러(200)로부터, 외부의 음향 신호에 대응하는 제2 오디오 데이터를 수신하도록 무선 통신부를 제어한다.The
제어부(150)는, 제1 오디오 데이터의 값과 제2 오디오 데이터의 값을 비교한다. 그리고, 제어부(150)는, 제1 오디오 데이터의 값과 제2 오디오 데이터의 값이 다른 경우, 카메라(131)에 의해 획득된 이미지에 기초하여 멀티미디어 디바이스(100)의 특정 기능을 제어할 수 있다.The
제어부(150)는, 상기 제1 오디오 데이터의 값보다 상기 제2 오디오 데이터의 값이 더 크고, 상기 디텍팅된 사용자의 시선에 기초하여 시선이 디스플레이부(170)를 향하고 있는 사용자보다 디스플레이부(170)를 향하고 있지 않은 사용자가 더 많되, 시선이 디스플레이부(170)를 향하고 있는 사용자가 리모트 컨트롤러(200)를 홀딩하고 있는 경우, 오디오 출력부(180)를 통해 출력되는 오디오 데이터의 볼륨을 일정하게 유지하거나 기 설정된 정도만큼 증가시킬 수 있다. 멀티미디어 디바이스(100)를 시청하고 있지 않은 사용자가 다수이더라도, 리모트 컨트롤러(200)를 홀딩하고 있는 사용자를 우선적으로 고려하기 위함이다. The
또는, 제어부(150)는, 상기 제1 오디오 데이터의 값보다 상기 제2 오디오 데이터의 값이 더 크고, 상기 디텍팅된 사용자의 시선에 기초하여 시선이 디스플레이부(170)를 향하고 있는 사용자보다 디스플레이부(170)를 향하고 있지 않은 사용자가 더 많되, 시선이 디스플레이부(170)를 향하고 있는 사용자가 메모리(140)에 저장된 등록 사용자인 경우, 오디오 출력부(180)를 통해 출력되는 오디오 데이터의 볼륨을 일정하게 유지하거나 기 설정된 정도만큼 증가시킬 수 있다.Alternatively, if the value of the second audio data is larger than the value of the first audio data, the
도 8은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 또 다른 일례를 설명하기 위한 도면이다.8 is a diagram for explaining another example of a method of controlling a multimedia device according to an embodiment of the present invention.
도 8에서는, 멀티미디어 디바이스(100)가 턴 온(turn on)되어 있고 여러 사용자가 멀티미디어 디바이스(100)의 주변에 있으며, 다수의 사용자가 멀티미디어 디바이스(100)를 시청하고 있고 소수의 사용자는 멀티미디어 디바이스(100)를 시청하고 있는 상황을 가정한다. 또한, 리모트 컨트롤러(200)는 멀티미디어 디바이스(200)보다는 사용자들에 인접하여 위치하고 있을 수 있다.8, when the
제어부(150)는, 특정 컨텐트의 비디오 데이터를 출력하도록 디스플레이부(170)를 제어하고 상기 특정 컨텐트의 오디오 데이터를 출력하도록 오디오 출력부(180)를 제어한다.The
제어부(150)는, 외부의 음향 신호를 수신하여 전기적인 제1 오디오 데이터로 변환하도록 제1 마이크(132)를 제어하고, 리모트 컨트롤러(200)로부터, 외부의 음향 신호에 대응하는 제2 오디오 데이터를 수신하도록 무선 통신부를 제어한다.The
제어부(150)는, 제1 오디오 데이터의 값과 제2 오디오 데이터의 값을 비교한다. 그리고, 제어부(150)는, 제1 오디오 데이터의 값과 제2 오디오 데이터의 값이 다른 경우, 카메라(131)에 의해 획득된 이미지에 기초하여 멀티미디어 디바이스(100)의 특정 기능을 제어할 수 있다.The
제어부(150)는, 상기 제1 오디오 데이터의 값이 상기 제2 오디오 데이터의 값보다 더 크고, 상기 디텍팅된 사용자의 시선에 기초하여 시선이 디스플레이부(170)를 향하고 있는 사용자가 디스플레이부(170)를 향하고 있지 않은 사용자보다 더 많은 경우, 오디오 출력부(180)를 통해 출력되는 오디오 데이터의 볼륨을 기 설정된 정도만큼 증가시킬 수 있다. 볼륨을 증가시키는 것이 다수의 사용자의 의도에 부합할 수 있기 때문이다.The
도 9는 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다.9 is a diagram for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
멀티미디어 디바이스(100)의 제어부(150)는, 특정 컨텐트의 비디오 데이터를 출력하도록 디스플레이부(170)를 제어하고 상기 특정 컨텐트의 오디오 데이터를 출력하도록 오디오 출력부(180)를 제어한다.The
제어부(150)는, 기 설정된 시간 간격마다 이미지를 획득하도록 카메라(131)를 제어한다.The
제어부(150)는, 상기 획득된 이미지를 통하여, 상기 획득된 이미지에 포함된 사용자가 전화기를 귀에 가져다 대는 제스처를 디텍트하거나 상기 사용자의 입의 움직임을 디텍트한 경우, 오디오 출력부(180)를 통해 출력되는 오디오 데이터의 볼륨을 기 설정된 정도만큼 감소시킬 수 있다. The
실시예에 따라, 제어부(150)는, 상기 획득된 이미지를 통하여, 상기 획득된 이미지에 포함된 사용자가 전화기를 귀에 가져다 대는 제스처를 디텍트하거나 상기 사용자의 입의 움직임을 디텍트한 경우, 상기 특정 컨텐트의 재생을 중지하거나 일시 정지할 수도 있다. 여기서, 상기 특정 컨텐트가 라이브 방송 신호인 경우에는 재생이 일시 정지되고 타임-시프트 기능이 활성화될 수도 있다.According to the embodiment, when the user included in the obtained image detaches a gesture for bringing the phone to the ear through the obtained image or detaches the mouth motion of the user, Playback of specific content may be stopped or paused. Here, if the specific content is a live broadcast signal, playback may be paused and the time-shift function may be activated.
도 10은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다.10 is a diagram for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
멀티미디어 디바이스(100)의 제어부(150)는, 특정 컨텐트의 비디오 데이터를 출력하도록 디스플레이부(170)를 제어하고 상기 특정 컨텐트의 오디오 데이터를 출력하도록 오디오 출력부(180)를 제어한다.The
제어부(150)는, 외부의 음향 신호를 수신하여 전기적인 제1 오디오 데이터로 변환하도록 제1 마이크(132)를 제어하고, 리모트 컨트롤러(200)로부터, 외부의 음향 신호에 대응하는 제2 오디오 데이터를 수신하도록 무선 통신부를 제어한다.The
제어부(150)는, 제2 오디오 데이터의 값이 일정하게 유지되도록 오디오 출력부(180)를 통해 출력되는 오디오 데이터의 볼륨을 조절할 수 있다. 상기 제2 오디오 데이터의 값이란, 리모트 컨트롤러(200)로부터 수신된 제2 오디오 데이터에서 오디오 출력부(180)를 통해 출력되는 오디오 데이터를 추출하고 상기 추출된 오디오 데이터에 대응하는 신호의 세기일 수 있다. 제어부(150)는, 리모트 컨트롤러(200)로부터 수신된 제2 오디오 데이터에서, 오디오 출력부(180)를 통해 출력된 상기 특정 컨텐트의 오디오 데이터를 제외한 주변 잠음을 제거하고, 상기 주변 잡음이 제거된 제2 오디오 데이터의 값이 일정하기 유지되도록 오디오 출력부(180)를 통해 출력되는 오디오 데이터의 볼륨을 조절할 수 있다. 리모트 컨트롤러(200)를 홀딩하고 있는 사용자가 멀티미디어 디바이스(100)로부터 멀어지거나 가까워지는 경우 그에 따라 상기 제2 오디오 데이터의 값의 크기가 변하게 되는데, 사용자의 입장에서 일정한 볼륨으로 상기 컨텐트를 감상할 수 있도록 상기 특정 컨텐트의 오디오 데이터의 볼륨을 조절하는 것이다.The
실시예에 따라, 제어부(150)는, 카메라(131)에 의해 획득된 이미지에 기초하여 상기 제2 오디오 데이터의 값이 일정하게 유지되도록 오디오 출력부(180)를 통해 출력되는 오디오 데이터의 볼륨을 조절할 수도 있다. 여기서, 메모리(140)는, 등록 사용자의 얼굴을 미리 저장하고 있다고 가정한다. 메모리(140)에 저장된 등록 사용자들 중에는 마스터 사용자로 등록된 사용자도 존재할 수 있다. 제어부(150)는, 상기 획득된 이미지에 기초하여 메모리(140)에 저장된 등록 사용자가 리모트 컨트롤러(200)를 홀딩하고 있는 경우 또는 메모리(140)에 저장된 등록 사용자들 중 마스터 사용자로 등록된 사용자가 리모트 컨트롤러(200)를 홀딩하고 있는 경우에만, 상기 제2 오디오 데이터의 값이 일정하게 유지되도록 오디오 출력부(180)를 통해 출력되는 오디오 데이터의 볼륨을 조절할 수 있다.The
또는, 실시예에 따라, 상기 획득된 이미지에 기초하여 리모트 컨트롤러(200)를 홀딩하고 있는 사용자가 자동 볼륨 조절 기능을 기 설정해 놓은 사용자와 일치하는 경우에만, 상기 제2 오디오 데이터의 값이 일정하게 유지되도록 오디오 출력부(180)를 통해 출력되는 오디오 데이터의 볼륨을 조절할 수도 있다.Alternatively, according to the embodiment, only when the user holding the
또는, 실시예에 따라, 제어부(150)는, 상기 획득된 이미지에 리모트 컨트롤러(200)가 포함되어 있지 않거나 리모트 컨트롤러(200)를 홀딩하고 있는 사용자가 그 밖의 사용자보다 멀티미디어 디바이스(100)로부터 가장 멀리 있는 경우, 상기 제2 오디오 데이터의 값의 변화를 무시(ignore)하고 오디오 출력부(180)를 통해 출력되는 오디오 데이터의 볼륨을 일정하게 유지할 수 있다.Alternatively, according to the embodiment, the
도 11은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다.11 is a view for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
도 11에서는, 사용자가 멀티미디어 디바이스(100)에 근접하여 특정 명령어를 발화하는 상황을 가정한다. 또한, 리모트 컨트롤러(200)는 상기 사용자와 다소 멀리 이격되어 있는 것으로 가정한다.In FIG. 11, it is assumed that the user is speaking close to the
멀티미디어 디바이스(100)의 제어부(150)는, 외부의 음향 신호를 수신하여 전기적인 제1 오디오 데이터로 변환하도록 제1 마이크(132)를 제어하고, 리모트 컨트롤러(200)로부터, 외부의 음향 신호에 대응하는 제2 오디오 데이터를 수신하도록 무선 통신부를 제어한다. 상기 제1 오디오 데이터 및 제2 오디오 데이터에는, 사용자가 발화한 특정 명령어에 대응하는 오디오 데이터가 포함되어 있는 것으로 가정한다.The
제어부(150)는, 상기 제1 오디오 데이터에 포함된 상기 특정 명령어에 대응하는 오디오 데이터의 값이 상기 제2 오디오 데이터에 포함된 상기 특정 명령어에 대응하는 오디오 데이터의 값보다 기 설정된 정도 이상 큰 경우, 상기 특정 명령어에 대응하는 기능을 실행하지 않고 상기 특정 명령어를 무시할 수 있다. 여기서, 상기 특정 명령어에 대응하는 오디오 데이터의 값이란, 상기 제1 오디오 데이터 또는 상기 제2 오디오 데이터에서 오디오 출력부(180)를 통해 출력되는 오디오 데이터와 주변 잡음을 제거함으로써 분리된 상기 특정 명령어에 대응하는 오디오 데이터에 해당하는 신호의 세기를 의미할 수 있다. 리모트 컨트롤러(200)를 홀딩하고 있거나 리모트 컨트롤러(200)에 근접하여 있는 사용자에게 주도권을 주기 위함이다.If the value of the audio data corresponding to the specific command included in the first audio data is greater than or equal to a predetermined value greater than the value of the audio data corresponding to the specific command included in the second audio data , The specific instruction word can be ignored without executing the function corresponding to the specific instruction word. Here, the value of the audio data corresponding to the specific command is a value obtained by removing the audio data output through the
실시예에 따라, 제어부(150)는, 상기 제1 오디오 데이터에 포함된 상기 특정 명령어에 대응하는 오디오 데이터의 값이 상기 제2 오디오 데이터에 포함된 상기 특정 명령어에 대응하는 오디오 데이터의 값보다 기 설정된 정도 이상 큰 경우, 리모트 컨트롤러(200)에 다가가서 명령어를 발화하라는 안내 메시지를 출력하도록 디스플레이부(170) 및/또는 오디오 출력부(180)를 제어할 수도 있다.According to an embodiment, the
도 12는 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다.12 is a diagram for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
도 12에서는, 사용자가 멀티미디어 디바이스(100)보다는 리모트 컨트롤러(200)에 근접하여 특정 명령어를 발화하는 상황을 가정한다.In FIG. 12, it is assumed that the user speaks a specific command word close to the
멀티미디어 디바이스(100)의 제어부(150)는, 외부의 음향 신호를 수신하여 전기적인 제1 오디오 데이터로 변환하도록 제1 마이크(132)를 제어하고, 리모트 컨트롤러(200)로부터, 외부의 음향 신호에 대응하는 제2 오디오 데이터를 수신하도록 무선 통신부를 제어한다. 상기 제1 오디오 데이터 및 제2 오디오 데이터에는, 사용자가 발화한 특정 명령어에 대응하는 오디오 데이터가 포함되어 있는 것으로 가정한다.The
제어부(150)는, 상기 제1 오디오 데이터에 포함된 상기 특정 명령어에 대응하는 오디오 데이터의 값보다 상기 제2 오디오 데이터에 포함된 상기 특정 명령어에 대응하는 오디오 데이터의 값이 기 설정된 정도 이상 큰 경우, 상기 특정 명령어에 대응하는 기능을 실행할 수 있다. 리모트 컨트롤러(200)를 홀딩하고 있거나 리모트 컨트롤러(200)에 근접하여 있는 사용자에게 주도권을 주기 위함이다.If the value of the audio data corresponding to the specific command included in the second audio data is larger than a value of the audio data corresponding to the specific command included in the first audio data by a predetermined amount or more , A function corresponding to the specific instruction word can be executed. To give the initiative to the user who holds the
실시예에 따라, 제어부(150)는, 사용자가 리모트 컨트롤러(200)에 구비된 음성 인식 기능에 대응하는 특정 버튼을 누르지 않고 특정 명령어를 발화한 경우, 음성 인식률을 높이기 위하여, 리모트 컨트롤러(200)에 구비된 음성 인식 기능에 대응하는 특정 버튼을 누른 상태에서 특정 명령어를 발화하라는 안내 메시지를 출력하도록 디스플레이부(170) 및/또는 오디오 출력부(180)를 제어하거나, 리모트 컨트롤러(200)에 소정의 제어 신호를 전송하도록 사용자 인터페이스부(160)를 제어할 수 있다. 리모트 컨트롤러(200)의 제어부(213)는, 상기 제어 신호에 따라, LED 모듈(216a)을 통해 특정 빛을 출력하거나, 진동 모듈(216c)을 통해 특정 패턴의 진동을 발생시키거나, 음향 출력 모듈(216c)을 통해 특정 오디오 신호를 출력하거나, 디스플레이 모듈(216d)을 통해 소정의 안내 메시지를 출력함으로써, 사용자로 하여금 상기 음성 인식 기능에 대응하는 특정 버튼을 누르지 않았음을 인지하게 할 수도 있다.According to the embodiment, when the user utters a specific command without pressing a specific button corresponding to the voice recognition function provided in the
도 13은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다.13 is a diagram for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
도 13에서는, 사용자가 멀티미디어 디바이스(100)보다는 리모트 컨트롤러(200)에 근접하여 특정 명령어를 발화하되, 리모트 컨트롤러(200)가 멀티미디어 디바이스(100)로부터 멀리 이격되어 있거나 멀티미디어 디바이스(100)와 서로 다른 공간에 위치하는 상황을 가정한다.13, it is assumed that the user speaks a specific command in the vicinity of the
멀티미디어 디바이스(100)의 제어부(150)는, 외부의 음향 신호를 수신하여 전기적인 제1 오디오 데이터로 변환하도록 제1 마이크(132)를 제어하고, 리모트 컨트롤러(200)로부터, 외부의 음향 신호에 대응하는 제2 오디오 데이터를 수신하도록 무선 통신부를 제어한다. 상기 제2 오디오 데이터에는 사용자가 발화한 특정 명령어에 대응하는 오디오 데이터가 포함되어 있는 것으로 가정한다. 상기 제1 오디오 데이터에는, 상기 특정 명령어에 대응하는 오디오 데이터가 포함되어 있지 않거나, 포함되어 있더라도 그 세기가 기 설정된 정도보다 작을 수 있다.The
제어부(150)는, 상기 제1 오디오 데이터에 상기 특정 명령어에 대응하는 오디오 데이터가 포함되어 있지 않은 경우, 상기 특정 명령어에 대응하는 기능을 실행하지 않고 상기 특정 명령어를 무시할 수 있다. 리모트 컨트롤러(200)가 멀티미디어 디바이스(100)와 다른 공간에 존재하는 경우, 리모트 컨트롤러(200)에 인접한 사용자에게는 주도권을 줄 필요가 없기 때문이다.If the audio data corresponding to the specific instruction word is not included in the first audio data, the
실시예에 따라, 제어부(150)는, 상기 제1 오디오 데이터에 포함된 상기 특정 명령어에 대응하는 오디오 데이터의 값이 상기 제2 오디오 데이터에 포함된 상기 특정 명령어에 대응하는 오디오 데이터의 값보다 기 설정된 정도 이상 작고, 카메라(131)에 의해 획득된 이미지에 기초하여 상기 획득된 이미지 내에 리모트 컨트롤러(200)가 포함되어 있지 않거나 상기 획득된 이미지에 포함된 사용자들의 입의 움직임이 디텍팅되지 않은 경우, 상기 특정 명령어에 대응하는 기능을 실행하지 않고 상기 특정 명령어를 무시할 수 있다.According to an embodiment, the
도 14는 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다.FIG. 14 is a diagram for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
도 14에서는, 멀티미디어 디바이스(100) 앞에 여러 사용자들이 있고 그 중 리모트 컨트롤러(200)를 홀딩하고 있는 사용자가 특정 명령어를 발화하는 상황을 가정한다.In FIG. 14, it is assumed that a plurality of users are present in front of the
멀티미디어 디바이스(100)의 제어부(150)는, 외부의 음향 신호를 수신하여 전기적인 제1 오디오 데이터로 변환하도록 제1 마이크(132)를 제어하고, 리모트 컨트롤러(200)로부터, 외부의 음향 신호에 대응하는 제2 오디오 데이터를 수신하도록 무선 통신부를 제어한다. 상기 제1 오디오 데이터 및 제2 오디오 데이터에는, 사용자가 발화한 특정 명령어에 대응하는 오디오 데이터가 포함되어 있는 것으로 가정한다.The
제어부(150)는, 상기 제1 오디오 데이터에 포함된 상기 특정 명령어에 대응하는 오디오 데이터의 값보다 상기 제2 오디오 데이터에 포함된 상기 특정 명령어에 대응하는 오디오 데이터의 값이 기 설정된 정도 이상 큰 경우, 카메라(131)에 의해 획득된 이미지를 통하여 디텍팅된 사용자의 입의 움직임에 기초하여, 상기 획득된 이미지에 포함된 사용자들 중 상기 특정 명령어를 발화한 특정 사용자를 디텍트할 수 있다. 그리고, 제어부(150)는, 상기 획득된 이미지에 기초하여 상기 특정 사용자가 리모트 컨트롤러(200)를 홀딩하고 있는 경우에만, 상기 특정 명령어에 대응하는 특정 기능을 실행할 수 있다. 멀티미디어 디바이스(100)를 시청하고 있는 여러 사용자들 중 리모트 컨트롤러(200)를 홀딩하고 있는 사용자에게 주도권을 주기 위함이다.If the value of the audio data corresponding to the specific command included in the second audio data is larger than a value of the audio data corresponding to the specific command included in the first audio data by a predetermined amount or more And detect a specific user who has uttered the specific instruction among the users included in the obtained image based on the movement of the mouth of the user detected through the image obtained by the
도 15는 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다.15 is a diagram for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
도 15에서는, 멀티미디어 디바이스(100) 앞에 여러 사용자들이 있고 그 중 마스터 사용자로 등록된 사용자가 특정 명령어를 발화하는 상황을 가정한다.15, it is assumed that a plurality of users are present in front of the
멀티미디어 디바이스(100)의 제어부(150)는, 외부의 음향 신호를 수신하여 전기적인 제1 오디오 데이터로 변환하도록 제1 마이크(132)를 제어하고, 리모트 컨트롤러(200)로부터, 외부의 음향 신호에 대응하는 제2 오디오 데이터를 수신하도록 무선 통신부를 제어한다. 상기 제1 오디오 데이터 및 제2 오디오 데이터에는, 사용자가 발화한 특정 명령어에 대응하는 오디오 데이터가 포함되어 있는 것으로 가정한다. 상기 제1 오디오 데이터에 포함된 상기 특정 명령어에 대응하는 오디오 데이터의 값보다 상기 제2 오디오 데이터에 포함된 상기 특정 명령어에 대응하는 오디오 데이터의 값이 기 설정된 정도 이상 클 수 있다.The
메모리(140)는 등록된 사용자들의 얼굴 및 목소리를 저장하고 있으며, 메모리(140)에 저장된 등록 사용자들 중에는 마스터 사용자로 등록된 사용자도 존재할 수 있다.The
제어부(150)는, 상기 제1 오디오 데이터 또는 상기 제2 오디오 데이터에 포함된 상기 특정 명령어에 대응하는 오디오 데이터가 상기 마스터 사용자의 목소리에 대응하는 것으로 인식된 경우, 상기 특정 명령어에 대응하는 기능을 실행할 수 있다. 제어부(150)는, 카메라(131)에 의해 획득된 이미지에 기초하여 리모트 컨트롤러(200)를 상기 마스터 사용자가 아닌 다른 사용자(예를 들어, 미등록 사용자(Guest) 또는 아이로 등록된 사용자))가 홀딩하고 있더라도, 상기 특정 명령어에 대응하는 오디오 데이터가 상기 마스터 사용자의 목소리에 대응하는 것으로 인식된 경우에는 상기 특정 명령어에 대응하는 기능을 실행할 수 있다. 마스터 사용자의 경우에는 리모트 컨트롤러(200)의 홀딩 여부와 무관하게 그에게 주도권을 주기 위함이다. If the audio data corresponding to the specific command included in the first audio data or the second audio data is recognized as corresponding to the voice of the master user, the
실시예에 따라, 제어부(150)는, 상기 제1 오디오 데이터 또는 상기 제2 오디오 데이터에 둘 이상의 사용자가 발화한 명령어에 대응하는 오디오 데이터가 포함되어 있는 경우, 메모리(140)에 저장된 마스터 사용자의 목소리에 대응하는 오디오 데이터의 명령어에 따라 기능을 실행할 수도 있다.According to an embodiment of the present invention, when the first audio data or the second audio data includes audio data corresponding to commands issued by two or more users, It is also possible to execute the function in accordance with the instruction of the audio data corresponding to the voice.
도 16은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다. 16 is a diagram for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
도 16에서는, 멀티미디어 디바이스(100) 앞에 여러 사용자들이 있고 그 중 멀티미디어 디바이스(100)를 시청하고 있는 사용자가 특정 명령어를 발화하는 상황을 가정한다.16, it is assumed that there are a plurality of users in front of the
멀티미디어 디바이스(100)의 제어부(150)는, 외부의 음향 신호를 수신하여 전기적인 제1 오디오 데이터로 변환하도록 제1 마이크(132)를 제어하고, 리모트 컨트롤러(200)로부터, 외부의 음향 신호에 대응하는 제2 오디오 데이터를 수신하도록 무선 통신부를 제어한다. 상기 제1 오디오 데이터 및 제2 오디오 데이터에는, 둘 이상의 사용자가 발화한 소정의 명령어에 대응하는 오디오 데이터가 포함되어 있는 것으로 가정한다. 상기 제1 오디오 데이터에 포함된 특정 명령어에 대응하는 오디오 데이터의 값보다 상기 제2 오디오 데이터에 포함된 상기 특정 명령어에 대응하는 오디오 데이터의 값이 기 설정된 정도 이상 클 수 있다.The
제어부(150)는, 카메라(131)에 의해 획득된 이미지를 통하여 디텍팅된 사용자의 입의 움직임에 기초하여, 상기 획득된 이미지에 포함된 사용자들 중 상기 특정 명령어를 발화한 특정 사용자를 디텍트할 수 있다. 그리고, 제어부(150)는, 상기 획득된 이미지에 기초하여 상기 특정 사용자의 시선이 디스플레이부(170)를 향하고 있는 경우에만 상기 특정 명령어에 대응하는 특정 기능을 실행할 수 있다. 멀티미디어 디바이스(100)를 실제로 시청하고 있는 사용자에게 주도권을 주기 위함이다.The
도 17은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 일례를 설명하기 위한 도면이다. 17 is a view for explaining an example of a method of controlling a multimedia device according to an embodiment of the present invention.
멀티미디어 디바이스(100) 및 리모트 컨트롤러(200) 중 적어도 하나는 조도 센서를 구비할 수 있다. 조도 센서는 외부의 빛의 세기를 감지하며, 멀티미디어 디바이스(100)의 제어부(150)는 상기 감지된 빛의 세기에 기초하여 디스플레이부(170)의 밝기를 조절할 수 있다. 조도 센서가 리모트 컨트롤러(200)에 포함되어 있는 경우, 리모트 컨트롤러(200)의 제어부(213)는 조도 센서에서 센싱된 빛의 세기를 포함하는 신호를 멀티미디어 디바이스(100)에 전송하도록 무선 통싱부(214)를 제어하고, 멀티미디어 디바이스(100)의 제어부(150)는, 무선 통신부를 통해 상기 신호를 수신하고, 상기 신호에 포함된 빛의 세기에 기초하여 디스플레이부(170)의 밝기를 조절할 수 있다. At least one of the
멀티미디어 디바이스(100)의 제어부(150)는, 외부의 빛의 세기가 기 설정된 정도보다 크면 디스플레이부(170)의 밝기를 증가시키고, 외부의 빛의 세기가 기 설정된 정도보다 작으면 디스플레이부(170)의 밝기를 감소시킬 수 있다.The
멀티미디어 디바이스(100)의 제어부(150)는, 내장된 조도 센서에 의해 감지된 외부의 빛의 세기의 값과 리모트 컨트롤러(200)로부터 수신된 외부의 빛의 세기의 값이 다른 경우, 내장된 조도 센서에 의해 감지된 외부의 빛의 세기에 기초하여 디스플레이부(170)의 밝기를 조절할 수 있다.When the value of the external light intensity detected by the built-in illuminance sensor and the value of the external light intensity received from the
도 18은 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 다른 일례를 설명하기 위한 도면이다. 18 is a view for explaining another example of a method of controlling a multimedia device according to an embodiment of the present invention.
멀티미디어 디바이스(100)는 시계를 내장하고 있을 수 있다. 제어부(150)는, 내장된 시계로부터 획득된 현재 시간에 기초하여, 현재 시간이 기 설정된 범위 내인 경우(예를 들어, 현재 시간이 한밤 중이거나 이른 색벽인 경우), 디스플레이부(170)의 밝기를 기 설정된 정도 이하로 낮추고, 오디오 출력부(180)를 통해 출력되는 오디오 데이터의 볼륨의 크기를 기 설정된 정도 이하로 낮출 수 있다.The
도 19는 본 발명의 일 실시예에 따른 멀티미디어 디바이스의 제어 방법의 또 다른 일례를 설명하기 위한 도면이다. 19 is a view for explaining another example of a method of controlling a multimedia device according to an embodiment of the present invention.
도 19의 (a)를 참조하면, 특정 사용자가 오디오 출력부(180)의 볼륨 레벨을 25로 설정하고 디스플레이부(170)의 밝기 레벨을 50으로 설정하고, 볼륨 및 밝기의 자동 조절 기능을 선택하였다고 가정하자. 그리고, 사용자는, 도 19의 (b)에 도시된 바와 같이 채널을 전환하였다.19 (a), a specific user sets the volume level of the
일례로, 사용자가 제1 채널(예를 들어, 뉴스 채널)로 채널을 전환한 경우, 제어부(150)는 방송 신호에 포함된 서비스 정보에 기초하여 상기 제1 채널이 정확한 정보 전달을 목적으로 하는 뉴스 채널임을 디텍트할 수 있다. 그리고, 제어부(150)는, 오디오 출력부(180)의 볼륨 및 디스플레이부(170)의 밝기에 대하여 자동 조절 기능을 적용하지 않고, 현재 사용자에 의해 설정된 볼륨 및 밝기를 각각 유지할 수 있다.For example, when the user switches a channel to a first channel (e.g., a news channel), the
다른 일례로, 사용자가 제2 채널(예를 들어, 영화 채널)로 전환한 경우, 제어부(150)는 방송 신호에 포함된 서비스 정보에 기초하여 상기 제2 채널이 영화 채널임을 디텍트할 수 있다. 영화 채널의 경우 설정된 볼륨이 비교적 높고 장면 전환이 빠르지 않은 경우가 대부분이므로, 제어부(150)는, 자동 조절 기능의 적용시, 사용자에 의해 오디오 출력부(180)에 기 설정된 볼륨보다 볼륨을 줄일 수 있고, 사용자에 의해 디스플레이부(170)에 설정된 밝기보다 밝기를 줄일 수 있다.In another example, when the user switches to a second channel (e.g., a movie channel), the
또 다른 일례로, 사용자가 제3 채널(예를 들어, 스포츠 채널)로 전환한 경우, 제어부(150)는 방송 신호에 포함된 서비스 정보에 기초하여 상기 제3 채널이 스포츠 채널임을 디텍트할 수 있다. 스포츠 채널의 경우 설정된 볼륨이 비교적 낮고 장면 전환이 빠른 경우가 대부분이므로, 제어부(150)는, 자동 조절 기능의 적용시, 사용자에 의해 오디오 출력부(180)에 기 설정된 볼륨보다 볼륨을 키울 수 있고, 사용자에 의해 디스플레이부(170)에 설정된 밝기보다 밝기를 증가시킬 수 있다.In another example, when the user switches to a third channel (e.g., a sports channel), the
이하에서는, 도 20 내지 도 24를 참조하여, 멀티미디어 디바이스(100)에 사용자를 등록하는 과정, 등록된 사용자에 맞춤화된 기능 및 등록된 사용자의 권한 등을 설명하기로 한다.Hereinafter, the process of registering the user in the
도 20은 본 발명의 일 실시예에 의한 멀티미디어 디바이스에서 사용자를 등록하는 과정을 설명하기 위한 도면이다.20 is a diagram for explaining a process of registering a user in a multimedia device according to an embodiment of the present invention.
사용자가 멀티미디어 디바이스(100)에 설치된 특정 어플리케이션을 실행하면, 사용자 등록을 위한 화면(310)이 디스플레이부(170)에 출력될 수 있다. 사용자는, 리모트 컨트롤러(200)를 사용하여 상기 특정 어플리케이션을 실행시킬 수 있다.When the user executes a specific application installed in the
상기 화면(310)에는, 등록할 사용자의 이미지를 캡쳐하기 위한 제1 메뉴(311), 등록할 사용자의 목소리를 녹음하기 위한 제2 메뉴(312), 등록할 사용자에 의해 설정 가능한 기능 관련 메뉴(313) 등이 포함될 수 있다. 도시하지는 않았으나, 사용자는, 자신을 마스터 사용자로 등록할 것인지 여부도 상기 화면(310)을 통해 설정할 수 있다.The
사용자가 상기 제1 메뉴(311)를 선택하면, 제어부(150)는, 사용자의 이미지를 획득하도록 카메라(131)를 제어하고, 획득된 이미지를 상기 제1 메뉴(311)의 영역에 출력하도록 디스플레이부(170)를 제어할 수 있다.When the user selects the
사용자가 상기 제2 메뉴(312)를 선택하면, 제어부(150)는, 사용자의 목소리를 녹음하도록 마이크(132)를 제어할 수 있다.When the user selects the
상기 제3 메뉴(313)는, 오디오 출력부(180)의 볼륨이 사용자가 설정한 대로 자동으로 조절되도록 하기 위한 볼륨 자동 조절 메뉴 및 디스플레이부(170)의 밝기가 사용자가 설정한 대로 자동으로 조절되도록 하기 위한 밝기 자동 조절 메뉴 등을 포함할 수 있다.The
사용자가 상기 화면(310) 내 등록 메뉴(314)를 선택하면, 사용자의 이름, 상기 획득된 이미지 내 얼굴, 상기 녹음된 목소리, 및 상기 사용자의 지위(예를 들어, 마스터 사용자) 등이 서로 맵핑되어 메모리(140)에 저장될 수 있다.When the user selects the
마스터 사용자로 등록되면, 멀티미디어 디바이스(100)의 모든 기능을 이용할 수 있으며, 상술한 바와 같이 멀티미디어 디바이스(100)를 여러 사용자가 사용하고 있을 때 멀티미디어 디바이스(100)의 제어에 관한 주도권을 가질 수 있다.When registered as a master user, all the functions of the
도 21은 본 발명의 일 실시예에 의한 멀티미디어 디바이스에서 마스터 사용자가 다른 사용자를 등록하는 과정을 설명하기 위한 도면이다. 도 20과 관련하여 상술하는 바와 중복되는 내용은 다시 설명하지 않으며, 이하에서는 차이점을 중심으로 설명한다.FIG. 21 is a diagram for explaining a process in which a master user registers another user in a multimedia device according to an embodiment of the present invention. The contents overlapping with those described above with reference to FIG. 20 will not be described again, and the difference will be mainly described below.
마스터 사용자로 등록된 사용자는 다른 사용자(예를 들어, 아이)를 멀티미디어 디바이스(100)에 등록할 수 있다. 다른 사용자가 스스로 자신을 멀티미디어 디바이스(100)에 등록할 수도 있으나, 마스터 사용자의 권한으로 다른 사용자를 멀티미디어 디바이스(100)에 등록하면서 상기 다른 사용자의 권한도 설정해둘 수 있다.A user registered as a master user can register another user (for example, a child) in the
상기 다른 사용자의 이미지나 목소리를 등록하는 과정은 도 20과 관련하여 상술한 바와 동일하므로 이에 대한 설명은 생략한다.The process of registering the images and voices of the other users is the same as that described above with reference to FIG. 20, so that a description thereof will be omitted.
마스터 사용자는 상기 다른 사용자의 지위를 아이로 설정하고, 상기 다른 사용자의 권한을 제한할 수 있다. 예를 들어, 마스터 사용자는, 상기 다른 사용자의 멀티미디어 디바이스(100)의 사용 시간을 제한하거나, 채널 전환 기능을 제한하거나, 인터넷 기능을 제한할 수 있다. 제어부(150)는, 멀티미디어 디바이스(100)의 사용 중 카메라(131)에 의해 획득된 이미지에 상기 다른 사용자가 포함되어 있거나 마이크(132)를 통해 획득된 오디오 데이터에 상기 다른 사용자의 목소리가 포함되어 있는 경우, 마스터 사용자에 의해 제한된 기능은 실행하지 않을 수 있다.The master user can set the status of the other user to the child and restrict the authority of the other user. For example, the master user may limit the use time of the
도 22는 본 발명의 일 실시예에 따라 멀티미디어 디바이스에 등록된 사용자와 미등록된 사용자의 권한의 차이를 설명하기 위한 도면이다.22 is a diagram for explaining a difference in authority between a user registered in a multimedia device and an unregistered user according to an embodiment of the present invention.
도 22를 참조하면, 멀티미디어 디바이스(100)의 앞에 복수의 사용자가 있고, 상기 복수의 사용자 중에는 멀티미디어 디바이스(100)에 마스터 사용자로 등록된 사용자와, 아이로 등록된 사용자와, 미등록된 사용자(Guest)가 있다고 가정한다.22, there is a plurality of users in front of the
아이로 등록된 사용자와 미등록 사용자는 멀티미디어 디바이스(100)의 일부 기능만을 이용할 수 있으며, 예를 들어, 볼륨 업/다운 기능이나 전원 온/오프 기능만 이용할 수 있다.The registered user and the unregistered user can use only some functions of the
일례로, 제어부(150)는, 마이크(132)를 통해 획득된 오디오 데이터 또는 리모트 컨트롤러(200)로부터 수신된 오디오 데이터에 채널 업 명령어에 대응하는 오디오 데이터가 포함되어 있는 경우, 상기 채널 업 명령어에 대응하는 오디오 데이터가 메모리(140)에 저장된 마스터 사용자의 목소리와 대응되는 경우에만 상기 채널 업 명령어에 대응하는 채널 업 기능을 실행할 수 있다.For example, when audio data obtained through the
다른 일례로, 제어부(150)는, 카메라(131)에 의해 획득된 이미지에 기초하여, 메모리(140)에 저장된 마스터 사용자가 리모트 컨트롤러(200)를 홀딩하고 있는 경우에만, 리모트 컨트롤러(200)로부터 수신된 각종 제어 신호에 대응하는 기능을 실행할 수 있다.The
도 23은 본 발명의 일 실시예에 의한 멀티미디어 디바이스에서 마스터 사용자가 다른 사용자를 등록하는 과정을 설명하기 위한 도면이다. 도 20과 관련하여 상술하는 바와 중복되는 내용은 다시 설명하지 않으며, 이하에서는 차이점을 중심으로 설명한다.23 is a diagram for explaining a process in which a master user registers another user in a multimedia device according to an embodiment of the present invention. The contents overlapping with those described above with reference to FIG. 20 will not be described again, and the difference will be mainly described below.
마스터 사용자로 등록된 사용자는 다른 사용자(예를 들어, 노인)를 멀티미디어 디바이스(100)에 등록할 수 있다.A user registered as a master user can register another user (for example, the elderly) in the
상기 다른 사용자의 이미지나 목소리를 등록하는 과정은 도 20과 관련하여 상술한 바와 동일하므로 이에 대한 설명은 생략한다.The process of registering the images and voices of the other users is the same as that described above with reference to FIG. 20, so that a description thereof will be omitted.
마스터 사용자는 상기 다른 사용자에 맞춤화된 기능을 설정할 수 있다. 예를 들어, 마스터 사용자는, 상기 다른 사용자가 노인임에 비추어 상기 제3 메뉴(313)를 통하여 자동 볼륨 조절 기능과 자동 밝기 조절 기능을 설정해둘 수 있다. The master user can set a function customized for the other user. For example, the master user may set the automatic volume control function and the automatic brightness control function through the
도 24는 본 발명의 일 실시예에 따른 멀티미디어 디바이스에서 특정 사용자를 위한 자동 볼륨 조절 기능 및 자동 밝기 조절 기능이 설정된 경우의 일례를 설명하기 위한 도면이다. 도 24의 예시는 도 23과 관련하여 상술한 내용을 전제로 하고 있다고 가정한다.24 is a view for explaining an example in which an automatic volume control function and an automatic brightness control function for a specific user are set in a multimedia device according to an embodiment of the present invention. It is assumed that the example of FIG. 24 assumes the above-described contents in conjunction with FIG.
멀티미디어 디바이스(100)의 제어부(150)는, 카메라(131)에 의해 획득된 이미지에 기 등록된 사용자(예를 들어, 도 23의 노인 사용자)가 포함되어 있거나 마이크(132)를 통해 획득된 오디오 데이터에 상기 기 등록된 사용자의 목소리가 포함되어 있는 경우, 마스터 사용자가 상기 다른 사용자를 위해 기 설정해둔 볼륨으로 오디오 출력부(180)의 볼륨을 설정하고 마스터 사용자가 상기 다른 사용자를 위해 기 설정해둔 밝기로 디스플레이부(170)의 밝기를 설정할 수 있다. 상기 기 등록된 사용자가 노인임을 감안하여 큰 소리나 눈부심 등으로 신체에 좋지 않은 영향을 끼치는 것을 방지하기 위함이다. 실시예에 따라, 마스터 사용자가 상기 기 등록된 사용자를 위한 즐겨찾기 채널을 등록해놓은 경우, 제어부(150)는, 카메라(131)에 의해 획득된 이미지에 기 등록된 사용자가 포함되어 있거나 마이크(132)를 통해 획득된 오디오 데이터에 상기 기 등록된 사용자의 목소리가 포함되어 있는 경우, 상기 등록된 채널로 채널을 자동으로 변경하도록 튜너(111)를 제어할 수 있다.The
상술한 본 발명의 실시예들에 의하면, 멀티미디어 디바이스에 내장된 마이크를 통해 획득된 오디오 데이터의 값과 리모트 컨트롤러에 내장된 마이크를 통해 획득된 오디오 데이터의 값이 다른 경우 어떤 값에 기초하여 멀티미디어 디바이스의 기능을 제어할 것인지에 대한 솔루션을 제공할 수 있다.According to the embodiments of the present invention described above, when the values of the audio data obtained through the microphones built in the multimedia device and the values of the audio data obtained through the microphones built in the remote controller are different, Lt; RTI ID = 0.0 > a < / RTI > function.
또한, 상술한 본 발명의 실시예들에 의하면, 멀티미디어 디바이스를 여러 사용자가 사용하는 경우 어떠한 사용자에게 우선권을 줄 것인지 및 어떠한 방식으로 다수의 사용자의 의도에 맞게 멀티미디어 디바이스의 기능을 제어할 것인지에 대한 솔루션을 제공할 수 있다.In addition, according to the embodiments of the present invention, when a plurality of users use a multimedia device, it is possible to provide a priority solution to a user and a solution to control the function of the multimedia device according to the intention of a plurality of users Can be provided.
전술한 본 발명은, 프로그램이 기록된 매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 매체는, 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 매체의 예로는, HDD(Hard Disk Drive), SSD(Solid State Disk), SDD(Silicon Disk Drive), ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 상기 컴퓨터는 단말기의 제어부(150)를 포함할 수도 있다. 따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.The present invention described above can be embodied as computer-readable codes on a medium on which a program is recorded. The computer readable medium includes all kinds of recording devices in which data that can be read by a computer system is stored. Examples of the computer readable medium include a hard disk drive (HDD), a solid state disk (SSD), a silicon disk drive (SDD), a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, , And may also be implemented in the form of a carrier wave (e.g., transmission over the Internet). In addition, the computer may include a
100: 멀티미디어 디바이스
200: 리모트 컨트롤러100: Multimedia device
200: remote controller
Claims (20)
제2 마이크를 포함하는 리모트 컨트롤러와 무선으로 연결된 무선 통신부;
특정 컨텐트의 비디오 데이터를 출력하는 디스플레이부;
상기 특정 컨텐트의 오디오 데이터를 출력하는 오디오 출력부;
카메라; 및
제어부;를 포함하고,
상기 제어부는,
외부의 음향 신호를 수신하여 전기적인 제1 오디오 데이터로 변환하도록 상기 제1 마이크를 제어하고,
상기 리모트 컨트롤러로부터 외부의 음향 신호에 대응하는 제2 오디오 데이터를 수신하도록 상기 무선 통신부를 제어하고,
이미지를 획득하도록 상기 카메라를 제어하고,
상기 제1 오디오 데이터의 값과 상기 제2 오디오 데이터의 값이 다른 경우, 상기 획득된 이미지에 기초하여 기 설정된 특정 기능을 제어하는, 멀티미디어 디바이스.A first microphone;
A wireless communication unit wirelessly connected to a remote controller including a second microphone;
A display unit for outputting video data of a specific content;
An audio output unit outputting audio data of the specific content;
camera; And
And a control unit,
Wherein,
Controlling the first microphone to receive an external acoustic signal and convert it into electrical first audio data,
Controls the wireless communication unit to receive second audio data corresponding to an external sound signal from the remote controller,
Controlling the camera to acquire an image,
And controls a predetermined specific function based on the obtained image when the value of the first audio data is different from the value of the second audio data.
상기 제어부는, 상기 획득된 이미지를 통하여, 사용자, 사용자의 시선, 사용자와의 거리, 사용자의 위치, 리모트 컨트롤러의 위치, 사용자의 리모트 컨트롤러의 홀딩 여부 및 사용자의 입의 움직임 중 적어도 하나를 디텍팅하는, 멀티미디어 디바이스.The method according to claim 1,
The control unit may detect at least one of a user, a user's gaze, a distance from the user, a position of the user, a position of the remote controller, a holding state of the user's remote controller, A multimedia device.
상기 제어부는,
상기 제1 오디오 데이터의 값보다 상기 제2 오디오 데이터의 값이 더 크고, 상기 디텍팅된 사용자의 시선에 기초하여 시선이 상기 디스플레이부를 향하고 있는 사용자보다 상기 디스플레이부를 향하고 있지 않은 사용자가 더 많은 경우, 상기 오디오 출력부를 통해 출력되는 오디오 데이터의 볼륨을 기 설정된 정도만큼 감소시키는, 멀티미디어 디바이스.3. The method of claim 2,
Wherein,
If the value of the second audio data is larger than the value of the first audio data and the number of users who are not facing the display unit is larger than the user whose gaze is directed to the display unit based on the gaze of the detached user, And reduces the volume of audio data output through the audio output unit by a predetermined amount.
상기 제1 오디오 데이터의 값이 상기 제2 오디오 데이터의 값보다 더 크고, 상기 디텍팅된 사용자의 시선에 기초하여 시선이 상기 디스플레이부를 향하고 있는 사용자가 상기 디스플레이부를 향하고 있지 않은 사용자보다 더 많은 경우, 오디오 출력부를 통해 출력되는 오디오 데이터의 볼륨을 기 설정된 정도만큼 증가시키는, 멀티미디어 디바이스.3. The method of claim 2,
When the value of the first audio data is larger than the value of the second audio data and the number of users whose eyes are facing the display unit based on the detached user's gaze is larger than the number of users who are not facing the display unit, And increases the volume of the audio data output through the audio output unit by a predetermined amount.
상기 제어부는,
상기 획득된 이미지에 기초하여 시선이 상기 디스플레이부를 향하고 있는 사용자가 상기 리모트 컨트롤러를 홀딩하고 있는 경우, 오디오 출력부를 통해 출력되는 오디오 데이터의 볼륨을 일정하게 유지하거나 기 설정된 정도만큼 증가시키는, 멀티미디어 디바이스.The method of claim 3,
Wherein,
And maintains or increases the volume of the audio data output through the audio output unit by a predetermined amount when a user whose eyes are facing the display unit holds the remote controller based on the obtained image.
상기 제어부는,
기 설정된 시간 간격마다 상기 리모트 컨트롤러로부터 제2 오디오 데이터를 수신하도록 상기 무선 통신부를 제어하고,
상기 수신된 제2 오디오 데이터에서, 상기 오디오 출력부를 통해 출력된 상기 특정 컨텐트의 오디오 데이터를 제외한 주변 잡음을 제거하고,
상기 주변 잡음이 제거된 제2 오디오 데이터의 값이 일정하게 유지되도록, 상기 오디오 출력부를 통해 출력되는 오디오 데이터의 볼륨을 조절하는, 멀티미디어 디바이스.3. The method of claim 2,
Wherein,
Controls the wireless communication unit to receive second audio data from the remote controller at predetermined time intervals,
Removing ambient noise excluding the audio data of the specific content output through the audio output unit from the received second audio data,
And adjusts the volume of the audio data output through the audio output unit so that the value of the second audio data from which the ambient noise is removed is kept constant.
마스터 사용자로 등록된 사용자의 얼굴 및 목소리를 인식하기 위한 데이터를 저장하는 메모리;를 더 포함하고,
상기 제어부는, 상기 획득된 이미지에 기초하여 상기 마스터 사용자가 상기 리모트 컨트롤러를 홀딩하고 있는 경우에만, 상기 주변 잡음이 제거된 제2 오디오 데이터의 값이 일정하게 유지되도록, 상기 오디오 출력부를 통해 출력되는 오디오 데이터의 볼륨을 조절하는, 멀티미디어 디바이스.The method according to claim 6,
Further comprising a memory for storing data for recognizing a face and a voice of a user registered as a master user,
The control unit outputs the second audio data through the audio output unit so that the value of the second audio data from which the ambient noise is removed is kept constant only when the master user holds the remote controller based on the obtained image A multimedia device for adjusting the volume of audio data.
상기 제어부는,
상기 획득된 이미지에 상기 리모트 컨트롤러가 포함되어 있지 않거나 상기 리모트 컨트롤러를 홀딩하고 있는 사용자가 그 밖의 사용자보다 상기 멀티미디어 디바이스로부터 가장 멀리 있는 경우, 상기 제2 오디오 데이터의 값을 무시하고(ignore) 상기 오디오 출력부를 통해 출력되는 오디오 데이터의 볼륨을 일정하게 유지하는, 멀티미디어 디바이스.The method according to claim 6,
Wherein,
Ignoring the value of the second audio data if the user does not include the remote controller in the acquired image or the user holding the remote controller is farther from the multimedia device than the other user, And maintains a constant volume of audio data output through the output unit.
상기 제어부는 음성 인식부를 포함하고,
특정 사용자가 특정 명령어를 발화하는 경우, 상기 제어부는,
상기 제1 오디오 데이터에 포함된 상기 특정 명령어에 대응하는 오디오 데이터의 값이 상기 제2 오디오 데이터에 포함된 상기 특정 명령어에 대응하는 오디오 데이터의 값보다 기 설정된 정도 이상 큰 경우, 상기 특정 명령어를 무시(ignore)하는, 멀티미디어 디바이스.3. The method of claim 2,
Wherein the control unit includes a voice recognition unit,
When a specific user utters a specific command,
When the value of the audio data corresponding to the specific command included in the first audio data is greater than a predetermined value by more than a value of the audio data corresponding to the specific command included in the second audio data, the multimedia device being ignored.
상기 제어부는, 상기 리모트 컨트롤러에 다가가서 명령어를 발화하라는 안내 메시지를 출력하도록 상기 디스플레이부를 제어하는, 멀티미디어 디바이스.10. The method of claim 9,
Wherein the control unit controls the display unit to output a guidance message to approach the remote controller and to utter a command.
상기 제어부는 음성 인식부를 포함하고,
특정 사용자가 특정 명령어를 발화하는 경우, 상기 제어부는,
상기 제1 오디오 데이터에 포함된 상기 특정 명령어에 대응하는 오디오 데이터의 값보다 상기 제2 오디오 데이터에 포함된 상기 특정 명령어에 대응하는 오디오 데이터의 값이 더 큰 경우, 상기 특정 명령어에 대응하는 특정 기능을 실행하는, 멀티미디어 디바이스.3. The method of claim 2,
Wherein the control unit includes a voice recognition unit,
When a specific user utters a specific command,
When the value of the audio data corresponding to the specific command included in the second audio data is larger than the value of the audio data corresponding to the specific command included in the first audio data, Gt; device. ≪ / RTI >
상기 제어부는 음성 인식부를 포함하고,
특정 사용자가 특정 명령어를 발화하는 경우, 상기 제어부는,
상기 제1 오디오 데이터 및 상기 제2 오디오 데이터 중에서 상기 제2 오디오 데이터에만 상기 특정 명령어에 대응하는 오디오 데이터가 포함되어 있는 경우, 상기 특정 명령어를 무시(ignore)하는, 멀티미디어 디바이스.12. The method of claim 11,
Wherein the control unit includes a voice recognition unit,
When a specific user utters a specific command,
And ignores the specific instruction if the audio data corresponding to the specific instruction is included only in the second audio data among the first audio data and the second audio data.
상기 제어부는,
상기 획득된 이미지를 통하여 디텍팅된 사용자의 입의 움직임에 기초하여 상기 획득된 이미지에 포함된 사용자들 중 상기 특정 명령어를 발화한 특정 사용자를 디텍트하고,
상기 획득된 이미지에 기초하여 상기 특정 사용자가 상기 리모트 컨트롤러를 홀딩하고 있는 경우에만, 상기 특정 명령어에 대응하는 특정 기능을 실행하는, 멀티미디어 디바이스.12. The method of claim 11,
Wherein,
Detecting a specific user who has uttered the specific instruction among the users included in the obtained image based on the movement of the mouth of the user detected through the obtained image,
And executes a specific function corresponding to the specific instruction only when the specific user is holding the remote controller based on the acquired image.
마스터 사용자로 등록된 사용자의 얼굴 및 목소리를 인식하기 위한 데이터를 저장하는 메모리;를 더 포함하고,
상기 제어부는, 상기 메모리에 저장된 데이터에 기초하여, 상기 특정 명령어에 대응하는 오디오 데이터가 상기 마스터 사용자의 목소리에 대응하는 것으로 인식된 경우, 상기 특정 명령에 대응하는 특정 기능을 실행하는, 멀티미디어 디바이스.14. The method of claim 13,
Further comprising a memory for storing data for recognizing a face and a voice of a user registered as a master user,
Wherein the control unit executes a specific function corresponding to the specific instruction when the audio data corresponding to the specific instruction is recognized as corresponding to the voice of the master user based on the data stored in the memory.
마스터 사용자로 등록된 사용자의 얼굴 및 목소리를 인식하기 위한 데이터를 저장하는 메모리;를 더 포함하고,
상기 획득된 이미지에 기초하여 시선이 상기 디스플레이부를 향하고 있는 사용자 중에 상기 마스터 사용자가 포함되어 있는 경우, 오디오 출력부를 통해 출력되는 오디오 데이터의 볼륨을 일정하게 유지하거나 기 설정된 정도만큼 증가시키는, 멀티미디어 디바이스.The method of claim 3,
Further comprising a memory for storing data for recognizing a face and a voice of a user registered as a master user,
And maintains or increases the volume of the audio data output through the audio output unit by a predetermined amount when the master user is included among the users whose eyes are facing the display unit based on the obtained image.
상기 제어부는 음성 인식부를 포함하고,
특정 사용자가 명령어를 발화하는 경우, 상기 제어부는, 상기 획득된 이미지에 기초하여 상기 특정 사용자의 시선이 상기 디스플레이부를 향하고 있는 경우에만 상기 특정 명령어에 대응하는 특정 기능을 실행하는, 멀티미디어 디바이스.3. The method of claim 2,
Wherein the control unit includes a voice recognition unit,
When the specific user utters the command, the control unit executes the specific function corresponding to the specific command only when the eyes of the specific user are facing the display unit based on the obtained image.
상기 제어부는, 상기 제1 오디오 데이터의 값보다 상기 제2 오디오 데이터의 값이 더 크고, 상기 디텍팅된 사용자의 시선에 기초하여 시선이 상기 디스플레이부를 향하고 있는 사용자보다 상기 디스플레이부를 향하고 있지 않은 사용자가 더 많은 경우, 상기 특정 컨텐트의 재생을 중지 또는 일시 정지하는, 멀티미디어 디바이스.The method of claim 3,
Wherein the control unit determines that the user is not facing the display unit more than the user whose eyes are facing the display unit based on the gaze of the detected user and the value of the second audio data is larger than the value of the first audio data And more often stops or pauses the playback of the specific content.
외부의 음향 신호를 수신하여 전기적인 제1 오디오 데이터로 변환하는 단계;
리모트 컨트롤러로부터 외부의 음향 신호에 대응하는 제2 오디오 데이터를 수신하는 단계;
카메라로부터 이미지를 획득하는 단계; 및
상기 제1 오디오 데이터의 값과 상기 제2 오디오 데이터의 값의 크기가 다른 경우, 상기 획득된 이미지에 기초하여, 상기 출력되는 특정 컨텐트의 오디오 데이터의 볼륨을 조절하는 단계;를 포함하는 멀티미디어 디바이스의 제어 방법.Outputting video data and audio data of a specific content;
Receiving an external acoustic signal and converting it into electrical first audio data;
Receiving second audio data corresponding to an external acoustic signal from a remote controller;
Obtaining an image from a camera; And
And adjusting a volume of the audio data of the specific content based on the obtained image if the value of the first audio data and the value of the second audio data are different from each other, Control method.
상기 출력되는 특정 컨텐트의 오디오 데이터의 볼륨을 조절하는 단계는,
상기 획득된 이미지를 통하여, 사용자, 사용자의 시선, 사용자와의 거리, 사용자의 위치, 리모트 컨트롤러의 위치, 사용자의 리모트 컨트롤러의 홀딩 여부 및 사용자의 입의 움직임 중 적어도 하나를 디텍팅하는 단계; 및
상기 디텍팅 결과에 기초하여, 상기 출력되는 특정 컨텐트의 오디오 데이터의 볼륨을 조절하는 단계를 포함하는, 멀티미디어 디바이스의 제어 방법.19. The method of claim 18,
Wherein the step of adjusting the volume of the audio data of the specific content,
Detecting at least one of a user, a user's gaze, a distance from the user, a position of the user, a position of the remote controller, a holding state of the user's remote controller, and a movement of the mouth of the user through the obtained image; And
And adjusting a volume of audio data of the specific content to be output based on the detection result.
상기 출력되는 특정 컨텐트의 오디오 데이터의 볼륨을 조절하는 단계는,
상기 제1 오디오 데이터의 값보다 상기 제2 오디오 데이터의 값이 더 크고, 상기 디텍팅된 사용자의 시선에 기초하여 시선이 상기 디스플레이부를 향하고 있는 사용자보다 상기 디스플레이부를 향하고 있지 않은 사용자가 더 많은 경우, 상기 출력되는 특정 컨텐트의 오디오 데이터의 볼륨을 기 설정된 정도만큼 감소시키는 단계를 포함하는, 멀티미디어 디바이스의 제어 방법.20. The method of claim 19,
Wherein the step of adjusting the volume of the audio data of the specific content,
If the value of the second audio data is larger than the value of the first audio data and the number of users who are not facing the display unit is larger than the user whose gaze is directed to the display unit based on the gaze of the detached user, And reducing the volume of the audio data of the specific content to be outputted by a predetermined degree.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020140100275A KR102224484B1 (en) | 2014-08-05 | 2014-08-05 | Multimedia deivice and method for controlling the same |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020140100275A KR102224484B1 (en) | 2014-08-05 | 2014-08-05 | Multimedia deivice and method for controlling the same |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20160016341A true KR20160016341A (en) | 2016-02-15 |
KR102224484B1 KR102224484B1 (en) | 2021-03-08 |
Family
ID=55357100
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020140100275A KR102224484B1 (en) | 2014-08-05 | 2014-08-05 | Multimedia deivice and method for controlling the same |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102224484B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111587578A (en) * | 2017-12-05 | 2020-08-25 | 三星电子株式会社 | Display device and audio output method |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023074956A1 (en) * | 2021-10-29 | 2023-05-04 | 엘지전자 주식회사 | System comprising tv and remote control, and control method therefor |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20100043587A (en) * | 2008-10-20 | 2010-04-29 | 주식회사 대우일렉트로닉스 | Remote controller for controlling volume equipped with mike and method thereof |
JP2011505618A (en) * | 2007-11-21 | 2011-02-24 | ジェスチャー テック,インコーポレイテッド | Device access control |
KR20140040230A (en) * | 2011-07-26 | 2014-04-02 | 소니 주식회사 | Control device, control method and program |
-
2014
- 2014-08-05 KR KR1020140100275A patent/KR102224484B1/en active IP Right Grant
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011505618A (en) * | 2007-11-21 | 2011-02-24 | ジェスチャー テック,インコーポレイテッド | Device access control |
KR20100043587A (en) * | 2008-10-20 | 2010-04-29 | 주식회사 대우일렉트로닉스 | Remote controller for controlling volume equipped with mike and method thereof |
KR20140040230A (en) * | 2011-07-26 | 2014-04-02 | 소니 주식회사 | Control device, control method and program |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111587578A (en) * | 2017-12-05 | 2020-08-25 | 三星电子株式会社 | Display device and audio output method |
CN111587578B (en) * | 2017-12-05 | 2023-09-29 | 三星电子株式会社 | Display device and audio output method |
Also Published As
Publication number | Publication date |
---|---|
KR102224484B1 (en) | 2021-03-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3503537B1 (en) | Multimedia device having flexible display and controlling method thereof | |
KR20160026075A (en) | Multimedia device and method for controlling the same | |
KR20170031444A (en) | Digital device and method of processing data the same | |
KR20160074970A (en) | Display device and method for controlling the same | |
KR20170014886A (en) | Display device | |
KR20150029974A (en) | Display device and method for controlling the same | |
KR20170006760A (en) | Multimedia device | |
KR20170047547A (en) | Display device and method for controlling the same | |
KR20160029269A (en) | Multimedia device and server for providing information of recommend content to the same | |
KR102224484B1 (en) | Multimedia deivice and method for controlling the same | |
KR101984576B1 (en) | Display device controlled by pointing device and method for controlling the same | |
KR102221294B1 (en) | Multimedia deivice and method for controlling the same | |
KR102399705B1 (en) | Display device and method for controlling the same | |
KR20160009415A (en) | Video display apparatus capable of sharing ccontents with external input appatatus | |
KR102265904B1 (en) | Multimedia deivice and method for controlling the same | |
KR102320742B1 (en) | Broadcast receiving apparatus and method for outputting a audio | |
US9606638B2 (en) | Multimedia device and method of controlling a cursor thereof | |
KR20170031898A (en) | Display device and method for controlling the same | |
KR20140061118A (en) | Digital device and method of processing a signal thereof | |
KR20150004052A (en) | Method for controlling remote controller and multimedia device | |
KR101820735B1 (en) | Wireless RF Based Remote Control Device Equipped to Connect with a Headset and Keyboard | |
KR101772526B1 (en) | Input apparatus and input method of image display device | |
KR101720494B1 (en) | Image display apparatus and method for operating the same | |
KR102281342B1 (en) | Multivision system and method for controlling the same | |
KR20150093491A (en) | Image display device and control method for the image display device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |