KR102138518B1 - Terminal and method for controlling the same - Google Patents

Abstract

본 발명의 외부 장치와 미러링을 수행할 수 있는 단말기는, 복수의 컨텐츠를 표시하는 디스플레이부, 외부 장치로부터 디스플레이 정보를 수신하는 무선 통신부, 사용자 입력을 수신하기 위한 사용자 입력부 및 외부 장치의 디스플레이 정보를 고려하여, 복수의 컨텐츠의 스케일 및 표시 모드를 조절하고, 조절된 복수의 컨텐츠가 외부 장치를 통해 디스플레이될 수 있도록 무선 통신부를 제어하며, 외부 장치가 조절된 복수의 컨텐츠를 디스플레이하고 있는 동안, 사용자 입력부를 통해 사용자 입력이 수신되면, 사용자 입력이 적용되는 컨텐츠의 타입을 고려하여, 사용자 입력에 매핑되는 동작을 결정하고, 외부 장치가 상기 동작을 수행하도록 무선 통신부를 제어하는 제어부를 포함한다.A terminal capable of mirroring with an external device of the present invention includes a display unit displaying a plurality of contents, a wireless communication unit receiving display information from the external device, a user input unit for receiving user input, and display information of the external device. In consideration, the scale and display mode of the plurality of contents are adjusted, the wireless communication unit is controlled so that the adjusted plurality of contents can be displayed through an external device, and the external device is displaying the adjusted plurality of contents while the user When the user input is received through the input unit, considering the type of the content to which the user input is applied, and determining an operation mapped to the user input, and includes a control unit for controlling the wireless communication unit to perform the operation.

Description

단말기 및 그 제어 방법{TERMINAL AND METHOD FOR CONTROLLING THE SAME}Terminal and its control method{TERMINAL AND METHOD FOR CONTROLLING THE SAME}

본 발명은 사용자의 편의가 더욱 고려되어 단말기의 사용이 구현될 수 있도록 하는 이동 단말기 및 그 제어 방법에 관한 것이다.The present invention relates to a mobile terminal and a control method for allowing the use of the terminal to be implemented in consideration of user convenience.

단말기는 이동 가능 여부에 따라 이동 단말기(mobile/portable terminal) 및 고정 단말기(stationary terminal)으로 나뉠 수 있다. 다시 이동 단말기는 사용자의 직접 휴대 가능 여부에 따라 휴대(형) 단말기(handheld terminal) 및 거치형 단말기(vehicle mount terminal)로 나뉠 수 있다.Terminals can be divided into mobile terminals (mobile/portable terminals) and stationary terminals depending on whether they are mobile. Again, the mobile terminal may be divided into a handheld terminal and a vehicle mount terminal according to whether the user can directly carry it.

이와 같은 단말기(terminal)는 기능이 다양화됨에 따라 예를 들어, 사진이나 동영상의 촬영, 음악이나 동영상 파일의 재생, 게임, 방송의 수신 등의 복합적인 기능들을 갖춘 멀티미디어 기기(Multimedia player) 형태로 구현되고 있다.As the function is diversified, such a terminal is a multimedia player type having multiple functions such as taking a picture or a video, playing a music or video file, receiving a game, or broadcasting. Is being implemented.

이러한 단말기의 기능 지지 및 증대를 위해, 단말기의 구조적인 부분 및/또는 소프트웨어적인 부분을 개량하는 것이 고려될 수 있다.In order to support and increase the function of such a terminal, it may be considered to improve the structural part and/or software part of the terminal.

최근 이동 단말기와 외부 영상표시단말기를 연결하여 각각의 장치에 표시되는 영상이나 서로간의 컨텐츠를 공유하는 것이 가능하게 되었다. 특히, 스마트 텔레비젼과 같은 영상표시단말기는 유무선 망을 이용하여 사용자가 소지하는 이동 단말기와 연결되어 데이터 통신하는 것이 가능하게 되었다. 이러한 기능을 "미러링"이라 칭할 수 있다.Recently, it is possible to share an image displayed on each device or content with each other by connecting a mobile terminal and an external video display terminal. In particular, a video display terminal such as a smart TV can be connected to a mobile terminal carried by a user using a wired or wireless network to enable data communication. This function can be referred to as "mirroring."

미러링 기능 구현시, 각 단말기는 동일한 화면 프레임을 공유하는바 디스플레이의 종횡비가 다른 경우, 사용자에게 최적화된 화면을 제공할 수 없다는 문제점이 있었다.When implementing the mirroring function, each terminal shares the same screen frame, and when the aspect ratio of the display is different, there is a problem that it is impossible to provide an optimized screen to the user.

또한, 미러링 기능 구현시, 일방 단말기에서 수신된 사용자 입력을 그대로 타방 단말기에 적용시켜 오 동작 될 수 있다는 문제점이 있었다.In addition, when implementing the mirroring function, there is a problem in that a user input received from one terminal may be applied to the other terminal as it is and may malfunction.

본 발명은 상술한 문제점을 해결하기 위하여 안출된 것으로, 디스플레이의 특성을 고려하여 사용자에게 최적화된 미러링 화면을 제공하는 단말기 및 그 제어 방법을 제시하는 것을 목적으로 한다.The present invention has been devised to solve the above-mentioned problems, and an object of the present invention is to provide a terminal providing an optimized mirror screen and a control method thereof in consideration of the characteristics of the display.

또한, 디스플레이의 특성 및 미러링되는 컨텐츠의 타입에 따라 사용자 입력을 맵핑하여 동작하도록 하는 단말기 및 그 제어 방법을 제공하는데 그 목적이 있다.In addition, an object of the present invention is to provide a terminal and a control method for mapping and operating a user input according to a display characteristic and a type of mirrored content.

상술한 목적을 달성하기 위하여, 본 발명의 일 실시 예에 따른 외부 장치와 미러링을 수행할 수 있는 단말기는, 복수의 컨텐츠를 표시하는 디스플레이부; 상기 외부 장치로부터 디스플레이 정보를 수신하는 무선 통신부; 사용자 입력을 수신하기 위한 사용자 입력부; 및 상기 외부 장치의 디스플레이 정보를 고려하여, 상기 복수의 컨텐츠의 스케일 및 표시 모드를 조절하고, 상기 조절된 복수의 컨텐츠가 상기 외부 장치를 통해 디스플레이될 수 있도록 상기 무선 통신부를 제어하며, 상기 외부 장치가 상기 조절된 복수의 컨텐츠를 디스플레이하고 있는 동안, 상기 사용자 입력부를 통해 상기 사용자 입력이 수신되면, 상기 사용자 입력이 적용되는 컨텐츠의 타입을 고려하여, 상기 사용자 입력에 매핑되는 동작을 결정하고, 상기 외부 장치가 상기 동작을 수행하도록 상기 외부 장치를 원격 제어하는 제어부;를 포함한다.In order to achieve the above object, a terminal capable of mirroring with an external device according to an embodiment of the present invention includes: a display unit displaying a plurality of contents; A wireless communication unit receiving display information from the external device; A user input unit for receiving user input; And adjusting the scale and display mode of the plurality of contents in consideration of display information of the external device, controlling the wireless communication unit so that the adjusted plurality of contents can be displayed through the external device, and controlling the external device. While displaying the adjusted plurality of contents, if the user input is received through the user input unit, an operation mapped to the user input is determined in consideration of a type of content to which the user input is applied, and the It includes; a control unit for remotely controlling the external device so that the external device performs the operation.

본 발명의 일 실시 예에 따른 단말기 및 그 제어 방법에 의하면, 디스플레이의 비율에 따른 최적화된 미러링 화면을 제공할 수 있다.According to the terminal and the control method according to an embodiment of the present invention, it is possible to provide an optimized mirroring screen according to the ratio of the display.

또한, 사용자 입력을 디스플레이의 특성 및 컨텐츠의 타입에 따라 자동적으로 변환시켜 직관적인 미러링 동작을 제공할 수 있다.In addition, an intuitive mirroring operation may be provided by automatically converting a user input according to a display characteristic and a content type.

본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The effects obtainable in the present invention are not limited to the above-mentioned effects, and other effects not mentioned can be clearly understood by those skilled in the art from the following description. will be.

도 1은 본 발명의 일 실시예와 관련된 이동 단말기의 블록 구성도(block diagram)이다.
도 2는 본 발명과 관련된 이동 단말기의 일 예를 전면에서 바라본 사시도이다.
도 3은 도 2에 도시된 이동 단말기의 후면 사시도이다.
도 4는 본 발명의 일 실시 예에 따른 미러링 시스템의 개념을 도시하는 도면이다.
도 5 및 도 6은 본 발명의 일 실시 예에 따른 컨텐츠의 스케일 및 표시 모드를 조절하여 미러링을 수행하는 방법을 도시하는 도면이다.
도 7 내지 도 9는 본 발명의 일 실시 예에 따른 컨텐츠에 대한 사용자 입력의 미러링 방법을 도시하는 도면이다.
도 10은 본 발명의 일 실시 예에 따른 하위 레벨 리스트에 대한 확대/축소하는 입력의 미러링 방법을 도시하는 도면이다.
도 11은 본 발명의 일 실시 예에 따른 텍스트 컨텐츠의 미러링 방법을 도시하는 도면이다.
도 12 내지 도 15는 본 발명의 일 실시 예에 따른 비디오 컨텐츠의 미러링 방법을 도시하는 도면이다.
도 16 내지 도 19는 본 발명의 일 실시 예에 따른 이미지 컨텐츠의 미러링 방법을 도시하는 도면이다. 그리고,
도 20은 본 발명의 일 실시 예에 따른 단말기의 제어 방법을 설명하기 위한 흐름도이다.1 is a block diagram of a mobile terminal according to an embodiment of the present invention (block diagram).
2 is a perspective view of an example of a mobile terminal related to the present invention as viewed from the front.
3 is a rear perspective view of the mobile terminal shown in FIG. 2.
4 is a diagram illustrating the concept of a mirroring system according to an embodiment of the present invention.
5 and 6 are diagrams illustrating a method of performing mirroring by adjusting a scale and display mode of content according to an embodiment of the present invention.
7 to 9 are diagrams illustrating a method of mirroring user input for content according to an embodiment of the present invention.
10 is a diagram illustrating a mirroring method of an input to enlarge/reduce a low level list according to an embodiment of the present invention.
11 is a diagram illustrating a method for mirroring text content according to an embodiment of the present invention.
12 to 15 are views illustrating a method of mirroring video content according to an embodiment of the present invention.
16 to 19 are diagrams illustrating a method of mirroring image content according to an embodiment of the present invention. And,
20 is a flowchart illustrating a control method of a terminal according to an embodiment of the present invention.

이하, 본 발명과 관련된 이동 단말기에 대하여 도면을 참조하여 보다 상세하게 설명한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.Hereinafter, a mobile terminal related to the present invention will be described in more detail with reference to the drawings. The suffixes "modules" and "parts" for components used in the following description are given or mixed only considering the ease of writing the specification, and do not have meanings or roles distinguished from each other in themselves.

본 명세서에서 설명되는 이동 단말기에는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(laptop computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션 등이 포함될 수 있다. 그러나, 본 명세서에 기재된 실시예에 따른 구성은 이동 단말기에만 적용 가능한 경우를 제외하면, 디지털 TV, 데스크탑 컴퓨터 등과 같은 고정 단말기에도 적용될 수도 있음을 본 기술분야의 당업자라면 쉽게 알 수 있을 것이다.The mobile terminal described in this specification may include a mobile phone, a smart phone, a laptop computer, a digital broadcasting terminal, personal digital assistants (PDA), portable multimedia player (PMP), navigation, and the like. However, those skilled in the art will readily appreciate that the configuration according to the embodiments described herein may also be applied to fixed terminals such as digital TVs and desktop computers, except when applicable only to mobile terminals.

본 명세서에서 한 단말기에서 다른 단말기로 자신의 컨텐츠를 전달/표시하는 기술을 "미러링"이라 칭하기로 한다. 다시 말해서, 미러링 기능을 이용하여 이동 단말기의 현재 화면을 그대로 다른 단말기에 전송하고, 사용자는 다른 단말기 및 이동 단말기 중 적어도 하나를 이용하여 터치 조작 등을 수행할 수 있다. 또한, 이동 단말기에서의 서비스 이용, 애플리케이션 구동까지 동기화되어 이동 단말기에서 다른 단말기를 제어할 수도 있다.In this specification, a technology for delivering/displaying one's content from one terminal to another terminal will be referred to as “mirror”. In other words, the current screen of the mobile terminal is transmitted to the other terminal as it is by using the mirroring function, and the user can perform a touch operation or the like using at least one of the other terminal and the mobile terminal. In addition, it is possible to control other terminals in the mobile terminal in synchronization with service use in the mobile terminal and application driving.

한편, 미러링 기능은 디스플레이 화면의 다른 단말기에 표시하는 디스플레이 미러링과 터치 조작 등의 사용자 입력을 다른 단말기에 수행되게 하는 사용자 입력 미러링이 있을 수 있다.Meanwhile, the mirroring function may include display mirroring displayed on another terminal of the display screen and user input mirroring such that a user input such as a touch operation is performed on another terminal.

이러한 미러링 기능을 위한 동기화 인터페이스는 VNC(Virtual Network Computing), 오디오 및 비디오 컨텐츠 전송에 대한 실시간 전송 프로토콜 RTP(Real Time Protocol)와 단거리 무선통신 BT(Bluetooth), 서비스 교섭을 위한 범용 플러그 앤 플레이 UPnP(Universal Plug and Play) 등의 세 가지 기본 프로토콜로 구성될 수 있다.The synchronization interface for these mirroring functions is VNC (Virtual Network Computing), real-time transmission protocol RTP (Real Time Protocol) for audio and video content transmission, short-range wireless communication BT (Bluetooth), and universal plug-and-play UPnP for service negotiation Universal Plug and Play).

도 1은 본 발명의 일 실시예와 관련된 이동 단말기의 블록 구성도(block diagram)이다.1 is a block diagram of a mobile terminal according to an embodiment of the present invention (block diagram).

상기 이동 단말기(100)는 무선 통신부(110), A/V(Audio/Video) 입력부(120), 사용자 입력부(130), 센싱부(140), 출력부(150), 메모리(160), 인터페이스부(170), 제어부(180) 및 전원 공급부(190) 등을 포함할 수 있다. 도 1에 도시된 구성요소들이 필수적인 것은 아니어서, 그보다 많은 구성요소들을 갖거나 그보다 적은 구성요소들을 갖는 이동 단말기가 구현될 수도 있다.The mobile terminal 100 includes a wireless communication unit 110, an audio/video (A/V) input unit 120, a user input unit 130, a sensing unit 140, an output unit 150, a memory 160, and an interface. It may include a unit 170, the control unit 180 and the power supply unit 190. The components shown in FIG. 1 are not essential, so a mobile terminal with more or fewer components may be implemented.

이하, 상기 구성요소들에 대해 차례로 살펴본다.Hereinafter, the components will be described in turn.

무선 통신부(110)는 이동 단말기(100)와 무선 통신 시스템 사이 또는 이동 단말기(100)와 이동 단말기(100)가 위치한 네트워크 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 예를 들어, 무선 통신부(110)는 방송 수신 모듈(111), 이동통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114) 및 위치정보 모듈(115) 등을 포함할 수 있다.The wireless communication unit 110 may include one or more modules that enable wireless communication between the mobile terminal 100 and the wireless communication system or between the mobile terminal 100 and the network in which the mobile terminal 100 is located. For example, the wireless communication unit 110 may include a broadcast reception module 111, a mobile communication module 112, a wireless Internet module 113, a short-range communication module 114, and a location information module 115. .

방송 수신 모듈(111)은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 적어도 두 개의 방송 채널들에 대한 동시 방송 수신 또는 방송 채널 스위칭을 위해 둘 이상의 상기 방송 수신 모듈(1100)이 상기 이동 단말기(100)에 제공될 수 있다.The broadcast receiving module 111 receives a broadcast signal and/or broadcast related information from an external broadcast management server through a broadcast channel. The broadcast channel may include a satellite channel and a terrestrial channel. Two or more broadcast receiving modules 1100 may be provided to the mobile terminal 100 for simultaneous broadcast reception or switching of broadcast channels for at least two broadcast channels.

상기 방송 관리 서버는, 방송 신호 및/또는 방송 관련 정보를 생성하여 송신하는 서버 또는 기 생성된 방송 신호 및/또는 방송 관련 정보를 제공받아 단말기에 송신하는 서버를 의미할 수 있다. 상기 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다.The broadcast management server may mean a server that generates and transmits broadcast signals and/or broadcast-related information or a server that receives previously generated broadcast signals and/or broadcast-related information and transmits them to a terminal. The broadcast signal may include a TV broadcast signal, a radio broadcast signal, and a data broadcast signal, and may also include a TV broadcast signal or a radio broadcast signal combined with a data broadcast signal.

상기 방송 관련 정보는 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미한다. 상기 방송 관련 정보는, 이동통신망을 통하여도 제공될 수 있다. 이러한 경우에는 상기 이동통신 모듈(112)에 의해 수신될 수 있다.The broadcast-related information refers to information related to a broadcast channel, broadcast program or broadcast service provider. The broadcast-related information may also be provided through a mobile communication network. In this case, it may be received by the mobile communication module 112.

상기 방송 관련 정보는 다양한 형태로 존재할 수 있다. 예를 들어, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVB-H(Digital Video Broadcast-Handheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다.The broadcast-related information may exist in various forms. For example, it may exist in the form of an Electronic Program Guide (EPG) of Digital Multimedia Broadcasting (DMB) or an Electronic Service Guide (ESG) of Digital Video Broadcast-Handheld (DVB-H).

상기 방송 수신 모듈(111)은, 예를 들어, DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), DVB-CBMS (Convergence of Broadcasting and Mobile Service), OMA-BCAST (Open Mobile Alliance-BroadCAST), CMMB (China Multimedia Mobile Broadcasting), MBBMS (Mobile Broadcasting Business Management System), ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 물론, 상기 방송 수신 모듈(111)은, 상술한 디지털 방송 시스템뿐만 아니라 다른 방송 시스템에 적합하도록 구성될 수도 있다.The broadcast receiving module 111, for example, DMB-T (Digital Multimedia Broadcasting-Terrestrial), DMB-S (Digital Multimedia Broadcasting-Satellite), MediaFLO (Media Forward Link Only), DVB-H (Digital Video Broadcast) -Handheld), DVB-CBMS (Convergence of Broadcasting and Mobile Service), OMA-BCAST (Open Mobile Alliance-BroadCAST), CMMB (China Multimedia Mobile Broadcasting), MBBMS (Mobile Broadcasting Business Management System), ISDB-T (Integrated Services) Digital broadcast signals can be received using digital broadcast systems such as Digital Broadcast-Terrestrial. Of course, the broadcast receiving module 111 may be configured to be suitable for other broadcasting systems as well as the digital broadcasting system described above.

방송 수신 모듈(111)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리(160)에 저장될 수 있다.The broadcast signal and/or broadcast-related information received through the broadcast receiving module 111 may be stored in the memory 160.

이동통신 모듈(112)은, GSM(Global System for Mobile communications), CDMA(Code Division Multiple Access), WCDMA(Wideband CDMA)(이에 한정되지 않음)와 같은 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.The mobile communication module 112 includes at least one of a base station, an external terminal, and a server on a mobile communication network such as, but not limited to, Global System for Mobile communications (GSM), Code Division Multiple Access (CDMA), Wideband CDMA (WCDMA). Send and receive radio signals with one. The wireless signal may include various types of data according to transmission and reception of a voice call signal, a video call signal, or a text/multimedia message.

무선 인터넷 모듈(113)은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 이동 단말기(100)에 내장되거나 외장될 수 있다. 무선 인터넷 기술로는 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access), GSM, CDMA, WCDMA, LTE(Long Term Evolution)(이에 한정되지 않음) 등이 이용될 수 있다.The wireless Internet module 113 refers to a module for wireless Internet access, and may be built in or external to the mobile terminal 100. Wireless Internet technology includes Wireless LAN (WLAN) (Wi-Fi), Wireless broadband (Wibro), World Interoperability for Microwave Access (Wimax), High Speed Downlink Packet Access (HSDPA), GSM, CDMA, WCDMA, Long Term (LTE) Evolution) (not limited to this) and the like.

Wibro, HSDPA, GSM, CDMA, WCDMA, LTE 등에 의한 무선인터넷 접속은 이동통신망을 통해 이루어진다는 관점에서 본다면, 상기 이동통신망을 통해 무선인터넷 접속을 수행하는 상기 무선 인터넷 모듈(113)은 상기 이동통신 모듈(112)의 일종으로 이해될 수도 있다.In view of the wireless Internet access by Wibro, HSDPA, GSM, CDMA, WCDMA, LTE, etc., through the mobile communication network, the wireless Internet module 113 performing wireless Internet access through the mobile communication network is the mobile communication module It may be understood as a kind of (112).

근거리 통신 모듈(114)은 근거리 통신을 위한 모듈을 말한다. 근거리 통신(short range communication) 기술로 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee 등이 이용될 수 있다.The short-range communication module 114 refers to a module for short-range communication. Bluetooth, radio frequency identification (RFID), infrared data association (IrDA), ultra wideband (UWB), ZigBee, etc. may be used as short range communication technology.

위치정보 모듈(115)은 이동 단말기의 위치를 획득하기 위한 모듈로서, 그의 대표적인 예로는 GPS(Global Position System) 모듈이 있다. 현재 기술에 의하면, 상기 위치정보 모듈(115)은 3개 이상의 위성으로부터 떨어진 거리 정보와 정확한 시간 정보를 산출한 다음 상기 산출된 정보에 삼각법을 적용함으로써, 위도, 경도, 및 고도에 따른 3차원의 현 위치 정보를 정확히 산출할 수 있다. 현재, 3개의 위성을 이용하여 위치 및 시간 정보를 산출하고, 또다른 1개의 위성을 이용하여 상기 산출된 위치 및 시간 정보의 오차를 수정하는 방법이 널리 사용되고 있다. 또한, GPS 모듈(115)은 현 위치를 실시간으로 계속 산출함으로써 속도 정보를 산출할 수 있다.The location information module 115 is a module for obtaining a location of a mobile terminal, and a representative example thereof is a Global Position System (GPS) module. According to the present technology, the location information module 115 calculates distance information and accurate time information from three or more satellites, and then applies trigonometry to the calculated information to obtain a three-dimensional image according to latitude, longitude, and altitude. Current location information can be accurately calculated. Currently, a method of calculating position and time information using three satellites and correcting an error of the calculated position and time information using another one satellite is widely used. In addition, the GPS module 115 may calculate speed information by continuously calculating the current position in real time.

도 1을 참조하면, A/V(Audio/Video) 입력부(120)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(121)와 마이크(122) 등이 포함될 수 있다. 카메라(121)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 처리된 화상 프레임은 디스플레이부(151)에 표시될 수 있다.Referring to FIG. 1, an audio/video (A/V) input unit 120 is for inputting an audio signal or a video signal, which may include a camera 121 and a microphone 122. The camera 121 processes image frames such as still images or moving images obtained by an image sensor in a video call mode or a shooting mode. The processed image frame may be displayed on the display unit 151.

카메라(121)에서 처리된 화상 프레임은 메모리(160)에 저장되거나 무선 통신부(110)를 통하여 외부로 전송될 수 있다. 카메라(121)는 사용 환경에 따라 2개 이상이 구비될 수도 있다.The image frames processed by the camera 121 may be stored in the memory 160 or transmitted to the outside through the wireless communication unit 110. Two or more cameras 121 may be provided according to the use environment.

마이크(122)는 통화모드 또는 녹음모드, 음성인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 입력받아 전기적인 음성 데이터로 처리한다. 처리된 음성 데이터는 통화 모드인 경우 이동통신 모듈(112)을 통하여 이동통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 마이크(122)에는 외부의 음향 신호를 입력받는 과정에서 발생되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.The microphone 122 receives an external sound signal by a microphone in a call mode, a recording mode, or a voice recognition mode, and processes it as electrical voice data. The processed voice data may be converted into a form transmittable to a mobile communication base station through the mobile communication module 112 and output. Various noise reduction algorithms for removing noise generated in the process of receiving an external sound signal may be implemented in the microphone 122.

사용자 입력부(130)는 사용자가 단말기의 동작 제어를 위한 입력 데이터를 발생시킨다. 사용자 입력부(130)는 이동 단말기(100)의 전후면 또는 측면에 위치하는 버튼(136), 터치 센서(정압/정전)(137)로 구성될 수 있고, 도시되지는 않았지만 키패드(key pad), 돔 스위치 (dome switch), 조그 휠, 조그 스위치 등을 더욱 포함하여 구성될 수 있다.The user input unit 130 generates input data for the user to control the operation of the terminal. The user input unit 130 may include a button 136 and a touch sensor (static pressure/blackout) 137 positioned on the front or rear side of the mobile terminal 100, a keypad (not shown), It may be configured to further include a dome switch (dome switch), jog wheel, jog switch.

센싱부(140)는 이동 단말기(100)의 개폐 상태, 이동 단말기(100)의 위치, 사용자 접촉 유무, 이동 단말기의 방위, 이동 단말기의 가속/감속 등과 같이 이동 단말기(100)의 현 상태를 감지하여 이동 단말기(100)의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 상기 센싱부(140)의 예로는, 자이로스코프 센서, 가속도 센서, 지자기 센서 등이 있을 수 있다.The sensing unit 140 detects the current state of the mobile terminal 100 such as the open/closed state of the mobile terminal 100, the location of the mobile terminal 100, the presence or absence of user contact, the orientation of the mobile terminal, and acceleration/deceleration of the mobile terminal. By generating a sensing signal for controlling the operation of the mobile terminal 100. Examples of the sensing unit 140 may include a gyroscope sensor, an acceleration sensor, a geomagnetic sensor, and the like.

예를 들어 이동 단말기(100)가 슬라이드 폰 형태인 경우 슬라이드 폰의 개폐 여부를 센싱할 수 있다. 또한, 전원 공급부(190)의 전원 공급 여부, 인터페이스부(170)의 외부 기기 결합 여부 등을 센싱할 수도 있다. 한편, 상기 센싱부(140)는 근접 센서(141)를 포함할 수 있다.For example, when the mobile terminal 100 is in the form of a slide phone, it can sense whether the slide phone is opened or closed. In addition, it is also possible to sense whether the power supply unit 190 supplies power, whether the interface unit 170 is coupled to external devices, or the like. Meanwhile, the sensing unit 140 may include a proximity sensor 141.

출력부(150)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로, 이에는 디스플레이부(151), 음향 출력 모듈(152), 알람부(153), 및 햅틱 모듈(154) 등이 포함될 수 있다.The output unit 150 is for generating output related to vision, hearing, or tactile sense, and includes a display unit 151, an audio output module 152, an alarm unit 153, and a haptic module 154. Can.

디스플레이부(151)는 이동 단말기(100)에서 처리되는 정보를 표시(출력)한다. 예를 들어, 이동 단말기가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 이동 단말기(100)가 화상 통화 모드 또는 촬영 모드인 경우에는 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다.The display unit 151 displays (outputs) information processed by the mobile terminal 100. For example, when the mobile terminal is in a call mode, a UI (User Interface) or a GUI (Graphic User Interface) related to the call is displayed. When the mobile terminal 100 is in a video call mode or a shooting mode, it displays a photographed and/or received video, UI, or GUI.

디스플레이부(151)는 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode, OLED), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다.The display unit 151 includes a liquid crystal display (LCD), a thin film transistor-liquid crystal display (TFT LCD), an organic light-emitting diode (OLED), and a flexible display (flexible). display) and a 3D display.

이들 중 일부 디스플레이는 그를 통해 외부를 볼 수 있도록 투명형 또는 광투과형으로 구성될 수 있다. 이는 투명 디스플레이라 호칭될 수 있는데, 상기 투명 디스플레이의 대표적인 예로는 TOLED(Transparent OLED) 등이 있다. 디스플레이부(151)의 후방 구조 또한 광 투과형 구조로 구성될 수 있다. 이러한 구조에 의하여, 사용자는 단말기 바디의 디스플레이부(151)가 차지하는 영역을 통해 단말기 바디의 후방에 위치한 사물을 볼 수 있다.Some of these displays may be of a transparent type or a light transmissive type so that the outside can be seen through them. This may be called a transparent display, and a typical example of the transparent display is TOLED (Transparent OLED). The rear structure of the display unit 151 may also be configured as a light transmissive structure. Through this structure, the user can see an object located behind the terminal body through an area occupied by the display unit 151 of the terminal body.

이동 단말기(100)의 구현 형태에 따라 디스플레이부(151)이 2개 이상 존재할 수 있다. 예를 들어, 이동 단말기(100)에는 복수의 디스플레이부들이 하나의 면에 이격되거나 일체로 배치될 수 있고, 또한 서로 다른 면에 각각 배치될 수도 있다.Two or more display units 151 may exist depending on the implementation form of the mobile terminal 100. For example, a plurality of display units may be spaced apart from one surface or integrally disposed in the mobile terminal 100, or may be disposed on different surfaces.

디스플레이부(151)와 터치 동작을 감지하는 센서(이하, '터치 센서'라 함)가 상호 레이어 구조를 이루는 경우(이하, '터치 스크린'이라 함)에, 디스플레이부(151)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 터치 센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태를 가질 수 있다.When the display unit 151 and a sensor for detecting a touch operation (hereinafter referred to as a “touch sensor”) form a mutual layer structure (hereinafter, referred to as a “touch screen”), the display unit 151 may be used in addition to an output device. It can also be used as an input device. The touch sensor may have, for example, a form of a touch film, a touch sheet, or a touch pad.

터치 센서는 디스플레이부(151)의 특정 부위에 가해진 압력 또는 디스플레이부(151)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 터치 센서는 터치 되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다.The touch sensor may be configured to convert changes in pressure applied to a specific portion of the display unit 151 or capacitance generated in a specific portion of the display unit 151 into an electrical input signal. The touch sensor may be configured to detect not only the touched position and area, but also pressure at the time of touch.

터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기(미도시)로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(180)로 전송한다. 이로써, 제어부(180)는 디스플레이부(151)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다.When there is a touch input to the touch sensor, the signal(s) corresponding thereto is sent to a touch controller (not shown). The touch controller processes the signal(s) and then transmits corresponding data to the controller 180. Accordingly, the control unit 180 can know which area of the display unit 151 has been touched, and the like.

상기 근접 센서(141)는 상기 터치스크린에 의해 감싸지는 이동 단말기의 내부 영역 또는 상기 터치 스크린의 근처에 배치될 수 있다. 상기 근접 센서는 소정의 검출면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 근접 센서는 접촉식 센서보다는 그 수명이 길며 그 활용도 또한 높다.The proximity sensor 141 may be disposed inside the mobile terminal surrounded by the touch screen or near the touch screen. The proximity sensor refers to a sensor that detects the presence or absence of an object approaching a predetermined detection surface or an object present in the vicinity without mechanical contact using electromagnetic force or infrared rays. Proximity sensors have a longer lifespan and higher utilization than contact sensors.

상기 근접 센서의 예로는 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다. 상기 터치스크린이 정전식인 경우에는 상기 포인터의 근접에 따른 전계의 변화로 상기 포인터의 근접을 검출하도록 구성된다. 이 경우 상기 터치 스크린(터치 센서)은 근접 센서로 분류될 수도 있다.Examples of the proximity sensor include a transmission type photoelectric sensor, a direct reflection type photoelectric sensor, a mirror reflection type photoelectric sensor, a high frequency oscillation type proximity sensor, a capacitive type proximity sensor, a magnetic type proximity sensor, and an infrared proximity sensor. When the touch screen is capacitive, it is configured to detect the proximity of the pointer due to a change in electric field according to the proximity of the pointer. In this case, the touch screen (touch sensor) may be classified as a proximity sensor.

이하에서는 설명의 편의를 위해, 상기 터치스크린 상에 포인터가 접촉되지 않으면서 근접되어 상기 포인터가 상기 터치스크린 상에 위치함이 인식되도록 하는 행위를 "근접 터치(proximity touch)"라고 호칭하고, 상기 터치스크린 상에 포인터가 실제로 접촉되는 행위를 "접촉 터치(contact touch)"라고 호칭할 수 있다. 상기 터치스크린 상에서 포인터로 근접 터치가 되는 위치라 함은, 상기 포인터가 근접 터치될 때 상기 포인터가 상기 터치스크린에 대해 수직으로 대응되는 위치를 의미할 수 있다.Hereinafter, for convenience of description, an action of causing the pointer to be recognized as being positioned on the touch screen without touching the pointer on the touch screen is referred to as “proximity touch”, and the The act of actually touching the pointer on the touch screen may be referred to as "contact touch". The location on the touch screen that is a proximity touch with a pointer may mean a location where the pointer corresponds vertically to the touch screen when the pointer is touched close.

상기 근접센서는, 근접 터치와, 근접 터치 패턴(예를 들어, 근접 터치 거리, 근접 터치 방향, 근접 터치 속도, 근접 터치 시간, 근접 터치 위치, 근접 터치 이동 상태 등)을 감지한다. 상기 감지된 근접 터치 동작 및 근접 터치 패턴에 상응하는 정보는 터치 스크린상에 출력될 수 있다.The proximity sensor detects a proximity touch and a proximity touch pattern (eg, proximity touch distance, proximity touch direction, proximity touch speed, proximity touch time, proximity touch position, proximity touch movement state, etc.). Information corresponding to the sensed proximity touch operation and proximity touch pattern may be output on the touch screen.

음향 출력 모듈(152)은 호신호 수신, 통화모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서 무선 통신부(110)로부터 수신되거나 메모리(160)에 저장된 오디오 데이터를 출력할 수 있다. 음향 출력 모듈(152)은 이동 단말기(100)에서 수행되는 기능(예를 들어, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력하기도 한다. 이러한 음향 출력 모듈(152)에는 리시버(Receiver), 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.The audio output module 152 may output audio data received from the wireless communication unit 110 or stored in the memory 160 in a call signal reception, a call mode or a recording mode, a voice recognition mode, a broadcast reception mode, or the like. The sound output module 152 may also output sound signals related to functions (for example, call signal reception sound, message reception sound, etc.) performed in the mobile terminal 100. The sound output module 152 may include a receiver, a speaker, and a buzzer.

알람부(153)는 이동 단말기(100)의 이벤트 발생을 알리기 위한 신호를 출력한다. 이동 단말기에서 발생 되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력, 터치 입력 등이 있다. 알람부(153)는 비디오 신호나 오디오 신호 이외에 다른 형태, 예를 들어 진동으로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 상기 비디오 신호나 오디오 신호는 디스플레이부(151)나 음향 출력 모듈(152)을 통해서도 출력될 수 있으므로, 이 경우 상기 디스플레이부(151) 및 음향 출력 모듈(152)은 알람부(153)의 일종으로 분류될 수도 있다.The alarm unit 153 outputs a signal for notifying the occurrence of an event in the mobile terminal 100. Examples of events generated in the mobile terminal include call signal reception, message reception, key signal input, and touch input. The alarm unit 153 may output a signal for notifying the occurrence of an event by other forms, for example, vibration, in addition to a video signal or an audio signal. Since the video signal or the audio signal may be output through the display unit 151 or the sound output module 152, in this case, the display unit 151 and the sound output module 152 are a type of the alarm unit 153. It may be classified.

햅틱 모듈(haptic module)(154)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(154)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 있다. 햅틱 모듈(154)이 발생하는 진동의 세기와 패턴 등은 제어가능하다. 예를 들어, 서로 다른 진동을 합성하여 출력하거나 순차적으로 출력할 수도 있다.The haptic module 154 generates various tactile effects that the user can feel. A typical example of the tactile effect generated by the haptic module 154 is vibration. The intensity and pattern of vibration generated by the haptic module 154 is controllable. For example, different vibrations may be synthesized and output or sequentially output.

햅틱 모듈(154)은, 진동 외에도, 접촉 피부면에 대해 수직 운동하는 핀 배열, 분사구나 흡입구를 통한 공기의 분사력이나 흡입력, 피부 표면에 대한 스침, 전극(electrode)의 접촉, 정전기력 등의 자극에 의한 효과와, 흡열이나 발열 가능한 소자를 이용한 냉온감 재현에 의한 효과 등 다양한 촉각 효과를 발생시킬 수 있다.In addition to vibration, the haptic module 154 is used for stimulation such as pin arrangement that vertically moves with respect to the contact skin surface, jet or suction power of air through a spray or intake, grazing on the skin surface, contact with an electrode, and electrostatic force. Various tactile effects can be generated, such as the effect caused by and the effect of reproducing the feeling of cold and warm using an element capable of absorbing heat or generating heat.

햅틱 모듈(154)은 직접적인 접촉을 통해 촉각 효과의 전달할 수 있을 뿐만 아니라, 사용자가 손가락이나 팔 등의 근 감각을 통해 촉각 효과를 느낄 수 있도록 구현할 수도 있다. 햅틱 모듈(154)은 이동 단말기(100)의 구성 태양에 따라 2개 이상이 구비될 수 있다.The haptic module 154 may not only deliver the tactile effect through direct contact, but may also be implemented so that the user can feel the tactile effect through muscle sensations such as fingers or arms. Two or more haptic modules 154 may be provided according to a configuration aspect of the mobile terminal 100.

메모리(160)는 제어부(180)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입/출력되는 데이터들(예를 들어, 전화번호부, 메시지, 오디오, 정지영상, 동영상 등)의 임시 저장을 위한 기능을 수행할 수도 있다. 상기 메모리(160)에는 상기 데이터들 각각에 대한 사용 빈도(예를 들면, 각 전화번호, 각 메시지, 각 멀티미디어에 대한 사용빈도)가 저장될 수 있다.The memory 160 may store a program for processing and control of the controller 180, and temporarily store input/output data (for example, a phone book, message, audio, still image, video, etc.). It can also perform the function. In the memory 160, the frequency of use for each of the data (eg, each phone number, each message, and frequency of use for each multimedia) may be stored.

또한, 상기 메모리(160)에는 상기 터치스크린 상의 터치 입력시 출력되는 다양한 패턴의 진동 및 음향에 관한 데이터를 저장할 수 있다.In addition, the memory 160 may store data related to various patterns of vibration and sound output when a touch is input on the touch screen.

메모리(160)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory, ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 이동 단말기(100)는 인터넷(internet)상에서 상기 메모리(160)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작할 수도 있다.The memory 160 is a flash memory type, a hard disk type, a multimedia card micro type, a memory of a card type (for example, SD or XD memory), RAM (Random Access Memory, RAM), Static Random Access Memory (SRAM), Read-Only Memory (ROM), Electrically Erasable Programmable Read-Only Memory (EEPROM), Programmable Read-Only Memory (PROM), magnetic memory, magnetic It may include a storage medium of at least one type of disk, optical disk. The mobile terminal 100 may operate in relation to a web storage that performs a storage function of the memory 160 on the Internet.

인터페이스부(170)는 이동 단말기(100)에 연결되는 모든 외부기기와의 통로 역할을 한다. 인터페이스부(170)는 외부 기기로부터 데이터를 전송받거나, 전원을 공급받아 이동 단말기(100) 내부의 각 구성 요소에 전달하거나, 이동 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다. 예를 들어, 유/무선 헤드셋 포트, 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등이 인터페이스부(170)에 포함될 수 있다.The interface unit 170 serves as a passage with all external devices connected to the mobile terminal 100. The interface unit 170 receives data from an external device, receives power, transfers it to each component inside the mobile terminal 100, or allows data inside the mobile terminal 100 to be transmitted to the external device. For example, wired/wireless headset port, external charger port, wired/wireless data port, memory card port, port for connecting devices equipped with an identification module, audio input/output (I/O) port, A video input/output (I/O) port, an earphone port, and the like may be included in the interface unit 170.

식별 모듈은 이동 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module, UIM), 가입자 인증 모듈(Subscriber Identify Module, SIM), 범용 사용자 인증 모듈(Universal Subscriber Identity Module, USIM) 등을 포함할 수 있다. 식별 모듈이 구비된 장치(이하 '식별 장치')는, 스마트 카드(smart card) 형식으로 제작될 수 있다. 따라서 식별 장치는 포트를 통하여 이동 단말기(100)와 연결될 수 있다.The identification module is a chip that stores various information for authenticating the usage rights of the mobile terminal 100, a user identification module (UIM), a subscriber identification module (SIM), and a universal user authentication module ( Universal Subscriber Identity Module (USIM). The device provided with the identification module (hereinafter referred to as an'identification device') may be manufactured in a smart card format. Therefore, the identification device may be connected to the mobile terminal 100 through a port.

상기 인터페이스부는 이동 단말기(100)가 외부 크래들(cradle)과 연결될 때 상기 크래들로부터의 전원이 상기 이동 단말기(100)에 공급되는 통로가 되거나, 사용자에 의해 상기 크래들에서 입력되는 각종 명령 신호가 상기 이동 단말기(100)로 전달되는 통로가 될 수 있다. 상기 크래들로부터 입력되는 각종 명령 신호 또는 상기 전원은 상기 이동 단말기(100)가 상기 크래들에 정확히 장착되었음을 인지하기 위한 신호로 동작될 수도 있다.When the mobile terminal 100 is connected to an external cradle, the interface unit becomes a passage through which power from the cradle is supplied to the mobile terminal 100, or various command signals input from the cradle by the user are moved. It may be a passage to the terminal 100. Various command signals or power inputted from the cradle may be operated as signals for recognizing that the mobile terminal 100 is correctly mounted on the cradle.

제어부(controller)(180)는 통상적으로 이동 단말기의 전반적인 동작을 제어한다. 예를 들어 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 제어부(180)는 멀티 미디어 재생을 위한 멀티미디어 모듈(181)을 구비할 수도 있다. 멀티미디어 모듈(181)은 제어부(180) 내에 구현될 수도 있고, 제어부(180)와 별도로 구현될 수도 있다.The controller 180 typically controls the overall operation of the mobile terminal. For example, it performs related control and processing for voice calls, data communication, video calls, and the like. The controller 180 may include a multimedia module 181 for multimedia playback. The multimedia module 181 may be implemented in the controller 180, or may be implemented separately from the controller 180.

상기 제어부(180)는 상기 터치스크린 상에서 행해지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 행할 수 있다.The controller 180 may perform a pattern recognition process capable of recognizing handwriting input or picture drawing input performed on the touch screen as text and images, respectively.

전원 공급부(190)는 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 인가받아 각 구성요소들의 동작에 필요한 전원을 공급한다.The power supply unit 190 receives external power and internal power under the control of the controller 180 and supplies power required for the operation of each component.

배터리는 충전 가능하도록 이루어지는 내장형 배터리가 될 수 있으며, 충전 등을 위하여 단말기 바디에 착탈 가능하게 결합될 수 있다. 연결포트는 배터리의 충전을 위하여 전원을 공급하는 외부 충전기가 전기적으로 연결되는 인터페이스부(170)의 일 예로서 구성될 수 있다.The battery may be a built-in battery made to be charged, and may be detachably coupled to the terminal body for charging or the like. The connection port may be configured as an example of the interface unit 170 to which an external charger that supplies power for charging the battery is electrically connected.

여기에 설명되는 다양한 실시예는 예를 들어, 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터 또는 이와 유사한 장치로 읽을 수 있는 기록매체 내에서 구현될 수 있다.The various embodiments described herein can be implemented in a computer- or similar device-readable recording medium using, for example, software, hardware, or a combination thereof.

하드웨어적인 구현에 의하면, 여기에 설명되는 실시예는 ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기타 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 본 명세서에서 설명되는 실시예들이 제어부(180) 자체로 구현될 수 있다.According to a hardware implementation, embodiments described herein include application specific integrated circuits (ASICs), digital signal processors (DSPs), digital signal processing devices (DSPDs), programmable logic devices (PLDs), field programmable gate arrays (FPGAs), It may be implemented using at least one of processors, controllers, micro-controllers, microprocessors, and electrical units for performing other functions. The described embodiments may be implemented by the controller 180 itself.

소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시예들은 별도의 소프트웨어 모듈들로 구현될 수 있다. 상기 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 작동을 수행할 수 있다. 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션으로 소프트웨어 코드가 구현될 수 있다. 상기 소프트웨어 코드는 메모리(160)에 저장되고, 제어부(180)에 의해 실행될 수 있다.According to the software implementation, embodiments such as procedures and functions described herein may be implemented as separate software modules. Each of the software modules may perform one or more functions and operations described herein. Software code can be implemented in a software application written in an appropriate programming language. The software code may be stored in the memory 160 and executed by the controller 180.

이하, 본 발명의 실시예를 설명하는데 있어서, 디스플레이부(151)는 터치스크린(151)으로 가정하여 설명하기로 한다. 하지만, 본 발명의 실시예들이 터치스크린(151)에 한정되는 것은 아니다.Hereinafter, in describing an embodiment of the present invention, the display unit 151 is assumed to be a touch screen 151. However, embodiments of the present invention are not limited to the touch screen 151.

또한, 본 발명의 실시예에서 터치 제스처는 터치 스크린(151)를 접촉 터치하거나 근접 터치하여 구현되는 제스처를 의미하며, 터치 입력은 터치 제스처에 의해 수신되는 입력을 의미한다.In addition, in the embodiment of the present invention, the touch gesture means a gesture implemented by touching or touching the touch screen 151, and the touch input means an input received by the touch gesture.

터치 제스처는 동작에 따라 탭(tap), 더블 탭(double tap), 드래그(drag), 플릭(flick), 프레스(press), 멀티 터치(multi touch), 핀치 인(pinch in), 핀치 아웃(pinch out) 등으로 구분된다.Touch gestures include tap, double tap, drag, flick, press, multi touch, pinch in, and pinch out (depending on the action). pinch out).

탭은 터치 스크린(151)을 가볍게 한번 눌렀다 떼는 동작으로, 일반 퍼스널 컴퓨터에서의 마우스의 클릭과 같은 터치 제스처를 의미한다.The tap is an operation of lightly pressing and releasing the touch screen 151 once, and means a touch gesture, such as a mouse click on a general personal computer.

또한, 더블 탭은 터치 스크린(151)을 빠르게 두번 탭하는 동작으로, 일반 퍼스널 컴퓨터에서의 마우스의 더블 클릭과 같은 터치 제스처를 의미한다.In addition, the double tap is an operation of quickly tapping the touch screen 151 twice, which means a touch gesture like a double click of a mouse in a general personal computer.

또한, 드래그는 터치 스크린(151)에 터치를 유지한 상태에서 특정 위치로 이동한 후 떼는 동작으로, 객체를 드래그하는 경우, 해당 객체는 드래그 방향에 따라 지속적으로 이동하여 표시될 수도 있다.In addition, dragging is an operation of moving a specific position while holding a touch on the touch screen 151 and then releasing it. When dragging an object, the object may be continuously moved and displayed according to a dragging direction.

또한, 플릭은 터치 스크린(151)을 터치한 후 특정 방향(상, 하, 좌, 우 또는 대각선)으로 이동 후 접점을 떼는 동작을 의미하며, 이동 단말기(100)는 플릭에 의해 터치 입력이 수신되면, 플릭 방향, 속도 등을 토대로 특정 동작의 처리를 수행한다. 예를 들어, 플릭 방향을 토대로 전자 책(e-book)의 페이지 넘김 동작을 수행할 수 있다.In addition, flick refers to an operation of touching the touch screen 151 and then moving in a specific direction (up, down, left, right, or diagonal) to release the contact point, and the mobile terminal 100 receives a touch input by the flick. When it does, processing of a specific motion is performed based on the flick direction, speed, and the like. For example, a page turning operation of an e-book may be performed based on the flick direction.

또한, 프레스는 터치 스크린(151)을 터치 후 기 설정된 시간 이상 지속적으로 터치를 유지하는 동작을 의미한다.In addition, the press means an operation of continuously maintaining a touch for a predetermined time or more after touching the touch screen 151.

또한, 멀티 터치는 터치 스크린(151)의 복수의 지점을 동시에 터치하는 동작을 의미한다.In addition, multi-touch means an operation of simultaneously touching a plurality of points on the touch screen 151.

또한, 핀치 인은 터치 스크린(151)을 멀티 터치 중인 복수의 포인터가 서로 가까워지는 방향으로 드래그하는 동작을 의미한다. 즉, 터치 스크린(151)에서 멀티 터치되는 복수의 지점 중 적어도 하나의 지점으로부터 시작되고, 멀티 터치되는 복수의 지점이 서로 가까워지는 방향으로 발생하는 드래그를 의미한다.In addition, pinch-in refers to an operation of dragging the touch screen 151 in a direction in which a plurality of pointers being multi-touched approach each other. That is, it means a drag that starts from at least one of a plurality of points multi-touched on the touch screen 151 and occurs in a direction in which the multiple touched points are close to each other.

또한, 핀치 아웃은 터치 스크린(151)을 멀티 터치 중인 복수의 포인터가 서로 멀어지는 방향으로 드래그하는 동작을 의미한다. 즉, 터치 스크린(151)에서 멀티 터치되는 복수의 지점 중 적어도 하나의 지점으로부터 시작되고, 멀티 터치되는 복수의 지점이 서로 멀어지는 방향으로 발생하는 드래그를 의미한다.In addition, the pinch-out means an operation of dragging the touch screen 151 in a direction in which a plurality of pointers that are multi-touching away from each other. That is, it means a drag that starts from at least one point among a plurality of points multi-touched on the touch screen 151 and occurs in a direction in which a plurality of multi-touched points are moved away from each other.

도 2는 본 발명과 관련된 이동 단말기 또는 휴대 단말기의 일 예를 전면에서 바라본 사시도이다.2 is a perspective view of an example of a mobile terminal or a mobile terminal related to the present invention as viewed from the front.

개시된 이동 단말기(100)는 바 형태의 단말기 바디를 구비하고 있다. 다만, 본 발명은 여기에 한정되지 않고, 2 이상의 바디들이 상대 이동 가능하게 결합되는 슬라이드 타입, 폴더 타입, 스윙 타입, 스위블 타입 등 다양한 구조에 적용이 가능하다.The disclosed mobile terminal 100 has a bar-shaped terminal body. However, the present invention is not limited to this, and can be applied to various structures such as a slide type, a folder type, a swing type, and a swivel type in which two or more bodies are movably coupled.

상기 이동 단말기(100)의 바디는 외관을 이루는 케이스(101, 102, 103)를 포함한다. 본 실시예에서, 케이스는 프론트 케이스(101)와 리어 케이스(102)로 구분될 수 있다. 프론트 케이스(101)와 리어 케이스(102)의 사이에 형성된 공간에는 각종 전자부품들이 내장된다.The body of the mobile terminal 100 includes cases (101, 102, 103) forming an exterior. In this embodiment, the case may be divided into a front case 101 and a rear case 102. Various electronic components are embedded in the space formed between the front case 101 and the rear case 102.

경우에 따라서는 리어 케이스(102)의 표면에도 전자부품이 실장 될 수 있다. 상기 리어 케이스(102)의 표면에 실장되는 전자부품은 사용자가 탈착이 필요한 배터리, USIM카드 및 메모리카드 등이 있다. 이 때, 상기 리어 케이스(102)는 그 표면을 커버하기 위한 후면커버(103)를 더 구비할 수 있다. 상기 후면커버(103)는 사용자가 용이하게 탈부착 가능한 구조로 형성되며, 상기 후면커버(103)를 제거하면, 상기 리어 케이스(102)의 표면이 노출된다.In some cases, electronic components may also be mounted on the surface of the rear case 102. Electronic components mounted on the surface of the rear case 102 include a battery, a USIM card, and a memory card that the user needs to detach. At this time, the rear case 102 may further include a rear cover 103 for covering its surface. The rear cover 103 is formed in a structure that can be easily attached and detached by a user. When the rear cover 103 is removed, the surface of the rear case 102 is exposed.

도 2에 도시된 바와 같이 상기 후면커버(103)를 결합하면, 상기 리어 케이스(102)의 측면 일부만 노출될 수도 있고, 상기 후면커버(103)의 사이즈를 작게하면 상기 리어 케이스(102)의 배면 일부도 노출될 수 있다. 상기 후면커버(103)가 상기 리어 케이스(102)의 배면 전체를 커버하는 경우 카메라(121')나 음향 출력부(152')를 외부로 노출시키기 위한 개구부(103')를 포함할 수 있다.When the rear cover 103 is combined as shown in FIG. 2, only a part of the side surface of the rear case 102 may be exposed, and when the size of the rear cover 103 is reduced, the rear surface of the rear case 102 Some may also be exposed. When the rear cover 103 covers the entire rear surface of the rear case 102, it may include an opening 103' for exposing the camera 121' or the sound output unit 152' to the outside.

케이스들(101, 102, 103)은 합성수지를 사출하여 형성되거나 금속 재질, 예를 들어 스테인레스 스틸(STS) 또는 티타늄(Ti) 등과 같은 금속 재질을 갖도록 형성될 수도 있다.The cases 101, 102, and 103 may be formed by injection of synthetic resin or may be formed to have a metal material, for example, a metal material such as stainless steel (STS) or titanium (Ti).

단말기 케이스(101, 102)에는 디스플레이부(151), 음향 출력 모듈(152), 카메라(121), 사용자 입력부(130/131,132), 마이크(122), 인터페이스부(170) 등이 배치될 수 있다.A display unit 151, an audio output module 152, a camera 121, a user input unit 130/131,132, a microphone 122, an interface unit 170, etc. may be disposed in the terminal cases 101 and 102. .

디스플레이부(151)는 프론트 케이스(101)의 주면의 대부분을 차지한다. 디스플레이부(151)의 양단부 중 일 단부에 인접한 영역에는 음향 출력 모듈(152)와 카메라(121)가 배치되고, 다른 단부에 인접한 영역에는 사용자 입력부(131)와 마이크(122)가 배치된다. 사용자 입력부(132)와 인터페이스부(170) 등은 프론트 케이스(101) 및 리어 케이스(102)의 측면들에 배치될 수 있다.The display unit 151 occupies most of the main surface of the front case 101. A sound output module 152 and a camera 121 are disposed in an area adjacent to one end of both ends of the display unit 151, and a user input unit 131 and a microphone 122 are arranged in an area adjacent to the other end. The user input unit 132 and the interface unit 170 may be disposed on side surfaces of the front case 101 and the rear case 102.

사용자 입력부(130)는 이동 단말기(100)의 동작을 제어하기 위한 명령을 입력받기 위해 조작되는 것으로서, 복수의 조작 유닛들(131,132)을 포함할 수 있다. 조작 유닛들(131,132)은 조작부(manipulating portion)로도 통칭 될 수 있으며, 사용자가 촉각 적인 느낌을 가면서 조작하게 되는 방식(tactile manner)이라면 어떤 방식이든 채용될 수 있다.The user input unit 130 is operated to receive a command for controlling the operation of the mobile terminal 100, and may include a plurality of operation units 131 and 132. The operation units 131 and 132 may also be collectively referred to as a manipulation portion, and any method may be employed as long as the user operates with a tactile feeling.

제1 또는 제2조작 유닛들(131, 132)에 의하여 입력되는 내용은 다양하게 설정될 수 있다. 예를 들어, 제1 조작 유닛(131)은 시작, 종료, 스크롤 등과 같은 명령을 입력받고, 제2 조작 유닛(132)은 음향 출력 모듈(152)에서 출력되는 음향의 크기 조절 과 같은 명령을 입력받고, 제 3 조작 유닛(133)은 디스플레이부(151)의 터치 인식 모드로의 전환 등과 같은 명령을 입력받을 수 있다.Contents input by the first or second operation units 131 and 132 may be variously set. For example, the first operation unit 131 receives a command such as start, end, scroll, etc., and the second operation unit 132 inputs a command such as adjusting the volume of sound output from the sound output module 152. In response, the third operation unit 133 may receive a command such as switching of the display unit 151 to a touch recognition mode.

도 3은 도 2에 도시된 휴대 단말기의 후면 사시도이다.3 is a rear perspective view of the portable terminal shown in FIG. 2.

도 3을 참조하면, 단말기 바디의 후면, 다시 말해서 리어 케이스(102)에는 카메라(121')가 추가로 장착될 수 있다. 카메라(121')는 카메라(121, 도 2 참조)와 실질적으로 반대되는 촬영 방향을 가지며, 카메라(121)와 서로 다른 화소를 가지는 카메라일 수 있다.Referring to FIG. 3, a camera 121 ′ may be additionally mounted on the rear of the terminal body, that is, the rear case 102. The camera 121 ′ has a photographing direction substantially opposite to the camera 121 (see FIG. 2 ), and may be a camera having different pixels from the camera 121.

예를 들어, 카메라(121)는 화상 통화 등의 경우에 사용자의 얼굴을 촬영하여 상대방에 전송함에 무리가 없도록 저 화소를 가지며, 카메라(121')는 일반적인 피사체를 촬영하고 바로 전송하지는 않는 경우가 많기에 고 화소를 가지는 것이 바람직하다. 카메라(121,121')는 회전 또는 팝업(pop-up) 가능하게 단말기 바디에 설치될 수도 있다.For example, the camera 121 has a low pixel so that it is easy to take a picture of the user's face in the case of a video call and transmit it to the other party, and the camera 121' may not shoot the general subject and send it immediately It is desirable to have high pixels in many cases. The cameras 121 and 121' may be installed on the terminal body to be rotatable or pop-up.

카메라(121')에 인접하게는 플래쉬(123)와 거울(124)이 추가로 배치된다. 플래쉬(123)는 카메라(121')로 피사체를 촬영하는 경우에 피사체를 향해 빛을 비추게 된다. 거울(124)은 사용자가 카메라(121')를 이용하여 자신을 촬영(셀프 촬영)하고자 하는 경우에, 사용자 자신의 얼굴 등을 비춰볼 수 있게 한다.A flash 123 and a mirror 124 are additionally disposed adjacent to the camera 121'. When the flash 123 photographs the subject with the camera 121', light is directed toward the subject. The mirror 124 allows the user to reflect on the user's own face or the like when the user wants to photograph (self-shoot) using the camera 121'.

단말기 바디의 후면에는 음향 출력부(152')가 추가로 배치될 수도 있다. 음향 출력부(152')는 음향 출력부(152, 도 2a 참조)와 함께 스테레오 기능을 구현할 수 있으며, 통화시 스피커폰 모드의 구현을 위하여 사용될 수도 있다.A sound output unit 152' may be additionally disposed on the rear side of the terminal body. The audio output unit 152' may implement a stereo function together with the audio output unit 152 (see FIG. 2A), or may be used to implement a speakerphone mode during a call.

단말기 바디의 측면에는 통화 등을 위한 안테나 외에 방송신호 수신용 안테나(116)가 추가적으로 배치될 수 있다. 방송수신모듈(111, 도 1 참조)의 일부를 이루는 안테나(116)는 단말기 바디에서 인출 가능하게 설치될 수 있다.On the side of the terminal body, an antenna 116 for receiving a broadcast signal may be additionally disposed in addition to an antenna for a call. The antenna 116 forming part of the broadcast receiving module 111 (refer to FIG. 1) may be installed to be withdrawn from the terminal body.

설명의 편의를 위해, 본 발명에 따른 이동 단말기는 도 1에 도시된 구성요소 중 적어도 하나를 포함하는 것으로 가정한다.For convenience of description, it is assumed that the mobile terminal according to the present invention includes at least one of the components shown in FIG. 1.

구체적으로, 본 발명에 따른 외부 장치와 미러링을 수행할 수 있는 단말기는 도 1에서 도시된 구성요소 중 복수의 컨텐츠를 표시하는 디스플레이부, 상기 외부 장치로부터 디스플레이 정보를 수신하는 무선 통신부, 사용자 입력을 수신하기 위한 사용자 입력부 및 상기 외부 장치의 디스플레이 정보를 고려하여, 상기 복수의 컨텐츠의 스케일 및 표시 모드를 조절하고, 상기 조절된 복수의 컨텐츠가 상기 외부 장치를 통해 디스플레이될 수 있도록 상기 무선 통신부를 제어하며, 상기 외부 장치가 상기 조절된 복수의 컨텐츠를 디스플레이하고 있는 동안, 상기 사용자 입력부를 통해 사용자 입력이 수신되면, 상기 사용자 입력이 적용되는 컨텐츠의 타입을 고려하여, 상기 사용자 입력에 매핑되는 동작을 결정하고, 상기 외부 장치가 상기 동작을 수행하도록 상기 무선 통신부를 제어하는 제어부를 포함하는 것으로 가정한다.Specifically, a terminal capable of mirroring with an external device according to the present invention includes a display unit displaying a plurality of contents among components shown in FIG. 1, a wireless communication unit receiving display information from the external device, and a user input. Adjusting the scale and display mode of the plurality of contents in consideration of the user input unit for receiving and display information of the external device, and controlling the wireless communication unit so that the adjusted plurality of contents can be displayed through the external device When the user input is received through the user input unit while the external device is displaying the adjusted plurality of contents, an operation mapped to the user input is taken into account in consideration of the type of content to which the user input is applied. It is assumed that it includes a control unit for determining and controlling the wireless communication unit so that the external device performs the operation.

경우에 따라, 상기 디스플레이부는 복수의 컨텐츠의 스크랩 날짜를 기초로 생성된 리스트에 썸네일 형식으로 복수의 컨텐츠를 표시할 수 있으며, 상기 제어부는 상기 외부 장치의 디스플레이 정보를 고려하여, 상기 리스트의 스케일 및 표시 모드를 조절하여 상기 외부 장치를 통해 디스플레이될 수 있도록 무선 통신부를 제어할 수 있다.In some cases, the display unit may display a plurality of contents in a thumbnail format on a list generated based on a scrap date of the plurality of contents, and the control unit may consider the display information of the external device, and scale the list and The wireless communication unit may be controlled to be displayed through the external device by adjusting a display mode.

또한, 상기 외부 장치의 디스플레이 정보는 디스플레이 크기 및 종횡비를 포함할 수 있고, 상기 제어부는 상기 디스플레이부의 종횡비 및 상기 외부 장치의 종횡비를 비교하여, 상기 컨텐츠의 표시모드를 세로모드 또는 가로모드로 조절할 수 있다.Further, the display information of the external device may include a display size and an aspect ratio, and the control unit may adjust the display mode of the content to portrait mode or landscape mode by comparing the aspect ratio of the display unit and the aspect ratio of the external device. have.

여기서, 상기 제어부는, 상기 조절된 컨텐츠의 표시모드에 따라 상기 사용자 입력에 매핑되는 동작을 결정하고, 상기 외부 장치가 상기 동작을 수행하도록 상기 무선 통신부를 제어할 수 있다.Here, the control unit may determine an operation mapped to the user input according to the display mode of the adjusted content, and control the wireless communication unit so that the external device performs the operation.

이하에서는 이와 같이 구성된 단말기에서 구현될 수 있는 제어 방법과 관련된 실시 예들에 대해 첨부된 도면을 참조하여 살펴보겠다.Hereinafter, exemplary embodiments related to a control method that can be implemented in a terminal configured as described above will be described with reference to the accompanying drawings.

도 4는 본 발명의 일 실시 예에 따른 미러링 시스템의 개념을 도시하는 도면이다.4 is a diagram illustrating the concept of a mirroring system according to an embodiment of the present invention.

도 4를 참조하면, 제 1 단말기(100a)는 이동 단말기 형태를 가지며, 제2 단말기(100b)는 텔레비젼(Television) 형태를 가진다. 최근 텔레비젼 형태의 단말기도 외부와 데이터를 송수신할 수 있는 유무선 통신부를 구비하고, 별도의 프로세서를 구비하는, 이른바 스마트 텔레비젼(Smart television)이 공급되고 있다. 기존의 텔레비젼이, 수신된 방송 데이터를 표시해주기만 하는 단방향의 데이터 이동인 반면에, 스마트 텔레비젼은 사용자의 입력에 기초하여 데이터를 송신할 수도 있기 때문에 데이터의 이동이 양방향으로 이루어질 수 있다.Referring to FIG. 4, the first terminal 100a has a mobile terminal type, and the second terminal 100b has a television type. 2. Description of the Related Art In recent years, a so-called smart television, which has a wired/wireless communication unit capable of transmitting and receiving data to and from the outside, and a separate processor, has been supplied. Whereas existing televisions are unidirectional data movements that only display received broadcast data, data movement can be done in both directions because smart televisions can also transmit data based on user input.

본 발명의 실시예들을 설명하는데 있어서, 도 4에 도시된 바와 같이 특정 형태의 단말기를 예시로 하고 있으나, 이러한 단말기의 형태에 제한되지 않음은 자명하다.In describing embodiments of the present invention, although a specific type of terminal is illustrated as illustrated in FIG. 4, it is obvious that the terminal is not limited to the type of the terminal.

본 발명의 일 실시 예에서는, 미러링 기능을 수행하기 위하여 복수 개의 단말기 각각이 별도의 서버(400)와 미러링 컨텐츠를 송수신함으로써, 복수 개의 단말기 간에 미러링 컨텐츠를 공유할 수 있다. 즉, 공유하고자 하는 미러링 컨텐츠가 서버(400)에 저장되면, 서버(400)는 공유하고자 하는 단말기에게 저장되어 있는 미러링 컨텐츠에 접속 권한을 주는 방식을 통하여, 복수 개의 단말기가 컨텐츠를 공유할 수 있다.According to an embodiment of the present invention, each of a plurality of terminals may transmit and receive mirroring content to and from a separate server 400 in order to perform the mirroring function, thereby sharing mirroring content between the plurality of terminals. That is, when the mirroring content to be shared is stored in the server 400, the server 400 can share the content through a method of giving access to the stored mirroring content to the terminal to be shared. .

한편, 상기 서버(400)는, 별도의 장치로 구비될 수도 있지만, 복수 개의 단말기 중에서 호스트 역할을 하는 단말기가 서버의 역할을 대신 수행할 수도 있을 것이다. 즉, 본 발명의 실시예들은, 서버(400)의 구비 여부에 대한 제한이 없으며, 서버(400)에 미러링 컨텐츠를 저장할 필요없이 단말기간 통신에 의해 미러링 데이터를 송수신할 수도 있다.Meanwhile, the server 400 may be provided as a separate device, but a terminal serving as a host among a plurality of terminals may perform the role of a server instead. That is, in the embodiments of the present invention, there is no restriction on whether the server 400 is provided, and mirroring data may be transmitted and received by communication between terminals without having to store the mirrored content on the server 400.

이하 도 5 내지 도 19를 참조하여, 본 발명의 일 실시 예에 따른 미러링을 수행하기 위한 제어 방법에 대해 설명하도록 한다. 한편, 본 발명의 제어 방법을 설명하기에 앞서, 최초 제1 단말기(100a)와 제2 단말기(100b)는 미러링 기능으로 서로 연결되어 있는 상태를 가정한다.Hereinafter, a control method for performing mirroring according to an embodiment of the present invention will be described with reference to FIGS. 5 to 19. Meanwhile, before describing the control method of the present invention, it is assumed that the first first terminal 100a and the second terminal 100b are connected to each other by a mirroring function.

도 5 및 도 6은 본 발명의 일 실시 예에 따른 컨텐츠의 스케일 및 표시 모드를 조절하여 미러링을 수행하는 방법을 도시하는 도면이다. 본 도면에서는 리스트 데이터를 컨텐츠의 일 실시 예로 들고 있다.5 and 6 are diagrams illustrating a method of performing mirroring by adjusting a scale and display mode of content according to an embodiment of the present invention. In this figure, list data is used as an example of content.

도 5를 참조하면, 제1 단말기(100a)는 제1 단말기(100a)에 표시되고 있는 컨텐츠(500)를 조절하여 제2 단말기(100b)를 통해 디스플레이될 수 있도록 무선 통신부를 제어할 수 있다. 구체적으로, 제1 단말기(100a)는 제2 단말기의 디스플레이 정보를 고려하여 컨텐츠의 스케일 및 표시 모드를 조절할 수 있다. 여기서, 디스플레이 정보는 디스플레이의 크기 및 종횡비를 포함할 수 있다. 그리고, 표시 모드는 컨텐츠가 표시되는 방향에 대한 모드를 의미하며, 세로 모드와 가로 모드를 포함할 수 있다. 도 5에서 도시된 바와 같이, 제1 단말기(100a)에 표시된 컨텐츠(500)의 표시 모드는 세로 모드이고, 제 2단말기(100b)에 표시된 컨텐츠(501)의 표시 모드는 가로 모드이다. 즉, 제2 단말기(100b)는 디스플레이의 가로 길이가 세로 길이보다 더 길기때문에 가로 모드로 표시하는 것이 적합하며, 반대로, 제1 단말기(100a)는 디스플레이의 세로 길이가 가로 길이보다 더 길기때문에 세로 모드로 표시하는 것이 적합하다. 따라서, 제1 단말기(100a)는 세로모드인 컨텐츠를 제2 단말기(100b)에 미러링할때, 제2 단말기에 적합한 가로모드로 조절할 수 있다.Referring to FIG. 5, the first terminal 100a may control the wireless communication unit to be displayed through the second terminal 100b by adjusting the content 500 displayed on the first terminal 100a. Specifically, the first terminal 100a may adjust the scale and display mode of the content in consideration of the display information of the second terminal. Here, the display information may include the size and aspect ratio of the display. In addition, the display mode means a mode for a direction in which content is displayed, and may include a portrait mode and a landscape mode. As shown in FIG. 5, the display mode of the content 500 displayed on the first terminal 100a is a vertical mode, and the display mode of the content 501 displayed on the second terminal 100b is a horizontal mode. That is, since the horizontal length of the display is longer than the vertical length, the second terminal 100b is suitable for displaying in the horizontal mode. On the contrary, the first terminal 100a is vertical because the vertical length of the display is longer than the horizontal length. It is suitable to display in mode. Therefore, when the first terminal 100a mirrors the content in the vertical mode to the second terminal 100b, the first terminal 100a can adjust the landscape mode suitable for the second terminal.

또한, 제1 단말기(100a)는 미러링되어 있는 제2 단말기(100b)의 디스플레이 크기를 고려하여, 컨텐츠의 스케일을 조절할 수 있다.In addition, the first terminal 100a may adjust the scale of the content in consideration of the display size of the mirrored second terminal 100b.

한편, 본 도면에서 도시된 리스트 데이터는 복수의 스크랩 컨텐츠를 포함할 수 있으며, 스크랩 날짜를 기초로 생성된 리스트에 썸네일 형식으로 복수의 컨텐츠를 표시할 수 있다. 한편, 리스트 데이터는 스크랩 날짜 외에도 컨텐츠가 생성된 날짜, 컨텐츠가 수정된 날짜, 켄텐츠가 최종 저장된 날짜 등을 기초로 리스트를 생성할 수도 있다.Meanwhile, the list data illustrated in this figure may include a plurality of scrap contents, and a plurality of contents may be displayed in a thumbnail format in a list generated based on the scrap date. Meanwhile, in addition to the scrap date, the list data may also generate a list based on the date the content was created, the date the content was modified, and the date the content was last saved.

도 5에서는 리스트 데이터를 예시하여 컨텐츠 미러링 제어 방법에 대해서 설명하였으나, 본 발명은 이에 한정되지 않고 다른 타입의 컨텐츠(웹 컨텐츠, 어플리케이션 컨텐츠 등)의 경우에도 적용될 수도 있다.Although the content mirroring control method has been described in FIG. 5 by exemplifying list data, the present invention is not limited thereto, and may be applied to other types of content (web content, application content, etc.).

도 6은 본 발명의 일 실시 예에 따른 하위 레벨 리스트의 미러링 방법에 대해 도시하고 있다.6 illustrates a method of mirroring a low-level list according to an embodiment of the present invention.

도 6에 도시된 바와 같이 제1 단말기(100a)에 가로로 네비게이션 하도록 표시된 하위 레벨 리스트(610)는 제2 단말기(100b)에 세로로 네비게이션 할 수 있도록 변환된 하위 레벨 리스트(611)로 표시될 수 있다.As illustrated in FIG. 6, the lower level list 610 displayed to navigate horizontally on the first terminal 100a is displayed as a lower level list 611 converted to vertically navigate on the second terminal 100b. Can.

여기서, 하위 레벨 리스트란 리스트 데이터에서 특정 날짜의 리스트를 선택하는 사용자의 입력이 감지되는 경우 표시되는 리스트를 의미하며, 특정 날짜에 해당하는 컨텐츠를 썸네일 형식으로 표시할 수 있다. Here, the lower-level list means a list that is displayed when an input of a user selecting a list of a specific date from list data is detected, and content corresponding to a specific date can be displayed in a thumbnail format.

도 7 내지 도 9는 본 발명의 일 실시 예에 따른 컨텐츠에 대한 사용자 입력의 미러링 방법을 도시하는 도면이다. 본 발명의 일 실시 예에 따르면, 미러링되는 외부 장치의 디스플레이 정보를 고려한 컨텐츠의 디스플레이 미러링 외에도, 사용자 입력의 미러링 방법도 제공한다. 도 7 내지 도 9를 설명하기에 앞서, 제1 단말기 및 제2 단말기는 미러링 연결이 되어 있으며, 리스트 데이터가 제2 단말기의 디스플레이 정보에 따라 가로 모드에서 세로모드로 변환되어 미러링 되어 있는 상태임을 가정한다.7 to 9 are diagrams illustrating a method of mirroring user input for content according to an embodiment of the present invention. According to an embodiment of the present invention, in addition to display mirroring of contents in consideration of display information of an external device being mirrored, a method of mirroring user input is also provided. 7 to 9, it is assumed that the first terminal and the second terminal are mirrored and the list data is mirrored by being converted from landscape mode to portrait mode according to display information of the second terminal. do.

도 7을 참고하면, 제1 단말기(100a)에 디스플레이된 리스트 데이터(700)을 상하 방향으로 드래그 또는 플릭하는 사용자 입력이 감지되는 경우, 제1 단말기(100a)는 제2 단말기(100b)에 디스플레이된 리스트 데이터(701)을 좌우 방향으로 리스트를 움직이는 입력(일 예로, 리모콘의 프레스&무브 동작(702))으로 변환하여 미러링 할 수 있다. 즉, 제1 단말기(100a)는 세로 모드에서 가로 모드로 미러링된 리스트 데이터에 알맞게 사용자 입력을 조절한 것이다. 구체적으로, 제1 단말기(100a)는 상하 방향으로 드래그 또는 플릭(701)하는 사용자 입력이 수신되면, 외부 장치의 디스플레이 정보를 고려하여 좌우 방향의 프레스&무브 동작(702)에 맵핑시켜 미러링할 수 있다.Referring to FIG. 7, when a user input for dragging or flicking the list data 700 displayed on the first terminal 100a in the vertical direction is detected, the first terminal 100a is displayed on the second terminal 100b The converted list data 701 can be mirrored by converting the list to an input that moves the list in the left and right directions (for example, press & move operation 702 of the remote controller). That is, the first terminal 100a adjusts the user input according to the list data mirrored from the portrait mode to the landscape mode. Specifically, when the user input for dragging or flicking 701 in the vertical direction is received, the first terminal 100a may be mirrored by mapping it to the left-right press&move operation 702 in consideration of display information of the external device. have.

한편, 도 8에서 도시된 바와 같이, 제1 단말기(100a)에 디스플레이된 리스트 데이터(800)의 어느 리스트를 탭하는 사용자 입력이 수신되면, 제1 단말기(100a)는 제2 단말기(100b)에 디스플레이된 리스트 데이터(801)의 그 어느 리스트를 선택하는 입력(일 예로, 리모콘의 프레스 동작(802))으로 변환하여 미러링할 수 있다.Meanwhile, as illustrated in FIG. 8, when a user input tapping a list of list data 800 displayed on the first terminal 100a is received, the first terminal 100a is connected to the second terminal 100b. It can be mirrored by converting any list of the displayed list data 801 into an input (for example, press operation 802 of the remote controller) to select any list.

또한, 도 9에서 도시된 바와 같이, 제1 단말기(100a)에 디스플레이된 리스트 데이터(900)의 하위 레벨 리스트를 좌우 방향으로 드래그 또는 플릭하는 사용자 입력이 수신되면, 제1 단말기(100a)는 제2 단말기(100b)에 디스플레이된 리스트 데이터(901)의 하위 레벨 리스트를 상하 방향으로 움직이는 입력(일 예로, 리모콘의 프레스&무브 동작(902))으로 변환하여 미러링 할 수 있다.In addition, as illustrated in FIG. 9, when a user input for dragging or flicking a lower level list of the list data 900 displayed on the first terminal 100a in the left and right directions is received, the first terminal 100a is 2 The lower level list of the list data 901 displayed on the terminal 100b may be mirrored by converting it to an input moving in the vertical direction (for example, press & move operation 902 of the remote control).

도 10은 리스트 데이터의 확대 축소 동작의 미러링을 설명하기 위한 도면이다.10 is a view for explaining mirroring of an enlargement/reduction operation of list data.

도 10을 참고하면, 제1 단말기(100a)에 디스플레이된 리스트 데이터(1000)의 하위 레벨 리스트를 핀치 인하는 사용자 입력이 수신되면, 제1 단말기(100a)는 제2 단말기(100b)에 디스플레이된 리스트 데이터(1001)의 하위 레벨 리스트를 축소하는 입력(일 예로, 리모콘의 휠 다운 동작(1002))으로 변환하여 미러링 할 수 있다. 위와 같은 동작이 실행되면, 제1 단말기(100a)와 제2 단말기(100b)에 디스플레이되는 하위 레벨 리스트(1010, 1011)는 축소될 수 있다. 이 경우, 하위 레벨 리스트에 포함되어 있는 컨텐츠의 썸네일의 스케일이 축소되면서 더 많은 컨텐츠의 썸네일을 표시할 수 있게 된다.Referring to FIG. 10, when a user input for pinching in a lower level list of list data 1000 displayed on the first terminal 100a is received, the first terminal 100a is displayed on the second terminal 100b. It can be mirrored by converting it to an input (for example, a wheel-down operation 1002 of the remote controller) that reduces the list of lower levels of the list data 1001. When the above operation is executed, the lower level lists 1010 and 1011 displayed on the first terminal 100a and the second terminal 100b may be reduced. In this case, as the scale of the thumbnails of the content included in the lower level list is reduced, more thumbnails of the content can be displayed.

이상에서는 제1 단말기에 디스플레이된 리스트 데이터에 대한 제2 단말기의 디스플레이 미러링 및 사용자 입력 미러링 방법에 대해 설명하였다.In the above, the method for mirroring the display of the second terminal and the user input mirroring for the list data displayed on the first terminal has been described.

한편, 본 발명의 일 실시 예에 따르면, 컨텐츠의 타입에 따라 다양한 미러링 방법이 제공될 수 있다. 이하에서는 도 11 내지 도 19를 참고하여 다양한 컨텐츠의 타입에 따른 미러링 방법의 실시 예에 대해 설명하도록 한다. 도 11 내지 도 19를 설명하기에 앞서, 제1 단말기 및 제2 단말기는 미러링 연결이 되어 있으며, 리스트 데이터가 제2 단말기의 디스플레이 정보에 따라 가로 모드에서 세로 모드로 변환되어 미러링 되어 있는 상태임을 가정한다. 그리고, 리스트 데이터는 하위 레벨 리스트까지 확장되어 컨텐츠를 썸네일 형식으로 표시하고 있다. 여기서 썸네일은 컨텐츠의 내용이 쉽게 파악될 수 있는 미리보기 상태로 표시될 수 있다.Meanwhile, according to an embodiment of the present invention, various mirroring methods may be provided according to types of contents. Hereinafter, an embodiment of a mirroring method according to various types of content will be described with reference to FIGS. 11 to 19. Before describing FIGS. 11 to 19, it is assumed that the first terminal and the second terminal are mirrored and the list data is mirrored by being converted from landscape mode to portrait mode according to display information of the second terminal. do. In addition, the list data is expanded to a lower level list to display the contents in a thumbnail format. Here, the thumbnail may be displayed in a preview state in which the content of the content can be easily grasped.

도 11은 본 발명의 일 실시 예에 따른 텍스트 컨텐츠의 미러링 방법을 도시하는 도면이다.11 is a diagram illustrating a method for mirroring text content according to an embodiment of the present invention.

도 11을 참고하면, 제1 단말기(100a)에 디스플레이된 텍스트 컨텐츠의 썸네일(1100)을 탭하는 사용자 입력(1110)이 수신되면, 제1 단말기(100a)는 제2 단말기(100b)에 디스플레이된 텍스트 컨텐츠의 썸네일(1101)을 선택하는 입력(1111)(일 예로, 리모콘의 프레스 동작(1112))으로 변환하여 미러링 할 수 있다. 위와 같은 동작이 실행되면, 제1 단말기(100a)와 제2 단말기(100b)는 각각의 전체 화면에 텍스쳐 컨텐츠를 디스플레이할 수 있다. 이 경우에도, 각 단말기의 디스플레이 정보에 따라 전체 보기 화면을 다르게 구성할 수 있다. 도 11에 도시된 바와 같이 디스플레이의 크기가 작은 제1 단말기(100a)는 메모장 형식으로 텍스트 컨텐츠의 전체 보기 화면(1120)을 구성할 수 있으며, 반대로, 디스플레이의 크기가 큰 제2 단말기(100b)는 e-book 형식으로 텍스트 컨텐츠의 전체 보기 화면(1121)을 구성할 수 있다.Referring to FIG. 11, when a user input 1110 tapping a thumbnail 1100 of text content displayed on the first terminal 100a is received, the first terminal 100a is displayed on the second terminal 100b. It can be mirrored by converting it to an input 1111 (for example, a press operation 1112 of the remote control) to select the thumbnail 1101 of the text content. When the above operation is executed, the first terminal 100a and the second terminal 100b may display texture content on each entire screen. Even in this case, the entire viewing screen may be configured differently according to display information of each terminal. As illustrated in FIG. 11, the first terminal 100a having a small display size may constitute the entire viewing screen 1120 of text content in a notepad format, and conversely, the second terminal 100b having a large display size. Can configure the entire view screen 1121 of text content in the form of an e-book.

한편, 텍스트 컨텐츠의 전체 보기가 실행되고 있는 동안, 제1 단말기(100a)에 텍스트 컨텐츠를 상하 방향으로 드래그 또는 플릭하는 사용자 입력(1130)이 감지되는 경우, 제1 단말기(100a)는 제2 단말기(100b)에 디스플레이된 텍스트 컨텐츠의 책장을 넘기는 입력(1131)(일 예로, 리모콘의 프레스&무브 동작(1132))으로 변환하여 미러링 할 수 있다.Meanwhile, when the user input 1130 for dragging or flicking the text content in the vertical direction is detected in the first terminal 100a while the entire view of the text content is being executed, the first terminal 100a is the second terminal It can be mirrored by converting it to an input 1131 (for example, a press & move operation 1132 of the remote controller) that turns the bookshelf of the text content displayed on the (100b).

위와 같이 텍스트 컨텐츠의 경우, 디스플레이의 크기가 큰 단말기의 경우 전체 보기 화면을 e-book 형식으로 제공할 수 있으며, 디스플레이의 크기가 작은 단말기의 경우 메모장 형식으로 제공할 수 있다.In the case of text content as described above, the full view screen may be provided in the form of an e-book for a terminal having a large display size, or may be provided in a notepad form for a terminal having a small display size.

도 12 내지 도 15는 본 발명의 일 실시 예에 따른 비디오 컨텐츠의 미러링 방법을 도시하는 도면이다.12 to 15 are diagrams illustrating a method for mirroring video content according to an embodiment of the present invention.

도 12를 참고하면, 제1 단말기(100a)에 디스플레이된 비디오 컨텐츠의 썸네일(1200)을 탭하는 사용자 입력(1210)이 수신되면, 제1 단말기(100a)는 제2 단말기(100b)에 디스플레이된 비디오 컨텐츠의 썸네일(1201)을 선택하는 입력(1211)(일 예로, 리모콘의 프레스 동작(1212))으로 변환하여 미러링 할 수 있다. 위와 같은 동작이 실행되면, 제1 단말기(100a)와 제2 단말기(100b)는 각각의 전체 화면에 비디오 컨텐츠의 재생화면(1230,1231)을 디스플레이할 수 있다.Referring to FIG. 12, when a user input 1210 tapping a thumbnail 1200 of video content displayed on the first terminal 100a is received, the first terminal 100a is displayed on the second terminal 100b. It can be mirrored by converting it to an input 1211 (for example, a press operation 1212 of the remote control) for selecting the thumbnail 1201 of the video content. When the above operation is executed, the first terminal 100a and the second terminal 100b may display the playback screens 1230 and 1231 of video content on each entire screen.

도 13 및 도 14는 비디오 컨텐츠의 재생 위치를 설정하는 동작에 대한 미러링 방법을 설명하기 위한 도면이다. 13 and 14 are views for explaining a mirroring method for an operation of setting a playback position of video content.

도 13을 참고하면, 비디오 컨텐츠의 전체 보기가 실행되고 있는 동안, 제1 단말기(100a)에 비디오 컨텐츠(1300)의 재생을 제어하는 인디케이터를 드래그하는 사용자 입력(1310)이 수신되면, 제1 단말기(100a)는 제2 단말기(100b)에 재생되고 있는 비디오 컨텐츠(1301)의 재생 위치를 변경하는 입력(일 예로, 리모콘의 좌/우 키(1312))으로 변환하여 미러링 할 수 있다.Referring to FIG. 13, while a full view of video content is being executed, when a user input 1310 for dragging an indicator controlling playback of the video content 1300 is received on the first terminal 100a, the first terminal The (100a) may be mirrored by converting it to an input (for example, a left/right key 1312 of the remote controller) for changing the playback position of the video content 1301 being played on the second terminal 100b.

한편, 도 14에 도시된 바와 같이 비디오 컨텐츠의 전체 보기가 실행되고 있는 동안, 제1 단말기(100a)에 시계 방향으로 로테이트하는 멀티 터치 사용자 입력(1410)이 수신되면, 제1 단말기(100a)는 제2 단말기(100b)에 재생되고 있는 비디오 컨텐츠(1401)의 재생 위치를 앞으로 변경하는 입력(일 예로, 리모콘의 우(right) 키(1412))으로 변환하여 미러링 할 수 있다. 반대로, 제1 단말기(100a)에 반시계 방향으로 로테이트하는 멀티 터치 사용자 입력(1420)이 수신되면, 제1 단말기(100a)는 제2 단말기(100b)에 재생되고 있는 비디오 컨텐츠(1401)의 재생 위치를 뒤로 변경하는 입력(일 예로, 리모콘의 좌(left) 키(1412))으로 변환하여 미러링 할 수 있다.Meanwhile, as illustrated in FIG. 14, when the multi-touch user input 1410 is rotated clockwise to the first terminal 100a while the entire view of the video content is being executed, the first terminal 100a The playback position of the video content 1401 being played on the second terminal 100b may be converted into an input (for example, a right key 1412 of the remote controller) to change the mirror and mirrored. Conversely, when the multi-touch user input 1420 rotated counterclockwise to the first terminal 100a is received, the first terminal 100a plays the video content 1401 being played in the second terminal 100b. It can be mirrored by converting it to an input that changes the position back (eg, the left key 1412 of the remote control).

도 15는 비디오 컨텐츠의 부가 정보를 확인하는 동작에 대한 미러링 방법을 도시한 도면이다.15 is a diagram illustrating a mirroring method for an operation of checking additional information of video content.

도 15를 참고하면, 텍스트 컨텐츠의 전체 보기가 실행되고 있는 동안, 제1 단말기(100a)에 비디오 컨텐츠(1500)를 탭하는 사용자 입력(1510)이 수신되는 경우, 제1 단말기(100a)는 제2 단말기(100b)에 디스플레이된 비디오 컨텐츠(1501)의 부가 정보를 표시하는 입력(일 예로, 리모콘의 프레스 동작(1511))으로 변환하여 미러링 할 수 있다. 이 경우에도, 각 단말기의 디스플레이 정보에 따라 부가 정보를 표시하는 방법을 다르게 할 수 있다. 도 15에 도시된 바와 같이, 위와 같은 동작이 실행되면, 디스플레이 크기가 작은 제1 단말기(100a)는 비디오 컨텐츠(1500)의 재생화면에 오버레이(overlay) 형태로 부가 정보(1520)를 디스플레이할 수 있으며, 반대로, 디스플레이 크기가 큰 제2 단말기(100b)는 화면을 분할하여 한쪽에는 비디오 컨텐츠(1502)의 재생화면을 한쪽에는 부가 정보(1521)를 디스플레이할 수 있다.Referring to FIG. 15, when the user input 1510 tapping the video content 1500 is received in the first terminal 100a while the entire view of the text content is being executed, the first terminal 100a 2 It may be mirrored by converting it to an input (for example, a press operation 1511 of the remote controller) that displays additional information of the video content 1501 displayed on the terminal 100b. Also in this case, a method of displaying additional information according to display information of each terminal may be different. As illustrated in FIG. 15, when the above operation is executed, the first terminal 100a having a small display size may display the additional information 1520 in an overlay form on the playback screen of the video content 1500. On the contrary, the second terminal 100b having a large display size may divide a screen to display a playback screen of video content 1502 on one side and additional information 1521 on one side.

도 16 내지 도 19는 본 발명의 일 실시 예에 따른 이미지 컨텐츠의 미러링 방법을 도시하는 도면이다.16 to 19 are diagrams illustrating a method of mirroring image content according to an embodiment of the present invention.

도 16을 참고하면, 제1 단말기(100a)에 디스플레이된 이미지 컨텐츠의 썸네일(1600)을 탭하는 사용자 입력(1610)이 수신되면, 제1 단말기(100a)는 제2 단말기(100b)에 디스플레이된 텍스트 컨텐츠의 썸네일(1601)을 선택하는 입력(1611)(일 예로, 리모콘의 프레스 동작(1612))으로 변환하여 미러링할 수 있다. 위와 같은 동작이 실행되면, 제1 단말기(100a)와 제2 단말기(100b)는 각각의 전체 화면에 이미지 컨텐츠를 디스플레이할 수 있다.Referring to FIG. 16, when a user input 1610 tapping a thumbnail 1600 of image content displayed on the first terminal 100a is received, the first terminal 100a is displayed on the second terminal 100b. It can be mirrored by converting it to an input 1611 (eg, press operation 1612 of the remote control) to select the thumbnail 1601 of the text content. When the above operation is executed, the first terminal 100a and the second terminal 100b may display image content on each entire screen.

도 17은 이미지 컨텐츠의 네비게이션 동작에 대한 미러링 방법을 도시한 도면이다.17 is a diagram illustrating a mirroring method for a navigation operation of image content.

도 17을 참고하면, 이미지 컨텐츠의 전체 보기가 실행되고 있는 동안, 제1 단말기(100a)에 디스플레이된 이미지 컨텐츠(1700)를 드래그 또는 플릭하는 사용자 입력(1710)이 수신되면, 제1 단말기(100a)는 제2 단말기(100b)에 디스플레이되고 있는 이미지 컨텐츠(1701)의 이전 및 다음 이미지로 이동하는 입력(1711)(일 예로, 리모콘의 좌/우 키(1712))으로 변환하여 미러링 할 수 있다.Referring to FIG. 17, while a full view of image content is being executed, when a user input 1710 dragging or flicking the image content 1700 displayed on the first terminal 100a is received, the first terminal 100a ) May be mirrored by converting it to an input 1711 (for example, the left/right keys 1712 of the remote control) that moves to the previous and next images of the image content 1701 displayed on the second terminal 100b. .

도 18은 이미지 컨텐츠의 슬라이드 쇼(Slide show) 동작에 대한 미러링 방법을 도시한 도면이다. 여기서 슬라이드 쇼 동작이란, 기 설정된 시간마다 다음 이미지로 자동 이동하는 동작을 의미한다.18 is a diagram illustrating a mirroring method for a slide show operation of image content. Here, the slide show operation means an operation that automatically moves to the next image every predetermined time.

도 18을 참고하면, 이미지 컨텐츠의 전체 보기가 실행되고 있는 동안, 제1 단말기(100a)에 디스플레이된 이미지 컨텐츠(1800)를 멀티 터치 드래그하는 사용자 입력(1810)이 수신되면, 제1 단말기(100a)는 제 2 단말기(100b)에 디스플레이되고 있는 이미지 컨텐츠의 슬라이드 쇼를 실행시키는 입력(1811)(일 예로, 리모콘의 재생 키(1812))으로 변환하여 미러링 할 수 있다.Referring to FIG. 18, while a full view of image content is being executed, when a user input 1810 for multi-touch dragging the image content 1800 displayed on the first terminal 100a is received, the first terminal 100a ) Can be mirrored by converting it to an input 1811 (for example, a playback key 1812 of the remote control) that executes a slide show of image content displayed on the second terminal 100b.

도 19는 이미지 컨텐츠의 이미지 회전 동작에 대한 미러링 방법을 도시한 도면이다.19 is a diagram illustrating a mirroring method for an image rotation operation of image content.

도 19를 참고하면, 이미지 컨텐츠의 전체 보기가 실행되고 있는 동안, 제1 단말기(100a)에 시계 방향으로 로테이트하는 멀티 터치 사용자 입력(1900)이 수신되면, 제1 단말기(100a)는 제2 단말기(100b)에 디스플레이되고 있는 이미지 컨텐츠(1901)의 이미지를 시계 방향으로 90도 회전하는 입력(일 예로, 리모콘의 시계 방향 제스쳐(1902) 또는 상(up) 키)으로 변환하여 미러링 할 수 있다. 반대로, 제1 단말기에 반시계 방향으로 로테이트하는 멀티 터치 사용자 입력이 수신되면, 디스플레이되고 있는 이미지 컨텐츠(1901)의 이미지를 반시계 방향으로 90도 회전하는 입력(일 예로, 리모콘의 반시계 방향 제스쳐(1902) 또는 하(up) 키)으로 변환하여 미러링 할 수 있다.Referring to FIG. 19, when the multi-touch user input 1900 is rotated clockwise to the first terminal 100a while the entire view of the image content is being executed, the first terminal 100a is the second terminal The image of the image content 1901 displayed on the (100b) can be mirrored by converting it to an input that rotates 90 degrees clockwise (for example, a clockwise gesture 1902 or an up key of the remote controller). Conversely, when a multi-touch user input that rotates counterclockwise to the first terminal is received, an input that rotates the image of the displayed image content 1901 90 degrees counterclockwise (eg, a counterclockwise gesture of the remote controller) (1902) or up (up) key) to mirror.

이상 도 11 내지 도 19를 참고하여 컨텐츠의 타입에 따라 다양한 미러링 방법을 제공하는 예시에 대해 알아보았다. 위에서 설명한 바와 같이 단말기는 사용자 입력이 적용되는 컨텐츠의 타입을 고려하여 사용자 입력에 맵핑되는 미러링 동작을 결정할 수 있다.The examples of providing various mirroring methods according to types of contents have been described with reference to FIGS. 11 to 19. As described above, the terminal may determine the mirroring operation mapped to the user input in consideration of the type of content to which the user input is applied.

도 20은 본 발명의 일 실시 예에 따른 단말기의 제어 방법을 설명하기 위한 흐름도이다.20 is a flowchart illustrating a control method of a terminal according to an embodiment of the present invention.

도 20를 참고하면, 외부 장치와 미러링을 수행할 수 있는 단말기는 디스플레이에 복수의 컨텐츠를 표시할 수 있다(S2010). 여기서, 복수의 컨텐츠란 텍스트 컨텐츠, 비디오 컨텐츠, 이미지 컨텐츠, 오디오 컨텐츠, 웹 컨텐츠, 어플리케이션 컨텐츠 등을 포함할 수 있다.Referring to FIG. 20, a terminal capable of mirroring with an external device may display a plurality of contents on a display (S2010). Here, the plurality of contents may include text content, video content, image content, audio content, web content, application content, and the like.

한편, 단말기는 복수의 컨텐츠의 스크랩 날짜를 기초로 생성된 리스트에 썸네일 형식으로 상기 복수의 컨텐츠를 표시할 수도 있다.Meanwhile, the terminal may display the plurality of contents in a thumbnail format on a list generated based on a scrap date of the plurality of contents.

그리고, 단말기는 미러링 될 외부 장치로부터 디스플레이 정보를 수신할 수 있고(S2020), 상기 외부 장치의 디스플레이 정보를 고려하여, 상기 복수의 컨텐츠의 스케일 및 표시 모드를 조절할 수 있다(S2030). 이 경우, 디스플레이 정보는 디스플레이 크기 및 종횡비를 포함할 수 있으며, 단말기는 디스플레이의 종횡비 및 상기 외부 장치의 종횡비를 비교하여, 컨텐츠의 표시모드를 세로모드 또는 가로모드로 조절할 수 있다. Then, the terminal may receive display information from an external device to be mirrored (S2020), and may adjust the scale and display mode of the plurality of contents in consideration of the display information of the external device (S2030). In this case, the display information may include a display size and an aspect ratio, and the terminal may adjust the display mode of the content to a portrait mode or a landscape mode by comparing the aspect ratio of the display and the aspect ratio of the external device.

그리고, 단말기는 조절된 복수의 컨텐츠가 상기 외부 장치를 통해 디스플레이될 수 있도록 무선 통신부를 제어할 수 있다(S2040).Then, the terminal may control the wireless communication unit so that the adjusted plurality of contents can be displayed through the external device (S2040).

한편, 복수의 컨텐츠의 스크랩 날짜를 기초로 생성된 리스트에 썸네일 형식으로 상기 복수의 컨텐츠를 표시하는 경우, 단말기는 외부 장치의 디스플레이 정보를 고려하여, 상기 리스트의 스케일 및 표시 모드를 조절하여 상기 외부 장치를 통해 디스플레이될 수 있도록 무선 통신부를 제어할 수도 있다.On the other hand, when displaying the plurality of contents in a thumbnail format on a list generated based on a scrap date of a plurality of contents, the terminal adjusts the scale and display mode of the list in consideration of display information of the external device to adjust the external The wireless communication unit may be controlled to be displayed through the device.

이후, 외부 장치가 조절된 복수의 컨텐츠를 디스플레이하고 있는 동안, 사용자 입력이 수신되면, 사용자 입력이 적용되는 컨텐츠의 타입을 고려하여, 사용자 입력에 매핑되는 동작을 결정하고(S2050), 결정된 동작을 상기 외부 장치가 수행하도록 무선 통신부를 제어할 수 있다(S2060).Thereafter, while the external device is displaying the plurality of adjusted contents, when a user input is received, an operation mapped to the user input is determined in consideration of the type of the content to which the user input is applied (S2050), and the determined operation is performed. The wireless communication unit may be controlled to be performed by the external device (S2060).

이 경우, 단말기는 조절된 컨텐츠의 표시모드에 따라 사용자 입력에 매핑되는 동작을 결정하고, 외부 장치가 상기 동작을 수행하도록 외부 장치를 원격 제어할 수 있다.In this case, the terminal may determine an operation mapped to the user input according to the display mode of the adjusted content, and may remotely control the external device so that the external device performs the operation.

여기서, 사용자 입력은 탭(tap), 더블 탭(double tap), 드래그(drag), 플릭(flick), 프레스(press), 멀티 터치(multi touch), 핀치 인(pinch in) 및 핀치 아웃(pinch out) 중 적어도 하나의 터치 제스쳐일 수 있다.Here, the user input is tap, double tap, drag, flick, press, multi touch, pinch in and pinch out out).

도 20에서 설명한 바와 같이, 본 발명의 일 실시 예에 따른 단말기는 미러링 되는 외부 장치의 디스플레이 정보 및 미러링 되는 컨텐츠의 타입에 따라 컨텐츠의 디스플레이 미러링 방법 및 사용자 입력 미러링 방법을 제공할 수 있다.As described in FIG. 20, a terminal according to an embodiment of the present invention may provide a display mirroring method of content and a user input mirroring method according to display information of a mirrored external device and a type of mirrored content.

본 발명은 본 발명의 정신 및 필수적 특징을 벗어나지 않는 범위에서 다른 특정한 형태로 구체화될 수 있음은 당업자에게 자명하다.It will be apparent to those skilled in the art that the present invention may be embodied in other specific forms without departing from the spirit and essential features of the present invention.

전술한 본 발명은, 프로그램이 기록된 매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 매체는, 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 상기 컴퓨터는 단말기의 제어부(180)를 포함할 수도 있다.The above-described present invention can be embodied as computer readable codes on a medium on which a program is recorded. The computer-readable medium includes all kinds of recording devices in which data readable by a computer system is stored. Examples of computer-readable media include ROM, RAM, CD-ROM, magnetic tapes, floppy disks, optical data storage devices, etc., which are also implemented in the form of carrier waves (eg, transmission over the Internet). Also includes. In addition, the computer may include a control unit 180 of the terminal.

따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.Accordingly, the above detailed description should not be construed as limiting in all respects, but should be considered illustrative. The scope of the invention should be determined by rational interpretation of the appended claims, and all changes within the equivalent scope of the invention are included in the scope of the invention.

100 : 이동 단말기 110 : 무선 통신부
130 : 사용자 입력부 151 : 디스플레이부
160 : 메모리 180 : 제어부100: mobile terminal 110: wireless communication unit
130: user input unit 151: display unit
160: memory 180: control unit

Claims (10)

외부 장치와 미러링을 수행하는 단말기에 있어서,
복수의 컨텐츠를 디스플레이하는 디스플레이부;
상기 외부 장치로부터 디스플레이 정보를 수신하는 무선 통신부;
사용자 입력을 수신하기 위한 사용자 입력부; 및
상기 외부 장치의 디스플레이 정보를 기초로 상기 복수의 컨텐츠의 스케일 및 디스플레이 모드를 조절하고, 상기 조절된 복수의 컨텐츠가 상기 외부 장치를 통해 디스플레이될 수 있도록 상기 무선 통신부를 제어하고, 상기 외부 장치가 상기 조절된 복수의 컨텐츠를 디스플레이하고 있는 동안에 상기 사용자 입력부를 통해 사용자 입력이 수신되면, 상기 사용자 입력이 적용되는 컨텐츠의 타입을 기초로 상기 사용자 입력에 매핑되는 동작을 결정하고, 상기 외부 장치가 상기 동작을 수행하도록 상기 무선 통신부를 제어하는 제어부;를 포함하고,
상기 제어부는,
상기 복수의 컨텐츠가 수정된 날짜를 기초로 생성된 리스트에 썸네일 형식으로 상기 복수의 컨텐츠를 디스플레이하도록 상기 디스플레이부를 제어하고,
상기 외부 장치의 디스플레이 정보를 기초로 상기 리스트의 스케일 및 디스플레이 모드를 조절하여 상기 외부 장치를 통해 디스플레이될 수 있도록 무선 통신부를 제어하고,
상기 디스플레이부 상에 디스플레이되는 리스트가 가로 방향 및 세로 방향 중 어느 하나의 방향으로 네비게이션되도록 제어하며,
상기 외부 장치 상에 디스플레이되는 리스트가 상기 가로 방향 및 세로 방향 중 상기 디스플레이부 상에 디스플레이되는 리스트와 다른 방향으로 네비게이션되도록 상기 외부 장치를 원격 제어하는 단말기.In the terminal performing mirroring with an external device,
A display unit that displays a plurality of contents;
A wireless communication unit receiving display information from the external device;
A user input unit for receiving user input; And
Adjust the scale and display mode of the plurality of contents based on the display information of the external device, control the wireless communication unit so that the adjusted plurality of contents can be displayed through the external device, and the external device is the When a user input is received through the user input unit while displaying a plurality of adjusted contents, an operation mapped to the user input is determined based on a type of content to which the user input is applied, and the external device performs the operation. Includes a control unit for controlling the wireless communication unit to perform the;
The control unit,
The display unit is controlled to display the plurality of contents in a thumbnail format on a list generated based on a date when the plurality of contents are modified,
Control the wireless communication unit to be displayed through the external device by adjusting the scale and display mode of the list based on the display information of the external device,
The list displayed on the display unit is controlled to be navigated in either a horizontal direction or a vertical direction,
A terminal for remotely controlling the external device such that the list displayed on the external device is navigated in a direction different from the list displayed on the display unit among the horizontal and vertical directions. 삭제delete 제1항에 있어서,
상기 외부 장치의 디스플레이 정보는 디스플레이 크기 및 종횡비를 포함하고,
상기 제어부는 상기 디스플레이부의 종횡비 및 상기 외부 장치의 종횡비를 비교하여, 상기 복수의 컨텐츠의 디스플레이 모드를 세로 모드 또는 가로 모드로 조절하는 것을 특징으로 하는 단말기.According to claim 1,
The display information of the external device includes a display size and aspect ratio,
The control unit compares the aspect ratio of the display unit and the aspect ratio of the external device, and adjusts the display mode of the plurality of contents to a portrait mode or a landscape mode. 제1항에 있어서,
상기 제어부는 상기 조절된 복수의 컨텐츠의 디스플레이 모드에 따라 상기 사용자 입력에 매핑되는 동작을 결정하고, 상기 외부 장치가 상기 동작을 수행하도록 상기 외부 장치를 원격 제어하는 단말기.According to claim 1,
The control unit determines an operation mapped to the user input according to a display mode of the adjusted plurality of contents, and a terminal that remotely controls the external device so that the external device performs the operation. 제1항에 있어서,
상기 사용자 입력은,
탭(tap), 더블 탭(double tap), 드래그(drag), 플릭(flick), 프레스(press), 멀티 터치(multi touch), 핀치 인(pinch in) 및 핀치 아웃(pinch out) 중 적어도 하나의 터치 제스쳐를 포함하는 것을 특징으로 하는 단말기.According to claim 1,
The user input,
At least one of tap, double tap, drag, flick, press, multi touch, pinch in and pinch out A terminal comprising a touch gesture. 제1항에 있어서,
상기 컨텐츠의 타입은,
텍스트 컨텐츠, 비디오 컨텐츠, 이미지 컨텐츠, 오디오 컨텐츠, 웹 컨텐츠, 어플리케이션 컨텐츠 중 적어도 하나를 포함하는 것을 특징으로 하는 단말기.According to claim 1,
The content type is
A terminal comprising at least one of text content, video content, image content, audio content, web content, and application content. 삭제delete 삭제delete 삭제delete 삭제delete

Images