KR20140001726A - 화면 동기화 가능한 원격 제어 장치 - Google Patents

화면 동기화 가능한 원격 제어 장치 Download PDF

Info

Publication number
KR20140001726A
KR20140001726A KR1020120134670A KR20120134670A KR20140001726A KR 20140001726 A KR20140001726 A KR 20140001726A KR 1020120134670 A KR1020120134670 A KR 1020120134670A KR 20120134670 A KR20120134670 A KR 20120134670A KR 20140001726 A KR20140001726 A KR 20140001726A
Authority
KR
South Korea
Prior art keywords
image data
screen
remote control
multimedia
controller
Prior art date
Application number
KR1020120134670A
Other languages
English (en)
Inventor
김승철
박상택
홍진우
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to PCT/KR2013/005523 priority Critical patent/WO2014003378A1/ko
Priority to US14/408,348 priority patent/US20150172744A1/en
Publication of KR20140001726A publication Critical patent/KR20140001726A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42208—Display device provided on the remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4227—Providing Remote input by a user located remotely from the client device, e.g. at work
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G06F3/1462—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay with means for detecting differences between the image stored in the host and the images displayed on the remote displays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41415—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance involving a public display, viewable by several users in a public space outside their home, e.g. movie theatre, information kiosk
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42208—Display device provided on the remote control
    • H04N21/42209—Display device provided on the remote control for displaying non-command information, e.g. electronic program guide [EPG], e-mail, messages or a second television channel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4221—Dedicated function buttons, e.g. for the control of an EPG, subtitles, aspect ratio, picture-in-picture or teletext
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6156—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
    • H04N21/6175—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network involving transmission via Internet
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1415—Digital output to display device ; Cooperation and interconnection of the display device with other functional units with means for detecting differences between the image stored in the host and the images displayed on the displays
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0613—The adjustment depending on the type of the information to be displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/10—Mixing of images, i.e. displayed pixel being the result of an operation, e.g. adding, on the corresponding input pixels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/20—Details of the management of multiple sources of image data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42224—Touch pad or touch panel provided on the remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/64322—IP

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

화면 동기화 가능한 원격 제어 장치가 개시된다. 이 원격 제어 장치는 멀티미디어 장치와 통신하는 통신부, 상기 멀티미디어 장치를 원격 제어하기 위한 그래픽 사용자 인터페이스가 표시되는 터치스크린, 및 상기 멀티미디어 장치 측의 화면으로 출력되는 다수의 이미지 데이터를 상기 멀티미디어 장치로부터 상기 통신부를 통해 수신하여 상기 터치스크린으로 출력하며, 상기 그래픽 사용자 인터페이스를 통한 입력시 해당되는 원격 제어 데이터를 상기 통신부를 통해 상기 멀티미디어 장치로 전송하는 제어부를 포함한다. 이에 의해 멀티미디어 장치와 원격 제어 장치 간 화면 동기화가 이루어진다.

Description

화면 동기화 가능한 원격 제어 장치{Remote controller capable of frame synchronization}
본 발명은 멀티미디어 장치를 원격 제어하는 원격 제어 장치에 관한 것으로, 특히 멀티미디어 장치에 의해 디스플레이되는 정보를 원격 제어 장치와 공유할 수 있도록 하는 기술에 관한 것이다.
TV와 같은 멀티미디어 장치를 원격에서 제어하는 기술이 잘 알려져 있다. 이 원격 제어를 위해 제공되는 원격 제어 장치는 통상 리모컨으로 불리는데, 숫자와 문자 및 기능키 등을 가진다. 따라서 사용자는 리모컨의 키 조작을 통해 멀티미디어 장치를 원격에서 제어할 수 있다. 그런데 사용자는 리모컨을 이용하여 멀티미디어 장치를 원격에서 제어할 수는 있을지라도 그 조작 결과는 멀티미디어 장치의 출력 화면에서 확인할 수밖에 없다. 또한 사용자가 멀티미디어 장치의 화면이 보이지 않는 위치에서 리모컨을 조작하는 경우에는 더욱 불편함이 발생한다. 또한 단순히 채널 전환이 아닌 메뉴 선택, 설정 등을 하고자 하는 경우에는 반드시 화면을 확인하면서 조작해야 한다.
한편, 리모컨에 관한 기술로, IP 셋톱박스와 음성 송수신을 할 수 있는 리모컨에 관한 발명이 한국등록특허공보 제10-0939914호를 통해 알려져 있다. 이 종래 발명은 IP 셋톱박스와 음성 송수신 리모컨을 이용한 멀티미디어 시스템에 관한 것으로, 기본적으로 IP 셋톱박스와 리모컨 간의 양방향 통신 기술을 이용한 것이다. 구체적으로 이 멀티미디어 시스템은 인터넷망을 이용하여 방송을 시청하는 IPTV, IPTV에 연결되어 인터넷을 통해 영상신호를 수신 및 변환하고 VoIP를 이용하여 음성데이터 전송이 가능한 IP 셋톱박스, IP 셋톱박스에 연결되어 인터넷을 통해 압축 영상을 모니터링하고 전송하는 웹 카메라, 및 IP 셋톱박스를 제어하고 ZigBee, Bluetooth, IEEE 802.15.4 중에서 선택된 어느 하나의 무선 네트워크를 이용하여 IP 셋톱박스와 음성 송수신이 가능한 RF 리모컨을 포함하여 구성된다. 이 같이 종래 발명은 인터넷 TV를 이용하여 저렴한 비용으로 TV 화면을 통한 화상 통화를 가능하게 한다. 그런데 이 같은 종래 발명은 리모컨의 원래 용도인 원격 제어에 초점이 맞춰져 있는 것은 아니다. 따라서 전술한 바와 같은 리모컨 조작과 관련한 사용자의 불편함은 그대로 존재한다.
본 발명은 사용자로 하여금 멀티미디어 장치의 화면을 보지 않고서도 원하는 대로 원격 제어를 할 수 있도록 하는 원격 제어 장치를 제공하는 것을 목적으로 한다.
또한 본 발명은 특정 기능에 대해 멀티미디어 장치의 원격 제어를 용이하게 할 수 있게 하는 원격 제어 장치를 제공하는 것을 목적으로 한다.
전술한 기술적 과제를 달성하기 위한 본 발명의 일 양상에 따른 화면 동기화 가능한 원격 제어 장치는 멀티미디어 장치와 통신하는 통신부, 상기 멀티미디어 장치를 원격 제어하기 위한 다수의 소프트 기능 버튼들이 표시되는 터치 입력 가능한 표시부, 및 사용자 입력에 따라 해당되는 원격 제어 데이터를 상기 통신부를 통해 상기 멀티미디어 장치로 전송하며, 상기 멀티미디어 장치 측의 화면으로 출력되는 다수의 이미지 데이터를 상기 멀티미디어 장치로부터 상기 통신부를 통해 수신하여 상기 표시부로 출력하는 제어부를 포함한다.
상기 원격 제어 장치는 상기 멀티미디어 장치를 원격 제어하기 위한 다수의 물리적인 기능 버튼들을 더 포함한다.
상기 제어부는 사용자 입력에 따라 상기 표시부의 화면을 변경하되 상기 멀티미디어 장치의 출력 화면은 그대로 유지시킨다.
상기 수신된 다수의 이미지 데이터는 단일 이미지 데이터로 이루어지는데, 상기 단일 이미지 데이터는 상기 멀티미디어 장치 측의 화면으로 출력되는 모든 이미지 데이터 중 동영상 이미지 데이터는 제외하여 구성된다.
상기 원격 제어 장치는 상기 단일 이미지 데이터가 저장되는 버퍼 메모리를 더 포함하며, 상기 제어부는 상기 멀티미디어 장치로부터 상기 통신부를 통해 차영상 데이터가 수신되면 상기 수신된 차영상 데이터와 상기 버퍼 메모리에 저장된 단일 이미지 데이터로 새로운 단일 이미지를 생성하여 상기 표시부로 출력한다.
본 발명은 멀티미디어 장치의 표시 화면을 원격 제어 장치에도 동일하게 표시할 수 있다. 이에 따라 사용자는 원격 제어 장치의 표시 화면만을 보고도 멀티미디어 장치를 원격 제어하고 제대로 제어되었는지를 확인할 수 있다.
또한 본 발명은 멀티미디어 장치와 원격 제어 장치 간의 화면을 동기화함에 있어서 동영상은 제외하고 화면 동기화할 수 있다. 이에 따라 두 장치 간 화면 동기화에 소요되는 시간을 줄일 수 있다.
또한 본 발명은 멀티미디어 장치의 화면을 그대로 유지한 채 원격 제어 장치의 화면을 변경할 수 있게 한다. 예를 들어, 확대하거나 축소 또는 스크롤이 가능하며, 화면을 구성하는 일부 요소들을 화면에서 제거하거나 복원할 수 있게 하는 것이다. 이에 따라 사용자로 하여금 화면 내용 파악 및 제어의 편의성을 높일 수 있게 하며, 특히 시청자가 여럿일 때 다른 사람들의 시청을 방해하지 않는 효과를 창출한다.
또한 본 발명은 채널과 음향 등 특정 기능에 대한 제어를 용이하게 한다.
도 1은 본 발명의 일 실시예에 따른 전체 시스템 구성도.
도 2는 도 1에 도시된 원격 제어 장치의 다른 예시도.
도 3은 본 발명의 일 실시예에 따른 원격 제어 장치와의 화면 동기화를 위한 멀티미디어 장치 블록도.
도 4는 본 발명의 일 실시예에 따른 멀티미디어 장치와의 화면 동기화 가능한 원격 제어 장치 블록도.
도 5는 본 발명의 일 실시예에 따른 멀티미디어 장치에서 수행되는 원격 제어 장치와의 화면 동기화 방법 흐름도.
도 6은 본 발명의 다른 실시예에 따른 멀티미디어 장치에서 수행되는 원격 제어 장치와의 화면 동기화 방법 흐름도.
도 7은 본 발명의 일 실시예에 따른 원격 제어 장치에서 수행되는 멀티미디어 장치와의 화면 동기화 방법 흐름도.
도 8은 본 발명의 다른 실시예에 따른 원격 제어 장치에서 수행되는 멀티미디어 장치와의 화면 동기화 방법 흐름도.
전술한, 그리고 추가적인 본 발명의 양상들은 첨부된 도면을 참조하여 설명되는 바람직한 실시예들을 통하여 더욱 명백해질 것이다. 이하에서는 본 발명을 이러한 실시예를 통해 당업자가 용이하게 이해하고 재현할 수 있도록 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 전체 시스템 구성도이다.
도시된 바와 같이, 전체 시스템은 멀티미디어 장치(100)와 원격 제어 장치(200)를 포함한다. 멀티미디어 장치(100)는 이미지 데이터를 처리하는 기능과 디스플레이 기능이 결합한 일체형인 것일 수 있으며, 디스플레이 모듈이 분리된 분리형인 것일 수 있다. 예를 들어, 멀티미디어 장치(100)는 일체형인 TV이거나 분리형인 셋톱박스일 수 있다. 도 1에서는 멀티미디어 장치(100)에 디스플레이 모듈이 함께 구현된 경우를 예시하고 있다. 도시된 바와 같이, 멀티미디어 장치(100)는 화면 표시를 위한 표시부(110)를 포함한다. 표시부(110)에는 동영상이나 정지 영상 등이 표시될 수 있으며, 사용자의 원격 제어 장치(200) 조작에 따라 그래픽 사용자 인터페이스(Graphical user interface, GUI)(111)가 표시될 수 있다. 이 같은 멀티미디어 장치(100)는 원격 제어 장치(200)와의 화면 동기화를 수행한다. 따라서 멀티미디어 장치(100)에 표시되는 이미지는 원격 제어 장치(200)에도 동일하게 표시된다. 다만 동영상에 대해서는 동기화하지 않는다. 따라서 멀티미디어 장치(100)에서 방송 영상이나 동영상 파일 재생시의 비디오 화면은 원격 제어 장치(200)에는 표시되지 않는다.
원격 제어 장치(200)는 사용자로 하여금 멀티미디어 장치(100)를 원격에서 제어할 수 있게 하는 장치로서, 원격 제어 전용으로 제작된 장치이거나 원격 제어 애플리케이션이 설치된 스마트폰이나 태블릿 PC 등이 될 수 있다. 원격 제어 장치(200)는 도 1에 도시된 바와 같이 표시부(210)를 포함한다. 표시부(210)는 터치 입력이 가능한 터치스크린 액정표시장치일 수 있다. 이 표시부(210)에는 멀티미디어 장치(100)를 원격 제어하기 위한 소프트 기능 버튼들(211)이 표시된다. 여기서 소프트 기능 버튼들(211)로는 전원 버튼, 채널 버튼, 음량 버튼, 묵음 버튼, 외부입력 버튼, 메뉴 버튼, EPG 버튼, OK 버튼, 상/하/좌/우 화살표 버튼, 녹화 버튼, 검색 버튼, 이전채널 버튼, 제조사 고유 기능 버튼 등을 예로 들 수 있다. 따라서 사용자는 소프트 기능 버튼(211) 조작을 통해 멀티미디어 장치(100)를 원격 제어할 수 있다. 이러한 원격 제어 장치(200)는 멀티미디어 장치(100)와의 화면 동기화를 위해 필요한 고유 프로세스를 수행한다. 이에 따라 원격 제어 장치(200)의 표시부(210)에는 멀티미디어 장치(100)의 출력 화면과 동일한 화면이 표시되는데, 화면 전체에 표시될 수도 있고 일부 지정된 영역에만 표시될 수도 있다. 그리고 동영상 재생시 사용자 조작에 의해 표시부(110)에 GUI(111)가 표시되는 경우, 도 1에 예시된 바와 같이 원격 제어 장치(200)의 표시부(210)에도 동일하게 GUI(212)가 표시된다. 참고로 GUI(212)에 포함되지 않는 기능 버튼만이 소프트 기능 버튼들(211)로서 표시부(210)에 표시되도록 구현될 수 있다. 이에 사용자는 GUI(212) 혹은 소프트 기능 버튼들(211)을 통해 멀티미디어 장치(100)를 원격 제어할 수 있다.
도 2는 도 1에 도시된 원격 제어 장치의 다른 예시도이다.
도시된 바와 같이, 원격 제어 장치(200)는 표시부(210)와 조작부(220)를 포함한다. 표시부(210)의 화면 구성은 도 1을 참조로 설명한 내용과 유사하거나 동일할 수 있다. 즉, 표시부(210)에는 소프트 기능 버튼(211)들이 아이콘 형식으로 표시되며, GUI(212) 또한 표시된다. 그리고 조작부(220)는 사용자의 조작을 위한 것으로, 다수의 물리적인 기능 버튼들을 포함한다. 조작부(220)에 포함되는 물리적인 기능 버튼들은 표시부(210)에 표시된 소프트 기능 버튼(211)들과 마찬가지로 멀티미디어 장치(100)를 원격에서 제어하는데 이용되는 것이다. 기능 버튼(213)의 예로는 채널 버튼, 볼륨 버튼 등을 예로 들 수 있다. 일반적으로 GUI에 포함되지 않는 기능 버튼들, 예를 들어 채널 제어 버튼이나 음향 제어 버튼들은 소프트 기능 버튼들(211)로 모두 구현할 수 있지만, 원격 제어 장치(200)가 멀티미디어 장치(100)를 제어하기 위한 전용 장치로 제작된 경우에는 도 2와 같이 물리적인 기능 버튼들을 둘 수 있다. 일 실시예에 있어서, 표시부(210)의 소프트 기능 버튼들(211)과 조작부(220)의 물리적인 기능 버튼들은 서로 중복되지 않는다.
도 3은 본 발명의 일 실시예에 따른 원격 제어 장치와의 화면 동기화를 위한 멀티미디어 장치 블록도이다.
도시된 바와 같이, 멀티미디어 장치(100)는 표시부(110)와 통신부(120) 및 제어부(130)를 포함한다. 만일 분리형인 경우, 이미지 표시를 위한 표시부(110)는 포함되지 않는다. 표시부(110)는 이미지를 표시할 수 있는 구성으로서, LCD(Liquid Crystal Display)일 수 있다. 통신부(120)는 원격 제어 장치(200)와의 양방향 통신을 위한 구성이다. 예로써, 통신부(120)는 블루투스나 NFC(Near field Communication) 등의 근거리 무선 통신 방식에 따른 통신 모듈이다. 제어부(130)는 멀티미디어 장치(100) 전반을 제어하기 위한 제어 유닛으로서, 이미지 처리를 위한 프로세서를 포함한다. 제어부(130)는 동영상 콘텐츠, 정지영상 콘텐츠, 그래픽 콘텐츠, 텍스트 등의 멀티미디어 데이터에 대해 렌더링 처리를 수행하고, 렌더링된 이미지 데이터들을 표시부(110)로 출력하여 화면 표시한다. 또한 제어부(130)는 화면 동기화를 위해 위의 렌더링된 이미지 데이터들을 원격 제어 장치(200)로도 전송한다. 이때 제어부(130)는 렌더링된 모든 이미지 데이터들을 원격 제어 장치(200)로 전송할 수도 있으며, 렌더링된 동영상 이미지 데이터는 제외하고 원격 제어 장치(200)로 전송할 수도 있다.
이후 표시부(110)에 표시되는 전체 이미지 중 적어도 일부가 변경될 시, 제어부(130)는 원격 제어 장치(200)로도 관련 정보를 전송하여 지속적으로 화면 동기화를 이룰 수 있도록 한다. 이때 제어부(130)는 변경된 화면 전체에 대한 이미지 데이터를 원격 제어 장치(200)로 전송할 수도 있지만, 충분한 전송 속도와 원격 제어 장치(200)의 이미지 처리 속도가 지원되지 않을 시에는 화면 동기화를 보장할 수 없다. 특히, 지속적인 변화로 인해 데이터 처리량이 많을 수밖에 없는 동영상의 경우에는 더욱 그러하다. 이에 본 발명은 이러한 점을 고려하여 멀티미디어 장치(100)의 표시 화면 변경시 변경된 화면 이미지 전체를 원격 제어 장치(200)로 전송하는 것이 아니라, 변경된 내용만을 원격 제어 장치(200)로 전송함으로써 데이터 전송량 및 처리량을 줄일 수 있는 방안을 제시한다. 이하에서는 두 가지 방안을 제시하며, 두 가지 방안에 따른 멀티미디어 장치(100)의 동작 실시예에 대해 설명하기로 한다.
첫 번째 방안은 차영상을 이용하는 것이다. 차영상 이용을 위해, 멀티미디어 장치(100)는 단일 이미지 데이터를 저장하는 용도로 사용되는 버퍼 메모리(140)를 더 포함한다. 이하 차영상을 이용하는 방식에 대해 구체적으로 설명한다. 제어부(130)는 렌더링된 다수의 이미지 데이터를 혼합하여 단일한 이미지를 생성한다. 이때 제어부(130)는 렌더링된 이미지 데이터들 중에 동영상 이미지 데이터가 있을 경우, 이 동영상 이미지 데이터를 포함하여 단일한 이미지를 생성할 수도 있고 제외하고 생성할 수도 있다. 제어부(130)는 생성된 단일 이미지 데이터를 표시부(110)로 출력하는데, 단일 이미지에 동영상 이미지 데이터가 제외되었을 경우 동영상 이미지 데이터와 합성한 후 표시부(110)로 출력한다. 제어부(130)는 생성된 단일 이미지 데이터를 버퍼 메모리(140)에 저장하며, 화면 동기화를 위해 통신부(120)를 통해 원격 제어 장치(200)로 전송한다. 이에 따라 멀티미디어 장치(100)와 원격 제어 장치(200) 간에 화면 동기화가 이루어진다.
이후, 제어부(130)는 동영상 콘텐츠, 정지영상 콘텐츠, 하나 혹은 다수의 그래픽 콘텐츠, 텍스트 중에서 변경이 발생한 요소를 감지한다. 이때 동영상 콘텐츠는 감지 대상에서 제외될 수 있다. 단일 이미지에 동영상 이미지 데이터가 포함될 경우에는 감지 대상에 포함되며, 포함되지 않을 경우에는 감지 대상에서 제외되는 것이다. 변경이 발생한 요소가 감지되면, 제어부(130)는 렌더링 처리를 수행하고 렌더링된 이미지들을 혼합하여 단일한 이미지를 새로 생성한다. 제어부(130)는 새로 생성된 단일 이미지와 버퍼 메모리(140)에 저장된 단일 이미지를 비교하여 차영상을 구한다. 두 이미지를 비교하여 차영상을 구하는 기술 자체는 잘 알려져 있으므로, 상세한 설명은 생략한다. 차영상 데이터가 구해지면, 제어부(130)는 이를 통신부(120)를 통해 원격 제어 장치(200)로 전송한다. 이에 따라 멀티미디어 장치(100)와 원격 제어 장치(200) 간의 화면 동기가 유지된다. 또한 화면 동기가 지속적으로 유지될 수 있도록, 제어부(250)는 새로 생성된 단일 이미지 데이터를 버퍼 메모리(140)에 덮어쓴다.
두 번째 방안은 이미지를 혼합하는 규칙에 대한 혼합 규칙 정보를 이용하는 것이다. 제어부(130)는 렌더링된 다수의 이미지 데이터를 혼합 규칙 정보에 따라 혼합하며, 혼합된 이미지 데이터를 표시부(110)로 출력한다. 이때 제어부(130)는 렌더링된 이미지 데이터들 중에 동영상 이미지 데이터가 있을 경우, 이 동영상 이미지 데이터를 포함하여 혼합 규칙 정보에 따라 혼합할 수도 있고, 제외하고 혼합할 수도 있다. 후자의 경우, 혼합 규칙 정보에 동영상 이미지 데이터에 대한 규칙은 포함되어 있지 않음은 물론이다. 제어부(130)는 혼합된 이미지 데이터를 표시부(110)로 출력하는데, 혼합된 이미지에 동영상 이미지 데이터가 제외되었을 경우 동영상 이미지 데이터와 합성한 후 표시부(110)로 출력한다. 또한 제어부(130)는 화면 동기화를 위해 렌더링된 이미지 데이터들과 혼합 규칙 정보를 통신부(120)를 통해 원격 제어 장치(200)로 전송하는데, 이때 동영상 이미지 데이터는 제외될 수 있다. 이에 따라 멀티미디어 장치(100)와 원격 제어 장치(200) 간에 화면 동기화가 이루어진다.
이후, 제어부(130)는 동영상 콘텐츠, 정지영상 콘텐츠, 하나 혹은 다수의 그래픽 콘텐츠, 텍스트, 혼합 규칙 정보 중에서 변경이 발생한 요소를 감지한다. 이때 동영상 콘텐츠는 감지 대상에서 제외될 수 있다. 혼합 이미지에 동영상 이미지 데이터가 포함될 경우에는 감지 대상에 포함되며, 포함되지 않을 경우에는 감지 대상에서 제외되는 것이다. 변경이 발생한 요소가 감지되면, 제어부(130)는 변경된 화면 요소에 대한 렌더링 이미지들과 변경된 혼합 규칙 정보를 통신부(120)를 통해 원격 제어 장치(200)로 전송한다. 이에 따라 멀티미디어 장치(100)와 원격 제어 장치(200) 간의 화면 동기가 지속적으로 유지된다.
도 4는 본 발명의 일 실시예에 따른 멀티미디어 장치와의 화면 동기화를 위한 원격 제어 장치 블록도이다.
도시된 바와 같이, 원격 제어 장치(200)는 표시부(210)와 조작부(220)와 통신부(230)와 버퍼 메모리(240) 및 제어부(250)를 포함한다. 표시부(210)는 LCD일 수 있으며, 터치 조작을 위한 터치스크린 LCD으로 구현될 수 있다. 조작부(220)는 사용자로 하여금 원격 제어 장치(200)를 조작할 수 있도록 하는 구성으로서, 상술한 다수의 물리적인 기능 버튼들을 포함한다. 통신부(230)는 멀티미디어 장치(100)와의 양방향 통신을 위한 구성이다. 버퍼 메모리(240)는 멀티미디어 장치(100)로부터 수신된 데이터를 저장하는데 이용된다. 제어부(250)는 원격 제어 장치(200) 전반을 제어하는 제어 유닛으로서, 이미지 처리를 위한 프로세서를 포함한다. 제어부(250)는 멀티미디어 장치(100)로부터 통신부(230)를 통해 멀티미디어 장치(100)의 화면에 표시되는 이미지 데이터들을 수신하며, 수신된 이미지 데이터들을 표시부(210)의 표시 방식에 맞게 처리하여 표시부(210)로 출력한다. 이후 제어부(250)는 멀티미디어 장치(100)로부터 통신부(230)를 통해 변경된 화면 내용에 대한 정보를 수신하며, 수신된 정보를 반영하여 표시부(210) 화면을 재구성한다. 변경된 화면 내용에 대한 정보는 상술한 실시예 1과 실시예 2에 따라 달라지며, 이에 따라 제어부(250)의 표시 화면 변경을 위한 프로세스 또한 달라진다. 이하에서는 이에 대해 구체적으로 설명한다.
실시예 3은 실시예 1에 대응한 원격 제어 장치(200)의 동작 실시예이다. 제어부(250)는 멀티미디어 장치(100)로부터 통신부(230)를 통해 단일 이미지 데이터를 수신한다. 실시예 1에서 설명한 바와 같이, 단일 이미지 데이터는 동영상 이미지 데이터를 포함하여 구성된 것일 수도 있고, 그렇지 않을 수도 있다. 제어부(250)는 수신된 단일 이미지 데이터를 버퍼 메모리(240)에 저장하며, 수신된 단일 이미지 데이터를 표시부(210)의 표시 방식에 맞게 처리하여 표시부(210)로 출력한다. 이후, 제어부(250)는 멀티미디어 장치(100)로부터 통신부(230)를 통해 차영상 데이터를 수신한다. 제어부(250)는 수신된 차영상 데이터와 버퍼 메모리(240)에 저장된 단일 이미지 데이터를 더하여 표시부(210)에 표시할 새로운 단일 이미지를 생성한다. 제어부(250)는 생성된 새로운 단일 이미지를 표시부(210)로 출력한다. 또한 제어부(250)는 새로 생성된 단일 이미지를 버퍼 메모리(240)에 덮어쓴다. 이에 따라 멀티미디어 장치(100)와 원격 제어 장치(200) 간에 화면 동기가 지속적으로 유지된다.
실시예 4는 실시예 2에 대응한 원격 제어 장치(200)의 동작 실시예이다. 제어부(250)는 멀티미디어 장치(100)로부터 통신부(230)를 통해 이미지 데이터들과 혼합 규칙 정보를 수신한다. 실시예 2에서 설명한 바와 같이 멀티미디어 장치(100)에서 전송한 이미지 데이터들 중에는 동영상 이미지 데이터가 포함될 수도 있고, 제외될 수도 있다. 제어부(250)는 수신된 이미지 데이터들을 버퍼 메모리(240)에 저장한다. 또한 제어부(250)는 수신된 이미지 데이터들을 수신된 혼합 규칙 정보에 따라 혼합하여 표시부(210)에 표시할 이미지를 생성하고, 생성된 혼합 이미지 데이터를 표시부(210)로 출력한다. 이후, 제어부(250)는 멀티미디어 장치(100)로부터 통신부(230)를 통해 변경된 적어도 하나의 이미지 데이터와 변경된 혼합 규칙 정보를 수신한다. 제어부(250)는 버퍼 메모리(240)에 저장된 이미지 데이터들과 변경된 이미지 데이터를 가지고 변경된 혼합 규칙 정보에 따라 혼합하여 표시부(210)에 표시할 이미지를 생성하며, 생성된 새로운 혼합 이미지 데이터를 표시부(210)로 출력한다. 또한 제어부(250)는 새로운 혼합 이미지 데이터를 구성하는 이미지 데이터들로 버퍼 메모리(240)를 갱신한다. 이에 따라 멀티미디어 장치(100)와 원격 제어 장치(200) 간에 화면 동기가 지속적으로 유지될 수 있다.
이상에서와 같이, 원격 제어 장치(200)는 멀티미디어 장치(100)와 화면을 동기화할 수 있다. 따라서 사용자는 원격 제어 장치(200)에 표시된 화면만을 보고서도 멀티미디어 장치(100)를 용이하게 원격 조작하고 확인할 수 있다. 나아가 제어부(250)는 사용자 입력에 따라 표시부(210)에 표시된 화면을 변경하되, 멀티미디어 장치(100)의 화면 변경을 위한 제어 정보는 멀티미디어 장치(100)로 전송하지 않는다. 즉, 멀티미디어 장치(100)의 화면은 그대로 유지하는 것이다. 화면 변경의 예로는 화면 확대, 축소, 스크롤 등을 예로 들 수 있으며, 화면을 구성하는 요소들 중 일부 요소들에 대해서 삭제하거나 복원하는 것 등을 예로 들 수 있다. 그리고 화면 확대/축소에 있어서, 화면을 구성하는 요소들에 대하여 차별적인 확대/축소 비율을 적용할 수 있다. 이때 화면을 구성하는 요소라 함은 배경화면, 사용자와의 상호작용을 위한 대화창/버튼/텍스트 입력창, 화살표, 프로그램 수행 결과에 따라 표시되는 그래픽 이미지 등 표시될 최종 이미지로 혼합되는 개별 요소들을 의미한다.
도 5는 본 발명의 일 실시예에 따른 멀티미디어 장치에서 수행되는 원격 제어 장치와의 화면 동기화 방법 흐름도이다.
제어부(130)는 화면에 나타내고자 하는 동영상 콘텐츠, 정지영상 콘텐츠, 그래픽 콘텐츠, 텍스트 등의 멀티미디어 데이터에 대해 렌더링 처리를 수행하고, 렌더링된 이미지 데이터들을 혼합하여 단일 이미지로 생성한다(S110). 이때 동영상 데이터 이미지는 단일 이미지 생성시 제외될 수 있다. 제어부(130)는 생성된 단일 이미지 데이터를 버퍼 메모리에 저장하며(S120), 표시부(110)로 출력한다(S130). 만일 단일 이미지 생성시 동영상 이미지 데이터가 제외된 경우, 제어부(130)는 표시부(110)로 출력 전에 단일 이미지 데이터와 동영상 이미지 데이터를 합성하여 표시부(110)로 출력한다. 또한 제어부(130)는 원격 제어 장치(200)와의 화면 동기화를 위해 단일 이미지 데이터를 통신부(120)를 통해 원격 제어 장치(200)로 전송한다(S140). S120 내지 S140 과정은 병렬적으로 수행될 수도 있으며, 사전에 정해진 순서대로 수행될 수도 있다. 이후, 제어부(130)는 단일 이미지 대상이 되는 요소들 중에서 변경이 발생한 요소를 감지한다(S150). 변경이 발생한 요소가 감지되면, 제어부(130)는 해당 요소에 대해 렌더링 처리를 수행한 후 새로운 단일 이미지를 생성한다(S160). 제어부(130)는 새로 생성된 단일 이미지와 버퍼 메모리(140)에 저장된 단일 이미지를 비교하여 차영상을 획득하기 연산을 수행한다(S170). S170 과정이 완료되면, 제어부(250)는 차영상 데이터를 원격 제어 장치(200)로 전송한다(S180).
도 6은 본 발명의 다른 실시예에 따른 멀티미디어 장치에서 수행되는 원격 제어 장치와의 화면 동기화 방법 흐름도이다.
제어부(130)는 화면에 나타내고자 하는 동영상 콘텐츠, 정지영상 콘텐츠, 그래픽 콘텐츠, 텍스트 등의 멀티미디어 데이터에 대해 렌더링 처리를 수행하고, 렌더링된 이미지 데이터들을 혼합 규칙 정보에 따라 혼합하며(S210), 혼합된 이미지를 표시부(110)로 출력한다(S220). 또한 제어부(130)는 원격 제어 장치(200)와의 화면 동기화를 위해 혼합된 이미지 데이터와 혼합 규칙 정보를 통신부(120)를 통해 원격 제어 장치(200)로 전송한다(S230). S220과 S230 과정은 병렬적으로 수행될 수도 있으며, 사전에 정해진 순서대로 수행될 수도 있다. 이후, 제어부(130)는 동영상 콘텐츠, 정지영상 콘텐츠, 하나 혹은 다수의 그래픽 콘텐츠, 텍스트, 혼합 규칙 정보 중에서 변경이 발생한 요소를 감지한다(S240). 이때 동영상 콘텐츠는 감지 대상에서 제외될 수 있다. 변경이 발생한 요소가 감지되면, 제어부(130)는 변경된 화면 요소에 대한 렌더링 이미지들과 변경된 혼합 규칙 정보를 통신부(120)를 통해 원격 제어 장치(200)로 전송한다(S250).
도 7은 본 발명의 일 실시예에 따른 원격 제어 장치에서 수행되는 멀티미디어 장치와의 화면 동기화 방법 흐름도이다.
제어부(250)는 통신부(230)를 통해 단일 이미지 데이터를 수신한다(S310). 제어부(250)는 수신된 단일 이미지 데이터를 표시부(210)로 출력하며(S320), 버퍼 메모리(240)에 저장한다(S330). S320과 S330 과정은 병렬적으로 수행될 수도 있으며, 사전에 정해진 순서대로 수행될 수도 있다. 이후, 제어부(250)는 통신부(230)를 통해 차영상 데이터를 수신한다(S340). 제어부(250)는 수신된 차영상 데이터와 버퍼 메모리(240)에 저장된 단일 이미지 데이터를 더하여 새로운 단일 이미지를 생성하며(S350), 생성된 새로운 단일 이미지를 표시부(210)로 출력한다(S360).
도 8은 본 발명의 다른 실시예에 따른 원격 제어 장치에서 수행되는 멀티미디어 장치와의 화면 동기화 방법 흐름도이다.
제어부(250)는 통신부(230)를 통해 다수의 이미지 데이터들과 혼합 규칙 정보를 수신한다(S410). 수신되는 다수의 이미지 데이터 중에 동영상 이미지 데이터는 제외될 수 있다. 제어부(250)는 수신된 다수의 이미지 데이터들을 버퍼 메모리(240)에 저장한다(S420). 또한 제어부(250)는 수신된 다수의 이미지 데이터들을 혼합 규칙 정보에 따라 혼합한다(S430). S420과 S430 과정은 병렬적으로 수행될 수도 있으며, 사전에 정해진 순서대로 수행될 수도 있다. 혼합이 완료되면, 제어부(250)는 혼합된 이미지 데이터를 표시부(210)로 출력한다(S440). 이후, 제어부(250)는 통신부(230)를 통해 변경된 이미지 데이터들과 변경된 혼합 규칙 정보를 수신한다(S450). 제어부(250)는 변경된 이미지 데이터와 버퍼 메모리(240)에 저장된 이미지 데이터들을 가지고 변경된 혼합 규칙 정보에 따라 혼합한다(S460). 혼합이 완료되면, 제어부(250)는 새로 혼합된 이미지 데이터를 표시부(210)로 출력한다(S470).
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
100 : 멀티미디어 장치 110 : 표시부
120 : 통신부 130 : 제어부
140 : 버퍼 메모리
200 : 원격 제어 장치 210 : 표시부
220 : 조작부 230 : 통신부
240 : 버퍼 메모리 250 : 제어부

Claims (11)

  1. 멀티미디어 장치와 통신하는 통신부;
    상기 멀티미디어 장치를 원격 제어하기 위한 다수의 소프트 기능 버튼들이 표시되는 터치 입력 가능한 표시부; 및
    사용자 입력에 따라 해당되는 원격 제어 데이터를 상기 통신부를 통해 상기 멀티미디어 장치로 전송하며, 상기 멀티미디어 장치 측의 화면으로 출력되는 다수의 이미지 데이터를 상기 멀티미디어 장치로부터 상기 통신부를 통해 수신하여 상기 표시부로 출력하는 제어부;
    를 포함하는 것을 특징으로 하는 화면 동기화 가능한 원격 제어 장치.
  2. 제1항에 있어서,
    상기 멀티미디어 장치를 원격 제어하기 위한 다수의 물리적인 기능 버튼들;
    을 더 포함하는 것을 특징으로 하는 화면 동기화 가능한 원격 제어 장치.
  3. 제2항에 있어서,
    상기 다수의 소프트 기능 버튼들과 상기 다수의 물리적인 기능 버튼들은 서로 중복되지 않는 것을 특징으로 하는 화면 동기화 가능한 원격 제어 장치.
  4. 제1항에 있어서,
    상기 제어부는 사용자 입력에 따라 상기 표시부의 화면을 변경하되, 상기 멀티미디어 장치의 출력 화면은 그대로 유지시키는 것을 특징으로 하는 화면 동기화 가능한 원격 제어 장치.
  5. 제4항에 있어서,
    상기 화면 변경에는 화면 확대, 축소, 스크롤, 화면을 구성하는 일부 요소들의 제외, 복원 중 적어도 하나가 포함되는 것을 특징으로 하는 화면 동기화 가능한 원격 제어 장치.
  6. 제1항 내지 제5항 중 어느 한 항에 있어서,
    상기 수신된 다수의 이미지 데이터는 단일 이미지 데이터로 이루어진 것임을 특징으로 하는 화면 동기화 가능한 원격 제어 장치.
  7. 제6항에 있어서,
    상기 단일 이미지 데이터는 상기 멀티미디어 장치 측의 화면으로 출력되는 모든 이미지 데이터 중 동영상 이미지 데이터는 제외하여 구성된 것임을 특징으로 하는 화면 동기화 가능한 원격 제어 장치.
  8. 제7항에 있어서,
    상기 단일 이미지 데이터가 저장되는 버퍼 메모리;를 더 포함하며,
    상기 제어부는 상기 멀티미디어 장치로부터 상기 통신부를 통해 차영상 데이터가 수신되면 상기 수신된 차영상 데이터와 상기 버퍼 메모리에 저장된 단일 이미지 데이터로 새로운 단일 이미지를 생성하여 상기 표시부로 출력하는 것을 특징으로 하는 화면 동기화 가능한 원격 제어 장치.
  9. 제8항에 있어서,
    상기 제어부는 상기 새로 생성된 단일 이미지 데이터를 상기 버퍼 메모리에 덮어쓰는 것을 특징으로 하는 화면 동기화 가능한 원격 제어 장치.
  10. 제1항 내지 제5항 중 어느 한 항에 있어서,
    상기 제어부는 상기 멀티미디어 장치로부터 상기 통신부를 통해 혼합 규칙 정보를 수신하고, 상기 수신된 혼합 규칙 정보에 따라 상기 수신된 다수의 이미지 데이터를 혼합하여 상기 표시부로 출력하는 것을 특징으로 하는 화면 동기화 가능한 원격 제어 장치.
  11. 제10항에 있어서,
    상기 수신된 다수의 이미지 데이터가 저장되는 버퍼 메모리;를 더 포함하며,
    상기 제어부는 상기 멀티미디어 장치로부터 상기 통신부를 통해 변경된 이미지 데이터와 변경된 혼합 규칙 정보를 수신하면, 상기 버퍼 메모리에 저장된 다수의 이미지 데이터와 상기 변경된 이미지 데이터를 가지고 상기 변경된 혼합 규칙 정보에 따라 혼합하여 상기 표시부로 출력하는 것을 특징으로 하는 화면 동기화 가능한 원격 제어 장치.
KR1020120134670A 2012-06-27 2012-11-26 화면 동기화 가능한 원격 제어 장치 KR20140001726A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/KR2013/005523 WO2014003378A1 (ko) 2012-06-27 2013-06-24 화면 동기화 가능한 원격 제어 장치
US14/408,348 US20150172744A1 (en) 2012-06-27 2013-06-24 Remote control device capable of synchronizing screens

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020120069292 2012-06-27
KR20120069292 2012-06-27

Publications (1)

Publication Number Publication Date
KR20140001726A true KR20140001726A (ko) 2014-01-07

Family

ID=50139198

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020120134669A KR101700616B1 (ko) 2012-06-27 2012-11-26 화면 동기화를 위한 멀티미디어 장치와 원격 제어 장치 및 그 방법
KR1020120134670A KR20140001726A (ko) 2012-06-27 2012-11-26 화면 동기화 가능한 원격 제어 장치

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020120134669A KR101700616B1 (ko) 2012-06-27 2012-11-26 화면 동기화를 위한 멀티미디어 장치와 원격 제어 장치 및 그 방법

Country Status (4)

Country Link
US (2) US20150189357A1 (ko)
EP (1) EP2869587A4 (ko)
KR (2) KR101700616B1 (ko)
WO (1) WO2014003377A1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170007341A (ko) * 2014-07-01 2017-01-18 엘지전자 주식회사 외부 장치를 이용한 방송 데이터 처리 방법 및 장치
KR20200023743A (ko) * 2018-08-27 2020-03-06 주식회사 쿠오핀 디스플레이 미러링을 위한 멀티미디어 콘텐츠의 실시간 무선 송수신 시스템 및 방법
CN114399896A (zh) * 2020-09-25 2022-04-26 汉桑（南京）科技有限公司 一种根据遥控设备图像配置遥控功能数据的方法和***

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10372408B2 (en) * 2013-09-10 2019-08-06 Bose Corporation Remote control devices and related devices and systems
CN105303800A (zh) * 2015-10-24 2016-02-03 泰州市天平化工有限公司 一种智能家居遥控器
KR20180024927A (ko) * 2016-08-31 2018-03-08 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 제어 방법
KR102598082B1 (ko) * 2016-10-28 2023-11-03 삼성전자주식회사 영상 표시 장치, 모바일 장치 및 그 동작방법
KR102034866B1 (ko) * 2018-03-09 2019-10-21 주식회사 코이노 화면 공유 시 순위기반 전송방식을 사용하는 원격 단말 및 그 전송방법

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5271097A (en) * 1988-06-30 1993-12-14 International Business Machines Corporation Method and system for controlling the presentation of nested overlays utilizing image area mixing attributes
JP2611607B2 (ja) * 1992-06-29 1997-05-21 日本ビクター株式会社 シーンチェンジ検出装置
JPH09261648A (ja) * 1996-03-21 1997-10-03 Fujitsu Ltd シーンチェンジ検出装置
JPH10234014A (ja) * 1997-02-20 1998-09-02 Matsushita Electric Ind Co Ltd 画像復号化方法、画像復号化装置、画像多重化方法、画像多重化装置、及び記録媒体
DE69925161T2 (de) * 1999-01-04 2006-02-16 Thomson Licensing S.A., Boulogne Tv-fernbedienungsteuerungssystem mit bild-ausserhalb-bild-anzeige
JP4501209B2 (ja) * 2000-03-08 2010-07-14 ソニー株式会社 情報処理装置、情報処理方法およびリモコンのコマンダ
JP3551887B2 (ja) * 2000-04-03 2004-08-11 日本電気株式会社 動画像再生方法および装置
JP4560897B2 (ja) * 2000-06-02 2010-10-13 ソニー株式会社 通信装置、通信方法及び媒体
US20020108127A1 (en) * 2001-02-07 2002-08-08 Yon Lew Low bandwidth transmission
JP4139253B2 (ja) * 2003-03-26 2008-08-27 富士通株式会社 ストリーミング配信方法
TWI221745B (en) * 2003-07-04 2004-10-01 Benq Corp Display apparatus with a function of retaining an image and method of retaining an image
US7992180B2 (en) * 2003-09-12 2011-08-02 Panasonic Corporation Image displaying apparatus and method
US20050108751A1 (en) * 2003-11-17 2005-05-19 Sony Corporation TV remote control with display
JP2007134947A (ja) * 2005-11-10 2007-05-31 Matsushita Electric Ind Co Ltd 番組情報表示選択装置
JP4662895B2 (ja) * 2006-08-07 2011-03-30 シャープ株式会社 放送受信記録システム
JP2008166982A (ja) 2006-12-27 2008-07-17 Toshiba Corp Ｄｖｄプレーヤ、及びその表示制御方法
US7944451B2 (en) * 2007-07-31 2011-05-17 Hewlett-Packard Development Company, L.P. Providing pixels from an update buffer
US8875212B2 (en) * 2008-04-15 2014-10-28 Shlomo Selim Rakib Systems and methods for remote control of interactive video
US8320461B2 (en) * 2008-02-20 2012-11-27 Gil Hoon Chang Remote resource access interface apparatus
KR100939914B1 (ko) 2008-02-28 2010-02-03 석민규 Ｉｐ셋톱박스와 음성 송수신 리모콘을 이용한 멀티미디어 시스템
JP2010151868A (ja) * 2008-12-24 2010-07-08 Brother Ind Ltd 表示制御装置、表示制御方法、及び表示制御プログラム
JP5695819B2 (ja) * 2009-03-30 2015-04-08 日立マクセル株式会社 テレビ操作方法
US8525844B2 (en) * 2009-06-23 2013-09-03 Intel Corporation Display update for a wireless display device
WO2011019155A2 (en) * 2009-08-14 2011-02-17 Lg Electronics Inc. Remote control device and remote control method using the same
KR101608990B1 (ko) * 2009-09-07 2016-04-04 엘지전자 주식회사 전자 장치의 원격 제어 장치 및 그것을 이용한 원격 제어 방법
US20120079541A1 (en) * 2010-09-25 2012-03-29 Yang Pan One-Actuation Control of Synchronization of a Television System Terminal and a Mobile Device Display
US20120081299A1 (en) * 2010-10-04 2012-04-05 Verizon Patent And Licensing Inc. Method and apparatus for providing remote control via a touchable display
US8958018B2 (en) * 2010-12-22 2015-02-17 Google Technology Holdings LLC Remote control device and method for controlling operation of a media display system
US8650600B2 (en) * 2011-06-20 2014-02-11 Enseo, Inc. Set top/back box, system and method for providing a remote control device
CN102355606B (zh) * 2011-09-27 2016-02-17 青岛海信电器股份有限公司 遥控智能电视机的方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170007341A (ko) * 2014-07-01 2017-01-18 엘지전자 주식회사 외부 장치를 이용한 방송 데이터 처리 방법 및 장치
US10070172B2 (en) 2014-07-01 2018-09-04 Lg Electronics Inc. Method and apparatus for processing broadcast data by using external device
KR20200023743A (ko) * 2018-08-27 2020-03-06 주식회사 쿠오핀 디스플레이 미러링을 위한 멀티미디어 콘텐츠의 실시간 무선 송수신 시스템 및 방법
CN114399896A (zh) * 2020-09-25 2022-04-26 汉桑（南京）科技有限公司 一种根据遥控设备图像配置遥控功能数据的方法和***
CN114399896B (zh) * 2020-09-25 2023-04-07 汉桑(南京)科技股份有限公司 一种根据遥控设备图像配置遥控功能数据的方法和***

Also Published As

Publication number Publication date
US20150189357A1 (en) 2015-07-02
KR101700616B1 (ko) 2017-01-31
EP2869587A1 (en) 2015-05-06
US20150172744A1 (en) 2015-06-18
EP2869587A4 (en) 2015-12-23
KR20140001725A (ko) 2014-01-07
WO2014003377A1 (ko) 2014-01-03

Similar Documents

Publication Publication Date Title
US9762842B2 (en) Image display method and apparatus
KR20140001726A (ko) 화면 동기화 가능한 원격 제어 장치
EP3190786B1 (en) Image display apparatus
KR102403338B1 (ko) 이동 단말기
US10474322B2 (en) Image display apparatus
US11449297B2 (en) Image display apparatus
US10631039B2 (en) Image display device
KR20130081181A (ko) 서비스 처리 장치 및 서비스 처리 방법
JP7131383B2 (ja) 情報処理装置、テレビジョン受像機、情報処理システムおよび情報処理プログラム
US10142576B2 (en) Control device, sound switching method of control device, and program
KR20120065689A (ko) 영상처리장치 및 그 ｕｉ 제공 방법
WO2014003378A1 (ko) 화면 동기화 가능한 원격 제어 장치
WO2014119011A1 (ja) 情報処理装置、遠隔操作支援方法およびプログラム
KR102444150B1 (ko) 영상표시장치
CN113689810A (zh) 图像显示设备及其方法
US10555028B2 (en) Image providing device
KR102281839B1 (ko) 영상제공장치
KR102265904B1 (ko) 멀티미디어 디바이스 및 이의 제어 방법
KR20140137771A (ko) 방송수신장치, 및 그 동작방법
US11899854B2 (en) Image display device and method of operating the same
US20230247261A1 (en) Image display apparatus
KR20230116663A (ko) 영상표시장치
KR101079594B1 (ko) 근거리 통신이 가능한 디지털 ｔｖ 및 이를 포함하는디지털 ｔｖ 시스템
KR20170053085A (ko) 다른 장치로부터 전달된 레이어가 출력부에 출력되게 할지 여부를 선택할 수 있는 레이어 공유 시스템
JP2015195516A (ja) セットトップボックス

Legal Events

Date Code Title Description
A201 Request for examination