KR101416083B1 - A system and method of relative position detecting between the main screen and the second screen - Google Patents

A system and method of relative position detecting between the main screen and the second screen Download PDF

Info

Publication number
KR101416083B1
KR101416083B1 KR1020120137526A KR20120137526A KR101416083B1 KR 101416083 B1 KR101416083 B1 KR 101416083B1 KR 1020120137526 A KR1020120137526 A KR 1020120137526A KR 20120137526 A KR20120137526 A KR 20120137526A KR 101416083 B1 KR101416083 B1 KR 101416083B1
Authority
KR
South Korea
Prior art keywords
screen device
content
marker
screen
relative position
Prior art date
Application number
KR1020120137526A
Other languages
Korean (ko)
Other versions
KR20140072296A (en
Inventor
최준균
안상홍
박상민
양진홍
박효진
오현택
장봉진
유인식
Original Assignee
주식회사 유비온
한국과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 유비온, 한국과학기술원 filed Critical 주식회사 유비온
Priority to KR1020120137526A priority Critical patent/KR101416083B1/en
Publication of KR20140072296A publication Critical patent/KR20140072296A/en
Application granted granted Critical
Publication of KR101416083B1 publication Critical patent/KR101416083B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/418—External card to be used in combination with the client device, e.g. for conditional access
    • H04N21/4182—External card to be used in combination with the client device, e.g. for conditional access for identification purposes, e.g. storing user identification data, preferences, personal settings or data
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/22—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory

Landscapes

  • Engineering & Computer Science (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명의 실시예는 메인 스크린과 제2 스크린 간의 상대적인 위치를 감지하는 시스템과 그 방법에 관한 것이다. 제2 스크린 장치의 상대 위치 감지 시스템에 있어서, 제2 스크린 장치는 제1 스크린 장치의 존재 여부를 식별하는 스크린 인식부; 제1 스크린 장치가 디스플레이하는 일반 콘텐트 상의 마커를 인식하는 콘텐트 인식부; 마커의 정보를 기반으로 부가 콘텐트를 콘텐트 서버로 요청하는 콘텐트 요청부; 및 콘텐트 서버로부터 요청한 부가 콘텐트를 수신하여 디스플레이하는 콘텐트 표시부를 포함하는 것을 특징으로 하는 상대 위치 감지 시스템이 제공될 수 있다.Embodiments of the present invention relate to a system and method for sensing a relative position between a main screen and a second screen. In the relative position sensing system of the second screen device, the second screen device may include a screen recognizer that identifies the presence or absence of the first screen device; A content recognition unit for recognizing a marker on a general content displayed by the first screen device; A content request unit for requesting a content server for additional content based on information of a marker; And a content display unit for receiving and displaying the additional content requested from the content server.

Description

메인 스크린과 제2 스크린 간의 상대 위치 감지 시스템 및 그 방법{A SYSTEM AND METHOD OF RELATIVE POSITION DETECTING BETWEEN THE MAIN SCREEN AND THE SECOND SCREEN}FIELD OF THE INVENTION [0001] The present invention relates to a system and method for detecting a relative position between a main screen and a second screen,

본 발명의 실시예는 메인 스크린과 제2 스크린 간의 상대적인 위치를 감지하는 시스템과 그 방법에 관한 것이다.Embodiments of the present invention relate to a system and method for sensing a relative position between a main screen and a second screen.

최근 들어 스마트 폰, 태블릿 PC 등의 보급에 따라 사용자가 콘텐트를 소비할 때에 세컨드(Second) 스크린 환경이 활성화되고 있다.Recently, with the spread of smart phones and tablet PCs, the second screen environment is activated when the user consumes the content.

예컨대, TV를 보면서 스마트 폰이나 태블릿으로 관련된 내용을 SNS를 통해 공유하는 것, 그리고 해당 TV를 시청하면서 궁금한 점이나, 관련된 내용을 검색하는 것, 또는 관련 제작사 또는 방송 서비스에 접근해 해당 콘텐트의 내용을 찾아보는 등, 두 가지의 스크린 장치를 한꺼번에 사용하는 환경이 활성화되고 있다.For example, while watching TV, sharing related contents through a SNS through a smart phone or a tablet, searching for a question or related content while viewing the TV, or accessing a related publishing company or a broadcast service, The environment in which two screen devices are used at once is being activated.

만약, 사용자가 TV를 통해서 시청중인 콘텐트 또는 사용중인 콘텐트에 대한 부가 정보를 제2 스크린에서 이용하기 위해서는 사용자가 직접 해당 콘텐트의 부가 정보를 검색하기 위해 검색어를 입력하고, 링크를 일일이 확인하면서 해당 콘텐트의 위치에 접근해야 하기 때문에 실시간으로 중요한 부분을 놓치는 등의 불편함이 발생하기도 한다.In order to use the additional information about the content or the content being viewed through the TV on the second screen, the user inputs a search word to search for the additional information of the corresponding content, It is necessary to approach the position of the real time, such as missing an important part may be inconvenient.

더불어, 사용자의 주의가 분산되기 때문에 시청 또는 사용중인 콘텐트에 집중하기 위해서는 스스로 주의를 환기시켜야 한다.In addition, because users are distracted, they need to be careful to focus on the content they are watching or using.

따라서, 본 발명의 실시예를 통해 사용자의 불편함을 해소하기 위한 시스템과 방법을 제공한다.Accordingly, the present invention provides a system and method for solving the inconvenience of users through the embodiments of the present invention.

본 발명의 실시예는 상기에 기재한 사용자의 불편함을 해소하기 위한 것으로, 각 스크린이 서로의 상대적인 위치를 감지하는 구조를 가지는 시스템과 방법을 제시하고, 세컨드 스크린의 콘텐트 동기화 기능을 제시하고자 한다.Embodiments of the present invention are directed to a system and method for solving the above-mentioned inconvenience of a user and having a structure in which each screen senses a relative position of each other, and a content synchronization function of a secondary screen is proposed .

이에, 단말 장치 간의 질의를 통해 서비스 정보를 획득하고, 획득한 정보를 기반으로 세컨드 스크린에 적합한 서비스를 서버 측에 요청해 알아내도록 한다.Accordingly, the service information is obtained through a query between the terminal devices, and a service suitable for the second screen is requested on the basis of the obtained information to request the server.

또한, 본 발명의 실시예를 통해 프라이머리(Primary) 스크린과 세컨드 스크린이 밀접하게 연계된 새로운 콘텐트를 제공하는 서비스의 창출이 가능하도록 한다.In addition, through the embodiment of the present invention, it is possible to create a service for providing new content in which the primary screen and the secondary screen are closely linked.

제2 스크린 장치의 상대 위치 감지 시스템에 있어서, 제2 스크린 장치는 제1 스크린 장치의 존재 여부를 식별하는 스크린 인식부; 제1 스크린 장치가 디스플레이하는 일반 콘텐트 상의 마커를 인식하는 콘텐트 인식부; 마커의 정보를 기반으로 부가 콘텐트를 콘텐트 서버로 요청하는 콘텐트 요청부; 및 콘텐트 서버로부터 요청한 부가 콘텐트를 수신하여 디스플레이하는 콘텐트 표시부를 포함하는 것을 특징으로 하는 상대 위치 감지 시스템이 제공될 수 있다.In the relative position sensing system of the second screen device, the second screen device may include a screen recognizer that identifies the presence or absence of the first screen device; A content recognition unit for recognizing a marker on a general content displayed by the first screen device; A content request unit for requesting a content server for additional content based on information of a marker; And a content display unit for receiving and displaying the additional content requested from the content server.

일측에 있어서, 제1 스크린 장치는 제2 스크린 장치가 상대 위치를 측정하는 대상으로 마커를 하나 이상 포함하며, 마커는 제1 스크린 장치의 화면 범위와 위치를 나타내기 위한 표식으로서 제1 스크린 장치 디스플레이의 각 모서리나 꼭지점에 표시될 수 있다.In one aspect, the first screen device includes one or more markers as objects for which the second screen device measures relative positions, and the markers are markers for indicating the screen range and position of the first screen device, And may be displayed at each corner or vertex.

또 다른 측면에 있어서, 스크린 인식부는 제2 스크린 장치의 후면 카메라를 이용하여 제1 스크린의 존재 여부를 식별할 수 있다.In yet another aspect, the screen recognizer can identify the presence or absence of the first screen using the rear camera of the second screen device.

또 다른 측면에 있어서, 콘텐트 인식부는 제2 스크린 장치의 후면 카메라를 이용해 제1 스크린 장치의 일반 콘텐트를 촬영하고, 촬영을 통해 마커를 인식하여 제1 스크린 장치와 제2 스크린 장치 간의 상대적인 위치를 계산할 수 있다.In another aspect of the present invention, the content recognition unit captures the general content of the first screen device by using the rear screen camera of the second screen device, recognizes the marker by shooting, and calculates the relative position between the first screen device and the second screen device .

또 다른 측면에 있어서, 콘텐트 요청부는 마커의 정보를 기반으로 제2 스크린 장치가 촬영하는 영역을 식별하고, 촬영 영역에 대한 부가 콘텐트를 요청하며, 콘텐트 표시부는 제2 스크린 장치의 적합한 위치를 고려하여 부가 콘텐트를 표시할 수 있다.In another aspect, the content requesting unit identifies an area captured by the second screen device based on the information of the marker, requests additional content for the capturing area, and the content display unit considers the appropriate position of the second screen device Additional content can be displayed.

제2 스크린 장치의 상대 위치 감지 방법에 있어서, 제1 스크린 장치의 존재 여부를 식별하는 단계; 제1 스크린 장치가 디스플레이하는 일반 콘텐트 상의 마커를 인식하는 단계; 마커의 정보를 기반으로 부가 콘텐트를 콘텐트 서버로 요청하는 단계; 및 콘텐트 서버로부터 요청한 부가 콘텐트를 수신하여 디스플레이하는 단계를 포함하는 것을 특징으로 하는 상대 위치 감지 방법이 제공될 수 있다.A method of detecting a relative position of a second screen device, the method comprising: identifying whether a first screen device is present; Recognizing a marker on the general content displayed by the first screen device; Requesting additional content from a content server based on information of a marker; And receiving and displaying the supplementary content requested from the content server.

마커와 일반 콘텐트를 디스플레이하는 제1 스크린 장치; 일반 콘텐트에 마커를 삽입하는 콘텐트 서버; 및 제1 스크린 장치를 촬영하면서 마커의 위치를 식별하는 제2 스크린 장치를 포함하고, 제2 스크린 장치는 마커의 위치를 식별하면 콘텐트 서버로부터 부가 콘텐트를 수신하여 디스플레이하는 것을 특징으로 하는 상대 위치 감지 시스템이 제공될 수 있다.A first screen device for displaying the marker and the general content; A content server for inserting a marker into the general content; And a second screen device for identifying the position of the marker while photographing the first screen device, wherein the second screen device receives and displays the additional content from the content server when the position of the marker is identified, System can be provided.

일측에 있어서, 콘텐트 서버는 일반 콘텐트에 대한 부가 콘텐트의 정보를 포함하는 마커를 제1 스크린 장치의 모서리나 꼭지점에 삽입하는 마커 삽입부; 일반 콘텐트의 종류에 따라 부가 콘텐트의 정보를 저장하는 부가 콘텐트 저장부; 및 제2 스크린 장치로부터 부가 콘텐트에 대한 수신 요청에 응답하여 부가 콘텐트를 전송하는 부가 요청 처리부를 포함할 수 있다.In one aspect, the content server includes a marker inserting unit for inserting a marker including information of additional content to general content into an edge or a vertex of the first screen device; A supplementary content storage unit for storing supplementary content information according to a type of the general content; And a supplementary request processing unit for transmitting the supplemental content in response to the reception request for the supplementary content from the second screen apparatus.

또 다른 측면에 있어서, 제2 스크린 장치는 제1 스크린 장치의 존재 여부를 식별하는 스크린 인식부; 제1 스크린 장치가 디스플레이하는 콘텐트 상의 마커를 인식하는 콘텐트 인식부; 마커의 정보를 기반으로 부가 콘텐트를 콘텐트 서버로 요청하는 콘텐트 요청부; 및 콘텐트 서버로부터 요청한 부가 콘텐트를 수신하여 디스플레이하는 콘텐트 표시부를 포함할 수 있다.In another aspect, the second screen device comprises: a screen recognizer that identifies whether the first screen device is present; A content recognition unit for recognizing a marker on the content displayed by the first screen device; A content request unit for requesting a content server for additional content based on information of a marker; And a content display unit for receiving and displaying the additional content requested from the content server.

디스플레이 각 모서리나 꼭지점마다 해당 위치를 나타내는 마커를 표시하는 제1 스크린 장치; 및 제1 스크린 장치를 촬영하면서 마커의 위치를 식별하는 제2 스크린 장치를 포함하고, 제2 스크린 장치는 상기 촬영된 영상 내의 마커의 위치를 토대로 제1 스크린 장치와의 상대적인 위치를 계산하는 것을 특징으로 하는 상대 위치 감지 시스템이 제공될 수 있다.A first screen device for displaying a marker indicating a corresponding position for each corner or vertex of the display; And a second screen device for identifying the position of the marker while photographing the first screen device, and the second screen device calculates a position relative to the first screen device based on the position of the marker in the captured image A relative position sensing system may be provided.

본 발명의 실시예를 통해 각 스크린이 서로의 상대적인 위치를 감지하는 구조를 가지는 시스템과 방법을 제시하고, 세컨드 스크린의 콘텐트 동기화 기능을 제시할 수 있다.A system and method having a structure in which each screen senses the relative position of each other through the embodiment of the present invention is presented and a content synchronization function of the second screen can be presented.

이에, 단말 장치 간의 질의를 통해 서비스 정보를 획득하고, 획득한 정보를 기반으로 세컨드 스크린에 적합한 서비스를 서버 측에 요청해 알아낼 수 있다.Accordingly, it is possible to acquire the service information through inquiry between the terminal apparatuses, and to request the service suitable for the second screen based on the acquired information, and to inquire of the server side.

또한, 본 발명의 실시예를 통해 프라이머리(Primary) 스크린과 세컨드 스크린이 밀접하게 연계된 새로운 콘텐트를 제공하는 서비스의 창출이 가능해진다.In addition, through the embodiment of the present invention, it becomes possible to create a service for providing new content in which the primary screen and the secondary screen are closely linked.

도 1은 본 발명의 일실시예에 있어서, 상대 위치 감지 시스템을 실시하기 위한 환경을 도시한 것이다.
도 2는 본 발명의 일실시예에 있어서, 제1 스크린 장치와 제2 스크린 장치의 관계를 설명하기 위한 도면이다.
도 3은 본 발명의 일실시예에 있어서, 상대 위치 감지 시스템을 통해 나타날 수 있는 콘텐트의 실시예를 설명하기 위한 도면이다.
도 4는 본 발명의 일실시예에 있어서, 상대 위치 감지 시스템 중 제2 스크린 장치의 구성을 설명하기 위한 블록도이다.
도 5는 본 발명의 일실시예에 있어서, 상대 위치 감지 시스템 중 콘텐트 서버의 구성을 설명하기 위한 블록도이다.
도 6은 본 발명의 일실시예에 있어서, 상대 위치 감지 방법을 설명하기 위한 흐름도이다.1 illustrates an environment for implementing a relative position sensing system in an embodiment of the present invention.
2 is a diagram for explaining a relationship between a first screen device and a second screen device in an embodiment of the present invention.
FIG. 3 is a diagram for explaining an embodiment of content that can be displayed through a relative position sensing system, according to an embodiment of the present invention.
4 is a block diagram illustrating a configuration of a second screen device among the relative position sensing systems according to an embodiment of the present invention.
5 is a block diagram illustrating a configuration of a content server among the relative position detection systems according to an embodiment of the present invention.
6 is a flowchart illustrating a relative position sensing method according to an embodiment of the present invention.

이하, 제1 스크린 장치와 제2 스크린 장치 간의 상대 위치 감지 시스템과 그 방법에 대해서 첨부된 도면을 참조하여 자세히 설명한다.Hereinafter, a system for detecting a relative position between a first screen device and a second screen device and a method thereof will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일실시예에 있어서, 상대 위치 감지 시스템의 시스템 구조를 설명하기 위한 도면이다. 메인 스크린, 프라이머리(Primary) 스크린 장치인 제1 스크린 장치(120)와 세컨드 스크린 장치인 제2 스크린 장치(130), 그리고 상대 위치 감지 동작을 위해 필요한 데이터를 제1 스크린 장치(120)와 제2 스크린 장치(130) 사이에서 제공하는 콘텐트 서버(110)로 구성될 수 있다.FIG. 1 is a diagram for explaining a system structure of a relative position sensing system according to an embodiment of the present invention. Referring to FIG. A main screen, a first screen device 120 as a primary screen device, a second screen device 130 as a second screen device, and data necessary for a relative position sensing operation to the first screen device 120 And a content server 110 provided between the two screen apparatuses 130.

제1 스크린 장치(110)는 TV나 빔 프로젝터 등과 같은 대형 스크린 장치로, 제2 스크린 장치의 디스플레이보다 큰 디스플레이를 가질 수 있으며, 사용자에게 다양한 콘텐트를 제공하는 장치에 대한 것이다. 예컨대, TV 채널에서 드라마, 다큐멘터리 등의 프로그램이나 영화, 만화 등의 콘텐트를 대형 디스플레이로 제공할 수 있다.The first screen device 110 may be a large screen device such as a TV or a beam projector, and may have a larger display than the display of the second screen device, and is for a device that provides a variety of content to the user. For example, contents such as drama and documentary programs, movies, and cartoons can be provided on a large-sized display on a TV channel.

제2 스크린 장치(120)는 휴대폰, PDA, 태블릿 PC 등 휴대가 용이하며, 제1 스크린 장치(110)보다 비교적 작은 디스플레이와 제1 스크린 장치(110)를 촬영하기 위한 카메라를 구비하고 있는 장치가 이에 해당할 수 있는데, 실시예에 있어서, 제1 스크린 장치(110)에서 제공하는 콘텐트와 관련된 검색을 실시하는 등 보조적인 역할을 수행하는 장치가 될 수 있다.The second screen device 120 is a portable device such as a mobile phone, a PDA, a tablet PC, etc., and has a relatively smaller display than the first screen device 110 and a camera for photographing the first screen device 110 In an embodiment of the present invention, the first screen device 110 may be a device performing an auxiliary function such as performing a search related to the content provided by the first screen device 110.

실시예에 있어서, 본 발명의 실시예는 제1 스크린 장치(110)와 제2 스크린 장치(120)가 상대적인 위치를 식별하여 제2 스크린 장치에서 제공되는 콘텐트를 제1 스크린 장치와 동기화되는 구성을 제공한다.In an embodiment, the embodiment of the present invention may be configured such that the first screen device 110 and the second screen device 120 identify a relative position and the content provided in the second screen device is synchronized with the first screen device to provide.

이를 위해서, 콘텐트 서버(130)는 제1 스크린 장치(110)로 마커를 삽입할 수 있으며, 제1 스크린 장치(110)는 일반 콘텐트를 노출할 때 마커를 삽입하여 디스플레이할 수 있다. 실시예에 있어서, 콘텐트 서버(130)에서 제공하는 마커는 제1 스크린 장치(110)의 디스플레이 크기, 범위, 디스플레이 내에서의 위치 정보를 나타내기 위한 표식으로, 콘텐트 서버(130)는 마커에 일반 콘텐트의 부가적인 정보를 포함하여 제1 스크린 장치(110) 디스플레이 내의 각 모서리나 꼭지점에 삽입할 수 있다.For this purpose, the content server 130 may insert a marker into the first screen device 110, and the first screen device 110 may insert and display a marker when the general content is exposed. In the embodiment, the marker provided by the content server 130 is indicative of the display size, the range, and the positional information within the display of the first screen device 110, and the content server 130 displays May be inserted at each corner or vertex in the display of the first screen device 110, including additional information of the content.

또한, 제2 스크린 장치(120)는 제1 스크린 장치(110)에서 마커를 포함한 일반 콘텐트를 디스플레이에 노출할 때에 구비되어 있는 카메라를 이용하여 제1 스크린 장치(110)를 촬영하며, 위치마다 표시되어 있는 마커를 식별하여 제1 스크린 장치(110)와 제2 스크린 장치(120) 간의 상대적인 위치 관계를 계산할 수 있다. 이에, 계산한 위치 관계에 대해서 제1 스크린 장치(110)로 전송할 수 있으며, 제1 스크린 장치(110)의 일반 콘텐트와 동기화를 위하여 콘텐트 서버(130)로 해당 위치에 대한 부가적인 콘텐트를 요청할 수 있다.The second screen device 120 photographs the first screen device 110 using a camera provided when the general content including the markers is exposed on the display in the first screen device 110, So that the relative positional relationship between the first screen device 110 and the second screen device 120 can be calculated. Accordingly, it is possible to transmit the calculated positional relationship to the first screen device 110. In order to synchronize with the general content of the first screen device 110, the content server 130 may request additional content for the corresponding position have.

콘텐트 서버(130)는 제1 스크린 장치(110)에서 노출하는 일반 콘텐트의 종류에 따라 부가 정보를 저장하고 있으며, 제2 스크린 장치(120)로부터 부가 정보, 부가 콘텐트를 요청하면 이에 응답하여 제2 스크린 장치(120)로 해당 마커 위치에 대한 부가 콘텐트를 전송할 수 있다.The content server 130 stores additional information according to the type of general content exposed by the first screen device 110. When the second screen device 120 requests additional information and additional content, The screen device 120 may transmit additional content for the marker position.

이와 같이, 제1 스크린 장치(110)와 제2 스크린 장치(120)가 상호 간의 위치를 식별함으로써 각 스크린 장치에서 노출되는 콘텐트가 동기화되어 나타날 수 있으며, 이에 시스템 사용자의 주의를 분산시키지 않고 새로운 콘텐트를 이용할 수 있도록 한다. 여기서, 제1 스크린 장치(110)와 제2 스크린 장치(120), 그리고 콘텐트 서버(130)는 유무선 네트워크 통신을 통해 콘텐트, 위치 정보 등의 데이터를 송수신할 수 있다.In this way, by identifying the positions of the first screen device 110 and the second screen device 120, the contents exposed in each screen device can appear synchronously, and thus, without distracting the system user, . Here, the first screen device 110, the second screen device 120, and the content server 130 can transmit and receive data such as content and location information through wired / wireless network communication.

도 2는 본 발명의 일실시예에 있어서, 제1 스크린 장치와 제2 스크린 장치의 관계를 설명하기 위한 도면이다. 도시된 바와 같이, 제1 스크린 장치(210)는 콘텐트 서버로부터 수신하여 삽입한 마커(211)를 일반 콘텐트를 노출하는 디스플레이(212)에 포함할 수 있다. 실시예에 있어서, 마커(211)는 제2 스크린 장치(220)와의 위치 관계를 측정하기 위한 것으로 도시된 바와 같이 디스플레이(212)의 모서리와 꼭지점 곳곳에 적어도 하나 이상 포함하여 제2 스크린 장치(220)의 이동에 따라 지속적으로 그 위치를 바로잡는 역할을 수행할 수 있다.2 is a diagram for explaining a relationship between a first screen device and a second screen device in an embodiment of the present invention. As shown in the figure, the first screen device 210 may include the marker 211 received from the content server and inserted into the display 212 for exposing the general content. In an embodiment, the marker 211 includes at least one corner or corner of the display 212, as shown for measuring the positional relationship with the second screen device 220, so that the second screen device 220 And can continuously perform the function of correcting the position according to the movement.

또한, 제2 스크린 장치(220)는 후면에 카메라(221)와 카메라(221)를 통해 제1 스크린 장치(210)를 통해 노출하고 있는 콘텐트를 표시하는 디스플레이(222)를 함께 구비하고 있다. 후면 카메라(221)가 디스플레이(212)의 일반 콘텐트를 촬영할 때 마커(211)를 함께 포착할 수 있고, 실시예에 있어서 각 마커(211)는 제2 스크린 장치(220) 내지 후면 카메라(221)에 의해 감지될 수 있는 것이며 디스플레이(212)에 노출되는 일반 콘텐트의 부분으로 나타날 수 있다. 또는, 제2 스크린 장치(220)가 하나 이상 노출되어 있는 마커(211)의 위치를 식별하여 거리와 위치를 계산하고 이를 통해 촬영하고 있는 콘텐트를 추측해낼 수 있다.The second screen device 220 includes a display 222 for displaying the content exposed through the first screen device 210 through the camera 221 and the camera 221 on the rear side. The rear camera 221 may capture the markers 211 together when capturing the normal content of the display 212 and each marker 211 in the embodiment may be captured by the second screen device 220 or the rear camera 221, And may appear as part of the plain content that is exposed to the display 212. Alternatively, the second screen device 220 can identify the location of one or more exposed markers 211 to calculate the distance and position, and infer the content being photographed through it.

제2 스크린 장치(220)의 디스플레이에 나타나는 콘텐트는 마커(211)의 위치 정보에 기반한 것으로, 같은 일반 콘텐트 내에서도 제2 스크린 장치(220)의 이동에 따라 사용자의 시야에서 스크린 위치를 조정하게 함으로써 새로운 콘텐트 종류를 창출할 수 있다.The content displayed on the display of the second screen device 220 is based on the position information of the marker 211 and allows the screen position to be adjusted in the user's view according to the movement of the second screen device 220 even in the same general content, You can create content types.

도 3은 본 발명의 일실시예에 있어서, 상대 위치 감지 시스템을 활용한 실시예로서, 제1 스크린 장치(310)에 나타난 일반 콘텐트를 이용하여 제2 스크린 장치(320)에 부분적인 증강 현실의 콘텐트를 표시하는 실시예를 설명하기 위한 도면이다.FIG. 3 is a diagram illustrating an embodiment of a relative position sensing system according to an exemplary embodiment of the present invention. Referring to FIG. 3, the second screen device 320 may include a general augmented reality Fig. 8 is a diagram for explaining an embodiment for displaying content. Fig.

실시예에 있어서, 사용자는 디스플레이(312)에서 도면과 같이 자막이 없는 일반 콘텐트를 시청하고 있으며, 제2 스크린 장치(320)를 이동시키면서 후면 카메라(321)를 통해 일반 콘텐트의 부분적인 영상을 촬영하여 디스플레이(322)에 노출 시키고 있다.In an embodiment, the user is watching the normal content without subtitles as shown in the display 312, and the partial image of the normal content is photographed through the rear camera 321 while moving the second screen device 320 And exposed to the display 322.

후면 카메라(321)는 일반 콘텐트에 포함되어 있어 감지하는 마커(311)를 함께 촬영할 수 있는데, 촬영하고 있는 영역에 대한 마커(311)를 감지하면 제1 스크린 장치(310)와 제2 스크린 장치(320) 간의 상대 위치를 측정하고 이를 제1 스크린 장치(310)로 전송할 수 있고, 콘텐트 서버로 전송하여 마커(311)에 대응하는 부가 콘텐트를 요청할 수 있다.The rear camera 321 is included in the general content and can photograph the marker 311 to be sensed. When the marker 311 for the area being photographed is sensed, the first and second screen devices 310 and 310 320, and transmits it to the first screen device 310, and may request the additional content corresponding to the marker 311 by transmitting it to the content server.

도 3의 실시예에 있어서, 제2 스크린 장치(320)가 수신하는 부가 콘텐트는 증강 현실을 구현하기 위한 콘텐트가 되며, 실시예에 있어서 콘텐트 서버는 마커(311)의 위치에 대한 부가 콘텐트 정보를 소지할 수 있다.3, the additional content received by the second screen device 320 is content for implementing an augmented reality, and in the embodiment, the content server stores additional content information about the position of the marker 311 You can have it.

부분적 증강 현실을 표현하기 위한 실시예에 있어서, 디스플레이(322)에서는 촬영 영역에 어울리는 자막을 노출할 수 있으며, 제1 스크린 장치 디스플레이(312)의 영상 내 등장 인물을 비추면 등장 인물에 대한 정보를 일반 콘텐트와 함께 노출하거나 등장 인물이 소지하고 있는 물건의 상품 정보, 광고를 디스플레이할 수 있다. 증강 현실을 구현할 때, 제2 스크린 장치의 디스플레이(322) 상에 적합한 위치를 포착하여 증강 현실의 콘텐트를 표시할 수 있다.In an embodiment for expressing a partial augmented reality, the display 322 may expose subtitles suitable for the shooting region, and when the first screen device display 312 illuminates a character in the image, information about the character It is possible to display the product information and the advertisement of the object exposed by the general contents or possessed by the character. When implementing an augmented reality, it is possible to capture the appropriate position on the display 322 of the second screen device and display the content of the augmented reality.

도 4는 본 발명의 일실시예에 있어서, 도 1에 도시한 제2 스크린 장치(120)의 구성을 설명하기 위한 블록도이다. 도시된 제2 스크린 장치(400)는 스크린 인식부(410), 콘텐트 인식부(420), 콘텐트 요청부(430), 그리고 콘텐트 표시부(440)를 포함하여 구성될 수 있다.FIG. 4 is a block diagram for explaining a configuration of the second screen device 120 shown in FIG. 1, according to an embodiment of the present invention. The illustrated second screen device 400 may include a screen recognition unit 410, a content recognition unit 420, a content request unit 430, and a content display unit 440.

스크린 인식부(410)는 물리적인 제1 스크린의 존재 여부를 인식하기 위한 것으로, 실시예에 있어서 후면에 구비하고 있는 카메라를 통해 제1 스크린 장치의 존재를 확인하거나 또는, 제1 스크린 장치에 일반 콘텐트와 함께 삽입되는 마커의 존재를 식별함으로써 제1 스크린 장치의 존재를 확인하는 등의 방법이 적용될 수 있다.The screen recognition unit 410 recognizes the presence or absence of a physical first screen. In the embodiment, the screen recognition unit 410 confirms the presence of the first screen device through a camera provided on the rear surface, A method of identifying the presence of the first screen device by identifying the presence of a marker inserted with the content, and the like can be applied.

콘텐트 인식부(420)는 제2 스크린 장치의 후면 카메라를 통해 촬영하는 일반 콘텐트를 인식하기 위한 것이다. 자세하게는 일반 콘텐트 상에 표시되는 마커를 식별하는 것이며, 마커는 일반 콘텐트에 포함되는 표시자의 역할을 하고, 제1 스크린 장치의 디스플레이의 가장자리, 예컨대 모서리나 꼭지점 부분에 위치할 수 있다.The content recognizing unit 420 is for recognizing general contents to be photographed through a rear camera of the second screen device. In detail, the marker identifies a marker displayed on the general content, and the marker serves as an indicator included in the general content, and may be located at an edge of the display of the first screen device, e.g., an edge or an apex portion.

실시예에 있어서, 마커는 제2 스크린 장치의 후면 카메라를 통해 촬영되거나 인지될 수 있는 점이나 다른 종류의 표시자가 될 수 있고, 마커는 존재하는 위치마다 색깔을 다르게 하거나 숫자를 다르게 표현하는 등의 방법을 통해서 각 위치에 대한 정보를 포함하여, 제2 스크린 장치에서 그 위치를 식별할 수 있는 표식을 가질 수 있다. 따라서, 촬영된 영상 내의 마커의 위치를 토대로, 제1 스크린 장치와 제2 스크린 장치 간의 상대 위치를 계산할 수 있다. 실시예에 있어서, 제2 스크린 장치에서 계산된 위치 정보는 제1 스크린 장치로 전달되어 상호 간에 이를 감지할 수 있도록 할 수 있다.In an embodiment, the marker may be photographed or recognized through a rear camera of the second screen device or may be a different kind of marker, and the marker may be colored differently for each location in which it is present, Including the information about each position through the method of the second screen device. Therefore, the relative position between the first screen device and the second screen device can be calculated based on the position of the marker in the photographed image. In an embodiment, the position information calculated in the second screen device is transmitted to the first screen device so that they can detect each other.

콘텐트 요청부(430)에서는 콘텐트 인식부(420)에서 식별한 일반 콘텐트와 마커를 기반으로 하는 위치 정보를 식별하여 해당 위치에 대한 부가 정보를 포함하는 부가 콘텐트의 수신을 콘텐트 서버로 요청할 수 있다. 실시예에 있어서, 각 마커는 위치 정보뿐만 아니라 해당 위치에 대한 부가 정보를 식별할 수 있는 표식을 포함할 수 있다. 여기서, 콘텐트 요청부(430)가 수신하고자 하는 부가 콘텐트는 상기에 설명한 바와 같이, 일반 콘텐트에 노출되어 있는 인물에 대한 정보, 상품에 대한 정보 등을 포함한 콘텐트가 이에 해당할 수 있다.The content requesting unit 430 may identify location information based on the general content and the marker identified by the content recognizing unit 420 and may request the content server to receive the additional content including the additional information for the corresponding location. In the embodiment, each marker may include not only positional information but also a marker capable of identifying additional information about the position. Here, as described above, the additional content to be received by the content request unit 430 may include content including information on a person who is exposed to general content, information on a product, and the like.

또한, 콘텐트 표시부(440)는 부가 콘텐트를 서버로부터 수신하면, 디스플레이에 수신한 부가 콘텐트를 표시할 수 있다. 실시예에 있어서, 부가 콘텐트를 노출하기에 적당한 위치를 고려하여 선정할 수 있는데, 예컨대 도 3에 도시된 부분적 증강 현실을 구현하고자 할 때엔 일반 콘텐트의 노출을 최대한 방해하지 않는 하단에 문구를 추가하여 표시할 수 있다.In addition, the content display unit 440 can display the additional content received on the display when receiving the additional content from the server. For example, when implementing the partial augmented reality shown in FIG. 3, a phrase may be added to the bottom of the main content that does not disturb the exposure of the general content as much as possible Can be displayed.

본 발명의 일실시예에 있어서, 도 5에 도시된 콘텐트 서버(500)는 제1 스크린 장치와 제2 스크린 장치를 동기화하는데 필요한 마커들과 부가 콘텐트를 제공하기 위한 것으로, 마커 삽입부(510), 부가 콘텐트 저장부(520), 그리고 부가 요청 처리부(530)를 포함하여 구성될 수 있다.5, the content server 500 shown in FIG. 5 is provided for providing markers and additional content necessary for synchronizing the first screen device and the second screen device, and includes a marker insertion unit 510, A supplementary content storage unit 520, and a supplementary request processing unit 530.

마커 삽입부(510)는 일반 콘텐트에 부가 정보를 포함하는 마커를 삽입하는 역할을 수행하며, 일반 콘텐트는 제1 스크린 장치를 통해 사용자에게 디스플레이되는 콘텐트에 해당한다. 이에, 콘텐트 서버(500)는 제1 스크린 장치로 일반 콘텐트를 제공하는 주체가 될 수 있다.The marker insertion unit 510 inserts a marker including additional information into the general content, and the general content corresponds to the content displayed to the user through the first screen device. Accordingly, the content server 500 may be a subject providing the general content to the first screen device.

실시예에 있어서, 콘텐트 서버(500)는 부가 콘텐트 저장부(520)를 포함하는데, 부가 콘텐트 저장부(520)는 마커에 포함되는 위치 정보와 부가 정보를 콘텐트 별로 저장하고 있는 디스크 형태로 또는 저장 함수 형태로 나타날 수 있다.In an embodiment, the content server 500 includes an additional content storage unit 520, which stores the location information and the additional information included in the marker in the form of a disk, It can be shown as a function form.

한편, 부가 요청 처리부(530)는 제2 스크린 장치로부터 부가 콘텐트 요청을 수신하면, 부가 콘텐트 저장부(520)의 부가 콘텐트를 해당 마커 정보에 기반하여 구성, 전송할 수 있고, 따라서 요청된 부가 정보에 대해서 응답하는 기능을 수행한다.On the other hand, when the additional request processing unit 530 receives the additional content request from the second screen device, it can construct and transmit the additional content of the additional content storage unit 520 based on the corresponding marker information, And the like.

도 6은 본 발명의 일실시예에 있어서, 상대 위치 감지 방법을 실시하기 위한 흐름도를 도시한 것으로, 도 1을 통해 설명한 제2 스크린 장치(120)에서 실시될 수 있는 위치 감지 방법이며, 도 4에 도시된 제2 스크린 장치(400)의 구성을 통해서 각 단계가 실시될 수 있다.FIG. 6 is a flowchart illustrating a method for detecting a relative position according to an embodiment of the present invention. FIG. 6 is a position sensing method that can be implemented in the second screen device 120 described with reference to FIG. 1, The respective steps can be performed through the configuration of the second screen device 400 shown in FIG.

단계(610)에서 제2 스크린 장치(400)는 제1 스크린 장치의 존재를 식별할 수 있다. 실시예에 있어서, 제1 스크린 장치는 TV, 컴퓨터의 모니터, 빔 프로젝터 등의 대형 화면을 구비하고 있는 장치를 의미하고, 제1 스크린 장치를 식별하는데 제2 스크린 장치의 후면 카메라를 이용할 수 있다.In step 610, the second screen device 400 may identify the presence of the first screen device. In the embodiment, the first screen device means a device having a large screen such as a TV, a computer monitor, a beam projector, etc., and the rear screen camera of the second screen device can be used to identify the first screen device.

단계(620)에서 제2 스크린 장치(400)는 제1 스크린 장치에 노출되는 일반 콘텐트 상에 존재하는 마커를 인식할 수 있다. 마커는 콘텐트 서버로부터 일반 콘텐트와 함께 수신되어 노출되는 것으로, 실제 일반 콘텐트가 재생될 때에 제2 스크린 장치에서 인지할 수 있는 형태로 나타난다.In step 620, the second screen device 400 may recognize markers present on the generic content exposed to the first screen device. The marker is received and exposed with the normal content from the content server and appears in a form recognizable by the second screen device when the actual general content is reproduced.

여기서, 마커를 인식함으로써, 제1 스크린과 제2 스크린 간의 상대적인 위치 관계를 계산할 수 있는데, 계산된 위치 관계를 통해서 후면 카메라로 촬영하고 있는 일반 콘텐트의 범위와 노출되고 있는 화면을 추측할 수 있으며, 또는 제2 스크린 장치(400)에서 노출되는 콘텐트를 장치(400)가 식별해낼 수 있다.Here, by recognizing the marker, it is possible to calculate the relative positional relationship between the first screen and the second screen. Through the calculated positional relationship, it is possible to estimate the range of the general content shot by the rear camera and the exposed screen, Or the device 400 may identify the content that is exposed in the second screen device 400.

단계(630)에서 제2 스크린 장치(400)는 촬영 중인 일반 콘텐트의 부가 정보를 포함하는 부가 콘텐트를 노출하기 위해 콘텐트 서버에 수신을 요청할 수 있다. 여기서, 제2 스크린 장치(430)가 수신하고자 하는 부가 콘텐트는 마커를 통해 추측한 위치 관계 정보를 기반으로 실제 제2 스크린 장치(400)가 촬영 중인 일반 콘텐트에 노출되어 있는 인물에 대한 정보, 상품에 대한 정보 등을 포함한 콘텐트가 이에 해당할 수 있다.In step 630, the second screen device 400 may request the content server to receive the additional content including the additional information of the general content being shot. Here, the additional content desired to be received by the second screen device 430 may include information about a person who is actually exposed to the general content being shot by the second screen device 400 based on the positional relationship information estimated through the marker, And the like may be included in the content.

또한, 단계(640)에서 제2 스크린 장치(400)는 단계(630)를 통해 수신 요청한 부가 콘텐트를 서버로부터 수신한 이후에 제2 스크린 장치(400)의 디스플레이에 표현할 수 있다. 실시예에 있어서, 제2 스크린 장치(400)는 디스플레이 내에 적합한 위치를 고려하여 부가 콘텐트를 표시하여 사용자의 시야를 최대한 방해하지 않는 방법으로 부가 콘텐트를 배치할 수 있다.In addition, in step 640, the second screen device 400 may display the additional content requested to be received through the step 630 on the display of the second screen device 400 after receiving the additional content from the server. In an embodiment, the second screen device 400 may display the additional content in consideration of the proper location in the display, thereby placing additional content in a manner that does not disturb the user's view as much as possible.

이와 같이, 본 발명의 실시예를 통해 제1 스크린 장치와 제2 스크린 장치가 서로의 상대적인 위치를 감지하는 구조를 가지는 시스템과 방법을 제시하고, 제2 스크린 장치의 콘텐트를 동기화할 수 있다.As described above, a system and a method having a structure in which the first screen device and the second screen device sense relative positions of each other through the embodiment of the present invention are presented, and the content of the second screen device can be synchronized.

이에, 단말 장치 간의 질의를 통해 서비스 정보를 획득하고, 획득한 정보를 기반으로 세컨드 스크린에 적합한 서비스를 서버 측에 요청해 알아낼 수 있으며, 또한 본 발명의 실시예를 통해 프라이머리(Primary) 스크린과 세컨드 스크린이 밀접하게 연계된 새로운 콘텐트를 제공하는 서비스의 창출로 나타날 수 있다.Accordingly, it is possible to obtain service information through inquiry between terminal apparatuses, and to request a service suitable for the secondary screen on the basis of the acquired information on the basis of the acquired information. Further, through the embodiment of the present invention, Second screen can appear as the creation of a service that provides new content that is tightly linked.

실시예에 따른 제1 스크린 장치와 제2 스크린 장치 간의 상대 위치 감지 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(Magnetic media), CD-ROM, DVD와 같은 광기록 매체(Optical media), 플롭티컬 디스크(Floptical disk)와 같은 자기-광 매체(Magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method of detecting the relative position between the first screen device and the second screen device according to the embodiment may be implemented in the form of a program command which can be executed through various computer means and recorded in a computer readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like, alone or in combination. The program instructions to be recorded on the medium may be those specially designed and configured for the embodiments or may be available to those skilled in the art of computer software. Examples of the computer-readable recording medium include magnetic media such as a hard disk, a floppy disk and a magnetic tape, optical media such as CD-ROM and DVD, magnetic disks such as a floppy disk, - Magneto-optical media, and hardware devices specifically configured to store and execute program instructions such as ROM, RAM, flash memory, and the like. Examples of program instructions include machine language code such as those produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등한 것들에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments. For example, it is to be understood that the techniques described may be performed in a different order than the described methods, and / or that components of the described systems, structures, devices, circuits, Lt; / RTI > or equivalents thereof, the appropriate results may be achieved.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.

110: 제1 스크린 장치
120, 400: 제2 스크린 장치
130, 500: 콘텐트 서버
410: 스크린 인식부
420: 콘텐트 인식부
430: 콘텐트 요청부
440: 콘텐트 표시부
510: 마커 삽입부
520: 부가 콘텐트 저장부
530: 부가 요청 처리부110: first screen device
120, 400: a second screen device
130, 500: a content server
410: Screen recognition unit
420:
430:
440:
510: marker insertion portion
520: Additional content storage unit
530:

Claims (14)

삭제delete 제2 스크린 장치의 상대 위치 감지 시스템에 있어서,
상기 제2 스크린 장치는
제1 스크린 장치의 존재 여부를 식별하는 스크린 인식부;
상기 제1 스크린 장치가 디스플레이하는 일반 콘텐트 상의 마커를 인식하는 콘텐트 인식부;
상기 마커의 정보를 기반으로 부가 콘텐트를 콘텐트 서버로 요청하는 콘텐트 요청부; 및
상기 콘텐트 서버로부터 상기 요청한 부가 콘텐트를 수신하여 디스플레이하는 콘텐트 표시부를 포함하고,
상기 제1 스크린 장치는 상기 제2 스크린 장치가 상대 위치를 측정하는 대상으로 상기 마커를 하나 이상 포함하며,
상기 마커는 상기 제1 스크린 장치의 화면 범위와 위치를 나타내기 위한 표식으로서 상기 제1 스크린 장치 디스플레이의 각 모서리나 꼭지점에 표시되는 것
을 특징으로 하는 상대 위치 감지 시스템.In the relative position sensing system of the second screen device,
The second screen device
A screen recognition unit for identifying the presence or absence of the first screen device;
A content recognition unit for recognizing a marker on a general content displayed by the first screen device;
A content request unit for requesting additional content to a content server based on the information of the marker; And
And a content display unit for receiving and displaying the requested additional content from the content server,
Wherein the first screen device includes one or more of the markers as an object from which the second screen device measures the relative position,
Wherein the markers are indicia for indicating a screen range and position of the first screen device, the markers being displayed at respective corners or vertices of the first screen device display
Wherein the relative position detection system comprises: 제2 스크린 장치의 상대 위치 감지 시스템에 있어서,
상기 제2 스크린 장치는
제1 스크린 장치의 존재 여부를 식별하는 스크린 인식부;
상기 제1 스크린 장치가 디스플레이하는 일반 콘텐트 상의 마커를 인식하는 콘텐트 인식부;
상기 마커의 정보를 기반으로 부가 콘텐트를 콘텐트 서버로 요청하는 콘텐트 요청부; 및
상기 콘텐트 서버로부터 상기 요청한 부가 콘텐트를 수신하여 디스플레이하는 콘텐트 표시부를 포함하고,
상기 스크린 인식부는 상기 제2 스크린 장치의 후면 카메라를 이용하여 상기 제1 스크린 장치의 존재 여부를 식별하는 것
을 특징으로 하는 상대 위치 감지 시스템.In the relative position sensing system of the second screen device,
The second screen device
A screen recognition unit for identifying the presence or absence of the first screen device;
A content recognition unit for recognizing a marker on a general content displayed by the first screen device;
A content request unit for requesting additional content to a content server based on the information of the marker; And
And a content display unit for receiving and displaying the requested additional content from the content server,
Wherein the screen recognizing unit identifies whether or not the first screen device is present using the rear face camera of the second screen device
Wherein the relative position detection system comprises: 제2 스크린 장치의 상대 위치 감지 시스템에 있어서,
상기 제2 스크린 장치는
제1 스크린 장치의 존재 여부를 식별하는 스크린 인식부;
상기 제1 스크린 장치가 디스플레이하는 일반 콘텐트 상의 마커를 인식하는 콘텐트 인식부;
상기 마커의 정보를 기반으로 부가 콘텐트를 콘텐트 서버로 요청하는 콘텐트 요청부; 및
상기 콘텐트 서버로부터 상기 요청한 부가 콘텐트를 수신하여 디스플레이하는 콘텐트 표시부를 포함하고,
상기 콘텐트 인식부는
상기 제2 스크린 장치의 후면 카메라를 이용해 상기 제1 스크린 장치의 일반 콘텐트를 촬영하고, 촬영을 통해 상기 마커를 인식하여 상기 제1 스크린 장치와 상기 제2 스크린 장치 간의 상대적인 위치를 계산하는 것
을 특징으로 하는 상대 위치 감지 시스템.In the relative position sensing system of the second screen device,
The second screen device
A screen recognition unit for identifying the presence or absence of the first screen device;
A content recognition unit for recognizing a marker on a general content displayed by the first screen device;
A content request unit for requesting additional content to a content server based on the information of the marker; And
And a content display unit for receiving and displaying the requested additional content from the content server,
The content recognition unit
The general content of the first screen device is photographed using a rear camera of the second screen device and the relative position between the first screen device and the second screen device is calculated by recognizing the marker through photographing
Wherein the relative position detection system comprises: 제2 스크린 장치의 상대 위치 감지 시스템에 있어서,
상기 제2 스크린 장치는
제1 스크린 장치의 존재 여부를 식별하는 스크린 인식부;
상기 제1 스크린 장치가 디스플레이하는 일반 콘텐트 상의 마커를 인식하는 콘텐트 인식부;
상기 마커의 정보를 기반으로 부가 콘텐트를 콘텐트 서버로 요청하는 콘텐트 요청부; 및
상기 콘텐트 서버로부터 상기 요청한 부가 콘텐트를 수신하여 디스플레이하는 콘텐트 표시부를 포함하고,
상기 콘텐트 요청부는 상기 마커의 정보를 기반으로 상기 제2 스크린 장치가 촬영하는 영역을 식별하고, 상기 촬영 영역에 대한 부가 콘텐트를 요청하며,
상기 콘텐트 표시부는 상기 제2 스크린 장치의 위치를 고려하여 상기 부가 콘텐트를 표시하는 것
을 특징으로 하는 상대 위치 감지 시스템.In the relative position sensing system of the second screen device,
The second screen device
A screen recognition unit for identifying the presence or absence of the first screen device;
A content recognition unit for recognizing a marker on a general content displayed by the first screen device;
A content request unit for requesting additional content to a content server based on the information of the marker; And
And a content display unit for receiving and displaying the requested additional content from the content server,
Wherein the content requesting unit identifies an area photographed by the second screen device based on the information of the marker, requests additional content for the photographing area,
Wherein the content display unit displays the additional content in consideration of the position of the second screen device
Wherein the relative position detection system comprises: 삭제delete 제2 스크린 장치의 상대 위치 감지 방법에 있어서,
제1 스크린 장치의 존재 여부를 식별하는 단계;
상기 제1 스크린 장치가 디스플레이하는 일반 콘텐트 상의 마커를 인식하는 단계;
상기 마커의 정보를 기반으로 부가 콘텐트를 콘텐트 서버로 요청하는 단계; 및
상기 콘텐트 서버로부터 상기 요청한 부가 콘텐트를 수신하여 디스플레이하는 단계를 포함하고,
상기 제1 스크린 장치는 상기 제2 스크린 장치가 상대 위치를 측정하는 대상으로 상기 마커를 하나 이상 포함하며
상기 마커는 상기 제1 스크린 장치의 화면 범위와 위치를 나타내기 위한 표식으로서 상기 제1 스크린 장치 디스플레이의 각 모서리나 꼭지점에 표시되는 것
을 특징으로 하는 상대 위치 감지 방법.In the relative position sensing method of the second screen device,
Identifying the presence or absence of a first screen device;
Recognizing a marker on the general content displayed by the first screen device;
Requesting additional content from the content server based on the marker information; And
Receiving and displaying the requested supplemental content from the content server,
The first screen device may include one or more of the markers as an object from which the second screen device measures the relative position
Wherein the markers are indicia for indicating a screen range and position of the first screen device, the markers being displayed at respective corners or vertices of the first screen device display
The relative position detection method comprising: 제2 스크린 장치의 상대 위치 감지 방법에 있어서,
제1 스크린 장치의 존재 여부를 식별하는 단계;
상기 제1 스크린 장치가 디스플레이하는 일반 콘텐트 상의 마커를 인식하는 단계;
상기 마커의 정보를 기반으로 부가 콘텐트를 콘텐트 서버로 요청하는 단계; 및
상기 콘텐트 서버로부터 상기 요청한 부가 콘텐트를 수신하여 디스플레이하는 단계를 포함하고,
상기 존재 여부를 식별하는 단계는 상기 제2 스크린 장치의 후면 카메라를 이용하여 상기 제1 스크린 장치의 존재 여부를 식별하는 것
을 특징으로 하는 상대 위치 감지 방법.In the relative position sensing method of the second screen device,
Identifying the presence or absence of a first screen device;
Recognizing a marker on the general content displayed by the first screen device;
Requesting additional content from the content server based on the marker information; And
Receiving and displaying the requested supplemental content from the content server,
Wherein the step of identifying whether the first screen device is present includes identifying whether the first screen device is present using the rear screen camera of the second screen device
The relative position detection method comprising: 제2 스크린 장치의 상대 위치 감지 방법에 있어서,
제1 스크린 장치의 존재 여부를 식별하는 단계;
상기 제1 스크린 장치가 디스플레이하는 일반 콘텐트 상의 마커를 인식하는 단계;
상기 마커의 정보를 기반으로 부가 콘텐트를 콘텐트 서버로 요청하는 단계; 및
상기 콘텐트 서버로부터 상기 요청한 부가 콘텐트를 수신하여 디스플레이하는 단계를 포함하고,
상기 콘텐트 상의 마커를 인식하는 단계는
상기 제2 스크린 장치의 후면 카메라를 이용해 상기 제1 스크린 장치의 일반 콘텐트를 촬영하고, 촬영을 통해 상기 마커를 인식하여 상기 제1 스크린 장치와 상기 제2 스크린 장치 간의 상대적인 위치를 계산하는 것
을 특징으로 하는 상대 위치 감지 방법.In the relative position sensing method of the second screen device,
Identifying the presence or absence of a first screen device;
Recognizing a marker on the general content displayed by the first screen device;
Requesting additional content from the content server based on the marker information; And
Receiving and displaying the requested supplemental content from the content server,
The step of recognizing the markers on the content
The general content of the first screen device is photographed using a rear camera of the second screen device and the relative position between the first screen device and the second screen device is calculated by recognizing the marker through photographing
The relative position detection method comprising: 제2 스크린 장치의 상대 위치 감지 방법에 있어서,
제1 스크린 장치의 존재 여부를 식별하는 단계;
상기 제1 스크린 장치가 디스플레이하는 일반 콘텐트 상의 마커를 인식하는 단계;
상기 마커의 정보를 기반으로 부가 콘텐트를 콘텐트 서버로 요청하는 단계; 및
상기 콘텐트 서버로부터 상기 요청한 부가 콘텐트를 수신하여 디스플레이하는 단계를 포함하고,
상기 부가 콘텐트를 콘텐트 서버로 요청하는 단계는 상기 마커의 정보를 기반으로 상기 제2 스크린 장치가 촬영하는 영역을 식별하고, 상기 촬영 영역에 대한 부가 콘텐트를 요청하며,
상기 부가 콘텐트를 수신하여 디스플레이하는 단계는 상기 제2 스크린 장치의 위치를 고려하여 상기 부가 콘텐트를 표시하는 것
을 특징으로 하는 상대 위치 감지 방법.In the relative position sensing method of the second screen device,
Identifying the presence or absence of a first screen device;
Recognizing a marker on the general content displayed by the first screen device;
Requesting additional content from the content server based on the marker information; And
Receiving and displaying the requested supplemental content from the content server,
Wherein the step of requesting the supplementary content to the content server comprises the steps of: identifying an area photographed by the second screen device based on the information of the marker; requesting additional content for the photographed area;
The step of receiving and displaying the additional content may include displaying the additional content in consideration of the position of the second screen device
The relative position detection method comprising: 삭제delete 삭제delete 삭제delete 디스플레이 각 모서리나 꼭지점마다 해당 위치를 나타내는 마커를 표시하는 제1 스크린 장치; 및
상기 제1 스크린 장치를 촬영하면서 상기 마커의 위치를 식별하는 제2 스크린 장치를 포함하고,
상기 제2 스크린 장치는 상기 촬영된 영상 내의 마커의 위치를 토대로 상기 제1 스크린 장치와의 상대적인 위치를 계산하는 것
을 특징으로 하는 상대 위치 감지 시스템.A first screen device for displaying a marker indicating a corresponding position for each corner or vertex of the display; And
And a second screen device for identifying the position of the marker while photographing the first screen device,
Wherein the second screen device calculates a relative position with respect to the first screen device on the basis of the position of the marker in the captured image
Wherein the relative position detection system comprises:
KR1020120137526A 2012-11-30 2012-11-30 A system and method of relative position detecting between the main screen and the second screen KR101416083B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120137526A KR101416083B1 (en) 2012-11-30 2012-11-30 A system and method of relative position detecting between the main screen and the second screen

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120137526A KR101416083B1 (en) 2012-11-30 2012-11-30 A system and method of relative position detecting between the main screen and the second screen

Publications (2)

Publication Number Publication Date
KR20140072296A KR20140072296A (en) 2014-06-13
KR101416083B1 true KR101416083B1 (en) 2014-07-08

Family

ID=51126162

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120137526A KR101416083B1 (en) 2012-11-30 2012-11-30 A system and method of relative position detecting between the main screen and the second screen

Country Status (1)

Country Link
KR (1) KR101416083B1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070116410A (en) * 2006-06-05 2007-12-10 엠텍비젼 주식회사 Photographing method and device for making a panorama using marker
JP2012078928A (en) * 2010-09-30 2012-04-19 Kddi Corp Information sending-out display system
KR20120075586A (en) * 2010-12-16 2012-07-09 주식회사 엔엔피 System and method for providing contents using qr code
KR20120090388A (en) * 2011-02-07 2012-08-17 삼성전자주식회사 Method and apparatus for managing user device and contents using qr code

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070116410A (en) * 2006-06-05 2007-12-10 엠텍비젼 주식회사 Photographing method and device for making a panorama using marker
JP2012078928A (en) * 2010-09-30 2012-04-19 Kddi Corp Information sending-out display system
KR20120075586A (en) * 2010-12-16 2012-07-09 주식회사 엔엔피 System and method for providing contents using qr code
KR20120090388A (en) * 2011-02-07 2012-08-17 삼성전자주식회사 Method and apparatus for managing user device and contents using qr code

Also Published As

Publication number Publication date
KR20140072296A (en) 2014-06-13

Similar Documents

Publication Publication Date Title
US10580206B2 (en) Method and apparatus for constructing three-dimensional map
JP5255595B2 (en) Terminal location specifying system and terminal location specifying method
US9699375B2 (en) Method and apparatus for determining camera location information and/or camera pose information according to a global coordinate system
US9094616B2 (en) Method and system for image capture and facilitated annotation
US9591149B2 (en) Generation of a combined image of a presentation surface
KR101923177B1 (en) Appratus and method for providing augmented reality information based on user
JP2017162103A (en) Inspection work support system, inspection work support method, and inspection work support program
JP2012053776A (en) Display image search device, display device, display image search system, and display image search method
KR20160087284A (en) Image processing apparatus, the image processing apparatus for performing image storage method and image search method
WO2018099989A1 (en) Method, device and system for estimating a pose of a camera
KR20160086717A (en) Method for providing service by bending mobile device and mobile device
JP2010272054A (en) Device, method, and program for providing building relevant information
JP2020027390A (en) Attention object estimation device and attention object estimation method
KR101416083B1 (en) A system and method of relative position detecting between the main screen and the second screen
KR20120110872A (en) Method and apparatus for displaying a photo on a screen formed with any type
KR102161437B1 (en) Apparatus for sharing contents using spatial map of augmented reality and method thereof
EP2909792A1 (en) Method and system for image capture and facilitated annotation
KR101480300B1 (en) Interactive contents provision system and method using relative distance between the main screen and the second screen
US9904355B2 (en) Display method, image capturing method and electronic device
JP2012208558A (en) Display control apparatus, terminal device, communication system, and program
KR20160141087A (en) Providing system and method of moving picture contents for based on augmented reality location of multimedia broadcast scene
WO2019127320A1 (en) Information processing method and apparatus, cloud processing device, and computer program product
US20180063344A1 (en) Mobile device and method for controlling the same
JP2019004441A (en) System for picking object base on view-point and method thereof
JP2007526680A (en) Method and apparatus for formatting and displaying content

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170627

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee