KR20130079962A - Method of displaying post-it contents using augmented reality and apparatus using the same - Google Patents

Method of displaying post-it contents using augmented reality and apparatus using the same Download PDF

Info

Publication number
KR20130079962A
KR20130079962A KR1020120000764A KR20120000764A KR20130079962A KR 20130079962 A KR20130079962 A KR 20130079962A KR 1020120000764 A KR1020120000764 A KR 1020120000764A KR 20120000764 A KR20120000764 A KR 20120000764A KR 20130079962 A KR20130079962 A KR 20130079962A
Authority
KR
South Korea
Prior art keywords
marker
image data
post
user
text
Prior art date
Application number
KR1020120000764A
Other languages
Korean (ko)
Inventor
박병선
Original Assignee
주식회사 인프라웨어
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 인프라웨어 filed Critical 주식회사 인프라웨어
Priority to KR1020120000764A priority Critical patent/KR20130079962A/en
Publication of KR20130079962A publication Critical patent/KR20130079962A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/22—Character recognition characterised by the type of writing
    • G06V30/224—Character recognition characterised by the type of writing of printed characters having additional code marks or containing code marks

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

PURPOSE: A post-it contents display method which uses an augmented reality and an apparatus which implements the same are provided to utilize a specific object as a marker by displaying a text on one or more input modules in a fixed area of 'image data which is recognized as the marker'. CONSTITUTION: An image photographing device (102) photographs a marker. In case a user authentication unit (101) succeeds in a user authentication, a control unit (104) displays 'the image data of the marker which corresponds to a user identifier' by a display unit (103). In case a text is displayed on an input module in the fixed area of the image data of the marker, the control unit stores the image data of the marker by corresponding to the user identifier by a control of a history storage unit (106). [Reference numerals] (100) Contents display apparatus; (101) User authentication unit; (102) Image photographing device; (103) Display unit; (104) Control unit; (105) User information storage unit; (106) History storage unit

Description

증강현실을 이용한 포스트잇 컨텐츠 표시 방법 및 이를 실행하는 장치 {METHOD OF DISPLAYING post-it CONTENTS USING AUGMENTED REALITY AND APPARATUS USING THE SAME}Post-it content display method using augmented reality and a device for executing the same {METHOD OF DISPLAYING post-it CONTENTS USING AUGMENTED REALITY AND APPARATUS USING THE SAME}

본 발명은 증강현실을 이용한 포스트잇 컨텐츠 표시 방법 및 이를 실행하는 장치에 관한 것으로, 보다 구체적으로 마커로 인식된 이미지 데이터 상 소정 영역에 컨텐츠를 표시하는 증강현실을 이용한 포스트잇 컨텐츠 표시 방법 및 이를 실행하는 장치에 관한 것이다.
The present invention relates to a method for displaying post-it contents using augmented reality and a device for executing the same. More particularly, a method for displaying post-it contents using augmented reality for displaying contents in a predetermined area on image data recognized as a marker and an apparatus for executing the same. It is about.

가상 현실(Virtual Reality: VR)은 컴퓨터 시스템에서 생성한 3D 가상 공간과 주로 상호 작용이 추가되는 분야로서, 가상 공간은 현실 세계를 바탕으로 구성된다. 사용자는 이러한 가상 공간을 인체의 오감(시각, 청각, 후각, 미각, 촉각)을 통해 느낌으로써 몰입감(沒入感)을 갖게 된다.Virtual Reality (VR) is an area in which interaction is mainly added to 3D virtual spaces created by computer systems. Virtual spaces are constructed based on the real world. The user has an immersive feeling by feeling the virtual space through the five senses (visual, auditory, olfactory, taste, and tactile) of the human body.

증강 현실(Augmented Reality: AR)은 가상 현실(VR)의 하나의 분야에서 파생된 기술로서, 현실 세계와 가상의 체험을 결합한 것을 의미한다. 즉, 실제 환경에 가상 사물을 합성하여 원래의 환경에 존재하는 사물처럼 보이도록 하는 컴퓨터 그래픽 기법이다.Augmented Reality (AR) is a technology derived from one field of virtual reality (VR), which means combining the real world and the virtual experience. In other words, it is a computer graphics technique that synthesizes virtual objects in the real environment and makes them look like objects existing in the original environment.

가상 현실은 모든 환경을 컴퓨터를 통해 가상환경으로 제작하여 사용자와 상호 작용하지만, 증강 현실은 현실 세계를 바탕으로 사용자가 가상의 물체와 상호 작용함으로써 향상된 현실감을 줄 수 있다는 특징을 가진다. 따라서, 증강 현실에서는 사용자가 자신이 위치해 있는 실제 환경을 인식함과 동시에, 실제 영상 위에 표현된 가상의 정보도 인식하게 된다.Virtual reality creates a virtual environment through a computer and interacts with the user, but augmented reality has a feature that the user can improve the reality by interacting with a virtual object based on the real world. Therefore, in augmented reality, the user recognizes the real environment in which the user is located and also recognizes the virtual information expressed on the real image.

이와 같이, 증강 현실은 현실 영상과 가상의 그래픽을 접목하여 보여주기 때문에 보다 실감있고 정확한 영상을 얻기 위해서는 가상 객체들을 디스플레이 화면에서 원하는 자리에 정확히 위치시켜야 한다. 이를 구현하기 위해서는 가상 객체에 대한 3차원 좌표가 필요한데, 이러한 좌표는 카메라를 기준으로 하는 좌표값이 되어야 한다.As such, since augmented reality displays a combination of real images and virtual graphics, virtual objects must be accurately positioned at a desired position on a display screen to obtain a more realistic and accurate image. To implement this, three-dimensional coordinates for the virtual object are required. These coordinates should be coordinates with respect to the camera.

그런데, 문제는 카메라의 영상에서 현실 세계의 어떤 지점이나 물체에 대한 카메라의 3차원 좌표를 확보해야 하는데, 이를 위해서는 2대 이상의 카메라가 필요하므로 3차원 위치를 파악하기가 쉽지 않다.However, the problem is to obtain the three-dimensional coordinates of the camera for a certain point or object in the real world in the image of the camera, which requires two or more cameras, it is not easy to determine the three-dimensional position.

따라서, 이에 대한 대책으로 증강 현실에서는 가상 객체를 위치시킬 마커(marker)를 현실 세계의 공간에 배치하고 상기 마커를 기준으로 상대적 좌표를 추출하여 가상 객체를 위치시킬 위치 및 자세를 추정하는 마커 기반 인식 기술을 이용하고 있다.Accordingly, as a countermeasure, in augmented reality, a marker-based recognition for estimating a position and posture at which a virtual object is placed by arranging a marker to locate the virtual object in a real world space and extracting relative coordinates based on the marker I'm using technology.

예를 들어, 고양이를 뜻하는 마커를 사용자가 임의로 만들고, 실제 고양이의 모습을 3차원 그래픽 이미지로 형상화한 3차원 가상 영상을 고양이 마커와 매칭시킨다. 이 마커를 컴퓨터에 연결된 카메라 등의 영상 인식 수단으로 인식하면, 컴퓨터 모니터에 고양이의 3차원 가상 영상이 나타나는 것이다.For example, the user randomly creates a marker for a cat, and matches a cat marker with a 3D virtual image in which a real cat's shape is formed into a 3D graphic image. When the marker is recognized by an image recognition means such as a camera connected to a computer, a three-dimensional virtual image of a cat appears on the computer monitor.

종래의 증강현실 및 복합현실 시스템에서 사용되는 객체를 인지하기 위한 방법은 가상적인 마커의 사용 여부에 따라서 가상 마커(Artificial Marker)와 마커리스(Marker-less)의 2가지 방법으로 구분된다. 가상 마커 방법은 동일한 형태와 크기의 물리적인 마커를 실사영상으로부터 입력받아 해당 마커를 인지하고, 그에 따른 마커의 위치, 방향 등을 영상입력 장치로부터의 상대적인 데이터로 계산하여 가상의 개체가 보여질 포즈 및 위치를 예측하는 방법이다. 또한, 마커리스 방법은 가상의 물리적인 마커를 사용하는 대신 실세계의 물체(object)를 마커로 등록하여 가상 마커처럼 사용하는 방법이다.Methods for recognizing objects used in conventional augmented reality and complex reality systems are classified into two methods, an artificial marker and a markerless method, depending on whether virtual markers are used. The virtual marker method receives a physical marker of the same shape and size from a live image and recognizes the marker, and calculates the position and direction of the marker according to the relative data from the image input device to pose the virtual object. And location prediction. In addition, the markerless method is a method of registering an object of the real world as a marker and using it as a virtual marker instead of using a virtual physical marker.

한편, 사용자들은 회의 중이나 수업 중에 메모의 용도로 포스트잇(post-it)을 널리 사용하고 있지만 이러한 종래기술의 포스트잇은 타인과 메모를 공유할 수 없다는 단점이 있다.
On the other hand, users are widely used post-it (note-it) for the purpose of the note during the meeting or class, but the disadvantage of this conventional post-it can not share the note with others.

상기와 같은 문제점을 해결하기 위한 본 발명의 목적은 마커로 인식된 이미지 데이터 상 소정 영역에 컨텐츠를 표시하는 증강현실을 이용한 포스트잇 컨텐츠 표시 방법 및 이를 실행하는 장치를 제공하는 데 있다.
An object of the present invention for solving the above problems is to provide a post-it content display method using augmented reality to display the content in a predetermined region on the image data recognized as a marker and an apparatus for executing the same.

상기한 목적을 달성하기 위한 본 발명에 따른 증강현실을 이용한 포스트잇 컨텐츠 표시 방법은, 마커로 인식된 이미지 데이터를 표시하는 단계; 위 인식된 이미지 데이터의 소정 영역 상에 텍스트를 입력할 수 있는 포스트 잇을 포함한 하나 이상의 입력 모듈을 표시하는 단계;를 포함하여 구성된다.Post-it content display method using augmented reality according to the present invention for achieving the above object, displaying the image data recognized as a marker; And displaying at least one input module including a post-it for inputting text on a predetermined region of the recognized image data.

여기서, 증강현실을 이용한 포스트잇 컨텐츠 표시 방법은 입력 모듈에 삽입될 텍스트를 수신하면, 그 수신한 텍스트를 입력 모듈에 표시하는 단계를 더 포함할 수 있다. 또한, 마커는 이미지 데이터로 생성할 다양한 형태의 객체일 수 있다.Here, the post-it content display method using augmented reality may further include displaying the received text on the input module when the text to be inserted into the input module is received. Also, the marker may be various types of objects to be generated as image data.

상기한 목적을 달성하기 위한 본 발명에 따른 증강현실을 이용한 포스트잇 컨텐츠 표시장치는, 마커를 촬영하는 영상촬영 기기; 영상촬영 기기에 의해서 촬영된 마커 이미지 데이터의 소정 영역 상에 텍스트를 입력할 수 있는 포스트 잇을 포함한 하나 이상의 입력 모듈을 표시하는 표시부;를 포함하여 구성된다.Post-it content display device using augmented reality according to the present invention for achieving the above object, an imaging device for shooting a marker; And a display unit for displaying one or more input modules including a post-it for inputting text on a predetermined region of the marker image data photographed by the image photographing device.

여기서, 표시부는 입력 모듈에 삽입될 텍스트를 수신하면, 그 수신한 텍스트를 상기 입력 모듈에 표시할 수 있다. 또한, 마커는 이미지 데이터로 생성할 다양한 형태의 객체일 수 있다.
Here, when the display unit receives the text to be inserted into the input module, the display unit may display the received text on the input module. Also, the marker may be various types of objects to be generated as image data.

본 발명에 따른 증강현실을 이용한 포스트잇 컨텐츠 표시 기술에 따르면 마커로 인식된 이미지 데이터 상 소정 영역에 하나 이상의 입력 모듈에 텍스트 표시하기 때문에 특정 사물을 마커로 활용할 수 있고 특정 그룹 및 여러 사람과 메모를 공유할 수 있다.According to the post-it content display technology using augmented reality according to the present invention, since a text is displayed on one or more input modules in a predetermined area on image data recognized as a marker, a specific object can be used as a marker and a memo is shared with a specific group and several people. can do.

또한, 사용자로부터 사용자 인증 정보를 수신하여 사용자 인증을 수행한 후, 사용자가 이전에 사용했던 마커의 이미지 데이터를 불러와 재사용하는 것이 가능하다는 장점도 있다.
In addition, after receiving user authentication information from a user and performing user authentication, the user may recall and reuse image data of a marker previously used by the user.

[도 1]은 본 발명에 따른 포스트잇 컨텐츠 표시장치의 내부 구조를 개략적으로 도시한 블록도.
[도 2]는 본 발명에 따라 이루어지는 포스트잇 컨텐츠 표시의 일 실시예를 나타내는 예시도.1 is a block diagram schematically showing the internal structure of a post-it content display device according to the present invention;
2 is an exemplary diagram illustrating one embodiment of a post-it content display made in accordance with the present invention.

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.While the invention is susceptible to various modifications and alternative forms, specific embodiments thereof are shown by way of example in the drawings and will herein be described in detail. It should be understood, however, that the invention is not intended to be limited to the particular embodiments, but includes all modifications, equivalents, and alternatives falling within the spirit and scope of the invention. Like reference numerals are used for like elements in describing each drawing.

제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.The terms first, second, A, B, etc. may be used to describe various elements, but the elements should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from another. For example, without departing from the scope of the present invention, the first component may be referred to as a second component, and similarly, the second component may also be referred to as a first component. And / or < / RTI > includes any combination of a plurality of related listed items or any of a plurality of related listed items.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.When a component is referred to as being "connected" or "connected" to another component, it may be directly connected to or connected to that other component, but it may be understood that other components may be present in between. Should be. On the other hand, when an element is referred to as being "directly connected" or "directly connected" to another element, it should be understood that there are no other elements in between.

본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terminology used herein is for the purpose of describing particular example embodiments only and is not intended to be limiting of the present invention. Singular expressions include plural expressions unless the context clearly indicates otherwise. In this application, the terms "comprise" or "have" are intended to indicate that there is a feature, number, step, operation, component, part, or combination thereof described in the specification, and one or more other features. It is to be understood that the present invention does not exclude the possibility of the presence or the addition of numbers, steps, operations, components, components, or a combination thereof.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art. Terms such as those defined in the commonly used dictionaries should be construed as having meanings consistent with the meanings in the context of the related art and shall not be construed in ideal or excessively formal meanings unless expressly defined in this application. Do not.

이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
Hereinafter, preferred embodiments according to the present invention will be described in detail with reference to the accompanying drawings.

[도 1]은 본 발명의 일 실시예에 따른 포스트잇 컨텐츠 표시장치의 내부 구조를 개략적으로 도시한 블록도이다.1 is a block diagram schematically illustrating an internal structure of a post-it content display device according to an embodiment of the present invention.

[도 1]을 참조하면, 포스트잇 컨텐츠 표시장치는 마커의 이미지 데이터 상 소정 영역에사용자로부터 수신한 텍스트를 입력할 수 있는 컨텐츠를 표시할 수 있다. 이를 위한 포스트잇 컨텐츠 표시장치는, 사용자 인증부(101), 영상촬영 기기(102), 표시부(103), 제어부(104), 사용자 정보 저장부(105), 이력 저장부(106)를 포함하여 구성될 수 있다.Referring to FIG. 1, the post-it content display apparatus may display content for inputting text received from a user in a predetermined area on image data of a marker. The post-it content display device for this purpose includes a user authentication unit 101, an image photographing device 102, a display unit 103, a control unit 104, a user information storage unit 105, and a history storage unit 106. Can be.

사용자 인증부(101)는 사용자로부터 사용자 인증 정보를 수신하고, 수신한 사용자 인증 정보가 사용자 정보 저장부(105)에 존재하는지 판단하여 사용자를 인증할 수 있다. 예를 들어, 사용자 인증부(101)는 사용자로부터 로그인을 위한 사용자의 식별자 및 패스워드를 수신하고, 그 수신한 식별자 및 패스워드가 사용자 정보 저장부(105)에 존재하는지 판단하여 만일 존재한다면 사용자 인증 결과를 제어부(104)로 제공할 수 있다.The user authentication unit 101 may receive user authentication information from the user, and may determine whether the received user authentication information exists in the user information storage unit 105 to authenticate the user. For example, the user authentication unit 101 receives an identifier and a password of the user for logging in from the user, determines whether the received identifier and password exist in the user information storage unit 105, and if so, the user authentication result. May be provided to the controller 104.

영상촬영 기기(102)는 마커를 촬영하고, 촬영한 마커의 이미지 데이터를 표시부(103)로 제공할 수 있다. 여기서, 마커는 이미지 데이터로 생성할 다양한 형태의 객체일 수 있다.The image capturing apparatus 102 may photograph a marker and provide image data of the photographed marker to the display unit 103. Here, the marker may be various types of objects to be generated as image data.

영상촬영 기기(102)는 마커의 위치와 방향을 감지하는 도구로서 3차원 공간 상의 위치 추적을 위한 것이며 마커의 위치와 방향을 감지하는 방법으로는 적외선 센서에 의한 방법, 초음파 센서에 의한 방법, 영상 센서에 의한 방법, 매그네틱 센서에 의한 방법 등이 사용될 수 있다.Image capturing device 102 is a tool for detecting the position and direction of the marker to track the position in the three-dimensional space and the method of detecting the position and direction of the marker by the infrared sensor method, the ultrasonic sensor method, the image The method by a sensor, the method by a magnetic sensor, etc. can be used.

적외선 센서와 초음파 센서를 사용하는 경우에는 한 개의 센서로 한 방향에 대한 센싱만 되기 때문에 동시에 여러 방향의 정보가 필요할 경우 많은 수의 센서를 필요로 한다.In the case of using the infrared sensor and the ultrasonic sensor, only one sensor senses one direction. Therefore, when information in multiple directions is needed at the same time, a large number of sensors are required.

영상촬영 기기(102)를 이용하는 경우, 물체의 입체적 위치를 판단하기 위해서 뿐만 아니라 사용자 신체의 일부분에 의해 일시적으로 가려지는 경우를 대비하더라도 복수개의 영상촬영 기기(102)를 필요로 한다. 다만, 원근을 측정할 목적이라면 마커의 상대적인 크기를 측정하여 원근을 판단할 수 있으므로, 이 경우에는 한 대를 사용하더라도 동작이 가능하다.In the case of using the image capturing device 102, a plurality of image capturing devices 102 are required not only for determining the three-dimensional position of the object but also in case of being temporarily obscured by a part of the user's body. However, if the purpose of measuring perspective is to determine the perspective by measuring the relative size of the marker, in this case it is possible to operate even using one.

표시부(103)는 영상촬영 기기(102)에 의해서 촬영된 마커의 이미지 데이터 상 소정 영역에 하나 이상의 입력 모듈을 표시할 수 있다. 또한, 표시부(103)는 사용자로부터 텍스트를 수신하면, 그 수신한 텍스트를 입력 모듈에 표시할 수 있다. 이러한 입력모듈의 바람직한 예는 포스트잇이다.The display unit 103 may display one or more input modules in a predetermined area on the image data of the marker photographed by the image photographing device 102. In addition, when the display unit 103 receives the text from the user, the display unit 103 may display the received text on the input module. A preferred example of such an input module is a post-it.

또한, 표시부(103)는 제어부(104)의 제어에 따라 각자 로그인한 사용자의 식별자에 상응하는 마커의 이미지 데이터를 표시할 수 있다. 여기서, 표시부(103)는 로그인한 사용자의 식별자에 상응하는 마커의 이미지 데이터 상 소정 영역에 복수 개의 입력 모듈이 존재할 경우, 이들 입력 모듈을 함께 표시할 수 있고, 이들 입력모듈에 대해 입력된 텍스트가 존재할 경우에는 해당 입력 모듈에 그 텍스트를 함께 표시할 수 있다.In addition, the display unit 103 may display image data of a marker corresponding to an identifier of a user logged in under the control of the controller 104. Here, when there are a plurality of input modules in a predetermined area on the image data of the marker corresponding to the identifier of the logged-in user, the display unit 103 may display these input modules together, and the text input for these input modules is displayed. If present, the text can be displayed on the corresponding input module.

제어부(104)는 사용자 인증부(101)가 사용자 인증 정보를 수신하여 사용자 인증을 수행하려고 할 경우에 사용자 정보 저장부(105)에 저장된 사용자 인증 정보를 사용자 인증부(101)로 제공할 수 있다. 제어부(104)는 사용자 인증부(101)가 사용자 인증을 성공한 경우에 사용자 식별자에 상응하는 마커의 이미지 데이터를 표시하도록 표시부(103)를 제어할 수 있다.The controller 104 may provide the user authentication information stored in the user information storage unit 105 to the user authentication unit 101 when the user authentication unit 101 receives user authentication information and attempts to perform user authentication. . The controller 104 may control the display unit 103 to display image data of a marker corresponding to the user identifier when the user authentication unit 101 succeeds in user authentication.

제어부(104)는 영상촬영 기기(102)에 의해 마커가 촬영되고, 표시부(103)에 의해 촬영된 마커의 이미지 데이터 상에 소정 영역에 입력 모듈에 텍스트가 표시된 경우, 마터의 이미지 데이터를 사용자의 식별자에 대응시켜 저장하도록 이력 저장부(106)를 제어할 수 있다.When the marker is photographed by the imaging device 102 and the text is displayed on the input module in a predetermined area on the image data of the marker photographed by the display unit 103, the controller 104 displays the image data of the marker. The history storage unit 106 may be controlled to store in correspondence with the identifier.

사용자 정보 저장부(105)는 제어부(104)의 제어에 따라 포스트잇 컨텐츠 표시장치를 사용하는 사용자의 사용자 정보를 저장할 수 있다. 예를 들어, 사용자 정보 저장부(105)는 포스트잇 컨텐츠 표시장치를 사용하기 위해 로그인하는 사용자의 식별자 및 패스워드를 저장할 수 있다.The user information storage unit 105 may store user information of a user who uses the post-it content display device under the control of the controller 104. For example, the user information storage 105 may store an identifier and a password of a user logging in to use the post-it content display device.

이력 저장부(106)는 제어부(104)의 제어에 따라 마커의 이미지 데이터를 사용자 식별자에 대응시켜 저장할 수 있다.
The history storage unit 106 may store image data of the marker in correspondence with a user identifier under the control of the controller 104.

[도 2]는 본 발명의 일 실시예에 따른 포스트잇 컨텐츠 표시장치에 의해 실행되는 증강현실을 이용한 포스트잇 컨텐츠 표시 방법의 실시예를 나타내는 예시도이다.2 is an exemplary view showing an embodiment of a post-it content display method using augmented reality executed by a post-it content display apparatus according to an embodiment of the present invention.

[도 2]를 참조하면, 이미지 데이터로 생성할 달력을 촬영하고, 촬영한 이미지 데이터 상의 소정 영역에 하나 이상의 입력 모듈이 표시될 수 있다. 여기서, 입력 모듈은 이미지 데이터 상에 텍스트를 입력할 수 모듈이며, 사용자로부터 텍스트가 수신되면, 텍스트가 입력 모듈에 표시될 수 있다.
Referring to FIG. 2, a calendar to be generated as image data may be photographed, and one or more input modules may be displayed in a predetermined region on the photographed image data. Here, the input module is a module capable of inputting text on the image data, and when text is received from the user, the text may be displayed on the input module.

본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드의 형태로 구현하는 것이 가능하다. 이때, 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다.The present invention can also be embodied in the form of computer readable code on a computer readable recording medium. At this time, the computer-readable recording medium includes all kinds of recording devices in which data that can be read by a computer system is stored.

컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 캐리어웨이브(예컨대, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산된 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고 본 발명을 구현하기 위한 기능적인 프로그램, 코드, 코드 세그먼트들은 본 발명이 속하는 기술 분야의 프로그래머들에 의해 용이하게 추론될 수 있다.Examples of computer-readable recording media include ROM, RAM, CD-ROM, magnetic tape, floppy disks, optical data storage devices, and the like, including those implemented in the form of carrier waves (eg, transmission over the Internet). . The computer-readable recording medium can also be stored and executed by a computer-readable code in a distributed manner on a networked computer system. And functional programs, codes, and code segments for implementing the present invention can be easily deduced by programmers skilled in the art to which the present invention belongs.

이상과 같이, 본 명세서와 도면에는 본 발명의 실시예에 대하여 개시하였으며, 비록 특정 용어들이 사용되었으나 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것이지, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시예 외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형예가 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명하다.
As described above, the embodiments of the present invention have been disclosed in the present specification and drawings, and although specific terms have been used, they have been used only in a general sense to easily describe the technical contents of the present invention and to facilitate understanding of the invention. And is not intended to limit the scope of the invention. It will be apparent to those skilled in the art that other modifications based on the technical idea of the present invention are possible in addition to the embodiments disclosed herein.

100: 포스트잇 컨텐츠 표시장치
101: 사용자 인증부
102: 영상촬영 기기
103: 표시부
104: 제어부
105: 사용자 정보 저장부
106: 이력 저장부100: post-it content display device
101: user authentication unit
102: video recording equipment
103: display unit
104: control unit
105: user information storage unit
106: history storage unit

Claims (5)

마커로 인식된 이미지 데이터를 표시하는 단계;
상기 마커로 인식된 이미지 데이터의 소정 영역 상에 텍스트를 입력할 수 있는 포스트 잇을 포함한 하나 이상의 입력 모듈을 표시하는 단계;
를 포함하여 구성되는 증강현실을 이용한 포스트잇 컨텐츠 표시 방법.
Displaying image data recognized as a marker;
Displaying at least one input module including a post-it for inputting text on a predetermined area of the image data recognized as the marker;
Post-it content display method using augmented reality configured to include.
청구항 1에 있어서,
상기 입력 모듈에 삽입될 텍스트를 수신하면, 상기 수신한 텍스트를 상기 입력 모듈에 표시하는 단계를 더 포함하는 것을 특징으로 하는 증강현실을 이용한 포스트잇 컨텐츠 표시 방법.
The method according to claim 1,
And receiving the text to be inserted into the input module, and displaying the received text on the input module.
청구항 1에 있어서,
상기 마커는 이미지 데이터로 생성할 다양한 형태의 객체인 것을 특징으로 하는 증강현실을 이용한 포스트잇 컨텐츠 표시 방법.
The method according to claim 1,
The marker is a post-it content display method using augmented reality, characterized in that the object of various types to be generated as image data.
마커를 촬영하는 영상촬영 기기;
상기 영상촬영 기기에 의해서 촬영된 마커 이미지 데이터의 소정 영역 상에 텍스트를 입력할 수 있는 포스트 잇을 포함한 하나 이상의 입력 모듈을 표시하는 표시부;
를 포함하여 구성되는 증강현실을 이용한 포스트잇 컨텐츠 표시장치.
An imaging apparatus for photographing markers;
A display unit displaying one or more input modules including a post-it for inputting text on a predetermined area of the marker image data photographed by the image photographing device;
Post-it content display device using augmented reality configured to include.
청구항 4에 있어서,
상기 표시부는 상기 입력 모듈에 삽입될 텍스트를 수신하면 상기 수신한 텍스트를 상기 입력 모듈에 표시하는 것을 특징으로 하는 증강현실을 이용한 포스트잇 컨텐츠 표시장치.The method of claim 4,
And the display unit displays the received text on the input module when receiving the text to be inserted into the input module.
KR1020120000764A 2012-01-03 2012-01-03 Method of displaying post-it contents using augmented reality and apparatus using the same KR20130079962A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120000764A KR20130079962A (en) 2012-01-03 2012-01-03 Method of displaying post-it contents using augmented reality and apparatus using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120000764A KR20130079962A (en) 2012-01-03 2012-01-03 Method of displaying post-it contents using augmented reality and apparatus using the same

Publications (1)

Publication Number Publication Date
KR20130079962A true KR20130079962A (en) 2013-07-11

Family

ID=48992251

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120000764A KR20130079962A (en) 2012-01-03 2012-01-03 Method of displaying post-it contents using augmented reality and apparatus using the same

Country Status (1)

Country Link
KR (1) KR20130079962A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200088658A (en) * 2019-01-15 2020-07-23 주식회사 마이닝스타 Real-environment based posting sharing device and method
US11449134B2 (en) 2018-08-01 2022-09-20 Samsung Electronics Co., Ltd. Method for storing information on basis of image acquired through camera module, and electronic device using same
WO2023096025A1 (en) * 2021-11-23 2023-06-01 창원대학교 산학협력단 Memo processing device based on augmented reality, system, and method therefor

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11449134B2 (en) 2018-08-01 2022-09-20 Samsung Electronics Co., Ltd. Method for storing information on basis of image acquired through camera module, and electronic device using same
KR20200088658A (en) * 2019-01-15 2020-07-23 주식회사 마이닝스타 Real-environment based posting sharing device and method
WO2023096025A1 (en) * 2021-11-23 2023-06-01 창원대학교 산학협력단 Memo processing device based on augmented reality, system, and method therefor

Similar Documents

Publication Publication Date Title
US11127210B2 (en) Touch and social cues as inputs into a computer
CN106355153B (en) A kind of virtual objects display methods, device and system based on augmented reality
US8055061B2 (en) Method and apparatus for generating three-dimensional model information
Pfeiffer Measuring and visualizing attention in space with 3D attention volumes
WO2016059786A1 (en) Impersonation detection device, impersonation detection method, and recording medium
US20130174213A1 (en) Implicit sharing and privacy control through physical behaviors using sensor-rich devices
US20130249902A1 (en) System and Method for Defining an Augmented Reality View in a Specific Location
KR20150039252A (en) Apparatus and method for providing application service by using action recognition
TW201243387A (en) Color channels and optical markers
US20160148429A1 (en) Depth and Chroma Information Based Coalescence of Real World and Virtual World Images
WO2022174594A1 (en) Multi-camera-based bare hand tracking and display method and system, and apparatus
JP2015079433A5 (en)
CN105611267A (en) Depth and chroma information based coalescence of real world and virtual world images
CN112905014A (en) Interaction method and device in AR scene, electronic equipment and storage medium
JP2021002290A (en) Image processing apparatus and method for controlling the same
KR102069366B1 (en) Augmented reality implementation apparatus and method for interacting with robot for education
KR20130079962A (en) Method of displaying post-it contents using augmented reality and apparatus using the same
US20210327160A1 (en) Authoring device, authoring method, and storage medium storing authoring program
KR20100086128A (en) A situational training system based on the mixed reality
JP2015118577A5 (en)
CN104704449A (en) User interface device and user interface method
JP6827717B2 (en) Information processing equipment, control methods and programs for information processing equipment
JP6487545B2 (en) Recognition calculation device, recognition calculation method, and recognition calculation program
KR101783156B1 (en) Physical Programming Information Recognition method and Method thereof
WO2017147826A1 (en) Image processing method for use in smart device, and device

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid