KR20120082672A - Portable terminal apparatus, augment reality service system and augment reality service providing method thereof - Google Patents

Portable terminal apparatus, augment reality service system and augment reality service providing method thereof Download PDF

Info

Publication number
KR20120082672A
KR20120082672A KR1020110004092A KR20110004092A KR20120082672A KR 20120082672 A KR20120082672 A KR 20120082672A KR 1020110004092 A KR1020110004092 A KR 1020110004092A KR 20110004092 A KR20110004092 A KR 20110004092A KR 20120082672 A KR20120082672 A KR 20120082672A
Authority
KR
South Korea
Prior art keywords
user
objects
augmented reality
service
product
Prior art date
Application number
KR1020110004092A
Other languages
Korean (ko)
Other versions
KR101342589B1 (en
Inventor
남정아
김동혁
유인형
Original Assignee
주식회사 케이티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 케이티 filed Critical 주식회사 케이티
Priority to KR1020110004092A priority Critical patent/KR101342589B1/en
Publication of KR20120082672A publication Critical patent/KR20120082672A/en
Application granted granted Critical
Publication of KR101342589B1 publication Critical patent/KR101342589B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0251Targeted advertisements
    • G06Q30/0261Targeted advertisements based on user location
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0207Discounts or incentives, e.g. coupons or rebates
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/023Services making use of location information using mutual or relative location information between multiple location based services [LBS] targets or of distance thresholds

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

PURPOSE: An AR(Augmented Reality) service system of a portable terminal and a method thereof are provided to offer a product, service points, advertisement, or a coupon for a product or a service which are coping with an AR object. CONSTITUTION: A system communication unit(112) transmits obtained location information to an AR service system(120). The system communication unit receives information of one or more AR objects coping with a product or a service from the AR service system. A user interface unit(113) displays AR objects to users through an AR based interface. The user interface unit receives inputs of selected one or more AR objects.

Description

휴대용 단말 장치, 증강현실 서비스 시스템 및 증강현실 서비스 제공방법{Portable terminal apparatus, augment reality service System and augment reality service providing method thereof}Portable terminal apparatus, augmented reality service system and augment reality service providing method

본 발명은, 휴대용 단말 장치, 증강현실 서비스 시스템 및 증강현실 서비스 제공방법에 관한 것으로서, 보다 상세하게는, 사용자의 위치와 근접한 장소에서 제공되는 상품 혹은 서비스에 대응되는 AR(augment reality) 객체를 증강현실 기반의 인터페이스를 제공하고, 사용자가 이를 선택하여 사용자 계정에 저장할 수 있는 서비스를 제공하는 휴대용 단말 장치, 증강현실 서비스 시스템 및 증강현실 서비스 제공방법에 관한 것이다.The present invention relates to a portable terminal device, an augmented reality service system, and an augmented reality service providing method. More particularly, an augmented reality (AR) object corresponding to a product or a service provided at a location close to a user's location is augmented. The present invention relates to a portable terminal device, an augmented reality service system, and an augmented reality service providing method, which provide a reality-based interface and provide a service that a user can select and store in a user account.

최근 들어 휴대폰, PDA, 스마트폰, 태블릿 PC 등의 휴대형 단말기의 사용이 일반화됨에 따라, 다양한 부가 서비스 및 기능을 가진 휴대형 단말기가 개발되고 있다. 이러한 부가 서비스 및 기능 중, 휴대형 단말기의 위치를 측정하여 이를 제공하는 위치정보 제공 기술이 개발되어 있으며, 휴대형 단말기의 위치를 측정하는 기술은 다른 서비스와 접목시켜 사용할 수 있기 때문에 그 효용성이 커서 활발히 연구되고 있는 분야이다. Recently, as the use of portable terminals such as mobile phones, PDAs, smart phones, tablet PCs, and the like has become commonplace, portable terminals having various additional services and functions have been developed. Among these additional services and functions, a location information providing technology has been developed to measure the location of a mobile terminal and provide it. Since the technology of measuring the location of a mobile terminal can be used in conjunction with other services, it is very useful for its research. It is becoming a field.

이러한 위치정보 제공 기술의 하나로 연구되고 있는 것이 증강현실(Augmented Reality) 기술이다. 증강현실 기술은 가상현실 기술에서 파생된 기술로서, 실세계에 대한 인지도를 향상시키는 기술을 말한다. 실세계와의 상호작용을 배제하고 오직 미리 구축해놓은 가상공간 내에서의 상호작용을 처리하는 가상현실 기술과는 달리, 증강현실 기술은 실시간 처리를 바탕으로 미리 구축된 실세계 정보가 특수 인터페이스를 통해 실제로 관찰되는 실세계의 영상에 겹쳐서 표현되고, 실제와의 상호작용을 제공하도록 함으로써, 관찰자가 실세계 관찰지역에 대한 신속하고 편리한 상황판단을 할 수 있도록 하는 기술이다.One such location information providing technology is being researched in Augmented Reality technology. Augmented reality technology is a technology derived from virtual reality technology, and refers to a technology for improving the awareness of the real world. Unlike virtual reality technology, which excludes interaction with the real world and handles interactions only in the pre-established virtual space, augmented reality technology actually monitors real-time information pre-built based on real-time processing through a special interface. It is a technology that allows the observer to make a quick and convenient situation judgment on the real world observation area by superimposing the real world image and providing interaction with the real world.

한편, 기존의 광고 및 정보 제공 서비스들은, 불특정 고객을 대상으로 하는 일방적인 광고나 정보를 제공하였으나, 이러한 일방적인 광고나 정보의 효용성이 떨어짐에 따라, 점차 사용자의 상황이나 필요에 부합되는 광고나 정보의 제공에 대한 필요성이 증가하고 있다.Meanwhile, the existing advertisement and information providing services provided unilateral advertisements or information for unspecified customers, but as the utility of such unilateral advertisements and information is less effective, the advertisements and information provisions gradually meet the user's situation or needs. There is a growing need for the provision of information.

이처럼 사용자의 상황이나 필요에 부합되는 광고나 정보 제공을 수행하기 위해서, 광고나 정보 제공을 사용자의 위치를 고려해서 하거나, 더불어 고객에게 광고나 정보 제공을 자발적으로 선택하는 경우에는 이에 대한 보상으로 포인트를 적립시켜주는 형태의 서비스가 필요하다.In order to provide advertisements or information in accordance with the user's situation or needs in consideration of the user's location, or to voluntarily choose to provide advertisements or information to customers, rewards are given. You need a form of service that earns you money.

본 발명이 이루고자 하는 기술적 과제는, 증강현실 기반의 인터페이스를 통해, 사용자의 위치와 근접한 장소에서 제공되는 상품 혹은 서비스에 대응되는 AR(augment reality) 객체를 제공하고, 사용자가 이를 선택하여 사용자 계정에 저장함으로써, 선택된 AR 객체에 대응하는 상품 혹은 서비스의 홍보 목적으로 발행된 포인트, 광고 및 쿠폰을 사용자에게 제공하는 휴대용 단말 장치, 증강현실 서비스 시스템 및 증강현실 서비스 제공방법을 제공하는 데에 있다.The technical problem to be achieved by the present invention is to provide an AR (augment reality) object corresponding to a product or service provided at a location close to the user's location through an augmented reality-based interface, the user selects it to the user account The present invention provides a portable terminal device, an augmented reality service system, and an augmented reality service providing method for providing a user with points, advertisements, and coupons issued for the purpose of promoting a product or service corresponding to the selected AR object.

상기의 기술적 과제를 이루기 위한, 본 발명에 의한, 휴대용 단말 장치는 현재 사용자의 위치 정보를 획득하는 위치정보획득부; 획득된 위치 정보를 증강현실 서비스 시스템에 전송하여 사용자의 위치와 기정의된 근접 범위 내에 있는 장소에서 제공되는 상품 혹은 서비스에 대응되는 적어도 하나 이상의 AR 객체들의 정보를 요청하고, 요청에 따라 적어도 하나 이상의 AR 객체들의 정보를 수신하는 시스템통신부; 및 수신된 AR 객체들의 정보를 기초로 구성한 증강현실 기반의 인터페이스를 통해 AR 객체들을 사용자에게 디스플레이하고, 디스플레이된 AR 객체들 중에서 사용자에게 선택된 적어도 하나 이상의 선택 AR 객체들을 입력받는 사용자인터페이스부를 포함하고, 시스템통신부는 증강현실 서비스 시스템과의 통신을 통해 선택 AR 객체들을 증강현실 서비스 시스템에서 사용자에게 할당된 사용자 계정에 저장한다.According to an aspect of the present invention, there is provided a portable terminal device comprising: a location information acquisition unit for obtaining location information of a current user; Sending the acquired location information to the AR service system to request information on at least one AR object corresponding to a product or service provided at a location within a predetermined proximity to the user's location, and at least one or more according to the request. System communication unit for receiving information of the AR objects; And a user interface unit configured to display AR objects to a user through an augmented reality based interface configured based on the information of the received AR objects, and to receive at least one selected AR objects selected by the user among the displayed AR objects. The system communication unit stores the selected AR objects in a user account assigned to the user in the augmented reality service system through communication with the augmented reality service system.

보다 바람직하게는, AR 객체는 기정의된 환산비율에 따라 전자상품권, 전자쿠폰, 전자화폐 및 증강현실 서비스 시스템과 다른 시스템 상에서 적립되는 마일리지 중 적어도 하나 이상과 교환 가능한 포인트, AR 객체에 대응하는 상품 혹은 서비스를 제공하는 장소의 광고 및 AR 객체에 대응하는 상품 혹은 서비스를 사용할 수 있는 쿠폰 중 적어도 하나 이상을 포함한다.More preferably, the AR object is a product corresponding to the AR object, which can be exchanged with at least one of electronic vouchers, electronic coupons, electronic money and mileages earned on the AR system and other systems according to a predetermined conversion ratio. Or at least one of an advertisement of a place providing a service and a coupon for using a product or a service corresponding to the AR object.

보다 바람직하게는, AR 객체의 정보는 AR 객체의 식별자, 증강현실 상에서 위치할 좌표, 상품 혹은 서비스의 명칭, 상품 혹은 서비스의 카테고리, 상품 혹은 서비스를 제공하는 장소의 주소, 증강현실 상에서 디스플레이되는 대표 이미지를 포함한다.More preferably, the information of the AR object, the identifier of the AR object, the coordinates to be located on the augmented reality, the name of the product or service, the category of the product or service, the address of the place providing the product or service, the representative displayed on the augmented reality Contains an image.

보다 바람직하게는, 실시간 영상을 획득하는 영상 센서를 더 포함하고, 사용자인터페이스부는 영상 센서를 통해 획득된 실시간 영상 상에서 AR 객체의 대표 이미지를 디스플레이하고, 사용자가 디스플레이된 AR 객체의 대표 이미지를 클릭하면 AR 객체의 정보를 디스플레이한다.More preferably, further comprising an image sensor for obtaining a real-time image, the user interface unit displays a representative image of the AR object on the real-time image obtained through the image sensor, when the user clicks the representative image of the displayed AR object Display information about the AR object.

보다 바람직하게는, 선택 AR 객체들은 사용자가 클릭한 대표이미지의 AR 객체를 포함한다.More preferably, the selection AR objects include the AR object of the representative image clicked by the user.

상기의 기술적 과제를 이루기 위한, 본 발명에 의한, 휴대용 단말에서의 증강현실 서비스 제공방법은 현재 사용자의 위치 정보를 획득하는 단계; 획득된 위치 정보를 증강현실 서비스 시스템에 전송하여 사용자의 위치와 기정의된 근접 범위 내에 있는 장소에서 제공되는 상품 혹은 서비스에 대응되는 적어도 하나 이상의 AR 객체들의 정보를 요청하는 단계; 요청에 따라 적어도 하나 이상의 AR 객체들의 정보를 수신하는 단계; 수신된 AR 객체들의 정보를 기초로 구성한 증강현실 기반의 인터페이스를 통해 AR 객체들을 사용자에게 디스플레이하는 디스플레이단계; 디스플레이된 AR 객체들 중에서 사용자에게 선택된 선택 AR 객체들을 입력받는 입력단계; 및 증강현실 서비스 시스템과의 통신을 통해 선택 AR 객체들을 증강현실 서비스 시스템에서 사용자에게 할당된 사용자 계정에 저장하는 단계를 포함한다.In order to achieve the above technical problem, according to the present invention, a method for providing augmented reality service in a portable terminal includes: obtaining location information of a current user; Transmitting the obtained location information to the AR service system and requesting information on at least one AR object corresponding to a product or a service provided at a location within a predetermined proximity range of the user; Receiving information of at least one AR object according to a request; A display step of displaying AR objects to a user through an augmented reality based interface configured based on the received AR objects; An input step of receiving selected AR objects selected by a user from among the displayed AR objects; And storing the selected AR objects in a user account assigned to the user in the augmented reality service system through communication with the augmented reality service system.

보다 바람직하게는, AR 객체는 기정의된 환산비율에 따라 전자상품권, 전자쿠폰, 전자화폐 및 증강현실 서비스 시스템과 다른 시스템 상에서 적립되는 마일리지 중 적어도 하나 이상과 교환 가능한 포인트, AR 객체에 대응하는 상품 혹은 서비스를 제공하는 장소의 광고 및 AR 객체에 대응하는 상품 혹은 서비스를 사용할 수 있는 쿠폰 중 적어도 하나 이상을 포함한다.More preferably, the AR object is a product corresponding to the AR object, which can be exchanged with at least one of electronic vouchers, electronic coupons, electronic money and mileages earned on the AR system and other systems according to a predetermined conversion ratio. Or at least one of an advertisement of a place providing a service and a coupon for using a product or a service corresponding to the AR object.

보다 바람직하게는, AR 객체의 정보는 AR 객체의 식별자, 증강현실 상에서 위치할 좌표, 상품 혹은 서비스의 명칭, 상품 혹은 서비스의 카테고리, 상품 혹은 서비스를 제공하는 장소의 주소, 증강현실 상에서 디스플레이되는 대표 이미지를 포함한다.More preferably, the information of the AR object, the identifier of the AR object, the coordinates to be located on the augmented reality, the name of the product or service, the category of the product or service, the address of the place providing the product or service, the representative displayed on the augmented reality Contains an image.

보다 바람직하게는, 실시간 영상을 획득하는 영상 센서를 더 포함하고, 디스플레이단계는 영상 센서를 통해 획득된 실시간 영상 상에서 AR 객체의 대표 이미지를 디스플레이하는 단계; 및 사용자가 디스플레이된 AR 객체의 대표 이미지를 클릭하면, 클릭한 대표이미지의 AR 객체의 정보를 디스플레이하는 단계를 포함한다.More preferably, further comprising an image sensor for obtaining a real-time image, the display step comprises the steps of: displaying a representative image of the AR object on the real-time image obtained through the image sensor; And when the user clicks on the representative image of the displayed AR object, displaying information on the AR object of the clicked representative image.

보다 바람직하게는, 선택 AR 객체들은 클릭한 대표이미지의 AR 객체를 포함한다.More preferably, the selection AR objects include the AR object of the clicked representative image.

상기의 기술적 과제를 이루기 위한, 본 발명에 의한, 증강현실 서비스 제공 시스템은 사용자의 위치 정보를 기초로 사용자의 위치와 기정의된 근접 범위 내에 있는 장소에서 제공되는 상품 혹은 서비스에 대응되는 적어도 하나 이상의 AR 객체들을 추출하는 AR객체추출부; 단말로부터 사용자의 위치 정보를 수신하고, 추출된 AR 객체들의 정보를 단말에 전송하여 단말의 증강현실 기반의 인터페이스를 통해 추출된 AR 객체들의 정보를 사용자에게 제공하고, 사용자가 제공된 AR 객체들 중에 선택한 선택 AR 객체들을 선택 AR 객체들을 단말로부터 입력받는 단말통신부; 및 선택 AR 객체들을 사용자에게 할당된 사용자 계정에 저장하는 AR객체관리부를 포함한다.In order to achieve the above technical problem, according to the present invention, the augmented reality service providing system based on the location information of the user at least one or more corresponding to the goods or services provided at a location within the predetermined proximity range An AR object extracting unit for extracting AR objects; Receives the user's location information from the terminal, transmits the information of the extracted AR objects to the terminal to provide the user with the information of the AR objects extracted through the augmented reality-based interface of the terminal, the user selected from among the provided AR objects A terminal communication unit configured to receive the selection AR objects from the terminal; And an AR object manager that stores the selected AR objects in a user account assigned to the user.

보다 바람직하게는, AR 객체의 정보는 AR 객체의 식별자, 증강현실 상에서 위치할 좌표, 상품 혹은 서비스의 명칭, 상품 혹은 서비스의 카테고리, 상품 혹은 서비스를 제공하는 장소의 주소 및 증강현실 상에서 디스플레이되는 대표 이미지를 포함한다.More preferably, the information of the AR object is the identifier of the AR object, the coordinates to be located on the augmented reality, the name of the product or service, the category of the product or service, the address of the place providing the product or service and the representative displayed on the augmented reality Contains an image.

보다 바람직하게는, AR 객체는 기정의된 환산비율에 따라 전자상품권, 전자쿠폰, 전자화폐 및 증강현실 서비스 시스템과 다른 시스템 상에서 적립되는 마일리지 중 적어도 하나 이상과 교환가능한 포인트, AR 객체에 대응하는 상품 혹은 서비스를 제공하는 장소의 광고 및 AR 객체에 대응하는 상품 혹은 서비스를 사용할 수 있는 쿠폰 중 적어도 하나 이상을 포함한다.More preferably, the AR object is a product corresponding to the AR object, points exchangeable with at least one of electronic vouchers, electronic coupons, electronic money, and a mileage earned on the augmented reality service system and other systems according to a predetermined conversion ratio. Or at least one of an advertisement of a place providing a service and a coupon for using a product or a service corresponding to the AR object.

보다 바람직하게는, AR객체관리부는 선택AR 객체들의 포인트를 사용자 계정에 기저장된 누적 포인트에 합산한다.More preferably, the AR object manager adds the points of the selected AR objects to the accumulated points previously stored in the user account.

보다 바람직하게는, AR객체추출부는 사용자의 위치 정보 및 상품 혹은 서비스를 제공하는 장소의 주소를 기초로 AR 객체를 추출한다.More preferably, the AR object extracting unit extracts an AR object based on the location information of the user and the address of the place providing the product or service.

상기의 기술적 과제를 이루기 위한, 본 발명에 의한, 증강현실 서비스 제공 방법은 단말로부터 사용자의 위치 정보를 수신하는 단계; 수신된 위치 정보를 기초로, 사용자의 위치와 기정의된 근접 범위 내에 있는 장소에서 제공되는 상품 혹은 서비스에 대응되는 적어도 하나 이상의 AR 객체들을 추출하는 AR객체추출단계; 추출된 AR 객체들의 정보를 단말에 전송하여 단말의 증강현실 기반의 인터페이스를 통해 추출된 AR 객체들의 정보를 사용자에게 제공하는 단계; 사용자가 제공된 AR 객체들 중에 선택한 선택 AR 객체들을 단말로부터 입력받는 단계; 및 선택 AR 객체들을 사용자에게 할당된 사용자 계정에 저장하는 AR객체저장단계를 포함한다.In accordance with an aspect of the present invention, there is provided a method for providing augmented reality service, the method comprising: receiving location information of a user from a terminal; An AR object extraction step of extracting at least one or more AR objects corresponding to a product or a service provided at a location within a predetermined proximity range with a user's location based on the received location information; Transmitting information of the extracted AR objects to the terminal and providing the user with the information of the extracted AR objects through the augmented reality based interface of the terminal; Receiving selection AR objects selected from among AR objects provided by a user from a terminal; And an AR object storing step of storing the selected AR objects in a user account assigned to the user.

보다 바람직하게는, AR 객체의 정보는 AR 객체의 식별자, 증강현실 상에서 위치할 좌표, 상품 혹은 서비스의 명칭, 상품 혹은 서비스의 카테고리, 상품 혹은 서비스를 제공하는 장소의 주소 및 증강현실 상에서 디스플레이되는 대표 이미지를 포함한다.More preferably, the information of the AR object is the identifier of the AR object, the coordinates to be located on the augmented reality, the name of the product or service, the category of the product or service, the address of the place providing the product or service and the representative displayed on the augmented reality Contains an image.

보다 바람직하게는, AR 객체는 기정의된 환산비율에 따라 전자상품권, 전자쿠폰, 전자화폐 및 증강현실 서비스 시스템과 다른 시스템 상에서 적립되는 마일리지 중 적어도 하나 이상과 교환가능한 포인트, AR 객체에 대응하는 상품 혹은 서비스를 제공하는 장소의 광고 및 AR 객체에 대응하는 상품 혹은 서비스를 사용할 수 있는 쿠폰 중 적어도 하나 이상을 포함한다.More preferably, the AR object is a product corresponding to the AR object, points exchangeable with at least one of electronic vouchers, electronic coupons, electronic money, and a mileage earned on the augmented reality service system and other systems according to a predetermined conversion ratio. Or at least one of an advertisement of a place providing a service and a coupon for using a product or a service corresponding to the AR object.

보다 바람직하게는, AR객체저장단계는 선택AR 객체들의 포인트를 사용자 계정에 기저장된 누적 포인트에 합산하는 단계를 포함한다.More preferably, the AR object storage step includes summing points of selected AR objects to accumulated points previously stored in the user account.

보다 바람직하게는, AR객체추출단계는 사용자의 위치 정보 및 상품 혹은 서비스를 제공하는 장소의 주소를 기초로 AR 객체를 추출하는 단계를 포함한다.More preferably, the AR object extraction step includes the step of extracting the AR object based on the user's location information and the address of the place providing the product or service.

본 발명에 의하면, 휴대용 단말기 상에 구현되는 증강현실 기반의 인터페이스를 통해 사용자가 AR 객체의 정보를 보고, AR 객체를 선택하여, AR 객체에 대응하는 상품 혹은 서비스를 제공하는 장소에서 상품 혹은 서비스의 홍보 목적으로 발행한 포인트, 광고 및 쿠폰을 제공받을 수 있다.According to the present invention, a user may view information of an AR object, select an AR object, and provide a product or service corresponding to the AR object through an augmented reality based interface implemented on a portable terminal. Points, advertisements and coupons issued for promotional purposes may be provided.

도 1은 본 발명의 바람직한 일실시예에 따른 증강현실 서비스를 제공하기 위한 휴대용 단말장치와, 증강현실 서비스 시스템의 구조를 도시한 블록도이다.
도 2는 본 발명의 바람직한 일 실시예에 따른 휴대용 단말 장치에서 증강현실 서비스를 제공하는 방법을 도시한 흐름도이다.
도 3은 본 발명의 바람직한 일 실시예에 따른 증강현실 서비스 시스템에서 증강현실 서비스를 제공하는 방법을 도시한 흐름도이다.
도 4는 본 발명의 바람직한 일 실시예에 따른 증강현실 서비스 시스템을 통해 휴대용 단말의 사용자에게 AR 객체가 제공되는 일련의 과정을 도시한 도면이다.
도 5는 본 발명의 바람직한 일 실시예에 따른 휴대용 단말 장치의 일 예인 스마트폰을 통해 증강현실 서비스 시스템에서 사용자가 선택한 AR 객체의 포인트로 전자 상품권을 결제하는 일련의 과정을 도시한 도면이다.
도 6은 본 발명의 바람직한 일 실시예에 따른 휴대용 단말 장치의 일 예인 스마트폰을 통해 증강현실 서비스 시스템에서 사용자가 선택한 AR 객체의 포인트를 멤버쉽 마일리지 서버의 마일리지와 교환하는 일련의 과정을 도시한 도면이다.
1 is a block diagram illustrating a structure of a portable terminal device and an augmented reality service system for providing an augmented reality service according to an embodiment of the present invention.
2 is a flowchart illustrating a method of providing an augmented reality service in a portable terminal device according to an embodiment of the present invention.
3 is a flowchart illustrating a method of providing an augmented reality service in an augmented reality service system according to an exemplary embodiment of the present invention.
4 is a diagram illustrating a series of processes in which an AR object is provided to a user of a portable terminal through an augmented reality service system according to an exemplary embodiment of the present invention.
FIG. 5 is a diagram illustrating a series of processes for paying an electronic voucher to a point of an AR object selected by a user in an augmented reality service system through a smartphone, which is an example of a portable terminal device according to an exemplary embodiment of the present invention.
FIG. 6 is a diagram illustrating a series of processes of exchanging points of an AR object selected by a user with a mileage of a membership mileage server through a smartphone, which is an example of a portable terminal device according to an exemplary embodiment of the present invention. to be.

이하의 내용은 단지 본 발명의 원리를 예시한다. 그러므로 당업자는 비록 본 명세서에 명확히 설명되거나 도시되지 않았지만 본 발명의 원리를 구현하고 본 발명의 개념과 범위에 포함된 다양한 장치를 발명할 수 있는 것이다. 또한, 본 명세서에 열거된 모든 조건부 용어 및 실시예들은 원칙적으로, 본 발명의 개념이 이해되도록 하기 위한 목적으로만 명백히 의도되고, 이와 같이 특별히 열거된 실시예들 및 상태들에 제한적이지 않는 것으로 이해되어야 한다. 또한, 본 발명의 원리, 관점 및 실시예들 뿐만 아니라 특정 실시예를 열거하는 모든 상세한 설명은 이러한 사항의 구조적 및 기능적 균등물을 포함하도록 의도되는 것으로 이해되어야 한다. 또한, 이러한 균등물들은 현재 공지된 균등물뿐만 아니라 장래에 개발될 균등물 즉 구조와 무관하게 동일한 기능을 수행하도록 발명된 모든 소자를 포함하는 것으로 이해되어야 한다. The following merely illustrates the principles of the invention. Thus, those skilled in the art will be able to devise various apparatuses which, although not explicitly described or shown herein, embody the principles of the invention and are included in the concept and scope of the invention. Furthermore, all of the conditional terms and embodiments listed herein are, in principle, intended only for the purpose of enabling understanding of the concepts of the present invention, and are not intended to be limiting in any way to the specifically listed embodiments and conditions . It is also to be understood that the detailed description, as well as the principles, aspects and embodiments of the invention, as well as specific embodiments thereof, are intended to cover structural and functional equivalents thereof. In addition, these equivalents should be understood to include not only equivalents now known, but also equivalents to be developed in the future, that is, all devices invented to perform the same function regardless of structure.

따라서, 프로세서 또는 이와 유사한 개념으로 표시된 기능 블럭을 포함하는 도면에 도시된 다양한 소자의 기능은 전용 하드웨어뿐만 아니라 적절한 소프트웨어와 관련하여 소프트웨어를 실행할 능력을 가진 하드웨어의 사용으로 제공될 수 있다. 프로세서에 의해 제공될 때, 기능은 단일 전용 프로세서, 단일 공유 프로세서 또는 복수의 개별적 프로세서에 의해 제공될 수 있고, 이들 중 일부는 공유될 수 있다. 또한, 프로세서, 제어 또는 이와 유사한 개념으로 제시되는 용어의 사용은 소프트웨어를 실행할 능력을 가진 하드웨어를 배타적으로 인용하여 해석되어서는 아니 되고, 제한 없이 디지털 신호 프로세서(DSP) 하드웨어, 소프트웨어를 저장하기 위한 롬(ROM), 램(RAM) 및 비휘발성 메모리를 암시적으로 포함하는 것으로 이해되어야 한다. 주지 관용의 다른 하드웨어도 포함될 수 있다. Thus, the functionality of the various elements shown in the figures, including functional blocks represented by a processor or similar concept, can be provided by the use of dedicated hardware as well as hardware capable of executing software in conjunction with appropriate software. When provided by a processor, the functions may be provided by a single dedicated processor, a single shared processor, or a plurality of individual processors, some of which may be shared. Also, the use of terms such as processor, control, or similar concepts should not be construed as exclusive reference to hardware capable of executing software, but may include, without limitation, digital signal processor (DSP) hardware, (ROM), random access memory (RAM), and non-volatile memory. Other hardware may also be included.

상술한 목적, 특징 및 장점들은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 더욱 분명해 질 것이다. 본 발명을 설명함에 있어서, 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략하거나 간략하게 설명하는 것으로 한다. The above objects, features and advantages will become more apparent from the following detailed description in conjunction with the accompanying drawings. DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, the present invention will be described in detail with reference to the accompanying drawings.

한편 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라, 다른 구성요소를 더 포함할 수 있는 것을 의미한다.On the other hand, when an element is referred to as "including " an element, it does not exclude other elements unless specifically stated to the contrary.

본 명세서에서, 기재한 모듈(module)이란 용어는 특정한 기능이나 동작을 처리하는 하나의 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현할 수 있다.In the present specification, the term module is used to mean a unit for processing a specific function or operation, which may be implemented in hardware or software, or a combination of hardware and software.

이하, 첨부된 도면을 참조하여 바람직한 실시예에 따른 본 발명을 상세히 설명하기로 한다. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 바람직한 일실시예에 따른 증강현실 서비스를 제공하기 위한 휴대용 단말장치와, 증강현실 서비스 시스템의 구조를 도시한 블록도이다.1 is a block diagram illustrating a structure of a portable terminal device and an augmented reality service system for providing an augmented reality service according to an embodiment of the present invention.

도 1을 참조하면, 본 실시예는 사용자에게 증강현실 서비스를 제공하기 위해서, 휴대용 단말 장치(110) 및 증강현실 서비스 시스템(120)을 구비하여 구성된다.Referring to FIG. 1, the present embodiment includes a portable terminal device 110 and an augmented reality service system 120 to provide an augmented reality service to a user.

본 실시예에 따른 휴대용 단말 장치(110)은 위치정보획득부(111), 시스템통신부(112), 사용자인터페이스부(113), 영상센서(114)를 구비하여 구성된다.The portable terminal device 110 according to the present exemplary embodiment includes a location information acquisition unit 111, a system communication unit 112, a user interface unit 113, and an image sensor 114.

휴대용 단말 장치(110)로는 스마트폰, 태블릿 PC, UMPC(Ultra Mobile PC), 휴대폰, PDA와 같이, 증강현실 기반의 인터페이스를 제공하는 모듈을 탑재할 수 있는 소형 단말기가 바람직하나, 휴대용 단말장치(110)의 종류가 이에 한정되지 아니함은 물론이다.The portable terminal device 110 is preferably a small terminal that can be equipped with a module that provides an augmented reality-based interface, such as a smartphone, a tablet PC, a UMPC (Ultra Mobile PC), a mobile phone, and a PDA. Of course, the type 110 is not limited thereto.

위치정보획득부(111)는 사용자가 현재 휴대용 단말 장치를 사용하고 있는 위치를 획득하는 구성요소로써, 일반적으로 GPS, WiFi, CDMA 방식 중 하나 또는 둘 이상의 방식을 혼용하여 사용할 수 있다. GPS 방식의 경우에는 GPS 위성과의 통신을 통해 위치 정보를 생성하고, WiFi 방식의 경우 무선 AP와의 통신을 통해 위치 정보를 생성하며, CDMA 방식의 경우에는 셀타워와의 통신을 통해 위치 정보를 생성한다. 또한, 나침반이나 자이로 센서 등을 통해 사용자의 방향이나 자세 등을 측정하여 위치 정보에 포함시킬 수도 있다. 이러한 위치 정보를 측정하는 방식은 하나의 실시예에 불과하며, 본 발명은 이에 한정되지 않는다.The location information acquisition unit 111 is a component for acquiring a location where a user currently uses a portable terminal device. In general, the location information acquisition unit 111 may use one or two or more of GPS, WiFi, and CDMA methods. In the case of the GPS method, location information is generated through communication with a GPS satellite, in the case of the WiFi method, location information is generated through communication with a wireless AP, and in the case of the CDMA method, location information is generated through communication with a cell tower. do. In addition, the direction or posture of the user may be measured and included in the location information through a compass or a gyro sensor. The method of measuring the location information is only one embodiment, and the present invention is not limited thereto.

시스템통신부(112)는 증강현실 서비스를 제공받기 위해서 증강현실 서비스 시스템(120)에 무선 통신망을 통해 접속하여 증강현실 시스템과 통신을 통해 AR 객체들의 정보 등을 송수신하는 구성요소이다.The system communication unit 112 is a component that connects to the augmented reality service system 120 through a wireless communication network in order to receive augmented reality service, and transmits and receives information about AR objects through communication with the augmented reality system.

시스템통신부(112)는 위치정보획득부(111)에서 획득한 위치 정보를 증강현실 서비스 시스템(120)에 전송함으로써, 현재 사용자의 위치와 근접한 장소에서 제공되는 상품/서비스에 대응되는 적어도 하나 이상의 AR 객체들의 정보를 요청한다.The system communication unit 112 transmits the location information acquired by the location information acquisition unit 111 to the augmented reality service system 120, so that at least one AR corresponding to a product / service provided at a location close to the current user's location is provided. Request information about objects.

AR 객체는 AR 객체에 대응하는 상품/서비스를 제공하는 장소에서 상품 혹은 서비스의 홍보 목적으로 발행한 것으로 포인트, 광고 및 쿠폰 중 적어도 하나를 포함하여 구현될 수 있다.The AR object is issued for the purpose of promoting a product or service at a place that provides a product / service corresponding to the AR object, and may include at least one of a point, an advertisement, and a coupon.

포인트는 기정의된 환산비율(Exchange Rate)에 따라 전자상품권, 전자쿠폰, 전자화폐 및 증강현실 서비스 시스템(120)과 다른 시스템 상에서 적립되는 마일리지 중 적어도 하나 이상과 교환가능한 수단이고, 광고는 AR 객체에 대응하는 상품/서비스를 제공하는 장소를 사용자에게 홍보/광고하는 수단이고, 쿠폰은 AR 객체에 대응하는 상품을 구매하거나 서비스를 이용하는 데에 사용할 수 있는 일종의 결재 수단이다.Points are a means of redeeming at least one or more of electronic vouchers, electronic coupons, electronic money and mileage earned on the augmented reality service system 120 and other systems in accordance with a predefined exchange rate, and the advertisement is an AR object. Means to promote / advertise a place that provides a product / service corresponding to the user, and a coupon is a kind of payment means that can be used to purchase a product corresponding to an AR object or use a service.

여기에서 환산비율이란, 포인트 1단위에 해당하는 가격 액수 즉, 교환단위로 설정되며, 사전에 고정된 값으로 정의되어 있는 것이 일반적이나, 변동환율과 같이, 거래 현황에 따라 동적으로 변동되도록 설정될 수도 있다.Here, the conversion ratio is set in an amount of price corresponding to one point of a point, that is, an exchange unit, and is generally defined as a fixed value. However, the conversion ratio may be set to change dynamically according to the transaction status, such as a variable exchange rate. It may be.

본 실시예에서, 각 AR 객체에 포함되는 포인트의 양은 동일하게 할당될 필요는 없으며, 각 AR 객체에 대응하는 상품/서비스를 제공하는 장소 즉, 각 점포나 기업에서 본 증강 현실 서비스를 위해 지출하는 비용에 따라 서로 달리 할당될 수 있다.In the present embodiment, the amount of points included in each AR object does not need to be equally allocated, but is a place for providing goods / services corresponding to each AR object, that is, spending for augmented reality service viewed by each store or company. They can be allocated differently depending on the cost.

시스템통신부(112)에서 요청할 AR 객체들에 대응하는 상품/서비스를 제공하는 장소와 현재 사용자의 위치와 근접한 정도를 한정하는 근접 범위는 증강현실 서비스 시스템(120)에 미리 설정되어 있는 것이 일반적이나, 서비스 구현 예에 따라서는 사용자가 단말에서 설정하도록 구현될 수도 있을 것이다.Where the system / communication unit 112 provides the goods / services corresponding to the AR objects to request and the proximity range that limits the proximity of the current user location is generally set in advance in the augmented reality service system 120, According to the service implementation example, the user may be implemented to set in the terminal.

시스템통신부(112)는 증강현실 서비스 시스템(120)으로부터 적어도 하나 이상의 AR 객체들의 정보를 수신한다.The system communication unit 112 receives information of at least one AR object from the augmented reality service system 120.

시스템통신부(112)에서 수신되는 AR 객체의 정보로는 AR 객체의 식별자(Identifier), 증강현실 상에서 위치할 좌표, 상품/서비스의 명칭, 상품/서비스의 카테고리, 상품/서비스를 제공하는 장소의 주소, 증강현실 상에서 AR 객체를 나타내기 위해 디스플레이되는 대표 이미지 등을 포함할 수 있다.The AR object information received from the system communication unit 112 includes an identifier of the AR object, coordinates to be located in augmented reality, a name of a product / service, a category of a product / service, and an address of a place providing a product / service. The representative image may be displayed to represent an AR object on augmented reality.

시스템통신부(112)는 현재 사용자의 위치와 기정의된 근접 범위 내에 있는 장소에서 제공되는 상품 혹은 서비스에 대응되는 적어도 하나 이상의 AR 객체들의 정보를 요청하고, 요청에 따라 적어도 하나 이상의 AR 객체들의 정보를 수신한다.The system communication unit 112 requests information of at least one AR object corresponding to a product or service provided at a location within a predetermined proximity range with a current user's location, and requests information on at least one AR object according to the request. Receive.

사용자인터페이스부(113)은 사용자에게 AR 객체들을 디스플레이하고, 이에 대한 사용자의 선택을 입력받기 위한 구성요소로서, 본 실시예에서는, 시스템통신부(112)에 수신된 AR 객체들의 정보를 기초로 AR 객체를 사용자에게 디스플레이하기 위한 증강현실 기반의 인터페이스를 구성한다.The user interface unit 113 is an element for displaying AR objects to a user and receiving a user's selection thereof. In this embodiment, the AR object is based on information of AR objects received by the system communication unit 112. Configure augmented reality-based interface for displaying to the user.

그리고, 사용자인터페이스부(113)는 증강현실 기반의 인터페이스를 통해 디스플레이된 AR 객체들 중에서 사용자의 선택을 받은 적어도 하나 이상의 선택 AR 객체들을 입력받는다.The user interface 113 receives at least one selected AR object selected by a user from among AR objects displayed through the AR-based interface.

영상 센서(114)는 실시간 영상을 획득하는 구성으로, 증강현실 기반의 인터페이스를 구성하는 일 예로, 사용자인터페이스부(113)는 영상 센서(114)를 통해 획득된 실시간 영상에 AR 객체의 대표 이미지를 정합시켜서 디스플레이하고, 사용자가 디스플레이된 AR 객체의 대표 이미지를 클릭하면 AR 객체의 정보를 디스플레이하도록 증강현실 기반의 인터페이스를 구성할 수 있다.The image sensor 114 is a configuration for acquiring a real-time image. For example, the user interface unit 113 acquires a representative image of an AR object in a real-time image obtained through the image sensor 114. The augmented reality-based interface may be configured to display the information of the AR object by matching and displaying the information and when the user clicks on the representative image of the displayed AR object.

이때, 사용자의 선택을 입력받는 방법의 일 예로, 사용자가 클릭한 대표이미지의 AR 객체를 사용자가 선택한 선택 AR 객체로 인식하도록 구현할 수 있다.In this case, as an example of a method for receiving a user's selection, the AR object of the representative image clicked by the user may be implemented to be recognized as the selected AR object selected by the user.

이때, AR 객체에 대응하는 상품 혹은 서비스의 홍보/광고 목적을 극대화하기 위해, AR 객체의 대표 이미지를 AR 객체에 대응하는 상품/서비스의 표장이나, 상품/서비스를 제공하는 장소 즉, 각 점포나 기업의 로고(Logo type)나 CI(Corporate Identity)를 포함하여 구성할 수 있을 것이다. In this case, in order to maximize the purpose of promoting / advertising a product or service corresponding to the AR object, a representative image of the AR object may be a mark of a product / service corresponding to the AR object or a place that provides a product / service, that is, each store or It may be configured to include a logo of a company or a corporate identity.

또는, 본 증강현실 서비스에 대한 사용자의 흥미를 유발하기 위해서, AR 객체의 대표 이미지를 몬스터 등과 같은 게임 캐릭터를 포함하여 구성할 수 있을 것이다.Alternatively, in order to induce a user's interest in the augmented reality service, the representative image of the AR object may be configured to include a game character such as a monster.

시스템통신부(112)는 이처럼 사용자 인터페이스부를 통해 입력된 선택 AR 객체들을 가리키는 신호(예컨대, 선택 AR 객체의 ID 리스트를 포함하는 신호)를 증강현실 서비스 시스템(120)에 전송하여, 증강현실 서비스 시스템(120)에서 해당 사용자에게 할당된 사용자 계정에 저장한다.The system communication unit 112 transmits a signal indicating the selected AR objects (for example, a signal including an ID list of the selected AR objects) input through the user interface unit to the augmented reality service system 120, thereby providing augmented reality service system ( In step 120), the data is stored in the user account assigned to the user.

본 실시예에 따른 증강현실 서비스 시스템 (120)는 AR객체추출부(121), 단말통신부(122), AR객체관리부(123), 데이터베이스(124)를 구비하여 구성된다.Augmented reality service system 120 according to the present embodiment is configured with an AR object extraction unit 121, the terminal communication unit 122, AR object management unit 123, database 124.

AR객체추출부(121)는 휴대용 단말 장치(110)로부터 수신한 사용자의 위치 정보를 기초로 사용자의 위치를 판단하고, 현재 사용자의 위치와 근접한 장소에서 제공되는 상품/서비스에 대응되는 적어도 하나 이상의 AR 객체들을 추출한다.The AR object extracting unit 121 determines the location of the user based on the location information of the user received from the portable terminal device 110, and at least one or more items corresponding to goods / services provided at a location close to the current location of the user. Extract the AR objects.

이 때에, AR객체추출부(121)는 사용자의 위치 정보와, AR 객체의 정보 중 상품 혹은 서비스를 제공하는 장소의 주소 정보를 비교하여 현재 사용자의 위치와 근접한지를 판단하여, AR 객체를 추출하도록 구현될 수 있다.At this time, the AR object extracting unit 121 compares the location information of the user with the address information of the place providing the product or service among the AR object information, and determines whether it is close to the current user's location to extract the AR object. Can be implemented.

또한, AR객체추출부(121)는 추출된 AR 객체의 개수가 기정의된 일정 개수 이상인 경우에는 추출된 AR 객체 중에서 일정 개수만큼의 AR 객체를 임의로 선택하도록 구현할 수 있다. 이는 휴대용 단말 장치(110)의 증강현실 인터페이스 상에서 디스플레이할 수 있는 AR 객체의 개수가 제한적일 수 있기 때문이다.In addition, the AR object extractor 121 may implement to arbitrarily select a predetermined number of AR objects from the extracted AR objects when the number of extracted AR objects is greater than or equal to a predetermined number. This is because the number of AR objects that can be displayed on the augmented reality interface of the portable terminal device 110 may be limited.

단말통신부(122)는 증강현실 서비스를 제공하기 위해서 무선 통신망을 통해 접속한 휴대용 단말 장치(110)와의 통신을 통해 AR 객체들의 정보 등을 송수신하는 구성요소이다.The terminal communication unit 122 is a component that transmits and receives information on AR objects and the like through communication with the portable terminal device 110 connected through a wireless communication network in order to provide augmented reality service.

단말통신부(122)는 휴대용 단말 장치(110)로부터 사용자의 위치 정보를 수신하여 AR객체추출부(121)에 전달하고, AR객체추출부(121)에서 추출된 AR 객체들의 정보를 휴대용 단말 장치(110)에 전송한다. 이를 통해, 휴대용 단말 장치(110)의 증강현실 기반의 인터페이스를 통해 AR객체추출부(121)에서 추출된 AR 객체들의 정보를 사용자에게 제공할 수 있게 한다.The terminal communication unit 122 receives the location information of the user from the portable terminal device 110 and transmits the location information to the AR object extractor 121, and transmits the information of the AR objects extracted from the AR object extractor 121 to the portable terminal device ( 110). Through this, the AR object extracted by the AR object extractor 121 may be provided to the user through the AR-based interface of the portable terminal device 110.

또한, 단말통신부(122)는 휴대용 단말 장치(110)의 증강현실 기반의 인터페이스를 통해 사용자로부터 선택된 선택 AR 객체들을 휴대용 단말 장치(110)로부터 무선 통신을 통해 입력받는다.In addition, the terminal communication unit 122 receives the selected AR objects selected by the user through the augmented reality-based interface of the portable terminal device 110 from the portable terminal device 110 via wireless communication.

AR객체관리부(123)는 단말통신부(122)에 입력된 선택 AR 객체들을 해당 사용자의 사용자 계정에 저장한다.The AR object management unit 123 stores the selected AR objects input to the terminal communication unit 122 in a user account of the corresponding user.

여기에서 사용자 계정이란, 데이터베이스(124) 상에서 사용자가 증강현실 서비스 상에서 선택한 AR 객체들을 저장하기 위해 사용자에게 할당된 공간을 의미하며, 사용자에게 적립된 포인트, 광고, 쿠폰 등이 저장된다.Here, the user account refers to a space allocated to the user for storing AR objects selected by the user on the augmented reality service on the database 124, and stores points, advertisements, coupons, and the like that are accumulated to the user.

AR객체관리부(123)는 선택 AR 객체들에 포함된 포인트는 사용자 계정에 기저장된 누적 포인트에 합산하는 방법으로 저장한다.The AR object manager 123 stores the points included in the selected AR objects by adding them to the accumulated points previously stored in the user account.

도 2는 본 발명의 바람직한 일 실시예에 따른 휴대용 단말 장치에서 증강현실 서비스를 제공하는 방법을 도시한 흐름도이다.2 is a flowchart illustrating a method of providing an augmented reality service in a portable terminal device according to an embodiment of the present invention.

도 2를 참조하면, 먼저, 현재 사용자의 위치 정보를 획득한다(S201).Referring to FIG. 2, first, location information of a current user is obtained (S201).

S201단계에서 획득된 위치 정보를 증강현실 서비스 시스템에 전송하여 사용자의 위치 정보에 대응되는 적어도 하나 이상의 AR 객체들의 정보를 요청한다(S202). The location information obtained in step S201 is transmitted to the augmented reality service system to request information on at least one AR object corresponding to the location information of the user (S202).

여기에서 사용자의 위치 정보에 대응되는 AR 객체는 사용자에게 현재 사용자의 위치에 근접한 장소에서 제공하는 상품/서비스를 증강현실 인터페이스 상에서 홍보/광고하기 위한 수단으로서 포인트, 광고 및 쿠폰 중 적어도 하나를 포함한다. 즉, AR 객체는 포함하는 홍보/광고 수단의 종류에 따라 포인트형, 광고형, 쿠폰형, 포인트-광고 복합형, 포인트-쿠폰 복합형, 쿠폰-광고 복합형 등으로 구분될 수 있다. Here, the AR object corresponding to the user's location information includes at least one of a point, an advertisement, and a coupon as a means for promoting / advertising on a Augmented Reality Interface a product / service provided to a user at a location close to the current user's location. . That is, the AR object may be classified into a point type, an advertisement type, a coupon type, a point-advertising complex type, a point-coupon complex type, a coupon-advertising complex type, and the like according to the type of the promotion / advertising means included.

S202단계에서의 요청에 따라 적어도 하나 이상의 AR 객체들의 정보를 리스트 형태로 수신한다(S203).In response to the request in step S202, information on at least one or more AR objects is received in the form of a list (S203).

휴대용 단말 장치(110)의 증강현실 인터페이스 상에서 디스플레이할 수 있는 AR 객체의 개수가 제한적일 수 있기 때문에 제한된 개수 이하의 AR 객체들의 정보만을 받도록 구현될 수 있다.Since the number of AR objects that can be displayed on the augmented reality interface of the portable terminal device 110 may be limited, the portable terminal device 110 may be implemented to receive only information on the AR objects of a limited number or less.

S203단계에서 수신된 AR 객체들의 정보를 기초로 구성한 증강현실 기반의 인터페이스를 통해 AR 객체들을 사용자에게 디스플레이한다(S204).The AR objects are displayed to the user through an augmented reality based interface configured based on the information of the AR objects received in step S203 (S204).

디스플레이된 AR 객체들 중에서 사용자로 하여금 AR 객체를 선택할 수 있도록 하여 사용자가 선택한 선택 AR 객체들을 입력받는다(S205).The user may select the AR object among the displayed AR objects to receive the selected AR objects selected by the user (S205).

S205단계에서 입력받은 선택 AR 객체들을 가리키는 신호(예컨대, 선택 AR 객체의 ID 리스트를 포함하는 신호)를 전송하는 등의 증강현실 서비스 시스템과의 통신을 통해 선택 AR 객체들을 증강현실 서비스 시스템에서 사용자에게 할당된 사용자 계정에 저장함으로써(S206), 사용자가 포인트를 적립받거나, 쿠폰을 추후에 사용할 수 있도록 한다.The selected AR objects are transmitted to the user in the AR service system through communication with the AR service system such as a signal indicating the selected AR objects (eg, a signal including an ID list of the selected AR objects) received in step S205. By storing in the assigned user account (S206), the user can earn points or use the coupon later.

그리고 사용자가 S204 단계에서 디스플레이된 AR 객체들을 모두 다 선택해서 소진한 경우에는 증강현실 서비스 시스템에 추가적으로 AR 객체들을 요청하여 S203~S206 과정을 반복할 수 있다.When the user selects and exhausts all of the AR objects displayed in step S204, the user may repeat the steps S203 to S206 by requesting additional AR objects to the AR service system.

여기에서 요청되는 AR 객체들은 사용자의 위치 정보에 대응되는 적어도 하나 이상의 객체 중 사용자에게 디스플레이되지 않거나, 사용자에 의해 아직 선택되지 않은 AR 객체들이 해당되는 것이 일반적일 것이나 본 발명이 이에 한정되지는 않는다.The AR objects requested here are generally ones of AR objects that are not displayed to the user or are not yet selected by the user among at least one or more objects corresponding to the location information of the user, but the present invention is not limited thereto.

도 3은 본 발명의 바람직한 일 실시예에 따른 증강현실 서비스 시스템에서 증강현실 서비스를 제공하는 방법을 도시한 흐름도이다.3 is a flowchart illustrating a method of providing an augmented reality service in an augmented reality service system according to an exemplary embodiment of the present invention.

도 3을 참조하면, 먼저, 단말로부터 사용자의 위치 정보를 수신한다(S301).Referring to FIG. 3, first, location information of a user is received from a terminal (S301).

S301 단계에서 수신된 위치 정보를 기초로, 사용자의 위치와 근접한 장소에서 제공되는 상품 혹은 서비스에 대응되는 적어도 하나 이상의 AR 객체들을 추출한다(S302). 이 때, 단말의 증강현실 인터페이스 상에서 디스플레이할 수 있는 AR 객체의 개수가 제한적일 수 있기 때문에 제한된 개수 이하의 AR 객체들만을 추출하도록 구현될 수 있다.Based on the location information received in step S301, at least one or more AR objects corresponding to goods or services provided at a place close to the user's location are extracted (S302). In this case, since the number of AR objects that can be displayed on the augmented reality interface of the terminal may be limited, it may be implemented to extract only AR objects having a limited number or less.

S302 단계에서 추출된 AR 객체들의 정보를 단말에 전송함으로써, 단말의 증강현실 기반의 인터페이스를 통해 S302단계에서 추출된 AR 객체들의 정보를 사용자에게 제공한다(S303).By transmitting the information of the AR objects extracted in step S302 to the terminal, the information of the AR objects extracted in step S302 is provided to the user through the augmented reality-based interface of the terminal (S303).

사용자가 S303 단계에서 제공된 AR 객체들 중 선택한 선택 AR 객체들을 단말로부터 입력받는다(S304). The user receives input of selected AR objects selected from among AR objects provided in operation S303 from the terminal (S304).

S304 단계에서 입력받은 선택 AR 객체들을 사용자에게 할당된 사용자 계정에 저장한다. 특히, 선택 AR 객체들 각각에 포함된 포인트들은 사용자 계정에 이미 저장되어 있는 누적 포인트에 모두 합산하는 방식으로 저장한다. 이를 통해 사용자는 이처럼 저장한 누적 포인트를 전자상품권, 전자쿠폰, 전자화폐 및 증강현실 서비스 시스템과 다른 시스템 상에서 적립되는 마일리지 중 적어도 하나 이상과 교환하는 방법으로 사용할 수 있게 된다.The selected AR objects received in step S304 are stored in the user account assigned to the user. In particular, the points included in each of the selected AR objects are stored in a manner of adding up all accumulated points already stored in the user account. Through this, the user can use the accumulated points in exchange for at least one of electronic vouchers, electronic coupons, electronic money, and a mileage earned on the augmented reality service system and other systems.

도 4는 본 발명의 바람직한 일 실시예에 따른 증강현실 서비스 시스템을 통해 휴대용 단말의 사용자에게 AR객체가 제공되는 일련의 과정을 도시한 도면이다.4 is a diagram illustrating a series of processes in which an AR object is provided to a user of a portable terminal through an augmented reality service system according to an exemplary embodiment of the present invention.

먼저, 휴대용 단말(410)은 현재 사용자의 위치 정보를 획득한다(S411).First, the portable terminal 410 obtains the location information of the current user (S411).

휴대용 단말(410)은 S411 단계에서 획득된 위치 정보를 증강현실 서비스 시스템(420)에 전송하여 사용자의 위치 정보에 대응되는 AR 객체들의 정보를 요청한다(S412). The portable terminal 410 transmits the location information obtained in step S411 to the augmented reality service system 420 and requests information on AR objects corresponding to the location information of the user (S412).

본 실시예에서, 사용자의 위치 정보에 대응되는 AR 객체들은, 사용자에게 현재 사용자의 위치에 근접한 장소에서 제공하는 상품/서비스를 증강현실 인터페이스 상에서 홍보/광고하기 위한 수단으로, 포인트, 광고 및 쿠폰 중 적어도 하나를 포함하도록 구성된다.In the present embodiment, the AR objects corresponding to the location information of the user are means for promoting / advertising on the augmented reality interface a product / service provided to the user at a location close to the current location of the user, among the points, advertisements, and coupons. It is configured to include at least one.

증강현실 서비스 시스템(420)은 S412 단계에서의 요청에 따라, 사용자의 위치 정보를 기초로 사용자와 근접한 장소의 상품/서비스에 대응되는 AR 객체들을 추출한다(S413).The augmented reality service system 420 extracts AR objects corresponding to goods / services of a place close to the user based on the location information of the user according to the request in step S412 (S413).

증강현실 서비스 시스템(420)은 S413 단계에서 추출된 AR 객체들의 정보를 리스트 형태로 전송한다(S414).The augmented reality service system 420 transmits the information of the AR objects extracted in step S413 in the form of a list (S414).

S414 단계에서 리스트 형태로 전송되는 AR 객체의 정보로는 AR 객체의 식별자(Identifier), 증강현실 상에서 위치할 좌표, 상품/서비스의 명칭, 상품/서비스의 카테고리, 상품/서비스를 제공하는 장소의 주소, 증강현실 상에서 AR 객체를 나타내기 위해 디스플레이되는 대표 이미지 등을 포함하여 구성된다.The information on the AR object transmitted in the form of a list in step S414 includes an identifier of the AR object, coordinates to be located in augmented reality, a name of a product / service, a category of a product / service, and an address of a place providing a product / service. And a representative image displayed to represent the AR object on the augmented reality.

휴대용 단말(410)은 S414 단계에서 수신한 AR 객체들의 정보를 기초로 구성한 증강현실 기반의 인터페이스를 통해 사용자의 위치에 대응되는 AR 객체들을 디스플레이한다(S415).The portable terminal 410 displays AR objects corresponding to the location of the user through the augmented reality based interface configured based on the information of the AR objects received in step S414 (S415).

휴대용 단말(410)은 S415 단계에서 디스플레이된 AR 객체들 중에서 사용자에게 선택된 선택 AR 객체들을 증강현실 기반의 인터페이스를 통해 입력받아(S416), 선택 AR 객체들을 가리키는 정보 예컨대, 선택 AR 객체의 ID 리스트를 포함하는 신호)를 증강현실 서비스 시스템(420)에 전송한다(S417).The portable terminal 410 receives the selected AR objects selected by the user from among the AR objects displayed in operation S415 through the AR-based interface (S416), and displays information indicating the selected AR objects, for example, an ID list of the selected AR objects. It includes a signal to transmit to the augmented reality service system 420 (S417).

증강현실 서비스 시스템(420)은 S417 단계에서 입력받은 선택 AR 객체들을 해당 사용자의 사용자 계정에 저장한다(S418). 특히, 선택 AR 객체들 각각에 포함된 포인트들은 사용자 계정에 이미 저장되어 있는 누적 포인트에 모두 합산하는 방식으로 저장한다. 이를 통해 사용자는 이처럼 저장한 누적 포인트를 전자상품권, 전자쿠폰, 전자화폐 및 증강현실 서비스 시스템과 다른 시스템 상에서 적립되는 마일리지 중 적어도 하나 이상과 교환하는 방법으로 사용할 수 있게 된다.The augmented reality service system 420 stores the selected AR objects input in step S417 to a user account of the corresponding user (S418). In particular, the points included in each of the selected AR objects are stored in a manner of adding up all accumulated points already stored in the user account. Through this, the user can use the accumulated points in exchange for at least one of electronic vouchers, electronic coupons, electronic money, and a mileage earned on the augmented reality service system and other systems.

증강현실 서비스 시스템은 S414 단계에서 전송한 AR 객체들을 사용자가 모두 다 선택해서 소진한 경우에는 휴대용 단말로부터 추가적인 요청을 받을 수 있으며, 이러한 경우에는 S413 내지 S418 과정을 반복할 수 있다.The augmented reality service system may receive an additional request from the portable terminal when all of the AR objects transmitted in step S414 are exhausted by the user, and in this case, steps S413 to S418 may be repeated.

여기에서 요청되는 AR 객체들은 사용자의 위치 정보에 대응되는 적어도 하나 이상의 객체 중 사용자에게 디스플레이되지 않거나, 사용자에 의해 아직 선택되지 않은 AR 객체들이 해당되는 것이 일반적일 것이나 본 발명이 이에 한정되지는 않는다.The AR objects requested here are generally ones of AR objects that are not displayed to the user or are not yet selected by the user among at least one or more objects corresponding to the location information of the user, but the present invention is not limited thereto.

이하에서는 이처럼 사용자 계정에 적립된 누적 포인트를 사용할 수 있는 서비스를 제공하는 과정에 대해서 보다 상세히 기술한다.Hereinafter, the process of providing a service that can use the accumulated points accumulated in the user account will be described in more detail.

도 5는 본 발명의 바람직한 일 실시예에 따른 휴대용 단말 장치의 일 예인 스마트폰을 통해 증강현실 서비스 시스템에서 사용자가 선택한 AR 객체의 포인트로 전자 상품권을 결제하는 일련의 과정을 도시한 도면이다.FIG. 5 is a diagram illustrating a series of processes for paying an electronic voucher to a point of an AR object selected by a user in an augmented reality service system through a smartphone, which is an example of a portable terminal device according to an exemplary embodiment of the present invention.

스마트폰(510)은 증강현실 서비스 시스템(520)에 적립된 포인트를 전자 상품권 발행 서버(530)에서 발행하는 전자 상품권과 교환하는 요청을 증강현실 서비스 시스템(520)에 전송한다(S501).The smartphone 510 transmits a request to the augmented reality service system 520 to exchange the points accumulated in the augmented reality service system 520 with an electronic gift certificate issued by the electronic gift certificate issuing server 530 (S501).

S501 단계의 교환 요청에는 구매할 전자 상품권의 종류 및 수량 등 전자 상품권 구매에 필요한 정보가 포함된다.The exchange request in step S501 includes information necessary for purchasing an electronic gift certificate, such as the type and quantity of electronic gift certificates to be purchased.

증강현실 서비스 시스템(520)은 S501 단계에서의 교환 요청에 따라 전자상품권을 결제하는 데에 필요한 포인트 양을 계산하여, 이를 사용자 계정에 적립된 누적 포인트에서 차감한다(S502). The augmented reality service system 520 calculates the amount of points required to pay the electronic voucher according to the exchange request in step S501, and subtracts it from the accumulated points accumulated in the user account (S502).

이 때, 전자상품권을 결제하는 데에 필요한 포인트 양을 계산하는 과정에서, 전자상품권의 가격에 상응하는 포인트 양은 기정의된 환산비율에 따라 결정된다.At this time, in the process of calculating the amount of points required to pay the electronic voucher, the amount of points corresponding to the price of the electronic voucher is determined according to the predetermined conversion ratio.

여기에서 환산비율(Exchange Rate)는 포인트 1단위에 해당하는 가격 액수 즉, 교환단위로 설정되며, 사전에 고정된 값으로 정의되어 있는 것이 일반적이나, 변동환율과 같이, 거래 현황에 따라 동적으로 변동되도록 설정될 수도 있다.In this case, the exchange rate is set in an amount of price corresponding to 1 point unit, that is, an exchange unit, and it is generally defined as a fixed value in advance, but dynamically changes according to the transaction status, such as a variable exchange rate. It may also be set to.

증강현실 서비스 시스템(520)은 S502 단계에서 결제된 전자상품권을 전자상품권발행서버(530)에 발행해달라는 요청을 전송한다(S503).The augmented reality service system 520 transmits a request to issue the electronic gift certificate issued in step S502 to the electronic gift certificate issuing server 530 (S503).

전자상품권발행서버(530)는 S503 단계의 요청에 따라 전자 상품권을 발행하여 증강현실 서비스 시스템(520)에 전달한다(S504).The electronic voucher issuing server 530 issues an electronic voucher according to the request of step S503 and transmits it to the augmented reality service system 520 (S504).

이 때, 발행된 전자 상품권은 일반적으로 URL 또는 이미지의 형태로 전달되며, 이 중 URL의 형태로 전달되는 경우에는 스마트폰(510)에서 별도로 해당 URL을 통해 전자상품권발행서버(530)에 접속하여 전자 상품권의 이미지 등을 다운받는 등의 방법으로 전자상품권을 제공하게 된다.At this time, the issued electronic voucher is generally delivered in the form of a URL or an image, of which, in the case of being delivered in the form of a URL, the smartphone 510 separately accesses the electronic voucher issuing server 530 through the corresponding URL. The electronic voucher is provided by a method such as downloading an image of the electronic voucher.

증강현실 서비스 시스템(520)은 S504 단계에서 전달받은 전자 상품권을 스마트폰(510)에 전달하고(S505), 스마트폰(510)은 전달받은 전자 상품권을 내장 혹은 외장으로 연결된 스토리지에 저장한다(S506) The augmented reality service system 520 transmits the electronic voucher received in step S504 to the smartphone 510 (S505), the smartphone 510 stores the received electronic voucher in the storage connected to the internal or external (S506). )

도 6은 본 발명의 바람직한 일 실시예에 따른 휴대용 단말 장치의 일 예인 스마트폰을 통해 증강현실 서비스 시스템에서 사용자가 선택한 AR 객체의 포인트를 멤버쉽 마일리지 서버의 마일리지와 교환하는 일련의 과정을 도시한 도면이다.FIG. 6 is a diagram illustrating a series of processes of exchanging points of an AR object selected by a user with a mileage of a membership mileage server through a smartphone, which is an example of a portable terminal device according to an exemplary embodiment of the present invention. to be.

스마트폰(610)은 증강현실 서비스 시스템(620)에 적립된 포인트와 증강현실 서비스 시스템과 별도의 멤버쉽 마일리지 서버의 마일리지를 교환해달라는 요청을 증강현실 서비스 시스템(620)에 전송한다(S601). The smartphone 610 transmits a request to the augmented reality service system 620 to exchange the points accumulated in the augmented reality service system 620 and the mileage of a separate membership mileage server with the augmented reality service system (S601).

S601 단계의 교환 요청에는 교환할 마일리지의 양 등 마일리지 교환에 필요한 정보가 포함된다.The exchange request in step S601 includes information required for mileage exchange, such as the amount of mileage to be exchanged.

증강현실 서비스 시스템(620)은 S601 단계에서의 교환 요청에 따라 교환을 원하는 마일리지의 양에 상응하는 포인트 양을 계산하여, 이를 사용자 계정에 적립된 누적 포인트에서 차감한다(S602). The augmented reality service system 620 calculates a point amount corresponding to the amount of mileage desired to be exchanged according to the exchange request in step S601, and subtracts it from the accumulated points accumulated in the user account (S602).

이 때, 마일리지의 양에 상응하는 포인트 양은 기정의된 환산비율에 따라 결정된다. 여기에서 환산비율(Exchange Rate)는 포인트 1단위에 해당하는 마일리지 단위수 즉, 교환단위로 설정되며, 사전에 고정된 값(예컨대, 1)으로 정의되어 있는 것이 일반적이나, 변동환율과 같이, 거래 현황에 따라 동적으로 변동되도록 설정될 수도 있다.At this time, the amount of points corresponding to the amount of mileage is determined according to the predetermined conversion ratio. In this case, the exchange rate is set in the number of mileage units corresponding to 1 point, that is, the exchange unit, and is generally defined as a fixed value (for example, 1). It may be set to change dynamically according to the present situation.

증강현실 서비스 시스템(620)은 멤버쉽 마일리지 서버(630)와 별개의 시스템이므로, 일단 멤버쉽 마일리지 서버(630)에 멤버쉽 회원 확인을 요청하여(S603), 사용자가 멤버쉽 마일리지 서버(630)의 멤버쉽 회원임을 확인받을 수 있다(S604).Since the augmented reality service system 620 is a separate system from the membership mileage server 630, once the membership mileage server 630 requests a membership membership confirmation (S603), the user is a membership member of the membership mileage server 630 It may be confirmed (S604).

본 실시예에서의 S602 단계와 S603 내지 S604의 과정은 상호간의 선후관계가 정해져 있는 것이 아니며, S603 내지 S604의 과정이 S602 단계에 앞서 수행되도록 구현될 수도 있다.In the present embodiment, the processes of steps S602 and S603 to S604 are not fixed to each other, and the processes of steps S603 to S604 may be implemented before the step S602.

증강현실 서비스 시스템(620)은 S604 단계에서 사용자가 멤버쉽 마일리지 서버(630)의 멤버쉽 회원인 경우에, 멤버쉽 마일리지 서버(630)에 교환을 원하는 양 만큼의 마일리지를 적립해달라는 요청을 전송한다(S605).If the user is a membership member of the membership mileage server 630 in step S604, the augmented reality service system 620 transmits a request to the membership mileage server 630 to accumulate the mileage of the desired amount (S605). ).

멤버쉽 마일리지 서버(630)는 S605 단계에서의 요청에 따른 마일리지 적립 결과를 증강현실 서비스 시스템(620)에 전달하고(S606), 증강현실 서비스 시스템(620)은 이를 스마트폰(610)에 전달하여(S607), 사용자가 이를 확인할 수 있게 한다.The membership mileage server 630 transmits the mileage accumulation result according to the request in step S605 to the augmented reality service system 620 (S606), and augmented reality service system 620 delivers it to the smartphone 610 ( S607), allow the user to confirm this.

본 발명에 따르면, 사용자가 휴대용 단말기 상에 구현되는 증강현실 기반의 인터페이스를 통해 AR 객체의 정보를 보고, AR 객체를 선택하여, AR 객체에 대응하는 상품 혹은 서비스를 제공하는 장소에서 상품 혹은 서비스의 홍보 목적으로 발행한 포인트, 광고 및 쿠폰을 제공받을 수 있게 된다.According to the present invention, a user views information of an AR object through an augmented reality-based interface implemented on a portable terminal, selects an AR object, and provides a product or service at a place that provides a product or service corresponding to the AR object. Points, advertisements and coupons issued for promotional purposes will be provided.

도 1은 본 발명의 바람직한 일실시예에 따른 증강현실 서비스를 제공하기 위한 휴대용 단말장치와, 증강현실 서비스 시스템의 구조를 도시한 블록도이다.1 is a block diagram illustrating a structure of a portable terminal device and an augmented reality service system for providing an augmented reality service according to an embodiment of the present invention.

도 1을 참조하면, 본 실시예는 사용자에게 증강현실 서비스를 제공하기 위해서, 휴대용 단말 장치(110) 및 증강현실 서비스 시스템(120)을 구비하여 구성된다.Referring to FIG. 1, the present embodiment includes a portable terminal device 110 and an augmented reality service system 120 to provide an augmented reality service to a user.

본 실시예에 따른 휴대용 단말 장치(110)은 위치정보획득부(111), 시스템통신부(112), 사용자인터페이스부(113), 영상센서(114)를 구비하여 구성된다.The portable terminal device 110 according to the present exemplary embodiment includes a location information acquisition unit 111, a system communication unit 112, a user interface unit 113, and an image sensor 114.

휴대용 단말 장치(110)로는 스마트폰, 태블릿 PC, UMPC(Ultra Mobile PC), 휴대폰, PDA와 같이, 증강현실 기반의 인터페이스를 제공하는 모듈을 탑재할 수 있는 소형 단말기가 바람직하나, 휴대용 단말장치(110)의 종류가 이에 한정되지 아니함은 물론이다.The portable terminal device 110 is preferably a small terminal that can be equipped with a module that provides an augmented reality-based interface, such as a smartphone, a tablet PC, a UMPC (Ultra Mobile PC), a mobile phone, and a PDA. Of course, the type 110 is not limited thereto.

위치정보획득부(111)는 사용자가 현재 휴대용 단말 장치를 사용하고 있는 위치를 획득하는 구성요소로써, 일반적으로 GPS, WiFi, CDMA 방식 중 하나 또는 둘 이상의 방식을 혼용하여 사용할 수 있다. GPS 방식의 경우에는 GPS 위성과의 통신을 통해 위치 정보를 생성하고, WiFi 방식의 경우 무선 AP와의 통신을 통해 위치 정보를 생성하며, CDMA 방식의 경우에는 셀타워와의 통신을 통해 위치 정보를 생성한다. 또한, 나침반이나 자이로 센서 등을 통해 사용자의 방향이나 자세 등을 측정하여 위치 정보에 포함시킬 수도 있다. 이러한 위치 정보를 측정하는 방식은 하나의 실시예에 불과하며, 본 발명은 이에 한정되지 않는다.The location information acquisition unit 111 is a component for acquiring a location where a user currently uses a portable terminal device. In general, the location information acquisition unit 111 may use one or two or more of GPS, WiFi, and CDMA methods. In the case of the GPS method, location information is generated through communication with a GPS satellite, in the case of the WiFi method, location information is generated through communication with a wireless AP, and in the case of the CDMA method, location information is generated through communication with a cell tower. do. In addition, the direction or posture of the user may be measured and included in the location information through a compass or a gyro sensor. The method of measuring the location information is only one embodiment, and the present invention is not limited thereto.

시스템통신부(112)는 증강현실 서비스를 제공받기 위해서 증강현실 서비스 시스템(120)에 무선 통신망을 통해 접속하여 증강현실 시스템과 통신을 통해 AR 객체들의 정보 등을 송수신하는 구성요소이다.The system communication unit 112 is a component that connects to the augmented reality service system 120 through a wireless communication network in order to receive augmented reality service, and transmits and receives information about AR objects through communication with the augmented reality system.

시스템통신부(112)는 위치정보획득부(111)에서 획득한 위치 정보를 증강현실 서비스 시스템(120)에 전송함으로써, 현재 사용자의 위치와 근접한 장소에서 제공되는 상품/서비스에 대응되는 적어도 하나 이상의 AR 객체들의 정보를 요청한다.The system communication unit 112 transmits the location information acquired by the location information acquisition unit 111 to the augmented reality service system 120, so that at least one AR corresponding to a product / service provided at a location close to the current user's location is provided. Request information about objects.

AR 객체는 AR 객체에 대응하는 상품/서비스를 제공하는 장소에서 상품 혹은 서비스의 홍보 목적으로 발행한 것으로 포인트, 광고 및 쿠폰 중 적어도 하나를 포함하여 구현될 수 있다.The AR object is issued for the purpose of promoting a product or service at a place that provides a product / service corresponding to the AR object, and may include at least one of a point, an advertisement, and a coupon.

포인트는 기정의된 환산비율(Exchange Rate)에 따라 전자상품권, 전자쿠폰, 전자화폐 및 증강현실 서비스 시스템(120)과 다른 시스템 상에서 적립되는 마일리지 중 적어도 하나 이상과 교환가능한 수단이고, 광고는 AR 객체에 대응하는 상품/서비스를 제공하는 장소를 사용자에게 홍보/광고하는 수단이고, 쿠폰은 AR 객체에 대응하는 상품을 구매하거나 서비스를 이용하는 데에 사용할 수 있는 일종의 결재 수단이다.Points are a means of redeeming at least one or more of electronic vouchers, electronic coupons, electronic money and mileage earned on the augmented reality service system 120 and other systems in accordance with a predefined exchange rate, and the advertisement is an AR object. Means to promote / advertise a place that provides a product / service corresponding to the user, and a coupon is a kind of payment means that can be used to purchase a product corresponding to an AR object or use a service.

여기에서 환산비율이란, 포인트 1단위에 해당하는 가격 액수 즉, 교환단위로 설정되며, 사전에 고정된 값으로 정의되어 있는 것이 일반적이나, 변동환율과 같이, 거래 현황에 따라 동적으로 변동되도록 설정될 수도 있다.Here, the conversion ratio is set in an amount of price corresponding to one point of a point, that is, an exchange unit, and is generally defined as a fixed value. However, the conversion ratio may be set to change dynamically according to the transaction status, such as a variable exchange rate. It may be.

본 실시예에서, 각 AR 객체에 포함되는 포인트의 양은 동일하게 할당될 필요는 없으며, 각 AR 객체에 대응하는 상품/서비스를 제공하는 장소 즉, 각 점포나 기업에서 본 증강 현실 서비스를 위해 지출하는 비용에 따라 서로 달리 할당될 수 있다.In the present embodiment, the amount of points included in each AR object does not need to be equally allocated, but is a place for providing goods / services corresponding to each AR object, that is, spending for augmented reality service viewed by each store or company. They can be allocated differently depending on the cost.

시스템통신부(112)에서 요청할 AR 객체들에 대응하는 상품/서비스를 제공하는 장소와 현재 사용자의 위치와 근접한 정도를 한정하는 근접 범위는 증강현실 서비스 시스템(120)에 미리 설정되어 있는 것이 일반적이나, 서비스 구현 예에 따라서는 사용자가 단말에서 설정하도록 구현될 수도 있을 것이다.Where the system / communication unit 112 provides the goods / services corresponding to the AR objects to request and the proximity range that limits the proximity of the current user location is generally set in advance in the augmented reality service system 120, According to the service implementation example, the user may be implemented to set in the terminal.

시스템통신부(112)는 증강현실 서비스 시스템(120)으로부터 적어도 하나 이상의 AR 객체들의 정보를 수신한다.The system communication unit 112 receives information of at least one AR object from the augmented reality service system 120.

시스템통신부(112)에서 수신되는 AR 객체의 정보로는 AR 객체의 식별자(Identifier), 증강현실 상에서 위치할 좌표, 상품/서비스의 명칭, 상품/서비스의 카테고리, 상품/서비스를 제공하는 장소의 주소, 증강현실 상에서 AR 객체를 나타내기 위해 디스플레이되는 대표 이미지 등을 포함할 수 있다.The AR object information received from the system communication unit 112 includes an identifier of the AR object, coordinates to be located in augmented reality, a name of a product / service, a category of a product / service, and an address of a place providing a product / service. The representative image may be displayed to represent an AR object on augmented reality.

시스템통신부(112)는 현재 사용자의 위치와 기정의된 근접 범위 내에 있는 장소에서 제공되는 상품 혹은 서비스에 대응되는 적어도 하나 이상의 AR 객체들의 정보를 요청하고, 요청에 따라 적어도 하나 이상의 AR 객체들의 정보를 수신한다.The system communication unit 112 requests information of at least one AR object corresponding to a product or service provided at a location within a predetermined proximity range with a current user's location, and requests information on at least one AR object according to the request. Receive.

사용자인터페이스부(113)은 사용자에게 AR 객체들을 디스플레이하고, 이에 대한 사용자의 선택을 입력받기 위한 구성요소로서, 본 실시예에서는, 시스템통신부(112)에 수신된 AR 객체들의 정보를 기초로 AR 객체를 사용자에게 디스플레이하기 위한 증강현실 기반의 인터페이스를 구성한다.The user interface unit 113 is an element for displaying AR objects to a user and receiving a user's selection thereof. In this embodiment, the AR object is based on information of AR objects received by the system communication unit 112. Configure augmented reality-based interface for displaying to the user.

그리고, 사용자인터페이스부(113)는 증강현실 기반의 인터페이스를 통해 디스플레이된 AR 객체들 중에서 사용자의 선택을 받은 적어도 하나 이상의 선택 AR 객체들을 입력받는다.The user interface 113 receives at least one selected AR object selected by a user from among AR objects displayed through the AR-based interface.

영상 센서(114)는 실시간 영상을 획득하는 구성으로, 증강현실 기반의 인터페이스를 구성하는 일 예로, 사용자인터페이스부(113)는 영상 센서(114)를 통해 획득된 실시간 영상에 AR 객체의 대표 이미지를 정합시켜서 디스플레이하고, 사용자가 디스플레이된 AR 객체의 대표 이미지를 클릭하면 AR 객체의 정보를 디스플레이하도록 증강현실 기반의 인터페이스를 구성할 수 있다.The image sensor 114 is a configuration for acquiring a real-time image. For example, the user interface unit 113 acquires a representative image of an AR object in a real-time image obtained through the image sensor 114. The augmented reality-based interface may be configured to display the information of the AR object by matching and displaying the information and when the user clicks on the representative image of the displayed AR object.

이때, 사용자의 선택을 입력받는 방법의 일 예로, 사용자가 클릭한 대표이미지의 AR 객체를 사용자가 선택한 선택 AR 객체로 인식하도록 구현할 수 있다.In this case, as an example of a method for receiving a user's selection, the AR object of the representative image clicked by the user may be implemented to be recognized as the selected AR object selected by the user.

이때, AR 객체에 대응하는 상품 혹은 서비스의 홍보/광고 목적을 극대화하기 위해, AR 객체의 대표 이미지를 AR 객체에 대응하는 상품/서비스의 표장이나, 상품/서비스를 제공하는 장소 즉, 각 점포나 기업의 로고(Logo type)나 CI(Corporate Identity)를 포함하여 구성할 수 있을 것이다. In this case, in order to maximize the purpose of promoting / advertising a product or service corresponding to the AR object, a representative image of the AR object may be a mark of a product / service corresponding to the AR object or a place that provides a product / service, that is, each store or It may be configured to include a logo of a company or a corporate identity.

또는, 본 증강현실 서비스에 대한 사용자의 흥미를 유발하기 위해서, AR 객체의 대표 이미지를 몬스터 등과 같은 게임 캐릭터를 포함하여 구성할 수 있을 것이다.Alternatively, in order to induce a user's interest in the augmented reality service, the representative image of the AR object may be configured to include a game character such as a monster.

시스템통신부(112)는 이처럼 사용자 인터페이스부를 통해 입력된 선택 AR 객체들을 가리키는 신호(예컨대, 선택 AR 객체의 ID 리스트를 포함하는 신호)를 증강현실 서비스 시스템(120)에 전송하여, 증강현실 서비스 시스템(120)에서 해당 사용자에게 할당된 사용자 계정에 저장한다.The system communication unit 112 transmits a signal indicating the selected AR objects (for example, a signal including an ID list of the selected AR objects) input through the user interface unit to the augmented reality service system 120, thereby providing augmented reality service system ( In step 120), the data is stored in the user account assigned to the user.

본 실시예에 따른 증강현실 서비스 시스템 (120)는 AR객체추출부(121), 단말통신부(122), AR객체관리부(123), 데이터베이스(124)를 구비하여 구성된다.Augmented reality service system 120 according to the present embodiment is configured with an AR object extraction unit 121, the terminal communication unit 122, AR object management unit 123, database 124.

AR객체추출부(121)는 휴대용 단말 장치(110)로부터 수신한 사용자의 위치 정보를 기초로 사용자의 위치를 판단하고, 현재 사용자의 위치와 근접한 장소에서 제공되는 상품/서비스에 대응되는 적어도 하나 이상의 AR 객체들을 추출한다.The AR object extracting unit 121 determines the location of the user based on the location information of the user received from the portable terminal device 110, and at least one or more items corresponding to goods / services provided at a location close to the current location of the user. Extract the AR objects.

이 때에, AR객체추출부(121)는 사용자의 위치 정보와, AR 객체의 정보 중 상품 혹은 서비스를 제공하는 장소의 주소 정보를 비교하여 현재 사용자의 위치와 근접한지를 판단하여, AR 객체를 추출하도록 구현될 수 있다.At this time, the AR object extracting unit 121 compares the location information of the user with the address information of the place providing the product or service among the AR object information, and determines whether it is close to the current user's location to extract the AR object. Can be implemented.

또한, AR객체추출부(121)는 추출된 AR 객체의 개수가 기정의된 일정 개수 이상인 경우에는 추출된 AR 객체 중에서 일정 개수만큼의 AR 객체를 임의로 선택하도록 구현할 수 있다. 이는 휴대용 단말 장치(110)의 증강현실 인터페이스 상에서 디스플레이할 수 있는 AR 객체의 개수가 제한적일 수 있기 때문이다.In addition, the AR object extractor 121 may implement to arbitrarily select a predetermined number of AR objects from the extracted AR objects when the number of extracted AR objects is greater than or equal to a predetermined number. This is because the number of AR objects that can be displayed on the augmented reality interface of the portable terminal device 110 may be limited.

단말통신부(122)는 증강현실 서비스를 제공하기 위해서 무선 통신망을 통해 접속한 휴대용 단말 장치(110)와의 통신을 통해 AR 객체들의 정보 등을 송수신하는 구성요소이다.The terminal communication unit 122 is a component that transmits and receives information on AR objects and the like through communication with the portable terminal device 110 connected through a wireless communication network in order to provide augmented reality service.

단말통신부(122)는 휴대용 단말 장치(110)로부터 사용자의 위치 정보를 수신하여 AR객체추출부(121)에 전달하고, AR객체추출부(121)에서 추출된 AR 객체들의 정보를 휴대용 단말 장치(110)에 전송한다. 이를 통해, 휴대용 단말 장치(110)의 증강현실 기반의 인터페이스를 통해 AR객체추출부(121)에서 추출된 AR 객체들의 정보를 사용자에게 제공할 수 있게 한다.The terminal communication unit 122 receives the location information of the user from the portable terminal device 110 and transmits the location information to the AR object extractor 121, and transmits the information of the AR objects extracted from the AR object extractor 121 to the portable terminal device ( 110). Through this, the AR object extracted by the AR object extractor 121 may be provided to the user through the AR-based interface of the portable terminal device 110.

또한, 단말통신부(122)는 휴대용 단말 장치(110)의 증강현실 기반의 인터페이스를 통해 사용자로부터 선택된 선택 AR 객체들을 휴대용 단말 장치(110)로부터 무선 통신을 통해 입력받는다.In addition, the terminal communication unit 122 receives the selected AR objects selected by the user through the augmented reality-based interface of the portable terminal device 110 from the portable terminal device 110 via wireless communication.

AR객체관리부(123)는 단말통신부(122)에 입력된 선택 AR 객체들을 해당 사용자의 사용자 계정에 저장한다.The AR object management unit 123 stores the selected AR objects input to the terminal communication unit 122 in a user account of the corresponding user.

여기에서 사용자 계정이란, 데이터베이스(124) 상에서 사용자가 증강현실 서비스 상에서 선택한 AR 객체들을 저장하기 위해 사용자에게 할당된 공간을 의미하며, 사용자에게 적립된 포인트, 광고, 쿠폰 등이 저장된다.Here, the user account refers to a space allocated to the user for storing AR objects selected by the user on the augmented reality service on the database 124, and stores points, advertisements, coupons, and the like that are accumulated to the user.

AR객체관리부(123)는 선택 AR 객체들에 포함된 포인트는 사용자 계정에 기저장된 누적 포인트에 합산하는 방법으로 저장한다.The AR object manager 123 stores the points included in the selected AR objects by adding them to the accumulated points previously stored in the user account.

도 2는 본 발명의 바람직한 일 실시예에 따른 휴대용 단말 장치에서 증강현실 서비스를 제공하는 방법을 도시한 흐름도이다.2 is a flowchart illustrating a method of providing an augmented reality service in a portable terminal device according to an embodiment of the present invention.

도 2를 참조하면, 먼저, 현재 사용자의 위치 정보를 획득한다(S201).Referring to FIG. 2, first, location information of a current user is obtained (S201).

S201단계에서 획득된 위치 정보를 증강현실 서비스 시스템에 전송하여 사용자의 위치 정보에 대응되는 적어도 하나 이상의 AR 객체들의 정보를 요청한다(S202). The location information obtained in step S201 is transmitted to the augmented reality service system to request information on at least one AR object corresponding to the location information of the user (S202).

여기에서 사용자의 위치 정보에 대응되는 AR 객체는 사용자에게 현재 사용자의 위치에 근접한 장소에서 제공하는 상품/서비스를 증강현실 인터페이스 상에서 홍보/광고하기 위한 수단으로서 포인트, 광고 및 쿠폰 중 적어도 하나를 포함한다. 즉, AR 객체는 포함하는 홍보/광고 수단의 종류에 따라 포인트형, 광고형, 쿠폰형, 포인트-광고 복합형, 포인트-쿠폰 복합형, 쿠폰-광고 복합형 등으로 구분될 수 있다. Here, the AR object corresponding to the user's location information includes at least one of a point, an advertisement, and a coupon as a means for promoting / advertising on a Augmented Reality Interface a product / service provided to a user at a location close to the current user's location. . That is, the AR object may be classified into a point type, an advertisement type, a coupon type, a point-advertising complex type, a point-coupon complex type, a coupon-advertising complex type, and the like according to the type of the promotion / advertising means included.

S202단계에서의 요청에 따라 적어도 하나 이상의 AR 객체들의 정보를 리스트 형태로 수신한다(S203).In response to the request in step S202, information on at least one or more AR objects is received in the form of a list (S203).

휴대용 단말 장치(110)의 증강현실 인터페이스 상에서 디스플레이할 수 있는 AR 객체의 개수가 제한적일 수 있기 때문에 제한된 개수 이하의 AR 객체들의 정보만을 받도록 구현될 수 있다.Since the number of AR objects that can be displayed on the augmented reality interface of the portable terminal device 110 may be limited, the portable terminal device 110 may be implemented to receive only information on the AR objects of a limited number or less.

S203단계에서 수신된 AR 객체들의 정보를 기초로 구성한 증강현실 기반의 인터페이스를 통해 AR 객체들을 사용자에게 디스플레이한다(S204).The AR objects are displayed to the user through an augmented reality based interface configured based on the information of the AR objects received in step S203 (S204).

디스플레이된 AR 객체들 중에서 사용자로 하여금 AR 객체를 선택할 수 있도록 하여 사용자가 선택한 선택 AR 객체들을 입력받는다(S205).The user may select the AR object among the displayed AR objects to receive the selected AR objects selected by the user (S205).

S205단계에서 입력받은 선택 AR 객체들을 가리키는 신호(예컨대, 선택 AR 객체의 ID 리스트를 포함하는 신호)를 전송하는 등의 증강현실 서비스 시스템과의 통신을 통해 선택 AR 객체들을 증강현실 서비스 시스템에서 사용자에게 할당된 사용자 계정에 저장함으로써(S206), 사용자가 포인트를 적립받거나, 쿠폰을 추후에 사용할 수 있도록 한다.The selected AR objects are transmitted to the user in the AR service system through communication with the AR service system such as a signal indicating the selected AR objects (eg, a signal including an ID list of the selected AR objects) received in step S205. By storing in the assigned user account (S206), the user can earn points or use the coupon later.

그리고 사용자가 S204 단계에서 디스플레이된 AR 객체들을 모두 다 선택해서 소진한 경우에는 증강현실 서비스 시스템에 추가적으로 AR 객체들을 요청하여 S203~S206 과정을 반복할 수 있다.When the user selects and exhausts all of the AR objects displayed in step S204, the user may repeat the steps S203 to S206 by requesting additional AR objects to the AR service system.

여기에서 요청되는 AR 객체들은 사용자의 위치 정보에 대응되는 적어도 하나 이상의 객체 중 사용자에게 디스플레이되지 않거나, 사용자에 의해 아직 선택되지 않은 AR 객체들이 해당될 것이다.The AR objects requested here may correspond to AR objects that are not displayed to the user or are not yet selected by the user among at least one or more objects corresponding to the location information of the user.

도 3은 본 발명의 바람직한 일 실시예에 따른 증강현실 서비스 시스템에서 증강현실 서비스를 제공하는 방법을 도시한 흐름도이다.3 is a flowchart illustrating a method of providing an augmented reality service in an augmented reality service system according to an exemplary embodiment of the present invention.

도 3을 참조하면, 먼저, 단말로부터 사용자의 위치 정보를 수신한다(S301).Referring to FIG. 3, first, location information of a user is received from a terminal (S301).

S301 단계에서 수신된 위치 정보를 기초로, 사용자의 위치와 근접한 장소에서 제공되는 상품 혹은 서비스에 대응되는 적어도 하나 이상의 AR 객체들을 추출한다(S302). 이 때, 단말의 증강현실 인터페이스 상에서 디스플레이할 수 있는 AR 객체의 개수가 제한적일 수 있기 때문에 제한된 개수 이하의 AR 객체들만을 추출하도록 구현될 수 있다.Based on the location information received in step S301, at least one or more AR objects corresponding to goods or services provided at a place close to the user's location are extracted (S302). In this case, since the number of AR objects that can be displayed on the augmented reality interface of the terminal may be limited, it may be implemented to extract only AR objects having a limited number or less.

S302 단계에서 추출된 AR 객체들의 정보를 단말에 전송함으로써, 단말의 증강현실 기반의 인터페이스를 통해 S302단계에서 추출된 AR 객체들의 정보를 사용자에게 제공한다(S303).By transmitting the information of the AR objects extracted in step S302 to the terminal, the information of the AR objects extracted in step S302 is provided to the user through the augmented reality-based interface of the terminal (S303).

사용자가 S303 단계에서 제공된 AR 객체들 중 선택한 선택 AR 객체들을 단말로부터 입력받는다(S304). The user receives input of selected AR objects selected from among AR objects provided in operation S303 from the terminal (S304).

S304 단계에서 입력받은 선택 AR 객체들을 사용자에게 할당된 사용자 계정에 저장한다. 특히, 선택 AR 객체들 각각에 포함된 포인트들은 사용자 계정에 이미 저장되어 있는 누적 포인트에 모두 합산하는 방식으로 저장한다. 이를 통해 사용자는 이처럼 저장한 누적 포인트를 전자상품권, 전자쿠폰, 전자화폐 및 증강현실 서비스 시스템과 다른 시스템 상에서 적립되는 마일리지 중 적어도 하나 이상과 교환하는 방법으로 사용할 수 있게 된다.The selected AR objects received in step S304 are stored in the user account assigned to the user. In particular, the points included in each of the selected AR objects are stored in a manner of adding up all accumulated points already stored in the user account. Through this, the user can use the accumulated points in exchange for at least one of electronic vouchers, electronic coupons, electronic money, and a mileage earned on the augmented reality service system and other systems.

도 4는 본 발명의 바람직한 일 실시예에 따른 증강현실 서비스 시스템을 통해 휴대용 단말의 사용자에게 AR객체가 제공되는 일련의 과정을 도시한 도면이다.4 is a diagram illustrating a series of processes in which an AR object is provided to a user of a portable terminal through an augmented reality service system according to an exemplary embodiment of the present invention.

먼저, 휴대용 단말(410)은 현재 사용자의 위치 정보를 획득한다(S411).First, the portable terminal 410 obtains the location information of the current user (S411).

휴대용 단말(410)은 S411 단계에서 획득된 위치 정보를 증강현실 서비스 시스템(420)에 전송하여 사용자의 위치 정보에 대응되는 AR 객체들의 정보를 요청한다(S412). The portable terminal 410 transmits the location information obtained in step S411 to the augmented reality service system 420 and requests information on AR objects corresponding to the location information of the user (S412).

본 실시예에서, 사용자의 위치 정보에 대응되는 AR 객체들은, 사용자에게 현재 사용자의 위치에 근접한 장소에서 제공하는 상품/서비스를 증강현실 인터페이스 상에서 홍보/광고하기 위한 수단으로, 포인트, 광고 및 쿠폰 중 적어도 하나를 포함하도록 구성된다.In the present embodiment, the AR objects corresponding to the location information of the user are means for promoting / advertising on the augmented reality interface a product / service provided to the user at a location close to the current location of the user, among the points, advertisements, and coupons. It is configured to include at least one.

증강현실 서비스 시스템(420)은 S412 단계에서의 요청에 따라, 사용자의 위치 정보를 기초로 사용자와 근접한 장소의 상품/서비스에 대응되는 AR 객체들을 추출한다(S413).The augmented reality service system 420 extracts AR objects corresponding to goods / services of a place close to the user based on the location information of the user according to the request in step S412 (S413).

증강현실 서비스 시스템(420)은 S413 단계에서 추출된 AR 객체들의 정보를 리스트 형태로 전송한다(S414).The augmented reality service system 420 transmits the information of the AR objects extracted in step S413 in the form of a list (S414).

S414 단계에서 리스트 형태로 전송되는 AR 객체의 정보로는 AR 객체의 식별자(Identifier), 증강현실 상에서 위치할 좌표, 상품/서비스의 명칭, 상품/서비스의 카테고리, 상품/서비스를 제공하는 장소의 주소, 증강현실 상에서 AR 객체를 나타내기 위해 디스플레이되는 대표 이미지 등을 포함하여 구성된다.The information on the AR object transmitted in the form of a list in step S414 includes an identifier of the AR object, coordinates to be located in augmented reality, a name of a product / service, a category of a product / service, and an address of a place providing a product / service. And a representative image displayed to represent the AR object on the augmented reality.

휴대용 단말(410)은 S414 단계에서 수신한 AR 객체들의 정보를 기초로 구성한 증강현실 기반의 인터페이스를 통해 사용자의 위치에 대응되는 AR 객체들을 디스플레이한다(S415).The portable terminal 410 displays AR objects corresponding to the location of the user through the augmented reality based interface configured based on the information of the AR objects received in step S414 (S415).

휴대용 단말(410)은 S415 단계에서 디스플레이된 AR 객체들 중에서 사용자에게 선택된 선택 AR 객체들을 증강현실 기반의 인터페이스를 통해 입력받아(S416), 선택 AR 객체들을 가리키는 정보 예컨대, 선택 AR 객체의 ID 리스트를 포함하는 신호)를 증강현실 서비스 시스템(420)에 전송한다(S417).The portable terminal 410 receives the selected AR objects selected by the user from among the AR objects displayed in operation S415 through the AR-based interface (S416), and displays information indicating the selected AR objects, for example, an ID list of the selected AR objects. It includes a signal to transmit to the augmented reality service system 420 (S417).

증강현실 서비스 시스템(420)은 S417 단계에서 입력받은 선택 AR 객체들을 해당 사용자의 사용자 계정에 저장한다(S418). 특히, 선택 AR 객체들 각각에 포함된 포인트들은 사용자 계정에 이미 저장되어 있는 누적 포인트에 모두 합산하는 방식으로 저장한다. 이를 통해 사용자는 이처럼 저장한 누적 포인트를 전자상품권, 전자쿠폰, 전자화폐 및 증강현실 서비스 시스템과 다른 시스템 상에서 적립되는 마일리지 중 적어도 하나 이상과 교환하는 방법으로 사용할 수 있게 된다.The augmented reality service system 420 stores the selected AR objects input in step S417 to a user account of the corresponding user (S418). In particular, the points included in each of the selected AR objects are stored in a manner of adding up all accumulated points already stored in the user account. Through this, the user can use the accumulated points in exchange for at least one of electronic vouchers, electronic coupons, electronic money, and a mileage earned on the augmented reality service system and other systems.

증강현실 서비스 시스템은 S414 단계에서 전송한 AR 객체들을 사용자가 모두 다 선택해서 소진한 경우에는 휴대용 단말로부터 추가적인 요청을 받을 수 있으며, 이러한 경우에는 S413 내지 S418 과정을 반복할 수 있다.The augmented reality service system may receive an additional request from the portable terminal when all of the AR objects transmitted in step S414 are exhausted by the user, and in this case, steps S413 to S418 may be repeated.

여기에서 추가적으로 요청되는 AR 객체들은 사용자의 위치 정보에 대응되는 적어도 하나 이상의 객체 중 사용자에게 디스플레이되지 않거나, 사용자에 의해 아직 선택되지 않은 AR 객체들이 해당될 것이다.The AR objects additionally requested here may correspond to AR objects that are not displayed to the user or are not yet selected by the user among at least one or more objects corresponding to the location information of the user.

이하에서는 이처럼 사용자 계정에 적립된 누적 포인트를 사용할 수 있는 서비스를 제공하는 과정에 대해서 보다 상세히 기술한다.Hereinafter, the process of providing a service that can use the accumulated points accumulated in the user account will be described in more detail.

도 5는 본 발명의 바람직한 일 실시예에 따른 휴대용 단말 장치의 일 예인 스마트폰을 통해 증강현실 서비스 시스템에서 사용자가 선택한 AR 객체의 포인트로 전자 상품권을 결제하는 일련의 과정을 도시한 도면이다.FIG. 5 is a diagram illustrating a series of processes for paying an electronic voucher to a point of an AR object selected by a user in an augmented reality service system through a smartphone, which is an example of a portable terminal device according to an exemplary embodiment of the present invention.

스마트폰(510)은 증강현실 서비스 시스템(520)에 적립된 포인트를 전자 상품권 발행 서버(530)에서 발행하는 전자 상품권과 교환하는 요청을 증강현실 서비스 시스템(520)에 전송한다(S501).The smartphone 510 transmits a request to the augmented reality service system 520 to exchange the points accumulated in the augmented reality service system 520 with an electronic gift certificate issued by the electronic gift certificate issuing server 530 (S501).

S501 단계의 교환 요청에는 구매할 전자 상품권의 종류 및 수량 등 전자 상품권 구매에 필요한 정보가 포함된다.The exchange request in step S501 includes information necessary for purchasing an electronic gift certificate, such as the type and quantity of electronic gift certificates to be purchased.

증강현실 서비스 시스템(520)은 S501 단계에서의 교환 요청에 따라 전자상품권을 결제하는 데에 필요한 포인트 양을 계산하여, 이를 사용자 계정에 적립된 누적 포인트에서 차감한다(S502). The augmented reality service system 520 calculates the amount of points required to pay the electronic voucher according to the exchange request in step S501, and subtracts it from the accumulated points accumulated in the user account (S502).

이 때, 전자상품권을 결제하는 데에 필요한 포인트 양을 계산하는 과정에서, 전자상품권의 가격에 상응하는 포인트 양은 기정의된 환산비율에 따라 결정된다.At this time, in the process of calculating the amount of points required to pay the electronic voucher, the amount of points corresponding to the price of the electronic voucher is determined according to the predetermined conversion ratio.

여기에서 환산비율(Exchange Rate)는 포인트 1단위에 해당하는 가격 액수 즉, 교환단위로 설정되며, 사전에 고정된 값으로 정의되어 있는 것이 일반적이나, 변동환율과 같이, 거래 현황에 따라 동적으로 변동되도록 설정될 수도 있다.In this case, the exchange rate is set in an amount of price corresponding to 1 point unit, that is, an exchange unit, and it is generally defined as a fixed value in advance, but dynamically changes according to the transaction status, such as a variable exchange rate. It may also be set to.

증강현실 서비스 시스템(520)은 S502 단계에서 결제된 전자상품권을 전자상품권발행서버(530)에 발행해달라는 요청을 전송한다(S503).The augmented reality service system 520 transmits a request to issue the electronic gift certificate issued in step S502 to the electronic gift certificate issuing server 530 (S503).

전자상품권발행서버(530)는 S503 단계의 요청에 따라 전자 상품권을 발행하여 증강현실 서비스 시스템(520)에 전달한다(S504).The electronic voucher issuing server 530 issues an electronic voucher according to the request of step S503 and transmits it to the augmented reality service system 520 (S504).

이 때, 발행된 전자 상품권은 일반적으로 URL 또는 이미지의 형태로 전달되며, 이 중 URL의 형태로 전달되는 경우에는 스마트폰(510)에서 별도로 해당 URL을 통해 전자상품권발행서버(530)에 접속하여 전자 상품권의 이미지 등을 다운받는 등의 방법으로 전자상품권을 제공하게 된다.At this time, the issued electronic voucher is generally delivered in the form of a URL or an image, of which, in the case of being delivered in the form of a URL, the smartphone 510 separately accesses the electronic voucher issuing server 530 through the corresponding URL. The electronic voucher is provided by a method such as downloading an image of the electronic voucher.

증강현실 서비스 시스템(520)은 S504 단계에서 전달받은 전자 상품권을 스마트폰(510)에 전달하고(S505), 스마트폰(510)은 전달받은 전자 상품권을 내장 혹은 외장으로 연결된 스토리지에 저장한다(S506) The augmented reality service system 520 transmits the electronic voucher received in step S504 to the smartphone 510 (S505), the smartphone 510 stores the received electronic voucher in the storage connected to the internal or external (S506). )

도 6은 본 발명의 바람직한 일 실시예에 따른 휴대용 단말 장치의 일 예인 스마트폰을 통해 증강현실 서비스 시스템에서 사용자가 선택한 AR 객체의 포인트를 멤버쉽 마일리지 서버의 마일리지와 교환하는 일련의 과정을 도시한 도면이다.FIG. 6 is a diagram illustrating a series of processes of exchanging points of an AR object selected by a user with a mileage of a membership mileage server through a smartphone, which is an example of a portable terminal device according to an exemplary embodiment of the present invention. to be.

스마트폰(610)은 증강현실 서비스 시스템(620)에 적립된 포인트와 증강현실 서비스 시스템과 별도의 멤버쉽 마일리지 서버의 마일리지를 교환해달라는 요청을 증강현실 서비스 시스템(620)에 전송한다(S601). The smartphone 610 transmits a request to the augmented reality service system 620 to exchange the points accumulated in the augmented reality service system 620 and the mileage of a separate membership mileage server with the augmented reality service system (S601).

S601 단계의 교환 요청에는 교환할 마일리지의 양 등 마일리지 교환에 필요한 정보가 포함된다.The exchange request in step S601 includes information required for mileage exchange, such as the amount of mileage to be exchanged.

증강현실 서비스 시스템(620)은 S601 단계에서의 교환 요청에 따라 교환을 원하는 마일리지의 양에 상응하는 포인트 양을 계산하여, 이를 사용자 계정에 적립된 누적 포인트에서 차감한다(S602). The augmented reality service system 620 calculates a point amount corresponding to the amount of mileage desired to be exchanged according to the exchange request in step S601, and subtracts it from the accumulated points accumulated in the user account (S602).

이 때, 마일리지의 양에 상응하는 포인트 양은 기정의된 환산비율에 따라 결정된다. 여기에서 환산비율(Exchange Rate)는 포인트 1단위에 해당하는 마일리지 단위수 즉, 교환단위로 설정되며, 사전에 고정된 값(예컨대, 1)으로 정의되어 있는 것이 일반적이나, 변동환율과 같이, 거래 현황에 따라 동적으로 변동되도록 설정될 수도 있다.At this time, the amount of points corresponding to the amount of mileage is determined according to the predetermined conversion ratio. In this case, the exchange rate is set in the number of mileage units corresponding to 1 point, that is, the exchange unit, and is generally defined as a fixed value (for example, 1). It may be set to change dynamically according to the present situation.

증강현실 서비스 시스템(620)은 멤버쉽 마일리지 서버(630)와 별개의 시스템이므로, 일단 멤버쉽 마일리지 서버(630)에 멤버쉽 회원 확인을 요청하여(S603), 사용자가 멤버쉽 마일리지 서버(630)의 멤버쉽 회원임을 확인받을 수 있다(S604).Since the augmented reality service system 620 is a separate system from the membership mileage server 630, once the membership mileage server 630 requests a membership membership confirmation (S603), the user is a membership member of the membership mileage server 630 It may be confirmed (S604).

본 실시예에서의 S602 단계와 S603 내지 S604의 과정은 상호간의 선후관계가 정해져 있는 것이 아니며, S603 내지 S604의 과정이 S602 단계에 앞서 수행되도록 구현될 수도 있다.In the present embodiment, the processes of steps S602 and S603 to S604 are not fixed to each other, and the processes of steps S603 to S604 may be implemented before the step S602.

증강현실 서비스 시스템(620)은 S604 단계에서 사용자가 멤버쉽 마일리지 서버(630)의 멤버쉽 회원인 경우에, 멤버쉽 마일리지 서버(630)에 교환을 원하는 양 만큼의 마일리지를 적립해달라는 요청을 전송한다(S605).If the user is a membership member of the membership mileage server 630 in step S604, the augmented reality service system 620 transmits a request to the membership mileage server 630 to accumulate the mileage of the desired amount (S605). ).

멤버쉽 마일리지 서버(630)는 S605 단계에서의 요청에 따른 마일리지 적립 결과를 증강현실 서비스 시스템(620)에 전달하고(S606), 증강현실 서비스 시스템(620)은 이를 스마트폰(610)에 전달하여(S607), 사용자가 이를 확인할 수 있게 한다.The membership mileage server 630 transmits the mileage accumulation result according to the request in step S605 to the augmented reality service system 620 (S606), and augmented reality service system 620 delivers it to the smartphone 610 ( S607), allow the user to confirm this.

본 발명에 따르면, 사용자가 휴대용 단말기 상에 구현되는 증강현실 기반의 인터페이스를 통해 AR 객체의 정보를 보고, AR 객체를 선택하여, AR 객체에 대응하는 상품 혹은 서비스를 제공하는 장소에서 상품 혹은 서비스의 홍보 목적으로 발행한 포인트, 광고 및 쿠폰을 제공받을 수 있게 된다.According to the present invention, a user views information of an AR object through an augmented reality-based interface implemented on a portable terminal, selects an AR object, and provides a product or service at a place that provides a product or service corresponding to the AR object. Points, advertisements and coupons issued for promotional purposes will be provided.

본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광데이터 저장장치 등이 있으며, 또한 케리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고, 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술분야의 프로그래머들에 의해 용이하게 추론될 수 있다.The present invention can also be embodied as computer-readable codes on a computer-readable recording medium. A computer-readable recording medium includes all kinds of recording apparatuses in which data that can be read by a computer system is stored. Examples of the computer-readable recording medium include a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, an optical data storage device, and the like, and may be implemented in the form of a carrier wave (for example, transmission over the Internet) . In addition, the computer-readable recording medium may be distributed over network-connected computer systems so that computer readable codes can be stored and executed in a distributed manner. In addition, functional programs, codes, and code segments for implementing the present invention can be easily inferred by programmers of the technical field to which the present invention belongs.

본 발명은 첨부된 도면에 도시된 일 실시예를 참고로 설명되었으나, 이는 예시적인 것에 불과하며, 당해 기술분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 수 있을 것이다. 따라서, 본 발명의 진정한 보호 범위는 첨부된 청구 범위에 의해서만 정해져야 할 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is clearly understood that the same is by way of illustration and example only and is not to be taken by way of limitation, You will understand. Accordingly, the true scope of protection of the present invention should be determined only by the appended claims.

Claims (21)

현재 사용자의 위치 정보를 획득하는 위치정보획득부;
상기 획득된 위치 정보를 증강현실 서비스 시스템에 전송하여 상기 사용자의 위치와 기정의된 근접 범위 내에 있는 장소에서 제공되는 상품 혹은 서비스에 대응되는 적어도 하나 이상의 AR 객체들의 정보를 요청하고, 상기 요청에 따라 상기 적어도 하나 이상의 AR 객체들의 정보를 수신하는 시스템통신부; 및
상기 수신된 AR 객체들의 정보를 기초로 구성한 증강현실 기반의 인터페이스를 통해 상기 AR 객체들을 사용자에게 디스플레이하고, 상기 디스플레이된 AR 객체들 중에서 상기 사용자에게 선택된 적어도 하나 이상의 선택 AR 객체들을 입력받는 사용자인터페이스부를 포함하고,
상기 시스템통신부는 상기 증강현실 서비스 시스템과의 통신을 통해 상기 선택 AR 객체들을 상기 증강현실 서비스 시스템에서 상기 사용자에게 할당된 사용자 계정에 저장하는 것을 특징으로 하는 휴대용 단말 장치.
A location information acquisition unit for obtaining location information of the current user;
Sending the obtained location information to the augmented reality service system to request information on at least one AR object corresponding to a product or service provided at a location within a predetermined proximity to the location of the user, and according to the request A system communication unit for receiving information of the at least one AR object; And
A user interface unit for displaying the AR objects to the user through the augmented reality-based interface configured based on the information of the received AR objects, and receives at least one selected AR objects selected by the user from among the displayed AR objects Including,
And the system communication unit stores the selected AR objects in a user account assigned to the user in the augmented reality service system through communication with the augmented reality service system.
제1항에 있어서,
상기 AR 객체는 기정의된 환산비율에 따라 전자상품권, 전자쿠폰, 전자화폐 및 상기 증강현실 서비스 시스템과 다른 시스템 상에서 적립되는 마일리지 중 적어도 하나 이상과 교환 가능한 포인트, 상기 AR 객체에 대응하는 상품 혹은 서비스를 제공하는 장소의 광고 및 상기 AR 객체에 대응하는 상품 혹은 서비스를 사용할 수 있는 쿠폰 중 적어도 하나 이상을 포함하는 것을 특징으로 하는 휴대용 단말 장치.
The method of claim 1,
The AR object may be exchanged with at least one of electronic gift certificates, electronic coupons, electronic money, and mileages accumulated on the AR service system and other systems according to a predetermined conversion ratio, and a product or service corresponding to the AR object. And at least one of an advertisement of a place providing a coupon and a coupon for using a product or a service corresponding to the AR object.
제1항에 있어서,
상기 AR 객체의 정보는 상기 AR 객체의 식별자, 상기 증강현실 상에서 위치할 좌표, 상기 상품 혹은 서비스의 명칭, 상기 상품 혹은 서비스의 카테고리, 상기 상품 혹은 서비스를 제공하는 장소의 주소, 상기 증강현실 상에서 디스플레이되는 대표 이미지를 포함하는 것을 특징으로 하는 휴대용 단말 장치.
The method of claim 1,
Information of the AR object is displayed on the AR, an identifier of the AR object, coordinates to be located on the augmented reality, a name of the product or service, a category of the product or service, an address of a place providing the product or service, and a display on the augmented reality. Portable terminal device comprising a representative image.
제3항에 있어서,
실시간 영상을 획득하는 영상 센서를 더 포함하고,
상기 사용자인터페이스부는 상기 영상 센서를 통해 획득된 실시간 영상 상에서 상기 AR 객체의 대표 이미지를 디스플레이하고, 상기 사용자가 상기 디스플레이된 AR 객체의 대표 이미지를 클릭하면 상기 AR 객체의 정보를 디스플레이하는 것을 특징으로 하는 휴대용 단말 장치.
The method of claim 3,
Further comprising an image sensor for obtaining a real-time image,
The user interface unit displays a representative image of the AR object on the real-time image obtained through the image sensor, and displays the information of the AR object when the user clicks on the representative image of the displayed AR object. Portable terminal device.
제4항에 있어서,
상기 선택 AR 객체들은 상기 사용자가 클릭한 대표이미지의 AR 객체를 포함하는 것을 특징으로 하는 휴대용 단말 장치.
The method of claim 4, wherein
The selected AR objects may include an AR object of the representative image clicked by the user.
현재 사용자의 위치 정보를 획득하는 단계;
상기 획득된 위치 정보를 증강현실 서비스 시스템에 전송하여 상기 사용자의 위치와 기정의된 근접 범위 내에 있는 장소에서 제공되는 상품 혹은 서비스에 대응되는 적어도 하나 이상의 AR 객체들의 정보를 요청하는 단계;
상기 요청에 따라 상기 적어도 하나 이상의 AR 객체들의 정보를 수신하는 단계;
상기 수신된 AR 객체들의 정보를 기초로 구성한 증강현실 기반의 인터페이스를 통해 상기 AR 객체들을 사용자에게 디스플레이하는 디스플레이단계;
상기 디스플레이된 AR 객체들 중에서 상기 사용자에게 선택된 선택 AR 객체들을 입력받는 입력단계; 및
상기 증강현실 서비스 시스템과의 통신을 통해 상기 선택 AR 객체들을 상기 증강현실 서비스 시스템에서 상기 사용자에게 할당된 사용자 계정에 저장하는 단계를 포함하는 휴대용 단말에서의 증강현실 서비스 제공방법.
Obtaining location information of the current user;
Transmitting the obtained location information to an augmented reality service system and requesting information on at least one AR object corresponding to a product or a service provided at a location within a predetermined proximity to the location of the user;
Receiving information of the at least one AR object according to the request;
A display step of displaying the AR objects to a user through an augmented reality based interface configured based on the information of the received AR objects;
An input step of receiving selected AR objects selected by the user among the displayed AR objects; And
And storing the selected AR objects in a user account assigned to the user in the augmented reality service system through communication with the augmented reality service system.
제6항에 있어서,
상기 AR 객체는 기정의된 환산비율에 따라 전자상품권, 전자쿠폰, 전자화폐 및 상기 증강현실 서비스 시스템과 다른 시스템 상에서 적립되는 마일리지 중 적어도 하나 이상과 교환 가능한 포인트, 상기 AR 객체에 대응하는 상품 혹은 서비스를 제공하는 장소의 광고 및 상기 AR 객체에 대응하는 상품 혹은 서비스를 사용할 수 있는 쿠폰 중 적어도 하나 이상을 포함하는 것을 특징으로 하는 휴대용 단말 장치에서의 증강현실 서비스 제공방법.
The method of claim 6,
The AR object may be exchanged with at least one of electronic gift certificates, electronic coupons, electronic money, and mileages accumulated on the AR service system and other systems according to a predetermined conversion ratio, and a product or service corresponding to the AR object. Augmented reality service providing method in a portable terminal device, characterized in that it comprises at least one or more of the advertisement of the place providing the coupon and the product or service corresponding to the AR object.
제6항에 있어서,
상기 AR 객체의 정보는 상기 AR 객체의 식별자, 상기 증강현실 상에서 위치할 좌표, 상기 상품 혹은 서비스의 명칭, 상기 상품 혹은 서비스의 카테고리, 상기 상품 혹은 서비스를 제공하는 장소의 주소, 상기 증강현실 상에서 디스플레이되는 대표 이미지를 포함하는 것을 특징으로 하는 휴대용 단말에서의 증강현실 서비스 제공방법.
The method of claim 6,
Information of the AR object is displayed on the AR, an identifier of the AR object, coordinates to be located on the augmented reality, a name of the product or service, a category of the product or service, an address of a place providing the product or service, and a display on the augmented reality. Augmented reality service providing method in a portable terminal, characterized in that it comprises a representative image.
제8항에 있어서,
실시간 영상을 획득하는 영상 센서를 더 포함하고,
상기 디스플레이단계는,
상기 영상 센서를 통해 획득된 실시간 영상 상에서 상기 AR 객체의 대표 이미지를 디스플레이하는 단계; 및
상기 사용자가 상기 디스플레이된 AR 객체의 대표 이미지를 클릭하면, 클릭한 대표이미지의 AR 객체의 정보를 디스플레이하는 단계를 포함하는 것을 특징으로 하는 휴대용 단말에서의 증강현실 서비스 제공방법.
The method of claim 8,
Further comprising an image sensor for obtaining a real-time image,
The display step,
Displaying a representative image of the AR object on a real-time image obtained through the image sensor; And
And if the user clicks on the displayed representative image of the AR object, displaying information on the AR object of the clicked representative image.
제9항에 있어서,
상기 선택 AR 객체들은 상기 클릭한 대표이미지의 AR 객체를 포함하는 것을 특징으로 하는 휴대용 단말에서의 증강현실 서비스 제공방법.
10. The method of claim 9,
And the selected AR objects include AR objects of the clicked representative image.
제6항에 있어서,
상기 디스플레이된 AR 객체들이 상기 사용자에게 모두 선택되어 소진된 경우에, 적어도 하나 이상의 AR 객체들을 추가적으로 요청하는 단계를 포함하고,
상기 추가적으로 요청되는 적어도 하나 이상의 AR 객체들은 상기 사용자의 위치에 대응되는 것을 특징으로 하는 휴대용 단말에서의 증강현실 서비스 제공방법.
The method of claim 6,
Requesting at least one or more AR objects when the displayed AR objects are all selected and exhausted by the user,
The additionally requested one or more AR objects corresponding to the location of the user, augmented reality service providing method in a portable terminal.
사용자의 위치 정보를 기초로 상기 사용자의 위치와 기정의된 근접 범위 내에 있는 장소에서 제공되는 상품 혹은 서비스에 대응되는 적어도 하나 이상의 AR 객체들을 추출하는 AR객체추출부;
단말로부터 상기 사용자의 위치 정보를 수신하고, 상기 추출된 AR 객체들의 정보를 상기 단말에 전송하여 상기 단말의 증강현실 기반의 인터페이스를 통해 상기 추출된 AR 객체들의 정보를 상기 사용자에게 제공하고, 상기 사용자가 상기 제공된 AR 객체들 중에 선택한 선택 AR 객체들을 선택 AR 객체들을 상기 단말로부터 입력받는 단말통신부; 및
상기 선택 AR 객체들을 상기 사용자에게 할당된 사용자 계정에 저장하는 AR객체관리부를 포함하는 것을 특징으로 하는 증강현실 서비스 제공 시스템.
An AR object extracting unit extracting at least one or more AR objects corresponding to a product or a service provided at a place within a predetermined proximity range with the location of the user based on the location information of the user;
Receive the location information of the user from the terminal, and transmits the information of the extracted AR objects to the terminal to provide the information of the extracted AR objects to the user through the augmented reality based interface of the terminal, the user A terminal communication unit configured to receive selected AR objects selected from among the provided AR objects from the terminal; And
Augmented reality service providing system comprising an AR object management unit for storing the selected AR objects in the user account assigned to the user.
제12항에 있어서,
상기 AR 객체의 정보는 상기 AR 객체의 식별자, 상기 증강현실 상에서 위치할 좌표, 상기 상품 혹은 서비스의 명칭, 상기 상품 혹은 서비스의 카테고리, 상기 상품 혹은 서비스를 제공하는 장소의 주소 및 상기 증강현실 상에서 디스플레이되는 대표 이미지를 포함하는 것을 특징으로 하는 증강현실 서비스 제공 시스템.
The method of claim 12,
The information of the AR object is displayed on the identifier of the AR object, coordinates to be located on the augmented reality, the name of the product or service, the category of the product or service, the address of a place providing the product or service, and the augmented reality. Augmented reality service providing system characterized in that it comprises a representative image.
제12항에 있어서,
상기 AR 객체는 기정의된 환산비율에 따라 전자상품권, 전자쿠폰, 전자화폐 및 상기 증강현실 서비스 시스템과 다른 시스템 상에서 적립되는 마일리지 중 적어도 하나 이상과 교환가능한 포인트, 상기 AR 객체에 대응하는 상품 혹은 서비스를 제공하는 장소의 광고 및 상기 AR 객체에 대응하는 상품 혹은 서비스를 사용할 수 있는 쿠폰 중 적어도 하나 이상을 포함하는 것을 특징으로 하는 증강현실 서비스 제공 시스템.
The method of claim 12,
The AR object may be exchanged with at least one of electronic gift certificates, electronic coupons, electronic money, and mileages accumulated on the AR service system and other systems according to a predetermined conversion ratio, and a product or service corresponding to the AR object. Augmented reality service providing system comprising at least one of an advertisement of a place that provides a and a coupon that can use the goods or services corresponding to the AR object.
제14항에 있어서,
상기 AR객체관리부는 상기 선택AR 객체들의 상기 포인트를 상기 사용자 계정에 기저장된 누적 포인트에 합산하는 것을 특징으로 하는 증강현실 서비스 제공 시스템.
15. The method of claim 14,
The AR object management unit augmented reality service providing system, characterized in that for adding the points of the selected AR objects to the accumulated points previously stored in the user account.
제12항에 있어서,
상기 AR객체추출부는 상기 사용자의 위치 정보 및 상기 상품 혹은 서비스를 제공하는 장소의 주소를 기초로 상기 AR 객체를 추출하는 것을 특징으로 하는 증강현실 서비스 제공 시스템.
The method of claim 12,
The AR object extracting unit extracts the AR object based on the location information of the user and the address of a place providing the product or service.
단말로부터 사용자의 위치 정보를 수신하는 단계;
상기 수신된 위치 정보를 기초로, 상기 사용자의 위치와 기정의된 근접 범위 내에 있는 장소에서 제공되는 상품 혹은 서비스에 대응되는 적어도 하나 이상의 AR 객체들을 추출하는 AR객체추출단계;
상기 추출된 AR 객체들의 정보를 상기 단말에 전송하여 상기 단말의 증강현실 기반의 인터페이스를 통해 상기 추출된 AR 객체들의 정보를 상기 사용자에게 제공하는 단계;
상기 사용자가 상기 제공된 AR 객체들 중에 선택한 선택 AR 객체들을 상기 단말로부터 입력받는 단계; 및
상기 선택 AR 객체들을 상기 사용자에게 할당된 사용자 계정에 저장하는 AR객체저장단계를 포함하는 것을 특징으로 하는 증강현실 서비스 제공방법.
Receiving location information of a user from a terminal;
An AR object extracting step of extracting at least one or more AR objects corresponding to a product or a service provided at a place within a predetermined proximity range with the location of the user based on the received location information;
Transmitting the information of the extracted AR objects to the terminal and providing the extracted information of the AR objects to the user through an augmented reality based interface of the terminal;
Receiving selection AR objects selected by the user from among the provided AR objects from the terminal; And
Augmented reality service providing method comprising the step of storing the selected AR objects in the user account assigned to the user.
제17항에 있어서,
상기 AR 객체의 정보는 상기 AR 객체의 식별자, 상기 증강현실 상에서 위치할 좌표, 상기 상품 혹은 서비스의 명칭, 상기 상품 혹은 서비스의 카테고리, 상기 상품 혹은 서비스를 제공하는 장소의 주소 및 상기 증강현실 상에서 디스플레이되는 대표 이미지를 포함하는 것을 특징으로 하는 증강현실 서비스 제공방법.
18. The method of claim 17,
The information of the AR object is displayed on the identifier of the AR object, coordinates to be located on the augmented reality, the name of the product or service, the category of the product or service, the address of a place providing the product or service, and the augmented reality. Augmented reality service providing method comprising the representative image.
제17항에 있어서,
상기 AR 객체는 기정의된 환산비율에 따라 전자상품권, 전자쿠폰, 전자화폐 및 상기 증강현실 서비스 시스템과 다른 시스템 상에서 적립되는 마일리지 중 적어도 하나 이상과 교환가능한 포인트, 상기 AR 객체에 대응하는 상품 혹은 서비스를 제공하는 장소의 광고 및 상기 AR 객체에 대응하는 상품 혹은 서비스를 사용할 수 있는 쿠폰 중 적어도 하나 이상을 포함하는 것을 특징으로 하는 증강현실 서비스 제공방법.
18. The method of claim 17,
The AR object may be exchanged with at least one of electronic gift certificates, electronic coupons, electronic money, and mileages accumulated on the AR service system and other systems according to a predetermined conversion ratio, and a product or service corresponding to the AR object. Augmented reality service providing method characterized in that it comprises at least one or more of the advertisement and the coupons that can use the goods or services corresponding to the AR object.
제19항에 있어서,
상기 AR객체저장단계는 상기 선택 AR 객체들의 상기 포인트를 상기 사용자 계정에 기저장된 누적 포인트에 합산하는 단계를 포함하는 것을 특징으로 하는 증강현실 서비스 제공방법.
20. The method of claim 19,
The AR object storage step comprises the step of adding the points of the selected AR objects to the accumulated points previously stored in the user account.
제17항에 있어서,
상기 AR객체추출단계는 상기 사용자의 위치 정보 및 상기 상품 혹은 서비스를 제공하는 장소의 주소를 기초로 상기 AR 객체를 추출하는 단계를 포함하는 것을 특징으로 하는 증강현실 서비스 제공방법.
18. The method of claim 17,
The AR object extracting step comprises extracting the AR object based on the location information of the user and the address of the place providing the product or service.
KR1020110004092A 2011-01-14 2011-01-14 Portable terminal apparatus, augment reality service System and augment reality service providing method thereof KR101342589B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110004092A KR101342589B1 (en) 2011-01-14 2011-01-14 Portable terminal apparatus, augment reality service System and augment reality service providing method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110004092A KR101342589B1 (en) 2011-01-14 2011-01-14 Portable terminal apparatus, augment reality service System and augment reality service providing method thereof

Publications (2)

Publication Number Publication Date
KR20120082672A true KR20120082672A (en) 2012-07-24
KR101342589B1 KR101342589B1 (en) 2013-12-17

Family

ID=46714362

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110004092A KR101342589B1 (en) 2011-01-14 2011-01-14 Portable terminal apparatus, augment reality service System and augment reality service providing method thereof

Country Status (1)

Country Link
KR (1) KR101342589B1 (en)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014065786A1 (en) * 2012-10-23 2014-05-01 Hewlett-Packard Development Company, L.P. Augmented reality tag clipper
KR101506610B1 (en) * 2013-04-29 2015-03-27 주식회사 제이엠랩 Apparatus for providing augmented reality and method thereof
KR101718991B1 (en) * 2016-09-25 2017-03-23 주식회사 기가코리아 Method for providing augment reality event service
CN111295683A (en) * 2017-11-07 2020-06-16 到达有限公司 Package searching auxiliary system based on augmented reality
KR20200071407A (en) * 2018-12-11 2020-06-19 최재영 Method for providing augmented reality contents using play item and server using the same
KR20200078078A (en) * 2018-12-21 2020-07-01 건국대학교 산학협력단 System for providing household ledger service based on location through augmented reality
WO2022025547A1 (en) * 2020-07-28 2022-02-03 주식회사 노크 Method, system, and non-transitory computer-readable recording medium for managing augmented reality interface for content being provided by digital signage
US11854036B2 (en) * 2011-11-21 2023-12-26 Nant Holdings Ip, Llc Location-based transaction reconciliation management methods and systems
WO2024106925A1 (en) * 2022-11-15 2024-05-23 경희대학교 산학협력단 Communication system and method based on augmented reality and computing device for performing same

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200067348A (en) 2018-12-04 2020-06-12 김진곤 Method for providing discount rate of product that changes based on time as augmented reality

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11854036B2 (en) * 2011-11-21 2023-12-26 Nant Holdings Ip, Llc Location-based transaction reconciliation management methods and systems
WO2014065786A1 (en) * 2012-10-23 2014-05-01 Hewlett-Packard Development Company, L.P. Augmented reality tag clipper
KR101506610B1 (en) * 2013-04-29 2015-03-27 주식회사 제이엠랩 Apparatus for providing augmented reality and method thereof
KR101718991B1 (en) * 2016-09-25 2017-03-23 주식회사 기가코리아 Method for providing augment reality event service
WO2018056542A1 (en) * 2016-09-25 2018-03-29 주식회사 기가코리아 Method for providing ar event service
CN111295683A (en) * 2017-11-07 2020-06-16 到达有限公司 Package searching auxiliary system based on augmented reality
KR20200071407A (en) * 2018-12-11 2020-06-19 최재영 Method for providing augmented reality contents using play item and server using the same
KR20200078078A (en) * 2018-12-21 2020-07-01 건국대학교 산학협력단 System for providing household ledger service based on location through augmented reality
WO2022025547A1 (en) * 2020-07-28 2022-02-03 주식회사 노크 Method, system, and non-transitory computer-readable recording medium for managing augmented reality interface for content being provided by digital signage
WO2024106925A1 (en) * 2022-11-15 2024-05-23 경희대학교 산학협력단 Communication system and method based on augmented reality and computing device for performing same

Also Published As

Publication number Publication date
KR101342589B1 (en) 2013-12-17

Similar Documents

Publication Publication Date Title
KR101342589B1 (en) Portable terminal apparatus, augment reality service System and augment reality service providing method thereof
US20180053241A1 (en) Systems and Methods Involving Proximity, Mapping, Indexing, Mobile, Advertising and/or other Features
US20140095296A1 (en) Systems and methods for analyzing and reporting geofence performance metrics
US20140136312A1 (en) Location-based content delivery
JP2012003428A (en) Electronic coupon delivery device, electronic coupon delivery system and method
KR101114643B1 (en) Advertisement system using smart phone
KR20140137026A (en) A mobile communication terminal performing an AD and an AD management server and system managing the AD and the control method thereof
CN110738488A (en) Information processing method and apparatus, computer-readable non-transitory storage medium
KR20110101719A (en) System and method for viral marketing
JP2016006675A (en) Management device, management method, and management program
JP7406685B2 (en) Information processing method, information processing device, and program
JP2006330943A (en) Success management system, portable terminal device, navigation management system, navigation program, and success management method
JP6566296B2 (en) Advertisement system and advertisement method
KR20140134771A (en) compensation system for processing remuneration by using contents and the method thereof
JP2016177368A (en) Display control method, electronic equipment, display control program, and display control system
KR20180009489A (en) Mobile terminal apparatus, augment reality service system and augment reality service providig method thereof
KR20130142225A (en) Method for providing smart coupon to use nfc technology
JP2017091554A (en) Display control method, electronic apparatus, display control program, and display control system
KR20130012185A (en) Treasure searching service system
JP2017107496A (en) Display control device, display control method, and display control program
JP6293698B2 (en) Electronic coupon providing system, electronic coupon providing method, computer program, and recording medium recording computer program
JP2014238640A (en) Information service system, server, customer operation terminal, and information service method and program
JP5387745B1 (en) Content transfer history collection system, content management device, content management method, and program
WO2023248487A1 (en) Program, information processing method, server, system, and terminal
KR20120118293A (en) Payment service system for advertisement linked application of mobile device and method thereof

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20161205

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20171204

Year of fee payment: 5