KR101329935B1 - 이종 마커를 이용해서 원격으로 증강현실 서비스를 공유하는 증강현실 시스템 및 그 방법 - Google Patents

이종 마커를 이용해서 원격으로 증강현실 서비스를 공유하는 증강현실 시스템 및 그 방법 Download PDF

Info

Publication number
KR101329935B1
KR101329935B1 KR1020110008075A KR20110008075A KR101329935B1 KR 101329935 B1 KR101329935 B1 KR 101329935B1 KR 1020110008075 A KR1020110008075 A KR 1020110008075A KR 20110008075 A KR20110008075 A KR 20110008075A KR 101329935 B1 KR101329935 B1 KR 101329935B1
Authority
KR
South Korea
Prior art keywords
augmented reality
session
information
client device
marker
Prior art date
Application number
KR1020110008075A
Other languages
English (en)
Other versions
KR20120086796A (ko
Inventor
안계혁
Original Assignee
주식회사 팬택
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 팬택 filed Critical 주식회사 팬택
Priority to KR1020110008075A priority Critical patent/KR101329935B1/ko
Priority to US13/312,890 priority patent/US20120194548A1/en
Publication of KR20120086796A publication Critical patent/KR20120086796A/ko
Application granted granted Critical
Publication of KR101329935B1 publication Critical patent/KR101329935B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/20—Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel
    • H04W4/203—Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel for converged personal network application service interworking, e.g. OMA converged personal network services [CPNS]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/024—Multi-user, collaborative environment

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Geometry (AREA)
  • Multimedia (AREA)
  • Information Transfer Between Computers (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 이종 마커를 이용해서 원격으로 증강현실 서비스를 공유하는 증강현실 시스템 및 그 방법을 제안한다. 본 발명의 실시예에 따른 증강현실 시스템의 호스트 장치는 이종 마커들의 공유영역을 설정하고 공유영역의 정보와 증강현실 객체의 정보를 원거리에 위치한 클라이언트 장치간에 공유한다. 그러면 증강현실 시스템의 클라이언트 장치는 공유영역에 증강현실 객체를 디스플레이해서 증강현실 서비스를 공유한다.

Description

이종 마커를 이용해서 원격으로 증강현실 서비스를 공유하는 증강현실 시스템 및 그 방법{Augmented reality system and method that share augmented reality　service to remote using different marker}
본 발명은 증강현실 시스템 및 방법에 관한 것이다. 특히, 원거리에서 서로 다른 형태의 마커를 이용해서 증강현실 서비스를 공유하는 증강 현실 시스템 및 그 방법에 관한 것이다.
증강현실(AR; Augmented Reality)은 사용자가 눈으로 보는 현실세계와 부가정보를 갖는 가상세계를 합쳐 하나의 영상으로 보여주는 가상현실의 하나이다. 현실세계를 가상세계로 보완해주는 개념인 AR은 컴퓨터 그래픽으로 만들어진 가상환경을 사용하지만 주역은 현실환경이다. 컴퓨터 그래픽은 현실환경에 필요한 정보를 추가 제공하는 역할을 한다. 사용자가 보고 있는 실사 영상에 3차원 가상영상을 겹침(overlap)으로써 현실환경과 가상화면과의 구분이 모호해지도록 한다는 뜻이다. 가상현실기술은 가상환경에 사용자를 몰입하게 하여 실제환경을 볼 수 없다. 이러한 AR을 구현하는 방법에는 특정한 마커(marker)를 컴퓨터가 인식하여, 그 마커에 연결된 3차원 그래픽 모델을 모니터에 그려주는 방법이 있다. 여기서의 마커란 실제로 2차원 평면위에 존재하면서, 그 하나만으로 모니터를 비롯한 출력장치 내에 자신과 연결된 3차원 그래픽모델이 그려질 크기, 방향 및 위치 정보를 제공하는 것을 말한다. 이 마커와 3차원 그래픽 모델은 사용자의 선택에 따라 다양한 모습으로 나타난다.
기존의 마커 기반의 AR의 경우 하나의 마커에 대해 각자의 3차원 그래픽 모델을 투영하여 사용하였을 뿐, 원거리에 있는 사용자들이 증강현실 서비스를 공유하지 못하였다.
본 발명의 실시예는 이종 마커를 이용해서 원격으로 증강현실 서비스를 공유하는 증강현실 시스템 및 그 방법을 제공한다.
본 발명의 실시예는 원거리에서 서로 다른 형태의 마커를 이용해서 증강현실 서비스를 공유하는 증강 현실 시스템 및 그 방법을 제공한다.
본 발명의 실시예는 호스트 장치를 통해서 이종 마커들의 공유영역을 설정하고 공유영역의 정보와 증강현실 객체의 정보를 원거리에 위치한 클라이언트 장치간에 공유하고, 호스트 장치를 통해서 클라이언트 장치간에 증강현실 서비스를 공유하는 증강 현실 시스템 및 증강현실 서비스 방법을 제공한다.
본 발명의 실시예에 따른 증강현실 시스템의 클라이언트 장치는, 호스트 장치와 데이터를 송수신 하는 통신부와, 마커의 정보와 증강현실 객체의 정보를 상기 통신부를 통해 상기 호스트 장치로 송신하고, 상기 호스트 장치로부터 공유영역의 정보를 수신하는 공유부와, 프리뷰 영상에서 상기 마커를 검출하는 검출부와, 상기 공유영역의 정보를 이용해서 상기 프리뷰 영상에 포함된 상기 마커에서 공유영역을 추적하는 영역 추적부와, 상기 증강현실 객체 정보를 이용해서 상기 마커에 따른 증강현실 객체를 생성하고, 상기 추적한 공유영역에 상기 증강현실 객체를 디스플레이 하는 엔진부 및 증강현실 실행에 따른 상기 증강현실 객체의 동작을 처리하고, 변경되는 증강현실 객체의 정보를 상기 공유부를 통해 증강현실 세션에 포함된 다른 클라이언트 장치들과 공유하도록 하는 증강현실 실행부를 포함한다.
본 발명의 실시예에 따른 증강현실 시스템의 호스트 장치는, 클라이언트 장치들과 데이터를 송수신 하는 통신부와, 증강현실 세션에 참여중인 클라이언트 장치들 각각으로부터 마커들의 정보를 수신하면 상기 마커들의 정보를 이용해서 증강현실 세션에 참여중인 클라이언트 장치들에게 공통으로 증강현실 서비스를 제공하는 영역인 공유영역을 설정하는 공유영역 설정부 및 상기 공유영역의 정보와 증강현실 객체의 정보를 상기 통신부를 통해 상기 증강현실 세션에 참여중인 클라이언트 장치들 간에 공유되도록 하는 공유부를 포함한다.
본 발명의 실시예에 따른 클라이언트 장치에서 원격으로 이종 마커간의 증강현실 서비스를 공유하는 방법은, 마커의 정보와 증강현실 객체의 정보를 호스트 장치로 송신하고, 상기 호스트 장치로부터 공유영역의 정보를 수신하는 단계와, 프리뷰 영상에서 상기 마커를 검출하는 단계와, 상기 공유영역의 정보를 이용해서 상기 프리뷰 영상에 포함된 상기 마커에서 공유영역을 추적하는 단계와, 상기 증강현실 객체 정보를 이용해서 상기 마커에 따른 증강현실 객체를 생성하고, 상기 추적한 공유영역에 상기 증강현실 객체를 디스플레이 하는 단계 및 증강현실 실행에 따른 상기 증강현실 객체의 동작을 처리하고, 변경되는 증강현실 객체의 정보를 증강현실 세션에 포함된 다른 클라이언트 장치들과 공유하는 단계를 포함한다.
본 발명의 실시예에 따른 호스트 장치에서 원격으로 이종 마커간의 증강현실 서비스를 공유하는 방법은, 증강현실 세션의 생성을 요청하는 세션 생성 요청 메시지를 수신하면, 상기 세션 생성 요청 메시지에 포함된 마커의 정보를 확인해서 상기 증강현실 세션을 시작하는 단계와, 클라이언트 장치로부터 상기 증강현실 세션으로의 참여를 요청하는 세션 참여 요청 메시지를 수신하면, 상기 클라이언트 장치의 참여 허가 여부를 확인해서 참여 허가 여부에 관한 정보를 상기 클라이언트 장치로 송신하는 단계와, 상기 증강현실 세션에 참여중인 클라이언트 장치들 각각으로부터 수신한 마커들의 정보를 이용해서 상기 증강현실 세션에 참여중인 클라이언트 장치들에게 공통으로 증강현실 서비스를 제공하는 영역인 공유영역을 설정하는 단계 및 상기 공유영역의 정보와 증강현실 객체의 정보가 상기 증강현실 세션에 참여중인 클라이언트 장치들 간에 공유되도록 하는 단계를 포함한다.
본 발명은 호스트 장치를 통해서 이종 마커들의 공유영역을 설정하고 공유영역의 정보와 증강현실 객체의 정보를 원거리에 위치한 클라이언트 장치간에 공유하고, 호스트 장치를 통해서 클라이언트 장치간에 증강현실 서비스를 공유하는 증강 현실 시스템 및 증강현실 서비스 방법에 관한 것으로, 호스트 장치의 중계를 통해 서로 다른 위치에 있는 클라이언트 장치가 원격으로 증강현실 서비스를 제공받을 수 있으며, 이종마커간의 공유영역을 설정하기 때문에 이종마커를 이용해서도 증강현실 서비스를 공유할 수 있다.
도 1은 본 발명의 실시예에 따른 증강현실 시스템의 개략적인 구성을 도시한 도면,
도 2는 본 발명의 실시예에 따른 증강현실 시스템에서 호스트 장치의 구성을 도시한 도면,
도 3은 본 발명의 실시예에 따른 증강현실 시스템에서 클라이언트 장치의 구성을 도시한 도면,
도 4는 본 발명의 실시예에 따른 증강현실 시스템에서 이종마크 간의 공유영역을 설정한 예를 도시한 도면,
도 5는 본 발명의 실시예에 따른 증강현실 시스템의 클라이언트 장치에서 증강현실 세션을 생성하는 과정을 도시한 흐름도,
도 6은 본 발명의 실시예에 따른 증강현실 시스템의 클라이언트 장치에서 증강현실 세션에 참여하는 과정을 도시한 흐름도,
도 7은 본 발명의 실시예에 따른 증강현실 시스템의 클라이언트 장치에서 원격으로 증강현실 서비스를 수행하는 과정을 도시한 흐름도 및,
도 8은 본 발명의 실시예에 따른 증강현실 시스템의 호스트 장치에서 원격으로 증강현실을 서비스하는 과정을 도시한 흐름도이다.
이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
본 발명은 이종마커를 이용하는 클라이언트 장치들 간의 증강현실 서비스를 공유하도록 하는 증강 현실 시스템 및 증강현실 서비스 방법에 관한 것이다.
도 1은 본 발명의 실시예에 따른 증강현실 시스템의 개략적인 구성을 도시한 도면이다.
호스트 장치(110)는 서로 다른 형태의 이종마커(140, 150)들의 공유영역을 설정하고, 공유영역의 정보를 공유해서 원격으로 떨어져 있는 클라이언트 장치(120, 130)들간에 증강현실 서비스가 공유되도록 한다.
호스트 장치(110)는 서버로서 하나의 장치로 구성될 수도 있고, 클라이언트 장치(120, 130)들 중 하나에 포함되어 구성될 수도 있다.
클라이언트 장치(120)는 호스트 장치(110)와의 통신을 통해 이종마커(140, 150)들의 공유영역의 정보 및 증강현실 객체(142, 144)의 정보를 공유받고, 프리뷰 영상에 포함된 각 마커(140)의 증강현실 객체(142, 144)를 디스플레이 한다.
클라이언트 장치(130)는 호스트 장치(110)와의 통신을 통해 이종마커(140, 150)들의 공유영역의 정보 및 증강현실 객체(152, 154)의 정보를 공유받고, 프리뷰 영상에 포함된 각 마커(150)의 증강현실 객체(152, 154)를 디스플레이 한다.
이때, 증강현실 객체(142)와 증강현실(152)는 서로 다른 클라이언트 장치를 통해 디스플레이된 동일한 증강현실 객체이고, 증강현실 객체(144)와 증강현실(154) 또한 서로 다른 클라이언트 장치를 통해 디스플레이된 동일한 증강현실 객체이다.
도 2는 본 발명의 실시예에 따른 증강현실 시스템에서 호스트 장치의 구성을 도시한 도면이다.
도 2를 참조하면, 호스트 장치(200)는 제어부(210), 통신부(220), 마커 저장부(230), 객체 저장부(240), 호스트 처리부(212), 공유부(214) 및 공유영역 설정부(416)를 포함한다.
통신부(220)는 클라이언트 장치들과 유선 또는 무선으로 데이터를 송수신한다.
마커 저장부(230)는 마커들의 정보와 공유영역 설정부(416)를 통해 설정된 공유영역의 정보를 저장한다. 마커의 정보는 마커 이미지, 마커를 식별할 수 있는 마커 식별정보, 위치 추적에 필요한 특징점 정보 중 적어도 하나를 포함한다. 이때, 마커의 정보는 기설정되어 저장될 수도 있고, 통신부(220)를 통해 클라이언트 장치들로부터 수신될 수도 있다.
객체 저장부(240)는 마커, 공유영역 또는 증강현실 서비스에 대응하는 증강현실 객체의 정보를 저장한다.
마커의 정보 및 증강현실 객체는 기설정되어 저장될 수도 있고, 통신부(220)를 통해 클라이언트 장치들로부터 수신될 수도 있다.
공유영역 설정부(416)는 증강현실 세션에 참여중인 클라이언트 장치들 각각이 이용하는 서로 다른 마커들의 공유영역을 설정한다. 공유영역 설정부(416)는 증강현실 세션에 새로운 마커를 이용하는 새로운 클라이언트 장치가 참여하면 공유영역을 재설정한다.
공유영역 설정부(416)는 이종마커들의 공유영역을 아래 도 4와 같이 설정할 수 있다.
도 4는 본 발명의 실시예에 따른 증강현실 시스템에서 이종마크 간의 공유영역을 설정한 예를 도시한 도면이다.
도 4를 참조하면, 공유영역 설정부(416)는 제1 마커(410)과 제2 마커(420) 각각의 중심점을 기준으로 공유영역(430, 440, 450)을 설정할 수 있다.
공유부(214)는 공유영역 설정부(416)에서 설정한 공유영역의 정보와 증강현실 객체의 정보가 증강현실 세션에 참여중인 클라이언트 장치들 간에 공유되도록 중계한다. 즉, 공유부(214)는 증강현실 세션에 참여중인 클라이언트 장치들이 동일한 공유영역 정보와 동일한 증강현실 객체의 정보를 갖도록 공유영역의 정보와 증강현실 객체 정보를 증강현실 세션에 참여중인 모든 클라이언트 장치들에게 제공한다. 또한 공유부(214)는 증강현실 세션에 참여중인 클리이언트 장치 중 하나에서 증강현실 객체 정보를 새로 추가하거나 변경하면, 추가되거나 변경된 증강현실 객체정보를 증강현실 세션에 참여중인 모든 클라이언트 장치들에게 제공한다. 그리고, 공유부(214)는 증강현실 세션에 새로운 클라이언트 장치가 참여해서 공유영역이 변경되면 변경된 공유영역 정보를 증강현실 세션에 참여중인 모든 클라이언트 장치들에게 제공한다.
호스트 처리부(212)는 클라이언트 장치로부터 증강현실 세션의 생성을 요청하는 세션 생성 요청 메시지를 수신하면, 세션 생성 요청 메시지에 포함된 마커의 정보를 확인해서 증강현실 세션을 시작한다.
이때, 세션 생성 요청 메시지에 초청 리스트가 포함되어 있으면, 공유부(214)는 초청 리스트에 포함된 클라이언트 장치들로 증강현실 세션에 관한 정보를 송신한다.
한편, 공유부(214)는 클라이언트 장치로부터 증강현실 세션에 관한 정보를 요청받으면 요청한 클라이언트 장치로 증강현실 세션에 관한 정보를 송신할 수 있다. 또한, 공유부(214)는 클라이언트 장치가 접근할수 있는 서버에 증강현실 세션에 관한 정보를 송신해서 서버를 통해 클라이언트 장치로 증강현실 세션에 관한 정보를 제공할 수도 있다.
증강현실 세션에 관한 정보는 마커의 이미지, 마커의 영역정보, 공유영역의 정보, 참여자 리스트, 실행될 증강현실 정보, 증강현실 세션의 시작시간, 증강현실 세션의 종료시간 및 증강현실 세션의 로그 기록 중 적어도 하나를 포함할 수 있다.
호스트 처리부(212)는 클라이언트 장치로부터 증강현실 세션으로의 참여를 요청하는 세션 참여 요청 메시지를 수신하면, 클라이언트 장치의 참여 허가 여부를 확인해서 참여 허가 여부에 관한 정보를 클라이언트 장치로 송신한다.
클라이언트 장치의 참여 허가 여부는 기설정된 조건을 만족하는지 여부에 따라 결정되거나, 증강현실 세션의 생성을 요청한 클라이언트 장치로부터 참여 여부를 결정 받거나 또는 증강현실 세션에 현재 참여중인 참여 클라이언트 장치들의 의견에 따라 참여 여부가 결정될 수 있다.
제어부(210)는 호스트 장치(200)의 전반적인 동작을 제어할 수 있다. 그리고, 제어부(210)는 호스트 처리부(212), 공유부(214) 및 공유영역 설정부(416)의 기능을 수행할 수 있다. 제어부(210), 호스트 처리부(212), 공유부(214) 및 공유영역 설정부(416)를 구분하여 도시한 것은 각 기능들을 구별하여 설명하기 위함이다. 따라서 제어부(210)는 호스트 처리부(212), 공유부(214) 및 공유영역 설정부(416) 각각의 기능을 수행하도록 구성된(configured) 적어도 하나의 프로세서를 포함할 수 있다. 또한, 제어부(210)는 호스트 처리부(212), 공유부(214) 및 공유영역 설정부(416) 각각의 기능 중 일부를 수행하도록 구성된(configured) 적어도 하나의 프로세서를 포함할 수 있다.
도 3은 본 발명의 실시예에 따른 증강현실 시스템에서 클라이언트 장치의 구성을 도시한 도면이다.
도 3을 참조하면, 클라이언트 장치(300)는 제어부(310), 통신부(320), 마커 저장부(330), 객체 저장부(340), 카메라부(340), 디스플레이부(350), 클라이언트 처리부(311), 공유부(312), 검출부(313), 영역 추적부(314), 위치 추적부(315), 3차원 엔진부(316) 및 증강현실 실행부(317)를 포함한다.
통신부(320)는 호스트 장치 또는 다른 클라이언트 장치와 유선 또는 무선으로 데이터를 송수신한다.
마커 저장부(330)는 마커의 정보와 공유영역의 정보를 저장한다. 마커의 정보는 마커 이미지, 마커를 식별할 수 있는 마커 식별정보, 위치 추적에 필요한 특징점 정보 중 적어도 하나를 포함한다.
이때, 마커의 정보는 기설정되어 저장될 수도 있고, 통신부(320)를 통해 호스트 장치로부터 수신될 수도 있다. 그리고, 공유영역의 정보는 통신부(320)를 통해 호스트 장치로부터 수신된 정보이다.
객체 저장부(340)는 마커, 공유영역 또는 증강현실 서비스에 대응하는 증강현실 객체의 정보를 저장한다.
카메라부(340)는 영상을 촬영하는 장치로 촬영된 영상 또는 프리뷰 영상을 검출부(313)와 디스플레이부(350)로 제공한다. 이때, 촬영된 영상 및 프리뷰 영상은 검출부(313)와 디스플레이부(350)로 제공되기에 앞서 이미지 보정 또는 카메라 보정을 통해 보정될 수 있다.
디스플레이부(350)는 클라이언트 장치(300)의 동작 중에 발생되는 상태 정보(또는 인디케이터), 제한된 숫자와 문자들, 동화상(moving picture) 및 정화상(still picture) 등을 디스플레이한다. 또한, 본 발명에 따라 카메라부(340)를 통해 수신되는 영상(마커)을 디스플레이하고, 3차원 엔진부(316)에서 생성하는 증강현실 객체를 디스플레이 할 수 있다.
공유부(312)는 마커의 정보 및 증강현실 객체의 정보를 증강현실 세션 내의 호스트 장치 및 다른 클라이언트 장치와 공유하도록 한다.
검출부(313)는 카메라부(340)를 통해 수신하는 프리뷰 영상에서 마커를 검출한다.
영역 추적부(314)는 공유영역의 정보를 이용해서 프리뷰 영상에 촬영된 마커에서 공유영역을 추적한다.
위치 추적부(315)는 프리뷰 영상을 통해 촬영되는 마커의 특징점을 이용해서 프리뷰 영상을 촬영하는 클라이언트 장치의 위치를 추적한다.
3차원 엔진부(316)는 증강현실 객체 정보를 이용해서 마커에 따른 증강현실 객체를 생성하고, 클라이언트 장치의 위치를 고려해서 추적한 공유영역에 생성한 증강현실 객체를 디스플레이 한다.
증강현실 실행부(317)는 증강현실 실행에 따른 증강현실 객체의 동작을 처리하고, 새로이 추가되거나 변경되는 증강현실 객체의 정보를 공유부(312)를 통해 공유하도록 한다.
클라이언트 처리부(311)는 사용자의 요청에 의한 증강현실 세션을 생성하는 이벤트의 발생을 감지하면, 기설정되어 저장된 정보를 검색하거나 또는 입력을 통해서 마커의 정보를 확인하고, 마커의 정보를 포함하는 증강현실 세션의 생성 요청 메시지를 호스트 장치로 송신한다.
클라이언트 처리부(311)는 다른 클라이언트 장치로부터 증강현실 세션으로의 참여를 요청하는 세션 참여 요청 메시지를 수신하면, 사용자로부터 참여 허가 여부를 결정받고, 세션 참여 요청 메시지를 송신한 클라이언트 장치로 참여 허가 여부를 송신한다. 이때, 클라이언트 처리부(311)는 참여 허가 여부를 호스트 장치를 통해서 송신할 수 있다.
한편, 클라이언트 처리부(311)는 증강현실 세션에 참여하는 이벤트의 발생을 감지하면, 호스트 장치로부터 증강현실 세션에 관한 정보를 획득하고, 증강현실 세션에 참여함을 요청하는 세션 참여 요청 메시지를 호스트 장치로 송신한다.
클라이언트 처리부(311)는 호스트로 장치로부터 세션 초청 메시지를 수신하고, 세션 초청 메시지에서 증강현실 세션에 관한 정보를 획득할 수 있다. 또는 클라이언트 처리부(311)는 증강현실 세션에 관한 정보를 호스트 장치 또는 증강현실 세션을 관리하는 서버로 요청해서 획득할 수도 있다.
이때, 증강현실 세션에 관한 정보는 마커의 이미지, 공유영역의 정보, 참여자 리스트, 실행될 증강현실 정보, 증강현실 세션의 시작시간, 증강현실 세션의 종료시간 및 증강현실 세션의 로그 기록 중 적어도 하나를 포함할 수 있다.
제어부(310)는 클라이언트 장치(300)의 전반적인 동작을 제어할 수 있다. 그리고, 제어부(310)는 클라이언트 처리부(311), 공유부(312), 검출부(313), 영역 추적부(314), 위치 추적부(315), 3차원 엔진부(316) 및 증강현실 실행부(317)의 기능을 수행할 수 있다. 제어부(310), 클라이언트 처리부(311), 공유부(312), 검출부(313), 영역 추적부(314), 위치 추적부(315), 3차원 엔진부(316) 및 증강현실 실행부(317)를 구분하여 도시한 것은 각 기능들을 구별하여 설명하기 위함이다. 따라서 제어부(310)는 클라이언트 처리부(311), 공유부(312), 검출부(313), 영역 추적부(314), 위치 추적부(315), 3차원 엔진부(316) 및 증강현실 실행부(317) 각각의 기능을 수행하도록 구성된(configured) 적어도 하나의 프로세서를 포함할 수 있다. 또한, 제어부(310)는 클라이언트 처리부(311), 공유부(312), 검출부(313), 영역 추적부(314), 위치 추적부(315), 3차원 엔진부(316) 및 증강현실 실행부(317) 각각의 기능 중 일부를 수행하도록 구성된(configured) 적어도 하나의 프로세서를 포함할 수 있다.
이하, 상기와 같이 구성된 본 발명에 따른 증강현실 시스템에서 이종 마커를 이용해서 원격으로 증강현실 서비스를 공유하는 방법을 아래에서 도면을 참조하여 설명한다.
도 5는 본 발명의 실시예에 따른 증강현실 시스템의 클라이언트 장치에서 증강현실 세션을 생성하는 과정을 도시한 흐름도이다.
도 5를 참조하면 클라이언트 장치는 510단계에서 마커의 정보를 확인하고, 512단계에서 마커의 정보를 포함하는 증강현실 세션의 생성을 요청하는 세션 생성 요청 메시지를 호스트 장치로 송신한다. 이때, 세션 생성 요청 메시지에는 증강현신 세션에 초청하고자 하는 클라이언트 장치의 리스트인 초청 리스트가 더 포함될 수도 있다. 또한, 세션 생성 요청 메시지에는 증강현실 객체의 정보가 포함될 수도 있다.
그리고, 클라이언트 장치는 514단계에서 호스트 장치에 의한 증강현실 세션의 시작을 감지하면, 516단계에서 증강현실 세션에 참여한다. 이때, 증강현실 세션의 시작 감지는 호스트 장치로부터 증강현실 세션으로 초청하는 세션 초청 메시지를 수신해서 획득할 수 있다. 세션 초청 메시지는 증강현실 세션에 관한 정보를 포함하고, 증강현실 세션에 관한 정보는 마커의 정보, 공유영역의 정보 참여자 리스트, 실행될 증강현실 정보, 증강현실 세션의 시작시간, 증강현실 세션의 종료시간 및 증강현실 세션의 로그 기록 중 적어도 하나를 포함할 수 있다. 이때, 공유영역의 정보는 증강현실 세션에 관한 정보에 포함될 수도 있지만, 이후 단계에서 호스트 장치로부터 따로 수신할 수도 있다.
그리고, 클라이언트 장치는 518단계에서 호스트 장치를 통해 다른 클라이언트 장치로부터 증강현실 세션으로의 참여를 요청하는 세션 참여 요청 메시지를 수신하면, 520단계에서 사용자로부터 참여 허가 여부를 결정받아 참여 허가 여부를 호스트 장치를 통해 다른 클라이언트 장치로 송신한다.
그리고, 클라이언트 장치는 522단계에서 증강현실 세션에 참여가 완료되었는지 확인한다. 522단계의 확인결과 증강현실 세션의 참여가 완료되지 않았으면 518단계로 돌아간다. 증강현실 세션의 참여 완료여부는 기설정된 조건을 만족하는지 여부를 통해 확인할 수도 있고, 사용자의 요청에 의해 완료되었다고 판단할 수도 있고, 초기에 참여시기고자 했던 초청 리스트의 클라이언트 장치가 모두 참여한 경우에 완료되었다고 판단할 수도 있다. 이때, 세션의 참여 완료여부를 판단하는 기설정된 조건에는 기설정된 수의 클라이언트가 참여한 경우, 일정 시간이 경과된 경우 등이 가능하다.
522단계의 확인결과 증강현실 세션의 참여가 완료되면, 클라이언트 장치는 524단계에서 호스트 장치로부터 공유영역 정보를 수신한다. 이때, 공유영역 정보는 514단계에서 세션 초청 메시지에 포함되어 수신될 수도 있다.
클라이언트 장치는 526단계에서 증강현실 세션에 참여중인 모든 클라이언트 장치들과 증강현실 객체의 정보를 공유한다. 이때, 증강현실 객체의 정보는 호스트 장치를 통해 증강현실 세션에 참여중인 모든 클라이언트 장치들과 공유될 수 있다.
그리고, 클라이언트 장치는 528단계에서 원격으로 다른 클라이언트 장치들과의 증강현실 서비스를 공유해서 수행한다.
한편, 518단계에서 522단계는 클라이언트 장치에서 수행되어야 하는 것은 아니며, 수행되지 않거나 호스트 장치에서 수행되어도 상관없다.
도 6은 본 발명의 실시예에 따른 증강현실 시스템의 클라이언트 장치에서 증강현실 세션에 참여하는 과정을 도시한 흐름도이다.
도 6을 참조하면, 클라이언트 장치는 610단계에서 증강현실 세션에 관한 정보를 획득한다. 클라이언트 장치는 호스트로 장치로부터 세션 초청 메시지를 수신하고, 세션 초청 메시지에서 증강현실 세션에 관한 정보를 획득할 수 있다. 또한, 클라이언트 장치는 증강현실 세션에 관한 정보를 호스트 장치 또는 증강현실 세션을 관리하는 서버로 요청해서 획득할 수도 있다.
그리고, 클라이언트 장치는 612단계에서 사용자로부터 증강현실 세션에 참여를 요청하는 이벤트의 발생을 감지하면, 614단계에서 클라이언트 장치에서 사용할 마커의 정보를 확인한다.
그리고, 클라이언트 장치는 616단계에서 증강현실 세션에 참여함을 요청하는 세션 참여 요청 메시지를 호스트 장치로 송신한다. 이때, 세션 참여 요청 메시지는 확인한 마커의 정보를 포함한다.
그리고, 클라이언트 장치는 620단계에서 증강현실 세션의 참여를 허가 받았는지 확인한다. 증강현실 세션의 참여 허가는 기설정된 조건을 만족하는지 여부에 따라 결정되거나, 증강현실 세션의 생성을 요청한 클라이언트 장치로부터 참여 여부를 결정 받거나 또는 증강현실 세션에 현재 참여중인 참여 클라이언트 장치들의 의견에 따라 참여 여부가 결정될 수 있다.
620단계의 확인결과 증강현실 세션의 참여를 허가 받으면, 클라이언트 장치는 622단계에서 호스트 장치로부터 공유영역의 정보를 수신한다.
그리고, 클라이언트 장치는 624단계에서 증강현실 세션에 참여중인 모든 클라이언트 장치들과 증강현실 객체의 정보를 공유한다. 이때, 증강현실 객체의 정보는 호스트 장치를 통해 증강현실 세션에 참여중인 모든 클라이언트 장치들과 공유될 수 있다.
그리고, 클라이언트 장치는 626단계에서 원격으로 다른 클라이언트 장치들과의 증강현실 서비스를 공유해서 수행한다.
도 7은 본 발명의 실시예에 따른 증강현실 시스템의 클라이언트 장치에서 원격으로 증강현실 서비스를 수행하는 과정을 도시한 흐름도이다.
도 7을 참조하면, 클라이언트 장치는 710단계에서 프리뷰 영상을 촬영한다.
그리고, 클라이언트 장치는 712단계에서 쵤영된 프리뷰 영상에서 마커를 검출한다. 712단계의 확인결과 프리뷰 영상에서 마커가 검출되지 않으면, 클라이언트 장치는 710단계로 돌아간다.
712단계의 확인결과 프리뷰 영상에서 마커가 검출되면, 클라이언트 장치는 714단계에서 공유영역의 정보를 이용해서 프리뷰 영상에 포함된 마커에서 공유영역을 추적한다.
그리고, 클라이언트 장치는 716단계에서 마커, 공유영역 또는 증강현실 서비스에 대응하는 증강현실 객체의 정보를 확인한다.
그리고, 클라이언트 장치는 718단계에서 마커의 특징점을 이용해서 클라이언트 장치의 위치를 추적한다.
그리고, 클라이언트 장치는 720단계에서 추적한 위치에 따른 증강현실 객체를 생성해서 추적한 공유영역에 디스플레이한다.
그리고, 클라이언트 장치는 722단계에서 증강현실 실행에 따른 증강현실 객체의 동작을 처리하고, 변경되는 증강현실 객체의 정보를 증강현실 세션에 참여중인 다른 클라이언트 장치들과 공유한다.
도 8은 본 발명의 실시예에 따른 증강현실 시스템의 호스트 장치에서 원격으로 증강현실을 서비스하는 과정을 도시한 흐름도이다.
도 8을 참조하면, 호스트 장치는 810단계에서 증강현실 세션의 생성을 요청하는 세션 생성 요청 메시지를 수신하면, 812단계에서 세션 생성 요청 메시지에 포함된 마커의 정보를 확인한다.
그리고, 호스트 장치는 814단계에서 증강현실 세션을 시작한다. 그리고, 호스트 장치는 816단계에서 증강현실 세션에 관하 정보를 증강현실 세션에 참여할 다른 클라이언트 장치들에게 제공한다.
증강현실 세션에 관하 정보를 제공하는 방법으로 호스트 장치는 세션 생성 요청 메시지에 초청 리스트가 포함되어 있는 경우, 초청 리스트에 포함된 클라이언트 장치들로 증강현실 세션에 관한 정보를 송신한다.
또는, 호스트 장치는 클라이언트 장치로부터 증강현실 세션에 관한 정보를 요청받으면 요청한 클라이언트 장치로 증강현실 세션에 관한 정보를 송신할 수 있다. 또한, 호스트 장치는 클라이언트 장치가 접근할수 있는 서버에 증강현실 세션에 관한 정보를 송신해서 서버를 통해 서버에 접근하는 클라이언트 장치로 증강현실 세션에 관한 정보를 제공할 수도 있다.
이때, 증강현실 세션에 관한 정보는 마커의 이미지, 참여자 리스트, 실행될 증강현실 정보, 증강현실 세션의 시작시간, 증강현실 세션의 종료시간 및 증강현실 세션의 로그 기록 중 적어도 하나를 포함할 수 있다.
그리고, 호스트 장치는 818단계에서 클라이언트 장치로부터 증강현실 세션으로의 참여를 요청하는 세션 참여 요청 메시지를 수신하면, 820단계에서 클라이언트 장치의 참여 허가 여부를 확인한다.
이때, 클라이언트 장치의 참여 허가 여부는 기설정된 조건을 만족하는지 여부에 따라 결정되거나, 증강현실 세션의 생성을 요청한 클라이언트 장치로부터 참여 여부를 결정 받거나 또는 증강현실 세션에 현재 참여중인 참여 클라이언트 장치들의 의견에 따라 참여 여부가 결정될 수 있다.
그리고, 호스트 장치는 822단계에서 확인한 세션 참여 허가 여부를 세션 참여 요청 메시지를 송신한 클라이언트 장치로 송신한다.
그리고, 호스트 장치는 824단계에서 증강현실 세션에 참여가 완료되었는지 확인한다. 824단계의 확인결과 증강현실 세션의 참여가 완료되지 않았으면 818단계로 돌아간다. 증강현실 세션의 참여 완료여부는 기설정된 조건을 만족하는지 여부를 통해 확인할 수도 있고, 증강현실 세션의 생성을 요청한 클라이언트 장치로부터 참여 완료를 판단 받을 수도 있고, 초기에 참여시기고자 했던 초청 리스트의 클라이언트 장치가 모두 참여한 경우에 완료되었다고 판단할 수도 있다. 이때, 세션의 참여 완료여부를 판단하는 기설정된 조건에는 기설정된 수의 클라이언트가 참여한 경우, 일정 시간이 경과된 경우 등이 가능하다.
824단계의 확인결과 증강현실 세션의 참여가 완료되면, 호스트 장치는 826단계에서 증강현실 세션에 참여중인 클라이언트 장치들 각각으로부터 수신한 마커들의 정보를 이용해서 증강현실 세션에 참여중인 클라이언트 장치들에게 공통으로 증강현실 서비스를 제공하는 영역인 공유영역을 설정하고, 설정한 공유영역의 정보를 증강현실 세션에 참여중인 클라이언트 장치들에게 송신한다.
그리고, 호스트 장치는 828단계에서 증강현실 세션에 참여중인 모든 클라이언트 장치들에게 증강현실 객체의 정보가 공유되도록 중계한다.
그리고, 호스트 장치는 830단계에서 증강현실 실행에 따른 증강현실 객체의 동작 또는 변경되는 증강현실 객체의 정보가 증강현실 세션에 참여중인 클라이언트 장치들 간에 공유되도록 중계한다.
본 발명의 실시 예에 따른 방법들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.

Claims (20)

  1. 호스트 장치와 데이터를 송수신 하는 통신부;
    마커의 정보와 증강현실 객체의 정보를 상기 통신부를 통해 상기 호스트 장치로 송신하고, 상기 호스트 장치로부터 증강현실 세션에 참여중인 클라이언트 장치들에게 공통으로 증강현실 서비스를 제공하는 영역인 공유영역의 정보를 수신하는 공유부;
    프리뷰 영상에서 상기 마커를 검출하는 검출부;
    상기 공유영역의 정보를 이용해서 상기 프리뷰 영상에 포함된 상기 마커에서 공유영역을 추적하는 영역 추적부;
    상기 증강현실 객체 정보를 이용해서 상기 마커에 따른 증강현실 객체를 생성하고, 상기 추적한 공유영역에 상기 증강현실 객체를 디스플레이 하는 엔진부; 및
    변경되는 증강현실 객체의 정보를 상기 증강현실 세션에 포함된 다른 클라이언트 장치들과 공유하도록 하는 증강현실 실행부를 포함하는
    증강현실 시스템의 클라이언트 장치.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 제1항에 있어서,
    상기 마커의 정보에 포함된 상기 마커의 특징점을 이용해서 클라이언트 장치의 위치를 추적하는 위치 추정부를 포함하고,
    상기 엔진부는,
    상기 위치 추적된 클라이언트 장치의 위치에 고려해서 상기 증강현실 객체를 디스플레이 하는
    증강현실 시스템의 클라이언트 장치.
  6. 제1항에 있어서,
    기설정되어 저장된 정보를 검색하여 상기 마커의 정보를 확인하거나 또는 클라이언트 장치들로부터 상기 마커의 정보를 수신하여 확인하고, 상기 마커의 정보를 포함하는 증강현실 세션의 생성 요청 메시지를 상기 호스트 장치로 송신하는 클라이언트 처리부를 더 포함하는
    증강현실 시스템의 클라이언트 장치.
  7. 제6항에 있어서,
    상기 클라이언트 처리부는,
    다른 클라이언트 장치로부터 상기 증강현실 세션으로의 참여를 요청하는 세션 참여 요청 메시지를 수신하면, 참여 허가 여부를 상기 다른 클라이언트 장치로 송신하는
    증강현실 시스템의 클라이언트 장치.
  8. 제1항에 있어서,
    상기 호스트 장치로부터 상기 증강현실 세션에 관한 정보를 획득하고, 상기 증강현실 세션에 참여함을 요청하는 세션 참여 요청 메시지를 상기 호스트 장치로 송신하는 클라이언트 처리부를 더 포함하는
    증강현실 시스템의 클라이언트 장치.
  9. 제8항에 있어서,
    상기 클라이언트 처리부는,
    상기 호스트로 장치로부터 세션 초청 메시지를 수신하고, 상기 세션 초청 메시지에서 상기 증강현실 세션에 관한 정보를 획득하는
    증강현실 시스템의 클라이언트 장치.
  10. 제8항에 있어서,
    상기 클라이언트 처리부는,
    상기 증강현실 세션에 관한 정보를 상기 호스트 장치 또는 상기 증강현실 세션을 관리하는 서버로 요청해서 획득하는
    증강현실 시스템의 클라이언트 장치.
  11. 제8항에 있어서,
    상기 증강현실 세션에 관한 정보는,
    상기 마커의 정보, 상기 공유영역의 정보, 참여자 리스트, 상기 증강현실 세션의 시작시간, 상기 증강현실 세션의 종료시간 및 상기 증강현실 세션의 로그 기록 중 적어도 하나를 포함하는
    증강현실 시스템의 클라이언트 장치.
  12. 클라이언트 장치들과 데이터를 송수신 하는 통신부;
    증강현실 세션에 참여중인 클라이언트 장치들 각각으로부터 마커들의 정보를 수신하면 상기 마커들의 정보를 이용해서 증강현실 세션에 참여중인 클라이언트 장치들에게 공통으로 증강현실 서비스를 제공하는 영역인 공유영역을 설정하는 공유영역 설정부; 및
    상기 공유영역의 정보와 증강현실 객체의 정보를 상기 통신부를 통해 상기 증강현실 세션에 참여중인 클라이언트 장치들 간에 공유되도록 하는 공유부를 포함하는
    증강현실 시스템의 호스트 장치.
  13. 삭제
  14. 제12항에 있어서,
    상기 공유영역 설정부는,
    상기 증강현실 세션에 새로운 클라이언트 장치가 참여하면, 상기 공유영역을 재설정하고,
    상기 공유부는,
    상기 재설정한 공유영역의 정보를 상기 증강현실 세션에 참여중인 클라이언트 장치들 간에 공유되도록 하는
    증강현실 시스템의 호스트 장치.
  15. 제12항에 있어서,
    상기 공유부는,
    상기 증강현실 세션에 참여중인 클라이언트 장치로부터 상기 증강현실 객체의 변경을 요청 받으면, 상기 증강현실 세션에 참여하는 모든 클라이언트 장치들로 변경된 증강현실 객체의 정보를 송신하는
    증강현실 시스템의 호스트 장치.
  16. 제12항에 있어서,
    상기 증강현실 세션의 생성을 요청하는 세션 생성 요청 메시지를 수신하면, 상기 세션 생성 요청 메시지에 포함된 상기 마커의 정보를 확인하고 상기 증강현실 세션을 시작하는 호스트 처리부를 더 포함하고,
    상기 공유부는,
    상기 세션 생성 요청 메시지에 초청 리스트가 포함되어 있으면, 상기 초청 리스트에 포함된 클라이언트 장치들로 상기 증강현실 세션에 관한 정보를 포함하는 세션 초청 메시지를 송신하거나 또는 클라이언트 장치로부터 상기 증강현실 세션에 관한 정보를 요청받으면 제공하는
    증강현실 시스템의 호스트 장치.
  17. 제16에 있어서,
    상기 호스트 처리부는,
    클라이언트 장치로부터 상기 증강현실 세션으로의 참여를 요청하는 세션 참여 요청 메시지를 수신하면, 상기 클라이언트 장치의 참여 허가 여부를 확인해서 참여 허가 여부에 관한 정보를 상기 클라이언트 장치로 송신하는
    증강현실 시스템의 호스트 장치.
  18. 제16항에 있어서,
    상기 증강현실 세션에 관한 정보는,
    상기 마커의 정보, 상기 공유영역의 정보, 참여자 리스트, 상기 증강현실 세션의 시작시간, 상기 증강현실 세션의 종료시간 및 상기 증강현실 세션의 로그 기록 중 적어도 하나를 포함하는
    증강현실 시스템의 호스트 장치.
  19. 마커의 정보와 증강현실 객체의 정보를 호스트 장치로 송신하고, 상기 호스트 장치로부터 증강현실 세션에 참여중인 클라이언트 장치들에게 공통으로 증강현실 서비스를 제공하는 영역인 공유영역의 정보를 수신하는 단계;
    프리뷰 영상에서 상기 마커를 검출하는 단계;
    상기 공유영역의 정보를 이용해서 상기 프리뷰 영상에 포함된 상기 마커에서 공유영역을 추적하는 단계;
    상기 증강현실 객체 정보를 이용해서 상기 마커에 따른 증강현실 객체를 생성하고, 상기 추적한 공유영역에 상기 증강현실 객체를 디스플레이 하는 단계; 및
    변경되는 증강현실 객체의 정보를 상기 증강현실 세션에 포함된 다른 클라이언트 장치들과 공유하는 단계를 포함하는
    증강현실 시스템의 클라이언트 장치의 동작 방법.
  20. 증강현실 세션의 생성을 요청하는 세션 생성 요청 메시지를 수신하면, 상기 세션 생성 요청 메시지에 포함된 마커의 정보를 확인해서 상기 증강현실 세션을 시작하는 단계;
    클라이언트 장치로부터 상기 증강현실 세션으로의 참여를 요청하는 세션 참여 요청 메시지를 수신하면, 상기 클라이언트 장치의 참여 허가 여부를 확인해서 참여 허가 여부에 관한 정보를 상기 클라이언트 장치로 송신하는 단계;
    상기 증강현실 세션에 참여중인 클라이언트 장치들 각각으로부터 수신한 마커들의 정보를 이용해서 상기 증강현실 세션에 참여중인 클라이언트 장치들에게 공통으로 증강현실 서비스를 제공하는 영역인 공유영역을 설정하는 단계; 및
    상기 공유영역의 정보와 증강현실 객체의 정보가 상기 증강현실 세션에 참여중인 클라이언트 장치들 간에 공유되도록 하는 단계를 포함하는
    증강현실 시스템의 호스트 장치의 동작 방법.
KR1020110008075A 2011-01-27 2011-01-27 이종 마커를 이용해서 원격으로 증강현실 서비스를 공유하는 증강현실 시스템 및 그 방법 KR101329935B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020110008075A KR101329935B1 (ko) 2011-01-27 2011-01-27 이종 마커를 이용해서 원격으로 증강현실 서비스를 공유하는 증강현실 시스템 및 그 방법
US13/312,890 US20120194548A1 (en) 2011-01-27 2011-12-06 System and method for remotely sharing augmented reality service

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110008075A KR101329935B1 (ko) 2011-01-27 2011-01-27 이종 마커를 이용해서 원격으로 증강현실 서비스를 공유하는 증강현실 시스템 및 그 방법

Publications (2)

Publication Number Publication Date
KR20120086796A KR20120086796A (ko) 2012-08-06
KR101329935B1 true KR101329935B1 (ko) 2013-11-14

Family

ID=46576992

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110008075A KR101329935B1 (ko) 2011-01-27 2011-01-27 이종 마커를 이용해서 원격으로 증강현실 서비스를 공유하는 증강현실 시스템 및 그 방법

Country Status (2)

Country Link
US (1) US20120194548A1 (ko)
KR (1) KR101329935B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10437055B2 (en) 2015-01-07 2019-10-08 Samsung Electronics Co., Ltd. Master device, slave device, and control method therefor

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11397462B2 (en) * 2012-09-28 2022-07-26 Sri International Real-time human-machine collaboration using big data driven augmented reality technologies
CN104936665B (zh) * 2012-10-22 2017-12-26 开放信息公司 合作增强现实
JP6281495B2 (ja) * 2013-02-01 2018-02-21 ソニー株式会社 情報処理装置、端末装置、情報処理方法及びプログラム
US20140270477A1 (en) * 2013-03-14 2014-09-18 Jonathan Coon Systems and methods for displaying a three-dimensional model from a photogrammetric scan
US10262462B2 (en) 2014-04-18 2019-04-16 Magic Leap, Inc. Systems and methods for augmented and virtual reality
US9690374B2 (en) * 2015-04-27 2017-06-27 Google Inc. Virtual/augmented reality transition system and method
US11494990B2 (en) * 2018-10-08 2022-11-08 Google Llc Hybrid placement of objects in an augmented reality environment
CN113632089B (zh) * 2019-03-29 2023-10-20 平田机工株式会社 图面检验***、客户端装置、程序、记录介质、服务器装置及控制方法
US20220407899A1 (en) * 2021-06-18 2022-12-22 Qualcomm Incorporated Real-time augmented reality communication session

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4236717B2 (ja) * 1996-09-30 2009-03-11 ソニー株式会社 ３次元仮想現実空間共有システムにおける情報処理装置、情報処理方法および情報提供媒体
KR20100022428A (ko) * 2008-08-19 2010-03-02 광주과학기술원 혼합 공간에 공존하는 마커들을 관리하는 마커 관리 시스템과 그 방법, 및 상기 방법을 구현하는 프로그램이 기록된 기록매체
KR100963238B1 (ko) 2008-02-12 2010-06-10 광주과학기술원 개인화 및 협업을 위한 테이블탑-모바일 증강현실 시스템과증강현실을 이용한 상호작용방법
JP4544262B2 (ja) * 2007-05-07 2010-09-15 ソニー株式会社 仮想現実空間共有システムおよび方法、並びに、情報処理装置および方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8250201B2 (en) * 2002-09-09 2012-08-21 International Business Machines Corporation Servlet monitoring tool
SE0203908D0 (sv) * 2002-12-30 2002-12-30 Abb Research Ltd An augmented reality system and method
US8365018B2 (en) * 2007-06-19 2013-01-29 Sand Holdings, Llc Systems, devices, agents and methods for monitoring and automatic reboot and restoration of computers, local area networks, wireless access points, modems and other hardware
US20090300101A1 (en) * 2008-05-30 2009-12-03 Carl Johan Freer Augmented reality platform and method using letters, numbers, and/or math symbols recognition
US8451266B2 (en) * 2009-12-07 2013-05-28 International Business Machines Corporation Interactive three-dimensional augmented realities from item markers for on-demand item visualization

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4236717B2 (ja) * 1996-09-30 2009-03-11 ソニー株式会社 ３次元仮想現実空間共有システムにおける情報処理装置、情報処理方法および情報提供媒体
JP4544262B2 (ja) * 2007-05-07 2010-09-15 ソニー株式会社 仮想現実空間共有システムおよび方法、並びに、情報処理装置および方法
KR100963238B1 (ko) 2008-02-12 2010-06-10 광주과학기술원 개인화 및 협업을 위한 테이블탑-모바일 증강현실 시스템과증강현실을 이용한 상호작용방법
KR20100022428A (ko) * 2008-08-19 2010-03-02 광주과학기술원 혼합 공간에 공존하는 마커들을 관리하는 마커 관리 시스템과 그 방법, 및 상기 방법을 구현하는 프로그램이 기록된 기록매체

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10437055B2 (en) 2015-01-07 2019-10-08 Samsung Electronics Co., Ltd. Master device, slave device, and control method therefor

Also Published As

Publication number Publication date
KR20120086796A (ko) 2012-08-06
US20120194548A1 (en) 2012-08-02

Similar Documents

Publication Publication Date Title
KR101292463B1 (ko) 원격으로 증강현실 서비스를 공유하는 증강현실 시스템 및 그 방법
KR101329935B1 (ko) 이종 마커를 이용해서 원격으로 증강현실 서비스를 공유하는 증강현실 시스템 및 그 방법
KR101338700B1 (ko) 마커를 분할해서 공유하는 증강 현실 시스템 및 그 방법
US10764626B2 (en) Method and apparatus for presenting and controlling panoramic image, and storage medium
TWI669634B (zh) 基於擴增實境的虛擬對象分配方法及裝置
KR101306288B1 (ko) 가상 객체를 이용한 증강 현실 제공 장치 및 방법
US20090241039A1 (en) System and method for avatar viewing
US20150265922A1 (en) Information processing system, information processing apparatus, storage medium having stored therein information processing program, and information processing method
KR20150039233A (ko) 소셜 증강현실 서비스 시스템 및 방법
US11416202B2 (en) Communication terminal, communication system, method of sharing data, and recording medium
JP5067477B2 (ja) 撮像パラメータ取得装置、撮像パラメータ取得方法、及び、プログラム
WO2019109828A1 (zh) Ar业务处理方法、装置、服务器、移动终端及存储介质
US20190037611A1 (en) Intuitive inter-device connectivity for data sharing and collaborative resource usage
US11740766B2 (en) Information processing system, information processing method, and computer program
US11736802B2 (en) Communication management apparatus, image communication system, communication management method, and recording medium
JP2023071712A (ja) 動画を配信するためのシステム、方法、及びプログラム
JP6617547B2 (ja) 画像管理システム、画像管理方法、プログラム
JP6149967B1 (ja) 動画配信サーバ、動画出力装置、動画配信システム、及び動画配信方法
US11847297B2 (en) Method of providing real-time VR service through avatar
US11238658B2 (en) AR space image projecting system, AR space image projecting method, and user terminal
US20240040105A1 (en) System and method
JP2016038682A (ja) 情報処理装置及びその制御方法、サーバ装置及びその制御方法、コンピュータプログラム
JP7280492B2 (ja) 情報処理装置、情報処理方法およびプログラム
US20230308705A1 (en) Communication terminal, communication management system, remote operation method, processing method, and communication management method
US20220198765A1 (en) Spatially Aware Environment Interaction

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170508

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190430

Year of fee payment: 6