KR20200069004A - 다시점 360도 vr 컨텐츠 제공 시스템 - Google Patents

다시점 360도 vr 컨텐츠 제공 시스템 Download PDF

Info

Publication number
KR20200069004A
KR20200069004A KR1020180156056A KR20180156056A KR20200069004A KR 20200069004 A KR20200069004 A KR 20200069004A KR 1020180156056 A KR1020180156056 A KR 1020180156056A KR 20180156056 A KR20180156056 A KR 20180156056A KR 20200069004 A KR20200069004 A KR 20200069004A
Authority
KR
South Korea
Prior art keywords
content
content providing
image
modeling data
virtual space
Prior art date
Application number
KR1020180156056A
Other languages
English (en)
Other versions
KR102200115B1 (ko
Inventor
홍승모
Original Assignee
(주)포스트미디어
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)포스트미디어 filed Critical (주)포스트미디어
Priority to KR1020180156056A priority Critical patent/KR102200115B1/ko
Priority to CN201910017120.5A priority patent/CN111292424A/zh
Publication of KR20200069004A publication Critical patent/KR20200069004A/ko
Application granted granted Critical
Publication of KR102200115B1 publication Critical patent/KR102200115B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/20—Finite element generation, e.g. wire-frame surface description, tesselation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/003—Navigation within 3D models or images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Geometry (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Databases & Information Systems (AREA)
  • Processing Or Creating Images (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

본 명세서는 가상 공간 내 다시점 360도 VR 컨텐츠를 제공할 수 있는 시스템을 개시한다. 본 명세서에 따른 다시점 360도 VR 컨텐츠 제공 시스템은 컨텐츠 제공서버, 컨텐츠 제공장치 및 컨텐츠 재생장치를 포함하는 다시점 360도 VR 컨텐츠 제공 시스템으로서, 상기 컨텐츠 제공서버는, 특정 촬영 장소에서 촬영된 하나 이상의 이미지를 스티칭(Stiching)하여 구 형상의 이미지, 상기 구 형상의 이미지의 위치 정보, 특정 장소에 위치한 대상체의 3차원 모델링 데이터 및 상기 3차원 모델링 데이터의 위치 정보를 저장하고, 상기 컨텐츠 제공장치는, 특정 영역 내 위치 정보를 가진 구 형상의 이미지 및 3차원 모델링 데이터를 요청하고 상기 컨텐츠 제공 서버로부터 수신하여 상기 컨텐츠 재생장치에게 선별적으로 제공하고, 상기 컨텐츠 재생장치는, 사용자의 입력에 따른 가상 공간 내 위치 정보를 상기 컨텐츠 제공장치에게 전송하고, 상기 컨텐츠 재생장치로부터 상기 위치에 해당하는 컨텐츠를 수신한다.

Description

다시점 360도 VR 컨텐츠 제공 시스템{SYSTEM FOR PROVIDING MULTI-VIEW 360 ANGLE VR CONTENTS}
본 발명은 360도 VR 컨텐츠 제공 시스템에 관한 것이며, 보다 상세하게는 사용자에 높은 자유도를 부여하고 이에 따라 자유로운 시점 변화에 대응할 수 있는 다시점 컨텐츠를 제공할 수 있는 시스템에 관한 것이다.
기술의 발전으로 이미지 또는 영상을 포함하는 컨텐츠는 일정한 장면만을 담아내는 것을 넘어 파노라마 컨텐츠와 같이 360°의 모든 경치를 담아내거나, VR(Virtual Reality; 가상현실) 컨텐츠와 같이 파노라마 컨텐츠에 가공 과정을 거쳐 구형 또는 원통형 모양에 매핑함으로써, 가상의 공간을 만들어 체험자로 하여금 실제로 존재하지 않는 공간을 체험할 수 있도록 한다.
그러나 특정 위치에서 촬영된 VR 컨텐츠로 재생된 360°의 가상 공간은, 촬영된 특정 위치에서 보여진 영상만 제공이 가능하고, 촬영 위치에서 벗어난 영역의 영상 컨텐츠를 제공하지 못한다는 단점이 있다.
등록특허공보 제10-1807439호
본 명세서는 가상 공간 내 다시점 360도 VR 컨텐츠를 제공할 수 있는 시스템을 제공하는 것을 목적으로 한다.
본 명세서는 상기 언급된 과제로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
상술한 과제를 해결하기 위한 본 명세서에 따른 다시점 360도 VR 컨텐츠 제공 시스템은 컨텐츠 제공서버, 컨텐츠 제공장치 및 컨텐츠 재생장치를 포함하는 다시점 360도 VR 컨텐츠 제공 시스템으로서, 상기 컨텐츠 제공서버는, 특정 촬영 장소에서 촬영된 하나 이상의 이미지를 스티칭(Stiching)하여 구 형상의 이미지, 상기 구 형상의 이미지의 위치 정보, 특정 장소에 위치한 대상체의 3차원 모델링 데이터 및 상기 3차원 모델링 데이터의 위치 정보를 저장하고, 상기 컨텐츠 제공장치는, 특정 영역 내 위치 정보를 가진 구 형상의 이미지 및 3차원 모델링 데이터를 요청하고 상기 컨텐츠 제공 서버로부터 수신하여 상기 컨텐츠 재생장치에게 선별적으로 제공하고, 상기 컨텐츠 재생장치는, 사용자의 입력에 따른 가상 공간 내 위치 정보를 상기 컨텐츠 제공장치에게 전송하고, 상기 컨텐츠 재생장치로부터 상기 위치에 해당하는 컨텐츠를 수신한다.
본 명세서의 일 실시예에 따르면, 상기 컨텐츠 제공장치는, 상기 가상 공간 내 위치를 중심으로 미리 설정된 반경 내 위치 정보를 가진 구 형상의 이미지 및 3차원 모델링 데이터를 요청하여 상기 컨텐츠 제공 서버로부터 수신할 수 있다.
본 명세서의 다른 실시예에 따르면, 상기 컨텐츠 제공장치는, 상기 가상 공간 내 위치가 미리 설정된 구역 내부일 때 상기 미리 설정된 구역 내 위치 정보를 가진 구 형상의 이미지 및 3차원 모델링 데이터를 요청하여 상기 컨텐츠 제공 서버로부터 수신할 수 있다.
본 명세서의 일 실시예에 따르면, 상기 컨텐츠 제공장치는, 상기 컨텐츠 재생장치로부터 수신한 가상 공간 내 위치가 상기 구 형상의 이미지가 촬영된 지점에서 벗어나지만 상기 구 형상의 이미지가 촬영된 지점을 기준으로 미리 설정된 기준 반경 내에 위치할 때, 상기 구 형상의 이미지에서 영상기반 렌더링을 통해 생성된 새로운 시점의 구 형상의 이미지를 상기 컨텐츠 재생장치에게 제공할 수 있다.
그리고 상기 컨텐츠 제공장치는, 상기 컨텐츠 재생장치로부터 수신한 가상 공간 내 위치가 상기 구 형상의 이미지가 촬영된 지점을 기준으로 미리 설정된 기준 반경 밖에 위치할 때 상기 3차원 모델링 데이터를 상기 컨텐츠 재생장치에게 제공할 수 있다.
본 발명의 기타 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.
본 명세서의 일 측면에 따르면, 가상 공간 내에서 촬영 지점 외 사용자의 선택에 의하 자유로운 위치 선택이 가능하며, 사용자의 선택에 따른 위치에서 바라보는 시점에서 컨텐츠가 제공된다.
본 명세서의 다른 측면에 따르면, 사용자의 자유로운 시점 선택에 따라 스토리텔링 기반의 VR 컨텐츠 개발이 가능하다.
본 발명의 효과들은 이상에서 언급된 효과로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
도 1은 본 발명에 따른 다시점 360도 VR 컨텐츠 제공 시스템의 구성도이다.
도 2는 본 발명에 따른 구 형상의 이미지에 대한 참고도이다.
도 3은 이미지 기반 모델링의 참고도이다.
도 4는 가상 공간 내 데이터 요청 범위에 대한 참고도이다.
도 5는 구 형상의 이미지가 촬영된 위치에 대한 참고도이다.
도 6은 3차원 모델링 데이터의 참고도이다.
본 명세서에 개시된 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나, 본 명세서가 이하에서 개시되는 실시예들에 제한되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 명세서의 개시가 완전하도록 하고, 본 명세서가 속하는 기술 분야의 통상의 기술자(이하 '당업자')에게 본 명세서의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 명세서의 권리 범위는 청구항의 범주에 의해 정의될 뿐이다.
본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 명세서의 권리 범위를 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소 외에 하나 이상의 다른 구성요소의 존재 또는 추가를 배제하지 않는다. 명세서 전체에 걸쳐 동일한 도면 부호는 동일한 구성 요소를 지칭하며, "및/또는"은 언급된 구성요소들의 각각 및 하나 이상의 모든 조합을 포함한다. 비록 "제1", "제2" 등이 다양한 구성요소들을 서술하기 위해서 사용되나, 이들 구성요소들은 이들 용어에 의해 제한되지 않음은 물론이다. 이들 용어들은 단지 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용하는 것이다. 따라서, 이하에서 언급되는 제1 구성요소는 본 발명의 기술적 사상 내에서 제2 구성요소일 수도 있음은 물론이다.
다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 명세서가 속하는 기술분야의 통상의 기술자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또한, 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.
이하, 첨부된 도면을 참조하여 본 발명의 실시예를 상세하게 설명한다.
도 1은 본 발명에 따른 다시점 360도 VR 컨텐츠 제공 시스템의 구성도이다.
도 1을 참조하면, 본 발명에 따른 다시점 360도 VR 컨텐츠 제공 시스템(100)은 컨텐츠 제공서버(110), 컨텐츠 제공장치(120) 및 컨텐츠 재생장치(130)를 포함할 수 있다.
상기 컨텐츠 제공서버(110)와 상기 컨텐츠 제공장치(120)는 통신망을 통해 연결되어, 통신망을 통해 데이터의 송수신이 가능하다. 상기 통신망은 유선 및 무선 통신망 등 데이터를 송수신할 수 있는 다양한 통신망으로서 상기 컨텐츠 제공서버(110)와 상기 컨텐츠 제공장치(120)가 데이터를 전송하는 방식을 제한하지 않는다.
상기 컨텐츠 제공서버(110)는, 특정 촬영 장소에서 촬영된 하나 이상의 이미지를 스티칭(Stiching)하여 구 형상의 이미지, 상기 구 형상의 이미지의 위치 정보, 특정 장소에 위치한 대상체의 3차원 모델링 데이터 및 상기 3차원 모델링 데이터의 위치 정보를 저장할 수 있다.
도 2는 본 발명에 따른 구 형상의 이미지에 대한 참고도이다.
도 2를 참조하면, N개의 이미지를 스티칭(Stiching)하여 구(sphere) 형상의 이미지를 생성하는 과정을 확인할 수 있다. 상기 구 형상의 이미지는 상기 컨텐츠 제공장치(120)를 통해 상기 컨텐츠 재생장치(130)에 표시될 수 있으며, 사용자의 시선 방향에 따라 해당 시야 방향의 이미지를 사용자가 볼 수 있다.
상기 각 구 형상의 이미지는 촬영된 장소에 대한 위치 정보가 매칭되어 있다. 따라서, 상기 구 형상의 이미지는 가상 공간 내 특정 위치와 대응할 수 있다.
상기 특정 장소에 위치한 대상체의 3차원 모델링 데이터란, 실제 건물, 구조물 등의 실물을 랜더링하여 표현한 3차원 데이터를 의미한다. 상기 3차원 모델링 데이터는 실제 대상체를 3차원 스캐닝을 통하여 얻을 수 있으며, 이미지 기반 모델링(Image based Modeling)을 통해서 얻을 수도 있다.
도 3은 이미지 기반 모델링의 참고도이다.
도 3을 참조하면, 자동차 또는 건축물의 이미지를 기반으로 모델링한 예시를 확인할 수 있다. 도 3의 상단의 예시는 대상체의 여러 방향에서 촬영된 이미지를 기반으로 모델링한 예시이며, 도 3의 하단의 예시는 대상체의 어느 한 방향에서 촬영된 이미지를 기반으로 모델링한 예시이다. 도 3의 상단 예시에 따른 3차원 모델링 데이터의 경우 사용자가 어느 위치에서도 자유롭게 관찰이 가능하지만, 도 3의 상단 예시에 따른 3차원 모델링 데이터의 경우 사용자가 촬영 위치를 중심으로 제한된 범위에서만 관찰이 가능하다.
상기 각 3차원 모델링 데이터 역시 대상체의 위치 정보가 매칭되어 있다. 따라서, 상기 3차원 모델링 데이터는 가상 공간 내 특정 위치와 대응할 수 있다.
상기 컨텐츠 제공장치(120)는 특정 영역 내 위치 정보를 가진 구 형상의 이미지 및 3차원 모델링 데이터를 요청하고 상기 컨텐츠 제공서버(110)로부터 수신하여 상기 컨텐츠 재생장치(130)에게 선별적으로 제공할 수 있다.
상기 컨텐츠 재생장치(130)는 사용자의 입력에 따른 가상 공간 내 위치 정보를 상기 컨텐츠 제공장치(120)에게 전송하고, 상기 컨텐츠 재생장치(130)로부터 상기 위치에 해당하는 컨텐츠를 수신할 수 있다.
상기 컨텐츠 제공장치(120)와 상기 컨텐츠 재생장치(130)는 유선 또는 무선 방식을 통해 연결된 장치로서, 상기 컨텐츠 제공장치(120)에서 제공된 컨텐츠를 상기 컨텐츠 재생장치(130)에 포함된 디스플레이를 통해 출력이 가능하다.
상기 컨텐츠 재생장치(130)는 헤드 마운티드 디스플레이(Head Mounted Display, HMD) 형태로 구현될 수 있다. HMD 형태란, 두부에 장착되어, 사용자의 눈 앞에 직접 영상을 보여주는 디스플레이 방식을 말한다. 상기 컨텐츠 재생장치(130)는 비주얼 컨텐츠를 출력할 수 있다. 상기 비주얼 컨텐츠는 상기 컨텐츠 제공장치(120)를 통해 상기 컨텐츠 제공서버(110)에서 제공된 컨텐츠를 의미한다. 상기 비주얼 컨텐츠에는 애플리케이션, 이미지, 동영상, 아이콘, 유저 인터페이스 등을 더 포함할 수 있다.
또한, 상기 컨텐츠 재생장치(130)는 가상 현실 컨텐츠를 출력할 수 있다 상기 컨텐츠 재생장치(130)가 HMD로 구현된 경우, 암막형(see-closed) 방식으로 가상 현실 컨텐츠를 출력할 수 있다. 여기에서, 암막형 방식은 사용자가 외부 환경을 인식할 수 없는 상태에서, 컨텐츠를 이용하는 방식에 해당한다. 본 발명에서, 상기 컨텐츠 재생장치(130)가 HMD로 구현된 경우로서 암막형으로 컨텐츠를 출력하는 것으로 가정하도록 한다.
한편, 상기 컨텐츠 재생장치(130)는 사용자의 다양한 입력 및 주변 환경을 센싱하여, 센싱 결과를 상기 컨텐츠 제공장치에게 전달할 수 있다. 사용자의 다양한 입력은 카메라, 마이크, 터치 센서, 가속도 센서, 자이로 센서, GPS 센서, 지자기 센서 등을 통해 수신될 수 있다. 본 발명에서는, 상기 컨텐츠 재생장치(130)가 HMD로 구현된 경우로서, HMD를 착용한 사용자의 움직임의 각도, 방향, 속도 등을 센싱할 수 있다.
상기 컨텐츠 제공서버(110)에는 다양한 장소, 다양한 위치, 다양한 건물 등에 대한 구 형상의 이미지 및 3차원 모델링 데이터를 저장할 수 있다. 상기 컨텐츠 제공서버(110)에 저장된 모든 구 형상의 이미지 및 3차원 모델링 데이터를 상기 컨텐츠 제공장치(120)에게 송신하는 것은 매우 비효율적이다. 따라서, 상기 컨텐츠 재생장치(130)가 가상 공간 내 위치에 대응하여 관련 구 형상의 이미지 및 3차원 모델링 데이터를 상기 컨텐츠 제공장치(120)에게 송신하는 것이 보다 효율적이다.
도 4는 가상 공간 내 데이터 요청 범위에 대한 참고도이다.
도 4를 참조하면, 상기 컨텐츠 재생장치(130)에 표시되는 가상 공간에 대한 참고도이다. 이해의 편의를 위해 건축물이 있는 문화 유적지를 일 예로 하겠다. 상기 컨텐츠 재생장치(130)를 사용하는 사용자는 상기 문화 유적지가 구현된 가상 공간에 위치하고 있다. 도 4에서 붉은 점이 현재 사용자가 위치한 가상 공간 내 위치이다. 따라서 상기 가상 공간 내에서 보여지는 영역에 대한 구 형상의 이미지 및 3차원 모델링 데이터가 필요하다.
본 명세서의 일 실시예에 따르면, 상기 컨텐츠 제공장치(120)는 상기 가상 공간 내 위치를 중심으로 미리 설정된 반경 내 위치 정보를 가진 구 형상의 이미지 및 3차원 모델링 데이터를 요청하여 상기 컨텐츠 제공서버(110)로부터 수신할 수 있다. 도 4의 (a)는 상기 실시예의 참고도이다.
본 명세서의 다른 실시예에 따르면, 상기 컨텐츠 제공장치(120)는 상기 가상 공간 내 위치가 미리 설정된 구역 내부일 때 상기 미리 설정된 구역 내 위치 정보를 가진 구 형상의 이미지 및 3차원 모델링 데이터를 요청하여 상기 컨텐츠 제공 서버로부터 수신할 수 있다. 도 4의 (b)는 상기 실시예의 참고도이다.
한편, 본 발명에 따른 다시점 360도 VR 컨텐츠 제공 시스템(100)은 사용자에게 높은 자유도를 부여하여 가상 공간 내 자유로운 이동과 이에 따른 다시점 컨텐츠를 제공하고자 한다. 이때, 상기 사용자가 가상 공간 내에서 상기 구 형상의 이미지가 촬영된 위치를 벗어날 수 있다. 이 경우, 사용자가 바라보는 시점이 변화하기 때문에, 이에 따라 제공되는 컨텐츠에도 시점 변화가 필요하다.
도 5는 구 형상의 이미지가 촬영된 위치에 대한 참고도이다.
도 5를 참조하면, 가상 공간 내 파란 원으로 표시된 지점이 구 형상의 이미지가 촬영된 위치이다. 따라서 사용자가 상기 가상 공간 내 파란 원으로 표시된 지점을 벗어날 경우, 시점 변화에 따른 컨텐츠 제공이 필요하다.
본 명세서의 일 실시예에 따르면, 상기 컨텐츠 제공장치(120)는 상기 컨텐츠 재생장치(130)로부터 수신한 가상 공간 내 위치가 상기 구 형상의 이미지가 촬영된 지점에서 벗어나지만 상기 구 형상의 이미지가 촬영된 지점을 기준으로 미리 설정된 기준 반경 내에 위치할 때, 상기 구 형상의 이미지에서 영상기반 렌더링을 통해 생성된 새로운 시점의 구 형상의 이미지를 상기 컨텐츠 재생장치(130)에게 제공할 수 있다.
상기 영상기반 렌더링이란 이미지 기반 렌더링(Image Based Rendering)으로서, 2차원 영상들의 조합으로부터 새로운 시점의 영상을 생성하는 방법을 의미한다. 상기 이미지 기반 렌더링은 당업자에게 알려진 기술이므로 상세한 설명은 생략하도록 하겠다. 상기 이미지 기반 렌더링은 기본 이미지에서 제한된 범위의 시점 영상을 생성할 수 있으므로 상기 컨텐츠 재생장치(130)가 상기 구 형상의 이미지가 촬영된 지점을 기준으로 미리 설정된 기준 반경 내에 위치할 때에만 제공이 가능하다. 상기 미리 설정된 기준 반경은 도 5에서 붉은 색으로 표시된 영역으로 표시된 것을 참조할 수 있다.
이후 사용자가 가상 공간 내에서 미리 설정된 기준 반경 밖에 위치하는 경우에는 다른 컨텐츠로 전환이 필요하다.
본 명세서의 일 실시예에 따르면, 상기 컨텐츠 제공장치(120)는 상기 컨텐츠 재생장치(130)로부터 수신한 가상 공간 내 위치가 상기 구 형상의 이미지가 촬영된 지점을 기준으로 미리 설정된 기준 반경 밖에 위치할 때 상기 3차원 모델링 데이터를 상기 컨텐츠 재생장치(130)에게 제공할 수 있다.
도 6은 3차원 모델링 데이터의 참고도이다.
도 6의 (a)를 참조하면, 가상 공간 내 사용자의 위치가 붉은 점으로 표시된 것을 확인할 수 있다. 도 6의 (a)에 표시된 상기 사용자의 위치는 도 5에 표시된 구 형상의 이미지가 촬영된 위치 또는 상기 미리 설정된 기준 반경에 포함되지 않는 위치이다. 따라서, 상술한 실시예에 따른 3차원 모델링 데이터가 제공될 수 있다. 도 6의 (b)는 도 6의 (a)에 표시된 상기 사용자의 위치에서 사용자의 시점에 따라 상기 컨텐츠 재생장치(130)에 표시된 3차원 모델링 데이터의 예시이다.
이상, 첨부된 도면을 참조로 하여 본 명세서의 실시예를 설명하였지만, 본 명세서가 속하는 기술분야의 통상의 기술자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로, 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며, 제한적이 아닌 것으로 이해해야만 한다.
100: 다시점 360도 VR 컨텐츠 제공 시스템
110: 컨텐츠 제공서버
120: 컨텐츠 제공장치
130: 컨텐츠 재생장치

Claims (5)

  1. 컨텐츠 제공서버, 컨텐츠 제공장치 및 컨텐츠 재생장치를 포함하는 다시점 360도 VR 컨텐츠 제공 시스템으로서,
    상기 컨텐츠 제공서버는, 특정 촬영 장소에서 촬영된 하나 이상의 이미지를 스티칭(Stiching)하여 구 형상의 이미지, 상기 구 형상의 이미지의 위치 정보, 특정 장소에 위치한 대상체의 3차원 모델링 데이터 및 상기 3차원 모델링 데이터의 위치 정보를 저장하고,
    상기 컨텐츠 제공장치는, 특정 영역 내 위치 정보를 가진 구 형상의 이미지 및 3차원 모델링 데이터를 요청하고 상기 컨텐츠 제공 서버로부터 수신하여 상기 컨텐츠 재생장치에게 선별적으로 제공하고,
    상기 컨텐츠 재생장치는, 사용자의 입력에 따른 가상 공간 내 위치 정보를 상기 컨텐츠 제공장치에게 전송하고, 상기 컨텐츠 재생장치로부터 상기 위치에 해당하는 컨텐츠를 수신하는 다시점 360도 VR 컨텐츠 제공 시스템.
  2. 청구항 1에 있어서,
    상기 컨텐츠 제공장치는, 상기 가상 공간 내 위치를 중심으로 미리 설정된 반경 내 위치 정보를 가진 구 형상의 이미지 및 3차원 모델링 데이터를 요청하여 상기 컨텐츠 제공 서버로부터 수신하는 다시점 360도 VR 컨텐츠 제공 시스템.
  3. 청구항 1에 있어서,
    상기 컨텐츠 제공장치는, 상기 가상 공간 내 위치가 미리 설정된 구역 내부일 때 상기 미리 설정된 구역 내 위치 정보를 가진 구 형상의 이미지 및 3차원 모델링 데이터를 요청하여 상기 컨텐츠 제공 서버로부터 수신하는 다시점 360도 VR 컨텐츠 제공 시스템.
  4. 청구항 1에 있어서,
    상기 컨텐츠 제공장치는, 상기 컨텐츠 재생장치로부터 수신한 가상 공간 내 위치가 상기 구 형상의 이미지가 촬영된 지점에서 벗어나지만 상기 구 형상의 이미지가 촬영된 지점을 기준으로 미리 설정된 기준 반경 내에 위치할 때, 상기 구 형상의 이미지에서 영상기반 렌더링을 통해 생성된 새로운 시점의 구 형상의 이미지를 상기 컨텐츠 재생장치에게 제공하는 다시점 360도 VR 컨텐츠 제공 시스템.
  5. 청구항 4에 있어서,
    상기 컨텐츠 제공장치는, 상기 컨텐츠 재생장치로부터 수신한 가상 공간 내 위치가 상기 구 형상의 이미지가 촬영된 지점을 기준으로 미리 설정된 기준 반경 밖에 위치할 때 상기 3차원 모델링 데이터를 상기 컨텐츠 재생장치에게 제공하는 다시점 360도 VR 컨텐츠 제공 시스템.
KR1020180156056A 2018-12-06 2018-12-06 다시점 360도 vr 컨텐츠 제공 시스템 KR102200115B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020180156056A KR102200115B1 (ko) 2018-12-06 2018-12-06 다시점 360도 vr 컨텐츠 제공 시스템
CN201910017120.5A CN111292424A (zh) 2018-12-06 2019-01-08 多视点360度vr内容提供***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180156056A KR102200115B1 (ko) 2018-12-06 2018-12-06 다시점 360도 vr 컨텐츠 제공 시스템

Publications (2)

Publication Number Publication Date
KR20200069004A true KR20200069004A (ko) 2020-06-16
KR102200115B1 KR102200115B1 (ko) 2021-01-08

Family

ID=71021525

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180156056A KR102200115B1 (ko) 2018-12-06 2018-12-06 다시점 360도 vr 컨텐츠 제공 시스템

Country Status (2)

Country Link
KR (1) KR102200115B1 (ko)
CN (1) CN111292424A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230089705A (ko) * 2021-12-14 2023-06-21 엘아이지넥스원 주식회사 시점 이동에 따른 연속적인 360도 가상현실 영상 획득 및 재현 방법
KR102564522B1 (ko) 2023-02-02 2023-08-07 엠앤앤에이치 주식회사 다시점 촬영 시스템 및 3d 체적 객체 생성 방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009104346A (ja) * 2007-10-23 2009-05-14 Location View:Kk 画像表示処理プログラム、画像表示処理システム、及び、画像表示処理方法
KR20120137607A (ko) * 2011-05-24 2012-12-24 이엔지정보기술 주식회사 전방위 영상 웹 서비스 시스템 및 그 방법
KR101807439B1 (ko) 2013-09-11 2018-02-28 배리언 메디컬 시스템즈, 인크. 정전압 바이어싱된 광다이오드를 갖는 픽셀 회로 및 관련 이미징 방법

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105989573A (zh) * 2015-02-16 2016-10-05 上海钧铭商务咨询有限公司 一种基于360度数字全景技术提供展馆导览信息的方法及***
JP2017146762A (ja) * 2016-02-17 2017-08-24 株式会社Ａｃｗ−Ｄｅｅｐ 画像表示型シミュレーションサービス提供システム及び画像表示型シミュレーションサービス提供方法
KR20180073327A (ko) * 2016-12-22 2018-07-02 삼성전자주식회사 영상 표시 방법, 저장 매체 및 전자 장치
KR20180074369A (ko) * 2016-12-23 2018-07-03 삼성전자주식회사 3차원 컨텐츠의 썸네일 관리 방법 및 그 장치
KR101949261B1 (ko) * 2017-01-23 2019-02-18 고범준 Ｖｒ 영상 생성 방법, ｖｒ 영상 처리 방법 및 ｖｒ 영상 처리 시스템
CN107169924B (zh) * 2017-06-14 2020-10-09 歌尔科技有限公司 三维全景图像的建立方法和***

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009104346A (ja) * 2007-10-23 2009-05-14 Location View:Kk 画像表示処理プログラム、画像表示処理システム、及び、画像表示処理方法
KR20120137607A (ko) * 2011-05-24 2012-12-24 이엔지정보기술 주식회사 전방위 영상 웹 서비스 시스템 및 그 방법
KR101807439B1 (ko) 2013-09-11 2018-02-28 배리언 메디컬 시스템즈, 인크. 정전압 바이어싱된 광다이오드를 갖는 픽셀 회로 및 관련 이미징 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230089705A (ko) * 2021-12-14 2023-06-21 엘아이지넥스원 주식회사 시점 이동에 따른 연속적인 360도 가상현실 영상 획득 및 재현 방법
KR102564522B1 (ko) 2023-02-02 2023-08-07 엠앤앤에이치 주식회사 다시점 촬영 시스템 및 3d 체적 객체 생성 방법

Also Published As

Publication number Publication date
CN111292424A (zh) 2020-06-16
KR102200115B1 (ko) 2021-01-08

Similar Documents

Publication Publication Date Title
CA2888943C (en) Augmented reality system and method for positioning and mapping
KR101591579B1 (ko) 증강 현실 시스템들에서 실세계 표면들에의 가상 이미지들의 앵커링
TWI610097B (zh) 電子系統、可攜式顯示裝置及導引裝置
US20160086306A1 (en) Image generating device, image generating method, and program
US10681276B2 (en) Virtual reality video processing to compensate for movement of a camera during capture
JP6348741B2 (ja) 情報処理システム、情報処理装置、情報処理プログラム、および情報処理方法
JP2017162309A (ja) ヘッドマウントディスプレイシステムを制御するための方法、および、プログラム
EP3128413A1 (en) Sharing mediated reality content
WO2020084951A1 (ja) 画像処理装置および画像処理方法
CN109478342B (zh) 图像显示装置及图像显示***
JP4406824B2 (ja) 画像表示装置、画素データ取得方法、およびその方法を実行させるためのプログラム
KR102200115B1 (ko) 다시점 360도 vr 컨텐츠 제공 시스템
US20190295324A1 (en) Optimized content sharing interaction using a mixed reality environment
TWI764366B (zh) 基於光通信裝置的互動方法和系統
JP6518645B2 (ja) 情報処理装置および画像生成方法
JP2018007180A (ja) 映像表示装置、映像表示方法及び映像表示プログラム
JP7517356B2 (ja) 情報処理システム、通信システム、画像共有方法、プログラム
US11610343B2 (en) Video display control apparatus, method, and non-transitory computer readable medium
JP2023140922A (ja) 表示端末、情報処理システム、通信システム、表示方法、情報処理方法、通信方法、及びプログラム
KR20190085681A (ko) 실감형 ｖｒ 영상의 제공 방법 및 이를 위한 서버 장치
US9989762B2 (en) Optically composited augmented reality pedestal viewer
JP7501559B2 (ja) 表示端末、表示方法、通信システム、通信方法、及びプログラム
WO2024070761A1 (ja) 情報処理装置、情報処理方法、プログラム
JP7417827B2 (ja) 画像編集方法、画像表示方法、画像編集システム、及び画像編集プログラム
WO2024070762A1 (ja) 情報処理装置、情報処理方法、プログラム

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant