KR101788005B1 - 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법 - Google Patents

복수의 모바일 단말들을 이용한 다시점 영상 생성 방법 Download PDF

Info

Publication number
KR101788005B1
KR101788005B1 KR1020160008734A KR20160008734A KR101788005B1 KR 101788005 B1 KR101788005 B1 KR 101788005B1 KR 1020160008734 A KR1020160008734 A KR 1020160008734A KR 20160008734 A KR20160008734 A KR 20160008734A KR 101788005 B1 KR101788005 B1 KR 101788005B1
Authority
KR
South Korea
Prior art keywords
mobile terminal
information
mobile terminals
view image
subject
Prior art date
Application number
KR1020160008734A
Other languages
English (en)
Other versions
KR20170088623A (ko
Inventor
이재오
이은형
장희주
이성운
김연주
Original Assignee
한국기술교육대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국기술교육대학교 산학협력단 filed Critical 한국기술교육대학교 산학협력단
Priority to KR1020160008734A priority Critical patent/KR101788005B1/ko
Publication of KR20170088623A publication Critical patent/KR20170088623A/ko
Application granted granted Critical
Publication of KR101788005B1 publication Critical patent/KR101788005B1/ko

Links

Images

Classifications

    • H04N13/0282
    • H04N13/0207
    • H04N5/2258
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2625Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of images from a temporal image sequence, e.g. for a stroboscopic effect

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법에 관한 것으로서, (a) 복수의 모바일(mobile) 단말들 중 기준 모바일 단말이 선택되는 단계; (b) 상기 기준 모바일 단말에 대한 정보를 바탕으로, 다른 모바일 단말에 대한 위치 보정 정보가 생성되는 단계; (c) 상기 복수의 모바일 단말들에 의해, 복수의 시점 방향에서 피사체를 촬영한 복수의 촬영 영상들이 생성되는 단계; 및 (d) 상기 복수의 촬영 영상들을 바탕으로, 상기 피사체에 대한 다시점 영상이 생성되는 단계를 포함하는 것을 특징으로 한다.

Description

복수의 모바일 단말들을 이용한 다시점 영상 생성 방법{METHOD FOR GENERATING MULTI-VIEW IMAGE BY USING A PLURALITY OF MOBILE TERMINAL}
본 발명은 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법에 관한 것으로서, 더욱 상세하게는, 복수의 모바일 단말들(예컨대, 스마트폰, 태블릿, 웨어러블 디바이스 등)을 이용하여, 동일한 피사체에 대한 복수의 시점에서의 모습을 나타내는 소위 '다시점 영상'을 생성하는 기술에 관한 것이다.
다시점 영상(Multi-view image)이란, 동일한 피사체에 대한 복수의 시점에서의 모습을 나타내는 영상을 의미한다. 이러한 다시점 영상은, 피사체의 외형을 입체적이고 역동적으로 나타낼 수 있으므로, 영화, 드라마, 입체 사진 등의 다양한 영상 컨텐츠 제작 과정에서 활용되고 있다.
하지만, 이러한 다시점 영상은, 전문 촬영 장비에 의해서만 생성되고 있다. 예를 들어, 이러한 다시점 영상은, 도 1과 같이, '고정된 프레임(frame)'과 '상기 고정된 프레임에 설치된 복수의 카메라들'로 구성되는 전문 촬영 장비에 의해서만 생성되고 있다.
따라서, 일반인들의 입장에서는, 이러한 전문 촬영 장비에 대한 접근성이 부족하여 다시점 영상을 직접 생성하기가 어려웠고, 전문가의 입장에서도, 다시점 영상의 생성을 위해 부피가 매우 큰 전문 촬영 장비를 별도로 설치해야 하므로 많은 불편함이 있었다.
이에 따라, 전문 촬영 장비 없이도 다시점 영상을 생성할 수 있는 기술이 요구되고 있다.
본 발명은 상술한 기술적 배경을 바탕으로 발명되었으며, 이상에서 살핀 기술적 요구를 충족시킴은 물론 본 발명이 속하는 기술 분야에서 통상의 지식을 가진자가 용이하게 발명할 수 없는 추가적인 기술요소들을 제공하기 위해 발명되었다.
본 발명은, 전문 촬영 장비가 아닌 복수의 단말(예컨대, 스마트폰, 태블릿, 웨어러블 디바이스 등)들을 이용하여, 다시점 영상을 생성하는 기술을 제공하는 것을 해결 과제로 한다.
한편, 본 발명이 이루고자 하는 기술적 과제는 이상에서 언급한 기술적 과제로 제한되지 않으며, 이하에서 설명할 내용으로부터 통상의 기술자에게 자명한 범위 내에서 다양한 기술적 과제가 포함될 수 있다.
상기와 같은 과제를 해결하기 위한 본 발명에 따른 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법은, (a) 복수의 모바일(mobile) 단말들 중 기준 모바일 단말이 선택되는 단계; (b) 상기 기준 모바일 단말에 대한 정보를 바탕으로, 다른 모바일 단말에 대한 위치 보정 정보가 생성되는 단계; (c) 상기 복수의 모바일 단말들에 의해, 복수의 시점 방향에서 피사체를 촬영한 복수의 촬영 영상들이 생성되는 단계; 및 (d) 상기 복수의 촬영 영상들을 바탕으로, 상기 피사체에 대한 다시점 영상이 생성되는 단계를 포함하는 것을 특징으로 한다.
또한, 본 발명에 따른 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법은, 상기 (b) 단계가 상기 다른 모바일 단말에 의해, 상기 다른 모바일 단말의 촬영 화면상에 존재하는 피사체의 크기가 조절되는 단계를 포함하는 것을 특징으로 한다.
또한, 본 발명에 따른 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법은, 상기 피사체의 크기가 줌인(zoom in) 동작, 줌아웃(zoom out) 동작 또는 상기 다른 모바일 단말의 이동에 의해 조절되고, 상기 피사체의 크기가 상기 기준 모바일 단말의 촬영 화면상에 존재하는 피사체 크기와 대응되도록 조절되는 것을 특징으로 한다.
또한, 본 발명에 따른 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법은, 상기 (b) 단계가, 상기 기준 모바일 단말에 의해 상기 피사체에 대한 특징점들이 설정되는 단계; 및 상기 기준 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보, 상기 다른 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보, 및 촬영 설정 정보를 바탕으로, 상기 다른 모바일 단말에 대한 위치 보정 정보가 생성되는 단계를 포함하는 것을 특징으로 한다.
또한, 본 발명에 따른 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법은, 상기 촬영 설정 정보가, 상기 다시점 영상의 촬영에 참여하는 모바일 단말들의 개수 정보를 포함하는 것을 특징으로 한다.
또한, 본 발명에 따른 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법은, 상기 위치 보정 정보가, 상기 다른 모바일 단말의 평행 이동 정보 또는 회전 이동 정보를 포함하는 것을 특징으로 한다.
또한, 본 발명에 따른 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법은, 상기 복수의 모바일 단말들에는, 상기 복수의 모바일 단말들 사이의 순차적인 위치에 대응되는 순차적인 번호들이 할당되고, 상기 다시점 영상은, 상기 복수의 촬영 영상들이 상기 번호들에 대응되는 순서로 영상 프레임(frame)상에 배치되어서 생성되는 것을 특징으로 한다.
또한, 본 발명에 따른 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법은, 상기 위치 보정 정보 또는 상기 다시점 영상이, 상기 기준 모바일 단말, 상기 다른 모바일 단말, 또는 상기 복수의 모바일 단말들과 연결된 서버에 의해 생성되는 것을 특징으로 한다.
한편, 위에서 살펴본, 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법은, 프로그램의 형태로 구현된 뒤에 전자 장치에서 판독 가능한 기록 매체에 저장되거나, 프로그램 제공 서버(다운로드 서버) 등을 통해 배포될 수 있다.
다음으로, 상기와 같은 과제를 해결하기 위한 모바일 단말은, 통신 모듈, 촬영 모듈, 메모리, 및 프로세서를 포함하는 것을 특징으로 한다.
또한, 본 발명에 따른 모바일 단말은, 상기 프로세서가, 복수의 모바일 단말들과 무선 통신을 통해 연결되고; 기준 모바일 단말에 대한 정보를 바탕으로, 기준 모바일 단말이 아닌 모바일 단말에 대한 위치 보정 정보를 생성하고; 상기 복수의 모바일 단말들로부터 복수의 시점 방향에서 피사체를 촬영한 복수의 촬영 영상들을 수신하고; 그리고 상기 촬영 모듈이 생성한 영상 및 수신된 복수의 촬영 영상들을 바탕으로, 상기 피사체에 대한 다시점 영상을 생성하기 위한 연산 처리 동작을 수행하는 것을 특징으로 한다.
또한, 본 발명에 따른 모바일 단말은, 상기 위치 보정 정보가, 상기 기준 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보; 상기 기준 모바일 단말이 아닌 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보; 및 촬영 설정 정보를 바탕으로 생성되는 것을 특징으로 한다.
다음으로, 상기와 같은 과제를 해결하기 위한 다시점 영상 생성 서버는, 통신 모듈, 메모리, 및 프로세서를 포함하는 것을 특징으로 한다.
또한, 본 발명에 따른 다시점 영상 생성 서버는, 상기 프로세서가, 복수의 모바일 단말들과 무선 통신을 통해 데이터를 교환하고; 상기 복수의 모바일 단말들 중 기준 모바일 단말에 대한 정보를 바탕으로, 다른 모바일 단말에 대한 위치 보정 정보를 생성하고; 상기 복수의 모바일 단말들로부터 복수의 시점 방향에서 피사체를 촬영한 복수의 촬영 영상들을 수신하고; 수신된 복수의 촬영 영상들을 바탕으로, 상기 피사체에 대한 다시점 영상을 생성하고; 그리고 생성된 다시점 영상을 상기 복수의 모바일 단말들 중 하나에 전송하기 위한 연산 처리 동작을 수행하는 것을 특징으로 한다.
또한, 본 발명에 따른 다시점 영상 생성 서버는, 상기 위치 보정 정보가, 상기 기준 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보; 상기 다른 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보; 및 촬영 설정 정보를 바탕으로 생성되는 것을 특징으로 한다.
본 발명은 전문 촬영 장비 없이도 다시점 영상을 생성하는 기술을 제공할 수 있다. 구체적으로, 본 발명은 전문 촬영 장비 대신에 복수의 모바일 디바이스(예컨대, 스마트폰, 태블릿, 웨어러블 디바이스 등)를 이용하여 다시점 영상을 생성하는 기술을 제공할 수 있다.
또한, 본 발명은 위치 보정(correction) 정보를 활용하여 복수의 모바일 단말들을 다시점 영상을 생성하기에 적절한 위치에 배치시킬 수 있다. 구체적으로, 본 발명은 복수의 모바일 단말들 중 기준 모바일 단말을 설정하고, 상기 기준 모바일 단말에 대한 정보를 바탕으로 다른 모바일 단말(기준 모바일 단말이 아닌 모바일 단말을 지칭함)에 대한 위치 보정 정보 생성하여, 상기 복수의 모바일 단말들을 다시점 영상을 생성하기에 적절한 위치에 배치시킬 수 있다.
또한, 본 발명은 복수의 모바일 단말들에 대한 '피사체의 크기 조절 동작' 및 '피사체의 특징점 분석 동작'에 기초하여, 복수의 모바일 단말들에 대한 위치 보정 정보를 생성할 수 있다. 구체적으로, 본 발명은 복수의 모바일 단말들의 촬영 화면상에 보여지는 피사체의 크기를 서로 동일(또는 거의 동일)하게 조절한 뒤에, 상기 복수의 모바일 단말들에 대한 특징점 분석 동작을 수행하여, 복수의 모바일 단말들에 대한 위치 보정 정보를 생성할 수 있다. 따라서, 본 발명은 상기 복수의 모바일 단말들이 서로 다른 종류의 모바일 단말들 또는 서로 다른 성능의 카메라 모듈을 갖는 모바일 단말들을 포함하는 경우에도 일체감 있는 다시점 영상을 생성할 수 있다.
한편, 본 발명의 효과는 이상에서 언급한 효과들로 제한되지 않으며, 이하에서 설명할 내용으로부터 통상의 기술자에게 자명한 범위 내에서 다양한 효과들이 포함될 수 있다.
도 1은 다시점 영상의 생성에 활용되는 종래의 전문 촬영 장비를 나타내는 예시도이다.
도 2는 본 발명에 따른 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법을 개략적으로 나타내는 개념도이다.
도 3은 본 발명에 따른 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법을 나타내는 흐름도이다.
도 4는 기준 모바일 단말 이외의 다른 모바일 단말에 대한 위치 보정을 나타내는 개념도이다.
도 5는 피사체의 크기 조절 및 피사체의 특징점 분석을 기초로 위치 보정 정보를 생성하는 예시를 나타내는 흐름도이다.
도 6은 모바일 단말의 촬영 화면상에서 피사체의 크기를 조절하는 예시를 나타내는 예시도이다.
도 7은 복수의 모바일 단말들에 대한 피사체의 특징점을 분석하는 예시를 나타내는 예시도이다.
도 8은 복수의 모바일 단말들 사이의 위치 관계를 나타내는 예시도이다.
도 9는 복수의 모바일 단말들이 생성하는 복수의 촬영 영상들을 바탕으로 다시점 영상을 생성하는 예시를 나타내는 예시도이다.
이하, 첨부된 도면들을 참조하여 본 발명에 따른 '복수의 모바일 단말들을 이용한 다시점 영상 생성 방법' 및 '이와 관련된 기록 매체, 서버, 모바일 단말'을 상세하게 설명한다. 설명하는 실시 예들은 본 발명의 기술 사상을 통상의 기술자가 용이하게 이해할 수 있도록 제공되는 것으로 이에 의해 본 발명이 한정되지 않는다. 또한, 첨부된 도면에 표현된 사항들은 본 발명의 실시 예들을 쉽게 설명하기 위해 도식화된 도면으로 실제로 구현되는 형태와 상이할 수 있다.
또한, 어떤 구성요소들을 '포함'한다는 표현은, 개방형의 표현으로서 해당 구성요소들이 존재하는 것을 단순히 지칭할 뿐이며, 추가적인 구성요소들을 배제하는 것으로 이해되어서는 안 된다.
이하, 도 2를 참조하여, 본 발명에 따른 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법을 개략적으로 살펴본다.
도 2에서 확인할 수 있듯이, 본 발명에 따른 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법은, 복수의 모바일 단말들을 활용하여 다시점 영상을 생성할 수 있다. 구체적으로, 본 발명은 복수의 모바일 단말들을 피사체 주변에 배치한 뒤에, 상기 복수의 모바일 단말들이 생성하는 복수의 촬영 영상들을 활용하여 다시점 영상을 생성할 수 있다.
여기서 상기 복수의 모바일 단말들은, 스마트폰, 태블릿, 웨어러블 디바이스(스마트 시계, 스마트 안경 등), IoT(Internet of Things) 디바이스 등을 포함할 수 있으며, 이러한 예시들 이외에도, 카메라 모듈과 통신 모듈이 구비된 다양한 전자 기기들을 포함할 수 있다.
한편, 본 발명은 고정된 프레임(고정된 구조물)을 이용하여 복수의 촬영 장비들의 위치를 고정하는 종래의 전문 촬영 장비와 달리, '이동성'이 전제되는 복수의 모바일 단말들을 활용하여 다시점 영상을 생성하므로, 상기 복수의 모바일 단말들을 피사체 주변의 '적절한 위치'로 이동시키기 위한 기술적 프로세스가 필요하다.
이와 관련하여, 본 발명은, 상기 복수의 모바일 단말들을 적절한 위치로 이동시키기 위한 '위치 보정 정보'를 생성할 수 있으며, 이러한 위치 보정 정보를 활용하여 상기 복수의 모바일 단말들을 다시점 영상을 생성하기에 적절한 위치에 배치시킬 수 있다. (이러한 '위치 보정 정보'의 생성과 관련된 내용들은 아래에서 자세히 살펴본다.)
이하, 도 3을 참조하여, 본 발명에 따른 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법을 살펴본다.
도 3을 참조하면, 본 발명에 따른 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법은, 복수의 모바일(mobile) 단말들 중 기준 모바일 단말이 선택되는 단계(S1), 상기 기준 모바일 단말에 대한 정보를 바탕으로, 다른 모바일 단말에 대한 위치 보정 정보가 생성되는 단계(S2), 상기 복수의 모바일 단말들에 의해, 복수의 시점 방향에서 피사체를 촬영한 복수의 촬영 영상들이 생성되는 단계(S3), 상기 복수의 촬영 영상들을 바탕으로, 상기 피사체에 대한 다시점 영상이 생성되는 단계(S4)를 포함할 수 있다.
상기 S1 단계는, 복수의 모바일 단말들 중 기준 모바일 단말이 선택되는 단계이다. 여기서 '기준 모바일 단말'이란 위치 보정의 기준점 역할을 수행하는 단말을 의미한다.
이러한 상기 기준 모바일 단말은, 다시점 영상 생성을 요청한 호스트(host) 모바일 단말, 상기 복수의 모바일 단말들 중 사용자 입력에 의해 선택된 모바일 단말, 상기 복수의 모바일 단말들 중 상대적으로 중간 위치에 배치된 모바일 단말(예컨대, 각각의 모바일 단말들에 대하여, 자신 이외의 나머지 모바일 단말들로부터 수신되는 신호 세기들의 평균값을 산출한 뒤에, 평균값이 가장 작은 모바일 단말이 중간 위치에 배치된 모바일 단말로 선택될 수 있음) 등으로 선택될 수 있다.
또한, 상기 기준 모바일 단말이 선택되는 연산 동작은, 상기 복수의 모바일 단말들, 또는 상기 복수의 모바일 단말들과 연결된 서버에 의해 수행될 수 있다.
상기 S2 단계는, 상기 기준 모바일 단말에 대한 정보를 바탕으로, 다른 모바일 단말에 대한 위치 보정 정보가 생성되는 단계이다.
여기서 '다른 모바일 단말'이란 상기 복수의 모바일 단말들 중 상기 기준 모바일 단말이 아닌 임의의 모바일 단말을 의미한다.
또한, 상기 '위치 보정 정보'란, 상기 다른 모바일 단말의 위치를 보정하기 위한 정보를 의미한다. 구체적으로, 도 4와 같이, 상기 다른 모바일 단말이 다시점 영상을 생성하기에 적절한 위치에 배치되지 않은 경우, 상기 다른 모바일 단말의 위치를 보정하기 위한 정보를 의미한다. 이러한 상기 위치 보정 정보에는, 평행이동 정보, 회전이동 정보 등의 다양한 정보가 포함될 수 있다.
한편, 상기 '위치 보정 정보'는, 다양한 방식으로 생성될 수 있지만, 바람직하게는 '피사체의 크기 조절' 및 '피사체의 특징점 분석'을 이용하는 방식에 의해 생성될 수 있다.
이하, 도 5 내지 도 8을 참조하여 상기 S2 단계의 구체적인 예시를 살펴본다.
도 5를 참조하면, 상기 S2 단계는, 상기 다른 모바일 단말에 의해, 상기 다른 모바일 단말의 촬영 화면상에 존재하는 피사체의 크기가 조절되는 단계(S21), 상기 기준 모바일 단말에 의해 상기 피사체에 대한 특징점들이 설정되는 단계(S22), 상기 기준 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보, 상기 다른 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보, 및 촬영 설정 정보를 바탕으로, 상기 다른 모바일 단말에 대한 위치 보정 정보가 생성되는 단계(S23)을 포함할 수 있다.
상기 S21 단계는, 상기 다른 모바일 단말에 의해 상기 다른 모바일 단말의 촬영 화면상에 존재하는 피사체의 크기가 조절되는 단계이다. 구체적으로, 상기 다른 모바일 단말의 촬영 화면상에 존재하는 피사체의 크기가 상기 기준 모바일 단말의 촬영 화면상에 존재하는 피사체의 크기와 대응되도록 조절(예를 들어, 동일 또는 실질적으로 동일해지도록 조절)되는 단계이다.
도 6을 참조하면, 이러한 상기 S21 단계의 예시를 살펴볼 수 있다. 도 6에서 확인할 수 있듯이, 상기 다른 모바일 단말의 촬영 화면상에 존재하는 피사체의 크기(B)는, 상기 기준 모바일 단말의 촬영 화면상에 존재하는 피사체의 크기(A)와 대응되도록 조절(B -> A')될 수 있다. 여기서 상기 다른 모바일 단말의 촬영 화면상에 존재하는 피사체의 크기가 조절되는 동작은, 줌인(zoom in) 동작, 줌아웃(zoom out) 동작, 상기 다른 모바일 단말 자체를 이동시키는 동작 등에 의해 구현될 수 있으며, 이러한 예시들 이외에도 다양한 방식에 의해 구현될 수 있다. 또한, 각 모바일 단말의 촬영 화면상에 존재하는 피사체의 크기 정보는, 모바일 단말들 사이의 직접적인 통신 또는 서버의 중계 등에 의해 공유될 수 있다.
한편, 이렇게 상기 다른 모바일 단말의 촬영 화면상에 존재하는 피사체의 크기가 상기 기준 모바일 단말의 촬영 화면상에 존재하는 피사체의 크기와 대응되도록 조절되는 이유는, 1) 이러한 조절에 의해, 상기 다른 모바일 단말이 상기 기준 모바일 단말과 상이한 기기로 구현되는 경우에 발생 될 수 있는 '카메라 모듈의 성능 차이'가 상쇄될 수 있고, 2) 이러한 조절에 의해, (적어도 위치 보정 정보를 생성하기 위한 연산 과정에서는) '피사체 - 기준 모바일 단말 사이의 거리' 및 '피사체 - 다른 모바일 단말 사이의 거리'가 실질적으로 동일하다고 가정될 수 있기 때문이다.
상기 S22 단계는, 상기 S21 단계 이후에, 상기 기준 모바일 단말에 의해 피사체에 대한 특징점들이 설정되는 단계이다. 구체적으로, 상기 S22 단계는, 상기 다른 모바일 단말의 촬영 화면상에 존재하는 피사체의 크기가 상기 기준 모바일 단말의 촬영 화면상에 존재하는 피사체의 크기와 대응되도록 조절된 이후에, 상기 기준 모바일 단말에 의해 피사체에 대한 특징점들이 설정되는 단계이다.
여기서 특징점이란 피사체의 외형을 나타내는 점(point)들 중 대표적으로 선택된 점들을 의미한다. 또한, 상기 기준 모바일 단말에 의해 설정된 상기 특징점들에 대한 정보는 통신망을 통해 상기 다른 모바일 단말로 공유될 수 있으며, 상기 다른 모바일 단말의 촬영 화면상에 존재하는 피사체 상에서 표시될 수 있다.
도 7을 참조하면, 기준 모바일 단말에 의해 설정된 특징점들 및 다른 모바일 단말로 공유되어 표시된 특징점들에 대한 예시를 살펴볼 수 있다.
상기 S23 단계는, 상기 기준 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보, 상기 다른 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보, 및 촬영 설정 정보를 바탕으로, 상기 다른 모바일 단말에 대한 위치 보정 정보가 생성되는 단계이다.
구체적으로, 상기 S23 단계는, 1) 상기 기준 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보 및 상기 다른 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보를 바탕으로, 상기 다른 모바일 단말의 '가상의 현재 위치 정보(상기 기준 모바일 단말을 기준으로 한 상대적인 가상의 현재 위치 정보)'가 산출되고, 2) 촬영 설정 정보를 바탕으로, 상기 다른 모바일 단말의 '가상의 목표 위치 정보(상기 기준 모바일 단말을 기준으로 한 상대적인 가상의 목표 위치 정보)'가 산출되며, 3) 상기 가상의 현재 위치 정보 및 상기 가상의 목표 위치 정보 사이의 비교를 통해, 상기 다른 모바일 단말에 대한 '위치 보정 정보'가 생성되는 단계이다. (참고로, 위치 정보들 앞에 '가상의'란 표현이 사용된 이유는, 상기 위치 정보들이 실제 거리 정보를 바탕으로 생성되지 않고, 상기 S21 단계에 의해 '피사체 - 기준 모바일 단말 사이의 거리' 및 '피사체 - 다른 모바일 단말 사이의 거리'가 실질적으로 동일하다고 가정된 상태에서 산출되기 때문이다.)
여기서 상기 '가상의 현재 위치 정보'는, 상기 기준 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보 및 상기 다른 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보 사이의 비교를 통해 획득될 수 있는 '상기 다른 모바일 단말의 현재 회전 이동 정보'에 의해 산출될 수 있다. 예를 들어, 상기 '가상의 현재 위치 정보'는 도 7과 같은 특징점 분석을 통해 획득될 수 있는, 도 8과 같은 현재 회전 이동 정보(예를 들어, 구면좌표계를 기준으로 한 회전 이동 정보 (θ,φ))를 바탕으로 산출될 수 있다. 상기 S21 단계에 의해 '피사체-기준 모바일 단말 사이의 거리(R)' 및 '피사체-다른 모바일 단말 사이의 거리(R')'가 실질적으로 동일(R≒R')하다고 가정될 수 있으므로, 특징점 분석을 통해 상기 다른 모바일 단말의 현재 회전 이동 정보(θ,φ)가 획득되는 경우, '상기 다른 모바일 단말의 가상의 현재 위치'가 구체적으로 산출될 수 있기 때문이다.
또한, 상기 '가상의 목표 위치 정보'는 상기 촬영 설정 정보를 바탕으로 획득될 수 있는 '상기 다른 모바일 단말의 바람직한(ideal) 회전 이동 정보'에 의해 산출될 수 있다. 위에서 살펴본 것처럼, 상기 S21 단계에 의해 '피사체-기준 모바일 단말 사이의 거리(R)' 및 '피사체-다른 모바일 단말 사이의 거리(R')'가 실질적으로 동일(R≒R')하다고 가정될 수 있으므로, 상기 다른 모바일 단말의 바람직한 회전 이동 정보(θidealideal)가 획득되는 경우, 상기 다른 모바일 단말의 가상의 목표 위치가 산출될 수 있기 때문이다. 한편, 상기 촬영 설정 정보는, 다시점 영상의 촬영에 참여하는 모바일 단말들의 개수 정보를 포함할 수 있다. 또한, 이 경우 '모바일 단말들의 개수 정보' 및 '바람직한 회전 이동 정보' 사이의 매칭(matching) 관계가 사전에 설정될 수 있으며(예를 들어, 단말 3개 - (0도, 120도), 단말 10개 - (0도, 36도) 등), 이러한 설정 정보를 바탕으로 연산이 수행될 수도 있다.
또한, 상기 다른 모바일 단말에 대한 '위치 보정 정보'는, 상기 다른 모바일 단말에 대한 '가상의 현재 위치 정보' 및 '가상의 목표 위치 정보' 사이의 차이를 분석하여 산출될 수 있다. 이러한 상기 위치 보정 정보는, 상기 다른 모바일 단말이 '가상의 현재 위치'에서 '가상의 목표 위치'로 이동하기 위한, 상기 다른 모바일 단말의 관점에서의 평행 이동 정보 또는 회전 이동 정보를 포함할 수 있다.
한편, 상기 위치 보정 정보의 생성 동작은, 상기 기준 모바일 단말, 상기 다른 모바일 단말, 상기 기준 모바일 단말 및 상기 다른 모바일 단말과 연결된 서버 등을 포함하는 다양한 주체에 의해 수행될 수 있다. 예를 들어, 1) 상기 기준 모바일 단말이 상기 다른 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보 및 상기 촬영 설정 정보를 획득한 뒤에 상기 위치 보정 정보를 생성하거나, 2) 상기 다른 모바일 단일이 상기 기준 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보 및 상기 촬영 설정 정보를 획득한 뒤에 상기 위치 보정 정보를 생성하거나, 3) 상기 기준 모바일 단말 및 상기 다른 모바일 단말과 연결된 서버가, 상기 기준 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보, 상기 다른 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보, 및 상기 촬영 설정 정보를 획득한 뒤에 상기 위치 보정 정보를 생성할 수 있다.
상기 S3 단계는, 상기 복수의 모바일 단말들에 의해, 복수의 시점 방향에서 피사체를 촬영한 복수의 촬영 영상들이 생성되는 단계이다.
구체적으로, 상기 S3 단계는, 상기 복수의 모바일 단말들에 대한 위치 보정이 완료된 뒤에, 상기 복수의 모바일 단말들에 구비된 복수의 카메라 모듈들에 의해 상기 피사체가 촬영되고, 이러한 촬영 동작을 통해 복수의 시점 방향에서 상기 피사체를 촬영한 복수의 촬영 영상들이 생성되는 단계이다.
이 경우 상기 복수의 촬영 영상들은, 통신망을 통해 단말들 사이에서 공유되거나 서버에 전송될 수 있다.
상기 S4 단계는, 상기 복수의 촬영 영상들을 바탕으로, 상기 피사체에 대한 다시점 영상이 생성되는 단계이다. 구체적으로, 상기 S4 단계는 상기 피사체를 복수의 시점 방향에서 촬영한 '복수의 촬영 영상들'이 '영상 프레임 상에 순차적으로 나열'되어서, 상기 피사체에 대한 다시점 영상이 생성되는 단계이다.
이 경우 이웃하는 단말들이 촬영한 영상들은 상기 영상 프레임상에서도 마찬가지로 이웃하게 나열되어야 한다. 따라서, 이를 위해, 상기 다시점 영상의 생성에 참여하는 각 단말에는 각 단말의 순차적인 위치에 대응되는 순차적인 번호가 할당될 수 있으며, 할당된 번호 정보가 상기 다시점 영상 생성 과정에서 활용될 수 있다. 예를 들어, 도 9와 같이 5개의 모바일 단말이 다시점 영상의 생성에 참여하는 경우, 순차적인 위치에 대응하는 순차적인 번호(①~⑤)가 각 단말에 할당되고, 각 단말이 촬영한 영상 데이터에 각 단말의 번호 정보가 메타(meta) 데이터의 형태로 삽입될 수 있으며, 이를 바탕으로 각 단말이 촬영한 영상들(①이미지 ~ ⑤이미지)이 영상 프레임상에서 할당된 번호 순서로 나열될 수 있다.
또한, 이웃하는 단말들이 촬영한 영상들은 상기 영상 프레임상에서 이웃하게 나열될 때 바람직하게는 오버랩 영역을 포함할 수 있다. 이러한 오버랩 영역에 의하여 영상들이 더욱 일체감 있게 연결될 수 있기 때문이다.
한편, 상기 다시점 영상을 생성하는 동작은, 상기 복수의 모바일 단말들, 상기 복수의 모바일 단말들과 연결된 서버 등을 포함하는 다양한 주체에 의해 수행될 수 있다. 예를 들어, 1) 상기 복수의 모바일 단말들 중 하나의 모바일 단말이, 자신 이외의 모바일 단말들로부터 촬영 영상들을 수신한 뒤에 상기 다시점 영상을 생성하거나 2) 상기 서버가 상기 복수의 모바일 단말들로부터 촬영 영상들을 수신한 뒤에 상기 다시점 영상을 생성할 수 있다.
이상에서 살펴본, 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법은, 프로그램(어플리케이션 등을 포함)의 형태로 구현된 뒤에 전자 장치에서 판독 가능한 기록 매체에 저장되거나, 프로그램 제공 서버(다운로드 서버) 등을 통해 배포될 수 있다.
이하, 본 발명의 일 실시예에 따른 모바일 단말을 살펴본다.
이하에서 살펴볼, 본 발명의 일 실시예에 따른 '모바일 단말'은, 카테고리는 상이하지만 상기 '복수의 모바일 단말들을 이용한 다시점 영상 생성 방법'과 실질적으로 동일한 기술적 특징을 포함할 수 있다.
따라서, 중복 기재를 방지하기 위하여 자세히 기재하지는 않겠지만, 상기 '복수의 모바일 단말들을 이용한 다시점 영상 생성 방법' 등과 관련하여 상술한 특징들은, 본 발명의 일 실시예에 따른 '모바일 단말'에도 당연히 유추 적용될 수 있다.
본 발명의 일 실시예에 따른 모바일 단말은, 스마트폰, 태블릿, 웨어러블 디바이스(스마트 시계, 스마트 안경 등), IoT(Internet of Things) 디바이스 등을 포함하는 다양한 모바일 기기로 구현될 수 있으며, 통신 모듈, 촬영 모듈, 메모리, 프로세서 등을 포함할 수 있다.
여기서 상기 통신 모듈은, 자신 이외의 모바일 단말, 서버 등의 전자 장치와 데이터를 송수신하기 위한 구성이다. 이러한 통신 모듈은, 무선 트랜시버(transceiver) 등을 포함하는 다양한 형태로 구현될 수 있다.
또한, 촬영 모듈은, 피사체를 촬영하여 시각적인 영상 데이터를 생성하기 위한 구성으로써, 카메라 모듈 등을 포함하는 다양한 형태로 구현될 수 있다.
또한, 상기 메모리는, 다양한 데이터를 저장하기 위한 구성으로써, 상기 통신 모듈에 의해 송수신되는 데이터, 상기 촬영 모듈에 의해 생성되는 영상 데이터, 상기 프로세서의 연산 동작을 위한 데이터 등을 포함하는, 다시점 영상의 생성과 관련된 다양한 데이터를 저장할 수 있다.
또한, 상기 프로세서는, 다시점 영상의 생성과 관련된 다양한 프로세싱 동작을 수행하기 위한 구성이다. 예를 들어, 상기 프로세서는, '복수의 모바일 단말들과 무선 통신을 통해 연결되는 동작', '기준 모바일 단말에 대한 정보를 바탕으로, 기준 모바일 단말이 아닌 모바일 단말에 대한 위치 보정 정보를 생성하는 동작', '상기 복수의 모바일 단말들로부터 복수의 시점 방향에서 피사체를 촬영한 복수의 촬영 영상들을 수신하는 동작', '상기 촬영 모듈이 생성한 영상 및 수신된 복수의 촬영 영상들을 바탕으로, 상기 피사체에 대한 다시점 영상을 생성하는 동작'과 관련된 연산 처리 동작을 수행할 수 있다. 또한, 상기 프로세서는, '상기 기준 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보, 상기 기준 모바일 단말이 아닌 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보, 및 촬영 설정 정보를 바탕으로 위치 보정 정보를 생성하는 동작'과 관련된 연산 처리 동작도 수행할 수 있으며, 이러한 동작들 이외에도 다시점 영상의 생성과 관련된 다양한 연산 처리 동작을 수행할 수 있다.
이하, 본 발명의 일 실시예에 따른 다시점 영상 생성 서버를 살펴본다.
이하에서 살펴볼, 본 발명의 일 실시예에 따른 '다시점 영상 생성 서버'는, 카테고리는 상이하지만 상기 '복수의 모바일 단말들을 이용한 다시점 영상 생성 방법'과 실질적으로 동일한 기술적 특징을 포함할 수 있다.
따라서, 중복 기재를 방지하기 위하여 자세히 기재하지는 않겠지만, 상기 '복수의 모바일 단말들을 이용한 다시점 영상 생성 방법' 등과 관련하여 상술한 특징들은, 본 발명의 일 실시예에 따른 '다시점 영상 생성 서버'에도 당연히 유추 적용될 수 있다.
본 발명의 일 실시예에 따른 다시점 영상 생성 서버는, 통신 모듈, 메모리, 프로세서 등을 포함할 수 있다.
여기서 상기 통신 모듈은, 복수의 모바일 단말들 등의 전자 장치와 데이터를 송수신하기 위한 구성이다. 이러한 통신 모듈은, 무선 트랜시버(transceiver) 등을 포함하는 다양한 형태로 구현될 수 있다.
또한, 상기 메모리는, 다양한 데이터를 저장하기 위한 구성으로써, 상기 통신 모듈에 의해 송수신되는 데이터, 상기 프로세서의 연산 동작을 위한 데이터 등을 포함하는, 다시점 영상의 생성과 관련된 다양한 데이터를 저장할 수 있다.
또한, 상기 프로세서는, 다시점 영상의 생성과 관련된 다양한 프로세싱 동작을 수행하기 위한 구성이다. 예를 들어, 상기 프로세서는, '복수의 모바일 단말들과 무선 통신을 통해 연결되는 동작', '상기 복수의 모바일 단말들 중 기준 모바일 단말에 대한 정보를 바탕으로, 다른 모바일 단말에 대한 위치 보정 정보를 생성하는 동작', '상기 복수의 모바일 단말들로부터 복수의 시점 방향에서 피사체를 촬영한 복수의 촬영 영상들을 수신하는 동작', '수신된 복수의 촬영 영상들을 바탕으로, 상기 피사체에 대한 다시점 영상을 생성하는 동작'과 관련된 연산 처리 동작을 수행할 수 있다. 또한, 상기 프로세서는, '상기 기준 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보, 상기 다른 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보, 및 촬영 설정 정보를 바탕으로 위치 보정 정보를 생성하는 동작'과 관련된 연산 처리 동작도 수행할 수 있으며, 이러한 동작들 이외에도 다시점 영상의 생성과 관련된 다양한 연산 처리 동작을 수행할 수 있다.
위에서 설명된 본 발명의 실시 예들은 예시의 목적을 위해 개시된 것이며, 이들에 의하여 본 발명이 한정되는 것은 아니다. 또한, 본 발명에 대한 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 사상과 범위 안에서 다양한 수정 및 변경을 가할 수 있을 것이며, 이러한 수정 및 변경은 본 발명의 범위에 속하는 것으로 보아야 할 것이다.

Claims (14)

  1. (a) 복수의 모바일(mobile) 단말들 중 기준 모바일 단말이 선택되는 단계;
    (b) 상기 기준 모바일 단말에 대한 정보를 바탕으로, 다른 모바일 단말에 대한 위치 보정 정보가 생성되는 단계;
    (c) 상기 복수의 모바일 단말들에 의해, 복수의 시점 방향에서 피사체를 촬영한 복수의 촬영 영상들이 생성되는 단계; 및
    (d) 상기 복수의 촬영 영상들을 바탕으로, 상기 피사체에 대한 다시점 영상이 생성되는 단계를 포함하며,
    상기 (b) 단계는,
    상기 기준 모바일 단말에 의해 상기 피사체에 대한 특징점들이 설정되는 단계;
    상기 기준 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보와 상기 다른 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보 간의 비교를 통해 상기 다른 모바일 단말의 현재 회전 이동 정보가 획득되는 단계;
    촬영 설정 정보 내 상기 다시점 영상의 촬영에 참여하는 모바일 단말들의 개수 정보와 매칭되는 상기 다른 모바일 단말의 바람직한 회전 이동 정보와 상기 다른 모바일 단말의 현재 회전 이동 정보 간의 비교를 통해 상기 다른 모바일 단말을 회전 이동시키기 위한 상기 위치 보정 정보가 생성되는 단를 포함하는,
    복수의 모바일 단말들을 이용한 다시점 영상 생성 방법.
  2. 제 1 항에 있어서,
    상기 (b) 단계는,
    상기 다른 모바일 단말에 의해, 상기 다른 모바일 단말의 촬영 화면상에 존재하는 피사체의 크기가 조절되는 단계를 포함하는,
    복수의 모바일 단말들을 이용한 다시점 영상 생성 방법.
  3. 제 2 항에 있어서,
    상기 피사체의 크기는, 줌인(zoom in) 동작, 줌아웃(zoom out) 동작 또는 상기 다른 모바일 단말의 이동에 의해 조절되고,
    상기 피사체의 크기는, 상기 기준 모바일 단말의 촬영 화면상에 존재하는 피사체 크기와 대응되도록 조절되는,
    복수의 모바일 단말들을 이용한 다시점 영상 생성 방법.
  4. 삭제
  5. 삭제
  6. 제 1 항에 있어서,
    상기 위치 보정 정보는, 상기 다른 모바일 단말의 평행 이동 정보 또는 회전 이동 정보를 포함하는,
    복수의 모바일 단말들을 이용한 다시점 영상 생성 방법.
  7. 제 1 항에 있어서,
    상기 복수의 모바일 단말들에는, 상기 복수의 모바일 단말들 사이의 순차적인 위치에 대응되는 순차적인 번호들이 할당되고,
    상기 다시점 영상은, 상기 복수의 촬영 영상들이 상기 번호들에 대응되는 순서로 영상 프레임(frame)상에 배치되어서 생성되는,
    복수의 모바일 단말들을 이용한 다시점 영상 생성 방법.
  8. 제 1 항에 있어서,
    상기 위치 보정 정보 또는 상기 다시점 영상은,
    상기 기준 모바일 단말, 상기 다른 모바일 단말, 또는 상기 복수의 모바일 단말들과 연결된 서버에 의해 생성되는,
    복수의 모바일 단말들을 이용한 다시점 영상 생성 방법.
  9. (a) 복수의 모바일(mobile) 단말들 중 기준 모바일 단말이 선택되는 단계;
    (b) 상기 기준 모바일 단말에 대한 정보를 바탕으로, 다른 모바일 단말에 대한 위치 보정 정보가 생성되는 단계;
    (c) 상기 복수의 모바일 단말들에 의해, 복수의 시점 방향에서 피사체를 촬영한 복수의 촬영 영상들이 생성되는 단계; 및
    (d) 상기 복수의 촬영 영상들을 바탕으로, 상기 피사체에 대한 다시점 영상이 생성되는 단계를 포함하며,
    상기 다른 모바일 단말에 대한 위치 보정 정보는,
    상기 기준 모바일 단말에 의해 상기 피사체에 대한 특징점들이 설정되고, 상기 기준 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보와 상기 다른 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보 간의 비교를 통해 상기 다른 모바일 단말의 현재 회전 이동 정보가 획득되는 경우,
    촬영 설정 정보 내 상기 다시점 영상의 촬영에 참여하는 모바일 단말들의 개수 정보와 매칭되는 상기 다른 모바일 단말의 바람직한 회전 이동 정보와 상기 다른 모바일 단말의 현재 회전 이동 정보 간의 비교 결과에 따라 상기 다른 모바일 단말을 이동시키기 위해 생성되는
    복수의 모바일 단말들을 이용한 다시점 영상 생성 방법을 구현하기 위한 프로그램이 저장된 전자 장치에서 판독 가능한 기록 매체.
  10. (a) 복수의 모바일(mobile) 단말들 중 기준 모바일 단말이 선택되는 단계;
    (b) 상기 기준 모바일 단말에 대한 정보를 바탕으로, 다른 모바일 단말에 대한 위치 보정 정보가 생성되는 단계;
    (c) 상기 복수의 모바일 단말들에 의해, 복수의 시점 방향에서 피사체를 촬영한 복수의 촬영 영상들이 생성되는 단계; 및
    (d) 상기 복수의 촬영 영상들을 바탕으로, 상기 피사체에 대한 다시점 영상이 생성되는 단계를 포함하며,
    상기 다른 모바일 단말에 대한 위치 보정 정보는,
    상기 기준 모바일 단말에 의해 상기 피사체에 대한 특징점들이 설정되고, 상기 기준 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보와 상기 다른 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보 간의 비교를 통해 상기 다른 모바일 단말의 현재 회전 이동 정보가 획득되는 경우,
    촬영 설정 정보 내 상기 다시점 영상의 촬영에 참여하는 모바일 단말들의 개수 정보와 매칭되는 상기 다른 모바일 단말의 바람직한 회전 이동 정보와 상기 다른 모바일 단말의 현재 회전 이동 정보 간의 비교 결과에 따라 상기 다른 모바일 단말을 이동시키기 위해 생성되는
    복수의 모바일 단말들을 이용한 다시점 영상 생성 방법을 구현하기 위한 프로그램을 다운로드 가능한 형태로 제공하는 프로그램 제공 서버.
  11. 모바일 단말로서,
    통신 모듈, 촬영 모듈, 메모리, 및 프로세서를 포함하고,
    상기 프로세서는,
    복수의 모바일 단말들과 무선 통신을 통해 연결되고;
    상기 복수의 모바일 단말 중 기준 모바일 단말에 대한 정보를 바탕으로, 다른 모바일 단말에 대한 위치 보정 정보를 생성하고;
    상기 복수의 모바일 단말들로부터 복수의 시점 방향에서 피사체를 촬영한 복수의 촬영 영상들을 수신하고; 그리고
    상기 촬영 모듈이 생성한 영상 및 수신된 복수의 촬영 영상들을 바탕으로, 상기 피사체에 대한 다시점 영상을 생성하기 위한 연산 처리 동작을 수행하며,
    상기 다른 모바일 단말에 대한 위치 보정 정보는,
    상기 기준 모바일 단말에 의해 상기 피사체에 대한 특징점들이 설정되고, 상기 기준 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보와 상기 다른 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보 간의 비교를 통해 상기 다른 모바일 단말의 현재 회전 이동 정보가 획득되는 경우,
    촬영 설정 정보 내 상기 다시점 영상의 촬영에 참여하는 모바일 단말들의 개수 정보와 매칭되는 상기 다른 모바일 단말의 바람직한 회전 이동 정보와 상기 다른 모바일 단말의 현재 회전 이동 정보 간의 비교 결과에 따라 상기 다른 모바일 단말을 이동시키기 위해 생성되는
    모바일 단말.
  12. 삭제
  13. 다시점 영상 생성 서버로서,
    통신 모듈, 메모리, 및 프로세서를 포함하고,
    상기 프로세서는,
    복수의 모바일 단말들과 무선 통신을 통해 데이터를 교환하고;
    상기 복수의 모바일 단말들 중 기준 모바일 단말에 대한 정보를 바탕으로, 다른 모바일 단말에 대한 위치 보정 정보를 생성하고;
    상기 복수의 모바일 단말들로부터 복수의 시점 방향에서 피사체를 촬영한 복수의 촬영 영상들을 수신하고;
    수신된 복수의 촬영 영상들을 바탕으로, 상기 피사체에 대한 다시점 영상을 생성하고; 그리고
    생성된 다시점 영상을 상기 복수의 모바일 단말들 중 하나에 전송하기 위한 연산 처리 동작을 수행하며,
    상기 다른 모바일 단말에 대한 위치 보정 정보는,
    상기 기준 모바일 단말에 의해 상기 피사체에 대한 특징점들이 설정되고, 상기 기준 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보와 상기 다른 모바일 단말의 촬영 화면상에 존재하는 특징점들의 위치 정보 간의 비교를 통해 상기 다른 모바일 단말의 현재 회전 이동 정보가 획득되는 경우,
    촬영 설정 정보 내 상기 다시점 영상의 촬영에 참여하는 모바일 단말들의 개수 정보와 매칭되는 상기 다른 모바일 단말의 바람직한 회전 이동 정보와 상기 다른 모바일 단말의 현재 회전 이동 정보 간의 비교 결과에 따라 상기 다른 모바일 단말을 이동시키기 위해 생성되는
    다시점 영상 생성 서버.
  14. 삭제
KR1020160008734A 2016-01-25 2016-01-25 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법 KR101788005B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160008734A KR101788005B1 (ko) 2016-01-25 2016-01-25 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160008734A KR101788005B1 (ko) 2016-01-25 2016-01-25 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법

Publications (2)

Publication Number Publication Date
KR20170088623A KR20170088623A (ko) 2017-08-02
KR101788005B1 true KR101788005B1 (ko) 2017-10-19

Family

ID=59651888

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160008734A KR101788005B1 (ko) 2016-01-25 2016-01-25 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법

Country Status (1)

Country Link
KR (1) KR101788005B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11924397B2 (en) 2020-07-23 2024-03-05 Samsung Electronics Co., Ltd. Generation and distribution of immersive media content from streams captured via distributed mobile devices

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102149004B1 (ko) * 2018-12-26 2020-08-28 포디리플레이코리아 주식회사 모바일 단말을 이용한 다채널 영상 생성 방법 및 장치

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11924397B2 (en) 2020-07-23 2024-03-05 Samsung Electronics Co., Ltd. Generation and distribution of immersive media content from streams captured via distributed mobile devices

Also Published As

Publication number Publication date
KR20170088623A (ko) 2017-08-02

Similar Documents

Publication Publication Date Title
KR101991080B1 (ko) 파노라마 가상 현실 콘텐츠의 옴니스테레오 캡쳐 및 렌더링
US20200236280A1 (en) Image Quality Assessment
US10523919B2 (en) Apparatus and method for adjusting stereoscopic image parallax and stereo camera
KR102023587B1 (ko) 카메라 리그 및 입체 이미지 캡쳐
CN106797460B (zh) 三维视频的重建
KR102013978B1 (ko) 이미지들의 융합을 위한 방법 및 장치
US20110158509A1 (en) Image stitching method and apparatus
KR20150050172A (ko) 관심 객체 추적을 위한 다중 카메라 동적 선택 장치 및 방법
US10681272B2 (en) Device for providing realistic media image
KR20160090373A (ko) 듀얼 렌즈 장치를 위한 촬영 방법 및 듀얼 렌즈 장치
JP2010250452A (ja) 任意視点画像合成装置
CN109361912A (zh) 用于立体视觉图像捕获的多层相机装置
US20150054926A1 (en) Image processing device and method, and image capturing device
CN109495733B (zh) 三维影像重建方法、装置及其非暂态电脑可读取储存媒体
CN108282650B (zh) 一种裸眼立体显示方法、装置、***及存储介质
CN109785225B (zh) 一种用于图像矫正的方法和装置
KR101725024B1 (ko) 룩업테이블 기반의 실시간 360도 vr 동영상 제작 시스템 및 이를 이용한 360도 vr 동영상 제작 방법
KR101788005B1 (ko) 복수의 모바일 단말들을 이용한 다시점 영상 생성 방법
CN114287126A (zh) 视频处理方法和装置、存储介质和电子设备
JP2017103695A (ja) 画像処理装置、画像処理方法、及びそのプログラム
CN114095644B (zh) 一种图像校正的方法和计算机设备
JP2016500162A (ja) オブジェクト空間のオブジェクト点の記述のための方法およびその実施のための結合体
KR101919132B1 (ko) 동영상 처리 장치, 방법 및 그 방법을 실행시키기 위한 컴퓨터 프로그램
CN117880480A (zh) 一种图像生成方法和电子设备
CN116260955A (zh) 一种具有影像空间投影姿态矫正的数字影像立体拍摄***

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right