KR102514702B1 - 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법 - Google Patents
사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법 Download PDFInfo
- Publication number
- KR102514702B1 KR102514702B1 KR1020180013613A KR20180013613A KR102514702B1 KR 102514702 B1 KR102514702 B1 KR 102514702B1 KR 1020180013613 A KR1020180013613 A KR 1020180013613A KR 20180013613 A KR20180013613 A KR 20180013613A KR 102514702 B1 KR102514702 B1 KR 102514702B1
- Authority
- KR
- South Korea
- Prior art keywords
- image
- object image
- real
- synthesis
- world
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
- H04M2201/34—Microprocessors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2250/00—Details of telephonic subscriber devices
- H04M2250/52—Details of telephonic subscriber devices including functional features of a camera
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Computer Networks & Wireless Communication (AREA)
- Image Processing (AREA)
- Processing Or Creating Images (AREA)
- Studio Devices (AREA)
Abstract
본 발명은 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법에 관한 것으로, 보다 자세하게는 모바일 단말기 등의 전자기기에서 사진 촬영 이미지를 생성할 때, 기 촬영된 다른 인물에 대한 합성용 객체 이미지를 촬영 대상의 실세계 객체 이미지의 후면에 중첩되도록 함께 포함시켜 사진 촬영 이미지를 생성함으로써, 서로 다른 시공간에 있는 사용자들이 함께 촬영한 것과 같은 효과를 제공할 수 있는 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법에 관한 것이다.
Description
본 발명은 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법에 관한 것으로, 보다 자세하게는 모바일 단말기 등의 전자기기에서 사진 촬영 이미지를 생성할 때, 기 촬영된 다른 인물에 대한 합성용 객체 이미지를 촬영 대상의 실세계 객체 이미지의 후면에 중첩되도록 함께 포함시켜 사진 촬영 이미지를 생성함으로써, 서로 다른 시공간에 있는 사용자들이 함께 촬영한 것과 같은 효과를 제공할 수 있는 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법에 관한 것이다.
최근의 모바일 단말기는 기본적으로 카메라 모듈을 포함하고 있으며, 디지털 카메라는 통신모듈을 점차적으로 포함시키고 있다. 이에 따라 사용자는 모바일 단말기 또는 디지털 카메라를 이용하여 촬영한 사진 촬영 이미지를 소셜 네트워크 서비스 등의 온라인 상에 실시간으로 게시하고 다른 사용자들과 공유한다.
이러한 카메라 모듈이 포함된 모바일 단말기 및 통신이 가능한 디지털 카메라는 각각의 편의성을 확장시키기 위해 다양한 기능을 추가하고 있는데, 그 중에 하나의 기능이 촬영된 이미지를 편집하는 기능이다. 그러나 이미지 편집 기능은 촬영된 이미지에 대한 필터 적용, 이미지의 단순한 보정, 정해진 아이콘의 합성 등에 불과하다. 이에 따라 모바일 단말기에서 사진 촬영을 수행할 때 같은 모바일 단말기 또는 다른 모바일 단말기에서 기 촬영된 사진 촬영 이미지를 새롭게 촬영되는 실세계 이미지에 포함하여 하나의 사진 촬영 이미지로 생성하는 기능은 제공되지 못하고 있다.
IDEO LLC.의 미국공개특허공보 US2015-0281591호(2015.10.01 공개)는 연속되는 이미지인 비디오 데이터를 편집할 수 있는 비디오 편집 시스템을 개시하고 있다. 종래기술 1은 터치스크린을 구비한 모바일 단말기에 비디오 편집 인터페이스를 제공한다. 종래기술 1은 출력된 이미지(비디오 데이터)에 터치(touch) 또는 드래그 앤 드롭(drag & drop) 등의 입력 수단을 이용하여 필터 등을 적용할 수 있는 편집 인터페이스를 제공하여 사용자로 하여금 촬영된 비디오 데이터를 용이하게 편집할 수 있는 효과를 제공한다.
하지만 종래기술 1은 모바일 단말기 자체 내에 저장된 이미지 또는 비디오 데이터에 대한 필터 기능 적용 등의 편집을 수행할 수 있으나, 각각 촬영된 복수의 이미지 또는 비디오 데이터에 대한 합성 등은 수행할 수 없는 문제점이 있다.
Hewlett packard의 미국공개특허공보 US2007-0291338호(2007.12.20 공개)는 디지털 카메라를 위한 사진편집 메뉴 시스템에 관한 것으로, 디지털 카메라에서 촬영된 이미지를 사용자가 디지털 카메라의 사진편집 메뉴를 이용하여 편집을 수행하고, 디지털 효과가 부가된 편집 이미지를 PC를 이용하지 않고 원격 전송할 수 있는 특징이 있다. 종래기술 2는 촬영 기기인 디지털 카메라를 통해 사진 촬영뿐만 아니라 편집까지 수행할 수 있다. 때문에 촬영된 사진 파일을 PC에 전송하여 편집 작업을 진행해야 하는 문제점을 해결할 수 있다. 또한, 통신망을 통해 파일을 원격으로 전송할 수 있는 기능을 통해 촬영하고 편집한 사진을 소셜 네트워크 서비스에 용이하게 업로드 할 수 있는 효과도 있다.
종래기술 2도 디지털 카메라에 포함된 편집 기능을 이용하여 촬영된 이미지를 편집할 수 있는 효과는 있지만, 각각 촬영된 서로 다른 복수의 이미지를 하나의 이미지로 합성하여 같은 장소에서 촬영된 효과를 나타내는 편집을 수행할 수 없는 문제점이 있다.
Samsung Electronics의 미국등록특허공보 US9,792,883호(2017.10.17 등록)는 사용자가 모바일 단말기를 이용하여 단순히 사진을 촬영하는 것뿐만 아니라 미리 저장된 배경 영상의 정해진 위치에 촬영된 사용자 영상을 합성하는 기술을 제공한다. 종래기술 3은 각각의 이미지를 합성하여 하나의 합성 이미지를 생성함으로써, 사용자에게 촬영된 이미지 이외의 합성 이미지를 제공함으로써 촬영 이미지를 다양하게 활용할 수 있는 효과를 제공한다.
그러나 종래기술 3은 모바일 단말기에서 촬영된 각각의 이미지인 배경 이미지에 사용자 이미지를 삽입하는 합성 기능을 제공할 뿐이며, 사용자들이 각각 촬영한 복수의 이미지를 사용자들이 사진 촬영에 적용하지 못하는 문제점이 있다.
상기의 종래기술들에서 제시된 기술적 특징을 사용하는 경우에도, 모바일 단말기 및 디지털 카메라 등의 전자기기에서는 복수의 촬영된 이미지 내에 포함된 인물들을 선택적으로 실시간 촬영되는 사진 촬영 이미지에 포함시킬 수 있는 방법을 제공하지 못한다.
상기의 문제를 해결하기 위해, 본 발명에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법은, 카메라 모듈이 포함된 모바일 단말기 또는 통신이 가능한 디지털 카메라 등의 전자기기에서 촬영된 사진을 하나 이상의 다른 사용자의 전자기기와 공유하고, 공유된 사진을 디스플레이에 실세계 이미지와 함께 출력하여 실시간 촬영함으로써 하나의 사진 촬영 이미지로 생성하기 위한 목적이 있다.
본 발명에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법은, 사용자가 모바일 단말기 등의 통신 가능한 전자기기를 이용하여 촬영한 사진에서 배경이 제외된 합성용 객체 이미지를 다른 사용자의 전자기기로 전송함에 따라 다른 사용자의 실시간 촬영되는 사진과 합성용 객체 이미지가 용이하게 합성되도록 하기 위한 다른 목적이 있다.
본 발명에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법은, 모바일 단말기 또는 다른 모바일 단말기에서 촬영된 사진을 이용하여 생성된 합성용 객체 이미지를 모바일 단말기에서 수행되는 실시간 사진 촬영에 출력하여 함께 사진 촬영 이미지로 생성되도록 하면서, 합성되는 사진에 다른 배경 이미지를 더 포함하여 사진 촬영 이미지가 생성될 수 있도록 하기 위한 다른 목적이 있다.
본 발명에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법은, 각각 복수의 사용자들이 각각의 모바일 단말기를 이용하여 사진 촬영 이미지를 생성할 때, 어느 하나의 단말기로부터 순차적으로 전송되는 합성용 객체 이미지를 포함하여 사진 촬영 이미지를 생성한다. 생성된 사진 촬영 이미지가 합성용 객체 이미지로 사용될 수 있도록 다음 모바일 단말기에게 사진 촬영 이미지를 순차적으로 전송함으로써, 각각의 모바일 단말기가 촬영하는 사진에 수신한 합성용 객체 이미지가 순차적으로 합성되어 사진이 업데이트 된다. 이후, 최종 업데이트 된 사진 촬영 이미지가 각각의 사용자가 동일한 시간 및 장소에서 촬영한 것과 같은 효과를 나타낼 수 있도록 하는 다른 목적이 있다.
본 발명에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법은, 최초 촬영된 사진인 합성용 객체 이미지에 포함된 사용자의 포즈 및 사진 구도에 따라 이후에 디스플레이에 출력된 합성용 객체 이미지를 포함하여 촬영되는 사진에서도 합성용 객체 이미지와 유사한 포즈 및 사진 구도를 유도함으로써, 합성용 객체 이미지를 포함하여 일관성 있게 촬영된 사진 촬영 이미지를 제공받을 수 있도록 하기 위한 다른 목적이 있다.
본 발명에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법은, 최초 사용자로부터 촬영되고 공유된 사진이 다른 사용자들에 의해 합성용 객체 이미지로 사용되어 각 사용자들에 의해 사진 촬영 이미지로 생성된 후 최초 사용자 및 사진 촬영 이미지로 생성한 사용자들의 모바일 단말기에 최종 사진 촬영 이미지가 수신되도록 함으로써, 각각의 사진 촬영 이미지를 공유한 사용자들이 최종 사진 촬영 이미지를 확인할 수 있도록 하는 다른 목적이 있다.
본 발명에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법은, 이전 사용자의 모바일 단말기로부터 합성용 객체 이미지를 수신하는 경우, 해당 모바일 단말기의 카메라 모듈로부터 입력되는 실세계 이미지와 수신한 합성용 객체 이미지를 디스플레이에 함께 출력함으로써, 사진 촬영 이미지를 생성할 때, 합성용 객체 이미지를 가이드로 사용될 수 있도록 하기 위한 다른 목적이 있다.
상기의 문제를 해결하기 위해 본 발명에 따른 사진 촬영 이미지를 생성하는 방법은, 카메라 모듈, 디스플레이, 통신모듈, 프로세서 및 메모리를 포함하는 모바일 단말기에서 상기 프로세서가 다음의 단계를 수행하여 사진 촬영 이미지를 생성하는 방법은, 실세계 장면을 상기 카메라 모듈이 실시간 연속적으로 촬영하여 생성되는 실세계 객체 이미지가 포함된 실세계 이미지를 상기 디스플레이에서 실시간 연속적으로 출력하는 단계; 상기 메모리에 저장된 합성용 객체 이미지를 상기 디스플레이에 출력하는 단계; 상기 합성용 객체 이미지와 상기 실세계 객체 이미지를 상기 디스플레이에 배치하는 단계로서, 상기 합성용 객체 이미지가 상기 실세계 객체 이미지의 후면에 중첩되어 배치되도록 선택되는 경우, 실시간 연속적으로 출력되는 상기 실세계 객체 이미지의 후면에 상기 합성용 객체 이미지가 중첩되어 배치되도록 하는 것을 포함하며; 및 상기 디스플레이에 배치된 상기 합성용 객체 이미지와 상기 실세계 객체 이미지가 포함되는 사진 촬영 이미지를 생성하는 단계를 포함하여 구성되는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하는 방법에 있어서, 상기 실세계 이미지를 상기 디스플레이에 출력하는 단계 이후에, 상기 합성용 객체 이미지와 중첩되어 배치되기 위한 상기 실세계 객체 이미지가 상기 실세계 이미지에서 선택되는 단계;를 더 포함하여 수행되는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하는 방법에 있어서, 상기 합성용 객체 이미지를 제 1 레이어(layer)에 위치하도록 제공하며, 상기 실세계 객체 이미지를 제 2 레이어(layer)에 위치하도록 제공하고, 상기 배치하는 단계에서, 상기 제 1 레이어 및 제 2 레이어에 위치하는 상기 합성용 객체 이미지와 상기 실세계 객체 이미지를 상기 디스플레이에 배치하되, 상기 합성용 객체 이미지가 상기 실세계 객체 이미지의 후면에 위치하는 명령이 수신되는 경우, 상기 제 1 레이어를 상기 제 2 레이어의 후면에 위치시켜 상기 실세계 객체 이미지의 후면에 상기 합성용 객체 이미지가 중첩되어 배치되도록 하는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하는 방법에 있어서, 상기 실세계 이미지에서 상기 실세계 객체 이미지 만을 추출하고, 추출된 상기 실세계 객체 이미지를 상기 제 2 레이어에 위치시키는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하는 방법에 있어서, 상기 실세계 이미지에서 상기 실세계 객체 이미지를 제외한 나머지 이미지에 투명 처리하고, 상기 실세계 객체 이미지 및 투명 처리된 이미지를 상기 제 2 레이어에 위치시키는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하는 방법에 있어서, 상기 실세계 이미지에서 추출된 상기 실세계 객체 이미지를 제외한 실세계 배경 이미지는 제 3 레이어에 위치시키는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하는 방법에 있어서, 상기 제 3 레이어의 상기 실세계 배경 이미지를 더 포함하여 상기 사진 촬영 이미지를 생성하는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하는 방법에 있어서, 상기 사진 촬영 이미지를 생성하는 단계에서, 상기 메모리는 하나 이상의 배경 이미지들을 포함하며, 상기 배경 이미지들 중 선택된 배경 이미지를 더 포함하여 상기 사진 촬영 이미지를 생성하는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하는 방법에 있어서, 상기 모바일 단말기에 입력된 제어명령에 따라 상기 디스플레이에 출력된 상기 합성용 객체 이미지의 크기 또는 위치를 제어하는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하는 방법에 있어서, 상기 합성용 객체 이미지는 상기 모바일 단말기에서 생성되거나 다른 모바일 단말기에서 생성되어 상기 통신모듈을 통하여 제공받은 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하는 방법에 있어서, 상기 합성용 객체 이미지는 배경 이미지가 제외된 객체 이미지 만을 포함하는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하는 방법에 있어서, 상기 합성용 객체 이미지가 생성될 때, 상기 합성용 객체 이미지를 제외한 나머지 이미지는 배경 이미지로 생성되는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하는 방법에 있어서, 상기 합성용 객체 이미지와 상기 실세계 객체 이미지가 배치된 상기 사진 촬영 이미지를 합성용 객체 이미지로써, 상기 통신모듈을 이용하여 다른 모바일 단말기로 전송하는 단계를 더 포함하되, 상기 다른 모바일 단말기는, 각각의 상기 단계와 동일한 단계를 수행하는 프로세서를 이용하여 수신한 상기 합성용 객체 이미지와 상기 다른 모바일 단말기의 실세계 객체 이미지를 포함하는 사진 촬영 이미지를 생성하는 것을 특징으로 한다.
본 발명에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기는, 카메라 모듈, 디스플레이, 통신모듈, 프로세서, 메모리 및 상기 메모리에 저장되고 상기 프로세서에 의해 실행되도록 구성된 하나 이상의 프로그램을 이용하여 사진 촬영 이미지를 생성하기 위한 모바일 단말기로서, 상기 하나 이상의 프로그램은, 실세계 장면을 상기 카메라 모듈이 실시간 연속적으로 촬영하여 생성되는 실세계 객체 이미지가 포함된 실세계 이미지를 상기 디스플레이에 실시간 연속적으로 출력하고, 상기 메모리에 저장된 합성용 객체 이미지를 상기 디스플레이에 출력하고, 상기 합성용 객체 이미지와 상기 실세계 이미지를 상기 디스플레이에 배치하되, 상기 합성용 객체 이미지가 상기 실세계 객체 이미지의 후면에 중첩되어 배치되도록 선택되는 경우, 실시간 연속적으로 출력되는 상기 실세계 객체 이미지의 후면에 상기 합성용 객체 이미지가 중첩되어 배치되도록 하며, 상기 디스플레이에 배치된 상기 합성용 객체 이미지와 상기 실세계 객체 이미지가 포함되는 사진 촬영 이미지를 생성하기 위한 명령어들을 포함하는 모바일 단말기를 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기에 있어서, 상기 하나 이상의 프로그램은, 상기 실세계 이미지를 상기 디스플레이에 출력한 이후에, 상기 합성용 객체 이미지와 중첩되어 배치되기 위한 상기 실세계 객체 이미지를 상기 실세계 이미지에서 선택하는 것을 더 수행하는 명령어를 포함하는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기에 있어서, 상기 합성용 객체 이미지를 제 1 레이어(layer)에 위치하도록 제공하며, 상기 실세계 객체 이미지를 제 2 레이어에 위치하도록 제공하고, 상기 배치는, 상기 제 1 레이어 및 제 2 레이어에 위치하는 상기 합성용 객체 이미지와 상기 실세계 객체 이미지를 상기 디스플레이에 배치하되, 상기 합성용 객체 이미지가 상기 실세계 객체 이미지의 후면에 위치하는 명령이 수신되는 경우, 상기 제 1 레이어를 상기 제 2 레이어의 후면에 위치시켜 상기 실세계 객체 이미지의 후면에 상기 합성용 객체 이미지가 중첩되어 배치되도록 하는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기에 있어서, 상기 실세계 이미지에서 상기 실세계 객체 이미지 만을 추출하고, 추출된 상기 실세계 객체 이미지를 상기 제 2 레이어에 위치시키는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기에 있어서, 상기 실세계 이미지에서 상기 실세계 객체 이미지를 제외한 나머지 이미지에 투명 처리하고, 상기 실세계 객체 이미지 및 투명 처리된 이미지를 상기 제 2 레이어에 위치시키는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기에 있어서, 상기 실세계 이미지에서 추출된 상기 실세계 객체 이미지를 제외한 실세계 배경 이미지는 제 3 레이어에 위치시키는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기에 있어서, 상기 사진 촬영 이미지를 생성하는 경우, 상기 제 3 레이어의 상기 실세계 배경 이미지를 더 포함하여 상기 사진 촬영 이미지를 생성하는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기에 있어서, 상기 사진 촬영 이미지를 생성하는 경우, 상기 메모리는 하나 이상의 배경 이미지들을 포함하며, 상기 배경 이미지들 중 선택된 배경 이미지를 더 포함하여 상기 사진 촬영 이미지를 생성하는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기에 있어서, 모바일 단말기에 입력된 제어명령에 따라 상기 디스플레이에 출력된 상기 합성용 객체 이미지의 크기 또는 위치를 제어하는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기에 있어서, 상기 합성용 객체 이미지는 상기 모바일 단말기에서 생성되거나 다른 모바일 단말기에서 생성되어 상기 통신모듈을 통하여 제공받은 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기에 있어서, 상기 합성용 객체 이미지는 배경 이미지가 제외된 객체 이미지 만을 포함하는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기에 있어서, 상기 합성용 객체 이미지가 생성될 때, 상기 합성용 객체 이미지를 제외한 나머지 이미지는 배경 이미지로 생성되는 것을 특징으로 한다.
본 발명의 실시예에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기에 있어서, 상기 합성용 객체 이미지와 상기 실세계 객체 이미지가 배치된 상기 사진 촬영 이미지가 합성용 객체 이미지로 사용될 수 있도록 상기 통신모듈을 이용하여 다른 모바일 단말기로 전송하되, 상기 다른 모바일 단말기는, 상기 명령어들과 동일한 명령어들을 포함하는 하나 이상의 프로그램을 이용하여 상기 사진 촬영 이미지를 합성용 객체 이미지로 수신한 상기 합성용 객체 이미지와 상기 다른 모바일 단말기의 상기 실세계 객체 이미지를 포함하는 사진 촬영 이미지를 생성하는 것을 특징으로 한다.
상기의 구성에 따라, 본 발명에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법은, 카메라 모듈이 포함된 모바일 단말기 또는 통신이 가능한 디지털 카메라 등의 전자기기에서 촬영된 사진을 하나 이상의 다른 사용자의 전자기기와 공유하고, 공유된 사진을 디스플레이에 실세계 이미지와 함께 출력하여 실시간 촬영함으로써 하나의 사진 촬영 이미지를 생성시킬 수 있는 효과가 있다.
본 발명에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법은, 사용자가 모바일 단말기 등의 통신 가능한 전자기기를 이용하여 촬영한 사진에서 배경이 제외된 합성용 객체 이미지를 다른 사용자의 전자기기로 전송함에 따라 다른 사용자의 실시간 촬영되는 사진에 합성용 객체 이미지가 용이하게 합성될 수 있는 다른 효과가 있다.
본 발명에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법은, 모바일 단말기 또는 다른 모바일 단말기에서 촬영된 사진을 이용하여 생성된 합성용 객체 이미지를 모바일 단말기에서 수행되는 실시간 사진 촬영에 출력하여 함께 사진 촬영 이미지로 생성되도록 하면서, 합성되는 사진에 다른 배경 이미지를 더 포함하여 사진 촬영 이미지가 생성될 수 있도록 하여, 별도의 편집 없이 실시간으로 촬영되는 사진의 배경을 변경할 수 있는 다른 효과가 있다.
본 발명에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법은, 각각 복수의 사용자들이 각각의 모바일 단말기를 이용하여 사진 촬영 이미지를 생성할 때, 어느 하나의 단말기로부터 순차적으로 전송되는 합성용 객체 이미지를 포함하여 사진 촬영 이미지를 생성한다. 생성된 사진 촬영 이미지가 합성용 객체 이미지로 사용할 수 있도록 다음 모바일 단말기에게 사진 촬영 이미지를 순차적으로 전송함으로써, 각각의 모바일 단말기가 촬영하는 사진에 수신한 합성용 객체 이미지가 순차적으로 합성되어 사진이 업데이트 된다. 이후, 각각의 사용자가 동일한 시간 및 장소에서 촬영한 것과 같은 최종 업데이트 된 사진 촬영 이미지를 생성할 수 있는 다른 효과가 있다.
본 발명에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법은, 최초 촬영된 사진의 합성용 객체 이미지에 포함된 사용자의 포즈 및 사진 구도에 따라 이후에 디스플레이에 출력된 합성용 객체 이미지를 포함하여 촬영되는 사진에서도 합성용 객체 이미지와 유사한 포즈 및 사진 구도를 유도함으로써, 합성용 객체 이미지를 포함하여 일관성 있게 촬영된 사진 촬영 이미지를 생성할 수 있는 다른 효과가 있다.
본 발명에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법은, 최초 사용자로부터 촬영되고 공유된 사진이 다른 사용자들에 의해 합성용 객체 이미지로 사용되어 각 사용자들에 의해 사진 촬영 이미지로 생성된 후, 최초 사용자 및 사진 촬영 이미지를 생성한 사용자들의 각 모바일 단말기에 최종 사진 촬영 이미지가 수신되도록 함으로써, 각각의 사진 촬영 이미지를 공유한 사용자들이 본인이 제공한 합성용 객체 이미지가 사용된 최종 사진 촬영 이미지를 확인할 수 있도록 하는 다른 효과가 있다.
본 발명에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법은, 이전 사용자의 모바일 단말기로부터 합성용 객체 이미지를 수신하는 경우, 해당 모바일 단말기의 카메라 모듈로부터 입력되는 실세계 이미지와 수신한 합성용 객체 이미지를 디스플레이에 함께 출력함으로써, 사진 촬영 이미지를 생성할 때 합성용 객체 이미지를 촬영 가이드로 사용하고 이를 통해 예상되는 합성 형태를 미리 확인하도록 하여 보다 나은 사진 촬영 이미지를 얻을 수 있도록 하는 다른 효과가 있다.
도 1은 본 발명에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기의 구성도,
도 2는 본 발명에 따른 모바일 단말기를 이용하여 사진 촬영 이미지를 생성하는 방법을 나타내기 위한 순서도,
도 3은 본 발명에 따른 모바일 단말기에서 레이어를 사용하여 사진 촬영 이미지를 생성하는 방법을 나타내기 위한 순서도,
도 4는 본 발명에 따른 모바일 단말기를 이용하여 실세계 장면을 촬영하여 실세계 이미지를 출력하는 일실시예를 나타내는 예시도,
도 5는 본 발명에 따른 모바일 단말기에 출력되는 실세계 이미지의 일실시예를 나타내는 예시도,
도 6은 본 발명에 따라 생성된 실세계 이미지와 합성용 객체 이미지를 디스플레이에 출력하는 일실시예를 나타내는 예시도,
도 7은 본 발명에 따라 생성된 실세계 이미지와 합성용 객체 이미지를 디스플레이에 출력하는 다른 실시예를 나타내는 예시도,
도 8은 본 발명에 따라 투명 처리된 실세계 객체 이미지와 합성용 객체 이미지를 디스플레이에 출력하는 일실시예를 나타내는 예시도,
도 9는 본 발명에 따라 투명 처리된 실세계 객체 이미지와 합성용 객체 이미지를 디스플레이에 출력하는 다른 실시예를 나타내는 예시도,
도 10은 본 발명에 따른 모바일 단말기의 움직임을 이용하여 실세계 객체 이미지의 위치를 조정하기 위한 일실시예를 나타내는 예시도,
도 11은 본 발명에 따른 모바일 단말기의 움직임을 이용하여 위치 조정된 실세계 객체 이미지와 합성용 객체 이미지의 중첩을 나타내는 예시도,
도 12는 본 발명에 따른 실세계 객체 이미지와 합성용 객체 이미지가 중첩되어 배치되는 일실시예를 나타내는 예시도,
도 13은 본 발명에 따른 모바일 단말기에서 촬영되는 실세계 인물의 움직임을 이용하여 실세계 객체 이미지의 위치를 조정하기 위한 일실시예를 나타내는 예시도,
도 14는 본 발명에 따른 실세계 인물의 움직임을 이용하여 위치 조정된 실세계 객체 이미지와 합성용 객체 이미지의 중첩을 나타내는 예시도,
도 15는 본 발명에 따른 모바일 단말기에서 합성용 객체 이미지의 위치를 조정하기 위한 일실시예를 나타내는 예시도,
도 16은 본 발명에 따른 모바일 단말기에서 위치 조정된 합성용 객체 이미지와 실세계 객체 이미지의 중첩을 나타내는 예시도이다.
도 2는 본 발명에 따른 모바일 단말기를 이용하여 사진 촬영 이미지를 생성하는 방법을 나타내기 위한 순서도,
도 3은 본 발명에 따른 모바일 단말기에서 레이어를 사용하여 사진 촬영 이미지를 생성하는 방법을 나타내기 위한 순서도,
도 4는 본 발명에 따른 모바일 단말기를 이용하여 실세계 장면을 촬영하여 실세계 이미지를 출력하는 일실시예를 나타내는 예시도,
도 5는 본 발명에 따른 모바일 단말기에 출력되는 실세계 이미지의 일실시예를 나타내는 예시도,
도 6은 본 발명에 따라 생성된 실세계 이미지와 합성용 객체 이미지를 디스플레이에 출력하는 일실시예를 나타내는 예시도,
도 7은 본 발명에 따라 생성된 실세계 이미지와 합성용 객체 이미지를 디스플레이에 출력하는 다른 실시예를 나타내는 예시도,
도 8은 본 발명에 따라 투명 처리된 실세계 객체 이미지와 합성용 객체 이미지를 디스플레이에 출력하는 일실시예를 나타내는 예시도,
도 9는 본 발명에 따라 투명 처리된 실세계 객체 이미지와 합성용 객체 이미지를 디스플레이에 출력하는 다른 실시예를 나타내는 예시도,
도 10은 본 발명에 따른 모바일 단말기의 움직임을 이용하여 실세계 객체 이미지의 위치를 조정하기 위한 일실시예를 나타내는 예시도,
도 11은 본 발명에 따른 모바일 단말기의 움직임을 이용하여 위치 조정된 실세계 객체 이미지와 합성용 객체 이미지의 중첩을 나타내는 예시도,
도 12는 본 발명에 따른 실세계 객체 이미지와 합성용 객체 이미지가 중첩되어 배치되는 일실시예를 나타내는 예시도,
도 13은 본 발명에 따른 모바일 단말기에서 촬영되는 실세계 인물의 움직임을 이용하여 실세계 객체 이미지의 위치를 조정하기 위한 일실시예를 나타내는 예시도,
도 14는 본 발명에 따른 실세계 인물의 움직임을 이용하여 위치 조정된 실세계 객체 이미지와 합성용 객체 이미지의 중첩을 나타내는 예시도,
도 15는 본 발명에 따른 모바일 단말기에서 합성용 객체 이미지의 위치를 조정하기 위한 일실시예를 나타내는 예시도,
도 16은 본 발명에 따른 모바일 단말기에서 위치 조정된 합성용 객체 이미지와 실세계 객체 이미지의 중첩을 나타내는 예시도이다.
본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정 해석되어서는 안되며, 발명자는 자신의 발명을 최선의 방법으로 설명하기 위해 용어와 개념을 정의할 수 있는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야 한다.
따라서, 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 바람직한 일 실시예에 해당하며, 본 발명의 기술적 사상을 모두 대변하는 것이 아니므로 해당 구성은 본 발명의 출원시점에서 이를 대체할 다양한 균등물과 변형예가 있을 수 있다.
명세서 전반에서 어떠한 부분이 어떤 구성요소를 “포함”한다는 기재는, 이에 대한 특별한 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라, 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한 명세서에 기재된 “..모’', “..부”, “..시스템” 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있으며, 하나의 장치 또는 각각 다른 장치에 포함될 수 있다.
이하에서는 도면을 참조하여 본 발명에 따른 사진 업데이트 촬영을 위한 모바일 단말기 및 업데이트 촬영 방법을 설명한다.
본 발명은 카메라 모듈(101), 디스플레이(102), 통신모듈(105), 마이크로 프로세서(103, 이하 ‘프로세서’라 함) 및 메모리(104)를 포함하는 모바일 단말기(100)에서 프로세서(103)가 다음의 단계를 수행하여 사진 촬영 이미지를 생성한다.
프로세서(103)는 카메라 모듈(101)에서 실세계 장면을 촬영하여, 실세계 객체 이미지가 포함된 실세계 이미지를 디스플레이(102)에 출력하는 단계;와 메모리(104)에 저장된 합성용 객체 이미지를 디스플레이(102)에 출력하는 단계;와 합성용 객체 이미지와 실세계 이미지를 디스플레이(102)에 배치하는 단계로서, 합성용 객체 이미지가 실세계 객체 이미지의 후면에 중첩되어 배치되도록 선택되는 경우, 실세계 이미지에 포함된 상기 실세계 객체 이미지의 후면에 합성용 객체 이미지가 중첩되어 배치되도록 하는 것을 포함하며; 및 디스플레이(102)에 배치된 합성용 객체 이미지와 실세계 객체 이미지가 포함되는 사진 촬영 이미지를 생성하는 단계로 이루어진다.
도 1은 본 발명에 따른 사진 촬영 이미지를 생성하기 위한 모바일 단말기의 구성도이다. 도 1에 도시된 바와 같이, 본 발명은 카메라 모듈(101), 디스플레이(102), 통신모듈(105), 프로세서(103), 메모리(104) 및 메모리(104)에 저장되고 프로세서(103)에 의해 실행되도록 구성된 하나 이상의 프로그램을 포함하는 모바일 단말기(100)에서 하나 이상의 프로그램은 다음과 같은 명령어를 이용하여 사진 촬영 이미지를 생성한다.
하나 이상의 프로그램은, 카메라 모듈(101)에서 실세계 장면을 촬영하여, 실세계 객체 이미지가 포함된 실세계 이미지를 디스플레이(102)에 출력하고, 메모리(104)에 저장된 합성용 객체 이미지를 디스플레이(102)에 출력하고, 합성용 객체 이미지와 실세계 이미지를 디스플레이(102)에 배치하되, 합성용 객체 이미지가 실세계 이미지의 후면에 중첩되어 배치되도록 선택되는 경우, 실세계 이미지에 포함된 상기 실세계 객체 이미지의 후면에 합성용 객체 이미지가 중첩되어 배치되도록 하며, 디스플레이(102)에 배치된 합성용 객체 이미지와 실세계 객체 이미지가 포함되는 사진 촬영 이미지를 생성하기 위한 명령어를 포함한다.
모바일 단말기(100)는 실세계 장면을 촬영하여 실세계 객체 이미지를 포함하는 실세계 이미지를 생성할 수 있는 카메라 모듈(101), 생성된 실세계 이미지를 출력할 수 있는 디스플레이(102), 카메라 모듈(101)을 구동하고, 실세계 이미지가 디스플레이(102)에 출력되도록 수행하는 프로세서(103), 수신된 또는 생성된 합성용 객체 이미지를 저장하는 메모리(104) 및 합성용 객체 이미지 또는 생성된 사진 촬영 이미지를 외부의 다른 모바일 단말기(미도시)로부터 수신하거나 전송할 수 있는 통신 모듈(105)을 포함한다.
카메라 모듈(101)은 하나 이상으로 구비되며, 프로세서(103)에서 생성되는 명령에 따라 카메라 모듈(101)을 통해 입력되는 실세계 장면을 실세계 이미지로 생성한다. 실세계 이미지에는 하나 이상의 실세계 객체 이미지가 포함되어 있으며, 실세계 객체 이미지는 실세계 장면에 포함된 실세계 객체에 대응하는 이미지이다. 이때, 생성되는 실세계 이미지는 메모리(104)에 저장될 수 있다.
카메라 모듈(101)은 실세계 장면을 실시간 연속적으로 촬영하여 실세계 이미지를 생성한다.
카메라 모듈(101)은 프로세서(103)가 생성하여 전송한 사진 촬영 명령을 이용하여 연속적으로 입력되는 실세계 이미지 중 어느 하나의 프레임을 사진 촬영 이미지로 생성할 수 있다.
카메라 모듈(101)은 프로세서(103)가 생성하여 전송한 동영상 촬영 명령을 이용하여 연속적으로 입력되는 실세계 이미지 중 복수의 연속적인 프레임을 동영상 촬영 이미지로 생성할 수 있다.
디스플레이(102)는 프로세서(103)에서 전송되는 명령에 의해 사진, 동영상 등의 이미지를 출력한다. 디스플레이(102)는 터치 모듈(미도시)을 포함하는 터치 스크린(미도시)으로 이루어져 있어, 터치 스크린을 통해 입력된 사용자 명령을 전기적 신호로 변환하여 프로세서(103)로 전송하도록 한다. 디스플레이(102)는 터치 스크린이 아닌 디스플레이로 구비될 수 있으며, 모바일 단말기(100)는 키패드 및 포인팅 장치 등의 입력 모듈(미도시)을 더 포함할 수 있다.
디스플레이(102)의 크기는 한정되지 않으나, 모바일 단말기(100)에서 사용될 수 있는 크기로 이루어지는 것이 바람직하다.
프로세서(103)는 디스플레이(102) 또는 입력 모듈을 사용하여 입력된 사용자 명령의 전기적 신호를 해석하여 모바일 단말기(100)에 포함된 구성요소를 제어할 수 있는 제어명령을 생성한다. 프로세서(103)는 생성된 어느 하나 이상의 제어명령을 통해 카메라 모듈(101)을 구동할 수 있다. 또한, 다른 제어명령을 통해 사진 촬영 이미지 또는 동영상 촬영 이미지를 생성할 수 있다. 프로세서(103)는 모바일 단말기(100)를 제어 할 수 있는 다양한 제어명령을 생성한다.
메모리(104)는 하나 이상으로 구성되며, 프로세서(103)에 의해 구동되는 하나 이상의 프로그램을 저장한다. 하나 이상의 프로그램은 카메라 모듈(101)을 구동하고, 통신 모듈(105)을 구동하고, 실세계 이미지에서 실세계 객체 이미지를 추출하고, 합성용 객체 이미지와 실세계 객체 이미지를 이용하여 사진 촬영 이미지를 생성할 수 있다. 또한, 모바일 단말기(100)를 운용하기 위한 운영체제, 어플리케이션, 사용자 정보 등의 기본 데이터를 저장한다.
통신 모듈(105)은 외부의 다른 모바일 단말기(미도시)와 데이터 통신을 수행한다. 통신 모듈(105)은 다른 단말기에서 생성된 합성용 객체 이미지를 수신하거나, 생성된 사진 촬영 이미지를 다른 단말기로 전송할 수 있다. 통신 모듈(105)은 데이터 통신 이외에 전화 통화 등을 수행할 수도 있다.
모바일 단말기(100)는 일반적으로 개인이 휴대하는 휴대전화기, 스마트폰, 스마트패드, 노트북, 태블릿 PC, 디지털 카메라, PMP(portable multimedia player) 등이 될 수 있다. 모바일 단말기(100)는 카메라 모듈, 디스플레이, 메모리 및 통신모듈 등을 포함한다.
도 2는 본 발명에 따른 모바일 단말기를 이용하여 사진 촬영 이미지를 생성하는 방법을 나타내기 위한 순서도이다. 도 1에 도시된 프로세서(103)가 도 2에 도시된 다음의 단계를 수행하여 사진 촬영 이미지를 생성한다.
프로세서(103)는 카메라 모듈(101)에서 실세계 장면을 촬영하여, 실세계 객체 이미지가 포함된 실세계 이미지를 디스플레이(102)에 출력하는 단계(S110);와 메모리(104)에 저장된 합성용 객체 이미지를 디스플레이(102)에 출력하는 단계(S120);와 합성용 객체 이미지와 실세계 객체 이미지를 상기 디스플레이에 배치하는 단계(S130)로서, 합성용 객체 이미지가 실세계 객체 이미지의 후면에 중첩되어 배치되도록 선택되는 경우, 실세계 객체 이미지 후면에 합성용 객체 이미지가 중첩되어 배치되도록 하는 것을 포함하며; 및 디스플레이(102)에 배치된 합성용 객체 이미지와 실세계 객체 이미지가 포함되는 사진 촬영 이미지를 생성하는 단계(S140)로 이루어진다.
본 발명에서 “실세계 객체 이미지가 포함된 실세계 이미지를 디스플레이(102)에 출력하는 단계”는 실세계 장면 중 최소한 실세계 객체 이미지가 출력되는 단계를 의미할 수 있다.
본 발명에서 “합성용 객체 이미지를 상기 디스플레이에 출력하는 단계”는 최소한 합성용 객체 이미지가 출력이 되는 단계를 의미하며, 합성용 객체 이미지를 포함하여 추가적인 다른 이미지 또는 정보가 함께 출력되는 것을 포함할 수 있다.
합성용 객체 이미지와 실세계 객체 이미지를 상기 디스플레이에 배치하는 단계(S130)는 합성용 객체 이미지가 실세계 객체 이미지의 후면에 중첩되어 배치되도록 선택하는 단계를 포함할 수 있다.
일 구현예에 따르면, 합성용 객체 이미지가 실세계 객체 이미지의 후면에 중첩되어 배치되는 동작의 지시 여부를 확인하는 단계를 포함할 수 있다. 일 구현예에 따르면, 실세계 이미지에서 후면에 중첩되는 실세계 객체 이미지를 선택하는 단계를 포함할 수 있다.
도 3은 본 발명에 따른 모바일 단말기에서 레이어를 사용하여 사진 촬영 이미지를 생성하는 방법을 나타내기 위한 순서도이다. 도 3에서는 프로세서(103)가 출력되는 각 이미지를 복수의 레이어(layer)에 제공하여 디스플레이(102)에 출력하는 방법에 대한 설명이며, 도 2를 참조하여 설명한다.
카메라 모듈(101)을 이용하여 실세계 장면을 촬영하고, 이에 따라 생성되는 실세계 객체 이미지가 포함된 실세계 이미지를 디스플레이(102)에 출력하는 단계(S110)에서, 디스플레이(102)에 출력되는 실세계 객체 이미지는 제 2 레이어(layer)에 제공되어 출력된다.
제 2 레이어는 실세계 객체 이미지에 대한 정보만 포함하거나, 실세계 객체 이미지를 포함한 실세계 이미지 전부에 대한 정보를 포함하거나, 실세계 객체 이미지에 대한 정보 및 실세계 객체 이미지를 제외한 나머지 배경은 투명 처리한 정보를 포함할 수 있다.
카메라 모듈(101)을 이용하여 실세계 장면을 촬영되고, 실세계 이미지가 생성되는 것은 도 4에서 설명된다.
도 4는 본 발명에 따른 모바일 단말기를 이용하여 실세계 장면을 촬영하여 실세계 이미지를 출력하는 일실시예를 나타내는 예시도이다. 도 4에 도시된 바와 같이, 실세계 장면의 실시간 연속적인 촬영은 모바일 단말기(100)의 카메라 모듈(101)을 통해 수행된다. 실세계 장면은 실세계에 위치한 배경(520)과 인물(510) 등의 하나 이상의 객체가 포함되어 있다. 카메라 모듈(101)이 촬영하는 실세계 장면은 이미지 데이터인 실세계 이미지로 실시간 연속적으로 생성된다. 이에 따라, 디스플레이(102)에서 실시간 연속적으로 출력되는 실세계 이미지(110)에는 카메라 모듈(미도시)로부터 촬영되는 인물(510)에 대한 실세계 객체 이미지(객체 A)와 배경에 대한 실세계 배경 이미지가 포함될 수 있다.
카메라 모듈(101)에 의해 촬영되는 실세계 장면에서 인물(510)의 위치가 이동하면 실세계 이미지 내에서의 객체 A의 실세계 객체 이미지도 인물(510)의 이동되는 위치에 대응하여 위치가 이동되도록 디스플레이(102)에 실시간 출력된다. 또한 객체 A의 실세계 객체 이미지와 실세계 배경 이미지는 카메라 모듈(101)의 회전 또는 이동을 통한 카메라 앵글 변화에 따라 촬영되는 실세계 장면이 변화되어 실세계 이미지(110) 내에서 실세계 객체 이미지 및 실세계 배경 이미지가 위치 이동되어 출력된다.
카메라 모듈(101)을 이용하여 실세계 장면이 촬영되고, 촬영된 실세계 장면에 대응하는 실세계 이미지가 디스플레이(102)에 출력되는 일실시예는 도 5에서 설명된다.
도 5는 본 발명에 따른 모바일 단말기에 출력되는 실세계 이미지의 일실시예를 나타내는 예시도이다. 도 5의 (a)에 도시된 바와 같이, 실세계 장면이 촬영되어 디스플레이(102)에 출력되는 실세계 이미지(110)는 실세계 객체 이미지(객체 A)와 실세계 배경 이미지를 포함할 수 있다.
(a)의 실세계 이미지는 (c)와 같이 하나의 이미지에 실세계 객체 이미지와 실세계 배경 이미지가 모두 포함되어 구성될 수 있다. 또한, (a)의 실세계 이미지는 (d)와 같이 투명 처리된 나머지 이미지를 포함하는 실세계 객체 이미지와 (e)와 같이 실세계 객체 이미지가 제외된 실세계 배경 이미지가 결합되어 구성될 수 있다. 또한 도시되지 않았으나, 나머지 이미지가 제외된 객체 A만으로 이루어진 실세계 객체 이미지와 (e)와 같이 실세계 객체 이미지가 제외된 실세계 배경 이미지가 결합되어 구성될 수 있다.
디스플레이(102)에는 도 5의 (b)에 도시된 바와 같이, 실세계 장면이 촬영되고, (d)와 같이 투명 처리된 나머지 이미지를 포함하는 실세계 이미지(112)만 출력될 수 있으며, 나머지 이미지인 실세계 배경 이미지의 출력은 제외될 수 있다.
또한 도시되지 않았으나, 실세계 장면이 촬영되고, 객체 A만으로 이루어진 실세계 객체 이미지만 출력될 수 있으며, 나머지 실세계 배경 이미지의 출력은 제외될 수 있다.
실세계 배경 이미지의 출력이 제외된 실세계 이미지(112)의 경우에는 추후 실세계 배경 이미지 또는 다른 배경 이미지 등이 결합될 수 있다.
(d)와 같이 투명 처리된 나머지 이미지를 포함하는 실세계 이미지(112)는 (c)와 같이 하나의 이미지로 이루어진 실세계 이미지(110)에서 선택된 실세계 객체 이미지(객체 A)를 제외한 나머지 이미지에 투명 처리를 수행하여 생성할 수 있다.
또는 (c)와 같이 하나의 이미지로 이루어진 실세계 이미지(110)에서 선택된 실세계 객체 이미지(객체 A)를 제외한 나머지 이미지의 출력을 제외하거나 삭제하여 생성할 수 있다.
본 발명에서 용어 “실세계 이미지”는 실세계 장면 중 디스플레이에 결과적으로 출력되는 이미지를 나타내기 위하여 사용될 수 있다.
실세계 이미지(110)에서 실세계 객체 이미지(객체 A)를 선택하는 단계는 실세계 이미지(110)를 디스플레이에 출력하기 이전 또는 출력한 이후에 수행할수 있으며, 특히, 출력한 이후에 수행한다. 실세계 객체 이미지(객체 A)의 선택은 프로세서(103)가 실세계 이미지(110)에 포함된 객체 A를 인식하고, 인식된 객체 A를 실세계 객체 이미지(객체 A)로 설정하여 이루어진다.
또는, 실세계 객체 이미지(객체 A)의 선택은 사용자로부터 입력되는 객체 선택 신호를 이용하여 디스플레이(102)에 출력된 실세계 이미지(110)에서 객체 선택 신호에 대응하는 객체 A를 인식하고, 인식된 객체 A를 실세계 객체 이미지(객체 A)로 설정하여 이루어진다. 이때, 객체 선택 신호는 사용자가 모바일 단말기(100)에 구비된 입력 모듈(미도시) 또는 디스플레이(102)에 포함된 터치 모듈을 통해 입력할 수 있다. 터치 모듈을 이용한 객체 선택 신호의 입력은 디스플레이(102)에 출력된 실세계 이미지(110)에서 사용자가 객체로 선택하고자 하는 객체의 위치를 터치하는 경우, 터치된 위치의 정보가 객체 선택 신호로 인식되어, 터치 위치의 객체가 실세계 객체 이미지(객체 A)로 설정된다. 또는 디스플레이(102)에 출력된 실세계 이미지(110)에서 사용자가 객체로 선택하고자 하는 객체의 윤곽선을 터치 및 드래그의 입력을 수행하는 경우, 입력된 터치 및 드래그의 입력 정보가 객체 선택 신호로 인식되어, 터치 및 드래그에 대응하는 객체가 실세계 객체 이미지(객체 A)로 설정된다.
모바일 단말기(100)에 구비된 입력 모듈(미도시)을 사용하여 객체를 선택하는 경우에도, 입력된 정보에 따른 디스플레이(102)에 출력된 실세계 이미지(110) 내에서 선택된 객체를 실세계 객체 이미지(객체 A)로 설정한다.
디스플레이(102)는 하나 이상의 레이어를 사용하여 이미지를 출력한다. 도 5에 도시된 (a)의 실세계 이미지(110) 또는 (b)의 실세계 이미지(112)는 제 2 레이어(layer)에 제공되어 디스플레이(102)에 출력된다. 디스플레이(102)에 출력되는 실세계 이미지(110)는 (a)와 같이 실세계 객체 이미지(객체 A)와 실세계 배경 이미지를 모두 포함하는 하나의 이미지로 이루어지거나, (d)의 실세계 객체 이미지와 (e)의 실세계 배경 이미지의 두 개의 이미지가 결합되어 이루어지거나, 객체 A만 존재하는 실세계 객체 이미지와 (e)의 실세계 배경 이미지의 두 개의 이미지가 결합되어 이루어질 수 있다.
또한, (b)와 같이, 실세계 이미지(112)는 (d)와 같이 실세계 객체 이미지(객체 A)와 나머지 이미지에 투명 처리가 수행된 이미지를 포함하는 이미지이다. 또는, 객체 A만을 포함하는 실세계 이미지(미도시)이다.
이에 따라, 제 2 레이어(layer)에 배치되는 실세계 이미지(112)는 객체 A를 포함하며, 필요에 따라 나머지 이미지 또는 나머지 이미지에 투명 처리가 수행된 이미지를 포함할 수 있다.
한편, 추출된 실세계 객체 이미지와 실세계 배경 이미지가 결합된 실세계 이미지(110)가 디스플레이(102)에 출력되는 경우, 실세계 객체 이미지는 제 2 레이어에 제공되고, 실세계 배경 이미지는 제 3 레이어에 제공될 수 있다.
S110 단계 이후에, 메모리(104)에 저장된 합성용 객체 이미지를 디스플레이(102)에 출력하는 단계(S120)에서, 디스플레이(102)에 출력되는 합성용 객체 이미지는 제 1 레이어에 제공되어 출력된다. S120 단계에서 합성용 객체 이미지는 실세계 이미지가 출력되는 디스플레이(102)에 함께 출력되며, 디스플레이(102)에 출력되는 합성용 객체 이미지는 도 6 및 도 7과 같은 실시예 또는 도 8 및 도 9와 같은 다른 실시예의 형태로 출력될 수 있다.
도 6은 본 발명에 따라 생성된 실세계 이미지와 합성용 객체 이미지를 디스플레이에 출력하는 일실시예를 나타내는 예시도이다. 도 6의 (a)에 도시된 바와 같이, 모바일 단말기(100)에 구비된 디스플레이(102)에는 카메라 모듈(101)이 실세계 장면을 촬영하여 생성되는 실세계 이미지(110)가 제 2 레이어에 배치되어 출력된다.
(b)에 도시된 바와 같이, 합성용 객체 이미지(210-1, 객체 B)는 객체 B의 이미지만 존재하는 이미지이다. 합성용 객체 이미지(210-1, 객체 B)는 객체 B에 대한 이미지 정보만을 포함하고 있을 뿐, 객체 B 이외의 배경 정보 등은 포함되지 않는다. 합성용 객체 이미지(210-1, 객체 B)는 제 1 레이어에 배치되어 디스플레이(102)에 출력된다.
(a)의 실세계 객체 이미지(객체 A)를 포함하는 실세계 이미지(110)와 (b)의 합성용 객체 이미지(210-1, 객체 B)가 함께 디스플레이(102)에 출력되는 경우, (c)와 같이 제 2 레이어에 제공된 실세계 이미지(110)와 제 2 레이어의 전면에 위치하는 제 1 레이어에 제공된 합성용 객체 이미지(객체 B)가 함께 포함되어 디스플레이(102)에 출력된다.
도 7은 본 발명에 따라 생성된 실세계 이미지와 합성용 객체 이미지를 디스플레이에 출력하는 다른 실시예를 나타내는 예시도이다. 도 7의 (a)에 도시된 바와 같이, 모바일 단말기(100)에 구비된 디스플레이(102)에는 카메라 모듈(101)이 실세계 장면을 촬영하여 생성되는 실세계 이미지(110)가 제 2 레이어에 배치되어 출력된다.
(b)에 도시된 바와 같이, 합성용 이미지(210-2, 객체 B)는 합성용 객체 이미지(객체 B)와 나머지 이미지에 투명 처리를 수행한 이미지를 포함한다. 합성용 이미지(210-2, 객체 B)는 객체 B에 대한 이미지 정보와 투명 처리된 나머지 이미지에 대한 투명 처리 정보 등도 포함하고 있다. 합성용 이미지(210-2, B)는 제 1 레이어에 배치되어 디스플레이(102)에 출력된다.
일 구현예에 따르면, 합성용 객체 이미지(객체 B)와 투명 처리된 나머지 이미지를 포함하는 합성용 이미지를 나타내기 위하여 사용하는 용어 "합성용 이미지(210-2)"는 합성용 객체 이미지가 포함되어 있으므로 필요에 따라 "합성용 객체 이미지(210-2)" 또는 "합성용 객체 이미지(210-2, 객체 B)"로 표현할 수 있다.
(a)의 실세계 객체 이미지(객체 A)를 포함하는 실세계 이미지(110)와 (b)의 합성용 이미지(210-2, 객체 B)가 함께 디스플레이(102)에 출력되는 경우, (c)와 같이 제 2 레이어에 제공된 실세계 이미지(110)와 제 2 레이어의 전면에 위치하는 제 1 레이어에 제공된 합성용 객체 이미지(객체 B)가 함께 포함되어 디스플레이(102)에 출력된다. 이때, 합성용 이미지(210-2, 객체 B)의 합성용 객체 이미지 이외의 나머지 이미지에 투명 처리된 이미지는 디스플레이(102)에서 투명하게 출력되므로, 제 2 레이어에 위치한 실세계 이미지(110) 중에서 합성용 객체 이미지(객체 B)가 위치하는 영역은 가려지게 되고, 합성용 객체 이미지(객체 B)를 제외한 실세계 객체 이미지(객체 A) 및 나머지 이미지인 실세계 배경 이미지는 모두 정상적으로 출력된다.
도 6 및 도 7의 (c)와 같이, 실시간 연속적으로 촬영되어 출력되는 실세계 이미지(110)와 합성용 객체 이미지(210-1) 또는 합성용 이미지(210-2)가 함께 디스플레이에(102)에 출력되고, 모바일 단말기(100)는 사진 촬영 이미지의 생성을 요청하는 명령이 입력되는 경우, 또는 자동으로 디스플레이(102)에 실시간 연속적으로 출력되는 실세계 이미지(110)와 합성용 객체 이미지(210-1) 또는 합성용 이미지(210-2)를 결합하여 사진 촬영 이미지(130-1, 130-2)를 생성한다. 결합되는 사진 촬영 이미지(130-1, 130-2)는 실세계 이미지(110)와 합성용 객체 이미지(객체 B)의 각각 어느 하나의 프레임 또는 복수의 프레임인 것을 특징으로 한다.
도 6 및 도 7의 실시예에서는 도 5의 (a)에 도시된 실세계 이미지(110)에 합성용 객체 이미지(210-1) 또는 합성용 객체 이미지를 포함하는 합성용 이미지(210-2)가 함께 출력되는 것을 설명하였다.
본 발명에서 용어 “합성용 객체 이미지를 상기 디스플레이에 출력”은 합성용 이미지를 디스플레이에 출력하여 결과적으로 합성용 객체 이미지가 출력되는 것을 포함한다.
한편, 합성용 객체 이미지(210-1) 또는 합성용 이미지(210-2)를 생성하는 방법은 다음 세 가지 형태로 수행될 수 있다. 첫 번째, 합성용 객체 이미지(210-1) 또는 합성용 이미지(210-2)를 생성하기 위해서 모바일 단말기(110)는 다른 실세계 장면을 촬영하여 합성용 실세계 이미지를 생성하고, 생성된 합성용 실세계 이미지에서 합성용 객체 이미지를 추출할 수 있다. 추출된 합성용 객체 이미지(객체 B)는 합성용 객체 이미지(객체 B)를 제외한 나머지 이미지가 제외된 합성용 객체 이미지(210-1)만으로 이루어질 수 있다. 또는 합성용 객체 이미지(객체 B)와 나머지 이미지에 투명 처리가 수행된 이미지를 포함하는 합성용 이미지(210-2)로 생성될 수 있다.
두 번째, 합성용 객체 이미지를 생성할 수 있는 합성용 실세계 이미지는 다른 모바일 단말기(미도시)에서 촬영되고, 모바일 단말기(100)가 다른 모바일 단말기(미도시)로부터 합성용 실세계 이미지를 수신하여 합성용 객체 이미지를 추출할 수 있다.
세 번째, 합성용 객체 이미지를 생성할 수 있는 합성용 실세계 이미지는 다른 모바일 단말기(미도시)에서 촬영된다. 다른 모바일 단말기(미도시)는 합성용 실세계 이미지에서 합성용 객체 이미지를 추출한다. 다른 모바일 단말기(미도시)는 추출한 합성용 객체 이미지를 모바일 단말기(100)에게 전송하고, 모바일 단말기(100)는 합성용 객체 이미지를 수신하여 사용할 수 있다.
도 8은 본 발명에 따라 실세계 객체 이미지와 투명 처리된 배경을 포함하는 실세계 이미지와 합성용 객체 이미지를 디스플레이에 출력하는 일실시예를 나타내는 예시도이다. 도 8의 (a)에 도시된 바와 같이, 모바일 단말기(100)에 구비된 디스플레이(102)에는 카메라 모듈(101)이 실세계 장면을 촬영하여 생성되는 실세계 이미지 중 실세계 객체 이미지와 투명 처리된 배경을 포함하는 실세계 이미지(112)가 출력된다. 도 8의 (a)에서 실세계 이미지(112)의 출력은 촬영되어 생성되는 실세계 이미지(110)에서 도 5의 (d)와 같이 실세계 객체 이미지(객체 A)를 제외한 나머지 이미지에 투명 처리를 수행하여 생성된 실세계 이미지(112)만을 디스플레이(102)에 출력함으로써 이루어진다.
또는, 다른 실시예에서 실세계 이미지(미도시)의 출력은 촬영되어 생성되는 실세계 이미지에서 실세계 객체 이미지(객체 A)를 제외한 나머지 이미지의 출력을 제외시킴으로써, 실세계 객체 이미지(객체 A)만을 디스플레이(102)에 출력함으로써 이루어진다.
이에 따라, 도 8의 (a)에 도시된 객체 A와 투명 처리가 수행된 나머지 이미지를 포함하는 실세계 이미지(112) 또는 객체 A 만을 포함하는 실세계 이미지(미도시)가 제 2 레이어에 배치되어 디스플레이(102)에 출력된다.
(b)에 도시된 바와 같이, 합성용 객체 이미지(210-1, B)는 객체 B의 이미지만 존재하는 이미지이다. 합성용 객체 이미지(210-1, B)는 객체 B에 대한 이미지 정보만을 포함하고 있을 뿐, 객체 B 이외의 배경 정보 등은 포함되지 않는다. 합성용 객체 이미지(210-1, 객체 B)는 제 1 레이어에 배치되어 디스플레이(102)에 출력된다.
(a)의 실세계 객체 이미지(객체 A) 만을 포함하는 실세계 이미지(112)와 (b)의 합성용 객체 이미지(210-1, 객체 B)가 함께 디스플레이(102)에 출력되는 경우, (c)와 같이 제 2 레이어에 제공된 실세계 이미지(110)와 제 2 레이어의 전면에 위치하는 제 1 레이어에 제공된 합성용 객체 이미지(객체 B)가 함께 포함되어 디스플레이(102)에 출력된다.
도 9는 본 발명에 따라 실세계 객체 이미지와 투명 처리된 배경을 포함하는 실세계 이미지와 합성용 객체 이미지를 디스플레이에 출력하는 다른 실시예를 나타내는 예시도이다. 도 9의 (a)에 도시된 바와 같이, 모바일 단말기(100)에 구비된 디스플레이(102)에는 카메라 모듈(101)이 실세계 장면을 촬영하여 생성되는 실세계 이미지 중 실세계 객체 이미지와 투명 처리된 배경을 포함하는 실세계 이미지(112)가 제 2 레이어에 배치되어 출력된다. 도 9의 (a)에서 실세계 이미지(112)의 출력은 촬영되어 생성되는 실세계 이미지에서 도 5의 (d)와 같이 객체 A를 제외한 나머지 이미지에 투명 처리를 수행하여 생성된 실세계 이미지(112)만을 디스플레이(102)에 출력함으로써 이루어진다.
또는, 다른 실시예의 실세계 이미지(미도시)의 출력은 촬영되어 생성되는 실세계 이미지에서 실세계 객체 이미지(객체 A)를 제외한 나머지 이미지의 출력을 제외하거나 나머지 이미지를 삭제하여 실세계 객체 이미지(객체 A) 만을 디스플레이(102)에 출력함으로써 이루어진다.
이에 따라, 도 9의 (a)에 도시된 객체 A와 투명 처리가 수행된 나머지 이미지로 이루어진 실세계 이미지(112) 또는 객체 A 만을 포함하는 실세계 이미지(미도시)가 제 2 레이어에 배치되어 디스플레이(102)에 출력된다.
(b)에 도시된 바와 같이, 합성용 이미지(210-2)는 합성용 객체 이미지(객체 B)와 나머지 이미지에 투명 처리를 수행한 이미지를 포함한다. 합성용 이미지(210-2, B)는 합성용 객체 이미지(객체 B)에 대한 이미지 정보와 투명 처리된 나머지 이미지에 대한 투명 처리 정보 등도 포함하고 있다. 합성용 이미지(210-2, B)는 제 1 레이어에 배치되어 디스플레이(102)에 출력된다.
(a)의 실세계 객체 이미지(객체 A)를 포함하는 실세계 이미지(112)와 (b)의 합성용 이미지(210-2, 객체 B)가 함께 디스플레이(102)에 출력되는 경우, (c)와 같이 제 2 레이어에 제공된 실세계 이미지(110)와 제 2 레이어의 전면에 위치하는 제 1 레이어에 제공된 합성용 이미지(210-2, 객체 B)가 함께 포함되어 디스플레이(102)에 출력된다.
도 8 및 도 9의 (c)와 같이, 실시간 연속적으로 촬영되어 출력되는 객체 A와 투명 처리가 수행된 나머지 이미지 또는 객체 A 만을 포함하는 실세계 이미지(112)와 합성용 객체 이미지(210-1) 또는 합성용 객체 이미지(객체 B)와 투명 처리된 나머지 이미지를 포함하는 합성용 이미지(210-2)와 함께 디스플레이에(102)에 출력되고, 모바일 단말기(100)는 사진 촬영 이미지의 생성을 요청하는 명령이 입력되는 경우, 또는 자동으로 디스플레이(102)에 실시간 연속적으로 출력되는 실세계 이미지(112)와 합성용 객체 이미지(210-1) 또는 합성용 객체 이미지(객체 B)와 투명 처리된 나머지 이미지를 포함하는 합성용 이미지(210-2)를 결합하여 사진 촬영 이미지(130-3, 130-4)를 생성한다. 결합되는 사진 촬영 이미지(130-1, 130-2)는 실세계 이미지(110)와 합성용 객체 이미지(210-1, 210-2)의 각각 어느 하나의 프레임 또는 복수의 프레임인 것을 특징으로 한다.
도 8 및 도 9의 실시예에서는 도 5의 (b)에 도시된 실세계 이미지(112)에 합성용 객체 이미지(210-1) 또는 합성용 이미지(210-2)가 함께 출력되는 것을 설명하였다.
본 명세서에서 용어 “합성용 이미지” 또는 “합성용 이미지(210-2)”는 합성용 객체 이미지를 포함하고 있으므로, “합성용 이미지(210-2)” 또는 “합성용 이미지(210-2, 객체 B)”로 표현할 수 있다.
S120 단계에서 제 1 레이어에 합성용 객체 이미지를 제공하고, 디스플레이(102)에 출력한 이후, 출력된 합성용 객체 이미지가 실세계 객체 이미지의 후면에 배치되는지를 선택받는다(S131).
S131 단계에서 사용자로부터 모바일 단말기(100)의 입력 모듈(미도시)을 통해 합성용 객체 이미지의 후면 배치 선택을 입력 받고, 프로세서(103)는 입력된 후면 배치 선택에 따라 합성용 객체 이미지를 실세계 객체 이미지의 후면에 배치한다.
이때, S131 단계에서 후면 배치가 선택되기 이전 또는 이후에 디스플레이(102)에 출력된 실세계 이미지에서 후면 배치의 기준이 되는 실세계 객체 이미지가 선택 및 추출되는 과정이 수행된다.
도 5의 (a)를 참조하여 설명하면, 실세계 이미지(110)에서 실세계 객체 이미지(객체 A)가 추출되기 위해서는 실세계 이미지(110) 내에 존재하는 하나 이상의 객체가 인식되어야 한다. 실세계 이미지(110)에서 객체 A가 존재할 수 있으나, 객체가 둘 이상 존재하는 경우, 실세계 이미지(110)로부터 추출될 객체 A가 선택되어야 한다. 또는 두 개 이상의 객체가 선택될 수 있다.
실세계 이미지(110)에서 선택되는 객체는 프로세서(103)에 의해 객체가 자동 인식되어 선택되거나, 사용자에 의해 지정된 객체를 선택할 수 있다.
실세계 이미지(110)에서 객체가 자동으로 선택되는 방법은, 영상처리(image processing) 방법 중 객체 인식 방법을 이용할 수 있다. 객체 인식은 실세계 이미지(110) 내에서 각 픽셀들의 특징점을 추출한다. 추출된 특징점 집합을 이용하여 객체의 윤곽을 판단한다. 판단된 객체의 윤곽에 대응하는 특징점들의 집합을 객체로 인식하여 추출하는 방법이 있다.
또한, 추출하기 위한 객체가 인물일 경우에는 얼굴 인식을 통해 인물의 윤곽을 추출하고, 추출된 인물 윤곽의 이미지를 인물 객체로 인식하여 추출하는 방법이 있다.
또한, 이미지 내에서 자동으로 객체를 인식하는 방법은 공지된 영상처리 알고리즘 중 어떠한 것을 사용할 수 있다.
실세계 이미지(110)에서 실세계 객체 이미지(111)를 추출하기 위해 사용자에 의해 객체가 선택되는 방법은 다음과 같다. 사용자는 모바일 단말기(100)의 디스플레이(102)에 출력된 실세계 이미지(110) 내에서 선택하고자 하는 객체를 터치 등의 입력을 통해 선택한다. 프로세서(103)는 선택된 객체를 분석하여 객체의 윤곽선을 인식한다. 다음으로, 인식된 육관석에 대응하는 객체를 실세계 이미지(110)로부터 추출할 수 있다.
이때, 사용자가 객체를 선택할 때, 디스플레이(102)에 출력된 객체의 위치를 터치함으로써 터치된 위치의 객체가 선택된다. 또는 사용자로부터 선택하고자 하는 객체의 윤곽선을 드래그 앤 드롭(drag and drop) 방식의 연속적인 터치 입력을 이용하여 객체를 선택할 수 있다.
프로세서(103)는 선택된 객체 또는 객체의 윤곽선을 이용하여 객체를 인식하고, 인식된 객체를 실세계 이미지(110)로부터 추출할 수 있다.
또한, 사용자에 의해 실세계 이미지(110) 내에서 실세계 객체 이미지가 선택되는 방법은 이외의 방법을 사용할 수 있다.
또한, S131 단계에서 후면 배치가 선택되기 이전 또는 이후에 디스플레이(102)에 출력된 실세계 객체 이미지 및 합성용 객체 이미지의 크기 또는 위치가 조정될 수 있다.
또한, 도 8 또는 도 9에 도시된 배경 이미지에 투명 처리가 수행된 실세계 객체 이미지 또는 배경 이미지의 출력이 제외된 실세계 객체 이미지 또는 배경 이미지가 삭제된 실세계 객체 이미지 중 어느 하나와 합성용 객체 이미지가 출력되는 경우, S131 단계의 후면 배치가 선택되기 이전 또는 이후에 사진 촬영 이미지에 포함될 배경 이미지를 선택할 수 있다. 선택된 배경 이미지는 제 3 레이어에 배치되어 디스플레이(102)에 출력된다. 디스플레이(102)에 출력된 선택된 배경 이미지는 사진 촬영 이미지에 포함된다.
도 10은 본 발명에 따른 모바일 단말기의 움직임을 이용하여 실세계 객체 이미지의 위치를 조정하기 위한 일실시예를 나타내는 예시도, 도 11은 본 발명에 따른 모바일 단말기의 움직임을 이용하여 위치 조정된 실세계 객체 이미지와 합성용 객체 이미지의 중첩을 나타내는 예시도이다.
도 10 및 도 11에 도시된 바와 같이, 합성용 객체 이미지(객체 B)가 배치된 실세계 이미지(121)에서 실세계 객체 이미지(객체 A)가 특정한 위치에 있는 경우, 사용자는 모바일 단말기(100)를 회전(카메라 앵글의 변경)하여 실세계 객체 이미지(객체 A)를 실세계 이미지 내의 특정 위치로 배치시킬 수 있다.
즉, 도 10의 (a)와 같이, 모바일 단말기(100)의 디스플레이(102)에 합성용 객체 이미지(객체 B)와 실세계 객체 이미지(객체 A)를 포함하는 실세계 이미지(110)가 출력된다. 실세계 이미지(110) 내의 실세계 객체 이미지(객체 A)가 도로의 중심에 위치할 때, 사용자는 모바일 단말기(100)에 구비된 카메라 모듈(101)의 앵글을 좌측으로 이동시킬 수 있다. 좌측으로 이동한 앵글에 따라 디스플레이(102)에 출력되는 실세계 이미지(110) 내의 실세계 객체 이미지(객체 A) 및 배경 이미지는 도 10의 (b)에서 보이는 바와 같이, 우측으로 이동한 것과 같은 효과를 나타낸다. 합성용 객체 이미지(객체 B)의 움직임은 없다. 따라서 실세계 객체 이미지(객체 A)가 우측으로 이동되어 출력되는 것은 실세계 이미지(110) 내에 배치된 합성용 객체 이미지(객체 B)와의 거리가 이격된 것과 같은 효과를 나타낸다.
한편, 사용자가 모바일 단말기(100)에 구비된 카메라 모듈(101)의 앵글을 우측으로 이동시킬 수 있다. 우측으로 이동한 앵글에 따라 디스플레이(102)에 출력되는 실세계 이미지(110) 내의 실세계 객체 이미지(객체 A) 및 배경 이미지는 도 10의 (c)에서 보이는 바와 같이, 좌측으로 이동한 것과 같은 효과를 나타낸다. 실세계 객체 이미지(객체 A)가 좌측으로 이동되어 출력되는 것은 실세계 이미지(110) 내에 배치된 합성용 객체 이미지(객체 B)와의 거리가 인접된 것과 같은 효과를 나타낸다.
모바일 단말기(100)의 카메라 앵글의 변경에 따라 실세계 객체 이미지(객체 A)와 합성용 객체 이미지(객체 B)가 중첩되는 실시예는 도 11에 도시된 바와 같다. 디스플레이(102)에 출력된 실세계 객체 이미지(객체 A)와 합성용 객체 이미지(객체 B)를 중첩시키기 위한 명령이 수신되는 경우, 프로세서(103)는 어느 하나의 객체 이미지를 다른 하나의 객체 이미지보다 전면에 위치시키거나 후면에 위치시킬 수 있다.
S131 단계에서, 모바일 단말기(100)에 합성용 객체 이미지(객체 B)가 실세계 객체 이미지(객체 A)의 후면에 중첩되어 출력되도록 후면 배치 선택이 입력되는 경우, 프로세서(103)는 도 11의 (a)에 도시된 바와 같이 제 1 레이어에 제공된 합성용 객체 이미지(객체 B)가 제 2 레이어에 제공된 실세계 객체 이미지(객체 A)의 후면에 중첩되도록 배치한다(S132).
이후, S132 단계에서 실세계 객체 이미지와 합성용 객체 이미지의 배치가 완료되고, 실세계 객체 이미지와 합성용 객체 이미지의 크기 및 위치의 조정도 완료된 경우, 모바일 단말기(100)는 디스플레이(102)에 출력되는 합성용 객체 이미지와 실세계 객체 이미지를 포함하여 사진 촬영 이미지를 생성한다(S140).
도 11의 (a)는 제 2 레이어에 배치된 실세계 이미지(143)에 포함된 실세계 객체 이미지(객체 A)와 제 1 레이어에 배치된 합성용 객체 이미지(객체 B)가 서로 중첩되면서 합성용 객체 이미지(객체 B)가 실세계 객체 이미지(객체 A)의 후면에 배치되는 실시예이다.
실세계 이미지(143)가 출력되는 모바일 단말기(100)의 디스플레이(102)에 합성용 객체 이미지(객체 B)가 출력된다. 모바일 단말기(100)가 회전하면 카메라 앵글이 변경되어 합성용 객체 이미지(객체 B)와 실세계 객체 이미지(객체 A)가 서로 중첩될 수 있다. 실세계 객체 이미지(객체 A)의 후면에 합성용 객체 이미지(객체 B)가 위치되도록 선택된 경우, 프로세서(103)는 제 1 레이어에 제공된 합성용 객체 이미지(객체 B)를 제 2 레이어에 제공된 실세계 객체 이미지(객체 A)의 후면에 위치하도록 배치한다.
또는, 먼저 실세계 객체 이미지(객체 A)의 후면에 합성용 객체 이미지(객체 B)가 위치되도록 선택하여 제 1 레이어에 제공된 합성용 객체 이미지(객체 B)를 제 2 레이어에 제공된 실세계 객체 이미지(객체 A)의 후면에 위치하도록 배치한다. 다음으로, 카메라 앵글을 변경하여 합성용 객체 이미지(객체 B)와 실세계 객체 이미지(객체 A)가 서로 중첩되도록 할 수 있다.
도 8 또는 도 9의 (c)와 같이, 실세계 객체 이미지(객체 A)와 합성용 객체 이미지(객체 B)를 중첩하여 디스플레이(102)에 출력하는 경우, 프로세서(103)는 실세계 이미지에 포함된 실세계 배경 이미지를 제 3 레이어에 제공하여 출력할 수 있다. 또는 실세계 배경 이미지를 포함하지 않고, 메모리(104)에 저장된 다른 배경 이미지를 제 3 레이어에 제공하여, 디스플레이(102)에 출력할 수 있다. 또는 실세계 배경 이미지를 포함하지 않고, 합성용 객체 이미지의 배경 이미지를 제 3 레이어에 제공하여 디스플레이(102)에 출력할 수 있다.
제 3 레이어에 제공되는 실세계 배경 이미지, 메모리(104)에 저장된 다른 배경 이미지 또는 합성용 객체 이미지의 배경 이미지는 디스플레이(102)에 출력되고, 생성되는 사진 촬영 이미지에 포함된다.
이때, 합성용 객체 이미지의 배경 이미지는 합성용 객체 이미지를 생성하기 위해 촬영된 실세계 이미지에서 합성용 객체 이미지가 추출되고 나머지 이미지를 배경 이미지로 설정하여 저장된 이미지이다. 또는 합성용 객체 이미지는 그래픽, 애니메이션 등으로 생성될 수 있다.
만약, S131 단계에서, 모바일 단말기(100)에 합성용 객체 이미지(객체 B)가 실세계 객체 이미지(객체 A)의 후면에 중첩되어 출력되도록 후면 배치 선택이 입력되지 않는 경우, 프로세서(103)는 도 11의 (b)에 도시된 바와 같이, 제 2 레이어에 제공된 실세계 객체 이미지(객체 A)의 전면에 위치한 제 2 레이어에 제공된 합성용 객체 이미지(객체 B)를 이용하여 사진 촬영 이미지를 생성한다(S140). 사진 촬영 이미지를 생성하기 이전에 실세계 객체 이미지와 합성용 객체 이미지의 크기 및 위치의 조정이 수행될 수 있다.
도 11의 (b)는 실세계 이미지(144)에 포함된 실세계 객체 이미지(객체 A)와 합성용 객체 이미지(객체 B)가 서로 중첩되면서 합성용 객체 이미지(객체 B)가 실세계 객체 이미지(객체 A)의 전면에 배치되는 실시예이다.
실세계 이미지(144)가 출력되는 모바일 단말기(100)의 디스플레이(102)에 합성용 객체 이미지(객체 B)가 출력된다. 모바일 단말기(100)가 회전하면 카메라 앵글이 변경되어 합성용 객체 이미지(객체 B)와 실세계 객체 이미지(객체 A)가 서로 중첩될 수 있다. 프로세서(103)는 제 1 레이어에 제공된 합성용 객체 이미지(객체 B)가 제 2 레이어에 제공된 실세계 객체 이미지(객체 A)의 전면에 위치하고 있는 경우, 해당 배치된 상태에서 사진 촬영 이미지를 생성할 수 있다.
만약 제 2 레이어에 제공된 실세계 객체 이미지(객체 A)가 합성용 객체 이미지(객체 B)의 후면에 위치한다면, 각각의 레이어에 제공된 객체 이미지의 배치를 변경하여 합성용 객체 이미지(객체 B)가 실세계 객체 이미지(객체 A)의 전면에 위치하도록 재배치한다.
각 객체 이미지의 배치 변경은 사용자에 의해 모바일 단말기(100)에 입력된 명령에 따라 수행된다.
도 12는 본 발명에 따른 실세계 객체 이미지와 합성용 객체 이미지가 중첩되어 배치되는 일실시예를 나타내는 예시도이다. 도 12의 (a)에 도시된 바와 같이, 제 2 레이어에 제공된 실세계 이미지(112)의 후면에 제 1 레이어에 제공된 합성용 객체 이미지(210)가 중첩될 수 있도록 배치하는 경우, (b)에 도시된 바와 같이, 합성용 객체 이미지(210)의 객체 B가 실세계 이미지(112)의 객체 A의 후면에 위치하도록 할 수 있다. 이 경우에 생성되는 사진 촬영 이미지는 객체 B가 객체 A의 뒤쪽에 위치하여 함께 사진 촬영한 것과 같은 효과를 제공할 수 있다.
도 12의 (c)에 도시된 바와 같이, 제 2 레이어에 제공된 실세계 이미지(112)의 전면에 제 1 레이어에 제공된 합성용 객체 이미지(210)가 중첩될 수 있도록 배치하는 경우, (d)에 도시된 바와 같이, 합성용 객체 이미지(210)의 객체 B가 실세계 이미지(112)의 객체 A의 전면에 위치하도록 할 수 있다. 이 경우에 생성되는 사진 촬영 이미지는 객체 B가 객체 A의 앞쪽에 위치하여 함께 사진 촬영한 것과 같은 효과를 제공할 수 있다.
본 발명에서는 각각의 객체 A를 포함하는 실세계 객체 이미지와 객체 B를 포함하는 합성용 객체 이미지를 하나의 사진 촬영 이미지로 합성하면서 각 객체가 배치되는 위치가 중첩되도록 할 때, 배치되는 실세계 객체 이미지 및 합성용 객체 이미지의 크기 및 위치를 조정할 수 있다.
실세계 객체 이미지는 모바일 단말기(100)의 카메라 모듈(101)을 통해 촬영되는 실세계 장면을 통해 생성되며, 카메라 모듈(101)의 줌(zoom) 기능의 제어를 통해 생성되는 실세계 이미지를 확대 또는 축소함으로써, 실세계 객체 이미지의 크기를 제어할 수 있다.
실세계 객체 이미지의 위치 조정은 사용자 또는 모바일 단말기(100)의 움직임을 제어하는 제어장치(미도시)를 통해 카메라 모듈(101)의 카메라 앵글을 변경하고, 이를 통해 실세계 장면에 포함된 실세계 객체 이미지에 해당하는 인물의 위치가 조정되면, 디스플레이(102)에 출력되는 실세계 이미지 내에서 실세계 객체 이미지의 위치가 조정될 수 있다.
합성용 객체 이미지는 메모리(104)에 저장된 이미지가 디스플레이(102)에 출력되는 것으로, 디스플레이(102)에 터치 모듈이 포함된 경우, 디스플레이(102)에 터치 또는 드래그 입력을 수행하여 출력된 합성용 객체 이미지의 위치를 변경시킬 수 있다.
합성용 객체 이미지의 확대 및 축소는 디스플레이(102)에 터치 모듈이 포함된 경우, 일반적으로 모바일 단말기(100)에서 사용되는 동시에 터치된 두 점 간의 거리의 변동에 따라 이루어진다. 예를 들어, 디스플레이(102)에 입력된 두 점 간의 거리가 멀어지는 경우, 프로세서(103)는 출력된 합성용 객체 이미지를 확대시킨다. 만약, 두 점 간의 거리가 가까워지는 경우, 프로세서(103)는 출력된 합성용 객체 이미지를 축소시킨다.
합성용 객체 이미지의 위치 및 크기 조정은 디스플레이(102)에 구비된 터치 모듈을 통해 수행되는 것으로 기재하였으나, 모바일 단말기(100)에 구비된 별도의 입력 모듈(미도시)을 통해서도 합성용 객체 이미지의 위치 및 크기 조정에 대한 명령을 입력할 수 있다.
도 13은 본 발명에 따른 모바일 단말기에서 촬영되는 실세계 인물의 움직임을 이용하여 실세계 객체 이미지의 위치를 조정하기 위한 일실시예를 나타내는 예시도, 도 14는 본 발명에 따른 실세계 인물의 움직임을 이용하여 위치 조정된 실세계 객체 이미지와 합성용 객체 이미지의 중첩을 나타내는 예시도이다.
도 13 및 도 14에 도시된 바와 같이, 합성용 객체 이미지(객체 B)가 배치된 실세계 이미지(110)에서 모바일 단말기(100)의 카메라 앵글이 고정된 경우, 객체 A에 대응하는 실세계의 인물(510)이 실세계에서 이동하면, 디스플레이(102)에서 출력되는 실세계 객체 이미지(객체 A)가 디스플레이(102)에 함께 출력된 합성용 객체 이미지(객체 B)의 주변으로 이동할 수 있다.
즉, 최초 출력되는 실세계 이미지(110)에서 실세계 객체 이미지(객체 A)와 합성용 객체 이미지(객체 B)가 (a)와 같이 출력된다. 이때, 도 4와 같이 실세계 장면에서 실세계 주변 배경(520)의 중심부에 있는 실세계 인물(510)이 인물의 좌측으로 이동하는 경우, 도 13의 (b)와 같이, 실세계 인물(510)에 해당하는 실세계 이미지(151) 내의 객체 A는 실세계 이미지 내에서 우측으로 이동되어 디스플레이(102)의 좌측편에 출력된 합성용 객체 이미지(객체 B)로부터 이격되도록 출력된다.
또한, (c)와 같이, 객체 A에 해당하는 실세계 인물(510)이 실세계에서 좌측으로 이동하는 경우, 실세계 이미지(152) 내의 객체 A는 출력된 합성용 객체 이미지(객체 B)에 인접하게 출력된다.
실세계에 위치한 실세계 인물(510)의 이동에 따라 실세계 객체 이미지(객체 A)와 합성용 객체 이미지(객체 B)가 중첩되는 실시예는 도 14에 도시된 바와 같다. 디스플레이(102)에 출력된 실세계 객체 이미지(객체 A)와 합성용 객체 이미지(객체 B)가 중첩되는 경우, 어느 하나의 객체 이미지를 다른 하나의 객체 이미지보다 전면에 위치시키거나 후면에 위치시킬 수 있다.
도 14의 (a)는 실세계 이미지(153)에 포함된 실세계 객체 이미지(객체 A)와 합성용 객체 이미지(객체 B)가 서로 중첩되면서 합성용 객체 이미지(객체 B)가 실세계 객체 이미지(객체 A)의 후면에 배치되는 실시예이다.
모바일 단말기(100)의 디스플레이(102)에 실세계 객체 이미지(객체 A)를 포함하는 실세계 이미지(153)와 합성용 객체 이미지(객체 B)가 출력된다. 실세계 객체 이미지(객체 A)에 해당하는 실세계 인물(510)이 이동하여, 합성용 객체 이미지(객체 B)와 실세계 객체 이미지(객체 A)가 서로 중첩될 수 있다. 실세계 객체 이미지(객체 A)의 후면에 합성용 객체 이미지(객체 B)가 위치되도록 선택된 경우, 프로세서(103)는 제 1 레이어에 제공된 합성용 객체 이미지(객체 B)를 제 2 레이어에 제공된 실세계 객체 이미지(객체 A)의 후면에 위치하도록 배치한다.
또는, 먼저 실세계 객체 이미지(객체 A)의 후면에 합성용 객체 이미지(객체 B)가 위치되도록 선택하여 제 1 레이어에 제공된 합성용 객체 이미지(객체 B)를 제 2 레이어에 제공된 실세계 객체 이미지(객체 A)의 후면에 위치하도록 배치한다. 다음으로, 실세계 인물이 이동하여 합성용 객체 이미지(객체 B)와 실세계 객체 이미지(객체 A)가 서로 중첩되도록 할 수 있다.
도 8 또는 도 9의 (c)와 같이, 실세계 객체 이미지(객체 A)와 합성용 객체 이미지(객체 B)를 중첩하여 디스플레이(102)에 출력하는 경우, 프로세서(103)는 실세계 이미지에 포함된 실세계 배경 이미지를 제 3 레이어에 제공하여 출력할 수 있다. 또는 실세계 배경 이미지를 포함하지 않고, 메모리(104)에 저장된 다른 배경 이미지를 제 3 레이어에 제공하여, 디스플레이(102)에 출력할 수 있다. 또는 실세계 배경 이미지를 포함하지 않고, 합성용 객체 이미지의 합성용 배경 이미지를 제 3 레이어 또는 제 4 레이어에 제공하여 디스플레이(102)에 출력할 수 있다.
도 14의 (b)는 실세계 이미지(154)에 포함된 실세계 객체 이미지(객체 A)와 합성용 객체 이미지(객체 B)가 서로 중첩되면서 합성용 객체 이미지(객체 B)가 실세계 객체 이미지(객체 A)의 전면에 배치되는 실시예이다.
모바일 단말기(100)의 디스플레이(102)에 실세계 객체 이미지(객체 A)를 포함하는 실세계 이미지(154)와 합성용 객체 이미지(객체 B)가 출력된다. 실세계 장면에서 실세계 인물(510)이 이동하여 합성용 객체 이미지(객체 B)와 실세계 객체 이미지(객체 A)가 서로 중첩될 수 있다. 제 1 레이어에 제공된 합성용 객체 이미지(객체 B)가 제 2 레이어에 제공된 실세계 객체 이미지(객체 A)의 전면에 위치하고 있는 경우, 해당 배치된 상태에서 사진 촬영 이미지를 생성할 수 있다.
만약 제 2 레이어에 제공된 실세계 객체 이미지(객체 A)가 합성용 객체 이미지(객체 B)의 후면에 위치한다면, 각각의 레이어에 제공된 객체 이미지의 배치를 변경하여 합성용 객체 이미지(객체 B)가 실세계 객체 이미지(객체 A)의 전면에 위치하도록 재배치한다.
도 15는 본 발명에 따른 모바일 단말기에서 합성용 객체 이미지의 위치를 조정하기 위한 일실시예를 나타내는 예시도, 도 16은 본 발명에 따른 모바일 단말기에서 위치 조정된 합성용 객체 이미지와 실세계 객체 이미지의 중첩을 나타내는 예시도이다.
도 15 및 도 16에 도시된 바와 같이, 합성용 객체 이미지(객체 B)가 배치된 실세계 이미지(110)에서 모바일 단말기(100)의 카메라 앵글이 고정된 경우, 배치된 합성용 객체 이미지(객체 B)를 출력된 실세계 객체 이미지(객체 A)의 주변으로 이동시킬 수 있다. 도 4의 실세계 장면에서 실세계 주변 배경(520)의 중심부에 위치한 실세계 인물(510)이 고정되어 있는 경우, 도 15의 (a)와 같이, 실세계 이미지(110)가 출력된다.
이때, 도 15의 (b)와 같이, 합성용 객체 이미지(객체 B)를 실세계 이미지(161) 내에서 실세계 객체 이미지(객체 A)의 우측으로 이동시키거나, (c)와 같이, 실세계 이미지(162) 내에서 합성용 객체 이미지(객체 B)를 실세계 객체 이미지(객체 A)의 좌측으로 이동시킬 수 있다.
디스플레이(102)에 출력되는 합성용 객체 이미지(객체 B)의 이동은 도 12에서 설명된 바와 같이, 디스플레이(102)에 터치 모듈이 포함된 경우, 디스플레이(102)에 터치 또는 드래그 입력을 수행하여 출력된 합성용 객체 이미지의 위치를 변경시킬 수 있다. 또는 모바일 단말기(100)에 구비된 입력 모듈(미도시)을 이용하여 위치를 변경시킬 수 있다.
합성용 객체 이미지(객체 B)의 위치 이동에 따라 실세계 객체 이미지(객체 A)와 합성용 객체 이미지(객체 B)가 중첩되는 실시예는 도 16에 도시된 바와 같다.
디스플레이(102)에 출력된 합성용 객체 이미지(객체 B)의 위치 이동에 따라 실세계 객체 이미지(객체 A)와 합성용 객체 이미지(객체 B)가 중첩되는 경우, 어느 하나의 객체 이미지를 다른 하나의 객체 이미지보다 전면에 위치시키거나 후면에 위치시킬 수 있다.
도 16의 (a)는 실세계 이미지(163)에 포함된 실세계 객체 이미지(객체 A)와 합성용 객체 이미지(객체 B)가 서로 중첩되면서 합성용 객체 이미지(객체 B)가 실세계 객체 이미지(객체 A)의 후면에 배치되는 실시예이다.
모바일 단말기(100)의 디스플레이(102)에 실세계 객체 이미지(객체 A)를 포함하는 실세계 이미지(163)와 합성용 객체 이미지(객체 B)가 출력되고, 합성용 객체 이미지(객체 B)를 이동시킴에 따라 실세계 객체 이미지(객체 A)와 서로 중첩되고, 실세계 객체 이미지(객체 A)의 후면에 합성용 객체 이미지(객체 B)가 위치되도록 선택된 경우, 프로세서(103)는 제 1 레이어에 제공된 합성용 객체 이미지(객체 B)를 제 2 레이어에 제공된 실세계 객체 이미지(객체 A)의 후면에 위치하도록 배치한다.
또는, 먼저 실세계 객체 이미지(객체 A)의 후면에 합성용 객체 이미지(객체 B)가 위치되도록 선택하여 제 1 레이어에 제공된 합성용 객체 이미지(객체 B)를 제 2 레이어에 제공된 실세계 객체 이미지(객체 A)의 후면에 위치하도록 배치한다. 다음으로, 합성용 객체 이미지(객체 B)를 이동시켜 실세계 객체 이미지(객체 A)와 서로 중첩되도록 할 수 있다.
도 8 또는 도 9의 (c)와 같이, 실세계 객체 이미지(객체 A)와 합성용 객체 이미지(객체 B)를 중첩하여 디스플레이(102)에 출력하는 경우, 프로세서(103)는 실세계 이미지에 포함된 실세계 배경 이미지를 제 3 레이어에 제공하여 출력할 수 있다. 또는, 실세계 배경 이미지를 포함하지 않고, 메모리(104)에 저장된 다른 배경 이미지를 제 3 레이어에 제공하여 디스플레이(102)에 출력할 수 있다. 또는 실세계 배경 이미지를 포함하지 않고, 합성용 객체 이미지의 합성용 배경 이미지를 제 3 레이어 또는 제 4 레이어에 제공하여 디스플레이(102)에 출력한다.
도 16의 (b)는 실세계 이미지(164)에 포함된 실세계 객체 이미지(객체 A)와 합성용 객체 이미지(객체 B)가 서로 중첩되면서 합성용 객체 이미지(객체 B)가 실세계 객체 이미지(객체 A)의 전면에 배치되는 실시예이다.
모바일 단말기(100)의 디스플레이(102)에 실세계 객체 이미지(객체 A)를 포함하는 실세계 이미지(164)와 합성용 객체 이미지(객체 B)가 출력된다. 합성용 객체 이미지(객체 B)를 이동시켜 실세계 객체 이미지(객체 A)와 서로 중첩될 수 있다. 제 1 레이어에 제공된 합성용 객체 이미지(객체 B)가 제 2 레이어에 제공된 실세계 객체 이미지(객체 A)의 전면에 위치하고 있는 경우, 해당 배치된 상태에서 사진 촬영 이미지를 생성할 수 있다.
만약 제 2 레이어에 제공된 실세계 객체 이미지(객체 A)가 합성용 객체 이미지(객체 B)의 후면에 위치한다면, 각각의 레이어에 제공된 객체 이미지의 배치를 변경하여 합성용 객체 이미지(객체 B)가 실세계 객체 이미지(객체 A)의 전면에 위치하도록 재배치한다.
이상 도 10 내지 도 16에서 설명된 바와 같이, 모바일 단말기(100)의 디스플레이(102)에 실시간 연속적으로 출력되는 실세계 객체 이미지를 포함하는 실세계 이미지와 실세계 이미지와 함께 출력되는 합성용 객체 이미지를 이용하여 사진 촬영 이미지를 생성할 수 있다. 이때, 모바일 단말기(100)의 카메라 앵글의 변경, 실세계 객체 이미지에 해당하는 실세계 인물의 이동 또는 실세계 이미지와 함께 출력된 합성용 객체 이미지의 위치 이동에 따라 각기 다른 위치에서의 실세계 객체 이미지와 합성용 객체 이미지를 이용하여 사진 촬영 이미지를 생성할 수 있다.
도 15의 (c)는 합성용 객체 이미지(객체 B)를 실세계 객체 이미지(객체 A)의 좌측으로 이동시키면서 화면 아래로 추가 이동을 수행한 결과 화면이며, 도 16의 (a)는 합성용 객체 이미지(객체 B)를 실세계 객체 이미지(객체 A)의 후면에 배치하면서 원근감을 부각할 수 있도록 화면 위로 추가 이동을 수행한 결과 화면이다.
또는 도 11의 (a) 및 (b)에서와 같이 실세계 객체 이미지(객체 A)가 합성용 객체 이미지(객체 B)의 전면 또는 후면 중 어느 하나의 위치에 배치되는 것으로 결정되는 경우, 실세계 인물이 실세계에서 이동을 통해 합성용 객체 이미지(객체 B)의 전면 또는 후면에 위치함에 있어서 입체감 또는 원근감을 부각하도록 이동할 수 있다.
각 실시예에서 도시되지 않았으나, 실세계 객체 이미지와 합성용 객체 이미지가 중첩되어 출력되는 경우, 어느 하나의 객체 이미지가 전면에 배치되고 다른 하나의 이미지가 후면에 배치되는 경우, 각각의 배치 형태에 따라 입체감 또는 원근감이 부각될 수 있도록 각각의 객체 이미지를 확대 또는 축소할 수 있다.
S140 단계 이후에, 본 발명의 모바일 단말기(100)는 실세계 객체 이미지(객체 A)와 합성용 객체 이미지(객체 B)를 이용하여 생성된 사진 촬영 이미지가 다른 모바일 단말기(미도시)에서 합성용 객체 이미지로 재사용될 수 있도록 사진 촬영 이미지를 다른 모바일 단말기로 전송한다.
사진 촬영 이미지를 수신한 다른 모바일 단말기는 수신된 사진 촬영 이미지를 합성용 객체 이미지로 재사용할 수 있다. 다른 모바일 단말기는 출력되는 합성용 객체 이미지인 사진 촬영 이미지와 다른 모바일 단말기의 카메라 모듈이 실세계 장면을 촬영하여 생성하는 실세계 이미지를 이용하여 다른 사진 촬영 이미지를 생성할 수 있다.
만약, 모바일 단말기(100)에서 다른 모바일 단말기로 전송되는 사진 촬영 이미지에 배경 이미지가 포함된 경우, 다른 모바일 단말기는 배경 이미지를 제외한 사진 촬영 이미지를 합성용 객체 이미지로 사용한다.
또한, 모바일 단말기(100)가 합성용 객체 이미지를 다른 모바일 단말기로부터 수신하여 사진 촬영 이미지를 생성한 경우, 모바일 단말기(100)는 합성용 객체 이미지를 제공한 다른 모바일 단말기에게 생성된 사진 촬영 이미지를 전송함으로써, 생성된 사진 촬영 이미지를 다른 모바일 단말기의 사용자가 확인할 수 있도록 한다.
또한, 모바일 단말기(100)는 복수의 다른 모바일 단말기를 통해 순차적으로 생성된 사진 촬영 이미지가 합성용 객체 이미지로 사용되어 촬영된 최종 사진 촬영 이미지를 생성하는 경우, 각각의 사진 촬영 이미지를 제공한 복수의 다른 모바일 단말기 각각에 생성한 최종 사진 촬영 이미지를 전송하여 각각의 다른 모바일 단말기의 사용자가 최종 사진 촬영 이미지를 확인할 수 있도록 한다.
본 명세서에서의 발명의 설명은 바람직한 실시예를 설명하는 것으로, 본 발명은 이러한 실시예에 한정되지 않는다. 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 이상의 실시예에 대한 다양한 변경과 수정이 가능하고, 본 발명의 기술적 사상은 이러한 다양한 변경과 수정을 모두 포함한다.
100 : 모바일 단말기 101 : 카메라 모듈
102 : 디스플레이 103 : 프로세서
104 : 메모리 105 : 통신모듈
110, 112, 141 ~ 144, 151 ~ 154, 161 ~ 164 : 실세계 이미지
113 : 실세계 배경 이미지
130-1, 130-2, 130-3, 130-4 : 사진 촬영 이미지
210-1 : 합성용 객체 이미지 210-2 : 합성용 이미지
510 : 실세계 인물 520 : 실세계 배경
A : 객체 A B : 객체 B
102 : 디스플레이 103 : 프로세서
104 : 메모리 105 : 통신모듈
110, 112, 141 ~ 144, 151 ~ 154, 161 ~ 164 : 실세계 이미지
113 : 실세계 배경 이미지
130-1, 130-2, 130-3, 130-4 : 사진 촬영 이미지
210-1 : 합성용 객체 이미지 210-2 : 합성용 이미지
510 : 실세계 인물 520 : 실세계 배경
A : 객체 A B : 객체 B
Claims (26)
- 카메라 모듈, 디스플레이, 통신모듈, 프로세서 및 메모리를 포함하는 모바일 단말기에서 상기 프로세서가 다음의 단계를 수행하여 사진 촬영 이미지를 생성하는 방법:
실세계 장면을 상기 카메라 모듈이 실시간 연속적으로 촬영하여 생성되는 실세계 객체 이미지가 포함된 실세계 이미지를 상기 디스플레이에서 실시간 연속적으로 출력하는 단계;
상기 메모리에 저장된 합성용 객체 이미지를 상기 디스플레이에 출력하는 단계;
상기 합성용 객체 이미지와 상기 실세계 객체 이미지를 상기 디스플레이에 배치하는 단계로서, 상기 합성용 객체 이미지가 상기 실세계 객체 이미지의 후면에 중첩되어 배치되도록 선택되는 경우, 실시간 연속적으로 출력되는 상기 실세계 객체 이미지의 후면에 상기 합성용 객체 이미지가 중첩되어 배치되도록 하는 것을 포함하며; 및
상기 디스플레이에 배치된 상기 합성용 객체 이미지와 상기 실세계 객체 이미지가 포함되는 사진 촬영 이미지를 생성하는 단계
를 수행하되, 상기 합성용 객체 이미지를 제 1 레이어(layer)에 위치하도록 제공하며, 상기 실세계 객체 이미지를 제 2 레이어(layer)에 위치하도록 제공하고,
상기 배치하는 단계에서,
상기 제 1 레이어 및 제 2 레이어에 위치하는 상기 합성용 객체 이미지와 상기 실세계 객체 이미지를 상기 디스플레이에 배치하되, 상기 합성용 객체 이미지가 상기 실세계 객체 이미지의 후면에 위치하는 명령이 수신되는 경우, 상기 제 1 레이어를 상기 제 2 레이어의 후면에 위치시켜 상기 실세계 객체 이미지의 후면에 상기 합성용 객체 이미지가 중첩되어 배치되도록 하는 방법. - 제 1 항에 있어서, 상기 실세계 이미지를 상기 디스플레이에 출력하는 단계 이후에,
상기 합성용 객체 이미지와 중첩되어 배치되기 위한 상기 실세계 객체 이미지가 상기 실세계 이미지에서 선택되는 단계;를 더 포함하여 수행되는 것을 특징으로 하는 방법. - 삭제
- 제 1 항에 있어서,
상기 실세계 이미지에서 상기 실세계 객체 이미지 만을 추출하고, 추출된 상기 실세계 객체 이미지를 상기 제 2 레이어에 위치시키는 것을 특징으로 하는 방법. - 제 1 항에 있어서,
상기 실세계 이미지에서 상기 실세계 객체 이미지를 제외한 나머지 이미지에 투명 처리하고, 상기 실세계 객체 이미지 및 투명 처리된 이미지를 상기 제 2 레이어에 위치시키는 것을 특징으로 하는 방법. - 제 4 항에 있어서,
상기 실세계 이미지에서 추출된 상기 실세계 객체 이미지를 제외한 실세계 배경 이미지는 제 3 레이어에 위치시키는 것을 특징으로 하는 방법. - 제 6 항에 있어서, 상기 사진 촬영 이미지를 생성하는 단계에서,
상기 제 3 레이어의 상기 실세계 배경 이미지를 더 포함하여 상기 사진 촬영 이미지를 생성하는 것을 특징으로 하는 방법. - 제 1 항에 있어서, 상기 사진 촬영 이미지를 생성하는 단계에서,
상기 메모리는 하나 이상의 배경 이미지들을 포함하며, 상기 배경 이미지들 중 선택된 배경 이미지를 더 포함하여 상기 사진 촬영 이미지를 생성하는 것을 특징으로 하는 방법. - 제 1 항에 있어서,
상기 모바일 단말기에 입력된 제어명령에 따라 상기 디스플레이에 출력된 상기 합성용 객체 이미지의 크기 또는 위치를 제어하는 것을 특징으로 하는 방법. - 제 1 항에 있어서,
상기 합성용 객체 이미지는 상기 모바일 단말기에서 생성되거나 다른 모바일 단말기에서 생성되어 상기 통신모듈을 통하여 제공받은 것을 특징으로 하는 방법. - 제 10 항에 있어서,
상기 합성용 객체 이미지는 배경 이미지가 제외된 객체 이미지 만을 포함하는 것을 특징으로 하는 방법. - 제 10 항에 있어서,
상기 합성용 객체 이미지가 생성될 때, 상기 합성용 객체 이미지를 제외한 나머지 이미지는 배경 이미지로 생성되는 것을 특징으로 하는 방법. - 제 1 항에 있어서,
상기 합성용 객체 이미지와 상기 실세계 객체 이미지가 배치된 상기 사진 촬영 이미지를 합성용 객체 이미지로써, 상기 통신모듈을 이용하여 다른 모바일 단말기로 전송하는 단계를 더 포함하되,
상기 다른 모바일 단말기는, 각각의 상기 단계와 동일한 단계를 수행하는 프로세서를 이용하여 수신한 상기 합성용 객체 이미지와 상기 다른 모바일 단말기의 실세계 객체 이미지를 포함하는 사진 촬영 이미지를 생성하는 것을 특징으로 하는 방법. - 카메라 모듈, 디스플레이, 통신모듈, 프로세서, 메모리 및 상기 메모리에 저장되고 상기 프로세서에 의해 실행되도록 구성된 하나 이상의 프로그램을 이용하여 사진 촬영 이미지를 생성하기 위한 모바일 단말기로서,
상기 하나 이상의 프로그램은,
실세계 장면을 상기 카메라 모듈이 실시간 연속적으로 촬영하여 생성되는 실세계 객체 이미지가 포함된 실세계 이미지를 상기 디스플레이에 실시간 연속적으로 출력하고,
상기 메모리에 저장된 합성용 객체 이미지를 상기 디스플레이에 출력하고,
상기 합성용 객체 이미지와 상기 실세계 이미지를 상기 디스플레이에 배치하되, 상기 합성용 객체 이미지가 상기 실세계 객체 이미지의 후면에 중첩되어 배치되도록 선택되는 경우, 실시간 연속적으로 출력되는 상기 실세계 객체 이미지의 후면에 상기 합성용 객체 이미지가 중첩되어 배치되도록 하며,
상기 디스플레이에 배치된 상기 합성용 객체 이미지와 상기 실세계 객체 이미지가 포함되는 사진 촬영 이미지를 생성하기 위한 명령어들을 포함하되,
상기 합성용 객체 이미지를 제 1 레이어(layer)에 위치하도록 제공하며, 상기 실세계 객체 이미지를 제 2 레이어에 위치하도록 제공하고,
상기 배치는,
상기 제 1 레이어 및 제 2 레이어에 위치하는 상기 합성용 객체 이미지와 상기 실세계 객체 이미지를 상기 디스플레이에 배치하되, 상기 합성용 객체 이미지가 상기 실세계 객체 이미지의 후면에 위치하는 명령이 수신되는 경우, 상기 제 1 레이어를 상기 제 2 레이어의 후면에 위치시켜 상기 실세계 객체 이미지의 후면에 상기 합성용 객체 이미지가 중첩되어 배치되도록 하는 모바일 단말기. - 제 14 항에 있어서, 상기 하나 이상의 프로그램은,
상기 실세계 이미지를 상기 디스플레이에 출력한 이후에, 상기 합성용 객체 이미지와 중첩되어 배치되기 위한 상기 실세계 객체 이미지를 상기 실세계 이미지에서 선택하는 것을 더 수행하는 명령어를 포함하는 것을 특징으로 하는 모바일 단말기. - 삭제
- 제 14 항에 있어서,
상기 실세계 이미지에서 상기 실세계 객체 이미지 만을 추출하고, 추출된 상기 실세계 객체 이미지를 상기 제 2 레이어에 위치시키는 것을 특징으로 하는 모바일 단말기. - 제 14 항에 있어서,
상기 실세계 이미지에서 상기 실세계 객체 이미지를 제외한 나머지 이미지에 투명 처리하고, 상기 실세계 객체 이미지 및 투명 처리된 이미지를 상기 제 2 레이어에 위치시키는 것을 특징으로 하는 모바일 단말기. - 제 17 항에 있어서,
상기 실세계 이미지에서 추출된 상기 실세계 객체 이미지를 제외한 실세계 배경 이미지는 제 3 레이어에 위치시키는 것을 특징으로 하는 모바일 단말기. - 제 19 항에 있어서, 상기 사진 촬영 이미지를 생성하는 경우,
상기 제 3 레이어의 상기 실세계 배경 이미지를 더 포함하여 상기 사진 촬영 이미지를 생성하는 것을 특징으로 하는 모바일 단말기. - 제 14 항에 있어서, 상기 사진 촬영 이미지를 생성하는 경우,
상기 메모리는 하나 이상의 배경 이미지들을 포함하며, 상기 배경 이미지들 중 선택된 배경 이미지를 더 포함하여 상기 사진 촬영 이미지를 생성하는 것을 특징으로 하는 모바일 단말기. - 제 14 항에 있어서,
상기 모바일 단말기에 입력된 제어명령에 따라 상기 디스플레이에 출력된 상기 합성용 객체 이미지의 크기 또는 위치를 제어하는 것을 특징으로 하는 모바일 단말기. - 제 14 항에 있어서,
상기 합성용 객체 이미지는 상기 모바일 단말기에서 생성되거나 다른 모바일 단말기에서 생성되어 상기 통신모듈을 통하여 제공받은 것을 특징으로 하는 모바일 단말기. - 제 23 항에 있어서,
상기 합성용 객체 이미지는 배경 이미지가 제외된 객체 이미지 만을 포함하는 것을 특징으로 하는 모바일 단말기. - 제 23 항에 있어서,
상기 합성용 객체 이미지가 생성될 때, 상기 합성용 객체 이미지를 제외한 나머지 이미지는 배경 이미지로 생성되는 것을 특징으로 하는 모바일 단말기. - 제 14 항에 있어서,
상기 합성용 객체 이미지와 상기 실세계 객체 이미지가 배치된 상기 사진 촬영 이미지가 합성용 객체 이미지로 사용될 수 있도록 상기 통신모듈을 이용하여 다른 모바일 단말기로 전송하되,
상기 다른 모바일 단말기는, 상기 명령어들과 동일한 명령어들을 포함하는 하나 이상의 프로그램을 이용하여 상기 사진 촬영 이미지를 합성용 객체 이미지로 수신한 상기 합성용 객체 이미지와 상기 다른 모바일 단말기의 상기 실세계 객체 이미지를 포함하는 사진 촬영 이미지를 생성하는 것을 특징으로 하는 모바일 단말기.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020180013613A KR102514702B1 (ko) | 2018-02-02 | 2018-02-02 | 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020180013613A KR102514702B1 (ko) | 2018-02-02 | 2018-02-02 | 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20190094040A KR20190094040A (ko) | 2019-08-12 |
| KR102514702B1 true KR102514702B1 (ko) | 2023-03-28 |
Family
ID=67625057
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020180013613A KR102514702B1 (ko) | 2018-02-02 | 2018-02-02 | 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102514702B1 (ko) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114640805A (zh) * | 2020-11-30 | 2022-06-17 | 华为技术有限公司 | 一种合拍方法、电子设备及服务器 |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20070291338A1 (en) | 2006-06-20 | 2007-12-20 | Williams Karen E | Photo editing menu systems for digital cameras |
| KR20080044726A (ko) * | 2006-11-17 | 2008-05-21 | 엘지전자 주식회사 | 카메라를 구비한 단말기 및 그의 동작방법 |
| KR101593573B1 (ko) * | 2009-06-19 | 2016-02-12 | 삼성전자주식회사 | 단말기의 카메라를 이용한 컨텐츠 제작 방법 및 장치 |
| KR101764372B1 (ko) | 2011-04-19 | 2017-08-03 | 삼성전자주식회사 | 휴대용 단말기에서 영상 합성 방법 및 장치 |
| KR102020943B1 (ko) * | 2013-01-21 | 2019-09-11 | 엘지전자 주식회사 | 이동 단말기 및 그 동작방법 |
| KR20150049579A (ko) * | 2013-10-30 | 2015-05-08 | 엘지전자 주식회사 | 이동 단말기 및 그 제어방법 |
| KR20150057840A (ko) * | 2013-11-20 | 2015-05-28 | 엘지전자 주식회사 | 이동 단말기 및 그 동작 제어방법 |
| US9250796B2 (en) | 2014-04-01 | 2016-02-02 | Ideo Llc | Video editor |
-
2018
- 2018-02-02 KR KR1020180013613A patent/KR102514702B1/ko active IP Right Grant
Also Published As
| Publication number | Publication date |
|---|---|
| KR20190094040A (ko) | 2019-08-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102045957B1 (ko) | 휴대단말의 촬영 방법 및 장치 | |
| KR102114377B1 (ko) | 전자 장치에 의해 촬영된 이미지들을 프리뷰하는 방법 및 이를 위한 전자 장치 | |
| EP2750372B1 (en) | Photographing device for producing composite image and method using the same | |
| CN105827952B (zh) | 一种去除指定对象的拍照方法及移动终端 | |
| EP2728853B1 (en) | Method and device for controlling a camera | |
| US10182187B2 (en) | Composing real-time processed video content with a mobile device | |
| KR101299796B1 (ko) | 카메라 자세와 움직임에 기초한 배경 대체의 변조 | |
| KR102032347B1 (ko) | 이미지 센서 위치를 이용한 이미지 영역 설정 장치 및 방법 | |
| KR102090624B1 (ko) | 이미지 촬영장치 및 방법 | |
| JP7371264B2 (ja) | 画像処理方法、電子機器及びコンピュータ可読記憶媒体 | |
| CN113545030B (zh) | 通过移动相机自动生成全焦图像的方法、用户设备以及*** | |
| CN112887617B (zh) | 一种拍摄方法、装置和电子设备 | |
| EP4322520A1 (en) | Photographing method and apparatus, and electronic device | |
| CN111083371A (zh) | 拍摄方法和电子设备 | |
| KR102514702B1 (ko) | 사진 촬영 이미지를 생성하기 위한 모바일 단말기 및 사진 촬영 이미지를 생성하는 방법 | |
| WO2024051556A1 (zh) | 壁纸显示的方法、电子设备及存储介质 | |
| KR20210056944A (ko) | 이미지 변형 방법 | |
| CN114125183A (zh) | 图像处理方法、移动终端及存储介质 | |
| KR101514346B1 (ko) | 합성 사진 촬영 장치 및 방법 | |
| CN109308740B (zh) | 3d场景数据处理方法、装置及电子设备 | |
| KR20150010070A (ko) | 휴대단말기에서 이미지를 표시하는 방법 및 장치 | |
| CN112634339B (zh) | 商品对象信息展示方法、装置及电子设备 | |
| CN114143455B (zh) | 拍摄方法、装置及电子设备 | |
| KR101875049B1 (ko) | 컷 단위로 구성된 컨텐츠를 제어하는 컨텐츠 제공 시스템 | |
| KR101832993B1 (ko) | 컷 단위로 구성된 컨텐츠를 제어하는 컨텐츠 제공 시스템 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| N231 | Notification of change of applicant | ||
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| AMND | Amendment | ||
| E601 | Decision to refuse application | ||
| AMND | Amendment | ||
| X701 | Decision to grant (after re-examination) | ||
| GRNT | Written decision to grant |