KR102061867B1 - 이미지 생성 장치 및 그 방법 - Google Patents

이미지 생성 장치 및 그 방법 Download PDF

Info

Publication number
KR102061867B1
KR102061867B1 KR1020180107839A KR20180107839A KR102061867B1 KR 102061867 B1 KR102061867 B1 KR 102061867B1 KR 1020180107839 A KR1020180107839 A KR 1020180107839A KR 20180107839 A KR20180107839 A KR 20180107839A KR 102061867 B1 KR102061867 B1 KR 102061867B1
Authority
KR
South Korea
Prior art keywords
image
images
movement
area
controller
Prior art date
Application number
KR1020180107839A
Other languages
English (en)
Inventor
한성욱
Original Assignee
한성욱
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한성욱 filed Critical 한성욱
Priority to KR1020180107839A priority Critical patent/KR102061867B1/ko
Priority to PCT/KR2019/009869 priority patent/WO2020054978A1/ko
Priority to US17/273,435 priority patent/US20210192751A1/en
Application granted granted Critical
Publication of KR102061867B1 publication Critical patent/KR102061867B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/215—Motion-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/77—Retouching; Inpainting; Scratch removal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681—Motion detection
    • H04N23/6811—Motion detection based on the image signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/144—Movement detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Studio Devices (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 이미지 생성 장치 및 그 방법을 개시한다. 즉, 본 발명은 동일 위치에서 촬영된 하나 이상의 객체를 포함하는 연속된 복수의 이미지에서 움직이는 객체를 자동으로 확인 및 제거하여, 움직임이 그대로 유지된 원하는 객체만을 포함하는 이미지를 생성함으로써, 관광지 등의 사람이 많은 장소에서 영상을 촬영하더라도 원하는 객체만이 포함된 영상을 획득할 수 있어 사용자의 관심을 높일 수 있다.

Description

이미지 생성 장치 및 그 방법{Apparatus for generating image and method thereof}
본 발명은 이미지 생성 장치 및 그 방법에 관한 것으로, 특히 동일 위치에서 촬영된 하나 이상의 객체를 포함하는 연속된 복수의 이미지에서 움직이는 객체를 자동으로 확인 및 제거하여, 움직임이 그대로 유지된 원하는 객체만을 포함하는 이미지를 생성하는 이미지 생성 장치 및 그 방법에 관한 것이다.
일반적으로, 이동 단말기(Mobile Terminal)는, GPS(Global Positioning System) 기능 및 통화 기능(또는, 호(call) 기능)을 수행하여, 그 수행 결과를 사용자에게 제공하는 장치이다.
상기 이동 단말기는 음성통화, 문자전송서비스 외에도 휴대용 카메라를 탑재하여 언제 어디서나 손쉽게 원하는 이미지를 촬영할 수 있을 뿐만 아니라, 화상정보의 전송 및 화상통화 등 다양한 기능을 지원할 수 있다. 이와 같이 화상통신이 가능한 이동 단말기는 카메라가 내장되어 있는 카메라 내장형과 카메라가 별도로 마련되어 이동 단말기 본체에 꽂아 사용하는 카메라 부착형으로 구분된다.
이러한 이동 단말기는 촬영된 이미지를 불러와서 확대 표시하거나 사용자의 편익을 위한 간단한 편집 기능을 제공하는데 그치고 있다.
또한, 유명 관광지 등에서 이동 단말기를 이용하여 사진을 촬영하고자 하는 경우, 사진을 찍으려는 다른 사람들이 많기 때문에, 사진 촬영을 희망하는 사용자를 중심으로 촬영을 하더라도, 사용자 주변의 이동 중인 다른 사람들이나 사물이 함께 찍혀, 원하는 사진을 얻을 수 없는 상태이다.
한국공개특허 제10-2008-0042462호 [명칭: 휴대용 단말기에서 이미지 편집 장치 및 방법]
본 발명의 목적은 동일 위치에서 촬영된 하나 이상의 객체를 포함하는 연속된 복수의 이미지에서 움직이는 객체를 자동으로 확인 및 제거하여, 움직임이 그대로 유지된 원하는 객체만을 포함하는 이미지를 생성하는 이미지 생성 장치 및 그 방법을 제공하는 데 있다.
본 발명의 실시예에 따른 이미지 생성 장치는 복수의 원본 이미지를 획득하는 카메라부; 상기 카메라부에 의해 획득된 복수의 원본 이미지에 대해 복사본인 복수의 이미지를 생성하고, 상기 복수의 이미지 내에 포함된 하나 이상의 객체를 각각 인식하고, 상기 복수의 이미지별로 각 이미지 내에서 인식된 객체 간의 거리 및 좌표를 각각 확인하고, 상기 복수의 이미지 중 연속된 2개의 이미지에서 객체 간의 거리 및 좌표 확인을 통해 이미지 내에 포함된 객체 중에서 이동이 없는 적어도 하나의 객체와, 이동이 있는 적어도 하나의 객체를 각각 식별하고, 상기 기준 이미지에서 상기 이동이 있는 적어도 하나의 객체와 관련한 제 1 영역을 확인하고, 상기 기준 이미지에서 상기 확인된 이동이 있는 적어도 하나의 객체와 관련한 제 1 영역을 삭제하고, 상기 복수의 이미지 중 상기 기준 이미지를 제외한 나머지 이미지들에서 상기 제 1 영역 내에 존재하는 상기 이동이 있는 적어도 하나의 객체와 관련한 영역을 각각 삭제하고, 상기 이동이 있는 적어도 하나의 객체와 관련한 영역이 삭제된 나머지 이미지들 내의 제 1 영역을 합성하여, 상기 제 1 영역 내에서 상기 이동이 있는 적어도 하나의 객체가 삭제된 상태의 영상에 대응하는 제 1 대체 이미지를 생성하고, 상기 기준 이미지 내의 삭제된 제 1 영역에 상기 생성된 제 1 대체 이미지를 합성하여 새로운 이미지를 생성하는 제어부; 및 상기 생성된 새로운 이미지를 표시하는 표시부를 포함할 수 있다.
본 발명과 관련된 일 예로서 상기 제 1 대체 이미지는, 상기 제 1 영역에 대응하는 좌표 정보를 포함하며, 상기 제 1 대체 이미지의 크기 및 모양은, 상기 제 1 영역의 크기 및 형상에 대응할 수 있다.
본 발명과 관련된 일 예로서 상기 제어부는, 상기 제 1 대체 이미지에 포함된 제 1 영역에 대응하는 좌표 정보를 근거로 상기 기준 이미지 내의 삭제된 제 1 영역에 상기 제 1 대체 이미지를 합성하여 상기 새로운 이미지를 생성할 수 있다.
본 발명과 관련된 일 예로서 상기 제어부는, 상기 복수의 이미지를 대상으로 상기 이동이 있는 적어도 하나의 객체와 관련한 제 2 영역을 확인하고, 상기 복수의 이미지별로 상기 복수의 이미지에서 상기 확인된 제 2 영역 내에 존재하는 상기 이동이 있는 적어도 하나의 객체와 관련한 영역을 각각 삭제하고, 상기 이동이 있는 적어도 하나의 객체와 관련한 영역이 삭제된 복수의 이미지 내의 제 2 영역을 합성하여, 상기 제 2 영역 내에서 상기 이동이 있는 적어도 하나의 객체가 삭제된 상태의 영상에 대응하는 제 2 대체 이미지를 생성하고, 상기 기준 이미지에서 상기 제 2 영역을 삭제하고, 상기 기준 이미지 내의 삭제된 제 2 영역에 상기 생성된 제 2 대체 이미지를 합성하여 상기 새로운 이미지를 생성할 수 있다.
본 발명의 실시예에 따른 이미지 생성 방법은 카메라부에 의해, 복수의 원본 이미지를 획득하는 단계; 제어부에 의해, 상기 카메라부에 의해 획득된 복수의 원본 이미지에 대해 복사본인 복수의 이미지를 생성하는 단계; 상기 제어부에 의해, 상기 복수의 이미지 내에 포함된 하나 이상의 객체를 각각 인식하는 단계; 상기 제어부에 의해, 상기 복수의 이미지별로 각 이미지 내에서 인식된 객체 간의 거리 및 좌표를 각각 확인하는 단계; 상기 제어부에 의해, 상기 복수의 이미지 중 연속된 2개의 이미지에서 객체 간의 거리 및 좌표 확인을 통해 이미지 내에 포함된 객체 중에서 이동이 없는 적어도 하나의 객체와, 이동이 있는 적어도 하나의 객체를 각각 식별하는 단계; 상기 제어부에 의해, 상기 복수의 이미지를 대상으로 상기 이동이 있는 적어도 하나의 객체와 관련한 제 2 영역을 확인하는 단계; 상기 제어부에 의해, 상기 복수의 이미지별로 상기 복수의 이미지에서 상기 확인된 제 2 영역 내에 존재하는 상기 이동이 있는 적어도 하나의 객체와 관련한 영역을 각각 삭제하는 단계; 상기 제어부에 의해, 상기 이동이 있는 적어도 하나의 객체와 관련한 영역이 삭제된 복수의 이미지 내의 제 2 영역을 합성하여, 상기 제 2 영역 내에서 상기 이동이 있는 적어도 하나의 객체가 삭제된 상태의 영상에 대응하는 제 2 대체 이미지를 생성하는 단계; 상기 제어부에 의해, 상기 기준 이미지에서 상기 제 2 영역을 삭제하고, 상기 기준 이미지 내의 삭제된 제 2 영역에 상기 생성된 제 2 대체 이미지를 합성하여 새로운 이미지를 생성하는 단계; 및 상기 제어부에 의해, 상기 생성된 새로운 이미지를 표시부에 표시하도록 제어하는 단계를 포함할 수 있다.
본 발명과 관련된 일 예로서 상기 제어부에 의해, 상기 기준 이미지에서 상기 이동이 있는 적어도 하나의 객체와 관련한 제 1 영역을 확인하는 단계; 상기 제어부에 의해, 상기 기준 이미지에서 상기 확인된 이동이 있는 적어도 하나의 객체와 관련한 제 1 영역을 삭제하고, 상기 복수의 이미지 중 상기 기준 이미지를 제외한 나머지 이미지들에서 상기 제 1 영역 내에 존재하는 상기 이동이 있는 적어도 하나의 객체와 관련한 영역을 각각 삭제하는 단계; 상기 제어부에 의해, 상기 이동이 있는 적어도 하나의 객체와 관련한 영역이 삭제된 나머지 이미지들 내의 제 1 영역을 합성하여, 상기 제 1 영역 내에서 상기 이동이 있는 적어도 하나의 객체가 삭제된 상태의 영상에 대응하는 제 1 대체 이미지를 생성하는 단계; 및 상기 제어부에 의해, 상기 기준 이미지 내의 삭제된 제 1 영역에 상기 생성된 제 1 대체 이미지를 합성하여 상기 새로운 이미지를 생성하는 단계를 더 포함할 수 있다.
본 발명과 관련된 일 예로서 상기 표시부의 일측에 표시되는 미리 설정된 편집 메뉴가 선택될 때, 상기 제어부에 의해, 사용자 입력에 따라 상기 표시부에 표시되는 새로운 이미지에 대해 편집 기능을 수행하는 단계; 및 상기 표시부에 의해, 편집 기능 수행 결과를 표시하는 단계를 더 포함할 수 있다.
본 발명과 관련된 일 예로서 상기 새로운 이미지에 대해 편집 기능을 수행하는 단계는, 사용자 입력에 따라 상기 표시부에 표시되는 새로운 이미지에 포함된 객체 중에서 어느 하나의 객체가 선택될 때, 상기 제어부에 의해, 상기 새로운 이미지에서 상기 선택된 어느 하나의 객체와 관련한 제 3 영역을 확인하는 과정; 상기 제어부에 의해, 상기 새로운 이미지에서 상기 확인된 어느 하나의 객체와 관련한 제 3 영역을 삭제하는 과정; 상기 제어부에 의해, 상기 제 3 영역이 삭제된 새로운 이미지 내의 제 3 영역을 상기 제 3 영역 주변의 색상으로 대체하여 다른 새로운 이미지를 생성하는 과정; 상기 제어부에 의해, 상기 복수의 이미지별로 상기 복수의 이미지에서 상기 확인된 제 3 영역 내에 존재하는 상기 어느 하나의 객체와 관련한 영역을 각각 삭제하고, 상기 어느 하나의 객체와 관련한 영역이 삭제된 복수의 이미지 내의 제 3 영역을 합성하여, 상기 제 3 영역 내에서 상기 어느 하나의 객체가 삭제된 상태의 영상에 대응하는 제 3 대체 이미지를 생성하고, 상기 새로운 이미지 내의 삭제된 제 3 영역에 상기 생성된 제 3 대체 이미지를 합성하여 상기 다른 새로운 이미지를 생성하는 과정; 상기 제어부에 의해, 상기 새로운 이미지 내의 삭제된 제 3 영역에 사용자 선택에 따른 상기 새로운 이미지 내의 특정 부분을 복사해서 붙여 넣어 상기 다른 새로운 이미지를 생성하는 과정; 및 상기 제어부에 의해, 상기 새로운 이미지 내의 삭제된 제 3 영역에 사용자 선택에 따른 다른 이미지를 붙여 넣어 상기 다른 새로운 이미지를 생성하는 과정 중 적어도 하나의 과정을 포함할 수 있다.
본 발명은 동일 위치에서 촬영된 하나 이상의 객체를 포함하는 연속된 복수의 이미지에서 움직이는 객체를 자동으로 확인 및 제거하여, 움직임이 그대로 유지된 원하는 객체만을 포함하는 이미지를 생성함으로써, 관광지 등의 사람이 많은 장소에서 영상을 촬영하더라도 원하는 객체만이 포함된 영상을 획득할 수 있어 사용자의 관심을 높일 수 있는 효과가 있다.
도 1은 본 발명의 실시예에 따른 이미지 생성 장치의 구성을 나타낸 블록도이다.
도 2 내지 도 3은 본 발명의 실시예에 따른 이미지 생성 방법을 나타낸 흐름도이다.
도 4 내지 도 19는 본 발명의 실시예에 따른 이미지 생성에 따른 예를 나타낸 도이다.
본 발명에서 사용되는 기술적 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 발명에서 사용되는 기술적 용어는 본 발명에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다. 또한, 본 발명에서 사용되는 기술적인 용어가 본 발명의 사상을 정확하게 표현하지 못하는 잘못된 기술적 용어일 때에는 당업자가 올바르게 이해할 수 있는 기술적 용어로 대체되어 이해되어야 할 것이다. 또한, 본 발명에서 사용되는 일반적인 용어는 사전에 정의되어 있는 바에 따라, 또는 전후 문맥상에 따라 해석되어야 하며, 과도하게 축소된 의미로 해석되지 않아야 한다.
또한, 본 발명에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함한다. 본 발명에서 "구성된다" 또는 "포함한다" 등의 용어는 발명에 기재된 여러 구성 요소들 또는 여러 단계를 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다.
또한, 본 발명에서 사용되는 제 1, 제 2 등과 같이 서수를 포함하는 용어는 구성 요소들을 설명하는데 사용될 수 있지만, 구성 요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제 1 구성 요소는 제 2 구성 요소로 명명될 수 있고, 유사하게 제 2 구성 요소도 제 1 구성 요소로 명명될 수 있다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 발명의 사상을 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명의 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다.
도 1은 본 발명의 실시예에 따른 이미지 생성 장치(100)의 구성을 나타낸 블록도이다.
도 1에 도시한 바와 같이, 이미지 생성 장치(100)는 카메라부(110), 저장부(120), 표시부(130), 음성 출력부(140) 및 제어부(150)로 구성된다. 도 1에 도시된 이미지 생성 장치(100)의 구성 요소 모두가 필수 구성 요소인 것은 아니며, 도 1에 도시된 구성 요소보다 많은 구성 요소에 의해 이미지 생성 장치(100)가 구현될 수도 있고, 그보다 적은 구성 요소에 의해서도 이미지 생성 장치(100)가 구현될 수도 있다.
상기 이미지 생성 장치(100)는 스마트 폰(Smart Phone), 휴대 단말기(Portable Terminal), 이동 단말기(Mobile Terminal), 개인 정보 단말기(Personal Digital Assistant: PDA), PMP(Portable Multimedia Player) 단말기, 텔레매틱스(Telematics) 단말기, 내비게이션(Navigation) 단말기, 개인용 컴퓨터(Personal Computer), 노트북 컴퓨터, 슬레이트 PC(Slate PC), 태블릿 PC(Tablet PC), 울트라북(ultrabook), 웨어러블 디바이스(Wearable Device, 예를 들어, 워치형 단말기(Smartwatch), 글래스형 단말기(Smart Glass), HMD(Head Mounted Display) 등 포함), 와이브로(Wibro) 단말기, IPTV(Internet Protocol Television) 단말기, 스마트 TV, 디지털방송용 단말기, AVN(Audio Video Navigation) 단말기, A/V(Audio/Video) 시스템, 플렉시블 단말기(Flexible Terminal), 디지털 사이니지 장치 등과 같은 다양한 단말기에 적용될 수 있다.
또한, 상기 이미지 생성 장치(100)는 유/무선 통신망을 통해 내부의 임의의 구성 요소 또는 외부의 임의의 적어도 하나의 단말기와 통신 연결하는 통신부(미도시)를 더 포함할 수 있다.
상기 카메라부(110)는 영상 통화 모드, 촬영 모드, 영상 회의 모드 등에서 이미지 센서(카메라 모듈 또는 카메라)에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 즉, 코덱(CODEC)에 따라 상기 이미지 센서에 의해 얻어지는 해당 화상 데이터들을 각 규격에 맞도록 인코딩/디코딩한다. 상기 처리된 화상 프레임은 상기 제어부(150)의 제어에 의해 상기 표시부(130)에 표시될 수 있다. 일 예로, 상기 카메라는 객체(또는 피사체)(예를 들어 상품, 사용자 등 포함)를 촬영하고, 그 촬영된 영상(피사체 영상)에 대응하는 비디오 신호를 출력한다.
또한, 상기 카메라부(110)에서 처리된 화상 프레임은 상기 저장부(120)에 저장되거나 상기 통신부를 통해 상기 서버나 상기 다른 단말로 전송될 수 있다.
또한, 상기 카메라부(110)는 360도 카메라(미도시)를 통해 획득된(또는 촬영된) 파노라마 영상(또는 파노라마 영상 정보)을 상기 제어부(150)에 제공할 수도 있다. 이때, 상기 360도 카메라는 2차원 또는 3차원 형태의 파노라마 영상을 촬영할 수 있다.
상기 이미지 생성 장치(100)의 일측에 형성된 미리 설정된 버튼이 클릭(또는 터치/선택)되거나 또는 표시부(130)의 일측에 표시되는 미리 설정된 촬영 메뉴(또는 촬영 항목)가 선택(또는 터치/클릭)되는 경우, 상기 카메라부(110)는 미리 설정된 시간 간격으로 연속 촬영 기능(또는 연사 기능)을 사용하여 복수의 원본 이미지를 획득(또는 촬영)한다.
본 발명의 실시예에서는 상기 획득되는 복수의 원본 이미지가 상기 카메라부(110)에 포함된 연속 촬영 기능에 의해 획득되는 것으로 설명하고 있으나, 이에 한정되는 것은 아니며, 일반 촬영 기능에 의해 획득되는 복수의 원본 이미지일 수도 있다.
또한, 상기 카메라부(110)는 미리 설정된 촬영 시간(예를 들어 10초) 동안 미리 설정된 시간 간격으로 촬영 기능을 수행하여 상기 복수의 원본 이미지를 획득할 수도 있다.
이때, 상기 일반 촬영 기능에 의해 복수의 원본 이미지가 획득되는 경우, 해당 복수의 원본 이미지가 서로 다른 초점(또는 다초점)으로 촬영된 상태일 수 있으므로, 해당 복수의 원본 이미지 내에 포함된 특정 객체를 중심으로 이미지 보정(또는 이미지 보간) 등을 통해 해당 복수의 원본 이미지가 일부 보정(또는 수정/편집)될 수도 있다.
즉, 상기 카메라부(110)는 멀티 포커싱(또는 다초점)을 처음부터 시행하여, 멀티 포커싱에 따른 복수의 객체가 포함된 원본 이미지를 획득할 수 있다.
또한, 상기 카메라부(110)는 사용자 제어(또는 사용자 선택/터치)에 따라 추가로 사용자가 포커싱하고자 하는 영역을 상기 멀티 포커싱에 추가하여, 해당 사용자가 포커싱하고자 하는 영역과 관련한 사물(또는 사람)이 포함된 원본 이미지를 획득할 수 있다.
예를 들어, 상기 카메라부(110)는 복수의 사용자에 대한 멀티 포커싱 상태에서 화면에 임시 표시되는 특정 객체(예를 들어 에펠탑, 동상 등 포함)가 선택되는 경우, 상기 선택된 특정 객체에 대해서도 포커싱을 맞춰준 상태에서 상기 복수의 사용자와 상기 특정 객체에 대한 원본 이미지를 획득할 수도 있다.
또한, 상기 카메라부(110)는 손떨림 보정 기능 등을 통해, 사진을 촬영하는 사람의 손이 약간 떨리거나 움직이더라도 이에 대한 오차로 발생하였을 가능성이 있는 미세한 차이는 자동 보정 기능을 적용할 수도 있다.
상기 저장부(120)는 다양한 사용자 인터페이스(User Interface: UI), 그래픽 사용자 인터페이스(Graphic User Interface: GUI) 등을 저장한다.
또한, 상기 저장부(120)는 상기 이미지 생성 장치(100)가 동작하는데 필요한 데이터와 프로그램 등을 저장한다.
즉, 상기 저장부(120)는 상기 이미지 생성 장치(100)에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application)), 이미지 생성 장치(100)의 동작을 위한 데이터들, 명령어들을 저장할 수 있다. 이러한 응용 프로그램 중 적어도 일부는 무선 통신을 통해 외부 서버로부터 다운로드 될 수 있다. 또한, 이러한 응용 프로그램 중 적어도 일부는 이미지 생성 장치(100)의 기본적인 기능을 위하여 출고 당시부터 이미지 생성 장치(100)상에 존재할 수 있다. 한편, 응용 프로그램은 상기 저장부(120)에 저장되고, 이미지 생성 장치(100)에 설치되어, 제어부(150)에 의하여 상기 이미지 생성 장치(100)의 동작(또는 기능)을 수행하도록 구동될 수 있다.
또한, 상기 저장부(120)는 플래시 메모리 타입(Flash Memory Type), 하드 디스크 타입(Hard Disk Type), 멀티미디어 카드 마이크로 타입(Multimedia Card Micro Type), 카드 타입의 메모리(예를 들면, SD 또는 XD 메모리 등), 자기 메모리, 자기 디스크, 광디스크, 램(Random Access Memory: RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory: ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 중 적어도 하나의 저장매체를 포함할 수 있다. 또한, 이미지 생성 장치(100)는 인터넷(internet)상에서 저장부(120)의 저장 기능을 수행하는 웹 스토리지(web storage)를 운영하거나, 또는 상기 웹 스토리지와 관련되어 동작할 수도 있다.
또한, 상기 저장부(120)는 상기 카메라부(110)를 통해 촬영된(또는 획득된) 영상(예를 들어 정지 영상, 동영상 등 포함) 등을 저장한다.
상기 표시부(또는 디스플레이부)(130)는 상기 제어부(150)의 제어에 의해 상기 저장부(120)에 저장된 사용자 인터페이스 및/또는 그래픽 사용자 인터페이스를 이용하여 다양한 메뉴 화면 등과 같은 다양한 콘텐츠를 표시할 수 있다. 여기서, 상기 표시부(130)에 표시되는 콘텐츠는 다양한 텍스트 또는 이미지 데이터(각종 정보 데이터 포함)와 아이콘, 리스트 메뉴, 콤보 박스 등의 데이터를 포함하는 메뉴 화면 등을 포함한다. 또한, 상기 표시부(130)는 터치 스크린 일 수 있다.
또한, 상기 표시부(130)는 액정 디스플레이(Liquid Crystal Display: LCD), 박막 트랜지스터 액정 디스플레이(Thin Film Transistor-Liquid Crystal Display: TFT LCD), 유기 발광 다이오드(Organic Light-Emitting Diode: OLED), 플렉시블 디스플레이(Flexible Display), 3차원 디스플레이(3D Display), 전자잉크 디스플레이(e-ink display), LED(Light Emitting Diode) 중에서 적어도 하나를 포함할 수 있다.
또한, 상기 표시부(130)는 상기 제어부(150)의 제어에 의해 상기 카메라부(110)를 통해 촬영된(또는 획득된) 영상(예를 들어 정지 영상, 동영상 등 포함) 등을 표시한다.
상기 음성 출력부(140)는 상기 제어부(150)에 의해 소정 신호 처리된 신호에 포함된 음성 정보를 출력한다. 여기서, 상기 음성 출력부(140)에는 리시버(receiver), 스피커(speaker), 버저(buzzer) 등이 포함될 수 있다.
또한, 상기 음성 출력부(140)는 상기 제어부(150)에 의해 생성된 안내 음성을 출력한다.
또한, 상기 음성 출력부(140)는 상기 제어부(150)에 의해 상기 카메라부(110)를 통해 촬영된(또는 획득된) 영상(예를 들어 정지 영상, 동영상 등 포함) 등에 대응하는 음성 정보(또는 음향 효과)를 출력한다.
상기 제어부(controller, 또는 MCU(microcontroller unit)(150)는 상기 이미지 생성 장치(100)의 전반적인 제어 기능을 실행한다.
또한, 상기 제어부(150)는 상기 저장부(120)에 저장된 프로그램 및 데이터를 이용하여 이미지 생성 장치(100)의 전반적인 제어 기능을 실행한다. 상기 제어부(150)는 RAM, ROM, CPU, GPU, 버스를 포함할 수 있으며, RAM, ROM, CPU, GPU 등은 버스를 통해 서로 연결될 수 있다. CPU는 상기 저장부(120)에 액세스하여, 상기 저장부(120)에 저장된 O/S를 이용하여 부팅을 수행할 수 있으며, 상기 저장부(120)에 저장된 각종 프로그램, 콘텐츠, 데이터 등을 이용하여 다양한 동작을 수행할 수 있다.
또한, 제어부(150)는 상기 획득된 원본인 복수의 원본 이미지를 저장부(120)에 저장하고, 상기 복수의 원본 이미지에 대한 복사본인 복수의 이미지(또는 복수의 복사본 이미지)를 생성한다. 이때, 상기 제어부(150)는 상기 복수의 이미지 중에서 첫 번째 이미지(또는 제 1 이미지)를 기준 이미지로 설정한다. 여기서, 상기 제어부(150)는 상기 복수의 이미지 중에서 특정 순서에 위치한 특정 이미지 또는 사용자 선택에 따른 특정 이미지를 기준 이미지로 설정할 수도 있다.
또한, 상기 제어부(150)는 상기 복수의 이미지 내에 포함된 하나 이상의 객체를 각각 인식한다. 여기서, 상기 이미지 내에 포함된 객체 인식의 경우, 공지된 다양한 객체 인식 방법 중 하나 이상의 방법을 사용할 수 있다. 이때, 상기 객체는 사람, 사물(예를 들어 건물, 자동차, 산 등 포함) 등을 포함한다.
또한, 상기 복수의 이미지에 포함된 하나 이상의 객체를 인식하는 경우, 상기 제어부(150)는 상기 카메라부(110)를 통해 이미지를 획득할 때 포커스된 영역을 중심으로 미리 설정된 반경 이내에 위치한 하나 이상의 객체를 인식할 수 있다. 이에 따라, 이미지 내에서 고정된 건물, 나무, 산 등에 대한 인식 과정이 생략되어, 객체 인식 시간을 단축시키고 시스템 효율을 높일 수 있다.
또한, 상기 제어부(150)는 상기 복수의 이미지별로 각 이미지 내에서 인식된 객체 간의 거리 및 좌표를 확인(또는 산출)한다. 여기서, 상기 좌표는 이미지에 대해서 미리 설정된 기준 위치(또는 기준 좌표)(예를 들어 이미지의 왼쪽 하단부의 모서리)를 근거로 한 상대적인 좌표일 수 있다.
또한, 상기 제어부(150)는 상기 복수의 이미지 중 연속된 2개의 이미지에서 객체 간의 거리 및 좌표 확인(또는 비교)을 통해 이미지 내에 포함된 객체 중에서 이동(또는 움직임)이 없는 적어도 하나의 객체와, 이동이 있는 적어도 하나의 객체를 각각 식별(또는 판별/확인)한다.
즉, 상기 제어부(150)는 상기 복수의 이미지 중에서 연속된 이미지를 대상으로 연속된 이미지 각각에서 확인된 객체 간의 거리 및 좌표를 비교하여, 연속된 이미지에 포함된 하나 이상의 객체 중에서 이동이 없는 적어도 하나의 객체 및 이동이 있는 적어도 하나의 객체를 각각 식별한다.
또한, 상기 제어부(150)는 상기 기준 이미지에서 이동(또는 움직임)이 있는 적어도 하나의 객체와 관련한 제 1 영역(또는 좌표)을 확인(또는 설정)한다. 이때, 상기 이동이 있는 객체와 관련한 제 1 영역은 해당 이동이 있는 객체를 포함할 수 있도록 사각형, 원형, 타원형, 삼각형 등의 형태일 수 있으며, 해당 이동이 있는 객체를 포함할 수 있도록 해당 객체의 외곽선(또는 윤곽선)으로부터 미리 설정된 픽셀 수만큼을 더 포함(또는 확장)할 수 있다.
또한, 상기 제어부(150)는 상기 복수의 이미지를 대상으로 이동(또는 움직임)이 있는 적어도 하나의 객체와 관련한 제 2 영역을 확인할 수도 있다. 이때, 상기 제 2 영역은 상기 복수의 이미지 중에서 상기 이동이 있는 적어도 하나의 객체를 각각 포함하는 개별 영역의 좌표를 모두 합쳐 하나로 만든 영역일 수 있다.
이와 같이, 상기 제어부(150)는 상기 기준 이미지를 근거로 이동이 있는 적어도 하나의 객체와 관련한 제 1 영역을 확인하거나 또는, 상기 복수의 이미지를 대상으로 이동이 있는 적어도 하나의 객체와 관련한 제 2 영역을 확인할 수 있다.
또한, 상기 제어부(150)는 상기 기준 이미지에서 상기 확인된 이동(또는 움직임)이 있는 적어도 하나의 객체와 관련한 제 1 영역을 삭제한다. 또한, 상기 제어부(150)는 상기 복수의 이미지 중 상기 기준 이미지를 제외한 나머지 이미지들에서 상기 제 1 영역 내에 존재하는 이동(또는 움직임)이 있는 적어도 하나의 객체와 관련한 영역(또는 서브 영역)을 각각 삭제한다.
또한, 상기 제어부(150)는 상기 복수의 이미지 중 상기 기준 이미지를 제외한 나머지 이미지들에서 상기 이동(또는 움직임)이 있는 적어도 하나의 객체와 관련한 영역을 각각 삭제할 수도 있다.
이때, 상기 나머지 이미지들의 상기 제 1 영역 중에서 상기 이동이 있는 적어도 하나의 객체와 관련한 영역이 각각 삭제되고, 해당 이동이 있는 적어도 하나의 객체와 관련없는 영역은 그대로 유지된다.
또한, 상기 제어부(150)는 상기 복수의 이미지별로 상기 복수의 이미지에서 상기 확인된 제 2 영역 내에 존재하는 이동(또는 움직임)이 있는 적어도 하나의 객체와 관련한 영역(또는 서브 영역)을 각각 삭제할 수도 있다.
또한, 상기 제어부(150)는 상기 이동(또는 움직임)이 있는 적어도 하나의 객체와 관련한 영역이 삭제된 나머지 이미지들 내의 제 1 영역을 합성하여, 해당 제 1 영역 내에서 상기 이동이 있는 적어도 하나의 객체가 삭제된 상태의 영상(또는 이미지)에 대응하는 제 1 대체 이미지(또는 제 1 대체 영역)를 생성한다. 여기서, 상기 생성되는 제 1 대체 이미지는 상기 제 1 영역에 대응하는 좌표 정보를 포함한다. 또한, 상기 생성되는 제 1 대체 이미지의 크기 및 모양(또는 형태/형상)은 상기 제 1 영역의 크기 및 형상에 대응(또는 동일)한다. 이때, 상기 제어부(150)는 상기 나머지 이미지들 내의 제 1 영역들에 대해서 이미지 보정(또는 이미지 보간) 등을 수행할 수도 있다.
또한, 상기 제어부(150)는 상기 이동(또는 움직임)이 있는 적어도 하나의 객체와 관련한 영역이 삭제된 복수의 이미지 내의 제 2 영역을 합성하여, 해당 제 2 영역 내에서 상기 이동이 있는 적어도 하나의 객체가 삭제된 상태의 영상(또는 이미지)에 대응하는 제 2 대체 이미지(또는 제 2 대체 영역)를 생성할 수도 있다. 여기서, 상기 생성되는 제 2 대체 이미지는 상기 제 2 영역에 대응하는 좌표 정보를 포함한다. 또한, 상기 생성되는 제 2 대체 이미지의 크기 및 모양(또는 형태/형상)은 상기 제 2 영역의 크기 및 형상에 대응(또는 동일)한다.
또한, 상기 제어부(150)는 상기 기준 이미지 내의 삭제된 제 1 영역에 상기 생성된 제 1 대체 이미지(또는 제 1 대체 영역)를 합성(또는 추가)하여 새로운 이미지(또는 완성 이미지)를 생성한다. 여기서, 상기 제어부(150)는 상기 생성된 제 1 대체 이미지에 포함된 제 1 영역에 대응하는 좌표 정보를 근거로 상기 기준 이미지 내의 삭제된 제 1 영역에 상기 제 1 대체 이미지를 합성할 수 있다. 이때, 상기 생성된 새로운 이미지는 상기 기준 이미지에서 상기 이동이 있는 적어도 하나의 객체가 삭제되고, 상기 적어도 하나의 객체가 삭제된 영역에 상기 제 1 대체 이미지가 대체된 상태일 수 있다.
또한, 상기 제어부(150)는 상기 기준 이미지에서 상기 제 2 영역을 삭제하고, 상기 기준 이미지 내의 삭제된 제 2 영역에 상기 생성된 제 2 대체 이미지(또는 제 2 대체 영역)를 합성(또는 추가)하여 새로운 이미지(또는 완성 이미지)를 생성할 수도 있다. 여기서, 상기 제어부(150)는 상기 생성된 제 2 대체 이미지에 포함된 제 2 영역에 대응하는 좌표 정보를 근거로 상기 기준 이미지 내의 삭제된 제 2 영역에 상기 제 2 대체 이미지를 합성할 수 있다.
이때, 상기 복수의 이미지 중에서 상기 이동이 있는 적어도 하나의 객체가 포함되지 않은 이미지가 있는 경우, 상기 제어부(150)는 상기 이동이 있는 적어도 하나의 객체가 포함되지 않은 이미지 내의 제 1 영역(또는 제 2 영역)을 근거로 상기 제 1 대체 이미지(또는 제 2 대체 이미지)를 생성하고, 상기 기준 이미지에서 상기 제 1 영역(또는 제 2 영역)을 삭제하고, 상기 기준 이미지 내의 삭제된 제 1 영역(또는 제 2 영역)에 상기 생성된 제 1 대체 이미지(또는 제 2 대체 이미지)를 합성(또는 추가)하여 상기 새로운 이미지를 생성할 수도 있다.
또한, 상기 제어부(150)는 상기 생성된 새로운 이미지(또는 완성 이미지)를 상기 표시부(130)에 표시한다.
이와 같이, 상기 카메라부(110)를 통해 획득된 이미지(또는 사진)에서 촬영 대상뿐만 아니라 다른 사람들이 계속 걷거나 움직이고 있는 상태에서 함께 촬영된 경우, 상기 복수의 이미지 내에서 계속 나오지 않고 움직이며 사라지기 때문에, 상기 제어부(150)는 상기 복수의 이미지를 대상으로 공통으로 유지되는 영역들을 이용해서 완성품인 새로운 이미지를 만들 수 있다.
이에 따라, 상기 제어부(150)는 자연히 아주 먼 거리에 있는 구름이나 촬영 배경으로 사용되는 산, 건물 등의 경우에는 고정된 위치에서 그대로 남아 있고, 계속 같은 자세를 유지하고 있는 촬영 대상자만 사진 속에 남아 있으며, 나머지 지나가는(또는 이동하는/움직이는) 사람들은 모두 사라진(또는 삭제된) 상기 새로운 이미지를 만들 수 있다.
또한, 상기 표시부(130)의 일측에 표시되는 미리 설정된 편집 메뉴(또는 편집 항목)가 선택되는 경우, 상기 제어부(150)는 사용자 입력(또는 사용자 선택/제어)에 따라 상기 표시부(130)에 표시되는 새로운 이미지에 대해 편집 기능을 수행한다.
즉, 상기 표시부(130)의 일측에 표시되는 편집 메뉴(또는 편집 항목)가 선택되는 경우, 상기 제어부(150)는 편집 모드로 작동한다.
또한, 사용자 입력(또는 사용자 선택/제어)에 따라 상기 표시부(130)에 표시되는 새로운 이미지에 포함된 객체 중에서 어느 하나의 객체가 선택되면, 상기 제어부(150)는 상기 새로운 이미지에서 상기 선택된 어느 하나의 객체와 관련한 제 3 영역(또는 좌표)을 확인(또는 설정)한다. 여기서, 상기 선택된 어느 하나의 객체와 관련한 제 3 영역은 해당 어느 하나의 객체를 포함하는 사각형, 원형, 타원형, 삼각형 등의 형태일 수 있다.
이때, 상기 사용자 입력(또는 사용자 선택/제어)에 따라 상기 표시부(130)에 표시되는 새로운 이미지에 포함된 객체 중에서 어느 하나의 객체(또는 복수의 객체)에 대해 미리 설정된 이벤트가 발생하는 경우, 상기 제어부(150)는 상기 새로운 이미지에서 상기 선택된 어느 하나의 객체와 관련한 제 3 영역을 확인할 수도 있다. 여기서, 상기 이벤트는 상기 어느 하나의 객체가 선택된 후 상기 표시부(130)에 표시되는 미리 설정된 삭제 메뉴가 선택되는 경우, 상기 어느 하나의 객체에 대해 미리 설정된 시간 이상 터치(또는 선택) 상태가 유지되는 경우, 상기 어느 하나의 객체에 대해 상기 이미지 생성 장치(100)의 사용자에 의한 터치 제스처가 감지되는 경우 등을 포함한다. 여기서, 상기 이미지 생성 장치(100)의 사용자에 의한 터치 제스처는 탭(tap), 터치&홀드(touch & hold), 더블 탭(double tap), 드래그(drag), 플릭(flick), 드래그 앤드 드롭(drag & drop), 핀치(pinch), 스와이프(swipe) 등을 포함한다.
"탭(tap)"은 사용자가 손가락이나 터치 도구(예컨대, 전자 펜)를 이용하여 화면(예를 들어 객체, 지명, 부가 정보 등 포함)을 터치한 후 움직이지 않은 채 화면에서 즉시 들어올리는 동작을 나타낸다.
"터치&홀드(touch & hold)"는 사용자가 손가락이나 터치 도구(예컨대, 전자 펜)를 이용하여 화면(예를 들어 객체, 지명, 부가 정보 등 포함)을 터치한 후, 임계 시간(예컨대, 2초) 이상 터치 입력을 유지하는 동작을 나타낸다. 즉, 터치-인 시점과 터치-아웃 시점 간의 시간 차이가 임계 시간(예컨대, 2초) 이상인 경우를 의미한다. 터치 입력이 탭인지 터치&홀드인지를 사용자에게 인식시키도록 하기 위하여 터치 입력이 임계 시간 이상 유지되면 시각적 또는 청각적 또는 촉각적으로 피드백 신호를 제공할 수도 있다. 상기 임계 시간은 구현 예에 따라서 변경될 수 있다.
"더블 탭(double tap)"은 사용자가 손가락이나 터치 도구(stylus)를 이용하여 화면(예를 들어 객체, 지명, 부가 정보 등 포함)을 두 번 터치하는 동작을 나타낸다.
"드래그(drag)"는 사용자가 손가락이나 터치 도구를 화면(예를 들어 객체, 지명, 부가 정보 등 포함)에 터치한 후 터치를 유지한 상태에서 손가락이나 터치 도구를 화면 내의 다른 위치로 이동시키는 동작을 의미한다. 드래그 동작으로 인하여 오브젝트가 이동되거나 후술할 패닝 동작이 수행된다.
"플릭(flick)"은 사용자가 손가락이나 터치 도구를 화면(예를 들어 객체, 지명, 부가 정보 등 포함)에 터치한 후 사용자가 손가락이나 터치 도구를 이용하여 임계 속도(예컨대, 100 pixel/s) 이상으로 드래그하는 동작을 나타낸다. 손가락이나 터치 도구의 이동 속도가 임계 속도(예컨대, 100 pixel/s) 이상인지에 기초하여 드래그(또는 패닝)와 플릭을 구별할 수 있다.
"드래그 앤드 드롭(drag & drop)"은 사용자가 손가락이나 터치 도구를 이용해 오브젝트(예를 들어 객체, 지명, 부가 정보 등 포함)를 화면 내 소정 위치에 드래그한 후 놓는 동작을 의미한다.
"핀치(pinch)"는 사용자가 두 손가락을 화면(예를 들어 객체, 지명, 부가 정보 등 포함) 위에 터치한 상태에서 서로 다른 방향으로 움직이는 동작을 나타낸다.
"스와이프(swipe)"는 손가락이나 터치 도구로 화면 위의 오브젝트(예를 들어 객체, 지명, 부가 정보 등 포함)를 터치한 상태에서 수평 또는 수직 방향으로 일정 거리를 움직이는 동작이다. 사선 방향의 움직임은 스와이프 이벤트로 인식되지 않을 수 있다.
또한, 상기 이벤트는 상기 어느 하나의 객체가 선택된 후, 상기 이미지 생성 장치(100)에 포함된 센서부(미도시)를 통해 감지되는 상기 이미지 생성 장치(100)의 움직임인 상기 이미지 생성 장치(100)의 상/하/좌/우 방향으로의 미리 설정된 임계값 이상의 기울임이 감지되는 경우, 상기 이미지 생성 장치(100)의 상/하 방향이나 좌/우 방향이나 대각선 방향으로의 일정 횟수 이상의 움직임(또는 흔들림/왕복 운동)이 감지되는 경우, 상기 이미지 생성 장치(100)의 시계/반시계 방향으로의 일정 횟수의 이상의 회전이 감지되는 경우, 상기 카메라부(110)를 통해 촬영되는 사용자(또는 상기 이미지 생성 장치(100)의 사용자)의 시선이 해당 선택된 객체에 일정 시간 이상 유지되는 경우 등을 더 포함할 수 있다.
여기서, 상기 제어부(150)는 상기 표시부(130)에 표시되는 새로운 이미지에 포함된 객체 중에서 어느 하나의 객체가 선택된 후, 상기 표시부(130)에 표시되는 미리 설정된 상기 편집 메뉴가 선택되는 경우, 상기 편집 모드로 작동하며, 상기 새로운 이미지에서 상기 선택된 어느 하나의 객체와 관련한 제 3 영역을 확인할 수도 있다.
또한, 상기 제어부(150)는 상기 새로운 이미지에서 상기 확인된 어느 하나의 객체와 관련한 제 3 영역을 삭제한다. 또한, 상기 제어부(150)는 상기 제 3 영역이 삭제된 새로운 이미지 내의 제 3 영역을 상기 제 3 영역(또는 상기 어느 하나의 객체) 주변의 색상으로 대체하여 다른 새로운 이미지를 생성한다.
또한, 상기 제어부(150)는 상기 새로운 이미지에서 상기 어느 하나의 객체와 관련한 제 3 영역을 삭제한다. 또한, 상기 제어부(150)는 상기 복수의 이미지별로 상기 복수의 이미지에서 상기 확인된 제 3 영역 내에 존재하는 상기 어느 하나의 객체와 관련한 영역(또는 서브 영역)을 각각 삭제한다. 또한, 상기 제어부(150)는 상기 어느 하나의 객체와 관련한 영역이 삭제된 복수의 이미지 내의 제 3 영역을 합성하여, 해당 제 3 영역 내에서 상기 어느 하나의 객체가 삭제된 상태의 영상(또는 이미지)에 대응하는 제 3 대체 이미지(또는 제 3 대체 영역)를 생성한다. 여기서, 상기 생성되는 제 3 대체 이미지는 상기 제 3 영역에 대응하는 좌표 정보를 포함한다. 또한, 상기 생성되는 제 3 대체 이미지의 크기 및 모양은 상기 제 3 영역의 크기 및 모양과 동일할 수 있다. 또한, 상기 제어부(150)는 상기 새로운 이미지 내의 삭제된 제 3 영역에 상기 생성된 제 3 대체 이미지(또는 제 3 대체 영역)를 합성(또는 추가)하여 다른 새로운 이미지(또는 다른 완성 이미지)를 생성할 수도 있다. 여기서, 상기 제어부(150)는 상기 생성된 제 3 대체 이미지에 포함된 제 3 영역에 대응하는 좌표 정보를 근거로 상기 새로운 이미지 내의 삭제된 제 3 영역에 상기 제 3 대체 이미지를 합성할 수 있다. 이때, 상기 생성된 다른 새로운 이미지는 상기 새로운 이미지에서 사용자가 선택한 객체가 삭제되고, 상기 사용자가 선택한 객체가 삭제된 영역에 상기 제 3 대체 이미지가 대체된 상태일 수 있다.
또한, 상기 제어부(150)는 상기 새로운 이미지에서 상기 어느 하나의 객체와 관련한 제 3 영역을 삭제한다. 또한, 상기 제어부(150)는 상기 새로운 이미지 내의 삭제된 제 3 영역에 사용자 선택에 따른 상기 새로운 이미지 내의 특정 부분을 복사해서 붙여 넣어 상기 다른 새로운 이미지를 생성할 수도 있다.
또한, 상기 제어부(150)는 상기 새로운 이미지에서 상기 어느 하나의 객체와 관련한 제 3 영역을 삭제한다. 또한, 상기 제어부(150)는 상기 새로운 이미지 내의 삭제된 제 3 영역에 사용자 선택에 따른 다른 이미지(또는 이모티콘) 등을 붙여 넣어 상기 다른 새로운 이미지를 생성할 수도 있다.
또한, 상기 제어부(150)는 편집 기능 수행 결과(또는 편집 기능 수행에 따라 생성된 다른 새로운 이미지)를 상기 표시부(130)에 표시한다.
이와 같은 추가 편집 기능을 통해, 상기 생성된 새로운 이미지에서 촬영 대상뿐만 아니라 다른 사람도 사진을 찍기 위해서 계속 같은 자리에 위치하고 있거나 원하지 않는 대상체가 있는 경우, 상기 이미지 생성 장치(100)는 주위 배경색과 다르게(예를 들어 하늘을 배경으로 하는 푸른색에 검은색 옷을 입은 사람, 노란색 유채꽃밭에 있는 빨간색 옷을 입은 사람 등 포함) 색상이 보이는 경우 해당 객체를 선택하여 삭제하고, 그 주위의 색상을 자연스럽게 사용하여 다른 새로운 이미지를 생성하거나, 원하는 경우 다른 부분을 복사해서 붙여 넣어 다른 새로운 이미지를 생성하거나, 해당 부분에 따라 생성된 대체 이미지를 합성하여 다른 새로운 이미지를 생성할 수 있다.
또한, 이와 같이, 상기 이미지 생성 장치(100)는 상기 카메라부(110)를 통해 획득된 복수의 이미지를 대상으로 움직임(또는 이동)이 있는 객체를 기준 이미지 내에서 삭제하고, 기준 이미지 내의 객체가 삭제된 영역에 대응하는 대체 이미지를 생성한 후, 상기 기준 이미지 내의 객체가 삭제된 영역에 상기 생성된 대체 이미지를 합성(또는 추가)하여 새로운 이미지를 생성하고, 상기 생성된 새로운 이미지를 사용자에게 제공함으로써, 사용자가 관광지 등의 사람이 많은 곳에서 사진을 찍더라도, 주변에서 이동하는 다른 사용자들이 제외되고 사용자와 배경 위주의 사진을 제공받을 수 있도록 할 수 있다.
또한, 이와 같이, 동일 위치에서 촬영된 하나 이상의 객체를 포함하는 연속된 복수의 이미지에서 움직이는 객체를 자동으로 확인 및 제거하여, 움직임이 그대로 유지된 원하는 객체만을 포함하는 이미지를 생성할 수 있다.
본 발명의 실시예에 따른 기술적 구성은 하나의 앱(또는 애플리케이션)으로 구현될 수도 있다.
이하에서는, 본 발명에 따른 이미지 생성 방법을 도 1 내지 도 19를 참조하여 상세히 설명한다.
도 2 내지 도 3은 본 발명의 실시예에 따른 이미지 생성 방법을 나타낸 흐름도이다.
먼저, 이미지 생성 장치(100)의 일측에 형성된 미리 설정된 버튼이 클릭(또는 터치/선택)되거나 또는 표시부(130)의 일측에 표시되는 미리 설정된 촬영 메뉴(또는 촬영 항목)가 선택(또는 터치/클릭)되는 경우, 카메라부(110)는 미리 설정된 시간 간격으로 연속 촬영 기능(또는 연사 기능)을 사용하여 복수의 원본 이미지를 획득(또는 촬영)한다.
일 예로, 상기 이미지 생성 장치(100)의 일측에 형성된 제 1 버튼이 클릭될 때, 상기 카메라부(110)는 미리 설정된 시간 간격(예를 들어 0.1초 간격)으로 연속 촬영 기능을 통해 20장의 원본 이미지를 획득한다(S210).
이후, 제어부(150)는 상기 획득된 원본인 복수의 원본 이미지를 저장부(120)에 저장하고, 상기 복수의 원본 이미지에 대한 복사본인 복수의 이미지(또는 복수의 복사본 이미지)를 생성한다. 이때, 상기 제어부(150)는 상기 복수의 이미지 중에서 첫 번째 이미지(또는 제 1 이미지)를 기준 이미지로 설정한다. 여기서, 상기 제어부(150)는 상기 복수의 이미지 중에서 특정 순서에 위치한 특정 이미지 또는 사용자 선택에 따른 특정 이미지를 기준 이미지로 설정할 수도 있다.
또한, 상기 제어부(150)는 상기 복수의 이미지 내에 포함된 하나 이상의 객체를 각각 인식한다. 여기서, 상기 이미지 내에 포함된 객체 인식의 경우, 공지된 다양한 객체 인식 방법 중 하나 이상의 방법을 사용할 수 있다. 이때, 상기 객체는 사람, 사물(예를 들어 건물, 자동차, 산 등 포함) 등을 포함한다.
일 예로, 상기 제어부(150)는 상기 획득된 20장의 원본 이미지에 각각 대응하는 복사본인 20장의 이미지(또는 20장의 복사본 이미지)를 각각 생성하고, 상기 생성된 20장의 이미지 중에서 첫 번째 획득된(또는 촬영된) 제 1 이미지를 기준 이미지로 설정한다.
또한, 도 4에 도시된 바와 같이, 상기 제어부(150)는 상기 생성된 20장의 이미지에 포함된 제 1 사용자(410), 제 2 사용자(420), 자동차(430), 나무(440), 광고판(450), 건물(460) 등을 각각 인식한다(S220).
이후, 상기 제어부(150)는 상기 복수의 이미지별로 각 이미지 내에서 인식된 객체 간의 거리 및 좌표를 확인(또는 산출)한다. 여기서, 상기 좌표는 이미지에 대해서 미리 설정된 기준 위치(또는 기준 좌표)(예를 들어 이미지의 왼쪽 하단부의 모서리)를 근거로한 상대적인 좌표일 수 있다.
일 예로, 상기 제어부(150)는 상기 20장의 이미지 각각에 대해서 각 이미지 내에서 인식된 제 1 사용자(410)와 제 2 사용자(420)와 자동차(430)와 나무(440)와 광고판(450)과 건물(460) 등에 대응하는 좌표 및, 상기 각 이미지 내에서 인식된 제 1 사용자(410)와 제 2 사용자(420)와 자동차(430) 간의 거리를 각각 확인(또는 산출)한다.
즉, 상기 도 4에 도시된 바와 같이, 상기 제어부(150)는 상기 20장의 이미지 중 제 1 이미지 내에서 인식된 제 1 사용자(410)에 대응하는 제 1-1 좌표, 제 2 사용자(420)에 대응하는 제 1-2 좌표, 자동차(430)에 대응하는 제 1-3 좌표 등과, 상기 제 1 이미지 내에서의 제 1 사용자와 제 2 사용자 간의 제 1-1 거리, 제 1 사용자와 자동차 간의 제 1-2 거리, 제 2 사용자와 자동차 간의 제 1-3 거리 등을 확인하고, 상기 20장의 이미지 중 제 2 이미지 내에서 인식된 제 1 사용자(410)에 대응하는 제 2-1 좌표, 제 2 사용자(420)에 대응하는 제 2-2 좌표, 자동차(430)에 대응하는 제 2-3 좌표 등과, 상기 제 2 이미지 내에서의 제 1 사용자와 제 2 사용자 간의 제 2-1 거리, 제 1 사용자와 자동차 간의 제 2-2 거리, 제 2 사용자와 자동차 간의 제 2-3 거리 등을 확인하고, 상기 20장의 이미지 중 제 3 이미지 내에서 인식된 제 1 사용자(410)에 대응하는 제 3-1 좌표, 제 2 사용자(420)에 대응하는 제 3-2 좌표, 자동차(430)에 대응하는 제 3-3 좌표 등과, 상기 제 3 이미지 내에서의 제 1 사용자와 제 2 사용자 간의 제 3-1 거리, 제 1 사용자와 자동차 간의 제 3-2 거리, 제 2 사용자와 자동차 간의 제 3-3 거리 등을 확인하는 과정 등을 통해 상기 20장의 이미지에 대해서, 각 이미지 내에서 인식된 객체의 좌표, 객체 간의 거리 등을 확인한다(S230).
이후, 상기 제어부(150)는 상기 복수의 이미지 중 연속된 2개의 이미지에서 객체 간의 거리 및 좌표 확인(또는 비교)을 통해 이미지 내에 포함된 객체 중에서 이동(또는 움직임)이 없는 적어도 하나의 객체와, 이동이 있는 적어도 하나의 객체를 각각 식별(또는 판별/확인)한다.
즉, 상기 제어부(150)는 상기 복수의 이미지 중에서 연속된 이미지를 대상으로 연속된 이미지 각각에서 확인된 객체 간의 거리 및 좌표를 비교하여, 연속된 이미지에 포함된 하나 이상의 객체 중에서 이동이 없는 적어도 하나의 객체 및 이동이 있는 적어도 하나의 객체를 각각 식별한다.
일 예로, 상기 도 4에 도시된 바와 같이, 상기 제어부(150)는 20장의 이미지 중에서 연속된 제 1 이미지와 제 2 이미지에 각각 포함된 제 1 사용자와 관련한 제 1-1 좌표 및 제 2-1 좌표와, 제 2 사용자와 관련한 제 1-2 좌표 및 제 2-2 좌표와, 자동차와 관련한 제 1-3 좌표 및 제 2-3 좌표 등과, 상기 제 1 사용자와 제 2 사용자 간의 거리와 관련한 제 1-1 거리 및 제 2-1 거리, 상기 제 1 사용자와 자동차 간의 거리와 관련한 제 1-2 거리 및 제 2-2 거리, 상기 제 2 사용자와 자동차 간의 거리와 관련한 제 1-3 거리 및 제 2-3 거리 등을 각각 비교하여, 상기 제 1 이미지와 제 2 이미지 중에서 고정된 위치를 유지하는 제 1 사용자(410), 자동차(430), 나무(440), 광고판(450), 건물(460) 등을 식별하고, 상기 제 1 이미지와 제 2 이미지 중에서 위치가 오른쪽으로 이동된 제 2 사용자(420)를 식별한다.
또한, 상기 제어부(150)는 20장의 이미지 중에서 연속된 제 2 이미지와 제 3 이미지에 각각 포함된 제 1 사용자와 관련한 제 2-1 좌표 및 제 3-1 좌표와, 제 2 사용자와 관련한 제 2-2 좌표 및 제 3-2 좌표와, 자동차와 관련한 제 2-3 좌표 및 제 3-3 좌표 등과, 상기 제 1 사용자와 제 2 사용자 간의 거리와 관련한 제 2-1 거리 및 제 3-1 거리와, 상기 제 1 사용자와 자동차 간의 거리와 관련한 제 2-2 거리 및 제 3-2 거리, 상기 제 2 사용자와 자동차 간의 거리와 관련한 제 2-3 거리 및 제 3-3 거리 등을 각각 비교하여, 상기 제 2 이미지와 제 3 이미지 중에서 고정된 위치를 유지하는 제 1 사용자(410), 자동차(430), 나무(440), 광고판(450), 건물(460) 등을 식별하고, 상기 제 2 이미지와 제 3 이미지 중에서 위치가 오른쪽으로 이동된 제 2 사용자(420)를 식별한다.
이와 같이, 상기 제어부(150)는 총 20장의 이미지에 대해서 연속된 2장의 이미지 혹은 복수의 이미지에 대한 개별 객체의 좌표와 객체 간의 거리 비교를 통해, 복수의 이미지에서 이동이 있는 객체와 이동이 없는 객체를 식별할 수 있다(S240).
이후, 상기 제어부(150)는 상기 기준 이미지에서 이동(또는 움직임)이 있는 적어도 하나의 객체와 관련한 제 1 영역(또는 좌표)을 확인(또는 설정)한다. 이때, 상기 이동이 있는 객체와 관련한 제 1 영역은 해당 이동이 있는 객체를 포함하는 사각형, 원형, 타원형, 삼각형 등의 형태일 수 있다.
또한, 상기 제어부(150)는 상기 복수의 이미지를 대상으로 이동(또는 움직임)이 있는 적어도 하나의 객체와 관련한 제 2 영역을 확인할 수도 있다. 이때, 상기 제 2 영역은 상기 복수의 이미지 중에서 상기 이동이 있는 적어도 하나의 객체를 각각 포함하는 개별 영역의 좌표를 모두 합쳐 하나로 만든 영역일 수 있다.
이와 같이, 상기 제어부(150)는 상기 기준 이미지를 근거로 이동이 있는 적어도 하나의 객체와 관련한 제 1 영역을 확인하거나 또는, 상기 복수의 이미지를 대상으로 이동이 있는 적어도 하나의 객체와 관련한 제 2 영역을 확인할 수 있다.
일 예로, 도 5에 도시된 바와 같이, 상기 제어부(150)는 상기 기준 이미지인 제 1 이미지에서 이동이 있는 제 2 사용자를 포함하는 제 1 영역(510)을 확인한다.
다른 일 예로, 도 6에 도시된 바와 같이, 상기 제어부(150)는 상기 20장의 이미지별로 상기 이동이 있는 제 2 사용자를 포함하는 제 1 서브 영역(601) 내지 제 20 서브 영역(620)을 각각 확인하고, 상기 확인된 제 1 서브 영역(601) 내지 제 20 서브 영역(620)을 모두 합쳐 하나의 영역인 제 2 영역(630)을 확인(또는 생성)한다(S250).
이후, 상기 제어부(150)는 상기 기준 이미지에서 상기 확인된 이동(또는 움직임)이 있는 적어도 하나의 객체와 관련한 제 1 영역을 삭제한다. 또한, 상기 제어부(150)는 상기 복수의 이미지 중 상기 기준 이미지를 제외한 나머지 이미지들에서 상기 제 1 영역 내에 존재하는 이동(또는 움직임)이 있는 적어도 하나의 객체와 관련한 영역(또는 서브 영역)을 각각 삭제한다.
또한, 상기 제어부(150)는 상기 복수의 이미지 중 상기 기준 이미지를 제외한 나머지 이미지들에서 상기 이동(또는 움직임)이 있는 적어도 하나의 객체와 관련한 영역을 각각 삭제할 수도 있다.
또한, 상기 제어부(150)는 상기 복수의 이미지별로 상기 복수의 이미지에서 상기 확인된 제 2 영역 내에 존재하는 이동(또는 움직임)이 있는 적어도 하나의 객체와 관련한 영역(또는 서브 영역)을 각각 삭제할 수도 있다.
일 예로, 상기 제어부(150)는 상기 도 5에 도시된 기준 이미지인 제 1 이미지에서 상기 확인된 이동이 있는 제 2 사용자를 포함하는 제 1 영역(510)을 도 7에 도시된 바와 같이 삭제(빗금으로 표시)(710)한다. 또한, 도 8에 도시된 바와 같이, 상기 제어부(150)는 상기 20장의 이미지 중에서 제 2 이미지 내지 제 20 이미지 각각에 대해서 상기 제 1 영역(510) 내에 존재하는 이동이 있는 제 2 사용자와 관련한 영역을 각각 삭제(예를 들어 도 8에서 빗금으로 표시된 영역)(810)한다. 이때, 상기 도 8에 도시된 바와 같이, 상기 제어부(150)는 제 2 이미지 내지 제 20 이미지 내의 제 1 영역(510) 중에서 이동이 있는 제 2 사용자와 관련한 영역(예를 들어 상기 도 8에서 빗금으로 표시된 영역)(810)만을 삭제하고, 제 2 사용자와 관련없는 영역(예를 들어 도 8에서 820, 830)은 그대로 유지한다.
다른 일 예로, 상기 제어부(150)는 상기 도 6에 도시된 20장의 이미지 각각에 대해서 상기 제 2 영역(630) 내에 존재하는 이동이 있는 제 2 사용자와 관련한 영역(601, 602, ... , 620)을 도 9에 도시된 바와 같이 각각 삭제(901, 902, ... , 920)한다. 이때, 상기 도 9에 도시된 바와 같이, 상기 제어부(150)는 상기 제 1 이미지 내지 제 20 이미지 내의 제 2 영역(630) 중에서 이동이 있는 제 2 사용자와 관련한 영역(예를 들어 상기 도 9에서 빗금으로 표시된 영역)(901, 902, .... , 920)만을 삭제하고, 제 2 사용자와 관련없는 영역(예를 들어 상기 도 9에서 930)은 그대로 유지한다(S260).
이후, 상기 제어부(150)는 상기 이동(또는 움직임)이 있는 적어도 하나의 객체와 관련한 영역이 삭제된 나머지 이미지들 내의 제 1 영역을 합성하여, 해당 제 1 영역 내에서 상기 이동이 있는 적어도 하나의 객체가 삭제된 상태의 영상(또는 이미지)에 대응하는 제 1 대체 이미지(또는 제 1 대체 영역)를 생성한다. 여기서, 상기 생성되는 제 1 대체 이미지는 상기 제 1 영역에 대응하는 좌표 정보를 포함한다. 또한, 상기 생성되는 제 1 대체 이미지의 크기 및 모양(또는 형태/형상)은 상기 제 1 영역의 크기 및 형상에 대응(또는 동일)한다. 이때, 상기 제어부(150)는 상기 나머지 이미지들 내의 제 1 영역들에 대해서 이미지 보정(또는 이미지 보간) 등을 수행할 수도 있다.
또한, 상기 제어부(150)는 상기 이동(또는 움직임)이 있는 적어도 하나의 객체와 관련한 영역이 삭제된 복수의 이미지 내의 제 2 영역을 합성하여, 해당 제 2 영역 내에서 상기 이동이 있는 적어도 하나의 객체가 삭제된 상태의 영상(또는 이미지)에 대응하는 제 2 대체 이미지(또는 제 2 대체 영역)를 생성할 수도 있다. 여기서, 상기 생성되는 제 2 대체 이미지는 상기 제 2 영역에 대응하는 좌표 정보를 포함한다. 또한, 상기 생성되는 제 2 대체 이미지의 크기 및 모양(또는 형태/형상)은 상기 제 2 영역의 크기 및 형상에 대응(또는 동일)한다.
일 예로, 상기 제어부(150)는 상기 도 8에 도시된 상기 이동이 있는 제 2 사용자와 관련한 영역을 각각 삭제한 제 2 이미지 내지 제 20 이미지에서 해당 제 2 사용자와 관련한 영역을 각각 삭제한 제 2 이미지 내지 제 20 이미지 내의 제 1 영역들(510)을 합성하여, 도 10에 도시된 바와 같이, 상기 제 1 영역의 크기 및 모양과 동일하며, 해당 제 1 영역 내에서 제 2 사용자가 삭제된 상태의 영상(또는 이미지)에 대응하는 제 1 대체 이미지(1010)를 생성한다.
다른 일 예로, 상기 제어부(150)는 상기 도 9에 도시된 상기 이동이 있는 제 2 사용자와 관련한 영역을 각각 삭제한 제 1 이미지 내지 제 20 이미지에서 해당 제 2 사용자와 관련한 영역을 각각 삭제한 제 1 이미지 내지 제 20 이미지 내의 제 2 영역들(630)을 합성하여, 도 11에 도시된 바와 같이, 상기 제 2 영역의 크기 및 모양과 동일하며, 해당 제 2 영역 내에서 제 2 사용자가 삭제된 상태의 영상(또는 이미지)에 대응하는 제 2 대체 이미지(1110)를 생성한다(S270).
이후, 상기 제어부(150)는 상기 기준 이미지 내의 삭제된 제 1 영역에 상기 생성된 제 1 대체 이미지(또는 제 1 대체 영역)를 합성(또는 추가)하여 새로운 이미지(또는 완성 이미지)를 생성한다. 여기서, 상기 제어부(150)는 상기 생성된 제 1 대체 이미지에 포함된 제 1 영역에 대응하는 좌표 정보를 근거로 상기 기준 이미지 내의 삭제된 제 1 영역에 상기 제 1 대체 이미지를 합성할 수 있다. 이때, 상기 생성된 새로운 이미지는 상기 기준 이미지에서 상기 이동이 있는 적어도 하나의 객체가 삭제되고, 상기 적어도 하나의 객체가 삭제된 영역에 상기 제 1 대체 이미지가 대체된 상태일 수 있다.
또한, 상기 제어부(150)는 상기 기준 이미지에서 상기 제 2 영역을 삭제하고, 상기 기준 이미지 내의 삭제된 제 2 영역에 상기 생성된 제 2 대체 이미지(또는 제 2 대체 영역)를 합성(또는 추가)하여 새로운 이미지(또는 완성 이미지)를 생성할 수도 있다. 여기서, 상기 제어부(150)는 상기 생성된 제 2 대체 이미지에 포함된 제 2 영역에 대응하는 좌표 정보를 근거로 상기 기준 이미지 내의 삭제된 제 2 영역에 상기 제 2 대체 이미지를 합성할 수 있다.
이때, 상기 복수의 이미지 중에서 상기 이동이 있는 적어도 하나의 객체가 포함되지 않은 이미지가 있는 경우, 상기 제어부(150)는 상기 이동이 있는 적어도 하나의 객체가 포함되지 않은 이미지 내의 제 1 영역(또는 제 2 영역)을 근거로 상기 제 1 대체 이미지(또는 제 2 대체 이미지)를 생성하고, 상기 기준 이미지에서 상기 제 1 영역(또는 제 2 영역)을 삭제하고, 상기 기준 이미지 내의 삭제된 제 1 영역(또는 제 2 영역)에 상기 생성된 제 1 대체 이미지(또는 제 2 대체 이미지)를 합성(또는 추가)하여 상기 새로운 이미지를 생성할 수도 있다.
일 예로, 상기 제어부(150)는 상기 도 7에 도시된 기준 이미지 내의 삭제된 제 1 영역(710)에 상기 도 10에서 생성된 제 1 대체 이미지(1010)를 합성하여 도 12에 도시된 바와 같이 제 1 새로운 이미지(1210)를 생성한다.
다른 일 예로, 상기 제어부(150)는 도 13에 도시된 바와 같이, 상기 기준 이미지에서 상기 제 2 사용자가 포함된 상기 제 2 영역을 삭제(빗금으로 표시)(1310)하고, 상기 기준 이미지 내의 삭제된 제 2 영역(1310)에 상기 도 11에서 생성된 제 2 대체 이미지(1110)를 합성하여 도 14에 도시된 바와 같이 제 2 새로운 이미지(1410)를 생성한다(S280).
이후, 상기 제어부(150)는 상기 생성된 새로운 이미지(또는 완성 이미지)를 상기 표시부(130)에 표시한다.
일 예로, 도 15에 도시된 바와 같이, 상기 제어부(150)는 상기 생성된 제 1 새로운 이미지(1500)를 상기 표시부(130)에 표시한다.
다른 일 예로, 도 16에 도시된 바와 같이, 상기 제어부(150)는 상기 생성된 제 2 새로운 이미지(1600)를 상기 표시부(130)에 표시한다(S290).
이후, 상기 표시부(130)의 일측에 표시되는 미리 설정된 편집 메뉴(또는 편집 항목)가 선택되는 경우, 상기 제어부(150)는 사용자 입력(또는 사용자 선택/제어)에 따라 상기 표시부(130)에 표시되는 새로운 이미지에 대해 편집 기능을 수행한다.
즉, 상기 표시부(130)의 일측에 표시되는 편집 메뉴(또는 편집 항목)가 선택되는 경우, 상기 제어부(150)는 편집 모드로 작동한다.
또한, 사용자 입력(또는 사용자 선택/제어)에 따라 상기 표시부(130)에 표시되는 새로운 이미지에 포함된 객체 중에서 어느 하나의 객체가 선택되면, 상기 제어부(150)는 상기 새로운 이미지에서 상기 선택된 어느 하나의 객체와 관련한 제 3 영역(또는 좌표)을 확인(또는 설정)한다. 여기서, 상기 선택된 어느 하나의 객체와 관련한 제 3 영역은 해당 어느 하나의 객체를 포함하는 사각형, 원형, 타원형, 삼각형 등의 형태일 수 있다.
이때, 상기 사용자 입력(또는 사용자 선택/제어)에 따라 상기 표시부(130)에 표시되는 새로운 이미지에 포함된 객체 중에서 어느 하나의 객체(또는 복수의 객체)에 대해 미리 설정된 이벤트가 발생하는 경우, 상기 제어부(150)는 상기 새로운 이미지에서 상기 선택된 어느 하나의 객체와 관련한 제 3 영역을 확인할 수도 있다. 여기서, 상기 이벤트는 상기 어느 하나의 객체가 선택된 후 상기 표시부(130)에 표시되는 미리 설정된 삭제 메뉴가 선택되는 경우, 상기 어느 하나의 객체에 대해 미리 설정된 시간 이상 터치(또는 선택) 상태가 유지되는 경우, 상기 어느 하나의 객체에 대해 상기 이미지 생성 장치(100)의 사용자에 의한 터치 제스처가 감지되는 경우 등을 포함한다. 여기서, 상기 이미지 생성 장치(100)의 사용자에 의한 터치 제스처는 탭, 터치&홀드, 더블 탭, 드래그, 플릭, 드래그 앤드 드롭, 핀치, 스와이프 등을 포함한다.
또한, 상기 제어부(150)는 상기 새로운 이미지에서 상기 확인된 어느 하나의 객체와 관련한 제 3 영역을 삭제한다. 또한, 상기 제어부(150)는 상기 제 3 영역이 삭제된 새로운 이미지 내의 제 3 영역을 상기 제 3 영역(또는 상기 어느 하나의 객체) 주변의 색상으로 대체하여 다른 새로운 이미지를 생성한다.
또한, 상기 제어부(150)는 상기 새로운 이미지에서 상기 어느 하나의 객체와 관련한 제 3 영역을 삭제한다. 또한, 상기 제어부(150)는 상기 복수의 이미지별로 상기 복수의 이미지에서 상기 확인된 제 3 영역 내에 존재하는 상기 어느 하나의 객체와 관련한 영역(또는 서브 영역)을 각각 삭제한다. 또한, 상기 제어부(150)는 상기 어느 하나의 객체와 관련한 영역이 삭제된 복수의 이미지 내의 제 3 영역을 합성하여, 해당 제 3 영역 내에서 상기 어느 하나의 객체가 삭제된 상태의 영상(또는 이미지)에 대응하는 제 3 대체 이미지(또는 제 3 대체 영역)를 생성한다. 여기서, 상기 생성되는 제 3 대체 이미지는 상기 제 3 영역에 대응하는 좌표 정보를 포함한다. 또한, 상기 생성되는 제 3 대체 이미지의 크기 및 모양은 상기 제 3 영역의 크기 및 모양과 동일할 수 있다. 또한, 상기 제어부(150)는 상기 새로운 이미지 내의 삭제된 제 3 영역에 상기 생성된 제 3 대체 이미지(또는 제 3 대체 영역)를 합성(또는 추가)하여 다른 새로운 이미지(또는 다른 완성 이미지)를 생성할 수도 있다. 여기서, 상기 제어부(150)는 상기 생성된 제 3 대체 이미지에 포함된 제 3 영역에 대응하는 좌표 정보를 근거로 상기 새로운 이미지 내의 삭제된 제 3 영역에 상기 제 3 대체 이미지를 합성할 수 있다. 이때, 상기 생성된 다른 새로운 이미지는 상기 새로운 이미지에서 사용자가 선택한 객체가 삭제되고, 상기 사용자가 선택한 객체가 삭제된 영역에 상기 제 3 대체 이미지가 대체된 상태일 수 있다.
또한, 상기 제어부(150)는 상기 새로운 이미지에서 상기 어느 하나의 객체와 관련한 제 3 영역을 삭제한다. 또한, 상기 제어부(150)는 상기 새로운 이미지 내의 삭제된 제 3 영역에 사용자 선택에 따른 상기 새로운 이미지 내의 특정 부분을 복사해서 붙여 넣어 상기 다른 새로운 이미지를 생성할 수도 있다.
또한, 상기 제어부(150)는 상기 새로운 이미지에서 상기 어느 하나의 객체와 관련한 제 3 영역을 삭제한다. 또한, 상기 제어부(150)는 상기 새로운 이미지 내의 삭제된 제 3 영역에 사용자 선택에 따른 다른 이미지(또는 이모티콘) 등을 붙여 넣어 상기 다른 새로운 이미지를 생성할 수도 있다.
또한, 상기 제어부(150)는 편집 기능 수행 결과(또는 편집 기능 수행에 따라 생성된 다른 새로운 이미지)를 상기 표시부(130)에 표시한다.
일 예로, 상기 도 15에 도시된 표시부(130)의 일측에 표시되는 편집 메뉴(1510)가 선택될 때, 상기 제어부(150)는 편집 모드로 작동하며, 상기 도 15에 도시된 표시부(130)에 표시되는 자동차(1540)가 선택되면, 도 17에 도시된 바와 같이, 상기 제 1 새로운 이미지(1500)에서 상기 선택된 자동차(1540)와 관련한 제 3 영역(1710)을 확인하고, 상기 확인된 자동차(1540)와 관련한 제 3 영역(1710)의 외곽 부분을 점선 등으로 표시한다.
또한, 상기 제어부(150)는 상기 제 1 새로운 이미지(1500)에서 상기 선택된 자동차(1540)와 관련한 제 3 영역(1710)을 도 18에 도시한 바와 같이 삭제(빗금으로 표시)(1810)한다.
또한, 상기 제어부(150)는 상기 제 1 새로운 이미지와 관련한 제 1 이미지 내지 제 20 이미지별로 상기 자동차와 관련한 제 3 영역을 각각 삭제한다.
또한, 상기 제어부(150)는 상기 자동차와 관련한 제 3 영역이 삭제된 제 1 이미지 내지 제 20 이미지 내의 제 3 영역을 합성하여, 해당 제 3 영역 내에서 상기 자동차가 삭제된 상태의 영상(또는 이미지)에 대응하는 제 3 대체 이미지(또는 제 3 대체 영역)를 생성한다.
또한, 상기 제어부(150)는 상기 제 1 새로운 이미지 내의 삭제된 제 3 영역에 상기 생성된 제 3 대체 이미지를 합성하여 제 3 새로운 이미지를 생성한다.
또한, 도 19에 도시된 바와 같이, 상기 제어부(150)는 상기 생성된 제 3 새로운 이미지(1900)를 상기 표시부(130)에 표시한다(S300).
본 발명의 실시예는 앞서 설명된 바와 같이, 동일 위치에서 촬영된 하나 이상의 객체를 포함하는 연속된 복수의 이미지에서 움직이는 객체를 자동으로 확인 및 제거하여, 움직임이 그대로 유지된 원하는 객체만을 포함하는 이미지를 생성하여, 관광지 등의 사람이 많은 장소에서 영상을 촬영하더라도 원하는 객체만이 포함된 영상을 획득할 수 있어 사용자의 관심을 높일 수 있다.
전술된 내용은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
100: 이미지 생성 장치 110: 카메라부
120: 저장부 130: 표시부
140: 음성 출력부 150: 제어부

Claims (8)

  1. 미리 설정된 시간 간격으로 연속 촬영 기능에 의해 순서가 정해진 복수의 원본 이미지를 획득하는 카메라부;
    상기 카메라부에 의해 획득된 복수의 원본 이미지에 대해 복사본인 복수의 이미지를 생성하고, 상기 복수의 이미지 내에 포함된 하나 이상의 객체를 각각 인식하고, 상기 복수의 이미지별로 각 이미지 내에서 인식된 객체 간의 거리 및 좌표를 각각 확인하고, 상기 복수의 이미지 중 연속된 2개의 이미지에서 객체 간의 거리 및 좌표 확인을 통해 이미지 내에 포함된 객체 중에서 이동이 없는 적어도 하나의 객체와, 이동이 있는 적어도 하나의 객체를 각각 식별하고, 상기 복수의 이미지 중에서 선택된 기준 이미지에서 상기 이동이 있는 적어도 하나의 객체와 관련한 제 1 영역을 확인하고, 상기 기준 이미지에서 상기 확인된 이동이 있는 적어도 하나의 객체와 관련한 제 1 영역을 삭제하고, 상기 복수의 이미지 중 상기 기준 이미지를 제외한 나머지 이미지들에서 상기 제 1 영역 내에 존재하는 상기 이동이 있는 적어도 하나의 객체와 관련한 영역을 각각 삭제하고, 상기 이동이 있는 적어도 하나의 객체와 관련한 영역이 삭제된 나머지 이미지들 내의 제 1 영역을 합성하여, 상기 제 1 영역 내에서 상기 이동이 있는 적어도 하나의 객체가 삭제된 상태의 영상에 대응하는 제 1 대체 이미지를 생성하고, 상기 기준 이미지 내의 삭제된 제 1 영역에 상기 생성된 제 1 대체 이미지를 합성하여 새로운 이미지를 생성하는 제어부; 및
    상기 생성된 새로운 이미지를 표시하는 표시부를 포함하는 이미지 생성 장치.
  2. 제 1 항에 있어서,
    상기 제 1 대체 이미지는,
    상기 제 1 영역에 대응하는 좌표 정보를 포함하며,
    상기 제 1 대체 이미지의 크기 및 모양은,
    상기 제 1 영역의 크기 및 형상에 대응하는 것을 특징으로 하는 이미지 생성 장치.
  3. 제 1 항에 있어서,
    상기 제어부는,
    상기 제 1 대체 이미지에 포함된 제 1 영역에 대응하는 좌표 정보를 근거로 상기 기준 이미지 내의 삭제된 제 1 영역에 상기 제 1 대체 이미지를 합성하여 상기 새로운 이미지를 생성하는 것을 특징으로 하는 이미지 생성 장치.
  4. 제 1 항에 있어서,
    상기 제어부는,
    상기 복수의 이미지를 대상으로 상기 이동이 있는 적어도 하나의 객체와 관련한 제 2 영역을 확인하고, 상기 복수의 이미지별로 상기 복수의 이미지에서 상기 확인된 제 2 영역 내에 존재하는 상기 이동이 있는 적어도 하나의 객체와 관련한 영역을 각각 삭제하고, 상기 이동이 있는 적어도 하나의 객체와 관련한 영역이 삭제된 복수의 이미지 내의 제 2 영역을 합성하여, 상기 제 2 영역 내에서 상기 이동이 있는 적어도 하나의 객체가 삭제된 상태의 영상에 대응하는 제 2 대체 이미지를 생성하고, 상기 기준 이미지에서 상기 제 2 영역을 삭제하고, 상기 기준 이미지 내의 삭제된 제 2 영역에 상기 생성된 제 2 대체 이미지를 합성하여 상기 새로운 이미지를 생성하는 것을 특징으로 하는 이미지 생성 장치.
  5. 카메라부에 의해, 미리 설정된 시간 간격으로 연속 촬영 기능에 의해 순서가 정해진 복수의 원본 이미지를 획득하는 단계;
    제어부에 의해, 상기 카메라부에 의해 획득된 복수의 원본 이미지에 대해 복사본인 복수의 이미지를 생성하는 단계;
    상기 제어부에 의해, 상기 복수의 이미지 내에 포함된 하나 이상의 객체를 각각 인식하는 단계;
    상기 제어부에 의해, 상기 복수의 이미지별로 각 이미지 내에서 인식된 객체 간의 거리 및 좌표를 각각 확인하는 단계;
    상기 제어부에 의해, 상기 복수의 이미지 중 연속된 2개의 이미지에서 객체 간의 거리 및 좌표 확인을 통해 이미지 내에 포함된 객체 중에서 이동이 없는 적어도 하나의 객체와, 이동이 있는 적어도 하나의 객체를 각각 식별하는 단계;
    상기 제어부에 의해, 상기 복수의 이미지를 대상으로 상기 이동이 있는 적어도 하나의 객체와 관련한 제 2 영역을 확인하는 단계;
    상기 제어부에 의해, 상기 복수의 이미지별로 상기 복수의 이미지에서 상기 확인된 제 2 영역 내에 존재하는 상기 이동이 있는 적어도 하나의 객체와 관련한 영역을 각각 삭제하는 단계;
    상기 제어부에 의해, 상기 이동이 있는 적어도 하나의 객체와 관련한 영역이 삭제된 복수의 이미지 내의 제 2 영역을 합성하여, 상기 제 2 영역 내에서 상기 이동이 있는 적어도 하나의 객체가 삭제된 상태의 영상에 대응하는 제 2 대체 이미지를 생성하는 단계;
    상기 제어부에 의해, 상기 복수의 이미지 중에서 선택된 기준 이미지에서 상기 제 2 영역을 삭제하고, 상기 기준 이미지 내의 삭제된 제 2 영역에 상기 생성된 제 2 대체 이미지를 합성하여 새로운 이미지를 생성하는 단계; 및
    상기 제어부에 의해, 상기 생성된 새로운 이미지를 표시부에 표시하도록 제어하는 단계를 포함하는 이미지 생성 방법.
  6. 제 5 항에 있어서,
    상기 제어부에 의해, 상기 기준 이미지에서 상기 이동이 있는 적어도 하나의 객체와 관련한 제 1 영역을 확인하는 단계;
    상기 제어부에 의해, 상기 기준 이미지에서 상기 확인된 이동이 있는 적어도 하나의 객체와 관련한 제 1 영역을 삭제하고, 상기 복수의 이미지 중 상기 기준 이미지를 제외한 나머지 이미지들에서 상기 제 1 영역 내에 존재하는 상기 이동이 있는 적어도 하나의 객체와 관련한 영역을 각각 삭제하는 단계;
    상기 제어부에 의해, 상기 이동이 있는 적어도 하나의 객체와 관련한 영역이 삭제된 나머지 이미지들 내의 제 1 영역을 합성하여, 상기 제 1 영역 내에서 상기 이동이 있는 적어도 하나의 객체가 삭제된 상태의 영상에 대응하는 제 1 대체 이미지를 생성하는 단계; 및
    상기 제어부에 의해, 상기 기준 이미지 내의 삭제된 제 1 영역에 상기 생성된 제 1 대체 이미지를 합성하여 상기 새로운 이미지를 생성하는 단계를 더 포함하는 것을 특징으로 하는 이미지 생성 방법.
  7. 제 5 항에 있어서,
    상기 표시부의 일측에 표시되는 미리 설정된 편집 메뉴가 선택될 때, 상기 제어부에 의해, 사용자 입력에 따라 상기 표시부에 표시되는 새로운 이미지에 대해 편집 기능을 수행하는 단계; 및
    상기 표시부에 의해, 편집 기능 수행 결과를 표시하는 단계를 더 포함하는 것을 특징으로 하는 이미지 생성 방법.
  8. 제 7 항에 있어서,
    상기 새로운 이미지에 대해 편집 기능을 수행하는 단계는,
    사용자 입력에 따라 상기 표시부에 표시되는 새로운 이미지에 포함된 객체 중에서 어느 하나의 객체가 선택될 때, 상기 제어부에 의해, 상기 새로운 이미지에서 상기 선택된 어느 하나의 객체와 관련한 제 3 영역을 확인하는 과정;
    상기 제어부에 의해, 상기 새로운 이미지에서 상기 확인된 어느 하나의 객체와 관련한 제 3 영역을 삭제하는 과정;
    상기 제어부에 의해, 상기 제 3 영역이 삭제된 새로운 이미지 내의 제 3 영역을 상기 제 3 영역 주변의 색상으로 대체하여 다른 새로운 이미지를 생성하는 과정;
    상기 제어부에 의해, 상기 복수의 이미지별로 상기 복수의 이미지에서 상기 확인된 제 3 영역 내에 존재하는 상기 어느 하나의 객체와 관련한 영역을 각각 삭제하고, 상기 어느 하나의 객체와 관련한 영역이 삭제된 복수의 이미지 내의 제 3 영역을 합성하여, 상기 제 3 영역 내에서 상기 어느 하나의 객체가 삭제된 상태의 영상에 대응하는 제 3 대체 이미지를 생성하고, 상기 새로운 이미지 내의 삭제된 제 3 영역에 상기 생성된 제 3 대체 이미지를 합성하여 상기 다른 새로운 이미지를 생성하는 과정;
    상기 제어부에 의해, 상기 새로운 이미지 내의 삭제된 제 3 영역에 사용자 선택에 따른 상기 새로운 이미지 내의 특정 부분을 복사해서 붙여 넣어 상기 다른 새로운 이미지를 생성하는 과정; 및
    상기 제어부에 의해, 상기 새로운 이미지 내의 삭제된 제 3 영역에 사용자 선택에 따른 다른 이미지를 붙여 넣어 상기 다른 새로운 이미지를 생성하는 과정 중 적어도 하나의 과정을 포함하는 것을 특징으로 하는 이미지 생성 방법.
KR1020180107839A 2018-09-10 2018-09-10 이미지 생성 장치 및 그 방법 KR102061867B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020180107839A KR102061867B1 (ko) 2018-09-10 2018-09-10 이미지 생성 장치 및 그 방법
PCT/KR2019/009869 WO2020054978A1 (ko) 2018-09-10 2019-08-07 이미지 생성 장치 및 그 방법
US17/273,435 US20210192751A1 (en) 2018-09-10 2019-08-07 Device and method for generating image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180107839A KR102061867B1 (ko) 2018-09-10 2018-09-10 이미지 생성 장치 및 그 방법

Publications (1)

Publication Number Publication Date
KR102061867B1 true KR102061867B1 (ko) 2020-01-02

Family

ID=69154977

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180107839A KR102061867B1 (ko) 2018-09-10 2018-09-10 이미지 생성 장치 및 그 방법

Country Status (3)

Country Link
US (1) US20210192751A1 (ko)
KR (1) KR102061867B1 (ko)
WO (1) WO2020054978A1 (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113014799A (zh) * 2021-01-28 2021-06-22 维沃移动通信有限公司 图像显示方法、装置和电子设备
WO2022019661A1 (ko) * 2020-07-24 2022-01-27 삼성전자 주식회사 영상 통화 수행 방법, 그 방법을 수행하는 디스플레이 기기, 및 그 방법을 수행하는 프로그램이 저장된 컴퓨터 판독 가능 저장 매체
WO2022244972A1 (ko) * 2021-05-18 2022-11-24 삼성전자 주식회사 전자 장치 및 이를 이용한 뎁스 정보에 기반한 이미지 처리 방법
KR102669839B1 (ko) * 2022-12-30 2024-05-28 주식회사 쓰리아이 3차원 가상모델 생성을 위한 전처리 방법 및 그를 위한 컴퓨팅 장치
KR20240094596A (ko) 2022-12-16 2024-06-25 현대오토에버 주식회사 이미지 처리 방법 및 그 시스템

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020227997A1 (zh) * 2019-05-15 2020-11-19 深圳市大疆创新科技有限公司 拍摄装置、无人飞行器、控制终端和拍摄方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005109647A (ja) 2003-09-29 2005-04-21 Casio Comput Co Ltd 画像処理装置及びプログラム
US20050243192A1 (en) 2004-04-28 2005-11-03 International Business Machines Corporation Method for removal of moving objects from a video stream
US20060039584A1 (en) 2004-08-23 2006-02-23 Denso Corporation Motion detection method and device, program and vehicle surveillance system
JP2011041041A (ja) 2009-08-12 2011-02-24 Casio Computer Co Ltd 撮像装置、撮像方法及びプログラム
US20130325311A1 (en) * 2012-05-31 2013-12-05 Hyundai Motor Company Apparatus and method for detecting moving-object around vehicle
JP2016082477A (ja) 2014-10-20 2016-05-16 キヤノン株式会社 画像処理装置、その制御方法、および制御プログラム、並びに撮像装置

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012005387A1 (ko) * 2010-07-05 2012-01-12 주식회사 비즈텍 다중 카메라와 물체 추적 알고리즘을 이용한 광범위한 지역에서의 물체 이동 감시 방법 및 그 시스템
US9538081B1 (en) * 2013-03-14 2017-01-03 Amazon Technologies, Inc. Depth-based image stabilization
KR102090105B1 (ko) * 2013-07-16 2020-03-17 삼성전자 주식회사 카메라를 구비하는 장치의 이미지 처리장치 및 방법
KR101539944B1 (ko) * 2014-02-25 2015-07-29 한국산업기술대학교산학협력단 객체 식별 방법
KR102356448B1 (ko) * 2014-05-05 2022-01-27 삼성전자주식회사 이미지 합성 방법 및 그 전자 장치
KR20160057867A (ko) * 2014-11-14 2016-05-24 삼성전자주식회사 디스플레이 장치 및 그에 의한 이미지 처리 방법
US9591237B2 (en) * 2015-04-10 2017-03-07 Qualcomm Incorporated Automated generation of panning shots
JP6594180B2 (ja) * 2015-11-25 2019-10-23 キヤノン株式会社 撮像装置、撮像装置の制御方法及びプログラム
US9707961B1 (en) * 2016-01-29 2017-07-18 Ford Global Technologies, Llc Tracking objects within a dynamic environment for improved localization
JP6663491B2 (ja) * 2016-06-08 2020-03-11 シャープ株式会社 画像処理装置、画像処理プログラム、および記録媒体
JP2018148272A (ja) * 2017-03-01 2018-09-20 オリンパス株式会社 撮像装置、画像処理装置、撮像方法およびプログラム
US10284789B2 (en) * 2017-09-15 2019-05-07 Sony Corporation Dynamic generation of image of a scene based on removal of undesired object present in the scene
US10498963B1 (en) * 2017-12-04 2019-12-03 Amazon Technologies, Inc. Motion extracted high dynamic range images
US10482359B2 (en) * 2018-01-18 2019-11-19 Google Llc Systems and methods for removing non-stationary objects from imagery
US10999534B2 (en) * 2019-03-29 2021-05-04 Cisco Technology, Inc. Optimized video review using motion recap images

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005109647A (ja) 2003-09-29 2005-04-21 Casio Comput Co Ltd 画像処理装置及びプログラム
US20050243192A1 (en) 2004-04-28 2005-11-03 International Business Machines Corporation Method for removal of moving objects from a video stream
US20060039584A1 (en) 2004-08-23 2006-02-23 Denso Corporation Motion detection method and device, program and vehicle surveillance system
JP2011041041A (ja) 2009-08-12 2011-02-24 Casio Computer Co Ltd 撮像装置、撮像方法及びプログラム
US20130325311A1 (en) * 2012-05-31 2013-12-05 Hyundai Motor Company Apparatus and method for detecting moving-object around vehicle
JP2016082477A (ja) 2014-10-20 2016-05-16 キヤノン株式会社 画像処理装置、その制御方法、および制御プログラム、並びに撮像装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022019661A1 (ko) * 2020-07-24 2022-01-27 삼성전자 주식회사 영상 통화 수행 방법, 그 방법을 수행하는 디스플레이 기기, 및 그 방법을 수행하는 프로그램이 저장된 컴퓨터 판독 가능 저장 매체
CN113014799A (zh) * 2021-01-28 2021-06-22 维沃移动通信有限公司 图像显示方法、装置和电子设备
WO2022244972A1 (ko) * 2021-05-18 2022-11-24 삼성전자 주식회사 전자 장치 및 이를 이용한 뎁스 정보에 기반한 이미지 처리 방법
KR20240094596A (ko) 2022-12-16 2024-06-25 현대오토에버 주식회사 이미지 처리 방법 및 그 시스템
KR102669839B1 (ko) * 2022-12-30 2024-05-28 주식회사 쓰리아이 3차원 가상모델 생성을 위한 전처리 방법 및 그를 위한 컴퓨팅 장치

Also Published As

Publication number Publication date
WO2020054978A1 (ko) 2020-03-19
US20210192751A1 (en) 2021-06-24

Similar Documents

Publication Publication Date Title
KR102061867B1 (ko) 이미지 생성 장치 및 그 방법
US9324305B2 (en) Method of synthesizing images photographed by portable terminal, machine-readable storage medium, and portable terminal
EP2701152B1 (en) Media object browsing in a collaborative window, mobile client editing, augmented reality rendering.
EP3091426B1 (en) User terminal device providing user interaction and method therefor
KR101870371B1 (ko) 사진 및 문서 통합
KR102022444B1 (ko) 복수의 카메라를 구비한 휴대 단말에서 유효한 영상들을 합성하기 위한 방법 및 이를 위한 휴대 단말
CN110100251B (zh) 用于处理文档的设备、方法和计算机可读存储介质
KR20180095331A (ko) 이동단말기 및 그 제어 방법
KR20180048142A (ko) 이동 단말기 및 그 제어방법
EP4246287A1 (en) Method and system for displaying virtual prop in real environment image, and storage medium
KR20160090186A (ko) 이동단말기 및 그 제어방법
US11880999B2 (en) Personalized scene image processing method, apparatus and storage medium
KR20190008610A (ko) 이동 단말기 및 그 제어 방법
US9509733B2 (en) Program, communication apparatus and control method
KR20180131908A (ko) 이동 단말기 및 그것의 동작방법
KR20150144665A (ko) 이동 단말기
CN113806054A (zh) 任务处理方法及装置、电子设备和存储介质
CN112230914A (zh) 小程序的制作方法、装置、终端及存储介质
EP4343580A1 (en) Media file processing method and apparatus, device, readable storage medium, and product
CN112764845A (zh) 视频处理方法及装置、电子设备和计算机可读存储介质
US20150261385A1 (en) Picture signal output apparatus, picture signal output method, program, and display system
JP6790630B2 (ja) ドキュメント共有方法、プログラム及びドキュメント共有装置
KR102171327B1 (ko) 번역 서비스 제공 방법 및 이를 이용하는 단말장치
JP2023510443A (ja) ラベリング方法及び装置、電子機器並びに記憶媒体
JP7143642B2 (ja) 共有端末、筆記方法、プログラム

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant